CN102348063A - 相机设备、相机系统、控制设备和程序 - Google Patents

Abstract

本发明涉及相机设备、相机系统、控制设备和程序。该相机设备，包括：第一信息获取部分，其获取用于控制在由相机部分拍摄的整体图像内指定的第一区域的第一信息；第二信息获取部分，其获取用于控制在整体图像内指定的第二区域的第二信息；控制部分，其基于能从多个设备输入的第一信息中的、从具有第一区域的控制权的设备输入的第一信息来控制相机部分的机械移动；和图像处理部分，其从相机部分拍摄的整体图像获取第一区域的图像，并且基于能从多个设备输入的第二信息中的、从具有第二区域的控制权的设备输入的第二信息，来从第一区域提取第二区域的图像。

Description

相机设备、相机系统、控制设备和程序

技术领域

本公开涉及相机设备、相机系统、控制设备和程序。

背景技术

在相关技术中，已知这样的相机控制系统，其中可由相机拍摄的范围显示为整体图像，并且相机的成像方向由在整体图像上执行的操作来控制。该相机控制系统例如在日本专利申请公开No.JP 2005-354748A中描述。此外，已知这样的相机控制系统，其中对应于预置部分的部分显示为缩略图，并且当选择希望的缩略图之一时，相机的成像方向被调节到对应的预置部分。

发明内容

然而，在日本专利申请公开No.JP 2005-354748A中公开的技术中，因为通过在相机终端设备一侧执行机械控制(例如摇动(pan)、倾斜(tilt)和缩放(zoom))来获取图像，所以设想到对于可被获取的图像范围存在限制。此外，当设想执行数字摇动、倾斜和缩放操作等来从整体图像数字地提取希望的区域时，难于以相互有效的方式执行数字摇动、倾斜和缩放操作以及机械摇动、倾斜和缩放操作。

根据上面所述，希望提供新颖和改进的相机设备、相机系统、控制设备和程序，它们能够容易和有效地执行数字摇动、倾斜和缩放操作以及机械摇动、倾斜和缩放操作。

根据本公开的一个实施例，提供一种相机设备，包括：第一信息获取部分，该第一信息获取部分获取第一信息，第一信息用于控制在由相机部分拍摄的整体图像内指定的第一区域；第二信息获取部分，该第二信息获取部分获取第二信息，第二信息用于控制在整体图像内指定的第二区域；控制部分，该控制部分基于能从多个设备输入的第一信息中的、从具有第一区域的控制权的设备输入的第一信息，来控制相机部分的机械移动；和图像处理部分，该图像处理部分从由相机部分拍摄的整体图像获取第一区域的图像，并且，基于能从多个设备输入的第二信息中的、从具有第二区域的控制权的设备输入的第二信息，来从第一区域内提取第二区域的图像。

此外，该相机设备还可以包括：请求信息获取部分，该请求信息获取部分获取与第一区域和第二区域之一有关的控制权的请求信息；和控制权分配部分，该控制权分配部分在控制权未分配到第一区域和第二区域之一时基于请求信息来分配控制权。

此外，当与具有第一区域的控制权的设备不同的另一设备具有第二区域的控制权时，控制部分在第一区域被包括在第二区域中的范围中控制相机部分的机械移动，第二区域受另一设备的控制权管制。

此外，当与具有第二区域的控制权的设备不同的另一设备具有第一区域的控制权时，图像处理部分从由另一设备的控制所定义的第一区域内提取第二区域的图像。

根据本公开的另一实施例，提供一种相机系统，其中拍摄图像的相机终端设备和控制相机终端设备的客户终端设备通过网络连接。该相机终端设备可以包括：第一信息获取部分，该第一信息获取部分获取第一信息，第一信息用于控制在由相机部分拍摄的整体图像内指定的第一区域；第二信息获取部分，该第二信息获取部分获取第二信息，第二信息用于控制在整体图像内指定的第二区域；控制部分，该控制部分基于能从多个设备输入的第一信息中的、从具有第一区域的控制权的设备输入的第一信息来控制相机部分的机械移动；和图像处理部分，该图像处理部分从由相机部分拍摄的整体图像获取第一区域的图像，并且，基于能从多个设备输入的第二信息中的、从具有第二区域的控制权的设备输入的第二信息，从第一区域内提取第二区域的图像。

根据本公开的另一实施例，提供一种控制设备，包括：第一信息获取部分，该第一信息获取部分获取第一信息，第一信息用于控制在由相机终端设备拍摄的整体图像内指定的第一区域；第二信息获取部分，该第二信息获取部分获取第二信息，第二信息用于控制在整体图像内指定的第二区域；发送部分，该发送部分，在控制第一区域的控制权被分配了时，基于第一信息来向相机终端设备发送用于控制相机部分的机械移动的控制信息；和图像处理部分，该图像处理部分，在控制第二区域的控制权被分配了时，从由相机部分拍摄的整体图像获取第一区域的图像并且基于第二信息来从第一区域内提取第二区域的图像。

此外，当与具有第一区域的控制权的设备不同的另一设备具有第二区域的控制权时，发送部分可以发送用于在第一区域被包括在第二区域中的范围中控制相机部分的机械移动的控制信息，第二区域受另一个设备的控制权的管制。

此外，当与具有第二区域的控制权的设备不同的另一设备具有第一区域的控制权时，图像处理部分可以从由另一设备的控制所定义的第一区域内提取第二区域的图像。

此外，该控制设备还可以包括显示部分，该显示部分既显示整体图像也显示对应于第二区域的图像的局部图像，并且还在整体图像内显示与第一区域和第二区域相对应的范围。

此外，其中基于第一区域的控制权和第二区域的控制权之一，显示部分可以在整体图像内显示一范围，在范围中，第一区域和第二区域之一是可控制的。

根据本公开的另一实施例，提供一种程序，该程序包括的指令使得计算机用作：获取第一信息的单元，第一信息用于控制在由相机部分拍摄的整体图像内指定的第一区域；获取第二信息的单元，第二信息用于控制在整体图像内指定的第二区域；基于能从多个设备输入的第一信息中的、从具有第一区域的控制权的设备输入的第一信息来控制相机部分的机械移动的单元；和从由相机部分拍摄的整体图像获取第一区域的图像，并且，基于能从多个设备输入的第二信息中的、基于从具有第二区域的控制权的设备输入的第二信息，从第一区域内提取第二区域的图像的单元。

根据本公开的另一实施例，提供一种可在包括相机设备和控制相机设备的拍摄方向的多个控制设备的系统中使用的控制设备，该控制设备包括：显示控制部分，该显示控制部分执行控制以使得整体图像区域被显示，整体图像区域显示由相机设备拍摄的整体图像；和相机控制部分，该相机控制部分控制相机设备以使得相机设备拍摄对应于在整体图像上指定的第一区域的方向。显示控制部分可以显示局部图像区域，在局部图像区域中通过放大第一区域中包括的第二区域来显示图像，并且显示控制部分执行控制以使得第一区域和第二区域在整体图像上以不同的显示状态被显示。当具有第一控制权时，可以允许第一区域被改变，并且当具有第二控制权时，可以允许第二区域被改变。

显示控制部分可以执行控制，以使得当第二区域处于第一区域的范围内时，允许第二区域被改变。

此外，当第二区域被操作和改变时，当尝试改变第二区域使得第二区域超过第一区域的范围时，显示控制部分还可以改变第一区域，并且执行控制以使得第二区域包括在第一区域的范围内，并且相机控制部分可以执行控制，以使得对应于改变后的第一区域的方向被拍摄。

此外，多个控制设备可以作为具有第二控制权的控制设备同时存在。

根据本公开，可以容易和有效地执行数字摇动、倾斜和缩放操作以及机械摇动、倾斜和缩放操作。

附图说明

图1是示出根据本公开实施例的成像系统的总体配置的示意图；

图2是示出成像系统执行的处理的示意图；

图3是示出其中多个客户终端连接到网络的状态的示意图；

图4是示出每一个客户终端的显示屏的示意图；

图5是示出在每一个客户终端上显示的整体图像和局部图像的示意图；

图6是示出图像区域R1和图像区域R2的操作方法1的示意图；

图7是示出图像区域R1和图像区域R2的操作方法2的示意图；

图8是示意性示出相机终端设备仅具有机械缩放功能的情况下的配置的图形；

图9是示出每一个客户终端设备上的整体图像的示意图；

图10A是示出根据第二实施例的图像区域R1和图像区域R2的操作方法1的示意图；

图10B是示出根据第二实施例的图像区域R1和图像区域R2的操作方法1的示意图；

图10C是示出根据第二实施例的图像区域R1和图像区域R2的操作方法1的示意图；

图10D是示出根据第二实施例的图像区域R1和图像区域R2的操作方法1的示意图；

图10E是示出根据第二实施例的图像区域R1和图像区域R2的操作方法1的示意图；

图11是示出根据第二实施例的图像区域R1和图像区域R2的操作方法2的示意图；

图12是示出一个客户终端具有对图像区域R1和图像区域R2二者的控制权，并且另一个客户终端没有控制权的情况的示意图；

图13是示出一个客户终端具有对图像区域R1和图像区域R2二者的控制权，并且另一个客户终端具有对数字PTZ的控制权的情况的示意图；

图14是示出客户终端具有对机械PTZ的控制权，并且另一个客户终端具有对数字PTZ的控制权的情况的示意图；

图15是示出客户终端具有对数字PTZ的控制权，并且另一个客户终端具有对机械PTZ的控制权的情况的示意图；

图16是示出对应于图像区域R2的两个不同视频(视频1和视频2)被发送到每一个客户终端的状态的示意图。

具体实施方式

以下，将参考附图详细描述本公开的优选实施例。注意，在本说明书和附图中，具有基本相同的功能和结构的结构元素用相同的标号来表示，并且省略了对这些结构元素的重复说明。

注意，将按下面所示的顺序来给出描述。

1.第一实施例

(1)成像系统的配置示例

(2)本实施例的处理

(3)操作方法1

(4)操作方法2

2.第二实施例

(1)第二实施例的概述

(2)操作方法1

(3)操作方法2

3.第三实施例

(1)当被分配了控制权时的显示和操作

(2)分配控制权的示例

(3)与分配控制权有关的处理

1.第一实施例

(1)成像系统的配置示例

图1是示出根据本公开实施例的成像系统500的总体配置的示意图。成像系统500包括相机终端设备(IP相机)100和多个客户终端200。相机终端设备100和每一个客户终端200经由网络300(例如因特网)连接。另外，服务器400连接到网络300，并且服务器400经由网络300连接到相机终端设备100和多个客户终端200。

相机终端设备100例如为放置在室内或户外的监视相机，并且相机终端设备100配备有相机部分102，该相机部分102包括形成对象的图像的透镜光学系统和光电地转换所形成的对象图像的成像元件。相机终端设备100还配备有图像处理部分104、发送/接收部分106、控制部分108、设置部分110和定时器112。

客户终端200例如为个人计算机(PC)这样的设备。客户终端200配备有发送/接收部分202、控制部分204、输入部分206和显示部分208。注意，图1中所示的相机终端设备100和客户终端200的每一个功能块由硬件(电路)或算术处理单元(例如中央处理单元(CPU))和使得算术处理单元工作的软件(程序)形成。在后面的情况下，程序可被存储在相机终端设备100或客户终端200中提供的存储器中，或者程序可被存储在记录介质中，例如从外部插入的外部存储器。服务器400配备有类似于相机终端设备100的图像处理功能，并且服务器400可记录由相机终端设备100获取的图像。服务器400也可配备客户终端200的功能。此外，服务器400的功能可与相机终端设备100集成。

图2是示出成像系统500执行的处理的示意图。这里，作为示例，相机终端设备100放置在室内会议室中。如图2中所示，相机终端设备100的相机部分102拍摄会议室内的相对宽的范围作为整体图像。

整体图像例如被发送到客户终端200作为静止图像数据，但是本公开不限于该示例。可将实况视频发送到客户终端200，并且接收实况视频的每一个客户终端200可提取静止图像。用户可使用客户终端200来指定整体图像内的希望范围。例如，当图2中所示的区域A由客户终端200指定时，相机终端设备100编码区域A的实况视频数据并且将经编码的数据发送到客户终端200。

更具体地，从相机终端设备100预先被发送的静止图像的整体图像(在该情况下不是实况视频)通过控制部分204执行的处理显示在客户终端200的显示部分208上。当用户操作客户终端200的输入部分206并且从整体图像中指定所选择区域A时，区域A的信息被发送到控制部分204。基于控制部分204的命令，客户终端200的发送/接收部分202将区域A的信息发送到相机终端设备100。此外，基于控制部分204的命令，区域A(对应于将在随后说明的图像区域R2)的信息显示在显示部分208上的整体图像内。

当相机终端设备100的发送/接收部分106经由网络300接收与区域A有关的信息(在权利要求中被称作为第二信息)时，它将信息发送到控制部分108。控制部分108向图像处理部分104发送命令以便仅从图像部分102发送的图像(实况视频)提取区域A部分并且对其执行编码处理。发送/接收部分106从图像处理部分104接收经编码区域A的实况视频并且经由网络300将实况视频发送到客户终端200。

当客户终端200的发送/接收部分202从相机终端设备100接收区域A的实况视频时，它将数据发送到图像处理部分203。在图像处理部分203中，区域A的信息被解码并且控制部分204进行处理以执行在显示部分208上的显示。注意，在该情况下，区域A对应于将在随后说明的图像区域R2。

以该方式，用户操作客户终端200并且在整体图像中指定所选择区域，并且因此可数字地执行等同于执行机械摇动、倾斜和缩放(PTZ)操作的操作。因此，可获取所选择区域的视频。

特别是，近来，网络300的容量已经变大，并且因此可以发送具有更高像素数目的高清视频。然而，当整体图像的所有数据作为实况视频被发送时，数据量是巨大的。通过仅传送在用户一侧指定的区域的数据，如同本实施例中那样，可以查看所选择区域的高清视频。

应当注意，可在客户终端200一侧执行使用图像处理对区域A的提取。在该情况下，在客户终端200中提供图像处理部分203(对应于图像处理部分104)，并且相机终端设备100编码从相机部分102发送的图像(实况视频)并且将经编码数据从发送/接收部分106发送到网络300。当用户操作客户终端200的输入部分206并且在整体图像中指定所选择区域A时，控制部分204指示图像处理部分203提取区域A。当客户终端200的发送/接收部分202接收实况视频数据时，它将实况视频数据发送到图像处理部分203并且由图像处理部分203提取区域A。所提取的区域A的图像从控制部分204发送到显示部分208并且在显示部分208上显示。

此外，在本实施例的系统中，除了数字摇动、倾斜和缩放操作之外，可执行机械摇动、倾斜和缩放操作。如图2中所示，相机终端设备100配备有可在摇动和倾斜方向上改变成像光学系统的光轴方向的机械机构。另外，相机终端设备100配备有可在光轴方向上移动成像光学系统的缩放光学系统的机械机构。因此，机械机构被包括在图2中所示的相机部分102中，并且由驱动机构(例如发动机和齿轮)形成。机械摇动、倾斜和缩放操作可由根据来自控制部分108的命令驱动这些机械机构的相机终端设备100的相机部分102来执行。

类似于上述的数字摇动、倾斜和缩放操作，可通过在客户终端200上指定整体图像中的区域来从客户终端200一侧操作机械摇动、倾斜和缩放操作。

更具体地，当用户操作客户终端200的输入部分206并且在整体图像中指定所选择区域A时，客户终端200的发送/接收部分202基于来自控制部分204的命令将区域A的信息(第一信息)发送到相机终端设备100。此外，基于来自控制部分204的命令，区域A(对应于要在随后说明的图像区域R1)的信息显示在显示部分208上的整体图像内。

当相机终端设备100的发送/接收部分106经由网络300接收与区域A有关的信息(第一信息)时，它将信息发送到控制部分108。基于区域A的信息，控制部分108向相机部分102发送用于相机部分102的机械摇动、倾斜和缩放位置的指令。在此时，控制部分108可根据区域A在整体图像内的位置并且根据区域A的大小发送用于摇动、倾斜和缩放位置的指令。相机部分102基于区域A的信息控制机械摇动、倾斜和缩放位置。注意，在该情况下，区域A对应于将在随后说明的图像区域R1。

图3是示出其中多个客户终端200连接到网络300的状态的示意图。图3中所示的每一个客户终端200可通过在整体图像中指定所选择区域来执行机械PTZ操作和数字PTZ操作两者。应当注意，在该情况下，设想来自各个客户终端200的指令冲突，并且将在第三实施例中更详细地描述该情况。

(2)本实施例的处理

接下来，将说明根据本实施例的处理。图4是示出每一个客户终端200的显示屏的示意图。上述的整体图像和局部图像都显示在每一个客户终端200上。在图4中，共同的整体图像显示在所有的客户终端200上，并且单独的局部图像按每个客户终端200显示。

整体图像是由相机终端设备100预先拍摄的宽范围图像，并且例如为所拍摄的相机终端设备100可以在其上进行机械摇动、倾斜和缩放操作的最宽范围的全景图像。例如可通过执行相机终端设备100的机械PTZ操作来拍摄具有不同光轴方向的多个图像并且通过连接多个图像来获取整体图像。

另一方面，每一个局部图像是由每一个客户终端200的用户在整体图像中所指定的特定范围的图像，并且可以按每一个客户终端200来选择不同的范围。图4是示意性示出在对应于每一个客户终端200的客户A、B和C的终端中的每一个上显示整体图像和局部图像的状态的图形。在图4的示例中，对应于整体图像的区域A的局部图像显示在客户A的终端上，并且对应于整体图像的区域B的局部图像显示在客户B的终端上。类似于客户A，对应于整体图像的区域A的局部图像显示在客户C的终端上。

整体图像和局部图像二者都显示在每一个客户终端的显示部分208上。在图4所示的示例中，整体图像和客户A的局部图像显示在客户A的终端上，并且不显示其它客户的局部图像。然而，在管理员等的情况下，可在客户A的终端上显示其它客户的局部图像。此外，如将在随后描述，可以在客户A的终端上显示的整体图像内显示对应于其它客户的局部图像的区域。以该方式，可在客户A的终端上确定其它客户的局部图像的区域。

图5是示出在每一个客户终端200上显示的整体图像和局部图像的示意图。如图5中所示，机械PTZ定义的图像区域R1和数字PTZ定义的图像区域R2都显示在每一个客户终端200上显示的整体图像上。机械PTZ定义的图像区域R1表示由相机终端设备100的机械移动所指定的图像区域，并且表示在不执行数字PTZ操作的状态下的图像区域。换言之，机械PTZ定义的图像区域R1对应于当根据相机终端设备100的机械处理的摇动、倾斜和缩放位置不变时显示的图像区域。因此，当相机终端设备100的机械摇动、倾斜和缩放位置改变时，由机械PTZ定义的图像区域R1的范围改变。

如上面参考图3所述，在本实施例的系统中，多个客户终端200连接到单个相机终端设备100。因此，机械PTZ所定义的图像区域R1对应于单个相机终端设备100的机械摇动、倾斜和缩放位置并且在每一个客户终端200上是相同范围。因此，在每一个客户终端200上所显示的整体图像内显示相同的图像区域R1。

另一方面，数字PTZ定义的图像区域R2对应于通过数字操作从机械PTZ定义的图像区域R1中提取的部分的图像区域。因此，原则上，数字PTZ定义的图像区域R2比机械PTZ定义的图像区域R1范围更窄。当在机械PTZ定义的图像区域R1中指定数字PTZ定义的图像区域R2时，通过相机终端设备100或客户终端设备200执行的图像处理，图像区域R2从图像区域R1中被提取并且显示。图4和图5中所示的局部图像对应于根据用户的指定从机械PTZ定义的图像区域R1中提取的数字PTZ图像区域R2。客户终端200的控制部分204可执行控制以便执行在显示部分208上的显示，以使得图像区域R1和图像区域R2的显示状态不同。例如，可执行显示使得图像区域R1和图像区域R2的外部轮廓为不同的颜色。以该方式，用户可在视觉上区分图像区域R1和图像区域R2。

如图5中所示，在每一个客户终端200上显示的整体图像中，除了对于所有客户终端200来说共同的并且由机械PTZ定义的图像区域R1之外，还显示由数字PTZ定义的并且从图像区域R1中指定的图像区域R2。通过操作客户终端200的输入部分206(其为鼠标、键盘等)，用户可从整体图像中指定图像区域R1和图像区域R2，并且可将图像区域R1和图像区域R2改变为所选择范围。以下，将更详细地说明图像区域R1和图像区域R2的指定和改变。

(3)操作方法1

图6是示出图像区域R1和图像区域R2的操作方法1的示意图。在操作方法1中，为了指定图像区域R1和图像区域R2，分别执行两种类型的PTZ操作。以下，将说明用户通过鼠标操作来执行PTZ操作的情况。

在用户指定图像区域R2并且执行数字PTZ操作的情况下，当在图像区域R1的显示区域中执行图像区域R2的操作时，当图像区域R1保持固定状态的同时执行改变图像区域R2的操作。当用户在图像区域R1的范围内设置图像区域R2时，图像区域R1不改变，并且相机终端设备100的机械PTZ位置不改变。因此，当用户在图像区域R1的范围内选择图像区域R2时，在不执行机械操作的情况下，通过图像处理从图像区域R1中指定的图像区域R2被提取和显示为局部图像。在该情况下，当图像区域R1不改变时，即使另一个用户(例如图4中所示的客户B)要将别的图像区域R2的图像显示为局部图像，该另一用户可继续观看局部图像而没有问题。

此外，当用户指定图像区域R1并且执行PTZ操作时，只要图像区域R2的显示区域处于成像范围内，那么数字PT固定并且执行机械PT操作以改变图像区域R1。

接下来，在用户指定图像区域R2并且执行数字PT操作的情况下，当在机械PT操作的显示区域外部执行摇动和倾斜时，即当用户试图将图像区域R2的指定扩大到超过图像区域R1的范围时，与数字PT操作相应地执行机械PT操作，并且让图像区域R1改变以使得图像区域R2位于图像区域R1内。以该方式，当用户操作图像区域R2并且执行图像区域R1的显示区域外部的PTZ操作时，图像区域R1的范围外部的图像被指定，并且因此操作被执行以改变相机终端设备100的机械PTZ位置。

另外，作为不同的示例，当操作图像区域R2时，可执行图像区域R1的PT操作，不管图像区域R2是否处于图像区域R1内。

此外，在用户指定图像区域R1并且执行机械PT操作的情况下，当数字PT图像区域R2在图像区域R1的显示区域外部时，与机械PT操作相应地执行数字PT操作，因此使得图像区域R2改变，以使得图像区域R2在图像区域R1内。

通过上述操作，用户可分别通过指定图像区域R1和图像区域R2来执行机械PT操作或数字PT操作。另外，在图像区域R1和图像区域R2之一的操作使得难于显示另一个图像区域的情况下，通过相应地改变另一个图像区域，可以通过相应地改变另一个图像区域来不断地设置图像区域R1内的图像区域R2。

通过用户使用鼠标在整体图像上执行点击和拖拽操作，来实现图像区域R1和图像区域R2的指定和改变。例如，在选择图像区域R1(或图像区域R2)的状态下，通过点击整体图像内的所选择点，用户可将图像区域R1(或图像区域R2)的中心移动到所点击点的位置。可替换地，在选择图像区域R1(或图像区域R2)的状态下，用户可执行拖拽操作以使得图像区域R1(或图像区域R2)移动到所选择位置。

另外，当在整体图像上点击所选择点时，如果所点击点在图像区域R1内，那么在图像区域R1(机械PT)被固定的同时，图像区域R2(数字PT)的中心可与所点击位置对齐。如果所点击点在图像区域R1的显示区域外部，那么可执行机械和数字操作二者以使得机械和数字显示区域的中心与所点击位置对齐。

在该情况下，数字PT图像区域R2的中心与所点击位置对齐，而机械PT定义的图像区域R1的中心不需要是所点击位置。可替换地，可执行机械PT以使得图像区域R2正好适合于图像区域R1。以该方式，机械PT的操作量可以减小到最少。

关于缩放操作，在原则上，当指定机械或数字缩放操作时(当指定图像区域R1或图像区域R2时)，类似于上述的PT操作，仅对于指定一侧上的缩放执行缩放控制。

此外，当机械或数字缩放操作未被指定时，当发送命令以执行缩放操作时，首先在可以进行机械缩放的范围内执行机械缩放，因此改变图像区域R1。通过这样做，图像区域R1和图像区域R2二者内的图像都被扩大，并且对应于图像区域R2的范围被显示为局部图像。然后，当机械缩放在摄远(放大)方向上已达到最大值时(当机械缩放已达到摄远端时)，执行处理以便使用数字缩放进一步扩大图像区域R2的范围。

在操作方法1中，当指定图像区域R2并且移动图像区域R2时，因为图像区域R1仅在最小范围内移动，所以当另一客户终端200执行数字PTZ操作时可最小化对另一客户终端200的影响。

(4)操作方法2

图7是示出图像区域R1和图像区域R2的操作方法2的示意图。在操作方法2中，使得机械PTZ操作和数字PTZ操作相互相应地操作。在图7中，即使在指定图像区域R1(机械PT)和图像区域R2(数字PT)中的任何一个并且移动区域的情况下，图像区域R1和图像区域R2之间的位置关系也被维持在相同状态，并且图像区域R1和图像区域R2被并行移动。

例如，在选择图像区域R1(或图像区域R2)的状态下，如果用户点击整体图像中的所选择点，可以将图像区域R2的中心移动到所点击点，同时将图像区域R1和图像区域R2之间的位置关系维持在相同状态。

此外，同样当执行缩放操作时，如果指定图像区域R1(机械PT)和图像区域R2(数字PT)中的任何一个并且移动区域，那么执行缩放操作使得图像区域R1和图像区域R2之间的尺度比率不变。

在操作方法2中，当相机终端设备100正在跟踪和拍摄给定对象时，因为图像区域R1和图像区域R2一起移动，所以可在图像区域R1内可靠地跟踪被跟踪对象。另外，即使所跟踪对象临时移动到图像区域R2外部，因为图像区域R1和图像区域R2一起移动，所以通过不断地记录图像区域R1，可以随后获取不能被跟踪的对象。

如上所述，根据第一实施例，对于客户终端200来说，可以指定机械缩放操作和数字缩放操作并且执行所选择的控制。因此，在可以进行机械和数字缩放操作的系统中，可以获取希望范围的图像。

2.第二实施例

(1)第二实施例的概述

接下来，将说明本公开的第二实施例。在第二实施例中，相机终端设备100没有机械摇动和倾斜功能，并且仅具有机械缩放(光学缩放)功能。图8是示意性示出当相机终端设备100仅具有机械缩放功能时相机终端设备100的配置的图形。

如图8中所示，在由相机终端设备100的相机透镜获取的视频内执行数字PTZ操作。在该情况下，根据来自客户终端200一侧的指令，从相机终端设备100的相机透镜获取的一部分视频(图8中所示的区域A)被提取和发送到客户终端200。注意，也可能在发送视频时将从相机透镜获取的全部视频发送到客户终端200，并且由接收一侧的客户终端200从全部视频提取区域A并且显示。

图9是示出每一个客户终端设备200上的整体图像的示意图。类似于第一实施例，除了由机械Z定义的图像区域R1之外，还在整体图像内显示在图像区域R1中指定的并且由数字PTZ定义的图像区域R2。在第二实施例中，不能执行机械摇动和倾斜操作，并且因此由机械PTZ定义的图像区域R1恒定地显示在整体图像的中心。注意，在图9中仅示出了整体图像，但是类似于图5，在每一个客户终端200的显示部分208上显示整体图像和局部图像二者。

(2)操作方法1

图10A到图10E是示出根据第二实施例的图像区域R1和图像区域R2的操作方法1的示意图。在操作方法1中，分别执行对由机械光学缩放操作定义的图像区域R1的指定和由数字PTZ操作定义的图像区域R2的指定。

首先，在图10A中，如果图像区域R2的数字PT操作在图像区域R1的机械缩放的显示区域内，那么在图像区域R1处于固定状态的同时，执行图像区域R2的数字PTZ操作。此外，图10B示出了对由光学缩放操作定义的图像区域R1的指定。在图10B中，在由数字PTZ操作定义的图像区域R2被包括在图像区域R1中的范围内，可通过在由箭头表示的范围内进行机械PT操作来改变图像区域R1。

图10C示出了这样的情况：当通过数字PTZ操作改变图像区域R2时，执行其中试图将图像区域R2扩展到图像区域R1的显示区域外部的操作。在该情况下，相应地执行这样的操作，其中光学缩放操作用于扩大图像区域R1以使得图像区域R2被包括在图像区域R1中。

图10D示出了这样的情况：当光学缩放的图像区域R1的显示比例变得大于相关于整体图像的预定值时，机械缩放移动到根据图像区域R2的摄远侧。在该情况下，当图像区域R2通过数字PT操作在整体图像的中心的方向上移动时，执行光学缩放以使得，通过在图像区域R2被包括在图像区域R1中的范围内在摄远侧上进行光学缩放，显示比例达到上述的预定值。以该方式，可以防止光学缩放定义的图像区域R1的区域变得过分的扩展，并且因此改善了清晰度。

图10E示出了这样的情况：当使用光学缩放操作操作图像区域R1时，由数字PTZ定义的图像区域R2的一部分扩展到图像区域R1外部。在该情况下，相应地执行数字PT操作以使得图像区域R2位于图像区域R1内。

此外，同样关于缩放操作，即使在指定图像区域R1(光学缩放)和图像区域R2(数字缩放)任何一个并且移动所指定区域时，执行缩放操作以使得图像区域R1和图像区域R2之间的尺度比率维持在常量。

另外，当执行缩放操作时，首先在光学缩放的范围内执行光学缩放。然后，当光学缩放已经在摄远方向上放大到最大值时，如果在摄远方向上进一步执行缩放操作，那么执行数字缩放。

(3)操作方法2

图11是示出根据第二实施例的图像区域R1和图像区域R2的操作方法2的示意图。在操作方法2中，可相互相应地执行光学缩放和数字缩放。在图11中，执行缩放操作以使得由光学缩放定义的图像区域R1和数字缩放定义的图像区域R2之间的尺度比率维持在常量。

在该情况下，即使指定了机械缩放或数字缩放中的任何一个，图像区域R1和图像区域R2的中心被分别固定，并且执行缩放的同时，图像区域R1和图像区域R2之间的尺度比率是不变的。

如上所述，根据第二实施例，即使相机终端设备100没有机械摇动和倾斜功能，可以使用相机终端设备100的光学缩放功能和数字PTZ操作来获取希望范围的图像。

3.第三实施例

(1)当被分配了控制权时的显示和操作

接下来，将说明本公开的第三实施例。第三实施例与存在来自每一个上述客户终端200的命令之间的冲突的情况(如上所述)有关。在该情况下，在第三实施例中，将操作权分配到多个客户终端200中的一个，并且具有操作权的客户终端200执行PTZ操作。换言之，在第三实施例中，仅仅具有操作权的客户终端200专有地控制PTZ操作。

同样，在本实施例中，类似于第一和第二实施例，可执行机械PTZ操作和数字PTZ操作。出于此原因，在本实施例中，可关于机械PTZ操作和数字PTZ操作二者分配专有的操作权。

在该情况下，当单个相机终端设备100存在于系统内时，用于机械PTZ操作的控制权可仅由所选择的一个客户终端200来持有。另一方面，可以将用于数字PTZ操作的控制权仅分配到所选择的一个客户终端200或者将用于数字PTZ操作的控制权分配到多个客户终端200。以下，这将参考图12到15来更详细地说明。

图12示出了单个客户终端200具有对图像区域R1和图像区域R2二者的控制权，并且另一个客户终端200没有控制权的情况。在该情况下，如图12中所示，具有对图像区域R1和图像区域R2的控制权的客户终端200可执行机械PTZ操作和数字PTZ操作二者，并且可自由地操作图像区域R1和图像区域R2二者。在该情况下，可以使用机械PTZ操作自由地操作图像区域R1。此外，可以使用数字PTZ操作自由地操作在图像区域R1中对图像区域R2的设置。

这里，当由具有对机械PTZ操作的控制权的客户终端200改变图像区域R1时，另一个客户终端200(不具有用于机械PTZ操作的控制权并且仅具有用于数字PTZ操作的控制权)可在改变后的图像区域R1内操作图像区域R2。

以该方式，当单个客户终端200具有对于机械PTZ操作和数字PTZ操作二者的控制权时，可自由地移动图像区域R1和图像区域R2，如图12中所示。

图13示出了单个客户终端200具有对图像区域R1和图像区域R2二者的控制权，并且另一个客户终端200(在该情况下为另一个单个客户终端200)具有对数字PTZ的控制权的情况。

在该情况下，如果机械PTZ操作是无限制的，那么具有对于数字PTZ操作的控制权的另一个客户终端200不能执行希望的数字PTZ操作。出于此原因，由另一个客户终端200具有控制权的数字PTZ操作所定义的图像区域R2(示出为图13中的图像区域R2a)显示在具有对机械PTZ操作的控制权的客户终端200上。然后，为了确保图像区域R2a在另一个客户终端200上的显示，图像区域R2a和包括图像区域R2a的范围(由图13中的虚线表示的矩形范围C)显示在具有对机械PTZ操作的控制权的客户终端200上，并且仅可以在虚线的范围内进行机械PTZ操作。通过以该方式对具有对机械PTZ操作的控制权的客户终端200的控制进行限制，即使当执行机械PTZ操作时，另一个客户终端200具有控制权的数字PTZ操作所定义的图像区域R2恒定地包括在图像区域R1中，并且因此另一个客户终端200可继续获取图像区域R2a的局部图像。

类似于图12，同样在图13中所示的情况下，在具有对机械PTZ操作的控制权的客户终端200上，可使用数字PTZ操作在图像区域R1内指定图像区域R2并且可获取其作为局部图像。此外，如在图13中，存在这样的情况：单个客户终端200具有对于图像区域R1和R2二者的控制权，并且另一个客户终端200具有对图像区域R2的控制权，因此两个客户终端200具有对图像区域R2的控制权。在该情况下，可以允许在单个客户中终端200一侧上自由地控制，不管另一个客户终端200是否具有对图像区域R2的控制权。以该方式，例如当希望紧急查看某个位置的视频时，因为另一个客户终端200具有控制权，所以可以避免不能在该区域中执行机械PTZ操作。

注意，因为通常不需要显示图像区域R2a和虚线表示的范围C，也可能的是，仅当用户执行PTZ操作时，图像区域R2a和范围C显示在对机械PTZ操作具有控制权的客户终端200上。

此外，因为不能使得图像区域R1大于矩形范围C的范围，所以范围C外部的区域变为对其的控制不被分配的区域。出于此原因，如图13中所示，范围C外部的区域以白色显示(可替换地，这可以是灰色显示等)，使得可在视觉上识别对其的控制不被分配的区域。

图14示出了客户终端200具有对机械PTZ操作的控制权，并且另一个客户终端200具有对数字PTZ操作的控制权的情况。在该情况下，可执行机械PTZ操作的范围是包括图像区域R2(表示为图14中的图像区域R2a)的范围(图14中的虚线表示的矩形范围C)，对于该图像区域R2来说，另一个客户终端200拥有用于数字PTZ操作的控制权。

同样在图14所示的示例中，因为通常不需要显示图像区域R2a和虚线表示的范围C，也可能的是，仅当用户执行PTZ操作时，图像区域R2a和范围C显示在对机械PTZ操作具有控制权的客户终端200上。

此外，同样在图14中所示的示例中，范围C外部的区域以白色显示(可替换地，这可以是灰色显示等)，使得可在视觉上识别对其的控制不被分配的区域。

图15示出了客户终端200具有对数字PTZ操作的控制权，并且另一个客户终端200具有对机械PTZ操作的控制权的情况。在该情况下，可以对由数字PTZ操作定义的图像区域R2进行操作的范围处于由另一个客户终端200设置的机械PTZ范围(图像区域R1)内。图像区域R1通过具有对机械PTZ操作的控制权的另一个客户终端200的操作来改变。注意，当另一个客户终端200具有对于机械PTZ操作的控制权时，例如通过在服务器400中预先记录不能在局部图像区域中被显示为实况视频的图像(除了图像区域R2之外的图像)，可在随后的阶段查看图像区域R1的图像。

(2)分配控制权的示例

如上所述，关于数字PTZ操作定义的图像区域R2，通过经由网络300从相机终端设备100发送多个图像流，多个不同的客户终端200可获取不同图像区域R2的视频。图16是示出对应于图像区域R2的两个不同视频(视频1和视频2)被发送到每一个客户终端200的状态的示意图。这里例如设想视频1对应于图13中所示的图像区域R2并且视频2对应于图13中所示的图像区域R2a。

如图16中所示，当可操作两个视频(视频1和视频2)时，当对视频1或视频2中的任何一个的控制可用时，将可用的视频控制权分配到进入视频操作的下一个客户终端200。

例如，当对于视频1和视频2二者的控制权可用时，进入的第一客户终端200(这里为操作者1)可获得对于视频1或视频2中的任何一个的控制权。这里，设想操作者1获得对于视频1的控制权并且操作视频1。在操作者1持有对视频1的控制权的期间，根据上述处理，操作者1可自由地操作视频1的范围并且可获取希望区域的实况视频。

接下来，在操作者1持有对视频1的控制权的状态下，新进入的客户终端200(这里为操作者2)获得对于视频2的控制权，因为对视频2的控制权是可用的。以该方式，在操作者2持有对视频2的控制权的期间，操作者2可自由地操作视频2的范围并且可获取希望区域的实况视频。应当注意，当对于视频1的控制权不可用时，即使对于视频2的控制权可用，也可能等待，直到对于视频1的控制权变为可用为止。

接下来，在操作者1持有对视频1的控制权并且操作者2持有对视频2的控制权的状态下，进入的下一个客户终端200(这里为操作者3)不能获得控制权，因为操作者1和操作者2持有对视频1和视频2二者的控制权。出于此原因，操作者3等待，直到对于视频1或视频2的控制权变为可用为止。如同图4中所示的客户C的终端，当在等待时，客户终端200通常与具有控制的另一个客户终端200(例如客户A的终端)看到相同的视频。另外，当操作者4在那之后进入时，当控制变为可用时，以从较早进入的客户终端200开始按顺序获取控制。

例如可预先设置持有控制权的时间。相机终端设备100的定时器112对每一个操作者分别持有控制权的时间进行计数，并且当预先确定的时段过去时，取消操作者的控制权。作为示例，当持有控制权的时段为15分钟时，在上述示例中，当从操作者1获得对于视频1的控制权时开始过去了15分钟时，取消操作者1对视频1的控制权。因此，对于等待的操作者3来说可以获取对于视频1的控制权并且操作视频1。此外，当从操作者2获得对于视频2的控制权时开始过去了15分钟时，取消操作者2对视频2的控制权。因此，对于等待的操作者4来说可以获取对于视频2的控制权并且操作视频2。

同样，当关于机械图像区域R1分配控制权时可执行类似的过程。然而，应当注意，因为在系统中存在单个相机终端设备100，对于图像区域R1的控制权仅被分配到一个客户终端200。例如，当对于图像区域R1的控制权可用时，进入的第一客户终端200(这里为操作者1)可获取对于图像区域R1的控制权。在操作者1持有对于图像区域R1的控制权的状态下进入的客户终端200(这里为操作者2)等待，直到对于图像区域R1的控制权可用为止。

(3)与分配控制权有关的处理

当试图获取控制权时，用户从客户终端200执行操作来选择图像区域R1或图像区域R2。这里说明的情况是图15中所示的所选择的一个客户终端200获取了对于图像区域R2的视频1的控制权。在该情况下的操作例如通过使用输入部分206(例如鼠标、键盘等)指定显示部分208上显示的视频1的外部边框来执行。然而，本公开不限于该示例。响应于上述操作，发送/接收部分202向相机终端设备100发送信息(控制请求信息)以表示终端设备200正在试图获取对于视频1的控制权。注意，当客户终端200正试图获取对于视频2的控制权时，表示客户终端200正试图获取对于视频2的控制权的信息(控制请求信息)被发送到相机终端设备100。

控制请求信息经由网络300发送到相机终端设备100，由发送/接收部分106接收并且然后被发送到控制部分108。当未分配为其发送控制请求的视频1或视频2的控制权时，控制部分108将控制权分配到发送控制请求信息的客户终端200并且记录客户终端200的IP地址。以该方式，当控制部分108从被分配了控制权的客户终端200接收了指定视频1的区域的信息时，控制部分108从相机部分102发送的整体图像(实况视频)提取对应于指定区域的部分，并且发送命令以便仅解码所提取的区域部分。发送/接收部分106从图像处理部分104接收已对其执行了编码处理的区域A的实况视频并且经由网络300向具有控制权的客户终端200发送经编码的区域A。

可按类似方式执行对于机械图像区域R1的控制权的分配。用户从客户终端200执行操作来选择图像区域R1。例如通过使用输入部分206(例如鼠标、键盘等)指定显示部分208上显示的图像区域R1的外部边框来执行操作。然而，本公开不限于该示例。响应于上述操作，发送/接收部分202向相机终端设备100发送表示终端设备200正在试图获取对于图像区域R1的控制权的信息(控制请求信息)。

控制请求信息经由网络300发送到相机终端设备100，由发送/接收部分106接收并且然后被发送到控制部分108。当未分配为其发送控制请求的图像区域R1的控制权时，控制部分108将控制权分配到发送控制请求信息的客户终端200并且记录客户终端200的IP地址。以该方式，当控制部分108从被分配了控制权的客户终端200接收了指定图像区域R1的区域的信息时，控制部分108机械地控制相机部分102的摇动、倾斜和缩放。相机部分102因此将对应于图像区域R1的视频发送到图像处理部分104。从相机部分102发送的实况视频中，图像处理部分104提取对应于图像区域R2指定的区域的部分并且仅对所提取的区域部分执行编码处理。发送/接收部分106从图像处理部分104接收已对其执行了编码处理的图像区域R2的实况视频并且经由网络300向具有控制权的客户终端200发送经编码的图像区域R2。注意，当视频由客户终端200的图像处理部分203提取时，在由相机部分102获取的实况视频已被编码后，经编码的实况视频经由网络300被发送到客户终端200，并且视频由图像处理部分203提取。

应当注意，根据第三实施例的控制的设置可被应用于第一实施例和第二实施例二者。

根据上述的第三实施例，取决于对于机械PTZ操作和数字PTZ操作的各自控制权的存在与否，可以在客户终端200上最优地控制图像区域R1和图像区域R2。

上面参考附图详细描述了本公开的示例实施例。然而，本公开不限于上述的示例。本领域技术人员应当理解，取决于设计需求和其它因素，可出现落入所附权利要求范围或其等同物范围内的各种修改、组合、子组合和变更。

本公开包含与2010年7月30日在日本专利局提交的日本优先权专利申请JP 2010-171345中公开的主题有关的主题，该专利申请的全部内容通过引用全部合并在此。

Claims (15)

1.一种相机设备，包括：

第一信息获取部分，所述第一信息获取部分获取第一信息，所述第一信息用于控制在由相机部分拍摄的整体图像内指定的第一区域；

第二信息获取部分，所述第二信息获取部分获取第二信息，所述第二信息用于控制在所述整体图像内指定的第二区域；

控制部分，所述控制部分基于能从多个设备输入的第一信息中的、从具有所述第一区域的控制权的设备输入的第一信息，来控制所述相机部分的机械移动；和

图像处理部分，所述图像处理部分从由所述相机部分拍摄的所述整体图像获取所述第一区域的图像，并且，基于能从多个设备输入的第二信息中的、从具有所述第二区域的控制权的设备输入的第二信息，来从所述第一区域内提取所述第二区域的图像。

2.根据权利要求1所述的相机设备，还包括：

请求信息获取部分，所述请求信息获取部分获取与所述第一区域和第二区域之一有关的控制权的请求信息；和

控制权分配部分，所述控制权分配部分在所述控制权未分配到所述第一区域和第二区域之一时基于所述请求信息来分配所述控制权。

3.根据权利要求1所述的相机设备，

其中当与具有所述第一区域的控制权的设备不同的另一设备具有所述第二区域的控制权时，所述控制部分在所述第一区域被包括在所述第二区域中的范围中控制所述相机部分的机械移动，所述第二区域受所述另一设备的控制权的管制。

4.根据权利要求1所述的相机设备，

其中当与具有所述第二区域的控制权的设备不同的另一设备具有所述第一区域的控制权时，所述图像处理部分从由所述另一设备的控制所定义的第一区域内提取所述第二区域的图像。

5.一种相机系统，其中拍摄图像的相机终端设备和控制所述相机终端设备的客户终端设备通过网络连接，

其中所述相机终端设备包括：

第一信息获取部分，所述第一信息获取部分获取第一信息，所述第一信息用于控制在由相机部分拍摄的整体图像内指定的第一区域；

第二信息获取部分，所述第二信息获取部分获取第二信息，所述第二信息用于控制在所述整体图像内指定的第二区域；

控制部分，所述控制部分基于能从多个设备输入的第一信息中的、从具有所述第一区域的控制权的设备输入的第一信息来控制所述相机部分的机械移动；和

图像处理部分，所述图像处理部分从由所述相机部分拍摄的整体图像获取所述第一区域的图像，并且，基于能从多个设备输入的第二信息中的、从具有所述第二区域的控制权的设备输入的第二信息，从所述第一区域内提取所述第二区域的图像。

6.一种控制设备，包括：

第一信息获取部分，所述第一信息获取部分获取第一信息，所述第一信息用于控制在由相机终端设备拍摄的整体图像内指定的第一区域；

第二信息获取部分，所述第二信息获取部分获取第二信息，所述第二信息用于控制在所述整体图像内指定的第二区域；

发送部分，所述发送部分，在控制所述第一区域的控制权被分配了时，基于所述第一信息来向所述相机终端设备发送用于控制相机部分的机械移动的控制信息；和

图像处理部分，所述图像处理部分，在控制所述第二区域的控制权被分配了时，从由所述相机部分拍摄的整体图像获取所述第一区域的图像并且基于所述第二信息来从所述第一区域内提取所述第二区域的图像。

7.根据权利要求6所述的控制设备，

其中当与具有所述第一区域的控制权的设备不同的另一设备具有所述第二区域的控制权时，所述发送部分发送用于在所述第一区域被包括在所述第二区域中的范围中控制所述相机部分的机械移动的控制信息，所述第二区域受所述另一个设备的控制权的管制。

8.根据权利要求6所述的控制设备，

其中当与具有所述第二区域的控制权的设备不同的另一设备具有所述第一区域的控制权时，所述图像处理部分从由所述另一设备的控制所定义的所述第一区域内提取所述第二区域的图像。

9.根据权利要求6所述的控制设备，还包括：

显示部分，所述显示部分既显示所述整体图像也显示对应于所述第二区域的图像的局部图像，并且还在所述整体图像内显示与所述第一区域和所述第二区域相对应的范围。

10.根据权利要求9所述的控制设备，

其中基于所述第一区域的控制权和所述第二区域的控制权之一，所述显示部分在所述整体图像内显示一范围，在所述范围中，所述第一区域和第二区域之一是可控制的。

11.一种程序，所述程序包括的指令使得计算机用作：

获取第一信息的单元，所述第一信息用于控制在由相机部分拍摄的整体图像内指定的第一区域；

获取第二信息的单元，所述第二信息用于控制在所述整体图像内指定的第二区域；

基于能从多个设备输入的第一信息中的、从具有所述第一区域的控制权的设备输入的第一信息来控制所述相机部分的机械移动的单元；和

从由所述相机部分拍摄的整体图像获取所述第一区域的图像，并且，基于能从多个设备输入的第二信息中的、基于从具有所述第二区域的控制权的设备输入的第二信息，从所述第一区域内提取所述第二区域的图像的单元。

12.一种可在包括相机设备和控制所述相机设备的拍摄方向的多个控制设备的系统中使用的控制设备，所述控制设备包括：

显示控制部分，所述显示控制部分执行控制以使得整体图像区域被显示，所述整体图像区域显示由所述相机设备拍摄的整体图像；和

相机控制部分，所述相机控制部分控制所述相机设备以使得所述相机设备拍摄对应于在所述整体图像上指定的第一区域的方向，

其中所述显示控制部分显示局部图像区域，在所述局部图像区域中通过放大所述第一区域中所包括的第二区域来显示图像，并且所述显示控制部分执行控制以使得所述第一区域和第二区域在所述整体图像上以不同的显示状态被显示，并且

其中当具有第一控制权时，允许所述第一区域被改变，并且当具有第二控制权时，允许所述第二区域被改变。

13.根据权利要求12所述的控制设备，

其中所述显示控制部分执行控制，以使得当所述第二区域处于所述第一区域的范围内时，允许所述第二区域被改变。

14.根据权利要求12所述的控制设备，

其中当所述第二区域被操作和改变时，当尝试改变所述第二区域以使得所述第二区域超过所述第一区域的范围时，所述显示控制部分还改变所述第一区域，并且执行控制以使得所述第二区域包括在所述第一区域的范围内，并且

其中所述相机控制部分执行控制，以使得对应于改变后的第一区域的方向被拍摄。

15.根据权利要求12所述的控制设备，

其中多个控制设备作为具有所述第二控制权的控制设备同时存在。

Images