CN115550562A - 将传感器数据与图像一起显示的系统、相机装置和方法 - Google Patents

Abstract

本发明涉及将传感器数据与图像一起显示的系统、相机装置和方法。该方法由相机装置执行。相机装置包括图像捕获单元、通信接口以及处理电路。图像捕获单元被配置有可变的缩放级别。该方法包括通过图像捕获单元捕获描绘场景的图像。该方法包括通过通信接口与用于显示图像的用户界面并且与传感器装置进行通信，以用于从传感器装置获得收集的传感器数据以与图像一起显示在用户界面上。该方法包括与当图像捕获单元以低于缩放阈值的缩放级别捕获图像时相比，当图像捕获单元以高于缩放阈值的缩放级别捕获并且描绘传感器装置的图像时，通过处理电路并且经由通信接口配置传感器装置以更高的出现频率提供所收集的传感器数据。

Description

将传感器数据与图像一起显示的系统、相机装置和方法

技术领域

本文提出的实施例涉及用于将收集的传感器数据与图像一起显示的系统、相机装置、方法、计算机程序和计算机程序产品。

背景技术

一般而言，传感器装置是目的在于检测其环境中的事件或变化并且将信息发送到诸如计算机处理器的其他电子设备以用于进一步处理或用于在用户界面处显示给用户的装置、模块、机器或子系统。为了做到这一点，传感器装置消耗电能。可以存在不同的方式来为传感器装置提供电能。在一些部署中，使用耗电量尽可能少的用户传感器装置可能是有益的。这可能是在具有多个传感器装置的部署中的情况，其中，总功耗因此需要受到限制，和/或在具有电池供电的传感器的部署中的情况，或以其他方式只能访问非常有限的电能资源的情况，但这仍然应该具有很长的寿命。进一步，即使由于有限的电能资源而不需要，从环境角度或成本角度来看，可能期望降低功耗。

作为非限制性但说明性的示例，假设传感器装置是Z-Wave类型的传感器装置。因此，Z-Wave装置是电池供电的，但能效是高的。这是因为Z-Wave装置配置有睡眠状态，并且当已经进入睡眠状态时，Z-Wave装置不接受来自外部控制器的控制。一段时间之后，Z-Wave装置从睡眠中唤醒，与控制器交换命令，并且然后重新进入睡眠状态。Z-Wave装置可以配置有关于睡眠状态的持续时间的最小值、最大值和默认值。类似地，唤醒时间可以设定在从最小值至最大值的范围内。

当用户访问Z-Wave装置时，用户希望来自装置的立即响应。为此目的，需要将睡眠时间设定得短(即，睡眠状态的持续时间是短的)。然而，如果睡眠时间设定得太短，则装置的功耗将增加，可能比预期更快地耗尽传感器装置的电能。一方面，为了用户的利益，睡眠时间应该是短的，但是另一方面，为了延长传感器装置的操作寿命，睡眠时间应该是长的。这导致在应如何选择睡眠时间方面存在利益冲突。

对于除Z-Wave装置之外的其他类型的传感器装置，也存在关于用户需要访问传感器数据与节约传感器装置的电能资源的类似考虑。因此，选择睡眠时间或类似参数以实现传感器装置的长操作寿命同时仍允许根据需要将传感器数据提供给用户可能很麻烦。

发明内容

本文的实施例的目的是解决上述问题。

一般而言，根据本文公开的发明构思，传感器装置由图像捕获单元监控，并且传感器装置提供传感器数据的速率被确定为由图像捕获单元使用的缩放级别的函数。这使得由传感器装置收集的传感器数据能够可变地显示在用户界面上。

根据第一方面，本发明构思由一种用于将收集的传感器数据与图像一起显示的系统限定。该系统包括相机装置。相机装置包括被配置成捕获描绘场景的图像的图像捕获单元。图像捕获单元被配置有可变的缩放级别。相机装置被配置成与用于显示图像的用户界面通信。该系统包括传感器装置。传感器装置被配置成收集传感器数据并且以可变的出现频率将收集的传感器数据提供到相机装置，以与图像一起显示在用户界面上。与当相机装置从图像捕获单元获取以低于缩放阈值的缩放级别捕获的图像时相比，当相机装置从图像捕获单元获取以高于缩放阈值的缩放级别捕获的并且描绘传感器装置的图像时，传感器装置被相机装置配置成以更高的出现频率提供所收集的传感器数据。

根据第二方面，本发明构思由一种用于将收集的传感器数据与图像一起显示的相机装置限定。相机装置包括图像捕获单元。图像捕获单元被配置成捕获描绘场景的图像。图像捕获单元被配置有可变的缩放级别。相机装置包括通信接口。通信接口被配置成与用于显示图像的用户界面并且与传感器装置进行通信，以用于从传感器装置获得收集的传感器数据以与图像一起显示在用户界面上。相机装置包括处理电路。处理电路被配置成与当图像捕获单元以低于缩放阈值的缩放级别捕获图像时相比，当图像捕获单元以高于缩放阈值的缩放级别捕获并且描绘传感器装置的图像时，经由通信接口配置传感器装置以更高的出现频率提供所收集的传感器数据。

根据第三方面，本发明构思由一种用于将收集的传感器数据与图像一起显示的方法限定。该方法由相机装置执行。相机装置包括图像捕获单元、通信接口以及处理电路。图像捕获单元被配置有可变的缩放级别。该方法包括通过图像捕获单元捕获描绘场景的图像。该方法包括通过通信接口与用于显示图像的用户界面并且与传感器装置进行通信，以用于从传感器装置获得收集的传感器数据以与图像一起显示在用户界面上。该方法包括与当图像捕获单元以低于缩放阈值的缩放级别捕获图像时相比，当图像捕获单元以高于缩放阈值的缩放级别捕获并且描绘传感器装置的图像时，通过处理电路并且经由通信接口配置传感器装置以更高的出现频率提供所收集的传感器数据。

根据第四方面，本发明构思由一种用于将收集的传感器数据与图像一起显示的计算机程序限定，计算机程序包括计算机程序代码，该计算机程序代码当在相机装置上运行时，使相机装置执行根据第三方面的方法。

根据第五方面，本发明构思由一种计算机程序产品限定，该计算机程序产品包括根据第四方面的计算机程序和在其上存储有该计算机程序的计算机可读存储介质。计算机可读存储介质可以是非暂时性计算机可读存储介质。

有利地，本发明构思使得能够选择睡眠时间或类似参数，使得能够实现传感器装置的长工作寿命，同时允许根据需要将传感器数据提供给用户。

有利地，本发明构思使得能够在用户访问传感器数据的需求与传感器装置的电能资源节约之间取得平衡。

有利地，本发明构思减少了传感器装置的功耗，而不减少提供给与用户界面交互的用户的信息。这是因为如果放大相机以描绘包括传感器装置的区域，则用户更有可能对传感器装置的传感器数据感兴趣。

应当注意，只要合适，第一方面、第二方面、第三方面、第四方面和第五方面的任何特征可以应用于任何其他方面。同样，第一方面的任何优点可以同样分别适用于第二方面、第三方面、第四方面和/或第五方面，并且反之亦然。所附实施例的其他目的、特征和优点将从以下详细公开、从所附从属权利要求以及从附图中变得显而易见。

通常，权利要求中使用的所有术语均应根据其在技术领域中的普通含义进行解释，除非本文另有明确定义。除非另有明确说明，否则对“一个/一/该元件、设备、部件、装置、模块、步骤等”的所有引用都应公开解释为引用元件、设备、部件、装置、模块、步骤等的至少一个实例。除非明确说明，否则本文公开的任何方法的步骤不必按照公开的确切顺序执行。

附图说明

现在参考附图以示例的方式描述本发明构思，在附图中：

图1是图示根据实施例的系统的示意图；

图2和图3示意性地图出根据实施例的用户界面；

图4、图5、图6、图7和图8是根据实施例的方法的流程图；

图9是示出根据实施例的相机装置的功能单元的示意图；并且

图10示出根据实施例的包括计算机可读存储介质的计算机程序产品的一个示例。

具体实施方式

现在将在下文中参考附图更全面地描述本发明构思，在附图中示出了本发明构思的某些实施例。然而，本发明构思可以以许多不同的形式来实施，并且不应被解释为限于本文阐述的实施例；相反，这些实施例以示例的方式提供，使得本公开将是透彻的和完整的，并且将向本领域技术人员充分传达本发明构思的范围。在整个描述中，相同的附图标记指代相同的元件。由虚线所图示的任何步骤应视为是可选的。

如上所述，选择睡眠时间或类似参数以实现传感器装置的长操作寿命同时仍允许根据需要将传感器数据提供给用户可能很麻烦。

因此，本文公开的实施例涉及用于可变地显示收集的传感器数据的机制。为了获得这样的机制，提供了系统100、相机装置110、由相机装置110执行的方法、包括例如采用计算机程序的形式的代码的计算机程序产品，该代码当在相机装置110上运行时，使相机装置110执行该方法。

作为示例，考虑这样的部署，其中从传感器装置收集的传感器数据与传感器装置的图像重叠或以其他方式叠加(laid over)，并且显示在用户界面上(例如，根据图1中的设置)。图1是图示可以应用本文提出的实施例的系统100的示意图。系统100包括相机装置110。相机装置110包括图像捕获单元120。图像捕获单元120被配置成捕获描绘场景160的数字图像。图像捕获单元120被配置有可变的缩放级别。也就是说，图像捕获单元120能够使用可变的缩放级别来捕获图像。下面将公开如何改变缩放级别的不同示例。在图1中，在附图标记150a处示意性地图示出图像捕获单元120的与缩放级别被最大程度地缩小时相对应的视场(即，图像捕获单元120可以实现的最宽视场)。在附图标记150b处示意性地图示出图像捕获单元120的与缩放级别被最大程度地放大时相对应的视场(即图像捕获单元120的最窄视场)。视场150a、150b被示出用于图像捕获单元120的相同指向方向。在这方面，可以存在不同的方式来改变缩放级别。在一个非限制性示例中，缩放级别通过光学透镜系统的光学缩放是可变的，该光学透镜系统是图像捕获单元120的一部分或附接到图像捕获单元120并且由相机装置110控制。在一个非限制性示例中，缩放级别通过数字缩放是可变的，其中缩放级别因此在软件中实现，该软件在图像捕获单元120或相机装置110中提供。在一些示例中，图像捕获单元120能够(数字)平移、倾斜和缩放(PTZ)，并且因此，可以被视为(数字)PTZ图像捕获单元。相机装置110被配置成与用于显示图像的用户界面130进行通信。进一步，相机装置110被配置成根据任何已知的视频编码标准(例如，H.264或H.265)对图像进行编码。在这方面，编码可以直接结合捕获图像的图像捕获单元120或在诸如计算服务器114的另一实体处执行，并且然后至少暂时存储在数据存储116中。计算服务器114和数据存储116因此被认为是相机装置110的一部分。计算服务器114和数据存储116通过网络112可操作地连接到图像捕获单元120。网络112可以是有线的、无线的或部分有线并且部分无线的。

在一些实施例中，相机装置110包括通信接口920，通信接口920被配置成与用于显示图像的用户界面130并且与传感器装置170a、170b进行通信，以用于从传感器装置170a、170b获得收集的传感器数据以与图像一起显示在用户界面130上。在图像已经被编码的情况下，然后在图像被显示在用户界面130处之前执行对应的解码。在一些方面，视频管理系统(VMS)可以结合用户界面130来提供并且被配置成对接收到的编码后的图像序列进行解码。下面将参考图9公开通信接口920的其他方面。在附图标记140处图示出相机装置110与用户界面130之间的示例连接。连接140可以是有线的、无线的或部分有线并且部分无线的。用户180可以与用户界面130交互。应理解，用户界面130至少部分是可视用户界面，因为它被配置成显示由图像捕获单元120捕获的图像。下面将参考图2公开用户界面130的其他方面。下面将参考图3公开用户180可以与界面130交互的其他方面。

系统100进一步包括至少一个传感器装置170a、170b。每个传感器装置170a、170b被配置成收集传感器数据，并且将收集的传感器数据提供到相机装置110以与图像一起显示在用户界面130上。当传感器数据显示在用户界面130处(例如，在图像中描绘传感器装置的位置处)时，传感器数据因此可以作为叠加添加到获取的图像。叠加可以直接添加到图像序列或作为元数据单独发送并且仅当在用户界面130处显示时或至少在图像被解码之后添加到图像。叠加因此可以与图像一起和/或与图像分开编码。

作为开发本发明构思的一部分，本文公开的实施例的发明人已经认识到，当用户180在宽视场捕获图像的情况下监视用户界面130时，用户180可能对附近传感器装置的传感器数据感兴趣，而不是对远处传感器装置的传感器数据感兴趣。相反，如果用户180已经朝向传感器装置(近或远)放大，则用户180可能对在放大位置处描绘的传感器装置的传感器数据感兴趣，而不是对来自未放大的传感器装置的传感器数据感兴趣。在后一种情况下，如果显示从用户180不感兴趣的传感器装置获得的传感器数据，则用户界面130上的缩小视图变得杂乱并且难以解释。进一步，存在传感器装置的电能被无目的地耗尽的风险。

一般而言，因此，本文公开的发明构思基于提供解决上述问题的传感器装置170a、170b和相机装置110的有效系统100，使得传感器数据可以有效地叠加在捕获的图像上。根据本发明构思，这是通过传感器装置170a、170b由图像捕获单元120监控来实现的，并且传感器装置170a、170b将传感器数据提供到相机装置110的速率被确定为由图像捕获单元120使用的缩放级别的函数。

具体地，与当相机装置110从图像捕获单元120获取以低于缩放阈值的缩放级别捕获的图像时相比，当相机装置110从图像捕获单元120获取以高于缩放阈值的缩放级别捕获并且描绘传感器装置170a、170b的图像时，每个传感器装置170a、170b由相机装置110配置成以更高的出现频率提供收集的传感器数据。在一些实施例中，相机装置110包括被配置成经由通信接口920相应地配置传感器装置170a、170b的处理电路910。下面将参考图9公开处理电路910的其他方面。每个传感器装置170a、170b因此能够收集传感器数据并且以可变的出现频率将收集的传感器数据提供到相机装置110以与图像一起显示在用户界面130上。

换句话说，传感器装置170a、170b将收集的传感器数据提供到相机装置110的频率因此取决于由图像捕获单元120使用的当前缩放级别。该依赖性是通过缩放阈值实现的。当图像捕获单元120使用高于(即，朝向远摄端)缩放阈值的缩放级别时，这表示对所描绘的传感器装置170a、170b进行了放大。因此，更新频率被设定成更高的值并且传感器数据被添加为叠加。相反，当图像捕获单元120使用低于(即，朝向广角端)缩放阈值的缩放级别时，这表示对所描绘的传感器装置170a、170b进行了缩小。因此，更新频率被设定成较低的值，并且作为可选的特征的传感器数据不被添加为叠加。

在图1中示出了存在两个传感器装置170a、170b的示例系统100。本文公开的实施例不限于任何具体数量的传感器装置170a、170b。然而，在一些实施例中，设想存在至少两个传感器装置170a、170b，每个传感器装置与其自己的缩放阈值相关联。也就是说，在一些实施例中，系统100包括至少两个传感器装置170a、170b，其中，每个传感器装置170a、170b被配置成收集传感器数据并且以各自的可变的出现频率提供收集的传感器数据以与图像一起显示在用户界面130上。然后，至少两个传感器装置170a、170b中的每一个可以与其自己的缩放阈值相关联。下面将公开每个传感器装置170a、170b如何可以配置有其自己的缩放阈值或与其自己的缩放阈值相关联。

图2示意性地图示出当显示由图像捕获单元120捕获的场景160的图像时根据实施例的用户界面130。在图2中，用户界面130被图示为可以是允许用户与用户界面130交互的触摸屏的屏幕。然而，用户与用户界面130交互的方式也可能不同。例如，用户界面130可以被配置成允许用户在用户界面130上移动光标。在这方面，用户界面130可以被提供有或可操作地连接到诸如鼠标、键盘、操纵杆等的导航工具，以允许用户在用户界面130上移动光标。如上所述，用户界面130经由连接140可操作地连接到相机装置110。如下文将进一步公开的，这允许系统100检测用户在用户界面130上的点击(通过触摸屏上的触摸输入或通过来自导航工具的指示)。进一步，用户界面130可以可操作地连接到计算机、终端和/或通信网络。

如果图像捕获单元120被最大程度地缩小(即，对应于视场150a)，则在附图标记132a处示出场景160的视图。如果图像捕获单元120朝向中心被最大程度地放大(即，对应于视场150b)，则在附图标记132b处示出场景160的视图。传感器装置170b比传感器装置170a更靠近图像捕获单元120，并且因此，当传感器装置170b显示在用户界面130上时，传感器装置170b将看起来比传感器装置170a具有更大的尺寸。进一步，由于传感器装置170b在图像捕获单元120的最窄视场外部，因此当缩放级别被最大程度地放大时，传感器装置170b不被显示。

现在将继续参考图1和图2公开与系统100(并且尤其是相机装置110和传感器装置170a、170b)的进一步细节有关的实施例。还将参考图3，并且尤其是图3(a)。在图3的说明性示例中，每个传感器装置170a、170b代表温度传感器，并且因此，传感器数据代表传感器装置170a、170b的温度读数。也就是说，图3中的传感器装置170a、170b代表天气传感器的类型。然而，如本领域技术人员理解的，还可以存在具有对应的类型的传感器数据(诸如但不限于光、电压、电流、压力、湿度、空气污染、火灾、气体等)的其他类型的传感器装置，并且本文公开的实施例不限于任何特定类型的传感器装置或传感器数据。在一些实施例中，传感器装置170a、170b是电池供电的Z波装置。其他实施例包括通过用于应用的蓝牙、ZigBee或其他任何其他适合的通信协议进行通信的传感器装置。

在一些方面，仅当缩放级别高于对应的传感器装置170a、170b的缩放阈值时，传感器数据才显示为叠加172a、172b。具体地，在一些实施例中，相机装置110被配置成当相机装置110获取以高于缩放阈值的缩放级别捕获并且描绘传感器装置170a、170b的图像时，将传感器数据作为叠加172a、172b提供到图像。也就是说，第一条件是缩放级别高于传感器装置170a、170b的缩放阈值，并且第二条件是传感器装置170a、170b被描绘在图像中(并且因此示出在用户界面130上)。在图3(a)的示例中，出于说明性目的，假设缩放级别高于传感器装置170a的缩放阈值但低于传感器装置170b的缩放阈值。因此，传感器数据被示出为传感器装置170a的叠加172a(指示24.6℃的温度值)。

在一些方面，当缩放级别低于对应的传感器装置170a、170b的缩放阈值时，显示传感器装置170a、170b的表示。具体地，在一些实施例中，相机装置110被配置成当相机装置110获取以低于缩放阈值的缩放级别捕获并且描绘传感器装置170a、170b的图像时，在用户界面130上显示表示传感器装置170a、170b的图示174作为图像的叠加172a、172b。图示的非限制性示例包括图标、符号等。在图3(a)的示例中，显示采用传感器170b的图标的形式的图示174，因为如上所公开，假设缩放级别低于传感器装置170b的缩放阈值(并且传感器装置170b示出在用户界面130上)。

如上所公开，系统100可以被配置成检测用户在用户界面130上的点击。假设点击是在用户界面130的位置上进行的。因此，可以对传感器装置170a、170b的存储图像位置进行比较，以决定用户选择哪个传感器装置170a、170b(如果有的话)。也就是说，传感器装置170a、170b在图像中具有场景160中的位置。由于该位置在图像中(与传感器装置170a、170b的真实位置相反)，因此该位置可以被称为图像位置。当传感器装置170a、170b显示在用户界面130上时，传感器装置170a、170b在场景160中的图像位置具有到用户界面130上的位置的映射。在这方面，对于图像捕获单元120的每个缩放级别、平移方向和倾斜方向可能存在一个映射(取决于图像捕获单元120是否能够平移和/或倾斜)。在一些实施例中，相机装置110被配置成通过验证用户输入在用户界面130上的位置与传感器装置170a、170b在用户界面130上的图像位置相对应来确定用户输入识别传感器装置170a、170b的表示174。因此，这允许系统100确定用户是否“点击”了显示在用户界面130上的传感器装置170a、170b中的一个。在图3(a)中图示出了用户180的手182点击所描绘的传感器装置170b的示例。接下来将参考图3(b)和图3(c)进一步公开当已经接收到表示用户在所描绘的传感器装置170b上的点击的输入时由系统100采取的动作。

在一些方面，用户180对传感器装置170b的图示174的点击导致该传感器装置170b的传感器数据被获得和显示。具体地，在一些实施例中，用户界面130被配置成接收用户输入，其中，用户输入识别传感器装置170a、170b的表示174，并且其中，相机装置110被配置成响应于此而在用户界面130上将传感器数据显示为图像的叠加172a、172b。这在图3(a)和图3(b)中图示出，假设用户180的手182点击图3(a)中的传感器装置170b，并且如箭头190a所指示，从图3(a)到图3(b)进行了转换。在图3(b)中，由传感器装置170b获得的传感器数据示出为传感器装置170b的叠加172b(指示20.1℃的温度值)。因此，响应于用户输入，为传感器装置170b显示传感器数据，尽管缩放级别低于传感器装置170b的缩放阈值。

在一些方面，用户180在传感器装置170b的图示174上的点击导致图像捕获单元120将该传感器装置170b至少放大到用于显示该传感器装置170b的传感器数据的缩放阈值。具体地，在一些实施例中，用户界面130被配置成接收用户输入，其中，用户输入识别传感器装置170a、170b的表示174，并且其中，相机装置110被配置成响应于此而使图像捕获单元120放大到缩放阈值。这在图3(a)和图3(c)中图示出，假设用户180的手182点击图3(a)中的传感器装置170b，并且如箭头190b所指示，从图3(a)到图3(c)进行了转换。在图3(c)中，图像捕获单元120已经朝向传感器装置170b放大到传感器装置170b的缩放阈值。作为其结果，传感器装置170b的传感器数据172b被示出为传感器装置170b的叠加172b(指示20.1℃的温度值)。

现在将公开相机装置110可以如何配置传感器装置170a、170b的方面。

在一些方面，执行校准过程以确定每个传感器装置170a、170b的缩放阈值。也就是说，在一些实施例中，相机装置110被配置成在校准过程期间建立缩放阈值。这样的校准过程的示例将在下面公开。

在一些方面，给定传感器装置170a、170b是否存在于图像捕获单元120的给定视场中通过参考在校准过程期间获得的存储的位置信息来列出。具体地，在一些实施例中，图像捕获单元120与在校准过程期间建立的传感器装置170a、170b具有几何关系。几何关系包括传感器装置170a、170b的依赖于缩放级别的位置信息。取决于缩放级别的位置信息指定传感器装置170a、170b在使用给定缩放级别捕获的图像中是否可见。因此，可以确认给定传感器装置170a、170b是否存在于图像捕获单元120的给定视场中，而无需对由图像捕获单元120捕获的图像进行对象识别或其他类型的图像分析。

如上所公开，传感器装置170a、170b由相机装置110配置成以取决于图像捕获单元120的缩放级别是高于还是低于缩放阈值的出现频率来提供收集的传感器数据。进一步，在这方面，相机装置110可以被配置成使用更新频率值来配置传感器装置170a、170b，以将传感器数据提供到相机装置110。具体地，在一些实施例中，相机装置110被配置成对传感器装置170a、170b进行指示：传感器装置170a、170b以哪个出现频率提供传感器数据。在一些方面，传感器装置170a、170b的更新频率值在至少两个预定值之间切换。具体地，在一些实施例中，出现频率通过在第一预定值与第二预定值之间可选择而是可变的，并且第一预定值比第二预定值产生更高的出现频率。也就是说，可以切换出现频率，使得它可选择地等于第一预定值或第二预定值，即，使得出现频率可选择地设定成高出现频率或低出现频率。可以存在选择预定值的不同方式。在一些实施例中，第一预定值由传感器装置170a、170b的唤醒时间配置给出，并且第二预定值由传感器装置170a、170b的睡眠时间配置给出。这可以是当传感器装置170a、170b是Z-wave装置时的情况，其中，唤醒时间配置由唤醒状态参数的值来限定，并且睡眠时间配置由Z-wave装置的睡眠状态参数的值来限定。一般而言，唤醒状态参数是当Z-wave处于唤醒状态时取相关值的参数，并且睡眠状态参数是当Z-wave处于睡眠状态时取相关值的参数。在这方面，唤醒状态参数的值限定了当Z-wave装置处于唤醒状态时传感器数据由传感器装置170a、170b收集并提供到相机装置110的出现频率或速率。相应地，睡眠状态参数的值限定了当Z-wave装置处于睡眠状态时传感器数据由传感器装置170a、170b收集并提供到相机装置110的出现频率或速率。换句话说，当出现频率被设定成第一预定值时，传感器装置170a、170b收集传感器数据，并且以由唤醒时间配置给定的速率将收集的传感器数据提供到相机装置110，而唤醒时间配置又可以由唤醒状态参数的值来限定。相应地，当出现频率被设定成第二预定值时，传感器装置170a、170b收集传感器数据，并且以由睡眠时间配置给定的速率将收集的传感器数据提供到相机装置110，而睡眠时间配置又可以由睡眠状态参数的值来限定。在一些示例中，当出现频率被设定成第二预定值时，不收集传感器数据，并且因此，不提供传感器数据。这是因为Z-wave装置随后处于其睡眠状态。进一步，在这方面，如上所述，当Z-wave装置进入睡眠状态时，Z-Wave装置可以不接受来自外部控制器的控制，直到下次再次唤醒。因此，可能是这样的，当传感器装置170a、170b是Z-wave装置时，传感器装置170a、170b的出现频率值的更新(即，出现频率要么从高值变为低值，要么从低值变为高值)只有当Z-wave装置不处于睡眠状态时才会生效。因此，尽管相机装置110从图像捕获单元120获取以高于缩放阈值的缩放级别捕获并且描绘传感器装置170a、170b的图像，但传感器装置170a、170b可能仍然暂时地以较低的出现频率提供收集的传感器数据，直到退出睡眠状态。

一般而言，相机装置110的任何以上公开的方面、实施例和示例也适用于下文公开的方法。

图4是图示用于可变地显示收集的传感器数据的方法的实施例的流程图。该方法由相机装置110执行。该方法有利地被提供为计算机程序1020。如上所公开，相机装置110包括图像捕获单元120、通信接口920和处理电路910，并且图像捕获单元120被配置有可变的缩放级别。

S102：图像捕获单元120捕获描绘场景160的图像。

S104：通信接口920与用于显示图像的用户界面130并且与传感器装置170a、170b进行通信，以用于从传感器装置170a、170b获得收集的传感器数据以与图像一起显示在用户界面130上。

S106：与当图像捕获单元120以低于缩放阈值的缩放级别捕获图像时相比，当图像捕获单元120以高于缩放阈值的缩放级别捕获并且描绘传感器装置170a、170b的图像时，处理电路910经由通信接口920配置传感器装置170a、170b以更高的出现频率提供收集的传感器数据。

现在将公开与如由相机装置110执行的可变地显示收集的传感器数据的进一步细节有关的实施例。

图5是图示出用于在全局或公共坐标系中建立图像捕获单元120与传感器装置170a、170b之间的关系的方法的实施例的流程图。该关系可用于了解图像捕获单元120是否指向或导向给定传感器装置170a、170b(对于给定缩放级别)。每个传感器装置170a、170b相对于图像捕获单元120的相对位置被登记并且存储在例如相机装置110的存储介质930中(步骤S202)。然后将缩放级别移向广角端，并且接收限定用于显示每个传感器装置170a、170b的传感器数据的最远距离的用户输入。将每个传感器装置170a、170b的决定的距离例如存储在相机装置110的存储介质930中，作为每个传感器装置170a、170b中的一个的相应的第一设定值(步骤S204)。从存储的装置位置计算或估计图像捕获单元120与每个传感器装置170a、170b之间的相应物理距离(每个传感器装置170a、170b中的一个)。根据图像捕获单元120的视场角信息计算缩放级别处于广角端时的视距值(apparent distance value)(步骤S206)。如果计算值大于第一设定值，则计算视距值等于第一设定值的缩放级别，并且将其存储在例如相机装置110的存储介质930中，作为传感器装置170a、170b的缩放阈值(步骤S208)。通过以上处理，计算并且存储每个传感器装置170a、170b的缩放阈值。

图6是图示出用于基于以上公开的实施例中的至少一些可变地显示收集的传感器数据的方法的实施例的流程图。相机装置110获得图像捕获单元120所使用的当前缩放级别(步骤S302)。通过参考存储的位置信息(例如，根据图5建立的位置信息)，列出存在于图像捕获单元120的对应的视场中的任何传感器装置170a、170b(步骤S304)。为列出的传感器装置170a、170b获取缩放阈值(步骤S306)。该方法根据当前缩放值是高于还是低于缩放阈值进行分支。因此，检查当前缩放值是否高于或低于缩放阈值(步骤S308)。如果当前缩放值高于缩放阈值，则将传感器装置170a、170b的更新频率值设定为高值(对应于设定短睡眠时间)(步骤S310)。传感器数据从显示在用户界面130上的传感器装置170a、170b返回(步骤S312)。如果当前缩放值低于缩放阈值，则将传感器装置170a、170b的更新频率值设定为低值(对应于设定长睡眠时间)(步骤S314)。指示传感器装置的表示(诸如图标)被显示为在用户界面130处显示的图像上的传感器装置170a、170b的位置处的叠加(步骤S316)。

图7是图示出基于图3(a)和图3(b)的实施例用于可变地显示收集的传感器数据的方法的实施例的流程图。作为开始，假设对于所考虑的给定传感器装置170b，由图像捕获单元120当前使用的缩放级别低于缩放阈值。因此，情况如图3(a)中所表示。指示传感器装置170b的表示174(诸如图标)被显示为在用户界面130处显示的图像上的传感器装置170b的位置处的叠加。假设用户180与用户界面130交互以识别传感器装置170b(例如，通过用户的手182在用户界面130上执行触摸动作或通过用户使用导航工具来选择传感器装置170b)(步骤S402)。将用户界面130上的识别位置与传感器装置170a、170b的存储图像位置进行比较，并且做出选择传感器装置170b的决定(步骤S404)。如此选择的传感器装置170b的更新频率值被设定为高值(对应于被设定的短睡眠时间)(步骤S406)。获得由传感器装置170b收集的传感器数据(步骤S408)。如此获得的传感器数据被显示为在用户界面130上的传感器装置170b的位置处的叠加172b(步骤S410)。这对应于根据箭头190a从图3(a)到图3(b)的转换。

图8是图示出基于图3(a)和图3(c)的实施例用于可变地显示收集的传感器数据的方法的实施例的流程图。如图8中，作为开始，假设对于所考虑的给定传感器装置170b，由图像捕获单元120当前使用的缩放级别低于缩放阈值。因此，情况如图3(a)中所表示。指示传感器装置170b的表示174(诸如图标)被显示为在用户界面130处显示的图像上的传感器装置170b的位置处的叠加。假设用户180与用户界面130交互以识别传感器装置170b(例如，通过用户的手182在用户界面130上执行触摸动作或通过用户使用导航工具来选择传感器装置170b)(步骤S502)。将用户界面130上的识别位置与传感器装置170a、170b的存储位置进行比较，并且做出选择传感器装置170b的决定(步骤S504)。检查传感器装置170b的当前缩放级别是否高于或低于传感器装置170b的缩放阈值(步骤S506)。如果当前缩放级别低于缩放阈值，则相机装置110指示图像捕获单元120至少放大至传感器装置170b的缩放阈值(步骤S508)。结果，如此选择的传感器装置170b的更新频率值被设定为高值(对应于被设定的短睡眠时间)(步骤S510)。获得由传感器装置170b收集的传感器数据，并且因此获得的传感器数据被显示为在用户界面130上的传感器装置170b的位置处的叠加172b(步骤S512)。这对应于根据箭头190b从图3(a)到图3(c)的转换。

图9就多个功能单元而言示意性地图示出根据实施例的相机装置110的部件。处理电路910是使用能够执行存储在(例如，采用存储介质930的形式的)计算机程序产品1010(如图10中)中的软件指令的合适的中央处理器(CPU)、多处理器、微控制器、数字信号处理器(DSP)等中的一个或多个的任何组合来提供的。处理电路910可以进一步被提供为至少一个专用集成电路(ASIC)或现场可编程门阵列(FPGA)。处理电路910可以实现计算服务器114的功能。

具体地，处理电路910被配置成使相机装置110执行如上所公开的一组操作或步骤。例如，存储介质930可以存储该组操作，并且处理电路910可以被配置成从存储介质930检索该组操作以使相机装置110执行该组操作。该组操作可以被提供为一组可执行指令。存储介质930可以实现数据存储116的功能。

因此，处理电路910由此被设置成执行如本文所公开的方法。存储介质930还可以包括例如可以是磁存储器、光存储器、固态存储器或甚至远程安装的存储器中的任何一个或组合的持久存储。相机装置110可以进一步包括至少配置用于与系统100的其他实体、功能、节点和装置进行通信的通信接口920。因此，通信接口920可以包括包含模拟和数字部件的一个或多个发射器和接收器。处理电路910例如通过向通信接口920和存储介质930发送数据和控制信号、通过从通信接口920接收数据和报告以及通过从存储介质930检索数据和指令来控制相机装置110的一般操作。省略了相机装置110的其他部件以及相关功能，以免混淆本文所呈现的概念。

图10示出包括计算机可读存储介质1030的计算机程序产品1010的一个示例。在该计算机可读存储介质1030上，可以存储计算机程序1020，该计算机程序1020可以使处理电路910和与其可操作地耦接的实体和装置(诸如通信接口920和存储介质930)执行根据本文描述的实施例的方法。计算机程序1020和/或计算机程序产品1010因此可以提供用于执行本文公开的任何步骤的装置。

在图10的示例中，计算机程序产品1010被图示为光盘，诸如CD(压缩盘)或DVD(数字多功能盘)或蓝光盘。计算机程序产品1010也可以被实施为诸如随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)或电可擦可编程只读存储器(EEPROM)的存储器，并且更具体地，诸如USB(通用串行总线)存储器的外部存储器或诸如紧凑型闪存的闪存中的装置的非易失性存储介质。因此，虽然计算机程序1020在这里示意性地示出为所描绘的光盘上的轨道，但计算机程序1020可以以适合于计算机程序产品1010的任何方式存储。

以上已经主要参考几个实施例描述了本发明构思。然而，如本领域技术人员容易理解的，在如所附专利权利要求所限定的本发明构思的范围内，除了上面公开的实施例之外的其他实施例同样是可能的。

Claims (15)

1.一种用于将收集的传感器数据与图像一起显示的系统，所述系统包括：

相机装置，包括被配置成捕获描绘场景的图像的图像捕获单元，所述图像捕获单元被配置有可变的缩放级别，并且所述相机装置被配置成与用于显示所述图像的用户界面通信；以及

传感器装置，被配置成收集传感器数据并且以可变的出现频率将收集的传感器数据提供到所述相机装置，以与所述图像一起显示在所述用户界面上；

其中，与当所述相机装置从所述图像捕获单元获取以低于缩放阈值的缩放级别捕获的图像时相比，当所述相机装置从所述图像捕获单元获取以高于所述缩放阈值的缩放级别捕获的并且描绘所述传感器装置的图像时，所述传感器装置被所述相机装置配置成以更高的出现频率提供所收集的传感器数据。

2.根据权利要求1所述的系统，其中，所述相机装置被配置成当所述相机装置获取以高于所述缩放阈值的所述缩放级别捕获的并且描绘所述传感器装置的图像时，将所述传感器数据作为叠加提供到所述图像。

3.根据权利要求1所述的系统，其中，所述相机装置被配置成当所述相机装置获取以低于所述缩放阈值的所述缩放级别捕获的并且描绘所述传感器的图像时，在所述用户界面上显示表示所述传感器装置的图示，作为所述图像的叠加。

4.根据权利要求3所述的系统，其中，所述用户界面被配置成接收用户输入，其中，所述用户输入识别所述传感器装置的所述表示，并且其中，所述相机装置被配置成响应于此而在所述用户界面上将所述传感器数据显示为所述图像的叠加。

5.根据权利要求3所述的系统，其中，所述用户界面被配置成接收用户输入，其中，所述用户输入识别所述传感器装置的所述表示，并且其中，所述相机装置被配置成响应于此而使所述图像捕获单元放大到所述缩放阈值。

6.根据权利要求1所述的系统，其中，所述传感器装置在所述场景中具有位置，其中，当所述传感器装置显示在所述用户界面上时，所述传感器装置在所述场景中的所述位置具有到所述用户界面上的位置的映射，并且其中，所述相机装置被配置成通过验证所述用户输入在所述用户界面上的位置与所述传感器装置在所述用户界面上的所述位置相对应来确定所述用户输入识别所述传感器装置的所述表示。

7.根据权利要求1所述的系统，其中，所述相机装置被配置成在校准过程期间建立所述缩放阈值。

8.根据权利要求7所述的系统，其中，所述图像捕获单元与所述传感器装置具有如在所述校准过程期间建立的几何关系，其中，所述几何关系包括所述传感器装置的依赖于缩放级别的位置信息，并且其中，取决于所述缩放级别的位置信息指定所述传感器装置在使用给定缩放级别捕获的图像中是否可见。

9.根据权利要求1所述的系统，其中，所述出现频率通过在第一预定值与第二预定值之间可选择而是可变的，并且其中，所述第一预定值比所述第二预定值产生更高的出现频率。

10.根据权利要求9所述的系统，其中，所述第一预定值由所述传感器装置的唤醒时间配置给出，并且所述第二预定值由所述传感器装置的睡眠时间配置给出。

11.根据权利要求1所述的系统，其中，所述系统包括至少两个传感器装置，每个传感器装置被配置成收集传感器数据并且以各自的可变的出现频率提供收集的传感器数据以与所述图像一起显示在所述用户界面上，并且其中，所述至少两个传感器装置中的每一个与其自己的缩放阈值相关联。

12.根据权利要求1所述的系统，其中，所述传感器装置是电池供电的Z-wave装置。

13.一种用于将收集的传感器数据与图像一起显示的相机装置，所述相机装置包括：

图像捕获单元，被配置成捕获描绘场景的图像，所述图像捕获单元被配置有可变的缩放级别；

通信接口，被配置成与用于显示所述图像的用户界面并且与传感器装置进行通信，以用于从所述传感器装置获得收集的传感器数据以与所述图像一起显示在所述用户界面上；以及

处理电路，被配置成与当所述图像捕获单元以低于缩放阈值的缩放级别捕获图像时相比，当所述图像捕获单元以高于所述缩放阈值的缩放级别捕获并且描绘所述传感器装置的图像时，经由所述通信接口配置所述传感器装置以更高的出现频率提供所收集的传感器数据。

14.一种用于将收集的传感器数据与图像一起显示的方法，所述方法由包括图像捕获单元、通信接口以及处理电路的相机装置执行，其中，所述图像捕获单元被配置有可变的缩放级别，所述方法包括：

通过所述图像捕获单元捕获描绘场景的图像；

通过所述通信接口与用于显示所述图像的用户界面并且与传感器装置进行通信，以用于从所述传感器装置获得收集的传感器数据以与所述图像一起显示在所述用户界面上；以及

与当所述图像捕获单元以低于缩放阈值的缩放级别捕获图像时相比，当所述图像捕获单元以高于所述缩放阈值的缩放级别捕获并且描绘所述传感器装置的图像时，通过所述处理电路并且经由所述通信接口配置所述传感器装置以更高的出现频率提供所收集的传感器数据。

15.一种非暂时性计算机可读存储介质，所述非暂时性计算机可读存储介质上存储有用于将收集的传感器数据与图像一起显示的计算机程序，所述计算机程序包括计算机代码，所述计算机代码当在相机装置上运行时，使所述相机装置执行根据权利要求14所述的方法。

Images