CN105991843A - 模块化蜂窝电话中的远程成像 - Google Patents

Abstract

公开了模块化蜂窝电话中的远程成像。远程成像的系统和方法允许在模块化便携式电子设备环境中从基本模块(200)移除相机模块(215)，而不停止在基本模块(200)的显示器(120)上显示图像捕获会话。在一个实施例中，可以由相机模块(215)和基本模块(200)两者捕获图像数据。当所述相机模块(215)对接到所述基本模块(200)时，硬连接(205、206)连接设备(200、201)，而在图像捕获会话期间所述相机模块(215)从所述基本模块(200)解除对接时，无线连接保持设备(200、201)之间的连接。

Description

模块化蜂窝电话中的远程成像

技术领域

本公开一般地涉及移动设备配置，并且更具体地，涉及用于为模块化便携式通信设备(诸如蜂窝电话)提供远程成像功能的系统和方法。

背景技术

诸如高功能(多功能)蜂窝电话的便携式通信设备已经成为商务以及娱乐和消遣的重要工具。然而，这种设备变得越有用，用户就越有可能携带设备。考虑到这一点，对减少这些设备的重量和厚度同时不断增加这些设备的能力存在相当大的兴趣。

对此，组件的小型化和空间效率将继续发挥重要的作用。此外，设备定制可以被用于降低设备占用空间。例如，用户可能希望具有相机功能，但是不希望具有无线扬声器功能；可以提供具有前者而缺少后者的设备，并且与具有两种特征的设备相比，该设备将具有较低的重量和厚度。

然而，通常设备制造商维护大量的不同生产线以提供相同基本设备的不同配置版本是不实际的。允许用户定制完成设备的一种方法是模块化方法。在模块化的情况下，生产基本或主设备，并且基本或主设备被配置为与提供附加功能的多个辅助模块或设备兼容。

因此，继续上述示例，主设备可以包括基本计算功能和无线通信功能，但是可以不包括相机功能或无线扬声器功能。为了服务各种用户的需求，可以生产两个辅助设备；第一辅助设备可以是相机模块并且第二辅助设备可以是无线扬声器模块。通过使用耦合到适当辅助模块的主设备，每个用户能够创建满足他们需求定制的设备。

尽管本公开涉及此背景技术部分中指出的可以消除某缺点或延伸某功能的系统，但是应当理解，这种益处既不限制所公开的原理的范围也不限制所附权利要求，除非程度在权利要求中明确地指出。此外，在此背景技术部分中的技术讨论是发明人自己的观察、考虑、和想法的反映，并且不旨在以任何方式准确收录或全面总结公共领域的技术。这样，发明人明确声明此部分被接纳或假定为关于所讨论细节的现有技术。此外，本文中动作的理想过程的识别反映发明人自己的观察和想法，并且不应当被假定为指示本领域公认的可取性。

附图说明

尽管所附权利要求阐述了具有特殊性的本技术的特征，但是根据下面结合附图进行的详细描述，这些特征与其目的和优点一起可以得到最好的理解，其中：

图1是可以实现当前所公开原理的实施例的示例设备的简化示图；

图2是示出根据所公开原理的实施例的第一设备的背面和第二设备的背面的第一设备和第二设备的示意图；

图3是根据所公开原理的实施例的第一设备和第二设备的侧视图；

图4是根据所公开原理的实施例的经由第一设备的背面和第二设备的正面配合在一起的第一设备和第二设备的侧视图；

图5是根据所公开原理的实施例的用于远程成像的系统的示意图；以及

图6描绘了根据所公开原理的实施例的用于在诸如参照图5描述的设备场境下远程成像的示例性处理。

具体实施方式

在呈现所公开的原理的全面讨论之前，给出某些实施例的概述，以帮助读者理解稍后讨论。在一个实施例中，诸如蜂窝电话的模块化电子设备被配置为物理附接到第二设备，使得组合设备比两个设备中单独的任意一个具有更多功能。

在一个实施例中，第一设备可以包括显示器、触摸屏、第一互连、第一麦克风(mic)、第一图像信号处理器(ISP)、第一成像器、第一无线数据链路、电池、处理器和存储器。类似地，第二设备可以包括电池、第二互连、第二麦克风、处理器、存储器、第二ISP、第二无线数据链路以及第二成像器。

在再一实施例中，除了用作附加模块，第二设备能够结合第一设备一起使用以提供远程成像。第一设备能够基于第二设备的状态相对于第二设备配置其操作。例如，第一设备可以检测到第二设备没有物理连接到第一设备，例如，通过感测第一互连没有配合到第二互连。在这种情况下，第一设备的显示器和触摸屏经由无线数据链路为第二设备的成像器提供用户界面控制和取景器。

当两个设备先前通过它们各自的互连对接之后被解除对接时，可以在两个设备之间激活无线数据链路。先前可能已经建立无线数据链路，并且仅从低功耗待机模式激活无线数据链路。如果用户正在针对第二设备的成像器而使用第一设备上的取景器模式的同时发生解除对接的动作，则可能需要在有线连接切换到无线连接的同时由第一设备暂停实时取景器，并且一旦完成转移，则继续操作。

然而，在一个实施例中，如果在设备物理连接的同时正在捕获视频，则视频的捕获可以不间断地继续而同时取景器数据被转移到无线。这是因为捕获是由第二ISP和第二成像器控制的。在另一实施例中，可以使用来自第一成像器和第二成像器的同时图像数据以及来自第一麦克风和第二麦克风的同时音频数据，来捕获单一视频。考虑到无线时延，可以通过将延迟到添加到第一成像器的图像数据来同步图像数据。替选地，由两个成像器捕获的图像数据可以稍后经由公知的无线等待时延延迟对准。如果时延延迟是未知的，则可以通过将来自第一麦克风的音频数据与来自第二麦克风的音频数据关联来生成。

利用这些技术的部分或全部，用户能够无缝地发起将第二用作远程成像器，其视图被显示为第一设备上的取景器。考虑到此概述，并且现在转向结合附图的更详细讨论，本公开的技术被图示为在合适的计算环境中实现。以下设备的描述是基于所公开原理的实施例和示例，并且不应被视为是对于本文未明确描述的替选实施例而限制权利要求。因此，例如，尽管图1图示在其中可以实现所公开的原理的实施例的示例移动设备，但是应当理解，可以使用其它设备类型，包括但不限于个人计算机、平板计算机和其它设备。

图1的示意图示出形成在其中可以实现本公开的各方面的环境的一部分的示例性组件组110。特别是，组件组110包括在与第一设备和/或第二设备相对应的设备中可以采用的示例性组件。应当理解，取决于用户的偏好、组件的可用性、价格点和其它考虑，可以在给定实现方式中使用附加或替选组件。

在所图示的实施例中，组件110包括显示屏120、应用(例如，程序)130、处理器140、存储器150、一个或多个输入组件160(诸如语音和文本输入设施)、和一个或多个输出组件170(诸如文本和音频输出设施，例如，一个或多个扬声器)。

处理器140可以是微处理器、微计算机、专用集成电路等中的任何一个。例如，可以由来自任何期望的系列或制造商的一个或多个微处理器或控制器来实现处理器140。类似地，存储器150可以驻留在与处理器140相同的集成电路上。另外地或替选地，可以经由网络，例如经由基于云的存储来访问存储器150。存储器150可以包括随机存取存储器(即，同步动态随机存取存储器(SDRAM)、动态随机存取存储器(DRAM)、RAMBUS动态随机存取存储器(RDRM)或任何其它类型的随机存取存储器设备)。另外或替选地，存储器150可以包括只读存储器(即，硬盘驱动器、闪速存储器或任何其它期望类型的存储器设备)。

由存储器150存储的信息可以包括与一个或多个操作系统或应用相关联的程序代码以及信息数据，例如，程序参数、处理数据等。操作系统和应用通常经由存储在非暂时性计算机可读介质(例如，存储器150)中的可执行指令实现，以控制电子设备的基本功能。例如，这种功能可以包括各种内部组件和存储之间的交互以及向存储器150和从存储器150检索应用和数据。

进一步就应用130而言，这些通常利用操作系统提供更特定的功能，诸如文件系统服务以及处理存储在存储器150中的受保护和不受保护的数据。虽然许多应用可以提供用户设备110的标准或要求的功能，但是在其它情况下，应用提供可选的或者专门的功能，并且可以由第三方供应商或设备制造商供应。

最终，就例如程序参数和处理数据的信息性数据而言，可以通过操作系统或应用来引用、操纵、或写入该不可执行信息。例如，这种信息性数据可以包括制造期间被编程到设备中的数据、由设备创建或由用户添加的数据、或上载到在其运行期间与设备进行通信的服务器或其它设备，从所述服务器或其他设备下载或以其他方式访问所述服务器或其他设备的任何各种类型的信息。

具有组件组110的设备可以包括软件和硬件网络组件180，以允许通信至设备或从设备通信。虽然可以另外地或替选地支持有线网络，但是这种网络组件180将通常提供无线网络功能。

在一个实施例中，可以包括诸如电池或燃料电池的电源190用于向设备及其组件110提供电力。内部组件110的全部或部分通过一个或多个共享或专用内部通信链路195(诸如内部总线)的方式彼此通信。

在一个实施例中，设备110被编程使得处理器140和存储器150与设备110的其它组件交互以执行某些功能。处理器140可以包括或实现各种模块并执行用于发起不同活动的程序，诸如启动应用、转移数据、以及通过各种图形用户界面对象来切换(例如，通过链接到可执行应用的各种显示图标来切换)。

返回到图2，该图呈现了第一设备和第二设备的视图，示出了根据所公开的原理的实施例的第一设备的背面和第二设备的背面。在图示的示例中，第一设备200的背面218包括一个或多个对准特征203，一个或多个对准特征203被配置并放置到与第二设备201的背面221上的配合特征225配合。

另外，在图示的实施例中，第一设备200的背面包括连接器阵列205。连接器阵列205被定位和配置为与第二设备201的背面221上的配合连接器阵列206配合。在图示的示例中，第一设备200的背面还包括内置相机207和关联的闪光灯209，应当理解，相比于图示的实施例，第一设备200可以包括不同特征或附加特征。

在图示的示例中，第二设备201提供至少一个增强相机功能。为此，第二设备201在其正面包括相机215(参见图4)和关联的闪光灯。另外，在图示的示例中，使用第二设备201的相机215不排除使用第一设备200的相机207。这样，在第二设备201中设置孔219，以允许第一设备的相机207的视线。

图3是尚未配合在一起的第一设备200和第二设备201的侧视图。继续，图4是根据所公开的原理的实施例的在第一设备200的背面和第二设备201的正面配合在一起的第一设备200和第二设备201的侧视图。如可以看到的，当配合时，设备200、201物理接触。应当注意，第二设备201的不同实施例可能在厚度和形状上彼此显著不同。

在讨论经由模块化设备的远程成像的示例性处理之前，给出第一和第二设备200、201的拓扑的示意图示以帮助理解后述的处理。对此，图5的示意图图示了符合所公开的原理的实施例的远程成像的模块化设备平台的突出方面。

图示的示意图包括第一设备200和第二设备201。本领域的技术人员将理解，虽然便携式通信设备有必要包括很多零件，但是在所图示的示意图中仅示出某些元件，以增强清晰度。

如所图示的第一设备200包括诸如图1的处理器140的处理器以及诸如图1的显示器120的显示器或观察器。另外，第一设备200包括先前参照图2讨论的互连阵列205。也如上面提到的，第一设备200可以包括麦克风507和ISP 509。最后，也包括无线通信设施，诸如RF(射频)电路和天线(统称501)，作为第一设备200的一部分。

类似地，第二设备201包括至少一个处理器505、相机215(例如，数字相机)、互连阵列223(如参照图2描述)、以及无线通信装备(例如，RF电路和天线503(统称))。此外，麦克风511和ISP 513被提供作为第二设备201的一部分。第二设备201的互连阵列223适配于且被配置为与设备1的互连阵列205物理地配合并电连接。类似地，第二设备201的RF电路和天线503适配于与第一设备200的RF电路和天线501无线地通信。在每个设备200、201中，经由从非暂时性计算机可读介质读取的计算机可执行指令的计算机执行来配置相应的处理器140、505，以在设备200、201之间选择有线或无线介质用于通信。

在操作中，如将在下面更详细地描述，当第一设备200和第二设备201配合，使得第一设备200的互连阵列205和第二设备201的互连阵列223直接电接触，第一设备100的处理器140致使第一设备200的显示器120显示由相机215捕获的并由第二设备201的ISP 513处理的图像。以这种方式，第一设备200的显示器120充当第二设备201的相机215的取景器或监视器。在替选实施例中，在图像数据首先经第二设备201的ISP 513处理之后，或者未经第二设备201的ISP 513的任何处理，第一设备200的ISP 509处理从第二设备201接收的图像数据。

当第一设备200和第二设备201分离时，第一设备200的互连阵列205和第二设备201的互连阵列223不再电接触。在此状态下，第一设备100的处理器140与第二设备201的处理器505合作，使得第二设备201的RF电路和天线503将图像数据从第二设备201的相机215传送到第一设备200的RF电路和天线501。在此状态下，第二设备201的ISP 513可以在传输之前处理图像数据。然后，第一设备200的处理器140致使所接收的图像数据显示在第一设备200的显示器120上。

第一设备200的麦克风507和第二设备201的麦克风511可以用于在配合和未配合的配置下结合所捕获的视频数据来捕获音频数据。因此，例如，当设备配合时，第一设备200的麦克风507和第二设备201的麦克风511可以合作以捕获链接到单个所捕获视频的音频。当设备200、201分离时，第二设备201可以通过无线链路向第一设备200传送来自麦克风511的音频数据和来自相机215的图像数据二者。

此外，如上面简要提到的，麦克风507、511可以用于同步在两个设备200、201上同时捕获的图像数据。在一个实施例中，通过同步音频信号以同步视频信号来实现。特别是，尽管从不同瞭望点得到的所捕获的视频数据通常明显不同，在不同瞭望点的场景同时捕获的音频信号将仅是彼此的缩放版本。因此，同步所捕获的音频相当简单。

继续，图6描绘了在诸如参照图5描述的设备场境下远程成像的示例性处理600。虽然偶尔参照所示出的特定架构描述处理600，本领域的技术人员将理解，可以替代地使用其它类似的架构。

在图示的处理600的阶段601，设备200、201没有配合在一起，且没有彼此通信。然后，在阶段603，设备200、201对接或放置在一起，使得相应互连阵列205、223处于电接触。第一设备200的处理器140检测设备200、201的链接，并且与第二设备201进行同步操作。然后，在阶段605，当用户发起图像捕获操作时，第二设备201的相机215捕获图像数据，在阶段607，该图像数据由第二设备201的ISP 513处理，并且经由相应互连阵列205、223传递到第一设备200。然后，在处理600的阶段609，第一设备200的处理器140致使所捕获的图像数据由第一设备200的显示器120显示。

在阶段611，在图像捕获处理正在进行的同时第一设备的处理器140和第二设备201的处理器505检测设备200、201已经物理分离，例如，通过检测互连阵列205、223的断开连接。作为响应，在阶段613，第一设备200的处理器104经由设备200、201的相应RF电路和天线501、503激活到第二设备的无线连接。

在阶段615，第二设备200的处理器505致使第二设备201的ISP513处理随后捕获的图像数据，在阶段617，将所处理的图像数据转移到第一设备200。在阶段619，第一设备200的处理器104在第一设备200的显示器120上显示所捕获、经处理并被传送图像数据。以这种方式，设备200、201是否配合在一起，第一设备200的显示器120都充当第二设备201的相机215的取景器。当设备200、201没有配合在一起时，这导致在远程成像能力。

在一个实施例中，第一设备200还包括用户接口，通过该用户接口，用户可以相对于相机215控制第二设备201的操作。在图像(视频)捕获期间，麦克风507、511中的一个或两个可以是活动的。

事实上，当在本地和远程成像正在同时进行时，在一个实施例中，麦克风收集的音频数据不仅作为媒体使用，而且用于同步两个视频数据流。更具体地，因为在其它数据流经历无线传输的同时本地生成一个数据流，所以远程捕获的音频/视频数据通常相对于本地捕获的音频/视频数据稍微延迟。此相对延迟被称为无线时延。

可以用各种方法来使用同时捕获的音频数据消除无线时延。例如，可以通过比较流之中的音频数据确定延迟，并且然后，将所确定的延迟添加到本地捕获的音频/视频数据。替选地，图像和/或音频数据可以经由公知的无线时延同步。

应当理解，本文已经公开用于远程成像的系统和方法。然而，鉴于可以应用本公开的原理的许多可行实施例，应当认识到，本文中参照附图所描述的实施例仅是说明性的，不应被视为限制权利要求的范围。因此，本文描述的技术构想了所有这样的实施例可以落入以下权利要求及其等同物的范围之内。

Claims (20)

1.一种用于在第一便携式电子设备处远程观看在第二便携式电子设备处捕获的视觉数据的方法，所述第二便携式电子设备能对接到所述第一便携式电子设备，其中，所述第二便携式电子设备包括成像器并且所述第一便携式电子设备包括显示器，所述方法包括按顺序的下述步骤：

在所述第一便携式电子设备和所述第二便携式电子设备对接在一起使得它们传导地交换数据的同时，检测用户在所述第一便携式电子设备处发起视觉数据捕获处理；

在所述第一便携式电子设备和所述第二便携式电子设备对接在一起的同时，在所述第一便携式电子设备处从所述第二便携式电子设备接收视觉数据，并且在所述第一便携式电子设备的所述显示器上显示所捕获的视觉数据；

在所述第一便携式电子设备处检测到所述第一便携式电子设备和所述第二便携式电子设备已经变为解除对接并且不再能够传导地交换数据；

激活所述第一便携式电子设备和所述第二便携式电子设备之间的无线连接；以及

在所述第一便携式电子设备处经由所述无线连接从所述第二便携式电子设备接收视觉数据，并且在所述第一便携式电子设备的所述显示器上显示所接收的视觉数据。

2.根据权利要求1所述的方法，其中，所述视觉数据包括视频数据。

3.根据权利要求2所述的方法，其中，所述视频数据还包括音频数据。

4.根据权利要求1所述的方法，其中，所述视觉数据包括静止图像数据。

5.根据权利要求1所述的方法，其中，所述第一便携式电子设备包括第一图像信号处理器ISP并且所述第二便携式电子设备包括第二ISP，以及其中，从所述第二便携式电子设备接收视觉数据包括：接收由所述第二ISP处理的视觉数据。

6.根据权利要求5所述的方法，其中，从所述第二便携式电子设备接收视觉数据还包括：经由所述第一ISP处理所接收的视觉数据。

7.根据权利要求1所述的方法，其中，所述第一设备还包括成像器，以及其中，所述方法还包括：在所述第一便携式电子设备处经由所述无线连接从所述第二便携式电子设备接收第二视频数据流的同时，在所述第一便携式电子设备处经由所述第一便携式电子设备的所述成像器捕获第一视频数据流。

8.根据权利要求7所述的方法，其中，两个便携式电子设备都包括麦克风，以及其中，每个视频数据流包括音频数据。

9.根据权利要求8所述的方法，还包括：经由每个视频数据流中包含的音频数据来同步所述视频数据流。

10.一种用于远程观看视频的便携式电子设备，包括：

显示屏；

互连阵列，所述互连阵列被配置为传导地配合到分离便携式电子设备的互连阵列；

无线连接模块，所述无线连接模块被配置为与和所述分离便携式电子设备相关联的无线连接模块无线地通信；以及

处理器，所述处理器被配置为：在所述分离便携式电子设备经由所述互连阵列连接到所述便携式电子设备的同时，检测用户发起视频数据捕获处理，经由所述互连阵列从所述分离便携式电子设备接收视觉数据，在所述显示器上显示所述视觉数据，检测到所述分离便携式电子设备不再经由所述互连阵列连接到所述便携式电子设备，激活所述便携式电子设备和所述分离便携式电子设备之间的无线连接，以及经由所述无线连接从所述分离便携式电子设备接收视觉数据并且在所述显示器上显示所接收的视觉数据。

11.根据权利要求10所述的便携式电子设备，其中，所述视觉数据包括视频数据。

12.根据权利要求11所述的便携式电子设备，其中，所述视频数据还包括音频数据。

13.根据权利要求10所述的便携式电子设备，其中，所述视觉数据包括静止图像数据。

14.根据权利要求10所述的便携式电子设备，其中，经由所述互连阵列接收视觉数据包括：接收已经由图像信号处理器ISP处理的视觉数据。

15.根据权利要求14所述的便携式电子设备，还包括ISP，其中，所述处理器还被配置为：经由其ISP处理经由所述无线连接从所述分离便携式电子设备接收的视觉数据。

16.根据权利要求11所述的便携式电子设备，还包括成像器，以及其中，所述处理器还被配置为：在经由所述无线连接接收第二视频数据流的同时，经由所述成像器捕获第一视频数据流。

17.根据权利要求16所述的便携式电子设备，其中，所述第一视频数据流和所述第二视频数据流包括音频数据。

18.根据权利要求17所述的便携式电子设备，其中，所述处理器还被配置为：经由每个视频数据流中包含的音频数据，来同步所述第一视频数据流和所述第二视频数据流。

19.一种远程成像系统，包括：

第一便携式电子设备，所述第一便携式电子设备具有第一处理器、显示器、和第一传导连接器阵列；以及

第二便携式电子设备，所述第二便携式电子设备具有处理器、相机、图像信号处理器ISP、和第二传导连接器阵列；

其中，所述第一处理器被配置为：当所述第一传导连接器阵列和所述第二传导连接器阵列连接时，显示由所述相机捕获的且由所述ISP处理的视频数据，以及当所述第一传导连接器阵列和所述第二传导连接器阵列在已经连接之后在图像捕获操作期间断开连接时，显示由所述相机捕获的且由相同ISP处理的视频数据。

20.根据权利要求19所述的远程成像系统，其中，所述第一便携式电子设备还包括第一无线连接模块并且所述第二便携式电子设备还包括第二无线连接模块，以及其中，所述第一处理器还被配置为：当所述第一传导连接器阵列和所述第二传导连接器阵列在已经连接之后在图像捕获操作期间断开连接时，支持用于在所述第一无线连接模块和第二无线连接模块之间传送所述视频数据的无线连接。