CN108140261B - 经由配对设备显示增强图像 - Google Patents

Abstract

公开了与经由配对设备显示增强图像相关联的示例。从移动设备向配对设备提供触发图像。控制配对设备来显示触发图像。移动设备扫描显示在配对设备上的触发图像。触发图像的增强图像被显示在移动设备上。

Description

经由配对设备显示增强图像

背景技术

增强现实的概念涵盖用于数字地把信息覆盖在真实世界内容之上的技术包。在各种示例中，可以结合显示器来执行这一点，用户通过该显示器观看真实世界内容的。作为说明，在用户穿戴特定数字目镜移动贯穿城镇时，数字目镜可以显示方向、广告，等等。在其他的示例中，用户可以将他们的手机指向触发图像(例如，物体、地标、图片)并且手机上的显示器可以向用户呈现覆盖触发图像的增强图像。

附图说明

关于结合附图所采取的以下详细描述可以更全面地理解本申请，其中，相同附图标记通篇指的是类似部分，并且其中：

图1图示出与经由配对设备显示增强图像相关联的示例性移动设备和配对设备。

图2图示出与经由配对设备模块显示增强图像相关联的示例性操作的流程图。

图3图示出与经由配对设备模块显示增强图像相关联的示例性操作的另一个流程图。

图4图示出与经由配对设备模块显示增强图像相关联的示例客户端系统。

图5图示出与经由配对设备模块显示增强图像相关联的另一个示例客户端系统。

图6图示出与经由配对设备模块显示增强图像相关联的示例性操作的另一个流程图。

图7图示出示例系统和方法和等同物可以在其中操作的示例计算设备。

具体实施方式

描述了与经由配对设备模块显示增强图像相关联的系统、方法和等同物。如以上讨论的，当用户例如将相机指向触发图像、使增强图像示出在与相机相关联的显示器上时，特定增强现实技术起作用。例如，用户可以将手机相机指向触发图像，并且可以在电话的对应的液晶显示器上示出增强图像。当用户能够物理地访问触发图像时，这顺利地起作用。然而，在用户周围不存在触发图像以供用户扫描的情况下，则该用户可能不能够体验增强图像。

打印触发图像的副本可以是资源密集的并且迫使用户需要访问适当质量的打印机。访问另一个设备上的触发图像的副本可能把用户联结到特定位置并且迫使用户随身携带多个网络连接设备。在触发图像将被扫描的设备上显示触发图像也可能无法起作用，这是因为在同一设备上扫描触发图像和显示它们有困难。基本上，设备可能遇到扫描本身的困难。

因此，如果移动设备与诸如智能手表等等的可穿戴设备配对，智能手表可以能够被控制以显示触发图像，允许移动设备扫描触发图像并且将增强图像示出在移动设备的显示器上。这可以允许用户方便地从触发图像集合中进行选择，使被选择的触发图像示出在配对设备上，并且把触发图像扫描到移动设备中，允许用户观看增强图像。

图1图示出与经由配对设备显示增强图像相关联的示例性移动设备和配对设备。应当理解，在图1中描绘的项是说明性示例，并且许多不同的设备等等可以根据各种示例进行操作。

图1图示出与经由配对设备模块显示增强图像相关联的示例性移动设备100、105和配对设备110、115。在这里，移动设备100和105被描绘为手机，并且配对设备110和115被描绘为智能手表——尽管也可以使用其他设备。在该示例中，移动设备100和105可以是在两个不同的时间点的处于两个不同的状态中的同一移动设备。此外，配对设备110和115也可以是两个不同的状态中的同一配对设备，该两个不同状态与分别与移动设备100和105相关联的两个时间点相对应。在该示例中，配对设备110和115被图示为围绕用户的手腕(未标明)被穿戴。

因此，移动设备100和配对设备110可以与用户从触发图像130集合中选择触发图像的时间点相关联。在该示例中，增强现实应用可以与游戏/描绘出现在各种公知地标处的外来侵入的广告的集合相关联。因此，触发图像130的集合包括若干著名的位置，包括伦敦的大本钟、埃及的大金字塔、加利福尼亚的旧金山的金门大桥，以及法国的埃菲尔铁塔。

在这里，用户已经选择了大本钟，在该示例中，如围绕该触发图像的框所指示的。此时，移动设备100可以向配对设备110传送大本钟的被选择的触发图像140。在该示例中，经由无线传输信号(例如Wi-Fi、蓝牙)传送被选择的触发图像140——尽管包括有线技术的其他技术也可以是可能的。在从移动设备100接收被选择的触发图像140之前，配对设备110可以执行一些其他功能或在空闲模式中操作。在该示例中，在从移动设备100接收被选择的触发图像140之前，配对设备110显示当前时间。

在一些示例中，接收被选择的触发图像140的动作可以使配对设备110开始显示被选择的触发图像140。在其他的示例中，配对设备110可以等待来自移动设备100的另一个信号以开始显示被选择的触发图像140。在任一情况中，在接收被选择的触发图像140之后的特定点，配对设备110可以开始显示被选择的触发图像140，把配对设备110转换到对于配对设备115所描绘的状态。

此时，移动设备105可以使用嵌入移动设备105中的相机120开始扫描被选择的触发图像140。另外，来自相机120的馈送可以替代移动设备105的显示器上的触发图像集合。当移动设备105检测到被选择的触发图像140时，移动设备105可以开始把增强图像150覆盖在移动设备105的显示器上的被选择的触发图像140上面。在该示例中，增强图像150使飞碟被示出为在大本钟周围漂浮。在其他的示例中，被选择的触发图像140可以完全地被增强图像150覆盖，使触发图像模糊。如果例如增强图像150是被选择的触发图像140的动画版本，或者如果被选择的触发图像140充当用增强图像替代被选择的触发图像140的信号，则这可以是合适的。

在其他的示例中，配对设备和移动设备可以支持附加的交互。例如，可能希望向用户通知该用户何时进入真实世界中的触发图像的物理邻近内(例如未被用户显示或打印在介质上)。在这种情况下，可能期望经由配对设备向用户通知他们邻近此类触发图像。移动设备可以能够例如通过了解触发图像的GPS坐标，或者(例如通过Wi-Fi或蓝牙)从触发图像或接近触发图像的设备接收信号来检测物理邻近。一旦检测到该邻近，移动设备可以向配对设备推送通知以建议用户他们应当搜索触发图像。

应当理解，在以下描述中，阐述许多特定细节以提供对示例的彻底的理解。然而，应当理解，可以在没有到这些特定细节的限制的情况下实践示例。在其他的实例中，可以不详细地描述方法和结构以避免不必要地使示例的描述模糊。而且，可以与彼此结合地使用示例。

如在本文所使用的“模块”包括但是不局限于存储在计算机可读介质上或者在机器，和/或每个的组合上执行的硬件、固件、软件以执行功能或者动作，和/或引起来自另一个模块、方法，和/或系统的功能或动作。模块可以包括软件控制微处理器、离散模块、模拟电路、数字电路、程序模块设备、包含指令的存储器设备，等等。模块可以包括门、门的组合或者其他电路组件。在描述了多个逻辑模块的情况下，可以把多个逻辑模块合并到一个物理模块中。类似地，在描述单个逻辑模块的情况下，可以把该单个逻辑模块分配在多个物理模块之间。

图2图示出与经由配对设备模块显示增强图像相关联的示例性方法200。方法200可以体现在存储处理器可执行的指令的非暂时性计算机可读介质上。当由处理器执行时，指令可以使处理器执行方法200。在其他的示例中，方法200可以存在于专用集成电路(ASIC)的逻辑门和/或RAM内。

方法200包括在250提供触发图像。如在本文所使用的，触发图像通常指的是能够例如通过相机检测的任何图像，其将使增强图像被示为覆盖触发图像或与触发图像相关联。尽管通常在本文的特定示例中物理物体可以充当触发图像，但在其他示例中，触发图像更具体地指的是物体的数字表示，使得数字表示能够在设备之间被传送、示出在各种设备的显示器上，并且如同触发图像已经就像实际上被找到而被扫描输入那样而被最终扫描输入并且被检测到。

可以从移动设备向配对设备提供触发图像。如在本文所使用的，移动设备可以通常是具有显示器和光学输入机构(例如，相机)的具有网络功能的设备。通常，移动设备是手机——尽管平板机或其他设备还可以充当移动设备。配对设备可以是通过无线技术(例如蓝牙)或有线技术可操作地连接到移动设备的不具有网络功能的设备(尽管配对设备可以能够经由移动设备访问网络)。配对设备具有显示器并且可以结合移动设备来操作以实现配对设备的许多功能。作为说明，诸如智能手表等等的可穿戴可以能够执行有限的计时功能，但是当与蜂窝电话配对时，能够接收并且传送文本消息，等等。

方法200还包括在260控制配对设备来显示触发图像。如以上讨论的，向配对设备提供触发图像的动作可以有效地控制配对设备来显示触发图像。在其他的示例中，分立的信号可以使配对设备来显示触发图像。分立的信号可以是期望的，以例如更好地协调触发图像、移动设备和/或配对设备的剩余资源(例如电池)等等的检测。

方法200还包括在270扫描触发图像。触发图像可以如同其被配对设备显示那样被扫描到移动设备中。可以使用嵌入在移动设备中的相机实现扫描。

方法200还包括在280显示增强图像。可以在移动设备上显示增强图像。增强图像可以包括触发图像的至少一部分。在一些示例中，增强图像可以是动画。如在本文所使用的，增强图像可以是与触发图像有关地显示的内容。增强图像可以替代触发图像、修改触发图像的一部分、覆盖触发图像的一部分，等等。在图1中图示出的示例中，可以在没有通过使地标显著地模糊的情况下示出在地标周围飞行的增强图像150中示出的飞碟。替换地，飞碟可以被示出为劫持、毁坏或以另外方式与地标相互作用。

图3图示出与经由配对设备模块显示增强图像相关联的方法300。方法300包括类似于以上参考方法200(图2)所描述的那些行动数个行动。例如，方法300包括在350向配对设备提供触发图像、在360控制配对设备来显示触发图像、在370扫描触发图像，以及在380显示增强图像。

方法300还包括在310接收触发图像集合。可以从触发图像分发器接收触发图像。触发图像分发器例如可以是分发触发图像和增强图像的服务器。可以例如由通常代表运行活动的公司来分发触发图像的公司运行该服务器。在其他的示例中，可以由向用户提供服务(例如，游戏)的公司运行服务器，并且服务器可以提供具体与该服务相关联的触发图像和增强图像。

方法300还包括在320接收增强图像。在各种示例中，也可以从触发图像分发器接收增强图像。

方法300还包括在330接收用户选择。用户选择可以是触发图像。例如，用户可以从触发图像集合中选择触发图像。这可以意味着还在用户选择之前在某个点向用户提供触发图像集合的成员。例如，可以使用移动设备的显示器来提供触发图像。

方法300还包括在340修改触发图像。触发图像可以被修改为符合配对设备的显示器。作为说明，根据配对设备的屏幕尺寸和/或其他技术属性，触发图像可能需要被重调尺寸，和或以另外方式被修改，使得配对设备能够适当地显示触发图像。例如，如果触发图像是着色的、但是配对设备能够显示灰度，则触发图像可以被重新着色以便更好地示出在配对设备上和/或被移动设备扫描。类似地，如果触发图像与在配对设备上可显示的相比具有更高的图像质量(例如基于每平方英寸的像素)，触发图像可以被修改以显示在配对设备上，同时保留当在370扫描触发图像时对移动设备进行检测重要的信息、对增强图像重要的信息，等等。

图4图示出与经由配对设备显示增强图像相关联的系统400。系统400可以存在于移动设备490内。移动设备490例如可以是手机、平板机、膝上型计算机等等。移动设备490可以包括显示器495。

系统400包括数据贮存器410。数据贮存器410可以存储触发图像集合。数据贮存器410还可以存储与触发图像集合的成员相对应的增强图像。显示器可以存在于移动设备490的存储器(未示出)中。

系统400还包括增强现实模块420。增强现实模块420可以检测触发图像。在各种示例中，增强现实模块420可以经由与移动设备490相关联的光学设备(例如，相机)(未示出)检测触发图像。在检测触发图像时，增强现实模块420可以使与触发图像相对应的增强图像示出在显示器495上。

系统400还包括预览模块430。预览模块430可以允许用户浏览存储在数据贮存器410中的触发图像集合的成员。在各种示例中，预览模块430可以允许经由移动设备490的显示器495浏览触发图像。预览模块430还可以从用户接收与被选择的触发图像相关联的输入。可以经由移动设备490的输入设备(未示出)接收该选择。输入设备例如可以是触摸屏、小键盘等等，并且可以取决于移动设备490是手机、计算机还是另一种类型的移动设备。

系统400还包括配对模块440。配对模块440可以控制配对设备499以显示被选择的触发图像。显示所选择的触发图像的配对设备可以促进增强现实模块420对被选择的触发图像的检测。这可以允许增强现实模块420使与被选择的触发图像相关联的增强图像示出在移动设备490的显示器495上。配对设备499例如可以是智能手表，或者具有显示器的另一种类型的设备。可以理想的是，尽管在结构上与移动设备490不同，配对设备可操作地被连接，使得移动设备490的光学输入设备能够捕捉在配对设备的显示器上示出了什么。控制配对设备499来显示被选择的触发图像可以包括向配对设备499传送触发图像、把触发图像修改为符合配对设备499的显示器的属性，等等。

图5图示出与经由配对设备模块显示增强图像相关联的系统500。系统500包括类似于以上参考系统400(图4)所描述的那些的若干项。例如，系统500包括数据贮存器510、增强现实模块520、预览模块430，和配对模块540来控制配对设备599。此外，系统500可以存在于具有显示器595的移动设备590内。

系统500还包括触发图像接收模块550。触发图像接收模块550可以从控制服务器(未示出)接收触发图像和对应的图像。触发图像接收模块550还可以把所接收的触发图像和对应的增强图像存储在数据贮存器510中。根据触发图像接收模块550被设计为如何进行操作，触发图像接收模块550可以在某种情况下从控制服务器下拉触发图像和增强图像，或者触发图像和增强图像可以被控制服务器周期性地推送到触发图像接收模块550。

系统500还包括地理触发模块560。地理触发模块可以检测移动设备590到触发图像的物理邻近并且向用户通知该物理邻近。可以例如基于移动设备590和/或配对设备599的GPS位置检测物理邻近。在其他的示例中，可以在从位置接近触发图像的设备(例如通过蓝牙、通过Wi-Fi)接收信号时检测检测物理邻近。在一些示例中，地理触发模块560可以经由配对设备599对用户进行报警。

图6图示出方法600。方法600可以体现在存储处理器可执行的指令的非暂时性计算机可读介质上。当指令由计算机执行时，可以使计算机执行方法600。在其他的示例中，方法600可以存在于专用集成电路(ASIC)的逻辑门和/或RAM内。在该示例中，计算机可以体现在诸如手机、平板机等等的移动设备内。

方法600包括在610接收触发图像集合和增强图像集合。可以从增强现实数据服务器接收触发图像和增强图像。增强图像集合的成员可以对应于触发图像集合的成员。

方法600还包括在620向用户提供触发图像集合的成员。方法600还包括在630从用户接收选择。选择可以与触发图像集合的构件相关联。

方法600还包括在640向配对设备传送触发图像集合的成员。这可以使配对设备显示触发图像集合的成员。配对设备例如可以是智能手表。

方法600还包括在650扫描触发图像集合的成员。触发图像集合的成员可以如同其被配对设备显示那样被扫描。

方法600还包括在660显示增强图像。可以向用户显示增强图像。在一些示例中，可以显示增强图像，使得其覆盖触发图像集合的扫描的成员。

图7图示出示例系统和方法和等同物可以在其中操作的示例计算设备。示例计算设备可以是包括通过总线730连接的处理器710和存储器720的计算机700。计算机700包括经由配对设备模块740显示增强图像。经由配对设备模块740显示增强图像可以单独或组合地执行以上参考示例系统、方法、装置，等等所描述的各种功能。在不同的示例中，经由配对设备模块740显示增强图像可以被实施为在硬件、软件、固件、专用集成电路，和/或其组合中存储处理器可执行的指令的非暂时性计算机可读介质。

也可以把指令作为暂时地存储在存储器720中并且然后被处理器710执行的数据750和/或进程760展示给计算机700。处理器710可以是各种处理器，包括双微处理器和其他多处理器体系结构。存储器720可以包括非易失性存储器(例如只读存储器)和/或易失性存储器(例如随机存取存储器)。存储器720也例如可以是磁盘驱动器、固态磁盘驱动器、软盘驱动器、磁带驱动器、闪存卡、光盘，等等。因此，存储器720可以存储进程760和/或数据750。计算机700也可以在许多配置(未示出)中与包括其他计算机、计算机、外围设备，等等的其他设备相关联。

将理解的是，提供所公开的示例的先前描述以使得任何本领域技术人员能够作出或使用本公开。对这些示例的各种修改将对那些本领域技术人员是非常明显的，并且在不背离本公开的精神或范围的情况下在本文定义的通用原理可以被应用于其他示例。因而，本公开并不意图受限于在本文示出的示例而是与符合在本文公开的原理且新颖特征的最宽泛范围一致。

Claims (13)

1.一种方法，包括：

检测移动设备到触发图像的在真实世界中的物体的物理邻近，并且经由地连接到所述移动设备的配对设备向用户报警所述物理邻近以建议所述用户搜索所述触发图像；

从所述移动设备向所述配对设备提供所述触发图像；

控制所述配对设备来显示所述触发图像；

把显示在所述配对设备上的触发图像扫描到所述移动设备中；

将所述触发图像的增强图像显示在所述移动设备上。

2.根据权利要求1所述的方法，包括从触发图像集合中接收触发图像的用户选择。

3.根据权利要求2所述的方法，包括从触发图像分发器接收所述触发图像集合。

4.根据权利要求3所述的方法，包括从所述触发图像分发器接收所述增强图像。

5.根据权利要求1所述的方法，其中，所述移动设备是蜂窝电话，并且其中，所述配对设备是智能手表。

6.根据权利要求1所述的方法，其中，所述增强图像包括所述触发图像的至少一部分。

7.根据权利要求1所述的方法，其中，所述增强图像是动画。

8.根据权利要求1所述的方法，包括修改所述触发图像以符合所述配对设备的显示器。

9.一种具有显示器的移动设备中的系统，所述系统包括：

地理触发模块，用于检测所述移动设备到触发图像的在真实世界中的物体的物理邻近，并且经由连接到所述移动设备的配对设备向用户报警所述物理邻近，以建议所述用户搜索所述触发图像；

数据贮存器，用于存储触发图像集合和对应的增强图像；

增强现实模块，用于在检测到所述触发图像时使对应的增强图像示出在所述显示器上；

预览模块，用于允许用户浏览所述触发图像并且用于从与被选择的触发图像相关联的用户接收输入；以及

配对模块，用于控制所述配对设备显示所述被选择的触发图像，以促进所述增强现实模块对所述被选择的触发图像的检测。

10.根据权利要求9所述的系统，其中，所述移动设备包括相机，并且其中，所述增强现实模块经由所述相机检测所述触发图像。

11.根据权利要求9所述的系统，包括触发图像接收模块，所述触发图像接收模块用于从控制服务器接收触发图像和对应的增强图像，并且把接收到的所述触发图像和对应的增强图像存储在所述数据贮存器中。

12.一种存储计算机可执行指令的非暂时性计算机可读介质，所述计算机可执行指令当由计算机执行时，使所述计算机：

检测所述计算机到触发图像在真实世界中的物体的物理邻近，并且经由连接到所述计算机的配对设备向用户报警所述物理邻近以建议所述用户搜索所述触发图像；

从增强现实数据服务器接收触发图像集合和增强图像集合，其中，所述增强图像集合的成员与所述触发图像集合的成员相对应；

向所述用户提供所述触发图像集合的成员；

从与所述触发图像集合的成员相关联的用户接收选择；

向所述配对设备传送所述触发图像集合的所述成员，以使所述配对设备显示所述触发图像集合的所述成员；

扫描被所述配对设备显示的所述触发图像集合的所述成员；

向所述用户显示所述增强图像，用于覆盖所述触发图像集合的被扫描的成员。

13.根据权利要求12所述的非暂时性计算机可读介质，其中，所述计算机是蜂窝电话，并且其中，所述配对设备是智能手表。

Images