CN105637564B - 产生未知对象的扩增现实内容 - Google Patents

Abstract

本文描述的技术提供一种用于定义现实对象的虚拟内容的方法，所述对象在针对扩增现实AR环境应用开发时为未知的或未识别的。举例来说，在AR应用开发时，应用开发者可能不知道移动装置可操作的情境且因此不知道所述AR应用可能遇到的现实对象的类型或等级以及现实对象的数目。在一个实施例中，所述移动装置可检测来自物理场景的未知对象。所述移动装置可随后基于与所述未知对象相关联的物理属性(如高度、形状、大小等)将对象模板与所述未知对象相关联。所述移动装置可使用所述对象模板的至少一个显示特性呈现处于所述未知对象的姿势的显示对象。

Description

产生未知对象的扩增现实内容

技术领域

本发明大体涉及扩增现实环境，且更确切地说涉及现实世界周围环境的基于机器的辨识。

背景技术

在扩增现实(AR)环境中，用户可检视人工或虚拟图形与用户的自然周围环境的集成。在AR的一些较早实施方案中，用户可经由(例如)扩增现实护目镜参看任意显示在用户的自然周围环境当中或内的图形。举例来说，随机蝴蝶的图形可沿着AR护目镜的视线飞行，同时用户继续检视他的或她的自然周围环境，而不管所述蝴蝶与用户正自然地查看的任何事物是否具有任何关联性。在AR的较复杂实施方案中，用户可能够将AR特征或图形直接应用到用户的自然周围环境的对象或结构。举例来说，可使用AR环境中的不同颜色或不同物理属性来识别及呈现桌子上的对象。然而，在运行时间期间扩增对象的现实需要使用所需特征识别及再现环境中的对象。

将AR限制为已知及识别对象减少了AR应用的适用性。本文描述的技术解决了此类及其它问题。

发明内容

本文描述的技术提供一种用于定义现实对象的虚拟内容的方法，所述对象在针对扩增现实(AR)环境应用开发时为未知的或未识别的。举例来说，在AR应用开发时，应用开发者可能不知道移动装置和AR应用可操作的情境且因此不知道AR应用可能遇到的现实对象的类型或等级以及现实对象的数目。其它技术描述用于在AR应用的运行时间期间显示虚拟内容而非现实对象的方法。

本文描述用于使用扩增现实环境的未知对象的虚拟内容构建物理场景的数字表示的技术。在一个方面中，在运行时间，移动装置或移动装置的组件获得关于物理场景的信息。举例来说，移动装置可检测所述场景具有平面表面。移动装置可检测及选择一或多个未知对象且确定与未知对象相关联的姿势及其它属性。移动装置可随后基于与未知对象相关联的属性(如高度、形状、大小等)将对象模板与未知对象相关联。在本发明的一个方面中，可由开发者使用编辑模式的三维(3D)制作工具来产生对象模板。移动装置可使用对象模板的至少一个特性呈现处于未知对象的姿势的显示对象。举例来说，如果对象模型的颜色特性为红砖色且结构特性为建筑物，那么移动装置可呈现红砖色建筑物而非未知对象。

一种用于构建物理场景的数字表示的实例方法可包含从物理场景选择未知对象，确定与所述未知对象相关联的至少一个物理属性，基于与所述未知对象相关联的至少一个物理属性选择表示与所述未知对象不同的对象的对象模板，以及使用与所述对象模板相关联的至少一个显示特性在自所述物理场景的未知对象的位置处呈现物理场景的数字表示中的显示对象。在某些方面中，呈现所述显示对象可包括在表示待显示于移动装置的显示屏幕上的物理场景的图像上呈现所述显示对象。

在所述方法的某些方面中，与未知对象相关联的所述至少一个物理属性包括未知对象的形状、未知对象的大小、未知对象的位置、未知对象的姿势、未知对象相对于其它对象的出现次序、与显示对象的呈现相关联的应用模式以及其它未知对象的属性中的一或多者。在所述方法的某些方面中，与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。图形特性可包含颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

在所述方法的某些实施方案中，由开发者使用编辑接口在应用开发时选择对象模板的特性。在一个实施方案中，所述未知对象是多个未知对象中的一个，且所述对象模板与来自多个未知对象的多个未知对象相关联。在本发明的某些方面中，所述对象模板可为多个对象模板中的一个。

用于构建物理场景的数字表示的实例移动装置可包含用于获取物理场景信息的相机、用于存储信息的存储器以及用于从所述物理场景选择未知对象、确定与所述未知对象相关联的至少一个物理属性、基于与所述未知对象相关联的所述至少一个物理属性选择表示与所述未知对象不同的对象的对象模板以及使用与所述对象模板相关联的至少一个显示特性在自所述物理场景的未知对象的位置处呈现所述物理场景的数字表示中的显示对象的处理器。在某些实施方案中，呈现所述显示对象可包括在表示待显示于移动装置的显示屏幕上的所述物理场景的图像上呈现所述显示对象。

在所述移动装置的某些实施方案中，与所述未知对象相关联的所述至少一个物理属性可包含未知对象的形状、未知对象的大小、未知对象的位置、未知对象的姿势、未知对象相对于其它对象的出现次序、与所述显示对象的所述呈现相关联的应用模式以及其它未知对象的属性中的一或多者。在所述移动装置的某些实施方案中，与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。图形特性可包含颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

在所述移动装置的某些实施方案中，由开发者使用编辑接口在应用开发时选择对象模板的特性。在一个实施方案中，所述未知对象是多个未知对象中的一个，且所述对象模板可与来自所述多个未知对象的多个未知对象相关联。在本发明的某些方面中，所述对象模板可为多个对象模板中的一个。

一种实例非暂时性计算机可读存储媒体，其中所述非暂时性计算机可读存储媒体包括可由处理器执行的指令，所述指令可包含用以进行以下操作的指令:从物理场景选择未知对象；确定与所述未知对象相关联的至少一个物理属性；基于与所述未知对象相关联的所述至少一个物理属性选择表示与所述未知对象不同的对象的对象模板；以及使用与所述对象模板相关联的至少一个显示特性在自所述物理场景的所述未知对象的位置处呈现所述物理场景的数字表示中的显示对象。在某些实施方案中，呈现所述显示对象可包括在表示待显示于移动装置的显示屏幕上的所述物理场景的图像上呈现所述显示对象。

在所述实例非暂时性计算机可读媒体的某些方面中，与所述未知对象相关联的所述至少一个物理属性可包含未知对象的形状、未知对象的大小、未知对象的位置、未知对象的姿势、未知对象相对于其它对象的出现次序、与所述显示对象的呈现相关联的应用模式以及其它未知对象的属性中的一或多者。在所述非暂时性计算机可读媒体的某些实施方案中，与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。图形特性可包含颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

在所述非暂时性计算机可读媒体的某些实施方案中，由开发者使用编辑接口在应用开发时选择所述对象模板的特性。在一个实施方案中，所述未知对象是多个未知对象中的一个，且所述对象模板可与来自所述多个未知对象的多个未知对象相关联。在某些方面中，所述对象模板可为多个对象模板中的一个。

实例设备可包含用于自物理场景选择未知对象的装置；用于确定与所述未知对象相关联的至少一个物理属性的装置；用于基于与所述未知对象相关联的所述至少一个物理属性选择表示与所述未知对象不同的对象的对象模板的装置；以及用于使用与所述对象模板相关联的至少一个显示特性在自所述物理场景的所述未知对象的位置处呈现所述物理场景的数字表示中的显示对象的装置。在某些方面中，呈现所述显示对象可包括在表示待显示于移动装置的显示屏幕上的物理场景的图像上呈现所述显示对象。

在所述设备的某些实施方案中，与所述未知对象相关联的所述至少一个物理属性包括所述未知对象的形状、所述未知对象的大小、所述未知对象的位置、所述未知对象的姿势、所述未知对象相对于其它对象的出现次序、与所述显示对象的所述呈现相关联的应用模式以及其它未知对象的属性中的一或多者。在所述设备的某些方面中，与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。图形特性可包含颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

在所述设备的某些实施方案中，由开发者使用编辑接口在应用开发时选择对象模板的特性。在一个实施方案中，所述未知对象是多个未知对象中的一个，且所述对象模板可与来自所述多个未知对象的多个未知对象相关联。在某些方面中，所述对象模板可为多个对象模板中的一个。

前文已经相当广泛地概述了实例的特征和技术优点，以便使以下具体实施方式可以得到更好理解。将在下文中描述另外的特征及优点。所揭示的概念和具体实例可以容易地用作用于修改或设计用于执行本发明的相同目的的其它结构的基础。此类等效构造不脱离所附权利要求书的精神和范围。当结合附图考虑时，关于本发明的组织和操作方法的被认为是本文中所揭示的概念的特性的特征与相关联的优点一起将从以下描述得到更好理解。图式中的每一者都仅出于说明和描述的目的提供且并不提供为对权利要求书的限制的界定。

附图说明

以实例的方式说明本发明的方面。参考图式提供以下描述，其中相同参考标号始终用以指代相同元件。虽然本文中描述一或多个技术的各种细节，但其它技术也是可能的。在一些情况下，以框图形式展示熟知结构及装置以便促进描述各种技术。

可参照说明书及图式的剩余部分来实现对由本发明提供的实例的性质及优点的进一步理解，其中贯穿若干图式使用类似参考标号来指代类似组件。在一些情况下，子标签与参考标号相关联以表示多个类似组件中的一者。当在无说明书的情况下将参考标号与现有子标签进行参考时，参考标号是指全部此类相似组件。

图1说明可经配置以实施本发明的一或多个方面的实例计算装置。

图2A说明根据本发明中描述的一或多个实施例的用于产生编辑器模式的一或多个对象模板的接口的实例视觉表示。

图2B说明根据本发明中描述的一或多个实施例的在运行时间呈现的显示对象的实例。

图3A说明根据本发明的一个实施例的在第一时间的物理场景的实例数字表示。

图3B说明根据本发明中描述的一个实施例的在第二时间自图3A的物理场景的实例数字表示。

图4为根据本发明中描述的实施例的对象模板的实例表示。

图5说明根据本发明中描述的某些实施例的用于选择物理属性限定符的物理属性的实例用户接口。

图6展示根据本发明中描述的某些实施例的用于选择显示特性的实例用户接口。

图7说明根据本发明中描述的某些实施例的在用于在运行时间将图像呈现于显示器上的移动装置中实施的实例模块的方块图。

图8A说明根据本发明中描述的一或多个实施例的以编辑器模式直观表示的两个对象模板。

图8B说明由耦合至未对其进行修改的移动装置的相机获取的物理场景的输入图像。

图8C说明可显示于移动装置的显示屏幕上的扩增现实呈现图像的实例。

图9说明根据本发明中描述的一或多个实施例的用于产生编辑模式的对象模板的方法的流程图。

图10说明根据本发明中描述的一或多个实施例的通过执行一方法来呈现显示图像的流程图。

图11说明可在其中实现一个或多个实施例的计算系统的实例。

具体实施方式

现将相对于形成本文的一部分的附图来描述若干说明性实施例。虽然下文描述可在其中实施本发明的一或多个方面的特定实施例，但可使用其它实施例，且可在不脱离本发明的范围或所附权利要求书的精神的情况下进行各种修改。

移动扩增现实涉及现实对象的检测和追踪，以及呈现相对于这些现实对象的虚拟内容。可能需要知道对象的姿势和形状以建立现实内容与虚拟内容之间的有说服力的交互。如果现实对象可被识别为在应用开发时已知的对象，那么应用开发者可使用已知现实对象的已知几何形状和三维(3D)制作工具来建立复杂的扩增现实体验。举例来说，开发者可建立已知现实对象的虚拟内容(如图形、动画、碰撞检测等)。如果对象为已知的，那么可使用3D制作工具中的此对象的虚拟表示来模拟与现实对象的所有交互。举例来说，如果应用开发者知道物理场景可能为厨房主桌，那么开发者可定义茶杯的虚拟内容特性。在所述应用识别茶杯的运行时间时，应用可使用由茶杯的开发者定义的虚拟内容。

应用开发者或开发者可指用于建立编辑器模式的应用的编辑工具(如3D制作工具)的用户。编辑器模式可指其间由应用开发者开发应用的编辑工具的模式。编辑工具可包含(但不限于)用于开发应用的用户接口。在一个实施方案中，开发者可使用由用于开发应用的编辑器模式的编辑工具提供的用户接口。所述用户接口可为图形或命令接口。

在可能处于更迟时间点的运行时间，以编辑器模式开发的应用可能由相同或不同装置上的相同或不同用户执行。运行时间可指在以编辑器模式的应用开发之后的更迟时间点的指令或与应用相关联的对象代码的执行。在运行时间，应用可与装置的实时环境相互作用。

本文描述的技术提供一种用于定义现实对象的虚拟内容特性的方法，所述现实对象在应用开发时为未知的或未识别的(下文称为未知对象)。举例来说，在AR应用开发时，应用开发者可能不知道移动装置和在移动装置上执行的AR应用可操作的情境且因此不知道所述AR应用可能遇到的现实对象的类型或等级以及现实对象的数目。即使所述情境为已知的，AR应用仍可遇到未知对象。在不知道对象的物理属性(如现实对象的形状、大小、相对姿势和相对定位)的情况下，开发者可能难以产生在运行时间可能遇到的未知对象的虚拟内容。此外，当移动装置和耦合至移动装置的相机移动穿过物理场景时，从移动装置的角度检视的对象的尺寸(如形状、大小或姿势)可随时间变化。

在一些实施方案中，场景的合理抽象可用于表示物理场景。举例来说，在编辑器模式中，开发者可使用顶部有对象的平面表面来工作。在运行时间，移动装置可确定所述物理场景可表示为平面表面且使用由开发者开发的虚拟内容来将场景的数字表示呈现在移动装置的显示屏幕上。虽然顶部具有对象的平面表面仅为场景的实例抽象，但平面表面对于室内AR应用(例如，桌子和地板)来说是非常普遍的。尽管可使用平面表面来描述本发明的实施例和图式，但还可在不脱离本发明的范围的情况下使用场景的其它表示。

在一个实施例中，3D制作工具将对象模板提供给开发者，其表示未知对象的模型。所述开发者可定义对象模板的显示特性(如图形和动画)。对象模板的图形特性可包含(但不限于)颜色、大小、纹理、形状、碰撞检测、遮挡和/或透明度中的一或多者。此外，不同对象模板还可经定义且添加至编辑器模式的场景的表示。

在编辑器模式中，工具还可提供用于定义用于在运行时间将对象模板与未知对象相关联的一或多个限定符的接口。举例来说，在编辑器模式中，开发者可定义对象模板的特性以看起来像颜色为红砖色的建筑结构。此外，开发者可定义一限定符，所述限定符可指示是否可将对象模板应用到在运行时间检测到的未知对象。举例来说，可以编辑器模式定义所述限定符，以使得如果所述未知对象为特定大小和形状，那么红砖色建筑物的对象模板可用于未知对象。在一个实施方案中，在运行时间，对象模板还可经定义，以使得如果限定符符合对象模板，那么呈现的图像可显示对象模板(在一些情况下缩放到未知对象的大小)而非现实未知对象。

如上所述，对象模板的额外特性可为碰撞机。通常，可通过定义在场景中表示的每个对象的碰撞机来实现碰撞检测。在运行时间，碰撞机特性可基于与未知对象相关联的对象模板的定义来自动适应未知对象。举例来说，定义刚性建筑物的对象模板的碰撞机特性可能不同于定义瀑布式装置的特性。在一个实施方案中，可使用未知对象的网格(即几何定义)来计算碰撞。在另一实施方案中，可使用针对对象的形状定义的限界框来计算碰撞。

在运行时间，未知对象可与使用编辑器工具在开发时开发的对象模板中的一个相关联。如上所述，移动装置可基于针对未知对象识别的物理属性将未知对象与对象模板相关联。在一个实施方案中，对象模板可具有与其相关联的限定符，其与未知对象的经识别的物理属性相配。未知对象的物理属性可包含(但不限于)未知对象的形状、未知对象的大小、未知对象的位置、未知对象的姿势、未知对象相对于其它对象的出现次序、与显示对象的呈现相关联的应用模式以及其它未知对象的物理属性中的一或多者。如果满足所述限定符且对象模板与未知对象相关联，那么可在物理场景的未知对象的三维(3D)姿势处以扩增现实检视实现、定位及呈现对象模板(包含其虚拟内容)。

在一个实施方案中，在编辑器模式中，由于在开发时可能不知道现实对象的形状，因此对象模板可显现为3D方框或所述物质的任何其它形状。在另一实施方案中，一旦定义了对象模板的显示对象特性，对象模板即可成型为预定义形状。举例来说，如果针对红砖色房子选择显示对象特性，那么对象模板可变形为表示红砖色房子的形状和颜色。在一个实施方案中，在运行时间，3D方框可被现实(但未知的)对象的几何形状替换。可在3D方框上的编辑器中定义和预览未知对象的呈现设置。可能的显示对象特性可能是不呈现对象，因为所述对象可能仅用于碰撞。

在一个实施例中，可使用局部坐标系来定义每个对象模板，其中可定义特定对象的所有虚拟内容。在运行时间，可将局部坐标系移动或转换至针对未知对象的3D姿势的坐标系。在一些实施方案中，可能基于未知对象的大小缩放虚拟内容或使用原始比例。

在某些实施例中，由于现实对象的数目和形状在由耦合至移动装置的相机察觉时发生变化，因此使用对象模板的显示对象自动更新。举例来说，由于移动装置的用户移动所述移动装置，因此显示对象的形状和大小可基于移动装置的姿势的变化而变化。另外，在一些实施方案中，应用可基于某些触发(如新对象的检测或现有对象的修改)接收事件。此情况可允许开发者基于运行时间因素的预测在开发期间定制交互。举例来说，在AR游戏中，新对象可表示障碍物，且用户可在检测到新障碍物时使用话语片段提醒。

本发明的实施例允许开发者建立未知对象的编辑器模式的扩增现实内容。在运行时间，在移动装置上执行的AR应用可基于未知对象的物理属性将未知对象与对象模板相关联。本发明的实施例允许包含扩增现实应用中的现实世界但未知的对象，即使所述应用仅可在运行时间检测未知对象的一些物理属性。

使用本发明的实施例在移动装置上执行的AR应用的非限制实例情境可包含物理场景(如在桌子上具有不同形状和大小的多个对象的会议桌)的数字表示的转换。可使用移动装置的显示屏幕上的根据本发明的实施例的处理器由移动装置的前置相机获取且修改及呈现所述物理场景。在一个实施例中，在移动装置上运行的AR应用使得移动装置将物理场景转换为在移动装置上数字表示。AR应用的实例可为使用跨越在移动装置的屏幕上显示的物理场景的数字表示的汽车的游戏。

根据本发明的一些实施例，在以上实例中，来自现实世界的未知对象可转换为在移动装置屏幕上展示的扩增现实中的建筑物。使用本文描述的技术，可使用具有不同物理属性的建筑物的呈现来替换来自物理场景的未知对象。因此，在一个实例中，在桌面上具有多个对象的桌子可使用在穿过多个建筑物的路径/道路上行驶的汽车(虚拟对象)表示为由移动装置显示的AR中的城市场景。由于用户移动所述移动装置，在移动装置屏幕上呈现的视图适应物理场景中的各种对象的姿势关于耦合至移动装置的相机的变化。

在一个实施方案中，若干预定义对象模板可为可用的。每个对象模板可具有与其相关联的多个特性(如大小、形状、颜色、遮挡等)。在运行时间，对象模板可基于未知对象的物理属性与桌子上的未知对象相关联。举例来说，移动装置可检测与来自物理场景的未知对象相关联的限定符物理属性(如形状、大小、姿势、颜色、布局等)，且基于对象的物理属性选择适于替换/呈现未知对象的对象模板。举例来说，基于未知对象的物理属性，移动装置可选择与不同结构特性(如建筑物、树或甚至具有动画功能的生物)相关联的对象模板以替换移动装置上的物理场景的所呈现的数字表示中的未知对象。

尽管在描述实施例时使用如“未知对象”和“未知对象的物理属性”的术语，但在一些情况下，可在不脱离本发明的情况下改为使用“重构对象”。在一个实施例中，重构对象可指具有物理属性的相关联集合的未知对象。举例来说，一旦移动装置确定未知对象的一或多个物理属性且将那些物理属性与未知对象相关联，未知对象即可被称为重构对象。在一个方面中，由于移动装置移动，重构对象的形状和大小可能随3D姿势的变化而变化。

参考图1，实例计算装置100可经配置以实施本发明的一个或多个方面。举例来说，计算装置100可为智能手机、平板计算机、个人数字助理，或配备有一或多个传感器的其它移动装置，所述一或多个传感器允许计算装置100接收图像数据或其它数据作为一种形式的的输入。在另一实例中，计算装置100可为头戴式装置或任何其它计算装置。在一些实施例中，计算装置100不是移动装置，且可以是(例如)台式计算机、游戏机、静止传感器或相机，或无线或有线地耦合在一起的机器的系统。计算装置100可为配备有、连通地耦合到和/或另外包含一或多个前置110或后置相机、单镜头相机、深度相机、激光传感器、声纳传感器及/或其它传感器。移动装置还可包含用于与装置相互作用的一或多个用户接口。举例来说，移动装置可包含用户可与其交互以输入数据的触摸屏120。计算装置100还可包含一个或多个处理器、存储器单元及/或其它硬件组件，如下文更详细描述。可使用图11中更详细描述的一或多个组件来实施图1的计算装置100。

在一或多个布置中，计算装置100可基于图像或用于定义物理边界的其它装置单独或组合使用这些传感器任一者和/或全部来获得关于计算装置100的自然周围环境的数据。举例来说，计算装置100可使用一或多个相机来获得计算装置100的自然周围环境的一或多个图形视图。在具体实例中，自然周围环境可包含台面或其它平坦表面，放置在桌子顶部上的多个对象。

图2A说明根据本发明的一或多个实施例的用于产生编辑器模式的一或多个对象模板的接口的实例视觉表示。稍后使用以编辑器模式产生的对象模板以使用显示对象替换/扩增未知对象的显示。3D制作工具可在类似于图11中描述的装置的计算装置上运行。图2A表示以3D制作工具的编辑模式的平面表面的抽象。在编辑模式中，开发者可添加、定义和编辑对象模板。举例来说，在图2A中，具有不同颜色的两个对象模板、红色方框202(红色展示为阴影1)和蓝色方框204(蓝色展示为阴影2)产生于3D制作工具中且位于图像目标206的任一侧上。在一个实施例中，3D制作工具中的红色和蓝色方框的此放置可基于方框相对于图像目标206的相对位置将显示特性(即颜色)与对象模板相关联。举例来说，在运行时间期间，目标图像206的左侧(从用户的视角来看)上的未知对象可染成红色，且目标图像206的右侧上的未知对象可染为蓝色。

图2B说明根据本发明的一或多个实施例的在运行时间呈现的显示对象的实例。在一个实施例中，在图2B中，计算装置100可不同于用于产生对象模板和AR应用的计算装置。此外，计算装置100可经配置以使用由制作工具产生的一或多个对象模板，如图2A所描述。举例来说，相对于用户的视角的至目标图像的左侧的对象可经配置以显示红色，且相对于用户的视角至目标图像的右侧的对象可经配置以显示蓝色。在运行时间，计算装置100可发现及选择未知对象且将这些未知对象与两个对象模板中的一个相关联，其为根据相对于图像目标的在地平面上的位置以编辑模式(如图2A中所示)定义的红色方框202或蓝色方框204。举例来说，至图像目标(对象214)的右侧(例如214)的所有对象与蓝色方框204对象模板相关联，且至图像目标(即对象210和对象212)的左侧的所有对象与红色方框202对象模板相关联。在一些情况下，如图2B中针对210和212所图示，显示对象的一些显示特性(如高度和宽度)可基于未知对象的大小进行缩放。

在图2B中所示的极简实例中，在将那些对象与对象模板相关联之间检测未知对象以及评定其属性。在图2B中，未知对象相对于图像目标的相对放置用作用于将对象模板与未知对象相关联的限定符。一旦选择对象模板，即根据未知对象的属性来修改对象模板。举例来说，对象210相对小于对象212，且因此还根据对象的高度来缩放对象模板。对象模板的修改个例可随后连同物理场景的数字表示呈现于移动装置显示器上。

图3A说明根据本发明的一个实施例的在第一时间的物理场景的实例数字表示。图3A说明具有虚拟对象的场景，其为茶壶302和未知对象304。在图3A中，对象模板与未知对象相关联。在一个实施方案中，对象模板可经定义以允许未知对象自身的呈现而非重叠具有视觉上明显的虚拟内容的未知对象。此外，对象模板可经进一步定义以具有用于遮挡和碰撞的对象显示特性。举例来说，对象模板可经定义以呈现深度面罩，其可意味着其后面的虚拟对象可在运行时间遮挡。

图3B说明根据本发明的一个实施例的在第二时间自图3A的物理场景的实例数字表示。如图3B所示，茶壶302的一部分遮挡在未知对象304后面，这是因为未知对象304与具有不透明遮挡特性的对象模板相关联。类似地，对象模板可经定义以具有碰撞特性，以使得，如果茶壶302碰撞到未知对象304，那么将防止茶壶302继续在其移动方向上前进。在另一实施例中，基于茶壶302的特性和碰撞的速度，茶壶可破裂及破碎。

图4为根据本发明的实施例的对象模板的实例表示。在图4中，展示对象模板400具有限定符模块402和对象显示特性模块406的物理属性。图4中所描述的模块可使用软件、固件、硬件或其其它组合实施。在不脱离本发明的范围的情况下，对象模板400可具有额外模块。

在一个实施方案中，对象模板400可存储为数据结构。在一个实施方案中，开发时间处的开发者可使用编辑器工具来建立对象模板400。开发者可使用编辑器工具来建立若干对象模板以在运行时间配合若干不同等级的未知对象。开发者可手动选择物理属性限定符402的物理属性(如图5所示)和对象显示特性406的显示特性(如图6所示)。

物理属性限定符402保持选择对象显示特性406由移动装置在运行时间用作过滤器的物理属性以扩增未知对象的呈现。如果未知对象的物理属性匹配或满足物理属性限定符402的物理属性特征，那么对象显示特性406可用于呈现未知对象或虚拟对象而非未知对象。举例来说，如果未知对象的高度和宽度在特定范围内，那么移动装置可呈现建筑物而非未知对象。在另一实例中，移动装置可呈现未知对象自身，但使用其它显示特性(如对象的碰撞器特性)。

在开发环境中，在编辑工具中，可视觉地表示对象模块，如图2A和图8A所示。尽管图4和图5展示用于建立和更新对象模块的菜单风格方法，但在一些实施方案中，视觉拖、放和编辑工具可有助于操控对象模板。在某些实施例中，可支持用于开发对象模块的若干技术。举例来说，开发者可首先使用图5和图6的实例菜单来产生原始对象模块且随后进一步使用视觉工具微调对象模板，如图2A和图8A所示。

图5说明用于选择图4的物理属性限定符402的物理属性的实例用户接口。图5展示由用于选择编辑器模式的物理属性限定符402的物理属性的编辑工具提供的实例菜单用户接口500。图5中所示的用户接口500为非限制的，且可以多种方式实施，如命令行接口或拖放用户接口。

对象模板400的开发者可使用菜单用户接口500为应用可在运行时间期间遇到的潜在未知对象选择编辑器模式期间在编辑工具中的多个物理属性限定符。由开发者使用编辑工具选择的物理属性用于建立对象模板500。在运行时间，所述应用检测未知对象的物理属性且将那些物理属性与对象模板400的物理属性限定符402中的存储的物理属性匹配以确定是否应选择此特定对象模板400用于确定未知对象的显示特性。

在图5中，图示潜在未知对象的实例物理属性限定符，如高度502、宽度504、形状506、颜色508、次序510、位置512和姿势514。开发者可键入数值或从各种物理属性的下拉菜单选择。举例来说，在图5中，开发者已选择3英寸作为未知对象的高度502的上限，且选择1英寸作为未知对象的宽度504的下限。在某些实施例中，可就关于整个显示图像的显示比率表达未知对象的大小。在其它实施例中，可使用高度502和宽度504参数来表达固定大小或大小的范围。

对于形状506，开发者可从下拉菜单选择形状(如卵形516)。类似地，开发者可选择颜色508、次序510、位置512和姿势514。在一些实施例中，未知对象可能出现的次序510还可能是重要的。举例来说，应用的开发者可能需要将满足对象模板400的所有其它限定符的第3个未知对象转变为星形，而对于够条件的其它对象则“不采取行动”。类似地，应用的开发者可选择应用将想要使用限定符且不用于整个显示区域的特定位置(例如，中央、右上角等)。

在运行时间，所述应用可经单独配置或通过选择对象模板中的选项(例如，通过高级按钮518)以匹配条件的子集、所有条件或以层级方式匹配条件(例如，如果条件1匹配，则匹配条件2)。

图5中所示的字段是为了说明性目的且不打算是限制的。在不脱离本发明的范围的情况下，额外或较少字段可用于表达物理属性限定符。此外，在某些实施例中，可使用高级518标签来定义未知对象的物理属性的高级参数。

一旦开发者完成配置物理属性的对象模板400，开发者即可选择下一选项520，且完成对象模板的产生。

图6展示用于选择用于未知对象处于的扩增现实中的图像或图像的一部分的呈现的显示特性的实例用户接口。在运行时，一旦选择对象模板400，即可使用对象显示特性来呈现图像或图像的一部分。

在建立对象模板400时由开发者选择这些对象显示特性600。举例来说，如图6所示，开发者可选择待显示的显示对象的高度602和宽度604。在某些实施例中，可就关于整个显示图像的显示比率表达显示对象的大小。在其它实施例中，可使用高度602和宽度604参数来表达固定大小或大小的范围。

开发者可使用常规按钮620选择一结构(如建筑物、形状、对象等)或定义其自身结构。在某些实施例中，开发者可自下拉菜单选择颜色608。在图6中，展示开发者从下拉菜单选择红622色。替代地或另外，开发者可使用缩放的610参数选择缩放关于未知对象的大小的显示对象。换句话说，显示对象的大小可为未知对象的大小的函数。在某些实施例中，显示对象的其它视觉特征(如颜色和纹理)还可为未知对象自身的函数。开发者还可定义特定纹理612或显示对象的模式。

此外，开发者还可定义对象的透明度618。对象的透明度可指被显示对象重叠的图像的部分可见的信息量。在某些实施例中，透明度可由百分比或比率矩阵指定，其中其提供用于显示与关于与显示对象下方的层(或多个层)中的信息相关联的信息的相对比例。

除如上所述的静态视觉对象显示特性之外，对象模板400的对象显示特性600还可描述动态视觉对象显示特性(如碰撞614和遮挡616)。

对象模板400的碰撞614特性可定义显示对象的碰撞特征。举例来说，如果移动虚拟对象(如汽车)碰撞到显示对象，那么在一些情况下显示对象可部分地且临时地或永久地沉陷，提供显示对象的可挤压(临时沉陷)或韧性的(永久沉陷)对象表面的视觉效果。在某些实施例中，(例如)如果显示对象的表面表示建筑物的水泥墙面，那么碰撞614特性可使得表面不沉陷。在某些实施例中，对象的碰撞614特性可使得移动虚拟对象可完全地及临时地或永久地使显示对象的对象表面变形。举例来说，行驶通过瀑布(显示对象)的汽车(即虚拟对象)可临时完全地使瀑布式装置的对象表面变形。碰撞614的特性还可为在显示对象的表面上施加的力的函数。举例来说，在将显示对象呈现于显示器上之前，确定显示对象的碰撞的实际视觉效果可考虑虚拟对象的延展性和碰撞特性、虚拟对象接近显示对象的速度以及许多其它因素。在一些情况下，可使用碰撞器比例尺(未展示)来推广碰撞614特性。在其它情况下，可使用高级624按钮来选择更多高级特性。

遮挡616可指视觉地妨碍或阻碍由显示器的检视器感知的另外对象的视图的显示对象能力。通常，当显示对象部分地阻碍另一对象的视图时，显示器的检视器感知显示器对象更近。因此，在运行时，适当施加至显示对象的遮挡616特性允许对象被感知为关于多个对象适当地排序。尽管未图示，但可通过允许开发者经由高级624标签提供单独可插拔模块或更多高级配置来表达及调节若干其它实施和配置选项。举例来说，在一些实施方案中，显示特性可不仅包含如上所述的图形特形，而且包含动画特性。举例来说，在检测与未知对象相关联的某些条件后，未知对象可变形为动画特征，如怪兽或小爆破。一旦开发者已完成配置对象模板400，开发者即可选择完成选项624，且完成对象模板的产生。

图7说明根据本发明的一个实施例的在用于在运行时间将图像呈现于显示器上的移动装置100中实施的实例模块的方块图。移动装置100可为使用图11中描述的一或多个组件而实施的计算机装置。图7中所描述的模块可使用软件、固件、硬件或其其它组合实施。在一个实施例中，图7中描述的模块中的一些可存储为计算机可读媒体700上的软件模块，计算机可读媒体700可为任何磁性、电子、光学或其它计算机可读存储媒体。在一个实施方案中，计算机可读存储媒体700可包含图像捕获模块704、未知对象选择器模块706、物理属性检测器模块708、对象模板选择器模块710、缩放模块712和呈现模块714。

在运行时，移动装置的用户可指向物理场景处的一或多个相机702且从所述场景获取/捕获图像/视频。在某一情况下，相机的镜头基于所选择的相机参数(变焦、快门速度、曝光等)获取原始模拟信息，所述原始模拟信息可转换为数字信息作为传感技术的一部分或通过模/数变换逻辑。

图像捕获模块704可采取所获取/捕获的图像/视频信息且将信息储存在存储器中用于进一步处理。在某一情况下，图像捕获模块704可在进一步处理图像数据之前将原始数据转换为根据标准的数据，如可更换的图像文件格式(EXIF)、位图、联合活动图像专家组(JPEG)或移动图片专家组-4(MPEG-4)。

未知对象选择器模块706可从自图像捕获模块704接收或存取的图像数据检测及选择未知对象。在一个实施方案中，在检测未知对象之前，未知对象选择器模块706可检测物理场景的特性。举例来说，未知对象选择器模块706可检测作为平面表面的表面且若干对象放置在平面表面上。未知对象选择器模块706可使用已知方法(如表面检测、边缘检测、特征检测和对象检测)检测平面表面及划定物理场景中的若干(已知和未知)对象。在某些实施例中，未知对象选择器模块706可选择从场景未知或不能使用已知方法自物理场景识别的对象。在某些其它实施例中，在平面表面上方的物理场景中检测的所有对象可处理为未知对象。未知对象选择器模块706可使用来自多个图像的信息。未知对象可在其经检测后随时间追踪。

一旦检测到一或多个未知对象，那些未知对象中的一或多者即可通过物理属性检测器模块708选择用于进一步处理。物理属性检测器模块708可检测未知对象的一或多个物理属性，如未知对象的大小、形状、颜色、次序、位置和姿势。

对象模板选择模块710可将由物理属性检测器模块708检测的所选择的未知对象的物理属性与一或多个对象模板400的物理属性限定符402进行比较且选择对象模板。在图4和图5中更详细描述定义编辑器模式的对象模板400的物理属性限定符402的物理属性的过程。

在某些实施例中，缩放模块712和呈现模块714可使用来自所选择的对象模板400的对象显示特性406呈现所选择的未知对象的位置处的显示对象。举例来说，缩放模块712可使用由开发者在开发时间以编辑模式选择的缩放610参数来确定是否应相对于未知对象的大小将显示对象缩放大小。呈现模块714可进一步使用来自所选择的对象模板400的所选择的对象显示特性406(如显示对象的高度602、宽度604、结构606、颜色608、缩放610、纹理612、碰撞614、遮挡616和透明度618)呈现显示对象。呈现模块714可在运行时间将未知对象的位置处的显示对象呈现在移动装置100的显示器716上，而非未知对象或通过扩增未知对象的显示器。

图8A说明根据本发明的一或多个实施例的以编辑器模式直观表示的两个对象模板。图8A中说明的两个建筑物模型(802和804)可各自表示不同对象模板。建筑物模型的结构可提供显示对象的结构606作为定义视觉外形的一部分。对象模板通过开发者使用编辑器模式的编辑工具来开发。

图8B说明由耦合至未对其进行修改的移动装置100的相机702获取的物理场景的输入图像。图8B表示在较图8A中展示的对象模板的开发稍后获取的图像。图8B的图像显示两个未知对象：较高对象806和较矮对象808。本发明的实施例(使用物理属性检测器模块708)推断与未知对象相关联的属性(如对象的高度和大小)。图8C说明可显示于移动装置100的显示屏幕716上的扩增现实呈现图像的实例。在图8C中，针对来自物理场景的未知对象基于其高度选择(使用对象模板选择器模块710)对象模板。举例来说，对象模板804(图8A)可基于相应对象模板的显示特性与现实未知对象806(图8B)相关联且随后呈现为图8C中的对象810。类似地，对象模板802(图8A)与现实未知对象808(图8B)相关联且随后呈现为图8C中的对象812。因此，图8C表示可显示于移动装置100的显示屏幕716上的扩增现实场景的实例。

图9说明根据本发明的一或多个实施例的用于产生编辑模式的对象模板的方法的流程图。根据一或多个方面，图9中说明的流程图900中描述的方法及/或方法框的任一者和/或全部可通过计算装置及/或在计算装置中实施，(例如)其组件在图11中更详细描述。在一个实施例中，通过计算装置的处理器(如处理器1110或另一处理器)实施关于图9描述如下的方法框中的一或多者。另外或替代地，本文中所描述的方法和/或方法框的任一者和/或全部可实施在计算机可读指令中，例如存储在计算机可读媒体(例如存储器1135、存储装置1125或另一计算机可读媒体)上的计算机可读指令。

在某些实施例中，计算装置可使用用于开发应用的一或多个对象模板的编辑工具促进编辑模式。在更迟时间点，在相同装置或不同装置(如移动装置)上运行的应用可使用一或多个对象模板将来自物理场景的显示对象而非未知对象呈现至扩增现实显示屏幕。

在框902处，计算装置的组件可接收至少一个用户选择的物理属性。物理属性可包含未知对象的形状、未知对象的大小、未知对象的位置、未知对象的姿势、未知对象关于其它对象的出现次序、与显示对象的呈现相关联的应用模式和其它未知对象的属性中的一或多者。如图5所示，在一个实例中，计算装置可提供用于接收用户选择的物理属性的用户接口。

在框904处，计算装置的组件可接收至少一个用户选择的显示特性。对象模板的显示器可包含图形特性和动画特性中的一或多者。对象模板的图形特性可包含(但不限于)颜色、大小、纹理、形状、碰撞检测、遮挡和透明度中的一或多者。如图6所示，在一个实例中，计算装置可提供用于接收用户选择的物理属性的用户接口。

在框906处，计算装置的组件可产生包括至少一个用户选择的物理属性和用户选择的显示特性的对象模板，其中在运行时间，基于从用于至少基于用户选择的显示特性呈现显示对象的匹配或满足用户选择的物理属性的物理场景检测的未知对象的物理属性来选择对象模板。

尽管图9描述产生一个对象模板，但可在运行时间期间以编辑器模式产生若干对象模板备用。

应了解，根据本发明的实施例，图9中所说明的特定框提供在操作模式之间切换的特定方法。框的其它序列还可相应地在替代实施例中执行。举例来说，本发明的替代实施例可以不同次序执行以上概述的框。举例来说，用户可选择从第三操作模式变为第一操作模式，从第四模式至第二模式，或其间任何组合。此外，图9中说明的单独框可包含可以单独框适合的各种次序执行的多个子框。此外，可取决于特定应用而添加或移除额外框。所属领域的技术人员将识别和理解所述过程的多个变体、更改和替代方案。

图10说明根据本发明的一或多个实施例的通过执行一方法来呈现显示图像的流程图。根据一或多个方面，图10中说明的流程图1000中描述的方法和/或方法框的任一者和/或所有可通过移动装置和/或在移动装置中实施，(例如)其中的组件在图11中更详细描述。在一个实施例中，通过移动装置的处理器(如处理器1110或另一处理器)实施关于图10描述如下的方法框中的一或多者。另外或替代地，本文中所描述的方法和/或方法框的任一者和/或全部可实施在计算机可读指令中，例如存储在计算机可读媒体(例如存储器1135、存储装置1125或另一计算机可读媒体)上的计算机可读指令。

在框1002处，移动装置的组件获得关于物理场景的信息。举例来说，移动装置100可检测场景具有平面表面，如桌子或地板。在框1004处，移动装置100的组件(如未知对象选择器模板706)自物理场景选择未知对象。在某些实施例中，移动装置100的组件还可确定未知对象的姿势。

在框1006处，移动装置100的组件(如物理属性检测器模块708)确定与未知对象相关联的物理属性。在一些实施例中，与未知对象相关联的属性可包含未知对象的形状、未知对象的大小、未知对象的位置、未知对象的姿势、未知对象相对于其它对象的出现次序、与显示对象的呈现相关联的应用模式以及其它未知对象的属性中的一或多者。

在框1008处，移动装置100的组件(如对象模板选择器模组710)基于与未知对象相关联的物理属性选择对象模板。在某些实施例中，移动装置100的组件可将与未知对象相关联的物理属性与来自选择对象模板的对象模板的物理属性限定符进行比较。

在框1010处，移动装置100的组件(如呈现模块714)可使用与对象模板相关联的至少一个显示特性呈现处于未知对象的姿势的显示对象。在一个方面中，呈现显示对象可包括将显示对象呈现于表示待显示于移动装置的显示屏幕上的物理场景的图像上。

在某些实施例中，对象模板的至少一个显示特性可包含图形特性和动画特性中的一或多者。对象模板的图形特性可包含颜色、大小、纹理、形状、碰撞检测、遮挡和/或透明度中的一或多者。在一个实施方案中，对象模板的特性可通过开发者在应用开发时使用编辑接口进行选择。

在一个实施例中，可定义多个对象模板。在另一实施方案中，未知对象可为多个未知对象中的一个，且对象模板可与来自多个未知对象的多个未知对象相关联。

应了解，根据本发明的实施例，图10中所说明的特定框提供在操作模式之间切换的特定方法。框的其它序列还可相应地在替代实施例中执行。举例来说，本发明的替代实施例可以不同次序执行以上概述的框。举例来说，用户可选择从第三操作模式变为第一操作模式，从第四模式至第二模式，或其间任何组合。此外，图10中说明的单独框可包含可以单独框适合的各种次序执行的多个子框。此外，可取决于特定应用而添加或移除额外框。所属领域的技术人员将识别和理解所述过程的多个变体、更改和替代方案。

图11说明并入有在实践本发明的实施例的过程中采用的装置的部分的实例计算装置。在本文中，图11中说明的计算装置可作为任何计算机化系统的一部分并入。举例来说，计算装置1100可表示移动装置的组件中的一些，或执行3D编辑工具的计算装置。计算装置1100的实例包含(但不限于)桌上型电脑、工位、个人电脑、超级电脑、视频游戏控制台、平板电脑、智能电话、膝上型电脑、上网本或其它便携式装置。图11提供计算装置1100的一个实施例的示意性说明，其可执行如本文所述的各种其它实施例提供的方法及/或可充当主要计算装置、远端查询一体机/终端、销售点装置、移动多功能装置、机顶盒和/或计算装置。图11仅意图提供对各种组件的一般化说明，可在适当时利用所述组件中的任一者或全部。因此，图11大致说明可如何以相对分离或相对更集成的方式实施个别系统元件。

示出计算装置1100，其包括可经由总线1105电耦合(或另外可以在适当时通信)的硬件元件。硬件元件可包含：一或多个处理器1110，包含(但不限于)一或多个通用处理器及/或一或多个专用处理器(例如，数字信号处理芯片、图形加速度处理器，及/或其类似者)；一或多个输入装置1115，其可包含(但不限于)相机、传感器1150、鼠标、键盘及/或其类似者；及一或多个输出装置1120，其可包含(但不限于)显示单元、打印机及/或其类似者。

计算装置1100可进一步包含以下各项(和/或与以下各项通信)：一或多个非暂时性存储装置1125，所述非暂时性存储装置1125可包括(但不限于)本地及/或网络可存取的存储装置，和/或可包含(但不限于)磁盘驱动器、驱动阵列、光学存储装置、例如随机存取存储器(“RAM”)和/或只读存储器(“ROM”)等固态存储装置，其可为可编程的、可快闪更新的和/或其类似者。此类存储装置可经配置以实施任何适当的数据存储装置，包含但不限于各种文件系统、数据库结构和/或类似者。

计算装置1100还可包含通信子系统1130。通信子系统1130可包含用于接收及传输数据的收发器或有线及/或无线媒体。通信子系统1130还可包含(不限于)调制解调器、网卡(无线或有线)、红外线通信装置、无线通信装置和/或芯片组(例如，Bluetooth^TM装置、802.11装置、WiFi装置、WiMax装置、蜂窝式通信设施等)及/或类似者。通信子系统1130可准许与网络(例如，作为一个实例，下文所描述的网络)、其它计算装置及/或本文中所描述的任何其它装置交换数据。在许多实施例中，计算装置1100将进一步包括非暂时性工作存储器1135，其可包含RAM或ROM装置，如上文所描述。

计算装置1100可包括展示为当前位于工作存储器1135内的软件元件，包含操作系统1140、装置驱动器、可执行库及/或例如一或多个应用程序1145的其它代码，其可包括由各种实施例所提供，及/或可经设计以实施方法及/或配置系统，由其它实施例所提供的计算机程序，如本文中所描述。仅仅作为实例，关于上文所论述的方法描述的一或多个程序可实施为可由计算机(和/或计算机内的处理器)执行的代码和/或指令；接着，在一方面中，这些代码和/或指令可用以配置和/或调适通用计算机(或其他装置)以根据所描述方法执行一或多个操作。

一组这些指令和/或代码可存储在计算机可读存储媒体(例如上文所描述的存储装置1125)上。在一些情况下，存储媒体可并入于例如计算装置1100等计算装置内。在其它实施例中，存储媒体可与计算装置(例如，可装卸式媒体，例如压缩光盘)分开，和/或提供于安装包中，使得存储媒体可用于编程、配置及/或调适其上存储有指令/代码的通用计算机。这些指令可呈可由计算装置1100执行的可执行码的形式，且/或可呈源和/或可安装码的形式，所述源和/或可安装码在计算装置1100上编译和/或安装于计算装置1100上(例如，使用多种通常可用编译程序、安装程序、压缩/解压缩公用程序等中的任一者)后，接着呈可执行码的形式。

可根据特定要求做出实质性变化。举例来说，还可能使用定制硬件，且/或可将特定元件实施于硬件、软件(包含便携式软件，例如小程序等)或两者中。另外，可使用到其它计算装置1100(例如，网络输入/输出装置)的连接。

一些实施例可采用计算装置(例如计算装置1100)执行根据本发明的方法。例如，可以由计算装置1100响应于处理器1110执行工作存储器1135中所含有的一或多个指令的一或多个序列(其可以并入到操作系统1140和/或例如应用程序1145的其它代码中)来执行所描述方法的一些或全部程序。此类指令可以从另一计算机可读媒体(例如存储装置1125中的一或多者)而被读入到工作存储器1135中。仅举例来说，执行工作存储器1135中所含有的指令的序列可以使处理器1110执行本文中所描述的方法的一或多个程序。

如本文所使用，术语“机器可读媒体”和“计算机可读媒体”是指参与提供致使机器以特定方式操作的数据的任何媒体。在使用计算装置1100实施的实施例中，在将指令/代码提供到处理器1110以用于执行的过程中可能涉及各种计算机可读媒体，和/或各种计算机可读媒体可用以存储和/或运载此类指令/代码(例如作为信号)。在许多实施方案中，计算机可读媒体为物体和/或有形存储媒体。此媒体可呈许多形式，包含(但不限于)非易失性媒体、易失性媒体和传输媒体。非易失性媒体包含例如光盘和/或磁盘(例如存储装置1125)。易失性媒体包含(但不限于)动态存储器(例如工作存储器1135)。传输媒体包含(但不限于)同轴电缆、铜线和光纤，包含包括总线1105的电线以及通信子系统1130的各种组件(和/或通信子系统1130提供与其它设备的通信所使用的媒体)。因此，传输媒体还可采取波的形式(包含但不限于无线电、声波及/或光波，如在无线电波和红外数据通信期间产生的那些波)。在替代实施例中，可使用事件驱动组件和装置(如相机)，其中可在模拟域中执行处理中的一些。

常见形式的物理和/或有形计算机可读媒体包含(例如)软性磁盘、柔性磁盘、硬盘、磁带或任何其它磁性媒体、CD-ROM、任何其它光学媒体、打孔卡、纸带、具有孔图案的任何其它物理媒体、RAM、PROM、EPROM、快闪EPROM、任何其它存储器芯片或盒带、如下文所描述的载波，或计算机可从其读取指令和/或代码的任何其它媒体。

在将一或多个指令的一或多个序列携载到处理器1110以用于执行时可涉及各种形式的计算机可读媒体。仅仅作为实例说明，最初可将指令载运于远程计算机的磁盘和/或光学光盘上。远程计算机可以将指令加载到其动态存储器中并将指令作为信号经由传输媒体来发送以由计算装置1100接收和/或执行。根据本发明的各种实施例，可以呈电磁信号、声学信号、光信号和/或类似者的形式的这些信号全部是可以在上面对指令进行编码的载波的实例。

通信子系统1130(和/或其组件)通常将接收信号，且总线1105可接着将信号(和/或由信号所携载的数据、指令等)携载到处理器1110从其检索并执行指令的工作存储器1135。可视情况在由处理器1110执行指令之前或之后，将由工作存储器1135接收的指令存储在非暂时性存储装置1125上。

上文所论述的方法、系统和装置为实例。各种实施例可以在适当时省略、取代或添加各种程序或组件。举例来说，在替代配置中，所描述的方法可以不同于所描述的次序来执行，和/或可添加、省略和/或组合各种阶段。并且，可在各种其它实施例中组合相对于某些实施例描述的特征。可以以类似方式组合实施例的不同方面及元件。并且，技术演进，且因此，许多元件为实例，其并不将本发明的范围限于那些特定实例。

在描述中给出具体细节以提供对实施例的透彻理解。然而，可在没有这些特定细节的情况下实践实施例。举例来说，在没有不必要的细节的情况下展示众所周知的电路、过程、算法、结构和技术以免混淆所述实施例。此描述仅提供实例实施例，且并不希望限制本发明的范围、适用性或配置。实际上，实施例的前述描述将为所属领域的技术人员提供用于实施本发明的实施例的启迪性描述。可在不脱离本发明的精神和范围的情况下对元件的功能和布置做出各种改变。

并且，将一些实施例描述为以流程图或框图形式描绘的过程。尽管每一流程图或框图可将操作描述为依序过程，但许多操作可并行地或同时执行。此外，可以重新排列操作的次序。过程可具有不包含在图中的额外框。此外，可由硬件、软件、固件、中间件、微码、硬件描述语言或其任何组合来实施所述方法的实施例。当以软件、固件、中间件或微码实施时，执行相关联任务的程序代码或代码段可存储在例如存储媒体等计算机可读媒体中。处理器可进行相关联的任务。

已描述了若干实施例，可在不脱离本发明的精神的情况下使用各种修改、替代构造及等效物。举例来说，以上元件可以仅为较大系统的组件，其中其它规则可以优先于本发明的应用或以其它方式修改本发明的应用。并且，可在考虑以上要素之前、期间或之后进行许多步骤。因此，以上描述并不限制本发明的范围。

Claims (30)

1.一种用于构建物理场景的数字表示的方法，其包括：

从所述物理场景选择未知对象；

确定与所述未知对象相关联的至少一个物理属性；

将与所述未知对象相关联的所述至少一个物理属性与对象模板的物理属性限定符进行比较，其中所述对象模板表示与所述未知对象不同的对象；

基于与所述未知对象相关联的所述至少一个物理属性与所述对象模板的所述物理属性限定符的比较，通过处理器来选择所述对象模板，所述选择包括确定所述对象模板的所述物理属性限定符匹配与所述未知对象相关联的所述物理属性；及

使用与所述对象模板相关联的至少一个显示特性在来自所述物理场景的所述未知对象的位置处呈现所述物理场景的数字表示中的显示对象。

2.根据权利要求1所述的方法，其中与所述未知对象相关联的所述至少一个物理属性包括所述未知对象的形状、所述未知对象的大小、所述未知对象的位置、所述未知对象的姿势、所述未知对象相对于其它对象的出现次序、与所述显示对象的所述呈现相关联的应用模式以及其它未知对象的属性中的一或多者。

3.根据权利要求1所述的方法，其中与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。

4.根据权利要求3所述的方法，其中所述对象模板的所述图形特性包括颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

5.根据权利要求1所述的方法，其中由开发者使用编辑接口在应用开发时选择所述对象模板的特性。

6.根据权利要求1所述的方法，其中所述未知对象是多个未知对象中的一者，且所述对象模板与来自所述多个未知对象的多个未知对象相关联。

7.根据权利要求1所述的方法，其中所述对象模板是多个对象模板中的一者。

8.根据权利要求1所述的方法，其中呈现所述显示对象包括在表示待显示于移动装置的显示屏幕上的所述物理场景的图像上呈现所述显示对象。

9.一种用于构建物理场景的数字表示的移动装置，其包括：

相机，其经配置以获得指示所述物理场景的图像数据；

处理器，其耦合到存储器且经配置以：

从所述物理场景选择未知对象；

确定与所述未知对象相关联的至少一个物理属性；

将与所述未知对象相关联的所述至少一个物理属性与对象模板的物理属性限定符进行比较，其中所述对象模板表示与所述未知对象不同的对象；

基于与所述未知对象相关联的所述至少一个物理属性与所述对象模板的所述物理属性限定符的比较，选择所述对象模板，所述选择包括确定所述对象模板的所述物理属性限定符匹配与所述未知对象相关联的所述物理属性；及

使用与所述对象模板相关联的至少一个显示特性在来自所述物理场景的所述未知对象的位置处呈现所述物理场景的数字表示中的显示对象。

10.根据权利要求9所述的移动装置，其中与所述未知对象相关联的所述至少一个物理属性包括所述未知对象的形状、所述未知对象的大小、所述未知对象的位置、所述未知对象的姿势、所述未知对象相对于其它对象的出现次序、与所述显示对象的所述呈现相关联的应用模式以及其它未知对象的属性中的一或多者。

11.根据权利要求9所述的移动装置，其中与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。

12.根据权利要求11所述的移动装置，其中所述对象模板的所述图形特性包括颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

13.根据权利要求9所述的移动装置，其中由开发者使用编辑接口在应用开发时选择所述对象模板的特性。

14.根据权利要求9所述的移动装置，其中所述未知对象是多个未知对象中的一个，且所述对象模板与来自所述多个未知对象的多个未知对象相关联。

15.根据权利要求9所述的移动装置，其中所述对象模板是多个对象模板中的一者。

16.根据权利要求9所述的移动装置，其中呈现所述显示对象包括在表示待显示于所述移动装置的显示屏幕上的所述物理场景的图像上呈现所述显示对象。

17.一种非暂时性计算机可读存储媒体，其中所述非暂时性计算机可读存储媒体包括可由处理器执行的指令，所述指令包括用以进行以下操作的指令:

从物理场景选择未知对象；

确定与所述未知对象相关联的至少一个物理属性；

将与所述未知对象相关联的所述至少一个物理属性与对象模板的物理属性限定符进行比较，其中所述对象模板表示与所述未知对象不同的对象；

基于与所述未知对象相关联的所述至少一个物理属性与所述对象模板的所述物理属性限定符的比较，选择所述对象模板，所述选择包括确定所述对象模板的所述物理属性限定符匹配与所述未知对象相关联的所述物理属性；及

使用与所述对象模板相关联的至少一个显示特性在来自所述物理场景的所述未知对象的位置处呈现所述物理场景的数字表示中的显示对象。

18.根据权利要求17所述的非暂时性计算机可读存储媒体，其中与所述未知对象相关联的所述至少一个物理属性包括所述未知对象的形状、所述未知对象的大小、所述未知对象的位置、所述未知对象的姿势、所述未知对象相对于其它对象的出现次序、与所述显示对象的所述呈现相关联的应用模式以及其它未知对象的属性中的一或多者。

19.根据权利要求17所述的非暂时性计算机可读存储媒体，其中与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。

20.根据权利要求19所述的非暂时性计算机可读存储媒体，其中所述对象模板的所述图形特性包括颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

21.根据权利要求17所述的非暂时性计算机可读存储媒体，其中由开发者使用编辑接口在应用开发时选择所述对象模板的特性。

22.根据权利要求17所述的非暂时性计算机可读存储媒体，其中所述未知对象是多个未知对象中的一个，且所述对象模板与来自所述多个未知对象的多个未知对象相关联。

23.根据权利要求17所述的非暂时性计算机可读存储媒体，其中所述对象模板是多个对象模板中的一者。

24.根据权利要求17所述的非暂时性计算机可读存储媒体，其中呈现所述显示对象包括在表示待显示于移动装置的显示屏幕上的所述物理场景的图像上呈现所述显示对象。

25.一种用于构建物理场景的数字表示的设备，其包括：

用于从物理场景选择未知对象的装置；

用于确定与所述未知对象相关联的至少一个物理属性的装置；

用于将与所述未知对象相关联的所述至少一个物理属性与对象模板的物理属性限定符进行比较的装置，其中所述对象模板表示与所述未知对象不同的对象；

用于基于与所述未知对象相关联的所述至少一个物理属性与所述对象模板的所述物理属性限定符的比较，选择所述对象模板的装置，所述选择包括确定所述对象模板的所述物理属性限定符匹配与所述未知对象相关联的所述物理属性；以及

用于使用与所述对象模板相关联的至少一个显示特性在来自所述物理场景的所述未知对象的位置处呈现所述物理场景的数字表示中的显示对象的装置。

26.根据权利要求25所述的设备，其中与所述未知对象相关联的所述至少一个物理属性包括所述未知对象的形状、所述未知对象的大小、所述未知对象的位置、所述未知对象的姿势、所述未知对象相对于其它对象的出现次序、与所述显示对象的所述呈现相关联的应用模式以及其它未知对象的属性中的一或多者。

27.根据权利要求25所述的设备，其中与所述对象模板相关联的所述至少一个显示特性包括图形特性和动画特性中的一或多者。

28.根据权利要求27所述的设备，其中所述对象模板的所述图形特性包括颜色、大小、纹理、形状、碰撞检测、遮挡以及透明度中的一或多者。

29.根据权利要求25所述的设备，其中由开发者使用编辑接口在应用开发时选择所述对象模板的特性。

30.根据权利要求25所述的设备，其中所述未知对象是多个未知对象中的一个，且所述对象模板与来自所述多个未知对象的多个未知对象相关联。