CN105229566B - 增强现实系统中指示观察或视觉图案 - Google Patents
增强现实系统中指示观察或视觉图案 Download PDFInfo
- Publication number
- CN105229566B CN105229566B CN201480028248.7A CN201480028248A CN105229566B CN 105229566 B CN105229566 B CN 105229566B CN 201480028248 A CN201480028248 A CN 201480028248A CN 105229566 B CN105229566 B CN 105229566B
- Authority
- CN
- China
- Prior art keywords
- augmented reality
- location history
- user
- presenting
- recording device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 334
- 230000000007 visual effect Effects 0.000 title claims description 23
- 238000000034 method Methods 0.000 claims abstract description 132
- 230000004044 response Effects 0.000 claims abstract description 65
- 230000033001 locomotion Effects 0.000 claims description 14
- 238000004590 computer program Methods 0.000 abstract description 8
- 230000003993 interaction Effects 0.000 description 41
- 230000006870 function Effects 0.000 description 30
- 230000008569 process Effects 0.000 description 23
- 230000004048 modification Effects 0.000 description 20
- 238000012986 modification Methods 0.000 description 20
- 238000004891 communication Methods 0.000 description 18
- 239000011521 glass Substances 0.000 description 14
- 238000012545 processing Methods 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 11
- 230000009471 action Effects 0.000 description 10
- 239000000463 material Substances 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 9
- 238000001514 detection method Methods 0.000 description 8
- 230000003068 static effect Effects 0.000 description 8
- 238000011156 evaluation Methods 0.000 description 7
- 102000053602 DNA Human genes 0.000 description 6
- 108020004414 DNA Proteins 0.000 description 6
- 238000012790 confirmation Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 5
- 238000013500 data storage Methods 0.000 description 5
- 230000007613 environmental effect Effects 0.000 description 5
- 230000014509 gene expression Effects 0.000 description 5
- 230000000670 limiting effect Effects 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 5
- 230000003340 mental effect Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 238000003491 array Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000013461 design Methods 0.000 description 4
- 230000002452 interceptive effect Effects 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 230000005055 memory storage Effects 0.000 description 4
- 238000009877 rendering Methods 0.000 description 4
- 239000004065 semiconductor Substances 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 238000011084 recovery Methods 0.000 description 3
- 230000007704 transition Effects 0.000 description 3
- 239000008186 active pharmaceutical agent Substances 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 2
- 239000003795 chemical substances by application Substances 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000013506 data mapping Methods 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 238000009826 distribution Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000001343 mnemonic effect Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 239000002023 wood Substances 0.000 description 2
- 208000028698 Cognitive impairment Diseases 0.000 description 1
- 235000015842 Hesperis Nutrition 0.000 description 1
- 241000282412 Homo Species 0.000 description 1
- 235000012633 Iberis amara Nutrition 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 230000003416 augmentation Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000010267 cellular communication Effects 0.000 description 1
- 208000010877 cognitive disease Diseases 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000008570 general process Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003137 locomotive effect Effects 0.000 description 1
- 230000001404 mediated effect Effects 0.000 description 1
- 230000003278 mimic effect Effects 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 230000005693 optoelectronics Effects 0.000 description 1
- 210000001747 pupil Anatomy 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 230000029305 taxis Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 238000005406 washing Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/29—Geographical information databases
Abstract
描述了执行以下操作的方法、装置、计算机程序产品、设备和系统：呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体的至少一个相关的数据；接收与所述数据源的位置历史查询相关的响应数据；以及至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种。
Description
优先权申请的所有主题通过引用的方式以这些主题没有与本文不一致的程度并入本文中。
技术领域
本说明书涉及数据采集、数据处理和数据显示技术。
发明内容
实施例提供了一种系统。在一个实现方案中，所述系统包括但不限于：用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据；用于接收与所述数据源的位置历史查询相关的响应数据的电路；以及用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的电路，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种。除上述之外，在权利要求书、附图和构成本发明的一部分的文字中描述了其他系统。
在一个或多个不同的方面，关联的系统包括但不限于，用于实现本文谈及的方法方面的电路和/或编程；该电路/或编程实际上可以是被配置成根据系统设计者的设计选择实现本文引述的方法方面的硬件、软件和/或固件的任意组合。
在一个或多个不同的方面，关联的系统包括但不限于，用于实现本文谈及的方法方面的计算装置和/或编程；该计算装置/或编程实际上可以是被配置成根据系统设计者的设计选择实现本文引述的方法方面的硬件、软件和/或固件的任意组合。
实施例提供了一种计算机实施的方法。在一个实现方案中，所述方法包括但不限于：呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据；接收与所述数据源的位置历史查询相关的响应数据；以及至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种。除上述之外，在权利要求书、附图和构成本发明的一部分的文字中描述了其他方法。
实施例提供了包括计算机程序产品的制造制品。在一个实现方案中，所述制造制品包括但不限于由一个或多个指令配置的信号承载介质，所述一个或多个指令涉及：呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据；接收与所述数据源的位置历史查询相关的响应数据；以及至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种。除上述之外，在权利要求书、附图和构成本披露的一部分的文字中描述了其他计算机程序产品方面。
实施例提供了一种系统。在一个实现方案中，所述系统包括但不限于计算设备和指令。指令当在计算设备上被执行时使所述计算设备执行以下操作：呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据；接收与所述数据源的位置历史查询相关的响应数据；以及至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种。除上述之外，在权利要求书、附图和构成本发明的一部分的文字中描述了其他系统方面。
除上述之外，在教导，例如，本公开的文字(例如，权利要求书和/或具体实施方式)和/或附图中阐述并描述了各种其他方法和/或系统和/或程序产品方面。
上述内容是概要并且因此可以包含细节的简化、概括、包含和/或省略；因此，本领域技术人员应当理解该概要仅仅是说明性的，并且不是旨在以任何方式限制。通过本文阐述的教导将明白本文描述的设备和/或方法和/或其他主题的其他方面、特征和优点。
附图说明
现在参照图1，图示了增强现实设备的多个实例。
图2图示了增强现实设备及其照相机的视角的真实世界视野。
图3图示了一个实施例，其中用户与系统交互以选择、拖动或放置书的增强现实呈现。
图4图示了在增强现实系统中用于选择、拖拽和放置的系统的实例，其中实施例或许可以在设备中实施并且/或者通过网络实施，这可以作为用于介绍本文所述的一种或多种方法和/或设备的背景。
现在参照图5，示出了表示与在增强现实系统中选择、拖拽和放置相关的示例的操作的操作流程的实例，这可以用作介绍本文所述的一种或多种方法和/或设备的背景。
图6图示了图5的示例的操作流程的可供选择的实施例。
图7图示了图5的示例的操作流程的可供选择的实施例。
图8图示了图5的示例的操作流程的可供选择的实施例。
图9图示了图5的示例的操作流程的可供选择的实施例。
图10图示了图5的示例的操作流程的可供选择的实施例。
图11图示了图5的示例的操作流程的可供选择的实施例。
图12图示了图5的示例的操作流程的可供选择的实施例。
现在参照图13，示出了表示与在增强现实系统中选择、拖拽和放置相关的示例的操作的操作流程的实例，这可以用作介绍本文所述的一种或多种方法和/或设备的背景。
现在参照图14，示出了表示与在增强现实系统中选择、拖拽和放置相关的示例的操作的操作流程的实例，这可以用作介绍本文所述的一种或多种方法和/或设备的背景。
图15图示了在增强现实系统中用于动态保留情景要素的系统的实例，其中实施例或许可以在设备中实施并且/或者通过网络实施，这可以作为用于介绍本文所述的一种或多种方法和/或设备的背景。
图16-18图示了不能动态保留增强现实系统中的情景要素的情形。示出了用户尝试并未能选择显示的移动的人的实例。
图19-23图示了能动态保留增强现实系统中的情景要素的情形。示出了用户尝试并成功选择并与之交互的显示的(初始)移动的人的实例。
现在参照图24，示出了表示与在增强现实系统中动态保留情景要素相关的示例的操作的操作流程的实例，这可以用作介绍本文所述的一种或多种方法和/或设备的背景。
图25图示了图24的示例的操作流程的可供选择的实施例。
图26图示了图24的示例的操作流程的可供选择的实施例。
图27图示了图24的示例的操作流程的可供选择的实施例。
图28图示了图24的示例的操作流程的可供选择的实施例。
现在参照图29，示出了表示与在增强现实系统中动态保留情景要素相关的示例的操作的操作流程的实例，这可以用作介绍本文所述的一种或多种方法和/或设备的背景。
图30图示了图29的示例的操作流程的可供选择的实施例。
图31图示了在增强现实系统中用于临时要素恢复的系统的实例，其中实施例或许可以在设备中实施并且/或者通过网络实施，这可以作为用于介绍本文所述的一种或多种方法和/或设备的背景。
图32-40描绘了示出在增强现实系统中临时要素恢复的实例的情形的阶段。示出了用户保留他看到经过增强现实设备的出租车，并随后通过与叠加在并未实际存在出租车的情景上的出租车的增强现实呈现交互来确认预订的阶段。
现在参照图41，示出了表示与在增强现实系统中临时要素恢复相关的示例的操作的操作流程的实例，这可以用作介绍本文所述的一种或多种方法和/或设备的背景。
图42图示了图41的示例的操作流程的可供选择的实施例。
图43图示了图41的示例的操作流程的可供选择的实施例。
图44图示了图41的示例的操作流程的可供选择的实施例。
图45图示了图41的示例的操作流程的可供选择的实施例。
图46图示了图41的示例的操作流程的可供选择的实施例。
图47图示了图41的示例的操作流程的可供选择的实施例。
图48图示了在增强现实系统中用于指示观察或可见性模式的系统的实例，其中实施例或许可以在设备中实施并且/或者通过网络实施，这可以作为用于介绍本文所述的一种或多种方法和/或设备的背景。
图49-51描绘了示出在增强现实系统中指示观察或可见性模式的实例的情形的阶段。示出了用户采用公开的系统来观察听报告的学生中的观察模式的阶段。
现在参照图52，示出了表示与在增强现实系统中指示观察或可见性模式相关的示例的操作的操作流程的实例，这可以用作介绍本文所述的一种或多种方法和/或设备的背景。
图53图示了图52的示例的操作流程的可供选择的实施例。
图54图示了图52的示例的操作流程的可供选择的实施例。
图55图示了图52的示例的操作流程的可供选择的实施例。
图56图示了图52的示例的操作流程的可供选择的实施例。
图57图示了图52的示例的操作流程的可供选择的实施例。
图58图示了指示观察或可见性模式的实例，其中增强现实呈现图示为指示靠近用户位置的可见性模式，包括相对于在用户附近工作的照相机的各种视野的用户位置。
在不同附图中使用相同的符号通常表示相似或相同的项目，除非上下文另有指示。
具体实施方式
在人们通过增强现实设备(例如，专用增强现实设备(如Google Glass眼镜)、智能手机、数字照相机、便携式摄像机和平板电脑)交互的世界中，增强现实显示屏或界面在真实世界提供了上面覆盖一个或多个计算机生成的对象、数字图像或功能的窗口。在结构上和语义上，增强现实用户界面从根本上响应于物理接近用户设备的物理状态。物理现实的方面通常呈现在屏幕上；然而，即使它们未呈现在屏幕上，它们通常也在一定程度上影响屏幕上发生的情况。这可能与虚拟现实形成对照，在虚拟现实中，用户的感觉通常被提供完全计算机生成的主题或环境，如同人造感觉机制。
交叉现实拖放
出于对读者的礼貌并且参照本文的附图，一般“100系列”的附图标记通常指的是图1首先引入/描述的项目，“200系列”的附图标记通常指的是图2首先引入/描述的项目，“300系列”的附图标记通常指的是图3首先引入/描述的项目，等等。
在以下详细描述中，参照构成本发明的一部分的附图。在附图中，相似的符号通常标识相似的组件，除非上下文中另有说明。具体实施方式、附图和权利要求书中描述的示例性实施例并不意味着限制。在不脱离本文公开的主题的精神或范围的情况下，可以利用其他实现方案，并且可以进行其他修改。
作为背景，传统的计算机屏幕“桌面”区域包括允许强大的图形对象操作的拖放功能和环境。这通常涉及(1)源，(2)对象，和(3)目的地。这三要素可以确定拖拽过程的操作语义。
在增强现实情形中，如本文所述，用户可以从真实世界执行拖拽操作到增强现实(“AR”)视野或显示屏中，并且反之亦然。例如，如果用户在书店戴着AR眼镜，则用户就可以看到在眼镜上显示的AR购物车。用户然后可以在书店找到书架上真实的书，指着真实的书，取下或者以其他方式将书的增强现实呈现放入AR购物车中。当用户到达收银台或登记以购买书时，用户可以从购物车抓取AR书，将其放在真实的收银机上，书店可以在真实的收银机启动点支付，并且完成交易。用户也可以选择将物理的书快递给自己或者作为别人的礼物的选项，和/或递送电子书到装置。
又如，用户坐在家里的起居室可以查看他的AR设备，该设备上显示例如与Netflix视频在功能上链接的DVD堆层的增强现实呈现。用户可以触碰并抓取视频的增强现实呈现，例如，星球大战，并将其拖拽到起居室的电视机上，从而通知Netflix开始在(已联网的)电视上播放星球大战的视频流，同时用户的Netflix账号中注释用户何时在什么设备上只看什么内容。在某些情况下，这可能涉及信用卡账号或银行帐号的关联的记账。
又如，用户在电影院大厅可以看到明年上映的星球大战冒险故事的最新介绍的电影海报。用户可以抓取电影海报的增强现实呈现到他的增强现实显示屏上的增强现实愿望清单上，从而更新例如他的Netflix队列以计划通知该电影何时上映，并且/或者Netflix上何时可供观察。
在每个这些实例中，照相机或其他检测器将识别并标记动作的来源，换句话讲，“拖拽”的起始。这是待拖拽的对象。接着照相机或其他检测器将监视“拖拽”或远离源对象的动作，并且最终照相机或其他检测器将识别或标记目的地或“放置”。这是增强现实呈现将前往的重要位置。用户可以明确地标记动作的每个端点，例如，通过声音、触摸(AR设备的或对象的)、姿势或其他信号。
与计算机桌面环境上的传统拖放不同，不仅有识别步骤，而且用户指向仅有有限数量的可用目标(用于约束识别问题)的屏幕上的事物。在一个实施例中，约束可以是电影播放器应用(例如，hulu或Netflix)在AR设备或另一个设备(如接近用户的电视)上运行。又如，如果例如kindle设备之类的电子阅读器在购书体验期间正在运行，那么这可以用作约束以告知系统在识别步骤期间查找环境中的书。
识别预期的对象通常来自通过AR设备观察情景的照相机的图像数据进行。可以考虑用户所处的语境。例如，AR设备可以识别书店的类型或者项目的系列，例如，书或DVD；或者甚至对象的不同系列，例如，杂货店的项目。
语音可以用于在拖拽对象之前通知用于将其“抓取”的正确识别。也可以使用标记拖拽开始的其他方式，例如，触摸对象、点击对象、触摸AR设备本身的敏感部分，例如按钮或触摸屏，和/或做出已经预编程在AR设备中以告诉系统已经做出用于拖拽的选择的姿势。
在一个实施例中，语音可以单独用于拖放增强现实呈现。
在另一个实施例中，眼睛跟踪可以用于辨别、识别并选择用户正在看什么，跟踪运动的弧线，拖拽或传送以及辨别、识别并选择放置的目的地。
如本文所用，“增强”、“虚拟”或“增强现实呈现”可以指的是添加到真实屏幕的显示屏上的事物，例如，计算机生成的图像。
在一个实施例中，系统可以包括手持式增强现实设备，其具有至少一个传感器(例如，照相机)、至少一个用于用户输出的图像显示屏以及至少一个用于用户输入的触摸屏(或其他类似装置)。按照用户的指示，增强现实设备可以激活并显示增强现实情景，其包括真实界面对象(例如，由增强现实设备的照相机成像的对象)以及至少一个对象的增强现实呈现。
在一个实施例中，检测并选择(例如，通过第一姿势、语音命令或一些其他预定的方法)增强现实显示屏中的真实界面对象，然后使其在增强现实界面中移动(例如，增强现实设备使用第二姿势、语音命令或一些其他的预定方法来跟踪运动)作为对象的增强现实(或虚拟)呈现，保持第一真实界面对象未改动，或者从情景中去除第一真实界面对象。响应于选择和移动增强现实界面中的真实界面对象，在增强现实界面中呈现用于放置对象的增强现实呈现的至少一个目的地，可能接近真实界面对象。显示屏上用于放置的目的地可以包括在一些情况下当放置对象时会传达对象的增强现实呈现的功能的缩略图、图标或者一些其他符号。目的地图标或符号表示可以放置(例如，通过第三姿势、语音识别或一些其他预定方法)真实界面对象的呈现的对象。
例如，假设用户正在看零售店中的增强现实情景。她将看到商店中的真实对象(例如，书、微波炉和家用器皿)以及增强现实显示屏中的虚拟对象(例如，产品注释以及无论她走到哪里都跟着她的购物车)。如果她想购买一本书，她就看着书架，在增强现实界面内，她可以用手势“拾取”真实的牛津英语字典的全部十二卷的呈现，拖拽，并将它们的增强现实呈现放置到她的虚拟购物车中用于结算，此时她可以决定例如购买真实的书或书的电子副本或两者。
在另一个实施例中，选择(例如，通过第一姿势、语音命令、触摸或一些其他预定的方法)增强现实显示屏中的虚拟界面对象，然后使其在增强现实界面中移动(通过第二姿势、语音命令或一些其他的预定方法)。响应于选择和移动增强现实界面中的虚拟界面对象，在增强现实界面中接近真实界面对象可以呈现至少一个真实界面对象。增强现实界面中的每个真实界面对象表示可以放置(例如，通过第三姿势、语音识别或一些其他预定方法)虚拟界面对象的对象。
例如，假设你正在观察你的家庭娱乐室的增强现实情景。你看到该室内所有的真实对象(例如，电视机、桌子、沙发、书架等等)叠加着增强(例如，你拥有的数字电影的列表，或许由电视机的桌子上的一堆虚拟DVD表示)。你想看你拥有的一部数字James Bond电影，所以在增强现实界面内，你拾取虚拟的Goldfinger DVD，拖拽，并且将其放置在真实的电视机屏幕上。接着真实的电视机上将开始播放电影(或者它可以覆盖着真实的电视机的增强，所以仅用户能看到，或者两种情况都可以)。
又如，朋友给用户一张照片，用户想把它发布到她的社交网络主页上，例如，她的Facebook主页。她可以用手势或语音选择照片，拖拽所得的照片的增强现实呈现到她的增强现实设备的角落的FBb图标上，并将其放置在那以登录她的Facebook主页作为照片的数字副本去向的目的地。这对于待添加到Pinterest的图像、将要添加到个人电子日记的笔记以及其他个人数据存储库具有类似的工作过程。
出于对读者的礼貌并且参照本文的附图，一般“100系列”的附图标记通常指的是图1首先引入/描述的项目，“200系列”的附图标记通常指的是图2首先引入/描述的项目，“300系列”的附图标记通常指的是图3首先引入/描述的项目，等等。
在以下详细描述中，参照构成本发明的一部分的附图。在附图中，相似的符号通常标识相似的组件，除非上下文中另有说明。具体实施方式、附图和权利要求书中描述的示例性实施例并不意味着限制。在不脱离本文公开的主题的精神或范围的情况下，可以利用其他实现方案，并且可以进行其他修改。
图1示出了可用于与用户进行增强现实交互的几个设备。这些设备包括具有平板照相机屏幕102的平板设备100、具有智能照相机屏幕106的智能手机104、数字照相机108、增强现实眼镜110(以罗盘航向的方式示出增强，例如，“SW”，以及环境温度，例如，“65℉”)和视频摄像机112。可以制造具有本文所述的功能的其他形状因素。
图2示出了具有增强现实显示屏208的增强现实设备(智能手机)204，其描绘了增强现实设备的真实世界的视野(智能照相机的视野)的图像200，包括增强现实呈现206，例如，“SW 65℉”。
图3图示了可以实施实施例的示例的增强现实系统322。系统322可以在整个增强现实设备302中工作以供用户300使用。增强现实系统322可以在增强现实设备302上实施，或者它可以全部或部分地远程实施，例如，作为通过网络304的云服务与增强现实设备302通信。增强现实系统322可以包括例如环境背景评估模块306、增强现实设备背景评估模块308、对象选择模块310、图像处理模块312、图像数据库314、数字图像生成模块316、用户运动跟踪模块318、目的地选择模块319和放置登录模块320。在增强现实设备302上运行或通过其运行的增强现实系统322可以通过网络304、无线地或有线连接进行通信。通过可以包括云计算组件的网络304，增强现实系统322可以与网络支付系统324通信，网络支付系统324包括信用卡账号326、Google钱包328和/或PayPal 330。增强现实系统322也可以经由网络304与零售商332(例如，Target 334)通信。增强现实系统322也可以经由网络304与在线数据服务336(例如，Facebook 338、iTunes 340和/或Google Play应用商店342)通信。
以此方式，用户可以相应地与她的环境的数字呈现交互以便尤其是完成交易、收集感兴趣的项目，例如，包括真实对象的数字图像的数字媒体，或者操作例如用于观察或把玩的电影和游戏的事物。
按照本文所提到的，增强现实系统322可以用于执行各种查询和/或相对于真实世界对象的回想技术和/或真实世界对象的增强现实呈现。例如，在通过使用一个或多个图像数据库组织、输入和/或以其他方式访问真实世界对象图像数据的情况下，增强现实系统322可以例如通过对象选择模块310采用各种布尔、统计和/或非布尔搜索技术来选择真实世界情景的一组图像中的正确的真实世界呈现，并且还通过找到例如图像数据库314中的一个图像或者例如通过数字图像生成模块316生成图像来提供对象的增强现实呈现。
可以结合增强现实系统322使用数据库和数据库结构的许多实例。这些实例包括分层模型(其中数据组织在树形和/或父子型节点结构中)、网络模型(基于设置理论，并且其中支持每个子节点多个父结构)或对象/关系模块(关系模型与面向对象模型结合)。
另外其他实例包括各种类型的eXtensible Mark-up Language(XML)数据库。例如，可以包括以不同于XML的一些格式保存数据的数据库，但是这些格式与用于使用XML访问数据库的XML接口相关。又如，数据库可以直接存储XML数据。附加地或可替代地，可以使用事实上任何半结构化的数据库，使得内容可以提供给/关联存储的数据要素(用数据要素编码，或者在数据要素外编码)，使得可以便于数据存储和/或访问。
这些数据库和/或其他内存存储技术可以通过使用各种编程或编码语言编写和/或实施。例如，面向对象数据库管理系统可以用编程语言编写，例如，C++或Java。关系和/或对象/关系模型可以利用数据库语言，例如，结构化查询语言(SQL)，其可以用于例如二义性消除信息的交互查询和/或收集和/或编译来自关系数据库的数据。
例如，可以执行对一个或多个真实世界对象图像数据的SQL或SQL类操作，或者可以执行使用真实世界对象图像数据301的布尔操作。例如，可以执行加权布尔操作，其中根据情景的背景或设备302的背景(可能彼此相对而言)，包括在设备302上运行的程序，给一个或多个真实世界对象图像分配不同的权重或优先权。例如，根据识别的线索，例如，表示在书店的位置的地理数据，可以执行数字加权、专属OR操作以请求对象类别的具体加权。
图4图示了用户与即时增强现实系统交互的实例。图4a描绘了增强现实装置(智能手机)，在其屏幕上显示照相机的视野中包含书的书架。
图4b描绘了用户的手指向一个书架上的一本书；例如，可以采集到印刷在用户的食指附近或所触摸处的书的书脊上的文字的增强现实系统322和/或图像处理模块312检测到这个姿势。另外，增强现实设备背景评估模块308可以检测到设备正在运行具有与特定的书架相关的虚拟购物车功能的程序(如图4b-4f的左下角的购物车图像所示)，并且如果在情景中有其他非书项目，那么系统可以使用书店相关的虚拟购物车作为过滤器使得仅情景中的书被考虑供备选。在一些实施例中，菜单，例如，书标题的下拉式菜单例如可以呈现给用户供选择。
在选择书时，增强现实系统322和/或数字图像生成模块316可以在图像数据库314中寻找并且显示或建立且显示选择的书的增强现实呈现417。
图4c描绘了与用户的食指指向的书对应的书架上的单本书被加亮。
图4d描绘了随着手朝着显示屏上的购物车图标移动而与用户的手相关的选择的书的更详细的增强现实呈现417。这是移动或拖拽操作，在书到达购物车时，此操作将告诉系统有关书的信息应当记录在用户的购物车账户中，或许在书店的网页上。这是登记放置。例如，响应于检测到由例如用户运动跟踪模块318跟踪的用户移动他的指向手指到图标上，目的地选择模块319和/或放置登记模块320可以在增强现实设备的显示屏中的购物车图标登记书的显示的增强现实呈现。
任选地，增强现实显示屏可以提供放置的登记的指示，如图4f所示，其中购物车图标经过修改以在上面包括1，表明购物车中有一件项目。
增强现实系统322也可以从AR到现实执行反向操作。这包括检测显示屏上的增强现实呈现417，根据至少一个检测的用户的第二动作(例如，将其拖到真实世界项目上)在增强现实设备的显示屏上移动显示的增强现实呈现417，并且响应于例如在用于支付书的信用卡处理设备处结束、在用于播放电影的电视处结束或者在用于从例如智能手机传送音频书到汽车的汽车处结束的拖拽姿势在增强现实设备的真实世界视野中的位置登记显示的增强现实呈现。
当然，如图14所示，系统可以执行现实到AR和反向的过程。其中一个实例是以下整个过程：检测/选择用户指示的真实项目；将其增强现实呈现417拖拽到AR设备上的位置；然后再次对其进行检测/选择用于移动到不同的真实世界对象。其中一个实例是以下整个过程：从书店的书架选择书；将其放置在虚拟购物车中；然后在信用卡处理设备取回书用于支付。
图5-14图示了表示与增强现实系统中的选择、拖拽和放置有关的示例的操作的操作流程。在包括操作流程的各种实例的以下附图中，可以相对于图1-4的上述系统环境和/或相对于其他实例和背景提供讨论和说明。然而，应当理解的是，操作流程可以在许多其他环境和背景和/或图1-4的修改版本中执行。另外，尽管按照图示的顺序提供了多个操作流程，但是应当理解的是，多个操作可以按照除说明的顺序之外的其他顺序执行，或者可以同时执行。
增强现实系统中动态保留情景要素
在用户通过AR眼镜观察真实世界情景的情况下，例如，用户可能想选择情景内的一些对象或人以经由AR眼镜进行交互。例如，如果用户通过他的眼镜观察David Bowie，那么她可能想选择通过AR眼镜观察到的David Bowie的图像以激活在线购买一些DavidBowie的音乐或许无线下载到AR眼镜的一些选项。用户输入可以包括眼镜跟踪、语音、姿势或触摸AR设备或另一个设备，例如，与AR眼镜关联上(例如，经由蓝牙)的智能手机，以及其他输入形式。
在一个实施例中，本申请提供了一个系统，其中呈现在AR设备上的情景的要素可以按照以下方式修改或改造：保留用户(或系统)感兴趣的要素或方面使得用户(或系统)可以在它们在其它情形下可能变得不可访问或不可用的情况下完成对这些要素的操作。如下文和权利要求书中更详细地讨论，其他实施例包括一种方法或系统，其能够暂停或者以其他方式修改情景或情景要素的呈现使得在其它情形下可能变得不可访问的用户感兴趣的要素变得可用，只要它们是交互所需的即可。
本公开的一些方法方面包括(a)接收与情景中呈现的项目、方面或要素相关的请求；(b)检测项目、方面或要素的第一呈现已经离开或者将要离开，情景的视野或者以其他方式在当前活动的背景中变得不可访问或难以访问；(c)通过但不限于以下各项中的一个或多个保留与项目、方面或要素相关的呈现或代理呈现：(i)放慢情景或情景的方面的更新速率或帧速率或呈现速率；(ii)保持/采集或并入情景中的项目、方面或要素的呈现；(iii)生成项目、方面或要素的模拟呈现；或(iv)生成用于项目、方面或要素的代理情景支持(affordance)。
另外，实施例可以包括(d)响应于以下各项中的一个或多个恢复第一呈现：(i)第一呈现的背景中的项目的不可访问性的结束；(ii)用户输入；或(iii)当前活动的结束。
在一个实例中，本公开提供了在用户与可能很快离开或在“实时”情景中变得模糊的项目交互时减速或暂停情景的方式，任选地随后是追上实时显示的状态的过程。
另外的方面可以包括以下一项或多项(在不同实施例中的各种组合中)：(e)确定一个或多个情景呈现规范(例如，生成情景的规则；“实时”与延迟、视野、说明、聚焦、增亮、缩放等)；(f)根据(i)用户任务、(ii)系统任务、(iii)背景、(iv)用户兴趣、(v)用户偏好中的一个或多个确定与情景的一个或多个项目、方面或要素对应的感兴趣的呈现；(g)根据第一(当前)情景呈现规范确定有关感兴趣的呈现的交互困难(例如，识别出如果项目按照它当前的轨迹或维持更新速度或用户继续以当前方式移动他的设备或位置，那么项目将离开屏幕或移动到障碍物后面或变小或难以辨别或触摸)；(h)修改第一情景呈现规范的方面并且/或者用第二情景呈现规范替换第一情景呈现规范，其修改或替换减小了有关感兴趣的呈现的交互困难；(i)恢复(例如，用动画或其他过渡)第一情景规范，并且/或者响应于或预测以下各项去除第一情景规范的修改：(i)确定用户呈对现的兴趣或与感兴趣的呈现的交互结束；(ii)确定有关采用第一情景呈现的感兴趣的呈现的交互困难的减少；(iii)用户的请求；(iv)背景、任务或设置变更中的至少一个；或(v)通知或中断。
一些实施例中，本公开因此提供了一种方式来修改在用于构件情景的规则在其他情形下会变得不可访问或不可用的情景中感兴趣的项目的呈现，例如，通过修改用于生成情景或情景的方面的规则，随后任选地恢复这些规则进行。
一个实施例包括在当前情景显示可能导致这些呈现变得不可访问或者以其他方式难以交互的情形中用于暂停、采集或生成与当前任务或交互关联足够长以完成该任务或交互的要素相关的呈现的方法。
例如，用户可以通过与路过的出租车的呈现交互来开始预订出租车，但是在交互中，由于出租车远去或被公交车或建筑遮挡或者行驶一定距离而变得太小而不容易在屏幕上交互。本发明和系统可以“暂停”或“减速”情景或部分情景足够长的时间供用户完成她的交互，然后一旦完成交互就任选地“追上”(例如，通过一些方式，比如快速前进)以“实时动作”。在另一个实施例中，本方法和系统可以放大出租车(如果它已经从视野远去并变得太小)或者模拟去除遮挡的对象，例如，另一个车辆、建筑或指示牌。
本方法和系统还允许在延迟或修改不再必要或需要时用实时情景呈现“追上”修改或延迟的情景或呈现。这些方面在上面讨论过并且可以用于已经相对于初始的情景呈现规范修改情景或情景的方面的显示的情形。具体地讲，本方法和系统可以包括确定正在管理、修改或操作某些呈现或呈现的方面，以及响应于任务、背景或用户输入的需要“释放”这些修改或操作。
额外的方面包括用于建立支持上述特征的应用和系统的工具，包括提供相关功能的平台要素、API和类框架，例如：“需要呈现的”状态；“不再需要呈现的”事件；为具有物理或认知障碍的用户表征情景要素的可用性和可访问性(例如，太小而无法触摸，运动太快而无法跟踪)的属性，以及相关事件(例如，“对象已经变得太小”)等。
图15图示了可以实施实施例的示例的增强现实系统1522。系统1522可以在整个增强现实设备1502中工作以供用户1500使用。增强现实系统1522可以在增强现实设备1502上实施，或者它可以全部或部分地远程实施，例如，作为通过网络1504的云服务与增强现实设备1502通信。增强现实设备1502将具有包括真实世界对象图像数据1501和真实世界对象运动数据1503的可视视野200。
增强现实系统1522可以包括例如环境背景评估模块1506、增强现实设备背景评估模块1508、请求检测模块1510、对象检测和跟踪模块1511、对象矢量、速度、加速度和轨迹跟踪模块1511、图像呈现修改模块1513、视频操作模块1514、图像数据库1515、数字图像生成模块1516、增强现实呈现1517、设备视野跟踪模块1518、菜单呈现模块1519和/或呈现恢复模块1520。在增强现实设备1502上运行或通过其运行的增强现实系统322可以通过网络1504、无线地或有线连接地进行通信。通过可以包括云计算组件的网络1504，增强现实系统1522可以通信以完成与网络支付系统1524的交易或其他交互，网络支付系统1524包括信用卡账号1526、Google钱包1528和/或PayPal 1530。增强现实系统1522还可以经由网络1504通信以完成与零售商1532的交易或其他交互，例如，出租车公司1534或在线零售商，如Amazon.com 1535或iTunes1540。增强现实系统1522也可以经由网络1504通信以完成与在线数据服务1536的交易或其他交互，例如，Facebook 1538、iTunes 1540和/或Google Play应用商店1542。
以此方式，用户可以与她的环境的数字呈现交互以便尤其是完成交易、收集感兴趣的物理或数字项目，例如，预订物理商品或建立传输数字媒体，包括真实对象的数字图像，或上传数字媒体到社交网络，例如，Facebook或Pinterest。
按照本文所提到的，增强现实系统1522可以用于执行各种数据查询和/或相对于真实世界对象的回想技术和/或真实世界对象的增强现实呈现。例如，在通过使用一个或多个图像数据库组织、输入和/或以其他方式访问真实世界对象图像数据的情况下，增强现实系统1522可以例如通过请求检测模块1510采用各种布尔、统计和/或非布尔搜索技术来选择真实世界情景的一组图像中的正确的真实世界呈现，并且还通过找到例如图像数据库1515中的一个图像或者例如通过数字图像生成模块1516生成图像来提供对象的增强现实呈现1517。
可以结合增强现实系统1522使用数据库和数据库结构的许多实例。这些实例包括分层模型(其中数据组织在树形和/或父子型节点结构中)、网络模型(基于设置理论，并且其中支持每个子节点多个父结构)或对象/关系模块(关系模型与面向对象模型结合)。
另外其他实例包括各种类型的eXtensible Mark-up Language(XML)数据库。例如，可以包括以不同于XML的一些格式保存数据的数据库，但是这些格式与用于使用XML访问数据库的XML接口相关。又如，数据库可以直接存储XML数据。另外或可替代地，可以使用事实上任何半结构化的数据库，使得内容可以提供给/关联存储的数据要素(用数据要素编码，或者在数据要素外编码)，使得可以便于数据存储和/或访问。
这些数据库和/或其他内存存储技术可以通过使用各种编程或编码语言编写和/或实施。例如，面向对象数据库管理系统可以用编程语言编写，例如，C++或Java。关系和/或对象/关系模型可以利用数据库语言，例如，结构化查询语言(SQL)，其可以用于例如二义性消除信息的交互查询和/或收集和/或编译来自关系数据库的数据。
例如，可以执行对一个或多个真实世界对象图像数据的SQL或SQL类操作，或者可以执行使用真实世界对象图像数据1501的布尔操作。例如，可以执行加权布尔操作，其中根据情景的背景或设备1502的背景(可能彼此相对而言)，包括在设备1502上运行的程序，给一个或多个真实世界对象图像分配不同的权重或优先权。例如，根据识别的线索，例如，已知的用户偏好，可以执行数字加权的、专属OR操作以请求对象类别的具体加权。
以此方式，例如尤其通过识别AR设备视野中已知用户感兴趣的项目类别可以解决情景内对象的复杂度选择的歧义性。系统的这种识别事件在与有歧义的请求相关的情景中，例如，在AR设备的视野的区域中的姿势，可以大大减少普通的对象。在一些实施例中，系统可以例如通过加亮连续变小的对象的集合并且在每个阶段提示用户从其中进行选择，从而按照阶段中的用户请求的准确性质作出决定。这可能涉及嵌套的边界，例如，如果呈现“Beatles”边界(如以下实例中所讨论的)，那么可以去除情景中其他非Beatles对象(或者可以加亮Beatles)，在选择Ringo Starr之后，可以去除其他三个Beatles，把Ringo留在要交互的请求项，通知可能呈现各种菜单选项，例如，购买音乐或电影，上传图像或视频数据到社交网络，或者检索有关Ringo Star的网络信息。
以此方式，系统可以从语义边界，例如，“Beatles”，区分位置边界，例如，AR显示屏上的像素坐标。
图16-18图示了用户与不包括动态保留本文讨论的情景中的要素的能力的增强现实系统交互的实例。图16描绘了增强现实设备(智能手机)在其屏幕上显示Beatles走过Abbey Road。如果用户想购买Ringo Starr(她最喜欢的Beatle)的一些音乐，已知她所使用的AR应用支持AR应用识别的任何项目的音乐购买，她将不得不快速点击或者以其他方式请求与Ringo的图像交互以购买音乐。
图17描绘了用户由于路过了显示屏而错过Ringo的情景；这对用户来说太难以选择。(或者如果用户确实打算选择他的对象，那么该对象在采取所需的动作之前就离开屏幕，并且背景将失去)。图18描绘了在所有的Beatles离开AR设备的视野并且从设备的屏幕消失后的片刻的相同情景。
图19-23描绘了看到Beatles走过Abbey Road但是这次具有用于动态保留在AR设备上实施或通过其实施的情景的要素的本公开的技术的相同情景。
图19再次描绘了用户在Ringo的图像移动穿过AR设备的屏幕时尝试点击Ringo。
图20描绘了由于系统识别出Ringo的图像是用户感兴趣的项目而成功“点击”Ringo，或许通过点击指示器并且凭借例如存储在环境背景评估模块1506中的系统已知的此前表示对Ringo Starr感兴趣进行，该模块可以评估环境中可识别的对象并且将其与存储的图像数据库中的对象进行匹配。成功点击并且系统识别出这代表用户“请求”与之交互(在这种情况下是选择的人)可以与Ringo Starr相对于AR设备的视野的真实世界运动的矢量物理分析一致。这种分析可以由例如对象检测和跟踪模块1511和/或对象矢量、速度、加速度和轨迹处理模块1512执行。这种分析可以在二维或三维中进行，并且它也可以考虑时间，例如直到感兴趣的对象不再在AR设备的视野内的时间，并且因此不可用于AR设备上的交互。
这里，增强现实系统1522可以包括用于计算时间段的一个或多个阈值，例如，在此期间将暂停显示屏上的请求项。例如，用于与屏幕的要素交互5秒的阈值可以编程到图像呈现修改模块1513中；如果在请求之后，对象矢量、速度、加速度和轨迹处理模块1512计算Ringo的当前速率和当前方位，Ringo的图像将在1.5秒内离开AR显示屏，这将触发视频操作模块1514冻结或减缓Ringo穿过显示屏的视频以允许用户执行所需的交互(因为这在5秒阈值下限以下)。可以就显示屏上对象的大小而言设置类似阈值，例如变得非常小(例如，小于1平方厘米)的对象，可以被视为不再可用于交互并且因此被放大用于交互，例如通过数字图像生成模块1516建立该对象的更大的增强现实呈现1517(或许具有相关的菜单或命令按钮来表示并便于可用的交互)进行。
如图20所示，AR可以加亮选择的对象作为与用户确认系统已经登记正确的请求并且感兴趣的项目已经“暂停”或者以其他方式增强(例如，冻结、减速、去遮挡、放大或者以其他方式更适用于AR设备上的交互)的方式。
如图21所示，即使Ringo的时间继续流逝(他的队友离开屏幕，汽车在路上继续行驶等等)，Ringo已经冻结在位。这保证用户能在此情景中作用在感兴趣的特定项目上；当屏幕“实时”呈现时，与它可能具有的时间相比，它保留可用于交互更长的时间段。
如图22所示，系统现在有时间为用户识别Ringo并且在他上面贴上几个可用的命令或菜单选项，包括例如“购买音乐”、“寻找图片”或“发布图像或视频到FaceBook”。
如图23所示，任选地在一些实施例中，当用户不再对Ringo感兴趣时，她就放开Ringo，并且我们看到Ringo在这种情况下“快速前进”，他冲出屏幕并追上他的队友，此后，整个AR屏幕再次显示为“实时”。
图24-30图示了表示与增强现实系统中的动态保留要素相关的示例的操作的操作流程。在包括操作流程的各种实例的这些附图中，可以相对于图15的上述系统环境和/或相对于其他实例和背景提供讨论和说明。然而，应当理解的是，操作流程可以在许多其他环境和背景和/或图15-23的修改版本中执行。另外，尽管按照图示的顺序提供了多个操作流程，但是应当理解的是，多个操作可以按照除说明的顺序之外的其他顺序执行，或者可以同时执行。
在一个实施例中，增强现实系统1522可以包括：用于接收与增强现实设备的视野的至少一个项目、方面或要素相关的用户请求的电路；用于确定至少一个项目、方面或要素的第一呈现相对于增强现实设备的视野具有供用户交互的有限的可行的时间段的电路；以及用于响应于用于确定至少一个项目、方面或要素的第一呈现相对于增强现实设备的视野具有供交互的有限的可行的时间段的电路的至少一个输出维持第一呈现或提供基本上类似的第二呈现中的至少一种的电路。
临时要素恢复
本公开提供了一种系统，其中呈现在AR设备上的情景的要素可以按照以下方式修改和/或改造：保留用户(或系统)感兴趣的要素或方面使得用户(或系统)可以在它们在其他情况下可能不可访问或不可用的情况下完成对这些要素的操作。
本公开包括在典型的实施例中可以配置在一起的两个相关但不同的子系统：(1)用于使感兴趣的要素在情景或修改情景中可用的或可访问的“实时”情景中不再可见的方法和系统；以及任选地(2)用于去除修改或延迟的情景或呈现并且当修改不再必要时恢复实时情景呈现的方法和系统。
本公开的一些方法方面包括：(a)接收与当前情景中未呈现的项目、方面或要素相关的请求，包括(i)涉及项目、方面或要素的通知、(ii)涉及项目、方面或要素的内容或动作、(iii)关于采用和/或包括项目、方面或要素的系统状态(例如，启动的或恢复的应用、工具或过程的系统状态)；(b)(响应于请求)生产与项目、方面或要素相关的呈现，包括以下项中的一个或多个：(i)(当前)存在于情景中的相关项目、方面或要素的替代物、(ii)项目、方面或要素的(适合情景的)代理呈现的生成、(iii)情景的修改以包括项目、方面或要素的(合适的)代理呈现；(c)通过与生成的呈现的后续交互处理请求和任何后续相关的动作。
替代的实施例提供用于(d)(响应于请求)获取合适的呈现的过程，包括用于操作其设备或者以其他方式采取动作而在当前情景中带入合适的呈现(包括但不限于原始项目、方面或要素)的给用户的建议或暗示。
另外的实施例包括(e)响应于完成请求或请求的方面或响应于用户的指示终止、解散、去除或释放呈现。最后，典型的实施例将提供(f)与生产的(b)或获取的(d)项目相关的不同的(任选地显示)指示和情景支持。
另一个实施例可以包括接收与当前情景(例如，特殊加亮等)中不再呈现并且进一步将此前和当前的情景约束在单个引用、系统、会话或时间表的AR情景中此前呈现的项目或方面相关的请求。
在示例的实施例中，用户可以执行一些任务，例如，切换到新的应用，或者响应电子邮件或通知，或者打开文件，这些任务要求或引用在他的设备上的当前“实时”AR情景中不再可见或可访问的项目。在这些情况下，系统可以提供在当前情景中用户可以采取的“获取”项目的动作的指示(例如，他应当点设备的哪里)，或者系统可以呈现该项目如同该项目是当前情景的一部分，将其临时插入或重叠相关操作的持续时间，或者系统可以修改情景使得该项目出现以实际上成为情景的一部分，或者系统可以替换情景中存在的相关项目作为“失去”项目的代理。
例如，用户可以使用AR街道情景应用以在出租车经过时与出租车交互而保留出租车，从而仅当出租车驶离他可以通过他的增强现实设备采集的情景范围之后接收确认请求和额外细节。响应于后续确认接收或有关出租车的其他信息，本系统然后可以使用另一个出租车，或者模拟出租车来呈现失去的出租车并且用作为与用失去的出租车发起的交易相关的后续交互的对象。
在更极端且一定程度上异想天开的实例中说明了这一点，用户在出现继续交易的请求时可能已经进入玩具店，在这种情况下失去的出租车的代理可以是商店中的玩具出租车，或者渲染成商店货架上的玩具出租车的合成项目。
可替代地，如果用户的设备靠近或能够容易获取出租车(可能甚至是原始指定的出租车)，那么系统可以显示用户需要将他的设备指向以重新获取对象出租车的方向的指示。
在一些实施例中，与用户交互的请求相关的不再存在的对象可以按照与出现的原始对象不同(尽管可能有关联)的方式呈现在增强现实设备上。例如，在出租车的实例中，如果建筑内的用户收到确认出租车保留的请求，那么出租车的增强现实呈现可以不是出租车本身，而是在司机的衣服上的出租车公司徽标的出租车司机的计算机生成图像。以此方式，可以以对用户和设备的背景合适的方式向用户呈现请求。设备可以例如经由环境背景评估模块3106基于检测的背景自动呈现合适的呈现。例如“车辆不得进入建筑，除非有人”的规则集合可以用于促进此功能。
任选地，一个实施例包括用于在不再需要修改时去除修改或延迟的情景或呈现并且恢复为增强现实设备的视野的实时呈现的系统和方法。这些实施例包括相对于初始情景呈现规范已经修改情景或情景方面的显示的情形。具体地讲，一个实施例包括确定正在修改某些呈现或呈现的方面，以及响应于任务、背景或用户输入的需求“释放”这些修改。
在请求的特定背景呈现的另一个实例中，通过增强现实眼睛阅读报纸的用户可以通过包括位于报纸上的出租车公司徽标的虚拟便利贴看到出租车保留的确认请求，作为此前选择以保留的出租车的增强现实呈现。
本公开的额外的方面包括建立支持上述特征的应用和系统的工具，包括提供相关功能的平台要素、API和类框架。
图31图示了可以实施实施例的示例的增强现实系统3122。系统3122可以在整个增强现实设备3102中工作以供用户3100使用。增强现实系统3122可以在增强现实设备3102上实施，或者它可以全部或部分地经由网络3104远程实施，例如，作为通过网络3104的云服务与增强现实设备3102通信。增强现实设备3102将具有包括真实世界对象图像数据3101和真实世界对象运动数据3103的可视视野200。
增强现实系统3122可以包括例如环境背景评估模块3106、增强现实设备背景评估模块3108、请求检测模块3110、对象检测和跟踪模块3111、对象矢量、速度、加速度和轨迹跟踪模块3112、图像呈现修改模块3113、视频操作模块3114、图像数据库3115、数字图像生成模块3116、增强现实呈现3117、设备视野跟踪模块3118、菜单呈现模块3119、呈现恢复模块3120和/或请求处理模块3121。
在增强现实设备3102上运行或通过其运行的增强现实系统3122可以通过网络3104、无线地或有线连接地进行通信。通过可以包括云计算组件的网络3104，增强现实系统3122可以通信以完成与网络支付系统3124的交易或其他交互，网络支付系统3124包括信用卡账号3126、Google钱包3128和/或PayPal 3130。增强现实系统3122还可以经由网络3104通信以完成与零售商3132(例如，出租车公司3134或在线零售商，如Amazon.com 3135)或iTunes 3140的交易或其他交互。增强现实系统3122也可以经由网络3104通信以完成与在线数据服务3136(例如，Facebook 3138、iTunes 3140和/或Google Play应用商店3142)的交易或其他交互。
以此方式，用户可以与她的环境的数字呈现交互以便尤其是跟踪物理商品或服务的订单、完成交易或进行冗长或不连续的通信。
按照本文所提到的，增强现实系统3122可以用于执行各种查询和/或相对于真实世界对象的回想技术和/或真实世界对象的增强现实呈现。例如，在通过使用一个或多个图像数据库组织、输入和/或以其他方式访问真实世界对象图像数据的情况下，增强现实系统3122可以例如通过请求检测模块3110采用各种布尔、统计和/或非布尔搜索技术来选择真实世界情景的一组图像中的正确的真实世界对象图像，并且还通过找到例如图像数据库3115中的一个图像或者例如通过数字图像生成模块3116生成图像来提供对象的增强现实呈现3117进行。
可以结合增强现实系统3122使用数据库和数据库结构的许多实例。这些实例包括分层模型(其中数据被组织在树形和/或父子型节点结构中)、网络模型(基于设置理论，并且其中支持每个子节点多个父结构)或对象/关系模块(关系模型与面向对象模型结合)。
另外其他实例包括各种类型的eXtensible Mark-up Language(XML)数据库。例如，可以包括以不同于XML的一些格式保存数据的数据库，但是这些格式与用于使用XML访问数据库的XML接口相关。又如，数据库可以直接存储XML数据。另外地或可替代地，可以使用事实上任何半结构化的数据库，使得内容可以提供给/关联存储的数据要素(用数据要素编码，或者在数据外编码)，使得可以便于数据存储和/或访问。
这些数据库和/或其他内存存储技术可以通过使用各种编程或编码语言编写和/或实施。例如，面向对象数据库管理系统可以用编程语言(例如，C++或Java)编写。关系和/或对象/关系模型可以利用数据库语言，例如，结构化查询语言(SQL)，其可以用于例如二义性消除信息的交互查询和/或收集和/或编译来自关系数据库的数据。
例如，可以执行对一个或多个真实世界对象图像数据的SQL或SQL类操作，或者可以执行使用真实世界对象图像数据3101的布尔操作。例如，可以执行加权布尔操作，其中根据情景的背景或设备3102的背景(可能彼此相对而言)，包括在设备3102上运行的程序，给一个或多个真实世界对象图像分配不同的加权或优先权。例如，根据识别的线索，例如，已知的用户偏好、用于限定对象或对象类型与支持的通信和/或增强现实系统3122和/或增强现实设备3102可能发起、调停并且/或者完成的交易之间的关系的合适的特定规则集合，可以执行数字加权、专属OR操作以请求对象类别的具体加权。
以此方式，可以执行呼叫和响应类型的交互，其中可以处理用户的呼叫(例如，通过点击(例如，眼睛跟踪设备检测到的存在)AR设备视野中的出租车的操作来表示的出租车预订的请求)并且经由原始出租车或出租车的方面的增强现实呈现的显示通过对系统发出“请求”而在晚些时候在AR设备上给用户返回响应，其中实际出租车不再在AR设备的视野中。
以此方式，系统可以跟踪涉及冗长或不连续通信(例如，输送跟踪)的交互；订单执行；简单电子邮件、短信息或语音消息；或日程安排。
图32-39图示了用户与按照本文公开的方式实时临时要素恢复的增强现实设备和系统交互的实例。图32描绘了增强现实设备(智能手机)在其屏幕上显示包括出租车的情景。图33描绘了用户的手指点击增强现实设备3102的显示屏上的出租车的图像。图34描绘了系统响应于选择出租车而放置在AR显示屏上的两个命令选项：“Speedy出租车公司”和“预订出租车”显示在出租车附近作为显示屏上的图像按钮。图35描绘了用户的手指点击“预订出租车”按钮以预订出租车。
图36描绘了在情景中不再存在出租车的时候用户通过AR设备观察街道。出租车公司现在想确定确认用户此前作出的预订，但是现在街上没有出租车来给用户提供确认的背景。图37描绘了增强现实设备3122可以给用户提供合适的背景(并且给用户提供用于交互的适当地背景支持以完成来自出租车公司的对确认的请求)的方式，其中AR启用的设备和/或AR系统生成出租车的增强现实呈现3117或“虚拟出租车”以放置在AR情景内。这给用户提供了背景来处理来自出租车公司的预订请求。
请求检测模块3110可以检测请求，并且数字图像生成模块可以基于检测的请求自动呈现例如与请求相关的对象的图像、或对象的修改的图像、计算机生成的对象版本或与对象相关的不同对象。
图38描绘了用户的手指点击虚拟出租车以选择出租车，并且图39描绘了系统已经放置在虚拟出租车旁边作为用户可以例如通过点击以确认预订来激活的项目的命令选项。
任选地，如图40所示，一旦作出确认，系统就可以从AR情景去除“虚拟出租车”，例如，从而恢复情景的“实时”视图。
图41-47图示了表示与增强现实系统中的临时要素恢复相关的示例的操作的操作流程。在包括操作流程的各种实例的这些附图中，可以相对于图31的上述系统环境和/或相对于其他实例和背景提供讨论和说明。然而，应当理解的是，操作流程可以在许多其他环境和背景和/或图31-40的修改版本中执行。另外，尽管按照图示的顺序提供了多个操作流程，但是应当理解的是，多个操作可以按照除说明的顺序之外的其他顺序执行，或者可以同时执行。
指示观察或视觉图案
本发明的实施例涉及用户可以通过AR启用的设备观察情景的系统和方法。用户可以使用应用(其可以是设备的操作系统)、动作或姿势(其可以响应于检测的信号或背景变化、用户输入或组合)以通知使用应用呈现的情景或情景的方面将用作一个或多个过程的输入，一个或多个过程个别地或共同向应用返回AR启用的设备或AR启用的设备的用户的情景或可见性轮廓的观察历史。系统然后可以用一些或所有获取的信息作为数据源的递交的查询的结果来修改情景。
本公开的方面包括：具有一个或多个照相机或其他硬件或系统或访问提供从设备周围获得的视觉信息的系统的设备或系统；第一设备上AR启用的应用，通过应用(例如，通过访问硬件(例如，照相机硬件))或低水平系统服务(例如访问默认数据存储位置，如“我的视频”)或平台或其他服务(例如，图像或视频源形式)直接呈现从视觉信息获得的情景。
在一个实施例中，系统或方法包括用于基于以下各项中的至少一项建立“位置历史”查询的AR启用的应用：(1)第一设备的当前地理位置；(2)用户的当前地理位置；(3)第一设备的地理位置历史；或(4)用户的地理位置历史。
AR启用的应用的系统或方法然后可以发送查询给一个或多个数据源，例如，包括能够个别地或共同向AR启用的应用返回至少以下信息的过程、系统、应用和数据库中的一些：在“位置历史”的确定半径内存在的固定记录设备的地理位置和视野；在“位置历史”的确定几何和临时半径内存在的移动记录设备的地理位置和视野；和/或在所述“位置历史”的确定地理和临时半径内存在的个体的地理位置和视野。
系统和方法还可以包括AR启用的应用，该应用在当前的AR情景中的第一设备上向用户呈现响应于查询接收的数据的视觉呈现，包括以下各项的至少一些：(1)使得这样点击的项目目前能观察用户的视觉或听觉指示。例如，在典型实施例中，用户可以坐在公园的长凳上，通过他的AR设备观察。由于对他的隐私或安全好奇，他或她可以启动他们的“隐私观察者”AR应用。通过他/她的AR启用的设备，公园的几个区域现在被识别为在照相机的视野内(或许因为包括照相机的视野的增强现实呈现5820呈锥形或三角形形状叠放在情景中或情景的二维地图中，参见图58)，并且他或她意识到在两个最近的路灯上有两个固定照相机，这两个照相机能记录他或她的活动以及他或她周围的这些活动。年轻女子持有的智能手机也被识别为记录设备的可能视野。年轻女子以及公园内的另外两个人(其中之一在当前用户后面)也被标记为具有移动记录设备。所有这些设备和人都能观察且潜在地记录用户的当前位置。
在一些实施例中，系统或方法可以包括这样识别的项目过去已经能观察用户的视觉或听觉指示，或者这样识别的项目未来能观察用户的视觉或听觉指示。
在一些实施例中，系统或方法可以包括向用户呈现与视觉呈现相关的一组情景支持，其允许用户或许根据时间、位置、使用照相机的频率、观察的频率、视频的质量或从数据源可得到的其他数据特征过滤响应于所述查询接收的数据。
例如，当前背对用户的警察可以以这样一种方式标记：用户知道过去某个时间警察能观察到用户。对警察的标签的控制使用户倒回查看警察的“观察历史”以查看何时警察能够观察到用户。类似地，在第三路灯上来回扫过确定的视野的照相机可以以这样一种方式标记：用户知道在不远的将来的某个时候该照相机能够观察到用户。
额外的方面包括用于建立支持上述“观察历史”特征、包括用于采集并分析视觉媒体流(例如，眼睛跟踪(包括瞳孔分析、注视跟踪、停留和快速扫过分析等等)和视野)的关键特征的数据库方案和工具的应用和系统的协议，以及用于支持新种类的图形信息系统的协议。
图48图示了可以实施实施例的示例的增强现实系统4822。系统4822可以在整个增强现实设备4802中工作以供用户4800使用。增强现实系统4822可以在增强现实设备4802上实施，或者它可以全部或部分地经由网络4804远程实施，例如，作为通过网络4804与增强现实设备4802通信的云服务。增强现实系统4802可以具有包括真实世界对象图像数据3101和真实世界对象运动数据3103的视觉视野200。增强现实设备4802和/或增强现实系统4822可以与数据源4801通信，该数据源4801可以寄存在增强现实设备4802上或不寄存在其上，并且可以包括记录设备数据4803和/或个体位置数据4805。
增强现实系统4822可以包括例如环境背景评估模块4806，其继而可以包括眼睛跟踪模块4807和/或设备视野跟踪模块4808。系统4822可以进一步包括增强现实设备背景评估模块4810、位置历史查询模块4812、图像呈现修改模块4813，图像呈现修改模块4813继而可以包括视频操作模块4814。系统4822可以进一步包括位置数据映射模块4816，其继而可以包括射频数据三角测量模块4817、WiFi热点数据库4818和/或数据过滤器模块4819。系统4822可以进一步包括图像数据库4820和/或能建立增强现实呈现4823的数字图像生成模块4821。
在增强现实设备4802上运行或通过其运行的增强现实系统4822可以通过网络4804、无线地或有线连接地进行通信。通过可以包括云计算组件的网络4804，增强现实系统4822和/或增强现实设备4802可以通信以完成与网络支付系统4824的交易或其他交互，网络支付系统4824包括信用卡账号4826、Google钱包4828和/或PayPal 4830。增强现实系统4822还可以经由网络4804通信以完成与零售商4832(例如，出租车公司4834或在线零售商，如Amazon.com 4835)或iTunes 4840的交易或其他交互。增强现实系统4822也可以经由网络4804通信以完成与在线数据服务4836(例如，Facebook 4838、iTunes 4840和/或GooglePlay应用商店4842)的交易或其他交互。
以此方式，用户可以知晓谁在观察她以及在她行走区域中的视频监视程度。在一些实施例中，有关用户、用户设备、个体和照相机位置(活动的或固定的)的可用数据中可以包括GPS定位数据、蜂窝通信定位数据、社交网络登录或WiFi网络数据等中的至少一种。
按照本文所提到的，增强现实系统4822可以用于执行各种数据查询和/或相对于真实世界对象、成像数据、位置数据、时间和日期数据的回想技术和/或真实世界对象的增强现实呈现。例如，在通过使用一个或多个图像数据库组织、输入和/或以其他方式访问视频摄像机图像数据的情况下，增强现实系统4822可以例如通过环境背景评估模块4806和/或位置数据映射模块4816采用各种布尔、统计和/或半布尔搜索技术来从真实世界位置的一组图像中选择相对于特定用户或设备的正确位置、时间和日期，并且还例如经由数字图像生成模块4821提供观察模式或可见性模式的增强现实呈现4823。
可以结合增强现实系统4822和/或数据源4801使用数据库和数据库结构的许多实例。这些实例包括分层模型(其中数据被组织在树形和/或父子型节点结构中)、网络模型(基于设置理论，并且其中支持每个子节点多个父结构)或对象/关系模块(关系模型与面向对象模型结合)。
另外其他实例包括各种类型的eXtensible Mark-up Language(XML)数据库。例如，可以包括以不同于XML的一些格式保存数据的数据库，但是这些格式与用于使用XML访问数据库的XML接口相关。又如，数据库可以直接存储XML数据。另外或可替代地，可以使用事实上任何半结构化的数据库，使得内容可以提供给/关联存储的数据要素(用数据要素编码，或者在数据要素外编码)，使得可以促进数据存储和/或访问。
这些数据库和/或其他内存存储技术可以通过使用各种编程或编码语言编写和/或实施。例如，面向对象数据库管理系统可以用编程语言(例如，C++或Java)编写。关系和/或对象/关系模型可以利用数据库语言，例如，结构化查询语言(SQL)，其可以用于例如二义性消除信息的交互查询和/或收集和/或编译来自关系数据库的数据。
例如，可以执行对一个或多个记录设备数据4803的SQL或SQL类操作，或者可以执行使用单独的位置数据4805的布尔操作。例如，可以执行加权布尔操作，其中根据情景的背景或增强现实设备4802的背景(可能彼此相对而言)，包括在增强现实设备4802上运行的其他程序，给一个或多个照相机视频源分配不同的加权或优先权。例如，根据识别的线索，例如，已知的用户偏好、个体外观、用于限定个体与用户4800之间的关系的特定规则集合以及与个体有关的历史数据，可以执行数字加权、专属OR操作以请求观察用户4800的个体的类别的具体加权。
以此方式，用户4800可以从她的环境的人中容易辨别她所处的关注水平，例如，根据眼睛跟踪而定。可替代地，用户4800可以容易辨别她何时出于处于安全目的存在的监视照相机的范围内，让她知道何时她不在例如她附近的安保照相机的视野内。
以此方式，系统可以跟踪观察模式和可见性模式。
图49-51图示了用户与按照本文公开的方式实施指示观察或可见性模式的增强现实设备和系统交互的实例。图49描绘了增强现实装置(智能手机)在其屏幕上显示在教授作报告期间的学生教室。
图50描绘了作为本申请的实施例的设备的“观察历史”应用。在此实例中，分析报告期间的眼睛跟踪数据的助教可以实时看到谁在看教授并看了多久。在这种情况下，情景的显示用表示当前正在看教授的学生的白圈(包括观察时间的指示)以及表示记录设备(在教室后面无间断地记录整个报告的两个固定摄像机以及在学生手中的一个移动设备)的灰圈(包括记录时间的指示)增强。
图51描绘了额外的AR功能。在报告后，教授可以通过查看报告大厅的增强现实呈现来查看他的课堂的观看图案，该增强现实呈现包括例如基于助教的AR启用的设备收集的眼镜跟踪数据的大部分关注来自何处的“热图”。在此实例中，“热点”(指示大部分时间花在观察教授)是白色的并且排名前四的学生被标出(在他们各自的落座位置)。
图52-57图示了表示与增强现实系统中指示观察或可见性模式相关的示例的操作的操作流程。在包括操作流程的各种实例的这些附图中，可以相对于图48的上述系统环境和/或相对于其他实例和背景提供讨论和说明。然而，应当理解的是，操作流程可以在许多其他环境和背景和/或图48-51的修改版本中执行。另外，尽管按照图示的顺序提供了多个操作流程，但是应当理解的是，多个操作可以按照除说明的顺序之外的其他顺序执行，或者可以同时执行。
图58图示了增强现实系统中的可视性图案的指示的实例的示意图。增强现实呈现5820包括对用户5800和用户设备5802的描绘。例如数字图像生成模块4821生成四个三角形以描绘紧挨着用户的四个照相机的视野：(1)固定的街道照相机5804；(2)固定的公园照相机5806；手机照相机5808；和增强现实眼镜照相机5810。例如由设备视野跟踪模块4808基于响应于来自例如位置历史查询模块4812的位置历史查询接收的数据源4801的数据已经计算每个照相机的视野。包括与四个视野对应的三角形区域的增强现实呈现5820允许用户快速查看在他当前位置他不在任何这些视野内，但是如果他朝着他们移动(或者如果移动照相机转动或朝着他移动)，那么他可能在这些视野的一个或多个内，并且因此被用户和/或移动设备5808和5810的照相机看见。
本文的操作/功能语言描述机器/机器控制/机器控制的过程，除非另外指明
本申请的权利要求书、说明书和附图可以用操作/功能语言描述一个或多个即时技术，例如，作为计算机将要执行的一组操作。在大多数情况下，本领域技术人员可以将这些操作/功能描述理解成专门配置的硬件(例如，因为通用计算机一旦被编程以执行依据程序软件指令的特定功能，事实上它就变成了专用计算机)。
重要的是，尽管本文所述的操作/功能描述是人类思维可以理解的，但是它们不是从这些操作/功能的计算实施分离的操作/功能的抽象概念。相反，操作/功能表示用于大量复杂的计算机器或其他装置的规范。按照以下详细讨论的，必须在正确的技术背景内阅读操作/功能语言，即，用于物理实施的具体规范。本文所述的逻辑操作/功能是机器规范的精华或者操作/功能指定的其他物理机制，使得否则无法理解的机器规范能够被人类读者理解。这种精华还允许本领域技术人员在不限于特定供应商的硬件配置或平台的情况下在许多不同规范的供应商的硬件配置或平台之间适应技术的操作/功能描述。
一些当前技术描述(例如详细描述、附图、权利要求书等)可按照逻辑操作/功能进行阐述。如本文中更详细描述的那样，这些逻辑操作/功能不是抽象理念的代表，而是各硬件组件的静态或顺序规范的表征。换种说法，除非上下文指出相反情形，否则逻辑操作/功能将被本领域内技术人员理解为表示各硬件组件的静态或顺序的规范。由于本领域内技术人员可用来实现以操作性/功能性格式阐述的技术公开的工具——以高级编程语言(例如C、Java、visual basic等)形式出现的工具或以非常高速硬件描述语言(VHDL，它是使用文本来描述逻辑电路的语言)形式出现的工具——是各硬件配置的静态或顺序规范的发生器，因此这是真的。这个事实有时被宽泛术语“软件”模糊化，如下面解释中示出的，本领域内技术人员理解，被冠名为“软件”的东西是对于有序物质要素的十分复杂的相互联系/规范的的速记。术语“有序物质要素”可指物理计算器件，例如电子逻辑门的组件、分子计算逻辑组成、量子计算机构等。例如，高级编程语言是具有强抽象性的编程语言，例如来自高级编程语言实际规定的机器的顺序组织、状态、输入、输出等细节的多层抽象性。例如参见Wikipedia，High-level programming language，http://en.wikipedia.org/wiki/High-level_programming_language(2012年6月5日21:00GMT)。为了利于人们领会，在许多情况下，高级编程语言与自然语言相似或甚至共享标记。例如参见Wikipedia，Naturallanguage，http://en.wikipedia.org/wiki/Natural_language(2012年6月5日，21:00GMT)。
已经有人争辩道，因为高级编程语言使用强抽象(例如，它们可以模仿或者共享自然语言的符号)，所以它们因此是“纯智力构造”(例如，“软件”计算机程序或计算机编程在一定程度上是无法理解的智力构造，因为在高级抽象，所以人类读者可以想像并理解)。该论据已经用于表征在一定程度上是“抽象概念”的功能/操作形式的技术描述。事实上，在技术领域(例如，信息和通信技术)中，这是真的。
高级编程语言使用强抽象以便于人类理解的事实不应当被当成是指明所表达的是抽象概念的指令。事实上，本领域技术人员理解的是，正好相反的是真实的。如果高级编程语言是用于实施功能/操作形式的技术公开的工具，那么本领域技术人员应当理解的是，在任何显著语义感中远非抽象的、不精确的、“模糊的”或“智力的”，这种工具反而是特定计算机器的近乎无法理解的精确序列规范，该机器的一部分通过从通常更一般的计算机器启动/选择这些部分随时间(例如，时钟时间)变化而建立的。高级编程语言与自然语言之间的表面相似性有时候模糊了这种事实。这些表面相似性也可以导致掩盖高级编程语言实施通过建立/控制许多不同的计算机器来最终执行有价值的工作的事实。
高级编程语言描述的许多不同的计算机器是几乎难以想象的复杂。本质上，在计算机器中使用的硬件通常由被设置成形成逻辑门的一些类型的有序物元(例如，传统电子器件(例如，晶体管)、脱氧核糖核酸(DNA)、量子器件、机器开关、光学元件、流体元件、气动元件、光学器件(例如，光干涉器件)、分子等)组成。逻辑门通常是能被电气地、机械地、化学地或者以其他方式驱动以改变物理状态从而建立布尔逻辑之类的逻辑的物理现实的物理器件。
逻辑门可以被设置成形成逻辑电路，该逻辑电路通常是能被电气地、机械地、化学地或者以其他方式驱动以建立某些逻辑功能的物理现实的物理器件。逻辑电路的类型包括例如多路复用器、寄存器、算术逻辑单元(ALU)、计算机存储器等器件，这种器件的每种类型可以结合以形成又一种类型的物理器件，例如，中央处理器(CPU)，最熟知的中央处理器是微处理器。现代微处理器通常在其众多逻辑电路中包括多于一亿个逻辑门(并且通常多于十亿个晶体管)。参见例如可得自网站http://en.wikipedia.org/wiki/Logic_gates(2012年6月5日，21:03GMT)的Wikipedia,Logic gates。
形成微处理器的逻辑电路被设置成提供微架构，该微架构将执行由微处理器限定的指令集架构所定义的指令。指令集架构是涉及编程的微处理器架构的一部分，包括本机数据类型、指令、寄存器、寻址方式、存储器架构、中断和异常处理以及外部输入/输出。参见例如可得自网站http://en.wikipedia.org/wiki/Computer_architecture(在2012年6月5日21:03GMT)的Wikipedia,Computer architecture。
指令集架构包括机器语言的规范，所述规范可由编程者使用以使用/控制微处理器。由于机器语言指令使得它们可直接通过微处理器执行，它们通常由多串二进制数或位构成。例如，典型的机器语言指令可以是许多位长(例如32、64或128位字符串是当前通用的)。典型的机器语言指令可以“11110000101011110000111100111111”的形式出现(32位指令)。此处重要的是，尽管机器语言指令是以二进制数序列写就的，但实际上这些二进制数规定物理现实。例如，如果使用某些半导体来使布尔逻辑操作成为物理现实，则显然机器语言指令中的数学位“1”、“0”实际上构成规定将特定电压施加至特定线的速记。例如，在某些半导体技术中，机器语言指令中的二进制数“1”(例如逻辑“1”)规定被施加至特定“线”(例如印刷电路板上的金属迹线)的+5伏左右的电压，而机器语言指令中的二进制数“0”(例如逻辑“0”)规定被施加至特定“线”的-5伏左右的电压。除了规定机器配置的电压，这些机器语言指令也从更通用机器的数百万个逻辑门中选出并激活特定组的逻辑门。由此，远非抽象数学表达，机器语言指令程序(即便被写成一串0和1)也能规定许多许多构造的物理机或物理机状态。
机器语言一般对多数人是不可领会的(例如前面的例子仅为一条指令，并且某些个人计算机每秒执行20亿条指令)，例如参见Wikipedia，Instructions per second，http://en.wikipedia.org/wiki/Instruction_per_second(2012年6月5日21:04GMT)。由此，以机器语言写就的程序——它可以是数千万个机器语言指令长度——是大多数人难以领会的。有鉴于此，研发出早期汇编语言，它使用记忆代码以指向机器语言指令，而不是直接使用机器语言指令的数值(例如为了执行乘运算，程序员将简称“mult(乘)”代码化,它代表MIPS机器代码中的二进制数“011000”)。尽管汇编语言一开始对人们控制微处理器以执行工作具有很大的帮助，然而经过一段时间，需要由人完成的工作的复杂度超过了人们仅使用汇编语言控制微处理器的能力。
在这一点，注意相同的任务需要一遍又一遍地完成，并且完成这些重复任务所需的机器语言是相同的。有鉴于此，形成了编译器。编译器是这样一种器件，其采用比机器或汇编语言更容易被人领会的语句(例如“add 2+2and output the result(加2+2并输出结果)”)并将人们易懂的语句转换成复杂的、冗长的和巨大的机器语言代码(例如上百万个32、64或128位长的字符串)。编译器由此将高级编程语言转换成机器语言。这种编译的机器语言，如前所述，则被用作顺序地构造并造成许多不同计算机器的互操作的技术规范，由此完成有益的、有形的和具体的工作。例如，如前面指出的，这种机器语言——较高级语言的编译版本——起到技术规范的作用，该技术规范选出硬件逻辑门、规定电压电平、电压转变定时等，以通过硬件完成有益的工作。
由此，当由本领域内技术人员审视时，功能性/操作性技术描述远非抽象理念。相反，这种功能性/操作性技术描述，当通过例如刚才描述的业内可用的工具理解时，可被理解为对硬件规范的人们容易理解的表示，其复杂性和特异性远远超过大多数人的领会范围。有鉴于此，本领域内技术人员将理解，任何这样的操作性/功能性技术描述——鉴于本文公开和本领域内技术人员的知识——可被理解为通过以下项投入到物理现实中的操作：(a)一个或多个相互联系的物理机；(b)被配置成形成一个或多个物理机的相互联系的逻辑门，其代表序列/组合逻辑；(c)构成逻辑门的相互联系的有序物质(例如相互联系的电子器件(例如晶体管)、DNA、量子器件、机械开关、光学系统、射流技术、气动装置、分子等)，它们形成逻辑的物理现实；或(d)前述的实际任意组合。事实上，具有稳定、可测和可变状态的任何物理对象可用来基于前面的技术描述构造机器。例如，Charles Babbage由木材构造出第一台计算机并通过使手柄作曲柄转动而供电。
由此，远非抽象理念理解的那样，本领域内技术人员将功能性/操作性技术描述认识为一个或多个几乎无法想象地复杂和时间顺序的硬件实例的人们可理解的表示。功能性/操作性技术描述可能容易将其本身赋予与自然语言共享某些字、结构、词等的高级计算语言(或对于该物质的高级框图)这一事实不得视为这些功能性/操作性技术描述是抽象理念或仅仅为抽象理念表达的指示。事实上，如本文中概述的，在技术领域中这简单地不是真的。当通过本领域内技术人员可用的工具观察时，这些功能性/操作性技术描述被视为规定几乎无法想象的复杂度的硬件配置。
如前面概述的那样，使用功能性/操作性技术描述的原因至少为两层。首先，使用功能性/操作性技术描述允许接近无限复杂的机器和起因于相互联系的硬件组件的机器操作以人类头脑能够处理的方式(例如通过模仿自然语言和逻辑叙述流)描述。其次，使用功能性/操作性技术描述通过提供更独立于或较不独立于任何特定卖家的硬件零件的描述来帮助本领域内技术人员理解所描述的主题。
使用功能性/操作性技术描述帮助本领域内技术人员理解所描述的主题，因为如从上面的讨论显而易见的，人们能容易地(尽管不是快速地)将该文档中阐述的技术描述改写成数万亿个1和0、数十亿个汇编层机器代码的单行、数百万个逻辑门、数千个门阵列或任何数量的中间级别的抽象。然而，如果任何这些低级技术描述要取代当前技术描述，本领域内技术人员在实现本公开时可能遇到过度的困难，因为这种低级技术描述可能增加复杂性而没有相应的益处(例如通过描述主题，该主题利用一个或多个卖家特定的硬件零件的规格)。
由此，使用功能性/操作性技术描述通过将技术描述与任何卖家特定的硬件零件的规格分离开来而对本领域内技术人员有帮助。
有鉴于前述内容，当前技术描述中阐述的逻辑操作/功能是各种有序物质要素的静态或顺序规范的表示，以便使这些规范可由人们的头脑领会并可调整以产生许多硬件配置。本文披露的逻辑操作/功能应当被如此对待，并且不应当仅仅因为它们展示的规范以本领域内技术人员能容易理解的方式表示并以独立于特定卖家的硬件实现的方式应用而将其诋毁地表征为抽象理念。
本领域内技术人员将认识到，本文描述的组成(例如操作)、设备、对象和伴随它们的讨论为了概念清楚作为示例使用并且考虑多种配置修正。结果，如本文中使用的，所阐述的特定例子和伴随的讨论旨在表达其更一般的类别。总体来说，任何特定例子的使用旨在表示其类别，并且特定组成(例如操作)、设备和目的的非包含不应当被认为是限制。
尽管用户可以在本文中图示/描述为单个示出的人物，然而本领域技术人员将理解，任何用户可代表人类用户、机器人用户(例如计算实体)和/或其基本任意组合(例如用户可由一个或多个机器人代理来协助)，除非上下文指出了相反情形。本领域内技术人员将理解，一般来说，同一对象可被说成是“发送方”和/或其它面向实体的术语(当这些术语在本文中使用时)，除非上下文指出了相反情形。
本领域内技术人员将理解，前面的特定示例性过程和/或设备和/或技术是本文其它地方教导的更一般过程和/或设备和/或技术的代表，例如与本申请一起提交的权利要求书和/或本申请其它部分教导的那样。
本领域内技术人员将认识到，技术水平已发展到在系统各个方面的硬件和软件实现之间存在极小差别的阶段；硬件和软件的使用通常是(但不总是，因为在某些背景下硬件和软件之间的选择可能变得重要)代表成本相对于效率权衡的设计选择。本领域内技术人员将理解，存在多种载体，通过这些载体可实现本文描述的过程和/或系统和/或其它技术(例如硬件、软件和/或固件)，并且优选的载体可随着其中部署过程和/或系统和/或其它技术的背景而变化。例如，如果实施者确定速度和精确性是至上的，则实施者可选择主要硬件和/或固件载体；替代地，如果灵活性至上，则实施者可选择主要软件实现；或者再一次，实施者可选择硬件、软件和/或固件的一些组合。因此，存在若干种可能的载体，通过这些载体可实现本文描述的过程和/或设备和/或其它技术，其中没有任何一种天生地优于其它的，因为拟利用的任何载体是依赖于将部署载体的背景和实施者的特殊考虑(例如速度、灵活性或可预测性)的选择，其任意一种都是可变的。本领域技术人员将认识到，实现的光学方面将一般采用面向光学的硬件、软件和/或固件。
在本文描述的一些实现中，逻辑和类似的实现可包括软件或其它控制结构。例如，电子电路可具有被构造和布置成实现如本文描述的各种功能的一个或多个电流路径。在一些实现方案中，一个或多个介质可被配置成当该介质保持或发送如本文所述那样能操作来执行的设备可检测指令时承载设备可检测的实现。在一些变例中，例如实现可包括已有软件或硬件或门阵列或可编程硬件的更新或修正，例如通过关联于本文描述的一个或多个操作执行一个或多个指令的接收或发送来进行。作为替代或附加，在一些变例中，实现可包括专用硬件、软件、固件部件和/或通用器件，它们执行或以其它方式调用专用部件。规范或其它实现可通过如本文描述的有形传输介质的一个或多个实例，可选择地通过分组传输或以其它方式通过分布式介质多次地传递来传输。
作为替代或附加，实现可包括：执行专用指令序列或调用电路以启用、触发、协调、请求或以其它方式造成实际上本文描述的任何功能性操作的一次或多次发生。在一些变例中，本文中的操作性或其它逻辑描述可被表达为源代码并被编译或者被调用作为可执行指令序列。在一些背景下，例如实现可整体地或部分地通过诸如C++之类的源代码或其它代码序列来提供。在其它实现方案中，源代码或其它代码实现方案，使用商业可得的和/或业内的技术，可被编译/实现/翻译/转换成高级描述符语言(例如最初实现C或C++编程语言中描述的技术并随后将编程语言实现转化成可逻辑合成的语言实现、硬件描述语言实现、硬件设计模拟实现和/或其它这种类似的表达模式)。例如，一些或全部的逻辑表达(例如计算机编程语言实现)可被显示为Verilog型硬件描述(例如经由硬件描述语言(HDL)和/或非常高速集成电路硬件描述符语言(VHDL))或者其它电路模型，其可随后用来产生具有硬件的物理实现(例如专用集成电路)。受这些教义的启发，本领域内技术人员将理解如何获得、配置和优化合适的传输或计算要素、材料供给、致动器或其它结构。
通过使用方框图、流程图、和/或例子，前面详细的描述已阐明了所述设备和/或过程的多个实现方案。在这样的方框图、流程图和/或例子包括一个或更多功能和/或操作的情况下，本领域的技术人员应理解，可通过各种硬件、软件、固件或实际上其中的任何组合个别地和/或共同地实现这样的方框图、流程图或例子内的每个功能和/或操作。在一实施方案中，通过专用集成电路(ASICs)、现场可编程门阵列(FPGAs)、数字信号处理器(DSPs)或其它集成格式可实现这里所述主题的一些部分。然而，本领域的技术人员应认识到，这里所公开的实现方案的一些方面，可作为在一个或更多计算机上运行的一个或更多计算机程序(例如，作为在一个或更多计算机系统上运行的一个或更多程序)、作为在一个或更多处理器上运行的一个或更多程序(例如，在一个或更多微处理器上运行的一个或更多程序)、作为固件、或作为实际上其任何组合全部或部分地在标准集成电路中等效地实现，以及根据此公开，设计电路和/或向软件和/或固件写入代码将完全落在本领域的技术范围内。另外，本领域的技术人员应理解，这里所述的主题机制能够作为多种形式的程序产品分配，以及这里所述的主题的说明性实施方式同样适用，且与用于实际上实现所述分配的信号携带介质的特定类型无关。信号携带介质的例子包括但不局限于下列：可记录类型的介质，例如软盘，硬盘驱动器、光盘(CD)、数字视频光盘(DVD)、数字磁带和计算机存储器等等；以及传输类型的介质，例如数字和/或模拟通信介质(例如光纤、波导、有线通信链接、无线通信链接(例如，发送器、接收器、发送逻辑、接收逻辑等)等等)。
在一般意义上讲，本领域技术人员会认识到，能够由范围广泛的硬件、软件、固件和/或它们的任意组合单独地并且/或者共同地实施的本文所述的多个方面可以看成是包含各种类型的“电路”。因此，本文使用的“电路”包括，但不限于：具有至少一个离散电路的电路，具有至少一个集成电路的电路，具有至少一个专用集成电路的电路，形成由计算机系统配置成的通用计算设备(例如，由至少部分地执行本文所述的方法和/或设备的计算机程序配置成的通用计算机，或者由至少部分地执行本文所述的方法和/或设备的计算机程序配置成的微处理器)的电路，形成存储设备的电路(例如，形成存储器(例如，随机存取存储器、闪存、只读存储器等))，和/或形成通信设备(例如，调制解调器、通信开关、光电设备等)的电路。本领域技术人员会认识到，本文所述的主题可以实施为模拟或数字方式或者它们的一些组合。
本领域的技术人员会认识到，本文所述的设备和/或方法中的至少一部分可以集成到数据处理系统中。本领域技术人员会认识到，数字处理系统一般包括系统组件壳体，视频显示设备，例如易失性或非易失性存储器之类的存储器，例如微处理器或数字信号处理器之类的处理器，例如操作系统之类的计算实体，驱动器，图形用户界面，和应用程序，一个或多个交互设备(例如，触控板、触摸屏、天线等)，和/或包括反馈回路和控制电机(例如，用于感测位置和/或速度的反馈，用于移动和/或调节组件并且/或者量化的控制电机)的控制系统。数字处理系统可以利用合适的可商购组件(例如，通常在数字计算/通信和/或网络计算/通信系统中发现的组件)来实施。
本领域的技术人员将认识到，在本技术领域中通常实施设备和/或过程和/或系统，其后利用工程设计和/或实践来将该实施的设备和/或过程和/或系统结合到更复杂的设备和/或过程和/或系统。即，本文所述的设备和/或过程和/或系统中的至少一部分可经由合理数量的实验结合到其它设备和/或过程和/或系统中。本领域的技术人员将认识到，这种其它的设备和/或过程和/或系统根据上下文和应用的需要包括以下项中的设备和/或过程和/或系统的所有或部分：(a)空气输送(例如，飞机、火箭、直升机等)，(b)地面输送系统(如，汽车、货车、机车、坦克、装甲运兵车等)，(c)建筑物(例如，住房、仓库、办公楼等)，(d)家用电器(如冰箱、洗衣机、干燥机等)，(e)通信系统(例如，网络系统、电话系统、基于IP的语音系统等)，(f)公司实体(例如，因特网服务提供商(ISP)实体，如Comcast Cable、Century Link、Southwestern Bell等)，或(g)有线/无线服务的实体(如Sprint、Verizon、AT&T等)，等等。
本申请的权利要求书、说明书和附图可以操作性/功能性语言将一个或多个当前技术描述为例如拟由计算机执行的一组操作。在大多数情况下，这种操作性/功能性描述将被本领域内技术人员理解为专门配置的硬件(例如由于通用计算机一旦被编程以遵循来自程序软件的指令执行特定功能则事实上成为专用计算机)。
重要的是，尽管本文描述的操作性/功能性描述可通过人的头脑理解，但它们不是与那些操作/功能的计算实现分离的操作/功能的抽象理念。相反，这些操作/功能代表十分复杂的计算机器或其它装置的规范。如下面详细讨论的，操作性/功能性语言必须在其正确的技术背景下阅读，即作为物理实现的具体规范。
本文描述的逻辑操作/功能是机器规范或由操作/功能规定的其它物理机构的提炼，以使在其他情形下难以理解的机器规范可由人的头脑领会。这种提炼也允许本领域内技术人员跨许多不同特定卖家的硬件配置或平台适应技术的操作性/功能性描述，而不仅限于特定卖家的硬件配置或平台。
一些当前技术描述(例如详细描述、附图、权利要求书等)可按照逻辑操作/功能进行阐述。如下面段落中更详细描述的那样，这些逻辑操作/功能不是抽象理念的代表，而是各硬件组件的静态或顺序规范的表征。换种说法，除非上下文指出相反情形，否则逻辑操作/功能将被本领域内技术人员理解为表示各硬件组件的静态或顺序的规范。这是真的，因为本领域内技术人员可用来实现以操作性/功能性格式阐述的技术公开的工具——以高级编程语言(例如C、Java、visual basic等)形式出现的工具或以非常高速硬件描述语言(VHDL，它是使用文本来描述逻辑电路的语言)形式出现的工具——是各硬件配置的静态或顺序规范的发生器。这个事实有时被宽泛术语“软件”晦涩化，如下面解释中示出的，本领域内技术人员理解，被冠名为“软件”的东西是对于有序物质要素的十分复杂的相互联系/规范的速记。术语“有序物质要素”可指物理计算部件，例如电子逻辑门的组件、分子计算逻辑组成、量子计算机构等。
例如，高级编程语言是具有来自高级编程语言实际规定的机器的顺序组织、状态、输入、输出等细节的强抽象性(例如多层抽象性)的编程语言。例如参见Wikipedia，High-level programming language，http://en.wikipedia.org/wiki/High-level_programming_language(2012年6月5日21:00GMT)(仅仅包含的URL以提供书面描述)。为了利于人们领会，在许多情况下，高级编程语言与自然语言相似或甚至共享标记，例如参见Wikipedia，Natural language，http://en.wikipedia.org/wiki/Natural_language(2012年6月5日，21:00GMT)(仅仅包含的URL以提供书面描述)。
已有争论，由于高级编程语言使用强抽象性(例如它们可能与自然语言相似或共享标志)，因此它们是“纯头脑构筑的”(例如“软件”——计算机程序或计算机编程——某种程度上是不可言喻的头脑构筑，因为在高级抽象性下，它可用人脑构思和理解)。这种争论被用来将功能/操作形式的技术描述表征为某一程度的“抽象理念”。事实上，在技术领域(例如信息和通信技术)中并不是这样。
高级编程语言使用强抽象性以利于人们理解的这个事实不应当被视为所表达的内容是抽象理念的指示。事实上，本领域内技术人员理解，只有相反情形才是真的。如果高级编程语言是用来以功能/操作的形式实现本技术公开的工具，则本领域内技术人员将理解，远非以任何重大语义定义的抽象的、不准确的、“模糊的”或“头脑的”，这种工具相反是特定计算机器的接近不可理解的准确顺序规范——其中的一些部分通过随时间(例如时钟时间)从典型更一般的计算机器激活/选择这些部分而建立。这个事实有时因为高级编程语言和自然语言之间的表面相似性而变得晦涩。这些表面相似性也可造成对高级编程语言实现最终通过创建/控制许多不同的计算机器来执行有价值工作的这一事实的粉饰。
高级编程语言规定的许多不同计算机器几乎是无法想象地复杂。基本上，计算机器中使用的硬件一般由某些类型的有序物质(例如传统电子器件(例如晶体管)、脱氧核糖核酸(DNA)、量子器件、机械开关、光学系统、射流技术、气动装置、光学器件(例如光干涉器件)、分子等)构成，这些有序物质被配置成形成逻辑门。逻辑门一般是可电气地、机械地、化学地或以其它方式被驱动以改变物理状态以形成布尔逻辑的物理现实的物理器件。
逻辑门可被配置成形成逻辑电路，该逻辑电路一般是可电气地、机械地、化学地或以其它方式被驱动以形成某些逻辑功能的物理现实的物理器件。逻辑电路的类型包括诸如多路复用器、寄存器、算术逻辑单元(ALU)、计算机存储器等器件，其每种类型可被组合以形成又一些其它类型的物理器件，例如中央处理单元(CPU)——其中最广为人知的是微处理器。现代微处理器在其许多逻辑电路中经常包含一亿个以上的逻辑门(并经常超过十亿个晶体管)，例如参见Wikipedia，Logic gates，http://en.wikipedia.org/wiki/H Logic_gates(2012年6月5日21:03GMT)(仅仅包含URL以提供书面描述)。
形成微处理器的逻辑电路被配置成提供微架构，该微架构将执行由该微处理器的定义指令集架构定义的指令。指令集架构是与编程关联的微处理器架构的一部分，包括原数据类型、指令、寄存器、寻址模式、存储器架构、中断和异常处理以及外部输入/输出。例如参见Wikipedia，Computer architecture，http://en.wikipedia.org/wiki/Computer_architecture(2012年6月5日21:03GMT)(仅仅包含URL以提供书面描述)。
指令集架构包括机器语言的规范，所述规范可由编程者使用以使用/控制微处理器。由于机器语言指令使得它们可直接通过微处理器执行，它们通常由多串二进制数或位构成。例如，典型的机器语言指令可以是许多位长(例如32、64或128位字符串是当前通用的)。典型的机器语言指令可以“11110000101011110000111100111111”(32位指令)的形式出现。
此处重要的是，尽管机器语言指令是以二进制数序列写就的，但实际上这些二进制数规定物理现实。例如，如果使用某些半导体来使布尔逻辑操作成为物理现实，则显然机器语言指令中的数学位“1”、“0”实际上构成规定将特定电压施加至特定线的速记。例如，在某些半导体技术中，机器语言指令中的二进制数“1”(例如逻辑“1”)规定被施加至特定“线”(例如印刷电路板上的金属迹线)的+5伏左右的电压，而机器语言指令中的二进制数“0”(例如逻辑“0”)规定被施加至特定“线”的-5伏左右的电压。除了规定机器配置的电压，这些机器语言指令也从更通用机器的上百万个逻辑门中选出并激活特定组的逻辑门。由此，远非抽象数学表达，机器语言指令程序(即便被写成一串0和1)也能规定许多许多构造的物理机或物理机状态。
机器语言一般对多数人是不可领会的(例如前面的例子仅为一条指令，并且某些个人计算机每秒执行20亿条指令)，如参见Wikipedia，Instructions per second，http://en.wikipedia.org/wiki/Instruction_per_second(2012年6月5日21:04GMT)(仅仅包含URL以提供书面描述)。
由此，以机器语言写就的程序——它可以是数千万个机器语言指令长度——是难以领会的。有鉴于此，研发出早期汇编语言，它使用记忆代码以指向机器语言指令，而不是直接使用机器语言指令的数值(例如为了执行乘运算，程序员将简称“mult(乘)”代码化,它代表MIPS机器代码中的二进制数“011000”)。尽管汇编语言一开始对人们控制微处理器以执行工作具有很大的帮助，然而经过一段时间，需要由人完成的工作的复杂度超过了人们仅使用汇编语言控制微处理器的能力。
在这一点，注意相同的任务需要一遍又一遍地完成，并且完成这些重复任务所需的机器语言是相同的。有鉴于此，形成了编译器。编译器是这样一种器件，其采用比机器或汇编语言更容易被人领会的语句(例如“add 2+2and output the result(加2+2并输出结果)”)并将人们易懂的语句转换成复杂的、冗长的和巨大的机器语言代码(例如上百万个32、64或128位长的字符串)。编译器由此将高级编程语言转换成机器语言。
这种编译的机器语言，如前所述，然后被用作顺序地构造并造成许多不同计算机器的互操作的技术规范，由此完成人类有益的、有形的和具体的工作。例如，如前面指出的，这种机器语言——较高级语言的编译版本——起到技术规范的作用，该技术规范选出硬件逻辑门、规定电压电平、电压转变定时等，以通过硬件完成对人类有益的工作。
由此，当由本领域内技术人员审视时，功能性/操作性技术描述远非抽象理念。相反，这种功能性/操作性技术描述，当通过例如刚才描述的业内可用的工具理解时，则可被理解为对硬件规范的人们容易理解的表示，其复杂性和特异性远远超过大多数人的领会范围。有鉴于此，本领域内技术人员将理解，任何这样的操作性/功能性技术描述——鉴于本文公开和本领域内技术人员的知识——可被理解为通过以下项投入到物理现实中的操作：(a)一个或多个相互联系的物理机；(b)被配置成形成一个或多个物理机的相互联系的逻辑门，其代表序列/组合逻辑；(c)构成逻辑门的相互联系的有序物质(例如相互联系的电子器件(例如晶体管)、DNA、量子器件、机械开关、光学系统、射流技术、气动装置、分子等)，它们形成代表逻辑的物理现实；或(d)前述的实际任意组合。事实上，具有稳定、可测和可变状态的任何物理对象可用来基于前面的技术描述构造机器。例如，Charles Babbage由木材构造出第一台计算机并通过使手柄作曲柄转动而供电。
由此，远非抽象理念理解的那样，本领域内技术人员将功能性/操作性技术描述认识为一个或多个几乎无法想象地复杂和时间顺序的硬件实例的人们可理解的表示。功能性/操作性技术描述可能容易将其本身赋予与自然语言共享某些字、结构、词等的高级计算语言(或对于该物质的高级框图)这一事实无法简单地视为这些功能性/操作性技术描述是抽象理念或仅仅为抽象理念表达的指示。事实上，如本文中概述的，在技术领域中这根本不是真的。当通过本领域内技术人员可用的工具观察时，这些功能性/操作性技术描述被视为规定几乎无法想象复杂的硬件配置。
如前面概述的那样，使用功能性/操作性技术描述的原因至少为两层。首先，使用功能性/操作性技术描述允许接近无限复杂的机器和起因于相互联系的硬件组件的机器操作以人类头脑能够处理的方式(例如通过模仿自然语言和逻辑叙述流)描述。其次，使用功能性/操作性技术描述通过提供更独立于或较不独立于任何特定卖家的硬件零件的描述来帮助本领域内技术人员理解所描述的主题。
用功能性/操作性技术描述帮助本领域内技术人员理解所描述的主题，因为如从上面的讨论显而易见的，人们能容易地(尽管不是快速地)将该文档中阐述的技术描述改写成数万亿个1和0、数十亿个汇编层机器代码的单行、数百万个逻辑门、数千个门阵列或任何数量的中间级别的抽象。然而，如果任何这些低级技术描述要取代当前技术描述，本领域内技术人员在实现本公开时可能遇到过度的困难，因为这种低级技术描述可能增加复杂性而没有相应的益处(例如通过描述主题，该主题利用一个或多个卖家特定的硬件零件的规格)。由此，使用功能性/操作性技术描述通过将技术描述与任何卖家特定的硬件零件的规格分离开来而对本领域内技术人员形成帮助。
有鉴于前述内容，当前技术描述中阐述的逻辑操作/功能是各种有序物质要素的静态或顺序规范的表示，为了使这些规范可由人们的头脑领会并可调整以产生许多硬件配置。本文披露的逻辑操作/功能应当被如此处理，并且不应当仅仅因为它们展示的规范以本领域内技术人员能容易理解的方式表示并以独立于特定卖家的硬件实现的方式应用而将其诋毁地归纳为抽象理念。
在某些情况下，可以在领域内使用系统或方法，即使部件位于领域外也如此。例如，在分布式计算情形中，可以在领域内使用分布式计算系统，即使系统的零件可以位于领域外(例如，位于领域外的中继器、服务器、处理器、信号承载介质、发送计算机、接收计算机等)。
同样可以在领域中销售系统或方法，即使系统或方法的部分位于领域外并且/或者在领域外使用也如此。
另外，在一个领域中用于执行方法的系统的至少一部分的实现方案不排除使用在另一个领域中的系统。
本说明书中提到的以及/或者任何申请数据表中列举的全部上述美国专利、美国专利申请公开、美国专利申请、外国专利、外国专利申请和非专利公开在它们与上述公开一致的程度上通过引用的方式并入本申请中。
本文所述的主题有时候说明不同的其他组件中包括的或与其连接上的不同组件。应当理解，这种描述的架构仅仅是示例性的，并且事实上，可以实施获得相同功能的许多其他架构。在概念意义上，获得相同功能的任何组件设置有效地“关联上”使得获得所需的功能。因此，本文中组合以获得特定功能的任意两个组件可以被视为彼此“相关”使得获得所需的功能，而不管架构或中间组件如何。同样地，这样关联上的任何两个组件也可以视为彼此“可操作地连接上”，或“可操作地耦接上”以获得所需的功能，并且能这样关联上的任何两个组件也可以视为彼此“可操作地耦接上”以获得所需的功能。可操作地可耦接上的具体实例包括，但不限于：在物理上可匹配的和/或在物理上相互作用的组件；和/或通过无线方式可交互的、和/或通过无线方式相互作用的组件；和/或在逻辑上相互作用、和/或在逻辑上可相互作用的组件。
在一些情况下，一个或多个组件在本文中可以称为“被配置成”、“通过……被配置成”、“可被配置成”、“可操作地/操作地以”、“适于/可适于”、“能”、“可适合于/适合于”等。本领域技术人员会认识到，这些术语(例如，“被配置成”)一般可以包括活动状态组件和/或非活动状态组件和/或待机状态组件，除非上下文另有要求。
对于本文中基本上任意复数和/或单数的术语的使用，本领域技术人员可以按照上下文和/或申请适合的方式将复数理解成单数并且/或者将单数理解成复数。为了清楚的目的，本文中没有专门阐述各种单数/复数的替换。
虽然已经图示并描述了本文所述的主题的特定方面，本领域技术人员会明白，根据本文的教导，在不脱离本文所述的主题及其宽泛范围的情况下可以进行变化和修改，因此所附权利要求书在其范围内将涵盖落入本文所述的主题的真正精神和范围内的所有这些变化和修改。本领域技术人员会理解的是，一般而言，本文所述的术语，并且尤其是所附权利要求书(例如，所附权利要求书的主体)中的术语，一般旨在成为“开放式”术语(例如，术语“包括”应当理解成“包括，但不限于”，术语“具有”应当理解成“至少具有”，术语“包含”应当理解成“包含但不限于”等)。本领域技术人员会进一步理解的是，如果旨在表示引入的权利要求表述的具体数量，则权利要求中会明确表述该含义，并且在不存在这种表述时，就不存在这种含义。例如，为了帮助理解，以下所附权利要求书可以包含使用引导语“至少一个”和“一个或多个”以引入权利要求表述。然而，使用这种短语不应当被理解成暗示着不定冠词“一个”或“一种”引入的权利要求表述将包含这种引入的权利要求表述的任何特定权利要求限定为权利要求书仅包含一个这种表述，甚至当同一权利要求包括引导短语“一个或多个”或“至少一个”以及例如“一个”或“一种”(例如，“一个”和/或“一种”通常应当理解成“至少一个”或“一个或多个”)之类的不定冠词时也如此；对于用于引入权利要求表述的定冠词的使用同样如此。此外，即使明确表述了引入的权利要求表述的具体数量，本领域技术人员会认识到，这种表述通常应当理解成意味着至少表述的数量(例如，“两个表述”的直白表述，在没有其他修饰语的情况下，通常意味着至少两个表述，或者两个或更多个表述)。此外，在使用类似于“A、B和C等中的至少一个”的惯用语的这些情况下，一般这种结构是在本领域技术人员会理解惯用语的意思上使用(例如，“具有A、B和C中的至少一个的系统”将包括但不限于：只有A的系统、只有B的系统、只有C的系统、有A和B两者的系统、有A和C两者的系统、有B和C两者的系统和/或有A、B和C三者的系统等)。在使用类似于“A、B或C等中的至少一个”的惯用语的这些情况下，一般这种结构是在本领域技术人员会理解惯用语的意思上使用(例如，“具有A、B或C中的至少一个的系统”将包括但不限：只有A的系统、只有B的系统、只有C的系统、有A和B两者的系统、有A和C两者的系统、有B和C两者的系统和/或有A、B和C三者的系统等)。本领域技术人员会进一步理解的是，通常，提供两个或更多个替代术语的选言连接词和/或短语，无论是在说明书、权利要求书或附图中，应当理解成考虑包括术语之一、术语中的任一个或两个术语的可能性，除非上下文另有说明。例如，短语“A或B”将通常理解成包括“A”或“B”或“A和B”的可能性。
对于所附权利要求书，本领域技术人员会理解的是，本文中表述的操作一般可以按照任意顺序执行。另外，尽管按照顺序提供了多个操作流程，但是应当理解的是，多个操作可以按照除说明的顺序之外的其他顺序执行，或者可以同时执行。这种交替的排序的实例可以包括重叠、交错、中断、重排序、增加、准备、补充、同步、反向或其他不同的排序，除非上下文另外指明。此外，像“响应”、“涉及”或其他过去式形容词之类的术语一般并非旨在排除这种变体，除非上下文另外指明。
尽管本文公开了多个方面和实施例，但是本领域技术人会明白其他方面和实施例。在本文公开的多个方面和实施例是为了说明目的而并非旨在限制，真实范围和精神由以下权利要求书表示。
Claims (34)
1.一种增强现实系统，其包括：
用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据；
用于接收与所述数据源的位置历史查询相关的响应数据的电路，其中所述响应数据包括至少所述固定记录设备的地理位置和视野、所述移动记录设备的地理位置和视野、和/或所述个体的地理位置和视野；
用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的电路，其中所述增强现实呈现包括有关增强现实设备或设备的用户中的至少一个的可见性信息；以及
用于检测所述固定记录设备、所述移动记录设备或所述个体相对于所述增强现实设备的视野的移动、确定所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔、以及将所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔与阈值时间间隔进行比较的电路。
2.根据权利要求1所述的系统，其中所述用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
用于呈现位置历史查询的电路，所述位置历史查询包括增强现实设备的当前地理位置、所述增强现实设备的用户的当前地理位置、所述增强现实设备的地理位置历史或所述增强现实设备的用户的地理位置历史中的至少一种。
3.根据权利要求1所述的系统，其中所述用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
用于呈现数据源的位置历史查询的电路，其中所述位置历史查询至少部分地涉及增强现实设备或所述增强现实设备的用户中的至少一个。
4.根据权利要求1所述的系统，其中所述用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
用于呈现数据源的位置历史查询的电路，其中所述数据源包括有关一个或多个视频摄像机的视野数据。
5.根据权利要求1所述的系统，其中所述用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
用于呈现数据源的位置历史查询的电路，其中所述数据源包括有关一个或多个视频摄像机的使用时间数据。
6.根据权利要求1所述的系统，其中所述用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
用于呈现数据源的位置历史查询的电路，其中所述数据源包括与一个或多个个体相关的眼睛跟踪数据。
7.根据权利要求6所述的系统，其中所述用于呈现数据源的位置历史查询的电路，其中所述数据源包括与一个或多个个体相关的眼睛跟踪数据，包括：
用于呈现数据源的位置历史查询的电路，其中所述数据源包括与一个或多个个体相关的眼睛跟踪数据，该眼睛跟踪数据包括至少一个对象或位置的停留时间、快速扫过时间或与所述一个或多个个体相关的闭眼时间中的至少一种。
8.根据权利要求1所述的系统，其中所述用于呈现数据源的位置历史查询的电路，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
用于呈现数据源的位置历史查询的电路，其中所述用于呈现位置历史查询和所述数据源的电路存在于单个增强现实设备上。
9.根据权利要求1所述的系统，其中所述用于接收与所述数据源的位置历史查询相关的响应数据的电路包括：
用于接收响应数据的电路，所述响应数据包括涉及在第一时间段的所述位置历史查询的增强现实设备的25米半径内具有指定视野的至少一个固定记录设备、在第二时间段期间在所述增强现实设备的用户的5米半径内具有可变视野的第一移动记录设备以及在第二时间段期间在所述增强现实设备的用户的5米半径内具有可变视野的第二移动记录设备的数据。
10.根据权利要求1所述的系统，其中所述用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的电路，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
用于在用户的增强现实设备上呈现听觉或视觉增强现实呈现的电路，其中所述呈现指示所述情景的至少一个个体或照相机当前正在看着所述增强现实设备的用户。
11.根据权利要求1所述的系统，其中所述用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的电路，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
用于在用户的增强现实设备上呈现听觉或视觉增强现实呈现的电路，其中所述呈现指示所述增强现实设备的用户当前对一个或多个记录设备或个体可见。
12.根据权利要求1所述的系统，其中所述用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的电路，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
用于在用户的增强现实设备上呈现听觉或视觉增强现实呈现的电路，其中所述呈现指示所述增强现实设备的用户在前一个时间段期间对一个或多个记录设备或个体可见。
13.根据权利要求1所述的系统，其中所述用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的电路，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
用于在用户的增强现实设备上呈现听觉或视觉增强现实呈现的电路，其中所述呈现指示所述增强现实设备的用户在未来的时间段期间对一个或多个记录设备或个体能够是可见的。
14.根据权利要求1所述的系统，其中所述用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的电路，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
用于呈现与用户能够过滤所述响应数据所凭借的至少一个情景支持相关联的增强现实呈现的电路。
15.根据权利要求14所述的系统，其中所述用于呈现与用户能够过滤所述响应数据所凭借的至少一个情景支持相关联的增强现实呈现的电路包括：
用于基于眼睛跟踪数据或其他图像数据根据所述用户的个体或所述用户的增强现实设备直接观察的分钟数呈现与用户能够过滤所述响应数据所凭借的至少一个滑块条相关联的增强现实呈现的电路。
16.一种计算机实施的方法，其包括：
呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，
接收与所述数据源的位置历史查询相关的响应数据，其中所述响应数据包括至少所述固定记录设备的地理位置和视野、所述移动记录设备的地理位置和视野、和/或所述个体的地理位置和视野；
至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关增强现实设备或设备的用户中的至少一个的可见性信息；以及
检测所述固定记录设备、所述移动记录设备或所述个体相对于所述增强现实设备的视野的移动、确定所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔、以及将所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔与阈值时间间隔进行比较。
17.根据权利要求16所述的计算机实施的方法，其中用于呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
呈现位置历史查询，所述位置历史查询包括增强现实设备的当前地理位置、所述增强现实设备的用户的当前地理位置、所述增强现实设备的地理位置历史或所述增强现实设备的用户的地理位置历史中的至少一种。
18.根据权利要求16所述的计算机实施的方法，其中呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
呈现数据源的位置历史查询，其中所述位置历史查询至少部分地涉及增强现实设备或所述增强现实设备的用户中的至少一个。
19.根据权利要求16所述的计算机实施的方法，其中呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
呈现数据源的位置历史查询，其中所述数据源包括有关一个或多个视频摄像机的视野数据。
20.根据权利要求16所述的计算机实施的方法，其中呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
呈现数据源的位置历史查询，其中所述数据源包括有关一个或多个视频摄像机的使用时间数据。
21.根据权利要求16所述的计算机实施的方法，其中呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
呈现数据源的位置历史查询，其中所述数据源包括与一个或多个个体相关的眼睛跟踪数据。
22.根据权利要求21所述的计算机实施的方法，其中呈现数据源的位置历史查询，其中所述数据源包括与一个或多个个体相关的眼睛跟踪数据，包括：
呈现数据源的位置历史查询，其中所述数据源包括与一个或多个个体相关的眼睛跟踪数据，该眼睛跟踪数据包括至少一个对象或位置的停留时间、快速扫过时间或与所述一个或多个个体相关的闭眼时间中的至少一种。
23.根据权利要求16所述的计算机实施的方法，其中呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，包括：
呈现数据源的位置历史查询，其中呈现位置历史查询和所述数据源呈现在单个增强现实设备上。
24.根据权利要求16所述的计算机实施的方法，其中接收与所述数据源的位置历史查询相关的响应数据包括：
接收响应数据，所述响应数据包括涉及在第一时间段的所述位置历史查询的增强现实设备的25米半径内具有指定视野的至少一个固定记录设备、在第二时间段期间在所述增强现实设备的用户的5米半径内具有可变视野的第一移动记录设备以及在第二时间段期间在所述增强现实设备的用户的5米半径内具有可变视野的第二移动记录设备的数据。
25.根据权利要求16所述的计算机实施的方法，其中至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
在用户的增强现实设备上呈现听觉或视觉增强现实呈现，其中所述呈现指示所述情景的至少一个个体或照相机当前正在看着所述增强现实设备的用户。
26.根据权利要求16所述的计算机实施的方法，其中至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
在用户的增强现实设备上呈现听觉或视觉增强现实呈现，其中所述呈现指示所述增强现实设备的用户当前对一个或多个记录设备或个体可见。
27.根据权利要求16所述的计算机实施的方法，其中至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
在用户的增强现实设备上呈现听觉或视觉增强现实呈现，其中所述呈现指示所述增强现实设备的用户在前一个时间段期间对一个或多个记录设备或个体可见。
28.根据权利要求16所述的计算机实施的方法，其中至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
在用户的增强现实设备上呈现听觉或视觉增强现实呈现，其中所述呈现指示所述增强现实设备的用户在未来的时间段期间对一个或多个记录设备或个体能够是可见的。
29.根据权利要求16所述的计算机实施的方法，其中至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关所述情景的至少一个要素的观察信息或有关增强现实设备或设备的用户中的至少一个的可见性信息中的至少一种，包括：
呈现与用户能够过滤所述响应数据所凭借的至少一个情景支持相关联的增强现实呈现。
30.根据权利要求29所述的计算机实施的方法，其中呈现与用户能够过滤所述响应数据所凭借的至少一个情景支持相关联的增强现实呈现包括：
基于眼睛跟踪数据或其他图像数据根据所述用户的个体或所述用户的增强现实设备直接观察的分钟数呈现与用户能够过滤所述响应数据所凭借的至少一个滑块条相关联的增强现实呈现。
31.一种执行计算机实施的方法系统，其包括：
计算设备；以及在所述计算设备上被执行时使所述计算设备执行以下操作的指令：
(1)呈现数据源的位置历史查询，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据；
(2)接收与所述数据源的位置历史查询相关的响应数据，其中所述响应数据包括至少所述固定记录设备的地理位置和视野、所述移动记录设备的地理位置和视野、和/或所述个体的地理位置和视野；
(3)至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关增强现实设备或设备的用户中的至少一个的可见性信息；以及
(4)检测所述固定记录设备、所述移动记录设备或所述个体相对于所述增强现实设备的视野的移动、确定所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔、以及将所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔与阈值时间间隔进行比较。
32.根据权利要求31所述的系统，其中所述计算设备包括：
专用增强现实设备、个人数字助理(PDA)、个人娱乐设备、移动电话、膝上型计算机、平板个人计算机、网络计算机，包含处理器集群的计算系统、包含服务器集群的计算系统、工作站计算机和/或台式计算中的一个或多个。
33.一种增强现实系统，其包括：
用于呈现数据源的位置历史查询的装置，其中所述数据源包括与所述位置历史查询的组件的确定半径内的固定记录设备、所述位置历史查询的组件的确定半径内的移动记录设备或所述位置历史查询的组件的确定半径内存在的个体中的至少一个相关的数据，
用于接收与所述数据源的位置历史查询相关的响应数据的装置，其中所述响应数据包括至少所述固定记录设备的地理位置和视野、所述移动记录设备的地理位置和视野、和/或所述个体的地理位置和视野；
用于至少部分地基于与所述位置历史查询相关的响应数据呈现情景的增强现实呈现的装置，其中所述增强现实呈现包括有关增强现实设备或设备的用户中的至少一个的可见性信息；以及
用于检测所述固定记录设备、所述移动记录设备或所述个体相对于所述增强现实设备的视野的移动、确定所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔、以及将所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔与阈值时间间隔进行比较的装置。
34.一种增强现实系统，其包括：
接收有关位置历史查询的位置历史数据，其中所述位置历史数据包括来自所述位置历史查询的组件的确定半径内的固定记录设备的数据、来自所述位置历史查询的组件的确定半径内的移动记录设备的数据或与所述位置历史查询的组件的确定半径内存在的个体相关的数据中的至少一种；
接收与所述位置历史查询相关的响应数据，其中所述响应数据包括至少所述固定记录设备的地理位置和视野、所述移动记录设备的地理位置和视野、和/或所述个体的地理位置和视野；
至少部分地基于所述位置历史数据呈现情景的增强现实呈现，其中所述增强现实呈现包括有关增强现实设备或设备的用户中的至少一个的可见性信息；以及
检测所述固定记录设备、所述移动记录设备或所述个体相对于所述增强现实设备的视野的移动、确定所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔、以及将所述固定记录设备、所述移动记录设备或所述个体将保留在所述增强现实设备的视野内的时间间隔与阈值时间间隔进行比较。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US13/841,443 US20140267411A1 (en) | 2013-03-15 | 2013-03-15 | Indicating observation or visibility patterns in augmented reality systems |
| US13/841,443 | 2013-03-15 | ||
| PCT/US2014/025669 WO2014151410A1 (en) | 2013-03-15 | 2014-03-13 | Indicating observation or visibility patterns in augmented reality systems |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN105229566A CN105229566A (zh) | 2016-01-06 |
| CN105229566B true CN105229566B (zh) | 2020-01-14 |
Family
ID=51525478
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201480028248.7A Expired - Fee Related CN105229566B (zh) | 2013-03-15 | 2014-03-13 | 增强现实系统中指示观察或视觉图案 |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US20140267411A1 (zh) |
| EP (1) | EP2972664A4 (zh) |
| CN (1) | CN105229566B (zh) |
| WO (1) | WO2014151410A1 (zh) |
Families Citing this family (36)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10262462B2 (en) | 2014-04-18 | 2019-04-16 | Magic Leap, Inc. | Systems and methods for augmented and virtual reality |
| USD742917S1 (en) * | 2013-10-11 | 2015-11-10 | Microsoft Corporation | Display screen with transitional graphical user interface |
| US9460340B2 (en) * | 2014-01-31 | 2016-10-04 | Google Inc. | Self-initiated change of appearance for subjects in video and images |
| US20160371888A1 (en) * | 2014-03-10 | 2016-12-22 | Bae Systems Plc | Interactive information display |
| US9830395B2 (en) * | 2014-08-15 | 2017-11-28 | Daqri, Llc | Spatial data processing |
| US9799142B2 (en) | 2014-08-15 | 2017-10-24 | Daqri, Llc | Spatial data collection |
| US9799143B2 (en) * | 2014-08-15 | 2017-10-24 | Daqri, Llc | Spatial data visualization |
| US9934573B2 (en) * | 2014-09-17 | 2018-04-03 | Intel Corporation | Technologies for adjusting a perspective of a captured image for display |
| WO2016053486A1 (en) * | 2014-09-30 | 2016-04-07 | Pcms Holdings, Inc. | Reputation sharing system using augmented reality systems |
| US10335677B2 (en) | 2014-12-23 | 2019-07-02 | Matthew Daniel Fuchs | Augmented reality system with agent device for viewing persistent content and method of operation thereof |
| EP3109832A1 (en) * | 2015-06-24 | 2016-12-28 | Atos IT Solutions and Services GmbH | Interactive information system for shared and augmented interactive reality |
| US10768772B2 (en) * | 2015-11-19 | 2020-09-08 | Microsoft Technology Licensing, Llc | Context-aware recommendations of relevant presentation content displayed in mixed environments |
| US10404938B1 (en) | 2015-12-22 | 2019-09-03 | Steelcase Inc. | Virtual world method and system for affecting mind state |
| US10181218B1 (en) | 2016-02-17 | 2019-01-15 | Steelcase Inc. | Virtual affordance sales tool |
| US10057511B2 (en) | 2016-05-11 | 2018-08-21 | International Business Machines Corporation | Framing enhanced reality overlays using invisible light emitters |
| EP3244286B1 (en) * | 2016-05-13 | 2020-11-04 | Accenture Global Solutions Limited | Installation of a physical element |
| CN113625880B (zh) * | 2016-07-15 | 2024-04-12 | 武礼伟仁株式会社 | 虚拟现实系统及信息处理系统 |
| US10952365B2 (en) * | 2016-11-01 | 2021-03-23 | Kinze Manufacturing, Inc. | Control units, nodes, system, and method for transmitting and communicating data |
| US10817066B2 (en) * | 2016-12-05 | 2020-10-27 | Google Llc | Information privacy in virtual reality |
| US10182210B1 (en) | 2016-12-15 | 2019-01-15 | Steelcase Inc. | Systems and methods for implementing augmented reality and/or virtual reality |
| US10127705B2 (en) * | 2016-12-24 | 2018-11-13 | Motorola Solutions, Inc. | Method and apparatus for dynamic geofence searching of an incident scene |
| US11176712B2 (en) * | 2017-01-18 | 2021-11-16 | Pcms Holdings, Inc. | System and method for selecting scenes for browsing histories in augmented reality interfaces |
| US11120264B2 (en) | 2017-06-02 | 2021-09-14 | Apple Inc. | Augmented reality interface for facilitating identification of arriving vehicle |
| EP3635521A4 (en) * | 2017-06-08 | 2021-05-19 | Honeywell International Inc. | APPARATUS AND METHOD FOR VISUAL ASSISTANCE LEARNING, COLLABORATION AND MONITORING IN AUGMENTED REALITY / VIRTUAL INDUSTRIAL AUTOMATION SYSTEMS AND OTHER SYSTEMS |
| EP3616035B1 (en) | 2017-06-19 | 2024-04-24 | Apple Inc. | Augmented reality interface for interacting with displayed maps |
| CN107820593B (zh) * | 2017-07-28 | 2020-04-17 | 深圳市瑞立视多媒体科技有限公司 | 一种虚拟现实交互方法、装置及系统 |
| US10423834B2 (en) * | 2017-08-31 | 2019-09-24 | Uber Technologies, Inc. | Augmented reality assisted pickup |
| US10777007B2 (en) | 2017-09-29 | 2020-09-15 | Apple Inc. | Cooperative augmented reality map interface |
| US10984546B2 (en) | 2019-02-28 | 2021-04-20 | Apple Inc. | Enabling automatic measurements |
| WO2020214864A1 (en) * | 2019-04-17 | 2020-10-22 | Prestacom Services Llc | User interfaces for tracking and finding items |
| WO2020223176A1 (en) | 2019-04-28 | 2020-11-05 | Prestacom Services Llc | Generating tactile output sequences associated with an object |
| WO2020226833A1 (en) | 2019-05-06 | 2020-11-12 | Apple Inc. | Device, method, and graphical user interface for composing cgr files |
| CN113508361A (zh) | 2019-05-06 | 2021-10-15 | 苹果公司 | 用于呈现计算机生成现实文件的设备、方法和计算机可读介质 |
| CN111581547B (zh) * | 2020-06-04 | 2023-12-15 | 浙江商汤科技开发有限公司 | 一种游览信息推送方法、装置、电子设备及存储介质 |
| US11670144B2 (en) * | 2020-09-14 | 2023-06-06 | Apple Inc. | User interfaces for indicating distance |
| CN116634377A (zh) | 2020-09-25 | 2023-08-22 | 苹果公司 | 用于跟踪和查找物品的用户界面 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7801328B2 (en) * | 2005-03-31 | 2010-09-21 | Honeywell International Inc. | Methods for defining, detecting, analyzing, indexing and retrieving events using video image processing |
| CN102668605A (zh) * | 2010-03-02 | 2012-09-12 | 英派尔科技开发有限公司 | 在增强现实中跟踪对象 |
Family Cites Families (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002342217A (ja) * | 2001-05-09 | 2002-11-29 | Kizna Corp | 画像通信用サーバ及び画像通信方法 |
| US8292433B2 (en) * | 2003-03-21 | 2012-10-23 | Queen's University At Kingston | Method and apparatus for communication between humans and devices |
| US7720436B2 (en) * | 2006-01-09 | 2010-05-18 | Nokia Corporation | Displaying network objects in mobile devices based on geolocation |
| US20080071559A1 (en) * | 2006-09-19 | 2008-03-20 | Juha Arrasvuori | Augmented reality assisted shopping |
| US8238693B2 (en) * | 2007-08-16 | 2012-08-07 | Nokia Corporation | Apparatus, method and computer program product for tying information to features associated with captured media objects |
| US8264505B2 (en) * | 2007-12-28 | 2012-09-11 | Microsoft Corporation | Augmented reality and filtering |
| US8270767B2 (en) * | 2008-04-16 | 2012-09-18 | Johnson Controls Technology Company | Systems and methods for providing immersive displays of video camera information from a plurality of cameras |
| US8427508B2 (en) * | 2009-06-25 | 2013-04-23 | Nokia Corporation | Method and apparatus for an augmented reality user interface |
| WO2011063034A1 (en) * | 2009-11-17 | 2011-05-26 | Rtp, Llc | Systems and methods for augmented reality |
| US9684989B2 (en) * | 2010-06-16 | 2017-06-20 | Qualcomm Incorporated | User interface transition between camera view and map view |
| EP2426460B1 (en) * | 2010-09-03 | 2016-03-30 | BlackBerry Limited | Method and Apparatus for Generating and Using Location Information |
| US8660369B2 (en) * | 2010-10-25 | 2014-02-25 | Disney Enterprises, Inc. | Systems and methods using mobile devices for augmented reality |
| US8698843B2 (en) * | 2010-11-02 | 2014-04-15 | Google Inc. | Range of focus in an augmented reality application |
| US8633970B1 (en) * | 2012-08-30 | 2014-01-21 | Google Inc. | Augmented reality with earth data |
-
2013
- 2013-03-15 US US13/841,443 patent/US20140267411A1/en not_active Abandoned
-
2014
- 2014-03-13 WO PCT/US2014/025669 patent/WO2014151410A1/en active Application Filing
- 2014-03-13 EP EP14767447.7A patent/EP2972664A4/en not_active Ceased
- 2014-03-13 CN CN201480028248.7A patent/CN105229566B/zh not_active Expired - Fee Related
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7801328B2 (en) * | 2005-03-31 | 2010-09-21 | Honeywell International Inc. | Methods for defining, detecting, analyzing, indexing and retrieving events using video image processing |
| CN102668605A (zh) * | 2010-03-02 | 2012-09-12 | 英派尔科技开发有限公司 | 在增强现实中跟踪对象 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN105229566A (zh) | 2016-01-06 |
| EP2972664A1 (en) | 2016-01-20 |
| WO2014151410A1 (en) | 2014-09-25 |
| US20140267411A1 (en) | 2014-09-18 |
| EP2972664A4 (en) | 2016-11-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105229566B (zh) | 增强现实系统中指示观察或视觉图案 | |
| US20190114811A1 (en) | Temporal element restoration in augmented reality systems | |
| US10628969B2 (en) | Dynamically preserving scene elements in augmented reality systems | |
| CN109952610B (zh) | 图像修改器的选择性识别和排序 | |
| JP6220452B2 (ja) | オブジェクトベースのコンテキストメニューの制御 | |
| US20180364882A1 (en) | Cross-reality select, drag, and drop for augmented reality systems | |
| US9501140B2 (en) | Method and apparatus for developing and playing natural user interface applications | |
| US10225471B2 (en) | System and method for autonomously recording a visual media | |
| RU2654133C2 (ru) | Просмотр трехмерных объектов в документах | |
| US20110169927A1 (en) | Content Presentation in a Three Dimensional Environment | |
| CN104272306B (zh) | 向前翻 | |
| WO2017048359A1 (en) | Facilitating personal assistance for curation of multimedia and generation of stories at computing devices | |
| CN107077345A (zh) | 用于在当前应用中插入内容的个性化上下文菜单 | |
| CN111597465A (zh) | 展示方法、装置和电子设备 | |
| US10437884B2 (en) | Navigation of computer-navigable physical feature graph | |
| Milazzo et al. | KIND‐DAMA: A modular middleware for Kinect‐like device data management | |
| KR20240027047A (ko) | 카메라에 적용가능한 기능들을 제시하기 위한 사용자 인터페이스 | |
| Newnham | Microsoft HoloLens By Example | |
| Di Martino et al. | Distributed Collaborative AR on Cloud Continuum: A Case Study for Cultural Heritage | |
| CN114296551A (zh) | 目标对象的呈现方法、装置、电子设备及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200114 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |