CN104321681A - 使用透明显示装置的增强的信息递送 - Google Patents

Abstract

通过使用透明显示装置来递送关于特定外部环境的信息。在一个实施例中，方法包括：确定移动透明显示装置的定位，确定显示装置的定向，通过使用所确定的定位和定向来检索关于显示装置的环境的信息，并且将所检索的信息叠覆在透明显示装置上的视图上。

Description

使用透明显示装置的增强的信息递送

背景技术

无线数据网络的出现已经允许移动设备（诸如便携式计算机和智能电话）几乎即刻将关于位置的数据提供给该位置中的人。移动设备可以通过web浏览器或应用而报告其位置并且被提供有关于餐馆、待售房屋、文化事件以及更多的信息。这允许用户被即刻告知该位置。一些网站和应用还允许用户与信息交互以聚焦于特定类型的信息或者关于特定主题或设施的信息。对于图形信息，用户可以能够放大或缩小或者从顶视图到街景视图或从地图视图到图片视图地改变视图。

一些网站和应用还允许用户通过无线数据网络将信息上传回至信息提供。用户可以于是向已经接收到的内容添加关于位置的信息，诸如当前照片、描述或评论。该信息可以与现有信息合并以允许更多的信息被提供给下一用户。

这样的基于位置的应用的一个示例是天文学应用。这样的应用接收用户设备的位置和一年中的时间并且然后提供在该位置和时间夜空应当看起来如何的图像。附加信息被提供，诸如星座和行星的名称和位置。如果用户具有天空的视图，那么移动设备上接收的信息可以与实际的天空相比较以定位并且理解对象。这样的应用可以允许人员了解在遥远或者不熟悉位置中的天空。类似的功能性还可以利用固定的台式设备和软件而获得。

附图说明

在附图的各图中作为示例而非作为限制地图示了本发明的实施例，在附图中，同样的参考标号指代类似的元件。

图1是用户通过使用根据本发明的实施例的眼镜显示装置而享受夜空的增强信息视图的图解。

图2是如通过根据本发明的实施例的一副眼镜的透镜所见的夜空的增强信息视图的图解。

图3是如通过根据本发明的实施例的一副眼镜的透镜所见的城市风景的增强信息视图的图解。

图4是根据本发明的另一实施例的包括眼镜显示装置的用于递送信息的系统的框图。

图5是根据本发明的实施例的在透明显示装置上提供递送信息的过程流程图。

图6是根据本发明的实施例的适合于实现本公开的过程的计算机系统的框图。

图7是根据本发明的实施例的适合于实现本公开的过程的图8的计算机系统的可替换视图的框图。

具体实施方式

通过使用眼镜系统，信息可以被呈现在与真实世界视图相同的视图中。代替于查看移动设备的屏幕并且然后将所看见的应用于用户周围的真实场景的是，内容可以被示出在真实场景内或叠加在真实场景上。这不仅更快速地使信息可用，而且还可以提供空闲的双手使用和通过姿势进行输入。

在一个实施例中，利用免提、“加强的望远镜”体验来扩展人类视觉以用于观看夜空。在这样的实施例中，创建夜空的现实渲染，其通过使用惯性传感器或计算机视觉或二者而与真实夜空的用户视图准确地对准。通过使用眼镜加强的现实（AR）系统，所述渲染被绘制成叠加在用户视图上。所述渲染允许用户接收附加信息，诸如天体的名称、太小或太遥远以使得不能用裸眼看见的对象的名称或诸如星座之类的逻辑实体，其被呈现为夜空视图上的叠覆。

图1示出了使用中的系统的示例。用户10站在看得见夜空12的地方，其中可以看见星体、行星、彗星和也许少数飞机。观看者通过一副眼镜14的透明透镜来看，所述眼镜14配备有相机16和投影仪17。眼镜还可以配备有其它设备，除了别的（未示出）之外诸如定位和惯性参考系统。相机在观看者正看着的方向上看出去，以看见观看者的天空视图。投影仪能够在观看者前方将图像投影在透镜上或越过透镜向外。虽然使用术语投影仪，然而，在电致变色或透明OLED显示装置的情况下，图像将不如被显示那样多地被投影，相同的原理应用于这样的关于投影仪的显示系统。

相机和投影仪耦合到计算系统18，所述计算系统18在本图示中被示出为智能电话或小型平板设备，然而，计算系统可以更大或更小并且采取各种不同的形状因数。计算系统可以物理地附接或集成到眼镜中，佩戴为分离的设备，如所示出的，或者可以是固定或分离的手持设备。计算系统可以如所示的通过一个或多个线缆或者通过使用各种不同无线通信系统中的任一种而无线地耦合到相机和投影仪。如所图示的计算系统包括按钮和显示装置，所述显示装置可以是触摸表面以用于附加的用户输入。特定的用户接口可以被适配成适宜于设备及其应用。

计算系统18的示例可以无限制地包括移动设备、个人数字助理、移动计算设备、智能电话、蜂窝式电话、手持机、计算机、个人计算机（PC）、台式计算机、膝上型计算机、笔记本计算机、手持式计算机、平板式计算机、服务器、服务器阵列或服务器农场、web服务器、网络服务器、因特网服务器、工作站、迷你计算机、大型计算机、超级计算机、网络器具、web器具、分布式计算系统、多处理器系统、基于处理器的系统、消费电子产品、可编程消费电子产品、电视、数字电视、机顶盒、无线接入点、基站、订户站或其组合。

用户还被示出为在相机16看得见的地方握着手20。通过使用相机，用户可以用他的手做出姿势以将命令发送到计算系统。命令可以在显示装置上调出特定类型的信息。在显示装置上放大或缩小、在不同方向上扫过显示装置、或者选择夜空中的特定对象。姿势被相机观察到并且被提供给计算系统，所述计算系统执行命令，结果，通过使用眼镜或计算系统中的扬声器（未示出）或者通过使用投影仪可以提供音频或视觉确认。

图2示出通过观看夜空12的示例图1中的眼镜的左透镜22的视图的示例。通过右透镜将看到类似的视图。通过显示装置的透明透镜，天空12是清晰并且可见的。为了增强用户对所见的内容的理解，计算系统已经生成了注解24，将星座命名为大熊星座并且将星体命名为北极星。这些被显示在屏幕上，紧接于如通过眼镜所见的适当项目。计算系统通过将来自相机的视图与眼镜透镜配准并且然后在适当位置投影图像而这样做。除了注解之外，参考线26被提供以示出星座的星体如何与彼此关联。这些被叠加在真实天空的视图上，在眼镜透镜的适当地方显示所述线。

图3是系统可以如何与不同视图一起使用的另一示例。在该示例中，用户正跨过街道看着两个真实的餐馆，乔的餐馆34和萨姆的餐馆38。计算系统，类似于夜空，已经确定了用户的定位和定向并且标识了用户正看着的两个餐馆。计算系统于是已经生成了注解36、40来增强观看餐馆的用户体验。在该示例中，注解是简短的评注，诸如“乔的很棒！”以及“萨姆的好极了！”其它信息可以在用户命令时被提供，诸如运营时间、菜单、深入评注、关于餐馆的历史信息、主厨、建筑物或街道或任何其它信息。通过计算系统还可以提供社交网络特征。

图1-3示出了本发明允许在自由的手部和头部移动以享受视图并且通过使用手部姿势或其它控制方法来控制视图的增强的情况下真实世界（诸如夜空或城市风景）的清晰视图。系统可以通过使用姿势或语音命令或任何其它类型的命令而进行操作。可替换地或附加地，用户可以在有或没有使用计算系统上的显示装置的情况下直接在计算系统上执行一些命令。计算系统可以使所提供的数据中的一些或全部存储在存储器中。

通过使用无线数据网络，计算设备还可以从远程服务器和服务获得当前或附加信息。在社交网络的示例中，用户还可以在视图的上下文中向其他人发送和接收通信。在看到北极星之后，用户可以向另一用户发送消息，诸如“我刚看到北极星了并且今晚它非常清晰”。在另一示例中，用户可以接收到消息，诸如“我们去乔那吃饭吧。8:00见。”

参考图4，更详细地描述了眼镜观看和增强系统。感测组件向系统100提供各种不同输入。在一个示例中，系统使用惯性传感器110和定位传感器112来定位用户并且确定用户正面向的方向。惯性传感器可以包括加速仪、陀螺仪、罗盘、高度计等等。定位传感器可以包括诸如GPS（全球定位系统）之类的卫星定位系统以及其它无线电定位系统，诸如WiFi传感器、蜂窝塔式定位传感器等等。

定位的另一途径是使用相机114来捕获夜空的图像。相机可以受惯性和定位传感器或代替于这些的其它传感器所协助。相机可以感测可见光或可能地频谱的其它部分，例如红外光。计算机视觉配准系统116然后可以使用所捕获的图像来确定用户的定位和方向。在所图示的示例中，所有这些感测技术通过传感器融合系统118而被组合。然而，所描述的传感器可以独立地或以其它组合而使用。

系统还具有天文学数据库。数据库包含关于天体对象的信息和元数据，可能地包括望远镜图像、绘图和神话学参考。数据库可以如所示地被本地存储或者通过云而远程访问。天文学数据库可以用于如上所述地在显示装置上渲染信息。另外，天文学数据库可以由计算机视觉配准系统用于帮助配准过程。在一个示例中，计算机视觉系统将相机所捕获的图像中的星体的图案与数据库中的图案相对准。为了更高的准确性，可以捕获并比较若干图像。对应于相同天空的相匹配的图案可以被选为对于用户当前定位的图案。计算机视觉配准系统还可以使用日历和时钟来限制对于在特定夜晚可以看见的天空的那些的图案的总数目。准确的日期和时间信息可以例如来自定位系统、来自内部存储器、或来自远程天文学数据库。除了天文学数据库之外，可以存在其它数据库，诸如如以上示出的餐馆信息、或关于正观看的事物而言用户可能期望的任何其它信息。

系统可以允许各种不同方式来向系统提供用户控制输入。在一个示例中，观察夜空的相机可以用于检测用户所做出的手部姿势。在其中整个系统被安装到一副眼镜上的系统的情况下，使用相同的相机减小尺寸和重量。指向用户正面向的方向的眼镜上安装的相机也将能够观察用户在眼镜前方做出的手部姿势。相机114耦合到姿势识别系统122，其将姿势作为命令馈送到用户输入系统124中。用户输入系统还可以接收其它命令。用户输入系统命令被提供给渲染模块126以控制系统的操作。可替换地或附加地，开关和滑块（未示出）可以被提供在系统上或者麦克风可以被提供以接收语音命令。这些还可以被发送到用户输入系统124以用于处理和处置并且然后馈送到渲染模块。

姿势输入系统可以用于系统所提供的任何功能。这可以包括改变模式、并且上拉关于所观看或显示的对象的不同信息。命令可以被提供用于指定不同类型的增强，诸如使对象看起来比它们真实的更大以使得可以更容易地看见它们，或者拉近太微弱以致裸眼不可见的对象。

在一个实施例中，命令可以被提供用于控制缩放功能。用户可以朝向特定对象做出姿势，所述对象例如是行星火星，其太遥远或难以观察。在天文学数据库中标识该对象并且从数据库中检索所存储的火星图像并且在透明显示装置上将其投影为叠覆。用户在看到叠覆在他的对象视图上的该对象时，于是可以在经叠覆的图像上进行放大或缩小。由于存在公共可用的火星影像的大型目录，所以当用户在所选对象上放大时，几乎可以提供任何水平的细节。图像还可以被注解有关于表面、环境、尺寸、人类历史注释的信息以及关于火星或另一所选对象的任何其它信息。相同的缩放功能还可以被提供用于城市风景。可以从存储装置中检索所存储的乔的餐馆的图像并且将其投影在透明显示装置上。用户可以放大并且通过使用附加的存储图像甚至看到餐馆的内部、一些盘餐、来自过去的值得注意的社交事件等等。

渲染模块126处理来自感测子系统118、输入系统124和数据库120的数据。它为用户生成夜空的虚拟视图。渲染模块还可以包含直接来自相机的夜空视图图像、增强图像数据、并且然后将它呈现给用户。作为另外的可替换方案，渲染模块可以将来自数据库的数据叠覆在用户的直接视图上。呈现的特定模式可以在制造时被固定或由用户选择。所述视图，无论是渲染的视图、增强的视图或者对于直接视图的叠覆，于是被发送到眼镜显示装置128以用于观看。虽然示出了眼镜显示装置，但是可以使用各种其它透明显示装置中的任一种，包括头盔护目镜、或甚至是被设计成具有透明显示装置的智能电话或平板设备。透明显示装置可以是以眼镜或在更大距离处观看的更大面板的形式。透明显示装置可以通过使用光学投影技术或显示技术而被制成，诸如电致变色和OLED（有机发光二极管），其可以形成在透明面板上。

图5是用于上述一些操作的示例过程流程图。在图5中，过程开始于用户去到一位置并且激活系统。系统然后在210处确定系统的定位。该系统包括移动透明显示装置。可以以各种不同方式中的任一种、通过使用不同类型的设备来确定系统的定位。这可以包括使用来自卫星的无线电全球或局部定位系统、蜂窝式网络、数据网络和其它局部定位系统。用户还可以提供定位。作为另外的可替换方案，系统的相机可以用于拍摄一些地标的图像，其然后可以应用于地标库以确定系统的定位。

系统接下来确定显示装置的定向。这可以通过使用附接于显示装置的罗盘或通过使用惯性参考系统来进行。作为示例，在确定了定向之后，加速仪可以感测到用户已将他的头部移向右边。基于此信息，定向于是可以被调整至右边。加速仪还可以用于倾斜以确定用户已将其头部移向上方并且甚至转动，以确定用户已抬起他的头部至一侧或另一侧。信息叠覆于是可以迅速被调整以补偿用户的运动。因此，三轴偏转、倾斜以及转动惯性系统在这样的应用中可以是有用的。相机还可以用于确定定向。作为示例，如果用户的定位是已知的，并且相机观察到乔的餐馆在萨姆的餐馆的右边，那么系统可以通过使用参考图像来推断用户正看着的方向以及其定位。

在一个实施例中更清楚地陈述，可以通过使用相机首先拍摄用户视图的图像来确定显示装置的定向。该图像然后可以在本地或在远程站点处与所确定的定位处的参考图像进行比较。参考图像数据库可以具有对应于不同粗略定位的多幅图像，其中每个参考图像与不同的定向相关联。在夜空的情况下，由于星体非常远，所以对于处于距彼此数百英里内的观看者们而言，夜空看起来是大约相同的。然而，当观看者从左到右或者上下扫过天空时，天空的视图改变。对于街景视图，诸如图3的视图，当观看者移动十或二十英尺时，视图可以改变。当用户扫视左边或右边时，视图也改变。然而，这些改变不是这么大并且例如通过扫视上方或下方引起的改变从以街景水平标识不同餐馆的角度而言不是引人关注的。它们对于其它应用而言可能是引人关注的，诸如标识滑雪轨迹或山脉。

通过使用比较，系统选择与来自相机的图像相对应的参考图像。这可以通过使用用于比较图像的各种现有工具来进行。如以上提及的，该图像与特定的定向相关联，因此与所选参考图像相关联的定向于是可以用作对于显示装置的所确定的定向。

在214处，所确定的定位和定向用于检索关于显示装置的环境的信息。图3和4提供了可以检索的信息的类型的示例。然而，用户可能觉得有意思的任何其它信息可以被提供。由于系统知晓用户通过显示装置正看见的内容，所以所呈现的信息可以被选择以使得其相关于用户正看见的内容。诸如电子邮件、消息、库存报告和新闻之类的其它信息也可以被示出，但是这些不一定联系到用户正看见的内容中。在显示装置上的信息与通过显示装置的视图之间的该连接增强了用户的真实世界体验。

在216处，所检索的信息在透明显示装置上被叠覆到真实场景的视图上。如以上解释的和在图2和3中示出的，通过使用透明显示装置上示出的附加信息来增强通过透明显示装置的真实场景的视图。叠覆可以是近似或大致上的。在图3的示例中，餐馆评注不需要在显示装置上被精确定位。然而，在图3的示例中，连接星座的星体和星体的名称的线，如果它们接近地对准于如用户所见的这些事物的定位则被使得是更有帮助的。

在一个实施例中，可以通过使用相机而将信息叠覆配准于通过显示装置的视图。相机被定向在透明显示装置上视图的方向上。在智能电话或平板设备中，这被称为后置相机。在眼镜的头盔中，这被称为前置相机。图像可以由计算机系统或远程服务用于确定视图中的参考点。参考点可以有关视图中的已知对象以及涉及那些对象的信息。叠覆的信息于是可以在期望时相对于参考点被精确地定位。参考点还可以向图像提供标度和距离以使得在用户和对象之间的相对距离可以被确定。通过使用该信息，还可以调整所叠覆信息的标度。

在218处，用户通过使用手部姿势来调整和控制体验。相机观察到手部姿势并且将这些解释为命令以控制透明显示装置上信息的呈现。如以上建议的，可以使用多种多样的不同命令，并且这些可以与语音命令以及计算系统的输入输出接口的其它部分一起使用。

图6是能够支持以上讨论的操作的计算环境的框图。模块和系统可以以各种不同的硬件架构和形状因数来实现，包括图7中所示的。输入和输出系统被示出在图的右侧，并且计算系统被示出在虚线内，但是组件的特定物理配置可以被适配成适宜于不同的实现。

命令执行模块601包括中央处理单元以缓存并执行命令并且在所示的其它模块和系统之中分布任务。其可以包括指令栈、用以存储中间和最终结果的高速缓冲存储器以及用以存储应用和操作系统的大容量存储器。命令执行模块也可以用作用于系统的中央协调和任务分配单元。

屏幕渲染模块621在透明显示装置上绘制对象以供用户查看。其可以被适配成从下述叠覆配准模块603接收数据并且在两个眼镜透镜的屏幕或任何其它屏幕上渲染增强的信息以及任何其它对象。因而，来自叠覆配准模块603的数据将会确定所检索信息的定位和动态并且屏幕渲染模块将会相应地在屏幕上描绘信息和相关联的对象和环境。

对象和姿势识别系统622可以被适配成识别并追踪用户的手部和手臂的姿势。这样的模块可以用于识别手部、手指、手指姿势、手部的移动以及手部相对于显示装置和真实场景中所观察的对象的位置。例如，对象和姿势识别模块可以例如确定用户做出了身体部位姿势以选择真实或显示的对象，或者用户做出了身体部位姿势以扩大或响应于所显示的对象。对象和姿势识别系统可以耦合到相机或相机阵列、麦克风或麦克风阵列、触摸屏或触摸表面、或者定点设备、或这些项的某种组合，以检测来自用户的姿势和命令。

注意力指引模块623可以配备有相机、惯性传感器、或其它传感器以追踪透明显示装置的定位和定向，例如通过追踪用户头部的移动。注意力指引模块的信息可以被提供给叠覆配准模块603以确保信息显示被调整以补偿用户头部的移动和真实场景中的改变。

定位模块625可以使用邻近传感器、罗盘、GPS（全球定位系统）接收器、个域网无线电、和其它类型的传感器，连同三角测量和其它技术一起，以确定透明显示装置及其相关联设备的定位。一旦检测到定位，其可以用于检索相关信息。

传感器融合模块604被适配成从传感器623、625接收输入并且解释这些以确定定位、定向以及系统定位和定向的任何其它期望的方面。融合传感器可以建立初始定位和定向并且然后基于从用于显示装置的偏转、倾斜和转动的惯性传感器所接收到的数据来进行调整。该信息可以通过通信总线606被馈送到除其它之外的叠覆配准模块603以调整被提供给屏幕渲染模块621的信息。

姿势到屏幕同步模块608从对象和姿势识别系统622接收姿势信息并且在一些情况下的语音命令以确定是否已经观察到姿势。通过使用叠覆配准模块603，命令然后相关于真实场景中的对象或系统所提供的信息以解释姿势以及其与观看者所体验的其它对象的关系。因此，例如，该模块将把选择命令相关于真实场景中的特定对象以生成命令。它然后使得例如姿势库被使用以解释姿势并且将其作为命令提供给命令执行模块601。

信息数据库607（其可以包括或耦合到外部数据库或信息服务）通过通信总线606耦合到信息检索模块602以提供数据，利用所述数据可以增强真实场景。数据可以具有上述不同类型中的任一种。

如上所述的叠覆配准模块603从信息检索模块602接收信息，将其与相机所观察的真实场景对准并且将经缩放和配准的信息提供给屏幕渲染模块621。

信息检索模块602使用所确定的定位和定向信息以从信息数据库607检索信息来提供给用户。信息的性质可以由用户或应用预选择并且然后由用户命令修改。可替换地，信息检索模块可以基于所确定的用户注意力定位和方向来确定要提供的信息。对于夜空，可以获得天文学信息，而对于晚上的城市街道，可以获得关于街道上的建筑物的信息。用户还可以选择默认信息类型或者通过使用被配置用于特定类型信息的应用或选择来发起系统。

3D图像交互和效果模块605追踪用户与真实场景的3D交互并且生成所检索信息的3D透视图。例如，关于餐馆的信息可以被使得出现在与餐馆的距离相对应的距离处。关于前景中对象的信息可以通过3D图像交互和效果模块605渲染在显示装置的前景中。对于眼镜显示装置，可以简单并且有效地渲染3D效果。

图7是计算系统的框图，诸如个人计算机、便携式游戏设备、智能电话或平板设备。输入和输出系统被示出在图的右侧并且计算系统被示出在虚线内，但是组件的特定物理配置可以被适配成适宜于不同的实现。计算机系统700包括总线或用于传送信息的其它通信装置701，以及处理装置，诸如与总线701耦合以用于处理信息的微处理器702。计算机系统可以利用图形处理器703和物理处理器705来加强，所述图形处理器703特别用于通过并行流水线来渲染图形，所述物理处理器705用于计算物理交互以增强信息和效果的呈现。这些处理器可以被并入中央处理器702中或被提供为一个或多个分离的处理器。

计算机系统700此外包括主存储器704，诸如随机存取存储器（RAM）或其它动态数据存储设备，其耦合到总线701以用于存储要由处理器702执行的信息和指令。主存储器还可以用于在处理器对指令的执行期间存储临时变量或其它中间信息。计算机系统还可以包括非易失性存储器706，诸如只读存储器（ROM）或其它静态数据存储设备，其耦合到总线以用于存储用于处理器的静态信息和指令。

大容量存储器707，诸如磁盘、光盘、或固态阵列及其对应的驱动装置，也可以耦合到计算机系统的总线以用于存储信息和指令。计算机系统还可以经由总线耦合到透明显示设备或监视器721，诸如投影仪、液晶显示器（LCD）或有机发光二极管（OLED）阵列，以用于向用户显示信息。除了以上讨论的各种视图和用户交互之外，安装状态、操作状态和其它信息的图形和文本指示可以在显示设备上呈现给用户。

典型地，用户输入设备722，诸如具有字母数字、功能和其它键的键盘，可以耦合到总线以用于将信息和命令选择传送给处理器。附加的用户输入设备可以包括光标控制输入设备，诸如鼠标、追踪球、追踪板或光标指引键，其可以耦合到总线以用于将指引信息和命令选择传送给处理器并且控制显示装置721上的光标移动。

相机和麦克风阵列723耦合到总线以观察姿势、记录音频和视频并且接收视觉和音频命令，如以上提及的那样。

通信接口725也耦合到总线701。通信接口可以包括调制解调器、网络接口卡、或其它众所周知的接口设备，诸如用于耦合到以太网、令牌环的那些，或其它类型的物理有线或无线附接以用于提供通信链路来支持例如局域网或广域网（LAN或WAN）。以这种方式，计算机系统还可以经由网络基础设施或外围附接接口（包括例如内联网或因特网）而耦合到多个外围设备、其它客户端、服务器和显示设备。

要领会的是，对于某些实现可以优选比以上描述的示例更少或更多配备的系统。因此，示例性系统600和700的配置将从实现到实现地变化，这取决于众多因素，诸如价格约束、性能要求、技术改进或其它情况。

实施例可以被实现为以下中的任一个或其组合：通过使用母板（parentboard）互连的一个或多个微芯片或集成电路、硬连线的逻辑、由存储器设备存储并且由微处理器执行的软件、固件、专用集成电路（ASIC）和/或现场可编程门阵列（FPGA）。术语“逻辑”作为示例可以包括软件或硬件和/或软件和硬件的组合。

实施例可以例如被提供为可以包括一个或多个机器可读介质的计算机程序产品，所述机器可读介质具有在其上存储的机器可执行指令，所述指令当由一个或多个机器（诸如计算机、计算机的网络、或其它电子设备）执行时可以致使一个或多个机器实施根据本发明的实施例的操作。机器可读存储介质可以包括但不限于软盘、光盘、CD-ROM（紧致盘-只读存储器）和磁光盘、ROM（只读存储器）、RAM（随机存取存储器）、EPROM（可擦除可编程只读存储器）、EEPROM（电可擦除可编程只读存储器）、磁或光学卡、闪速存储器、或适合于存储机器可执行指令的其它类型的介质/机器可读介质。

此外，实施例可以作为计算机程序产品而被下载，其中程序可以经由通信链路（例如调制解调器和/或网络连接）、作为被具体化在载波或其它传播介质中和/或由载波或其它传播介质调制的一个或多个数据信号而从远程计算机（例如服务器）传递到请求的计算机（例如客户端）。因此，如本文使用的，机器可读介质可以但是不被要求包括这样的载波。

对“一个实施例”、“实施例”、“示例实施例”、“各种实施例”等的提及指示：这样描述的本发明的（多个）实施例可以包括特定特征、结构或特性，但是不是每个实施例必定包括这些特定特征、结构或特性。此外，一些实施例可以具有对于其它实施例所描述的特征中的一些、所有或一个也没有。

在以下描述和权利要求中，术语“耦合”连同其派生词可以被使用。“耦合”用于指示两个或更多元件彼此协作或交互，但是它们可以或可以不在其之间具有居间的物理或电组件。

如权利要求中所使用的，除非另行指定，使用序数形容词“第一”、“第二”、“第三”等等来描述共同的元件，仅仅指示了同样的元件的不同实例正被提及，并且不旨在意味着这样描述的元件必须以给定顺序，要么时间上、空间上分级，要么以任何其它方式。

以下示例关于另外的实施例。示例中的特性可以使用在一个或多个实施例的任何地方。在一个实施例中，方法包括：确定移动透明显示装置的定位，确定显示装置的定向、通过使用所确定的定位和定向来检索关于显示装置的环境的信息，并且将所检索的信息叠覆到透明显示装置上的视图上。

另外的实施例包括这样的方法，其中确定定向包括确定显示装置所定向的方向并且推断通过透明显示装置可以看到的内容，并且其中确定定向包括使用罗盘，并且其中确定定向包括使用加速仪，并且其中确定定向包括使用面向透明显示装置上视图的方向的相机，并且其中确定定向包括确定倾斜。

另外的实施例包括以上方法中的任一种，其中确定定向包括将来自相机的图像与所确定的定位处的参考图像进行比较，其中每个参考图像相关联于定向，选择与来自相机的图像相对应的参考图像，并且使用与所选参考图像相关联的定向作为所确定的定向。

另外的实施例包括以上方法中的任一种，其中叠覆信息包括使用被定向在透明显示装置上视图方向的相机来确定视图中的参考点并且关于参考点来定位所叠覆的信息，并且其中参考点被标识为星体并且信息是涉及所标识的星体的信息。

另外的实施例包括以上方法中的任一种，还包括观察用户手部姿势并且将所观察的姿势解释为命令以控制透明显示装置上信息的呈现。

在附加的实施例中，机器可读介质具有存储在其上的指令，所述指令当由机器操作时使得机器执行以上方法中任何一个或多个的操作。

在另一实施例中，装置包括透明显示装置、用以确定显示装置的定位的定位系统、用以确定显示装置的定向的定向系统以及计算系统，其用以接收所确定的定位和定向、检索关于通过透明显示装置观看的用户看得见的对象的信息、并且在透明显示装置上将信息叠覆在用户的视图上。

另外的实施例还包括无线通信接口，其耦合到计算系统以将定位和定向信息发送到远程服务器并且从远程服务器接收关于对象的信息。另外，可以包括相机以观察显示装置看得见的真实对象，其中计算系统确定相机所观察的对象中的参考点并且关于参考点来定位所叠覆的信息。相机可以被定向在用户通过透明显示装置的视图的方向上以观察用户姿势，并且其中计算系统将所观察的用户姿势解释为命令以控制透明显示装置上信息的呈现。透明显示装置可以是头戴式的并且以眼镜的形式，其通过眼镜的透镜在用户看得见的地方投影信息。

附图和前述描述给出实施例的示例。本领域技术人员将领会到，一个或多个所描述的元件可以很好地被组合成单个功能元件。可替换地，某些元件可以被拆分成多个功能元件。来自一个实施例的元件可以被添加到另一实施例。例如，本文描述的过程的次序可以改变并且不限于本文描述的方式。此外，任何流程图的行动不需要以所示的次序实现；也不一定需要执行所有的动作。而且，不取决于其它动作的那些动作可以与所述其它动作并行执行。实施例的范围决不由这些特定示例所限制。众多变型，无论在说明书中明确给出或否，诸如结构、尺寸和材料使用上的差别是可能的。实施例的范围至少与所附权利要求所给出的一样宽。

Claims (20)

1.一种方法，包括：

确定移动透明显示装置的定位；

确定显示装置的定向；

通过使用所确定的定位和定向来检索关于显示装置的环境的信息；以及

将所检索的信息叠覆在透明显示装置上的视图上。

2.根据权利要求1所述的方法，其中确定定向包括确定显示装置所定向的方向并且推断通过透明显示装置可以看见的内容。

3.根据权利要求1所述的方法，其中确定定向包括使用罗盘。

4.根据权利要求1所述的方法，其中确定定向包括使用加速仪。

5.根据权利要求1所述的方法，其中确定定向包括使用面向透明显示装置上视图的方向的相机。

6.根据权利要求5所述的方法，其中确定定向包括将来自相机的图像与所确定的定位处的参考图像进行比较，每个参考图像相关联于定向，选择与来自相机的图像相对应的参考图像，并且使用与所选参考图像相关联的定向作为所确定的定向。

7.根据权利要求1所述的方法，其中确定定向包括确定倾斜。

8.根据权利要求1所述的方法，其中叠覆信息包括使用被定向在透明显示装置上视图方向上的相机来确定视图中的参考点并且关于参考点来定位所叠覆的信息。

9.根据权利要求8所述的方法，其中参考点被标识为星体并且信息是涉及所标识的星体的信息。

10.根据权利要求1所述的方法，此外包括观察用户手部姿势并且将所观察的姿势解释为命令以控制透明显示装置上信息的呈现。

11.一种机器可读介质，其具有存储在其上的指令，所述指令当由机器操作时使得所述机器执行包括以下各项的操作：

确定移动透明显示装置的定位；

确定显示装置的定向；

通过使用所确定的定位和定向来检索关于显示装置的环境的信息；以及

将所检索的信息叠覆在透明显示装置上的视图上。

12.根据权利要求11所述的介质，其中确定定向包括确定显示装置所定向的方向并且推断通过透明显示装置可以看见的内容。

13.根据权利要求11所述的介质，其中确定定向包括将来自相机的图像与所确定的定位处的参考图像进行比较，每个参考图像相关联于定向，选择与来自相机的图像相对应的参考图像，并且使用与所选参考图像相关联的定向作为所确定的定向。

14.根据权利要求11所述的介质，其中检索信息包括将包括定位信息的请求发送到远程信息服务并且从远程信息服务接收响应于请求所检索的信息。

15.一种装置，包括：

透明显示装置；

用以确定显示装置的定位的定位系统；

用以确定显示装置的定向的定向系统；以及

计算系统，其用以接收所确定的定位和定向，检索关于通过透明显示装置观看的用户看得见的对象的信息，并且在透明显示装置上将信息叠覆在用户的视图上。

16.根据权利要求15所述的装置，此外包括无线通信接口，其耦合到计算系统以将定位和定向信息发送到远程服务器并且从远程服务器接收关于对象的信息。

17.根据权利要求15所述的装置，此外包括相机，以观察显示装置看得见的真实对象，其中计算系统确定相机所观察的对象中的参考点并且关于参考点来定位所叠覆的信息。

18.根据权利要求15所述的装置，此外包括相机，其被定向在用户通过透明显示装置的视图的方向上以观察用户姿势，并且其中计算系统将所观察的用户姿势解释为命令以控制透明显示装置上信息的呈现。

19.根据权利要求15所述的装置，其中透明显示装置是头戴式的。

20.根据权利要求19所述的装置，其中透明显示装置是以眼镜的形式，其通过眼镜的透镜在用户看得见的地方投影信息。