CN103793473A - 保存增强现实 - Google Patents

保存增强现实 Download PDF

Info

Publication number
CN103793473A
CN103793473A CN201310757228.0A CN201310757228A CN103793473A CN 103793473 A CN103793473 A CN 103793473A CN 201310757228 A CN201310757228 A CN 201310757228A CN 103793473 A CN103793473 A CN 103793473A
Authority
CN
China
Prior art keywords
enhancing
physical space
augmented reality
reality device
view
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310757228.0A
Other languages
English (en)
Inventor
H·蒂耿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Priority to CN201310757228.0A priority Critical patent/CN103793473A/zh
Publication of CN103793473A publication Critical patent/CN103793473A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

保存增强现实包括使用增强现实装置来收集包含对象的物理空间的观测信息,以及使用该增强现实装置来获取与该对象相关联的增强。包含该增强的可视化表示的物理空间的增强视图被该增强现实装置可视化地呈现,并且该增强视图被保存用于后续回放。

Description

保存增强现实
技术领域
本发明涉及增强现实。
背景技术
增强现实装置被配置为在一个物理空间上显示一个或者多个图像以向用户提供该物理空间的增强视图。该物理空间的增强视图可为用户提供关于该物理空间中一个或者多个对象的所需信息。
发明内容
提供这个概要以简单的形式介绍一些选择的概念,这些概念在后面的详细说明中被进一步描述。这个概要并不试图表示所要求主题的关键特征或基本特征,也不试图用于限制所要求主题的范围。此外,所要求主题并不限于解决在本公开任何部分记载的解决任何或全部缺陷的实现方式。
提供了保存增强现实的实施例。在一个示例性实施例中,保存增强现实的方法包括使用增强现实装置来收集包含对象的物理空间的观测信息,并且使用该增强现实装置来获取与该对象关联的增强。包含该增强的可视化表示的物理空间的增强视图可用该增强现实装置可视化地进行呈现,并且该增强视图可被保存以用于后续回放。
附图说明
图1显示了包括一个或者多个对象的示例性物理空间,该物理空间可通过增强现实装置来查看。
图2显示了图1所保存的物理空间的示例性增强视图以用于后续回放。
图3为显示根据本公开的一个实施例的用于保存增强现实的方法的流程图。
图4根据本公开的实施例示意性显示了示例性增强现实装置。
图5示意性显示了一个非限制性的计算系统。
具体实施方式
增强现实装置可向用户呈现物理空间的增强视图。根据这里公开的实施例,呈现给用户的该增强视图可由该增强现实装置保存以用于后面的回放。该增强视图可包括物理空间中对象的增强,比如物理空间中人们的名字。
转向图1,描绘了可通过增强现实装置查看的示例性物理空间100。物理空间100包括多个对象,这些对象包含第一人102和第二人104。此外,物理空间100包括电视106,第一人102和第二人104在该电视机上观看棒球赛。
图2图示了物理空间100的示例性增强视图200。当用户通过增强现实装置(例如,图4的增强现实装置400)来查看物理空间100时,该增强现实装置可被配置为显示被覆盖在该物理空间上的一个或者多个图像。通过这样做,为用户提供该物理空间的增强视图。该增强现实装置可包括透视(see-through)显示器以使得该图像被显示在透视显示器上并且用户通过该透视显示器同时查看该物理空间。在其它实施例中,该增强现实装置可包括标准显示器,该显示器一起显示了该物理空间的图像以及一个或者多个增强图像。关于该增强现实装置的其它信息将在下面关于图4和图5一起进行描述。
物理空间100可用任何合适的一个或多个图像来增强。在一个例子中,可使用在增强视图中可视化表示的信息来标记或者注释物理空间中的对象。作为非限制性示例,在物理空间中的人、物体和事件可用比如名字、数据或其它信息等信息来标记。
如图2所示,增强现实装置已经使用多个被覆盖的图像来增强物理空间100。例如,已经使用指示第一人102名字为Joe的第一增强202来标记第一人102。类似地,已经使用指示第二人104名字为Jane的第二增强204来标记第二人104。已经使用指示该棒球赛为世界联赛的第七场比赛的第三增强206来标记电视106。
可从各种来源获取该增强。该增强现实装置可收集观测信息,比如来自图像传感器的图像信息、来自GPS系统的位置信息、以及来自动作传感器的动作信息。该观测信息可由该增强现实装置或远程服务使用以在物理空间中标识对象。然后可由该远程服务从增强现实装置上存储的索引或从其它装置来获取专用于所标识对象的增强。
可从物理空间内或外的装置上获取增强。例如,可从与特定人员相关联的装置获取增强,比如人员的电脑、电话、增强现实装置等。作为一个例子,使用增强来显示该增强现实的增强现实装置可与第一人102的装置进行通信以接收第一增强202。作为另一例子,也可从不与特定人员相关联的装置获取增强。例如,电视106可向使用增强来显示该增强现实的该增强显示装置发送第三增强206。作为又一例子,该增强现实装置可从远程服务获取增强。例如,第一人102可向社交网站张贴消息,并且该增强现实装置可被配置为获取该消息以作为第三增强206来使用。
第一增强202、第二增强204以及第三增强206在图2中可视化地表示为包含文本信息的调出泡。然而,增强的任何可视化表示处于本公开的范围内。例如,该增强可包含图画、符号、动画、电影、音频或任何其它合适的增强的表示。此外,该物理空间可使用比如其它对象、人员等的图像的增强而被增强。
可捕捉该物理空间的增强视图以形成被保存的增强视图用于后续回放。在图示的示例中,所保存的增强视图包括物理空间100、第一增强202、第二增强204以及第三增强206的可视化表示,用户通过该增强现实装置来查看可视化表示。第一增强202、第二增强204以及第三增强206可被捕捉以使得出现在物理空间100中与当通过该增强现实装置查看时这些增强出现的位置相同和/或相似的位置处。
可以各种不同的格式保存增强视图而不脱离本公开的范围。作为非限制性示例,增强视图可作为数字图像、数字电影、三维重建和/或其它机器可读的增强视图的表示来保存。
图3图示了根据本公开的实施例的保存增强现实的方法300。方法300可由增强现实装置来执行,比如下面参考图4描述的HMD装置或者参考图5描述的计算系统。
在302,方法300包括收集包含对象的物理空间的观测信息。观测信息可包括图像信息、音频信息、位置信息和/或关于物理空间的其它信息。观测信息可从耦合至增强现实装置的传感器来收集。例如,观测信息可由一个或者多个彩色图像传感器、深度相机、麦克风、指南针、动作传感器以及GPS系统来收集。
在304,标识了物理空间中的对象。如在306所示,该对象可由增强现实装置从观测信息来标识。例如,增强现实装置可被配置为使用观测信息执行情景分析、人脸识别、和/或其它识别机制以标识物理空间中的对象。在一些实施例中,标识对象可包括在308发送观测信息至远程服务以及从该远程服务接收对象标识。在其它实施例中,标识对象可包括在310从对象接收对象的标识。从对象接收对象的标识包括从与对象相关联的装置接收标识。例如,该对象可为人,并且可从属于此人的计算装置来接收该对象的标识。
在312,方法300包括获取与该对象相关联的增强。增强可包括与该对象相关的信息,比如人的名字。增强现实装置可响应于对象的标识而自动获取该增强。然而,在其它实施例中,可响应于用户的请求,如:用户发出的语音命令或对输入装置的输入,来获取增强。
在一个实施例中,可在314从对象来接收增强。如上述图2所解释的,该对象可具有与它相关联的计算装置,或者该对象可为计算装置,并且该计算装置可将增强发送至该增强现实装置。在另一实施例中,在316可从物理空间中的第二对象来接收增强。如上所述,属于物理空间中的一个人的装置可将关于另一对象(例如,在图2的例子中出现在电视上的棒球赛)的增强发送至该增强现实装置。
在一些实施例中,可从诸如增强索引等对增强现实装置而言本地的存储位置取回增强,如在318所示。例如,该增强现实装置可存储信息,该信息为用户输入或从远程服务接收、与一个或者多个先前标识的对象相关,并且然后该增强现实装置在对象的后续标识时取回信息。在其它实施例中,可从远程服务接收增强,如在320处所示。从远程服务接收增强可包括将观测信息发送给该远程服务并且从该远程服务接收对象标识和增强,或者它可包括将请求发送给远程服务以请求与已经标识的对象相关的增强。
在322,包括增强可视化表示的物理空间的增强视图向增强现实装置的用户可视化地呈现。呈现增强视图可包括在透视显示器上显示该增强的可视化表示。当用户透过该透视显示器查看时,该增强的可视化表示可被显示在透视显示器上以使得该增强被覆盖在与其关联的对象上,或在与其管线的对象附近。在其它实施例中,呈现增强视图可包括将该增强的可视化表示和物理空间的图像发送给普通显示器以被一起显示。
在324,该增强视图被保存以用于后续的回放。所保存的增强视图可包括增强的静态照片、增强视频、增强音频、和/或其它形式可被保存以用于稍后查看的增强媒体。该增强视图可响应于保存该增强视图的用户的请求或其它指示来保存和/或该增强视图可被被自动保存。
保存增强视图可包括使用一个或者多个向外的图像感应器(例如,可视化光照相机)来捕捉该物理空间的图像并且几乎同时,保存正在显示的增强的可视化表示。然后该增强的可视化表示可被覆盖在所捕捉的物理空间的图像上以形成被保存的增强视图。保存增强视图的其它机制也在本公开的范围内。例如,增强和物理空间的可视化表示可一起被捕捉(尤其是如果它们一起出现在共同的显示器上)而不用分开捕捉。图4显示了头戴式透视显示器(HMD)装置400的示例性实施例,其为可用于保存供稍后回放的增强视图的增强现实装置的例子。HMD装置400采用可佩戴眼镜的形式。在一些实施例中,该HMD装置可有其它恰当的形式,在其中在观察者一只或两只眼睛前方支撑透视显示器系统。在另外的实施例中,该增强现实装置不包括透视显示器,而改为采用照相机、移动电话或其它装置的形式。
HMD装置400包括各种传感器和输出装置。例如,如所显示的,HMD装置400包括配置用于将图像传递给用户眼睛的透视显示子系统402。作为一个非限制性例子,显示子系统402可包括位于镜片404中的图像生成组件(例如,透视OLED显示器)。作为另一例子,该显示子系统可包括在镜片边缘上的光调制器,并且该镜片可作为用于将光从该光调制器传递给用户眼睛的光波导。由于镜片404为至少部分透明,光可穿过镜片到达用户的眼睛,因此允许该用户透过镜片来查看。
HMD装置400还包括一个或者多个图像传感器。例如,HMD装置400可包括至少一个向内传感器406和/或至少一个向外传感器408。向内传感器406可为眼睛跟踪传感器,其被配置为获取图像数据以允许跟踪观察者的眼睛。
向外传感器408可包括深度照相机、可见光照相机、红外线照相机和/或另一定位跟踪照相机。此外,这个向外照相机可具有立体配置。例如,该HMD装置可包括两个深度照相机以从用户视角的两个不同角度立体地观察该物理空间。此外,向外图像传感器408可捕捉物理空间的图像,其可被提供来作为对3D建模系统的输入。通过使用向外图像传感器408来观察该物理空间,HMD装置400和/或合作远程服务能标识物理空间中的一个或者多个对象。
如上所述,这样的系统可被用于生成物理空间的3D模型。在一些实施例中,该HMD装置可包括红外投影仪以协助结构光和/或飞行时间深度分析。例如,该HMD装置可包括不止一个的传感器系统以生成物理空间的3D模型。在一些实施例中,该HMD装置可包括通过深度照相机的深度传感,以及通过包括可见光和/或红外成像能力的图像传感器的光成像。
HMD装置400还可包括一个或者多个动作传感器410以在观察者佩戴HMD装置时检测观察者头部的动作。例如,动作传感器410可输出动作数据以跟踪观察者头部动作和眼睛方向。这样,动作数据可促进检测用户头部沿着滚轴、纵摇轴和/或偏航轴的倾斜(例如,方向信息)。此外,动作传感器410可允许对该HMD装置的位置跟踪以确定该HMD装置在物理空间中的位置。同样地,动作传感器410也可被用作用户输入装置,以使得用户可通过颈部和头部甚至身体的姿势来与该HMD装置交互。动作传感器的非限制性例子包括加速度计、陀螺仪、指南针以及方向传感器,其可作为这些的任意组合或子组合来被包括。此外,该HMD装置可被配置具有全球定位(GPS)能力。
该HMD装置还可包括一个或者多个麦克风412以允许使用语音命令作为用户输入。此外或可替换地,与HMD装置分开的一个或者多个麦克风可被用于检测观察者的语音命令。例如,从麦克风412接收的输入可被用于标识通过该HMD装置查看的物理空间中人的语音。然后语音识别可被用于标识此人以获取与此人相关的增强。在另一例子中,来自麦克风412的输入可被用于标识其它声音,比如歌曲的标识。可以理解的是图4中所示的传感器作为示例显示并且因此并不试图以任何方式作为限制,因为任何其它合适的传感器和/或传感器的组合可被使用。例如,在该HMD装置中也可包括惯性测量单元以确定该观察者的观察点以便于增强在透视显示器上的放置。
该HMD装置还包括具有逻辑子系统和存储子系统的与该HMD装置的各种输入和输出装置通信的控制器414,输入和输出装置的例子将相对于图5在下面更加详细地论述。简要地,该存储子系统可包括可由逻辑子系统执行的指令,例如从传感器中接收并处理输入,以及通过通信子系统可选地将这些输入发送给远程计算系统(以未处理或已处理形式),以及通过透视显示子系统402来将图像呈现给观察者。可通过HMD装置上的一个或者多个扬声器、或通过物理空间中的另一音频输出提供音频。
可以领会的是作为示例来提供该HMD装置,因此并不意味着限制。因此可以理解的是该HMD可包括不同于所显示的其它和/或备选的传感器、照相机、麦克风、输入装置、输出装置等而不脱离本公开的范围。此外,HMD装置和它的各种传感器和子组件的物理配置可采用各种不同的形式而不脱离本公开的范围。
在一些实施例中,上面描述的方法和过程可被绑定至一个或者多个计算装置的计算系统。具体地,这些方法和过程可被实现为计算机应用程序或服务、应用程序编程接口(API)、库、和/或其它计算机程序产品。
图5示意性地显示了计算系统500的非限制性实施例,计算系统500能进行上述的一个或者多个方法和过程。计算系统500可表示HMD装置400、与HMD装置400分开但通信地与该HMD装置耦合的计算系统(比如如上参考图3所述的远程服务)、被配置以显示物理空间的增强视图的移动计算系统和/或任何其它恰当的计算系统。计算系统500以简化形式来显示。可以理解的是可使用基本上任何计算机架构而不脱离本公开的范围。在不同的实施例中,计算系统500可采用增强现实装置、大型机、服务器计算机、台式计算机、膝上型计算机、平板计算机、家庭娱乐计算机、网络计算装置、游戏装置、移动计算装置、移动通信装置(例如,智能电话等)的形式。
计算系统500包括逻辑子系统502和存储子系统504。计算系统500可选择地包括显示子系统506、输入装置子系统512、通信子系统508、增强引擎514、捕捉引擎516和/或其它图5中未示的组件。例如,计算系统500还可选择地包括一个或者多个用户输入装置,比如键盘、鼠标、游戏控制器、照相机、麦克风和/或触摸屏,或与这样的用户输入装置接口。这样的用户输入装置可形成输入装置子系统512的一部分或者可与输入装置子系统512接口。
逻辑子系统502包括被配置以执行指令的一个或者多个物理装置。例如,该逻辑子系统可被配置为执行作为一个或者多个应用程序、服务、程序、例程、库、对象、组件、数据结构或其它逻辑构造中一部分的指令。这些指令可被实现来执行任务、实现数据类型、转移一个或者多个组件的状态或者以其它方式得到期望的结果。
逻辑子系统可包括一个或者多个被配置以执行软件指令的处理器。此外或可替换地,该逻辑子系统可包括一个或者多个被配置以执行硬件或固件指令的硬件或固件逻辑机器。逻辑子系统的处理器可为单核或多核的,并且在其上执行的程序可被配置用于串行、并行或分布式处理。逻辑子系统可选地包括分布在两个或多个装置之间的各个组件,这些装置可位于远程和/或被配置用于协作处理。逻辑子系统的各方面可被虚拟化并且由配置在云计算配置中的远程可访问网络计算装置来执行。
存储子系统504包括一个或者多个物理的、非瞬时的装置,这些装置被配置以保存可由逻辑子系统执行以实现这里描述的方法和过程的数据和/或指令。当实现这些方法和过程时,存储子系统504的状态可被转移——例如来保存不同的数据。
存储子系统504可以包括可移动介质和/或内置装置。存储子系统504可包括光学存储装置(例如,CD、DVD、HD-DVD、蓝光盘等)、半导体存储器装置(例如,RAM、EPROM、EEPROM等)和/或磁性存储装置(例如,硬盘驱动器、软盘驱动器、磁带驱动器、MRAM等)等等。存储子系统504可包括易失性、非易失性、动态、静态、读/写、只读、随机存取、顺序存取、位置可寻址、文件可寻址、和/或内容可寻址装置。在某些实施例中,可将逻辑子系统502和存储子系统504集成到一个或多个单一装置中,诸如应用程序专用的集成电路(ASIC)或片上系统。
应理解,存储子系统504包括一个或多个物理、非瞬时装置。然而,在一些实施例中,在此描述的指令的各方面可以按瞬态方式通过不由物理装置在至少有限持续时间期间保存的纯信号(例如电磁信号、光信号等)传播。此外,与本公开有关的数据和/或其它形式的信息可以通过纯信号来传播。
在一些实施例中,逻辑子系统502和存储子系统504的各方面可以被一起集成到一个或多个硬件-逻辑组件中,通过所述组件来执行在此所述的功能。这样的硬件逻辑组件可包括:例如,现场可编程门阵列(FPGA)、程序和应用专用集成电路(PASIC/ASIC)、程序和应用专用标准产品(PSSP/ASSP)、片上系统(SOC)系统以及复杂可编程逻辑装置(CPLD)。
术语“模块”、“程序”和“引擎”可用于描述被实现为执行一个特定功能的计算系统500的一方面。在某些情况下,可以通过执行由存储子系统504所保存的指令的逻辑子系统502来实例化这样的模块、程序或引擎。应当理解,可以从同一应用、服务、代码块、对象、库、例程、API、函数等来实例化不同的模块、程序和/或引擎。类似地,相同的模块、程序和/或引擎可由不同的应用、服务、代码块、对象、例程、API、功能等来实例化。术语“模块”、“程序”和“引擎”意在涵盖单个或成组的可执行文件、数据文件、库、驱动程序、脚本、数据库记录等。
应该理解,在此使用的“服务”是跨多个用户会话可执行的应用程序。服务可用于一个或多个系统组件、程序和/或其它服务。在某些实现中,服务可以在一个或多个服务器计算装置上运行。
在被包括时,显示子系统506可用于呈现由存储子系统504保存的数据的视觉表示。该视觉表示可采取图形用户界面(GUI)的形式。由于此处所描述的方法和过程改变了由存储子系统保存的数据,并由此转移了存储子系统的状态,因此同样可以转移显示子系统506的状态以在视觉上表示底层数据的改变。显示子系统506可以包括使用基本上任何类型的技术的一个或多个显示装置。这样的显示装置可与逻辑子系统502和/或存储子系统504一起组合在共享封装中,或者这样的显示装置可以是外围显示装置。
在被包括时,输入装置子系统512可以包括诸如键盘、鼠标、触摸屏或游戏控制器之类的一个或多个用户输入装置或者与其接口。在某些实施例中,输入装置子系统可以包括所选的自然用户输入(NUI)部件或与其接口。这样的部件可以是集成式的或者是外围的,并且输入动作的转换和/或处理可以在板上处理或离板处理。NUI部件的示例可包括用于语言和/或语音识别的麦克风;用于机器视觉和/或姿势识别的红外、彩色、立体和/或深度照相机;用于运动检测和/或意图识别的头部跟踪器、眼睛跟踪器、加速计和/或陀螺仪;以及用于评估脑部活动的电场感测部件。
当被包括时,通信子系统508可以被配置成将计算系统500与一个或多个其他计算装置通信地耦合。通信子系统508可包括与一个或多个不同的通信协议兼容的有线和/或无线通信装置。作为非限制性示例,通信子系统可被配置成用于经由无线电话网络或者有线或无线局域网或广域网来进行通信。在一些实施例中,通信子系统可允许计算系统500经由网络(比如因特网)向其它装置发送消息和/或从其它装置接收消息。
传感器子系统510可包括被配置成感测不同的物理现象(例如,可见光、红外光、声音、加速度、定向、位置等)的一个或多个传感器,如上所述。例如,传感器子系统510可以包括一个或多个图像传感器、诸如加速度计之类的动作传感器、触摸板、触摸屏、惯性测量单元和/或任何其它合适的传感器。因此,传感器子系统510例如可以被配置为向逻辑子系统502提供观测信息。如上所述,诸如图像数据、动作传感器数据和/或任何其它合适的传感器数据的观测信息可以用于执行这样的任务,比如确定一个或多个人类主体所表现的特定姿势。
在一些实施例中,传感器子系统510可包括深度照相机(例如图4的传感器408)。深度照相机可包括例如立体视觉系统的左和右照相机。来自两个照相机的时间解析的图像可被相互配准并可被组合来产生深度解析的视频。
在其它实施例中,深度照相机可以是结构化光深度照相机,其被配置成投影包括多个离散的特征(例如,线或点)的结构化红外照明。深度照相机可被配置成对从结构化照明被投影到其之上的场景中反射的结构化照明进行成像。基于所成像的场景的各个区域内邻近特征之间的间隔,可构造该场景的深度图像。
在其它实施例中,深度照相机可以是飞行时间照相机,其被配置成将脉冲的红外照明投影到该场景上。深度照相机可包括两个照相机,这两个被配置成检测从场景反射的脉冲照明。这两个照相机均可包括与脉冲照明同步的电子快门,但用于这两个照相机的集成时间可不同,使得脉冲照明的从源到场景再接着到这两个照相机的像素解析的飞行时间可从在两个照相机的相应的像素中接收到的相对光的量中辨别。
在一些实施例中,传感器子系统510可包括可见光照相机。可以使用基本上任何类型的数字照相机技术而不背离本公开的范围。作为非限制的示例,可见光照相机可包括电荷耦合装置图像传感器。
当被包括时,增强引擎514可被配置成获取与所标识的对象相关联的一个或多个增强。增强引擎514可包括索引或其它系统来存储先前接收到的增强。替换地或另外地,增强引擎514可经由通信子系统508将一请求发送给外部装置,诸如远程服务,来接收与所标识的对象相关的增强。增强引擎514然后可向显示子系统506发送增强的可视表示。
当被包括时,捕捉引擎516可被配置成保存物理空间的增强视图,该增强视图包括一个或多个增强的可视表示。捕捉引擎516可接收包括来自一个或多个图像传感器的反馈和/或去往或来自显示子系统506的反馈的多个图像反馈。捕捉引擎516可保存反馈,并将其汇编到已保存的增强视图中。替换地或另外地,捕捉引擎516可被配置成捕捉发送给显示子系统506的增强视图的图像。捕捉引擎516可将增强视图保存为静态图像(例如,照片)或运动图片(例如,视频)。
应该理解,此处所述的配置和/或方法在本质上示例性的,且这些具体实施例或示例不是局限性的,因为众多变体是可能。此处所述的具体例程或方法可表示任何数量的处理策略中的一个或多个。由此,所示出和/或描述的各个动作可以按所示出和/或描述的顺序、按其他顺序、并行执行或者被忽略。同样,可以改变上述过程的次序。
本公开的主题包括各种过程、系统和配置、此处所公开的其它特征、功能、动作、和/或特性、以及其任何和全部等效物的所有新颖和非显而易见的组合和子组合。

Claims (10)

1.一种用于保存增强现实的方法,包括:
使用增强现实装置收集(302)包含对象的物理空间的观测信息;
使用所述增强现实装置获取(312)与所述对象相关联的增强;
使用所述增强现实装置可视化地呈现(322)所述物理空间的增强视图,所述增强视图包括所述增强的可视化表示;以及
为后续回放保存(324)所述增强视图。
2.根据权利要求1的方法,其特征在于,获取所述增强还包括从所述对象接收所述增强。
3.根据权利要求1的方法,其特征在于,所述对象为第一对象,并且其中获取所述增强还包括从所述物理空间中的第二对象接收所述增强。
4.根据权利要求1的方法,其特征在于,获取所述增强还包括基于所述观测信息标识所述对象以及从所述增强现实装置上存储的增强索引接收所述增强。
5.根据权利要求1的方法,其特征在于,获取所述增强还包含基于所述观测信息来标识所述对象以及从远程服务接收所述增强。
6.根据权利要求1的方法,其特征在于,获取所述增强还包括将所述观测信息发送给远程服务,并从所述远程服务接收所述增强。
7.根据权利要求1的方法,其特征在于,所述对象是人,并且其中所述增强是指示了所述人的身份的文本信息。
8.根据权利要求1的方法,其特征在于,所述观测信息包含所述物理空间的图像信息、音频信息、以及位置信息。
9.根据权利要求7的方法,其特征在于,所述观测信息由一个或者多个向外图像传感器、动作传感器、麦克风、指南针以及GPS来收集。
10.一种增强现实装置(500),包含:
对物理空间成像的一个或者多个照相机(510);
获取所述物理空间中被标识的对象的增强的增强引擎(514),所述增强包含与所标识的对象相关的信息;
呈现所述物理空间的增强视图的显示器(506),所述增强视图包含所述增强的可视化表示;以及
保存所述增强视图用于后续回放的捕捉引擎(516)。
CN201310757228.0A 2013-12-17 2013-12-17 保存增强现实 Pending CN103793473A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310757228.0A CN103793473A (zh) 2013-12-17 2013-12-17 保存增强现实

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310757228.0A CN103793473A (zh) 2013-12-17 2013-12-17 保存增强现实

Publications (1)

Publication Number Publication Date
CN103793473A true CN103793473A (zh) 2014-05-14

Family

ID=50669139

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310757228.0A Pending CN103793473A (zh) 2013-12-17 2013-12-17 保存增强现实

Country Status (1)

Country Link
CN (1) CN103793473A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106557159A (zh) * 2015-09-28 2017-04-05 迪尔公司 用于作业机械的虚拟平视显示应用
CN107735827A (zh) * 2015-06-30 2018-02-23 汤姆逊许可公司 使用具有物理对象的增强现实以改变用户状态的方法和装置
WO2018036408A1 (zh) * 2016-08-24 2018-03-01 丰唐物联技术(深圳)有限公司 一种基于增强现实的交互方法及系统
CN108564661A (zh) * 2018-01-08 2018-09-21 佛山市超体软件科技有限公司 一种基于增强现实场景的记录方法
CN109089150A (zh) * 2018-09-26 2018-12-25 联想(北京)有限公司 图像处理方法及电子设备
CN110199525A (zh) * 2017-01-18 2019-09-03 Pcms控股公司 用于选择场景以在增强现实界面中浏览历史记录的系统和方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060256110A1 (en) * 2005-05-11 2006-11-16 Yasuhiro Okuno Virtual reality presentation apparatus, virtual reality presentation method, program, image processing method, image processing apparatus, information processing method, and information processing apparatus
CN101243392A (zh) * 2005-08-15 2008-08-13 皇家飞利浦电子股份有限公司 用于终端用户编程的增强现实眼镜的系统、设备和方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060256110A1 (en) * 2005-05-11 2006-11-16 Yasuhiro Okuno Virtual reality presentation apparatus, virtual reality presentation method, program, image processing method, image processing apparatus, information processing method, and information processing apparatus
CN101243392A (zh) * 2005-08-15 2008-08-13 皇家飞利浦电子股份有限公司 用于终端用户编程的增强现实眼镜的系统、设备和方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107735827A (zh) * 2015-06-30 2018-02-23 汤姆逊许可公司 使用具有物理对象的增强现实以改变用户状态的方法和装置
CN106557159A (zh) * 2015-09-28 2017-04-05 迪尔公司 用于作业机械的虚拟平视显示应用
WO2018036408A1 (zh) * 2016-08-24 2018-03-01 丰唐物联技术(深圳)有限公司 一种基于增强现实的交互方法及系统
CN110199525A (zh) * 2017-01-18 2019-09-03 Pcms控股公司 用于选择场景以在增强现实界面中浏览历史记录的系统和方法
CN110199525B (zh) * 2017-01-18 2021-12-14 Pcms控股公司 用于在增强现实界面中浏览历史记录的系统和方法
US11663751B2 (en) 2017-01-18 2023-05-30 Interdigital Vc Holdings, Inc. System and method for selecting scenes for browsing histories in augmented reality interfaces
CN108564661A (zh) * 2018-01-08 2018-09-21 佛山市超体软件科技有限公司 一种基于增强现实场景的记录方法
CN108564661B (zh) * 2018-01-08 2022-06-28 佛山市超体软件科技有限公司 一种基于增强现实场景的记录方法
CN109089150A (zh) * 2018-09-26 2018-12-25 联想(北京)有限公司 图像处理方法及电子设备
CN109089150B (zh) * 2018-09-26 2021-07-16 联想(北京)有限公司 图像处理方法及电子设备

Similar Documents

Publication Publication Date Title
US10685496B2 (en) Saving augmented realities
US11127210B2 (en) Touch and social cues as inputs into a computer
US9836889B2 (en) Executable virtual objects associated with real objects
US9430038B2 (en) World-locked display quality feedback
US9390561B2 (en) Personal holographic billboard
US9030495B2 (en) Augmented reality help
CN105050670B (zh) 混合现实体验共享
CN106255943B (zh) 身体锁定增强现实与世界锁定增强现实之间的转换
US20130174213A1 (en) Implicit sharing and privacy control through physical behaviors using sensor-rich devices
US20130141434A1 (en) Virtual light in augmented reality
US11417052B2 (en) Generating ground truth datasets for virtual reality experiences
CN103793473A (zh) 保存增强现实
CN105324811A (zh) 语音到文本转换
CN105074623A (zh) 在增强的现实图像中呈现对象模型
CN105359082A (zh) 用户接口导航
WO2018087462A1 (fr) Dispositif individuel d'immersion visuelle pour personne en mouvement avec gestion des obstacles
EP2887639A1 (en) Augmented reality information detail
EP2887231A1 (en) Saving augmented realities
Crijns et al. AUGMENTED REALITY FOR

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150727

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150727

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140514