CN105051648B - 混合现实过滤 - Google Patents

混合现实过滤 Download PDF

Info

Publication number
CN105051648B
CN105051648B CN201480005607.7A CN201480005607A CN105051648B CN 105051648 B CN105051648 B CN 105051648B CN 201480005607 A CN201480005607 A CN 201480005607A CN 105051648 B CN105051648 B CN 105051648B
Authority
CN
China
Prior art keywords
data item
mixed reality
geolocation data
item
filtration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480005607.7A
Other languages
English (en)
Other versions
CN105051648A (zh
Inventor
P·T·金内布鲁
N·卡姆达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN105051648A publication Critical patent/CN105051648A/zh
Application granted granted Critical
Publication of CN105051648B publication Critical patent/CN105051648B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/006Mixed reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/44Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/904Browsing; Visualisation therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

公开了与选择性过滤混合现实环境中的地理定位数据项有关的实施例。例如,在所公开的一个实施例中,混合现实过滤程序接收多个地理定位数据项并且基于一个或多个模式选择性地过滤数据项。模式包括社交模式、流行模式、新近模式、工作模式、游玩模式以及用户兴趣模式中的一个或多个。此类过滤产生地理定位数据项的经过滤收集。随后向混合现实显示程序提供数据项的经过滤收集以供显示设备显示。

Description

混合现实过滤
背景
增强或混合现实设备可在各种现实世界环境和情景中使用。此类设备可向用户提供围绕用户的物理世界的实时视图,并可用全息对象和其他虚拟现实信息来增强该视图。
大量虚拟现实信息可用于向用户呈现。此信息中的一部分可与可在该用户视野内的特定位置相关联。在有如此多的虚拟现实信息可用的情况下,管理此信息向用户的呈现以及用户与此类信息的交互可被证明是充满挑战的。呈现过多虚拟现实信息可使用户对混合现实环境的体验混乱并使用户难以忍受,从而使得信息难以处理。此外,在一些情况下,用户可能仅对查看可用虚拟现实信息总量的一小部分感兴趣。此外,即便呈现可用虚拟现实信息的更小部分,呈现的信息量和呈现方式可能仍旧导致低于期望的用户体验。
概述
本文公开了涉及经由显示设备在混合现实环境中呈现经地理定位的数据项的经过滤收集(collection)的各实施例。例如,所公开的一个实施例提供了一种用于在混合现实环境中选择性地过滤多个地理定位的数据项的方法,该多个地理定位数据项包括地理定位全息项和其他地理定位数据项。该方法包括接收所述多个地理定位数据项并基于一个或多个模式来选择性地过滤数据项。模式包括社交模式、流行模式、新近模式、工作模式、游玩模式以及用户兴趣模式。此类过滤产生地理定位数据项的经过滤收集。数据项的经过滤收集随后被提供给混合现实显示器程序以供显示设备显示。
提供本概述是为了以精简的形式介绍将在以下详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征,也不旨在用于限制所要求保护主题的范围。此外,所要求保护的主题不限于解决在本公开的任一部分中所提及的任何或所有缺点的实现。
附图简述
图1是根据本公开的一实施例的混合现实过滤系统的示意图。
图2示出根据本公开的一实施例的示例头戴式显示设备。
图3是根据本公开的一实施例的两个用户佩戴图2的头戴式显示设备并查看示例混合现实环境的示意图。
图4是描绘透过头戴式显示设备看到的数据项密度的星场(starfield)的示意图。
图5是由用户透过头戴式显示设备看到的图3的混合现实环境内显示的数据项星场的示意图。
图6A和6B是根据本公开的一实施例的用于选择性过滤多个地理定位数据项的方法的流程图。
图7是计算设备的一实施例的简化示意图解。
详细描述
图1示出混合现实过滤系统10的一个实施例的示意图。混合现实过滤系统10包括可被存储在计算设备22的大容量存储18中的混合现实过滤程序14。混合现实过滤程序14可被加载到存储器26中并由计算设备22的处理器30执行以执行下文更为详细地描述的方法和过程中的一个或多个。
混合现实过滤系统10包括混合现实显示程序32,该混合现实显示程序32可生成用于在显示设备(诸如头戴式显示器(HMD)设备36)上显示的虚拟环境34以创建混合现实环境38。虚拟环境34包括多个地理定位的数据项40。此类数据项40可包括一个或多个虚拟图像(诸如地理定位的三维全息项42)和其他地理定位数据项44(诸如地理定位的二维虚拟对象)。
在一个示例中,并且如在下面更详细地描述的,一个或多个地理定位的数据项40’可由计算设备22经由网络46从地理定位的内容信道48接收。在另一示例中,一个或多个地理定位的数据项40”可由位于创作服务器52上的创作应用50生成。此类地理定位的数据项42”可由计算设备22经由网络46接收。
计算设备22可采用以下形式:台式计算机,诸如智能电话、膝上型计算机、笔记本或平板计算机之类的移动计算设备,网络计算机,家庭娱乐计算机,交互式电视,游戏系统,或其他合适类型的计算设备。关于计算设备22的组件和计算方面的附加细节在下文中参考图7更详细地描述。
计算设备22可使用有线连接来与HMD设备36在操作上连接,或可采用经由WiFi、蓝牙或任何其他合适的无线通信协议的无线连接。另外,图1中示出的示例将计算设备22示为与HMD设备36分开的组件。将理解,在其他示例中,计算设备22可被集成到HMD设备36中。
现在还参考图2,提供了一副具有透明显示器54的可配戴眼镜形式的HMD设备200的示例。将明白,在其他示例中,HMD设备200可以采取其他合适的形式,其中透明、半透明或不透明显示器被支撑在查看者的一只或两只眼睛前方。还将明白,图1中所示的HMD设备36可以采取HMD设备200的形式(如在下文更详细地描述的)或任何其他合适的HMD设备。另外,在本公开的范围内还可使用具有各种形状因子的许多其他类型和配置的显示设备。此类显示设备可包括但不限于手持式智能电话、平板计算机以及其他适当的显示设备。
参考图1和2,在这一示例中,HMD设备36包括显示系统56和使图像(诸如全息对象)能够被递送到用户62的眼睛的透明显示器54。透明显示器54可被配置成向透过该透明显示器查看物理环境的用户62在视觉上增强该物理环境的外观。例如,物理环境的外观可以由经由透明显示器54呈现的图形内容(例如,一个或多个像素,每一像素具有相应色彩和亮度)来增强以创建混合现实环境38。
透明显示器54还可被配置成使用户能够透过显示虚拟对象表示的一个或多个部分透明的像素来查看物理环境中的物理现实世界对象。在一个示例中,透明显示器54可包括位于透镜204内的图像生成元件(诸如例如透视有机发光二极管(OLED)显示器)。作为另一示例,透明显示器54可包括在透镜204边缘上的光调制器。在这一示例中,透镜204可以担当光导以供将光从光调制器递送到用户的眼睛。这样的光导可以使用户能够感觉3D全息图像位于用户正在查看的物理环境内,同时还允许用户查看物理环境中的物理对象。
HMD设备36还可包括各种传感器和相关系统。例如,HMD设备36可包括利用至少一个面向内的传感器216的眼睛跟踪传感器系统58。该面向内的传感器216可以是被配置成从用户的眼睛获取眼睛跟踪信息形式的图像数据的图像传感器。假定用户已同意获取和使用这一信息,眼睛跟踪传感器系统58可以使用这一信息来跟踪用户的眼睛的位置和/或运动。
HMD设备36还可包括从物理环境接收物理环境数据的传感器系统。例如,HMD设备36可包括利用至少一个面向外的传感器212(如光学传感器)的光学传感器系统60。面向外的传感器212可以检测其视野内的运动,如视野内的用户62或人或物理对象所执行的基于姿势的输入或其他运动。面向外的传感器212还可从物理环境和该环境内的物理对象捕捉二维图像信息和深度信息。例如,面向外的传感器212可包括深度相机、可见光相机、红外光相机,和/或位置跟踪相机。
HMD设备36可包括经由一个或多个深度相机的深度感测。在一个示例中,每一深度相机可包括立体视觉系统的左相机和右相机。来自这些深度相机中的一个或多个的时间分辨的图像可被彼此配准和/或与来自另一光学传感器(如可见光谱相机)的图像配准,且可被组合以产生深度分辨的视频。
在其他示例中,结构化光深度相机可被配置成投影结构化红外照明,并且对从该照明被投影到的场景反射的照明成像。基于所成像的场景的各个区域内邻近特征之间的间隔,可构造该场景的深度图。在其他示例中,深度相机可以采取飞行时间深度相机的形式,其被配置成将脉冲的红外照明投影到该场景上以及检测从该场景反射的照明。应该领会,在本公开的范围内,可以使用任何其他合适的深度相机。
面向外的传感器212可以捕捉用户62位于其中的物理环境的图像。在一个示例中,混合现实显示程序32可包括使用这样的输入来生成对围绕该用户的物理环境进行建模的虚拟环境34的3D建模系统。
HMD设备36还可包括利用一个或多个运动传感器224来启用该HMD设备的位置跟踪和/或定向感测的位置传感器系统64。例如,位置传感器系统64可被用来确定用户的头部的头部姿态取向。在一个示例中,位置传感器系统64可包括配置成六轴或六自由度的位置传感器系统的惯性测量单元。这一示例位置传感器系统可以例如包括用于指示或测量HMD设备36在三维空间内沿三个正交轴(例如,x、y、z)的位置变化以及该HMD设备绕三个正交轴(例如,翻滚、俯仰、偏航)的取向变化的三个加速度计和三个陀螺仪。
位置传感器系统64还可以支持其他合适的定位技术,如GPS或其他全球导航系统。而且,尽管描述了位置传感器系统的具体示例,但将明白,可以使用其他合适的位置传感器系统。
在一些示例中,运动传感器224还可以被用作用户输入设备,使得用户可以经由颈部和头部或者甚至身体的姿势来与HMD设备36交互。HMD设备36还可包括包含一个或多个话筒220的话筒系统66。在其他示例中,音频可经由HMD设备36上的一个或多个扬声器228被呈现给用户。
HMD设备36还可包括处理器230,该处理器230具有与HMD设备的各传感器和系统通信的逻辑子系统和存储子系统,如在下文参考图7更详细地讨论的。在一个示例中,存储子系统可包括可由逻辑子系统执行的指令,用以接收来自传感器的信号输入并将此类输入转发给计算设备22(以未经处理或经处理的形式)并且经由透明显示器54向用户呈现图像。
要领会,通过示例来提供HMD设备36和相关传感器以及上面描述的并在图1和2中解说的其他组件。这些示例不旨在以任何方式进行限制,因为任何其他合适的传感器、组件,和/或传感器和组件的组合可被使用。因此,将理解,HMD设备36可以包括未偏离本公开文本范畴的附加和/或替代的传感器、相机、话筒、输入设备、输出设备等。此外,HMD设备36的物理配置及其各种传感器和子组件可以采取不偏离本公开文本范畴的各种不同形式。
现在参考图3、4和5,现在将提供混合现实过滤系统10的示例使用情况和实施例的描述。图3是用户62佩戴HMD设备36并透过该设备查看城市十字路口形式的物理环境302的示意图。在此示例中,HMD设备36采取HMD设备200的形式。
如由用户62所看到的,并且也参考图1,虚拟环境34与物理环境302相组合以创建混合现实环境38。混合现实环境38包括与物理环境302内的特定位置相关联的地理定位数据项40。在此示例中并且参考图3,此类地理定位数据项40包括全息向导306、推荐图标310和314、社交网络帖子318、顾客评论322、相片326、流行度图标330以及警告图标334。
如下面更详细地解释的,多个附加地理定位数据项40也可与物理环境302内的位置相关联。在各示例中,此类附加地理定位数据项40的数量可以有数十、数百、数千或更多。在存在大量附加地理定位数据项40的情况下,将领会,显示所有这些数据项可能使用户62难以忍受、使信息难以处理和/或创建使用户对物理环境302的感知降级的不期望的视觉混乱。有利地,并且如下面更详细地解释的,本公开的混合现实过滤系统10创建使用户能够轻易地在与该用户相关的数据项中定位并导航的地理定位数据项的经过滤收集,由此提供改善的用户体验。
在一个示例中,混合现实过滤程序14被配置成基于一个或多个模式72选择性地过滤多个地理定位数据项40以产生地理定位数据项的经过滤收集68。经过滤收集68随后可被提供给混合现实显示程序32以供HMD设备36显示。在一个示例中,混合现实过滤程序14可利用社交模式,该社交模式过滤该多个地理定位数据项40以产生与用户62的朋友、家庭成员或其他社交熟人相关联的那些数据项。
参考图3,在一个示例中,用户62的第一朋友370可能以前访问了酒吧间350并留下了与该酒吧间相关联的推荐图标314以指示该朋友对该酒吧间的赞赏。用户62的第二朋友374可能已经在食品车354吃过午饭并且留下了推荐图标310以指示该朋友对该食品车的认可。当处于社交模式时,在此示例中,混合现实过滤程序14可仅将推荐图标310和314包括在经由HMD设备36显示给用户62的数据项的经过滤收集68中。
附加地并且如在图3中所示,每个推荐图标310和314也可采用分别与第一朋友370和第二朋友374相关联的不同形式。将领会,与该用户的朋友、家庭成员或其他社交熟人相关联的许多其他类型的数据项也可被包括在此数据项的经过滤收集68中。
在另一示例中,混合现实过滤程序14可利用流行模式,该流行模式过滤该多个地理定位数据项40以产生至少与阈值流行度水平相关联的那些数据项。再次参考图3,剧场358可能正举办音乐会,该音乐会可能正收到来自当地媒体的评论家、出席者的博客、经由社交媒体和其他在线源的评论的如潮评论,这些评论平均为4星中的3.9星。在一个示例中,阈值流行度水平可对应于4星中的3星的平均评论。当该音乐会的评论平均为3.9星时,当处于流行模式时,混合现实过滤程序14可将流行度图标330包括在数据项的经过滤收集68中。混合现实过滤程序14可将流行度图标330显示在剧场358上方以指示流行事件与该剧场相关联。将领会,至少与阈值流行度水平相关联的许多其他类型的数据项也可被包括在此数据项的经过滤收集68中。
在另一示例中,混合现实过滤程序14可利用新近(recent)模式,该新近模式过滤该多个地理定位数据项40以产生在阈值时间范围内已被创建或更新的那些数据项。再次参考图3,酒吧间350的顾客评论322可能在一小时前刚被张贴。在一个示例中,阈值时间范围可以是在过去一周内。因为酒吧间350的顾客评论322是一小时前张贴的,所以当处于新近模式中时混合现实过滤程序14可将顾客评论322包括在数据项的经过滤收集68中,并可将该评论显示在酒吧间350旁边。将领会,在阈值时间范围内创建或更新的许多其他类型的数据项也可被包括在此数据项的经过滤收集68中。
在另一示例中,混合现实过滤程序14可利用工作模式,该工作模式过滤该多个地理定位数据项40以产生与该用户的工作生活相关的那些数据项。再次参考图3,用户62可在商业地产工作,且该用户的同事可能已张贴了关于该特定城市十字路口处的潜在租赁机会的社交网络帖子318。当处于工作模式中时,混合现实过滤程序14可将社交网络帖子318包括在数据项的经过滤收集68中,并可在与该潜在租赁机会相对应的街道地址处显示该帖子。将领会,与该用户的工作生活相关的许多其他类型的数据项也可被包括在此数据项的经过滤收集68中。
在另一示例中,混合现实过滤程序14可利用游玩模式,该游玩模式过滤该多个地理定位数据项40以产生与休闲、娱乐、和/或其他消遣活动有关的那些数据项。再次参考图3,酒吧间350可定期举办摇摆舞活动。酒吧间350的摇摆舞活动的出席者可能已张贴了人们在该活动跳舞的照片326。当处于游玩模式时,混合现实过滤程序14可将照片326包括在数据项的经过滤收集68中,并可将该照片显示在酒吧间350旁边。将领会,与休闲、娱乐和/或其他消遣活动有关的许多其他类型的数据项也可被包括在此数据项的经过滤收集68中。
在另一示例中,混合现实过滤程序14可利用用户兴趣模式,该用户兴趣模式过滤该多个地理定位数据项40以产生与该用户的一个或多个兴趣有关的那些数据项。再次参考图3,用户62可能正在鉴赏并欣赏全息艺术。在一个示例中,混合现实过滤程序14可从用户对全息对象创建程序的使用和该用户对关于全息艺术的频繁在线评论中觉察出此兴趣。当处于用户兴趣模式时,混合现实过滤程序14可将全息向导306包括在数据项的经过滤收集68中,并可在其创建者所指定的位置处显示全息向导306。将领会,与该用户的一个或多个兴趣有关的许多其他类型的数据项也可被包括在此数据项的经过滤收集68中。
将领会,用户62可选择上述模式中的一个或多个供如上所述的混合现实过滤程序14使用。将领会,除了上面描述的那些模式之外的其他模式也可被混合现实过滤程序14用来选择性地过滤多个地理定位数据项。
混合现实过滤程序14还可基于一个或多个优先级因子74来排定数据项的经过滤收集68的优先级。一旦排定优先级,混合现实过滤程序14可将预定数量的排定优先级的地理定位数据项提供给混合现实显示程序32以经由HMD设备36显示。
在一个示例中,项年龄优先级因子可被用来根据最新近数据项来排定数据项的优先级。例如,在酒吧间350的多个评论可用的情况下,仅酒吧间350的最新近评论322可经由HMD设备36被显示。在其他示例中,排定优先级的地理定位评论的预定数量可以是2、3、4、5或更多,并且此预定数量的评论可被显示。
在另一示例中,项评分优先级因子可被用来根据那些项接收自商业评论、社交图推荐等的新近最爱评分来排定数据项的优先级。例如,全息向导306可能已收到来自全息艺术评论家和用户62的朋友的10星里平均7.5星的评分。用户62附近的其他全息艺术创作可能具有小于7.5星的平均评分。相应地,在仅要显示最高评分的全息艺术创作的情况下,仅全息向导306可经由HMD设备36显示。在其他示例中,排定优先级的地理定位全息艺术创作的预定数量可以是2、3、4、5或更多,并且此数量的全息艺术创作可被显示。
在另一示例中,用户偏好数据可被用于排定数据项的优先级。例如,通过检查用户创建全息幻想角色的历史并且指示用户对其他全息幻想角色的认可(“喜欢”),混合现实过滤程序14可确定用户对全息幻想角色有偏好。相应地,混合现实过滤程序可将全息向导306的显示优先级排定在也在用户62附近被地理定位的全息抽象艺术创作之前。
在另一示例中,项流行度可被用于排定数据项的优先级。例如,数据项的流行度可对应于该数据项所收到的不同评价、评论、认可指示等的数量。参考图3,全息向导306可能已收到了550份评价、评论和认可指示。全息抽象艺术创作可能已收到了50份评价、评论和认可指示。相应地,混合现实过滤程序可基于相比抽象艺术创作而言该向导的更高的流行度而将全息向导306的显示优先级排定在全息抽象艺术创作之前。
在另一示例中,项来源权威(source authority)可被用于排定数据项的优先级。参考图1,在一个示例中,当地政府机关可能操作权威服务器52,该权威服务器52包括可创建并向混合现实过滤程序14提供地理定位数据项40”的创作应用50。现在参考图3,道路建设可能已经关闭了距该十字路口两个街区的街道362的一条通道。警告图标334可能已经被生成并被地理定位在该十字路口处以警告该通道的司机和行人该街道的关闭。当地政府机关可具有经由HMD设备36显示地理定位数据的权威,并且混合现实过滤程序14可给予此类项排定在其他数据项之前的优先级。相应地,混合现实过滤程序可基于当地政府机关的权威排定警告图标334的显示的优先级。
在另一示例中,商业优先地位可被用于排定数据项的优先级。在一个示例中,酒吧间350可支付1000美元来购买推广该酒吧间的舞蹈竞赛的全息广告366。食品车354可支付25美元来购买推广该食品车的全息广告(未示出)。因为酒吧间350比食品车354为其广告支付得更多,所以舞蹈竞赛广告366可经由HMD设备36显示,而食品车广告可能不被显示。
在另一示例中,对用户62的物理邻近度可被用于排定各数据项的优先级。在一个示例中,用户62可指定距该用户的优先级距离,在该优先级距离内的地理定位数据项的优先级被排定在定位于该距离外的地理定位数据项之前。例如,在用户62指定10英尺的优先级距离的情况下,来自站在20英尺外并与该用户跨街道的第一朋友370正在玩的交互式游戏的全息角色可不经由HMD设备36显示。当用户62跨过街道到达第一朋友370的10英尺内时,来自该交互式游戏的全息角色现在将被优先化并被显示。
在另一示例中,对用户62的社交邻近度可被用于排定各数据项的优先级。在一个示例中,用户62可能具有社交图,该社交图包括用户62经由社交联网平均每天与其互动至少一次的第一朋友370。用户62的社交图还可包括用户62经由社交联网平均每月互动一次的第二朋友374。相应地,混合现实过滤程序14可基于该用户与第一朋友的更频繁的互动来将第一朋友370生成的地理定位数据项的优先级排定在由第二朋友374创建的那些地理定位数据项之前。
混合现实过滤程序14还可被配置成启用和禁用一个或多个创作应用,创作应用被配置成向混合现实显示程序32提供一个或多个地理定位数据项以供HMD设备36显示。一个或多个创作应用76可驻留于计算设备22的大容量存储18中,或可在该计算设备之外,诸如创作应用50位于图1中所示的权威服务器52上。
在一个示例中,并且为了最小化可能的干扰,当用户62接近具有许多车驶过用户的繁忙街道时,混合现实过滤程序14可禁用创作应用76。在另一示例中,托管创作应用50的权威服务器52可由机场安全办公室操作。当用户62进入机场并穿越到机场建筑物内部所限定的地理围栏边界时,混合现实显示程序32可启用创作应用50以向混合现实显示程序30提供地理定位数据项以供经由HMD设备36显示。
混合现实过滤程序14还可被配置成基于一个或多个数据类型78选择性地过滤地理定位数据项来产生地理定位数据项的经过滤收集68。数据类型78可包括但不限于社交联网帖子、评论和推荐、照片、广告以及艺术品。例如,用户62可期望仅看到与社交联网帖子相对应的地理定位数据项。相应地,该用户可选择社交联网帖子数据类型,且混合现实过滤程序14可相应地过滤所有地理定位数据项40以仅产生被提供给HMD设备36的数据项68的经过滤收集中的社交联网帖子。将领会,许多其他数据类型的地理定位数据项也可被用来过滤地理定位的数据项并且在本公开的范围内。
在另一示例中,混合现实过滤程序14可被进一步配置成基于应用第三方过滤准则的一个或多个第三方透镜80来选择性地过滤地理定位数据项。例如,用户62可崇拜用户的第一朋友370的艺术和时尚敏感度。用户的第一朋友370可具有“第一朋友艺术和时尚”透镜,该透镜向地理定位数据项应用过滤准则以产生反映第一朋友的艺术和时尚敏感度的数据项收集。
用户62可从第一朋友370接收第一朋友艺术和时尚透镜,并且此透镜可被存储在计算设备22的大容量存储18中。混合现实过滤程序14随后可采用第一朋友艺术和时尚透镜来选择性地过滤地理定位数据项来产生反映第一朋友的艺术和时尚敏感度的项收集。将领会,在其他示例中,其他第三方透镜80可被用户62接收和/或购买。
在另一示例中,混合现实过滤程序14可被进一步配置成当HMD设备36位于由地理定位内容信道服务的有边界的环境中时接收来自该地理定位内容信道48的多个地理定位数据项。例如,用户62和第一朋友370可能正坐在酒吧间350中。酒吧间350可广播地理定位内容信道48,当显示设备位于该酒吧间的四面墙内的时候该地理定位内容信道48能被访问。有利地,用户62和第一朋友370两者均可将其HMD设备36设置成仅接收并显示由该酒吧间的地理定位内容信道48广播的地理定位数据项。有利地,以此方式,用户62和第一朋友370可确保他们均在体验类似的混合现实环境,这可促进其互动。
在另一示例中,用户62和第一朋友370可创建自组织地理定位内容信道,该信道使得用户和第一朋友能够在公共混合现实体验中分享地理定位数据项。以此方式,用户62和第一朋友370也可确保他们均在体验类似的混合现实环境,这可促进其互动。
在另一示例中,并且现在参考图4和5,混合现实过滤程序14可被进一步配置成在描绘混合现实环境38中的数据项密度的星场400中呈现地理定位数据项的经过滤收集68。星场400包括多个指示符,每个指示符表示数据项的经过滤收集68内诸地理定位数据项中的一个不同的地理定位数据项。有利地,并且如在图4中示意性地解说的,星场400经由HMD设备36在该用户的当前视野内向用户提供了地理定位数据项的密度和位置的便捷抽象表示
在一个示例中,星场400中的每个指示符可对应于多个数据类型78之一。混合现实过滤程序14可被进一步配置成向多个指示符中的每一个提供数据类型性质,数据类型性质标识来自该多个数据类型中的对应数据类型。例如,该数据类型性质可包括对应指示符的特定形状。现在参考图4,具有三角形或锥形形状的指示符404可对应于社交联网帖子数据类型。具有六角形或六面体形状的指示符408可对应于评论或推荐数据类型。具有圆形或球形形状的指示符412可对应于照片数据类型。
图5示意性地解说了图3的用户62透过HMD设备36看到的数据项星场。在此示例中,数据项星场被显示在包括该城市十字路口的物理环境302的混合现实环境38内。用户62可能已选择了社交模式,该社交模式选择性地过滤该多个地理定位数据项40以产生与用户62的朋友、家庭成员或其他社交熟人相关联的那些项。相应地,表示与用户62的社交熟人相关联的社交联网帖子、评论或推荐以及与照片的各个指示符被包括在此星场内。
例如,星场可包括第二朋友374留在食品车354旁边的推荐图标310。在一个示例中,用户62可能经由与HMD设备36的交互选择推荐图标310。在选择之际,图标310可展开以显示与该图标相关联的第二朋友374所写的完整推荐。
图6A和6B解说了根据本公开的一实施例的用于选择性地过滤多个地理定位数据项的方法600的流程图。参考以上描述并在图1-5中示出的混合现实过滤系统10的软件和硬件组件来提供方法600的以下描述。可以理解,方法600还可在使用其他合适的硬件和软件组件的其他上下文中来执行。
参考图6A,在604,方法600包括接收多个地理定位数据项。在608,当HMD设备36位于由该地理定位内容信道服务的有边界环境内时,该地理定位数据项可从地理定位内容信道接收。在612,方法600包括基于一个或多个模式选择性地过滤该多个地理定位数据项来产生地理定位数据项的经过滤收集。该一个或多个模式可包括社交模式、流行模式、新近模式、工作模式、游玩模式以及用户兴趣模式中的一个或多个。
在616,方法600包括基于一个或多个优先级因子对该地理定位数据项的经过滤收集排定优先级。在620,该优先级因子可包括项年龄、项评分、用户偏好、项流行度、项来源权威、商业优先地位、物理邻近度以及社交邻近度。在624,方法600包括基于数据项的优先级将地理定位数据项的经过滤收集限制到预定数量的数据项。
在628,方法600包括基于一个或多个数据类型来选择性地过滤该多个地理定位数据项来产生地理定位数据项的经过滤收集。在632,方法600包括基于应用第三方过滤准则的一个或多个第三方透镜来选择性地过滤多个地理定位数据项。在636,方法600包括向混合现实显示程序32提供地理定位数据项68的经过滤收集以供HMD设备36显示。
在640,方法600包括启用一个或多个创作应用,创作应用被配置成向混合现实显示程序提供地理定位数据项中的一个或多个以供该显示设备显示。现在参考图6B,在644,方法600包括在星场中呈现地理定位数据项的经过滤收集,该星场描绘混合现实环境中的数据项密度,其中该星场包括多个指示符,每个指示符表示经过滤收集中的地理定位数据项中的一个不同数据项。在648,地理定位数据项中的每一个对应于多个数据类型中的一个,并且方法600进一步包括向该多个指示符中的每一个提供数据类型性质,数据类型性质标识来自多个数据类型的对应数据类型。
能够理解,方法600是以举例方式提供的,并且不旨在为限制性的。因此,可以理解,方法600可包括相比于图6A和6B中示出的那些步骤而言附加的和/或替换的步骤。并且,可以理解,方法600可用任何适当的次序执行。而且,可以理解,一个或多个步骤可从方法600中省略,而不背离本发明的范围。
图7示意性示出了可以执行上述方法和过程之中的一个或更多个的计算系统700的非限制性实施例。计算设备22可以采取计算系统700的形式。以简化形式示出了计算系统700。应当理解,可使用基本上任何计算机架构而不背离本公开的范围。在不同的实施例中,计算系统700可以采取大型计算机、服务器计算机、台式计算机、膝上型计算机、平板计算机、家庭娱乐计算机、网络计算设备、移动计算设备、移动通信设备、游戏设备等等的形式。如上所述,在一些示例中,计算系统700可以被集成到HMD设备。
如图7所示,计算系统700包括逻辑子系统704和存储子系统708。计算系统700可以任选地包括显示子系统712、通信子系统716、传感器子系统720、输入子系统722和/或图7中未示出的其他子系统和组件。计算系统700还可包括计算机可读介质,其中该计算机可读介质包括计算机可读存储介质和计算机可读通信介质。计算系统700还可以任选地包括其他用户输入设备,诸如例如键盘、鼠标、游戏控制器,和/或触摸屏等等。此外,在某些实施例中,此处所述的方法和过程可被实现为计算机应用、计算机服务、计算机API、计算机库,和/或包括一个或多个计算机的计算系统中的其他计算机程序产品。
逻辑子系统704可包括被配置为执行一个或多个指令的一个或多个物理设备。例如,逻辑子系统704可被配置为执行一个或多个指令,该一个或多个指令是一个或多个应用、服务、程序、例程、库、对象、组件、数据结构或其他逻辑构造的一部分。可实现这样的指令以执行任务、实现数据类型、变换一个或多个设备的状态或以其他方式得到所希望的结果。
逻辑子系统704可包括被配置成执行软件指令的一个或多个处理器。附加地或可替代地,逻辑子系统可以包括被配置为执行硬件或固件指令的一个或多个硬件或固件逻辑机器。逻辑子系统的处理器可以是单核或多核,且在其上执行的程序可被配置为并行或分布式处理。逻辑子系统可以任选地包括遍布两个或更多设备的独立组件,设备可远程放置和/或被配置为进行协同处理。该逻辑子系统的一个或多个方面可被虚拟化并由以云计算配置进行配置的可远程访问的联网计算设备执行。
存储子系统708可包括被配置为保持可由逻辑子系统704执行以实现此处所述的方法和过程的数据和/或指令的一个或多个物理持久设备。在实现此类方法和过程时,存储子系统708的状态可以被变换(例如,以保持不同的数据)。
存储子系统708可以包括可移动介质和/或内置设备。存储子系统708可包括光学存储设备(例如,CD、DVD、HD-DVD、蓝光盘等)、半导体存储器设备(例如,RAM、EPROM、EEPROM等)和/或磁性存储设备(例如,硬盘驱动器、软盘驱动器、磁带驱动器、MRAM等)等等。存储子系统708可包括具有以下特性中的一个或多个特性的设备:易失性、非易失性、动态、静态、读/写、只读、随机存取、顺序存取、位置可寻址、文件可寻址,以及内容可寻址。
在一些实施例中,可以将逻辑子系统704和存储子系统708的各方面可以集成在一个或多个共同设备中,通过该一个或多个共同设备,可以至少部分地实施本文所述的功能。这样的硬件逻辑组件可包括:例如,现场可编程门阵列(FPGA)、程序和应用专用集成电路(PASIC/ASIC)、程序和应用专用标准产品(PSSP/ASSP)、片上系统(SOC)系统以及复杂可编程逻辑设备(CPLD)。
图7还示出以可移动计算机可读存储介质724形式的存储子系统708的一方面,该介质可以用于存储可执行以实现此处所述的方法和过程的数据和/或指令。可移动计算机可读存储介质724尤其是可以采取CD、DVD、HD-DVD、蓝光盘、EEPROM和/或软盘的形式。
将明白,存储子系统708包括一个或多个物理持久设备。相反,在一些实施例中,本文描述的指令的各方面可以按暂态方式通过不由物理设备在至少有限持续时间期间保持的纯信号(例如电磁信号、光信号等)传播。此外,与本公开有关的数据和/或其他形式的信息可以经由计算机可读通信介质通过纯信号来传播。
在被包括时,显示子系统712可用于呈现由存储子系统708保存的数据的视觉表示。由于以上所描述的方法和过程改变了由存储子系统708保持的数据,并由此变换了存储子系统的状态,因此同样可以转变显示子系统712的状态以在视觉上表示底层数据的改变。显示子系统712可包括利用几乎任何类型的技术的一个或多个显示设备。可将此类显示设备与逻辑子系统704和/或存储子系统708组合在共享封装中,或此类显示设备可以是外围显示设备。显示子系统712可包括例如HMD设备36的显示系统56和透明显示器54。
在被包括时,通信子系统716可以被配置成将计算系统700与一个或多个网络和/或一个或多个其他计算设备可通信地耦合。通信子系统716可包括与一个或多个不同的通信协议兼容的有线和/或无线通信设备。作为非限制性示例,通信子系统716可被配置为经由无线电话网、无线局域网、有线局域网、无线广域网、有线广域网等进行通信。在一些实施例中,通信子系统可允许计算系统700经由诸如因特网之类的网络发送消息至其他设备和/或从其他设备接收消息。
传感器子系统720可包括被配置成感测不同的物理现象(例如,可见光、红外光、声音、加速度、取向、位置等)的一个或多个传感器,如上所述。传感器子系统720例如可以被配置为向逻辑子系统704提供传感器数据。如上所述,此类数据可包括眼睛跟踪信息、图像信息、音频信息、环境光信息、深度信息、位置信息、运动信息,用户位置信息和/或可被用来执行上述方法和过程的任何其他合适的传感器数据。
在被包括时,输入子系统722可包括一个或多个传感器或用户输入设备(诸如游戏控制器、姿势输入检测设备、语音识别器、惯性测量单元、键盘、鼠标、或触摸屏)或与它们对接。在某些实施例中,输入子系统722可以包括所选的自然用户输入(NUI)部件或与其结合。这样的部件可以是集成式的或者是外设,并且输入动作的转换和/或处理可以在板上或板下处理。NUI部件的示例可包括用于语言和/或语音识别的微电话;用于机器版本和/或姿势识别的红外、色彩、超声波和/或深度相机;用于运动检测和/或意图识别的头部跟踪器、眼睛跟踪器、加速计和/或陀螺仪;以及用于评估脑部活动的电场感测部件。
术语“程序”可用于描述被实现来执行一个或多个特定功能的混合现实过滤系统10的一个方面。在某些情况下,可以经由执行存储子系统708所保持的指令的逻辑子系统704来实例化这样的程序。将理解,可以从同一应用、服务、代码块、对象、库、例程、API、函数等实例化不同的程序。同样,可以由不同的应用程序、服务、代码块、对象、例程、API、函数等实例化同一程序。术语“程序”可意指涵盖单个或成组的可执行文件、数据文件、库、驱动程序、脚本、数据库记录等。
应该理解,此处所述的配置和/或方法在本质上是示例性的,并且这些具体实施例或示例不应被认为是局限性的,因为多个变体是可能的。此处所述的具体例程或方法可表示任何数量的处理策略中的一个或多个。由此,所示出的各个动作可以按所示次序执行、按其他次序执行、并行地执行,或者在某些情况下被省略。同样,可以改变上述过程的次序。
本公开的主题包括各种过程、系统和配置、此处所公开的其他特征、功能、动作,和/或特性,以及其任何和全部等效方案的所有新颖和非显而易见的组合和子组合。

Claims (9)

1.一种用于在混合现实环境中呈现地理定位数据项的经过滤收集的混合现实过滤系统,所述混合现实过滤系统包括:
在操作上连接到计算设备的显示设备,所述显示设备包括用于呈现全息对象的显示系统;以及
由所述计算设备的处理器执行的混合现实过滤程序,所述混合现实过滤程序被配置成:
接收多个地理定位数据项,所述多个地理定位数据项包括地理定位全息项和其他地理定位数据项;
基于一个或多个模式选择性地过滤所述多个地理定位数据项以产生地理定位数据项的经过滤收集,所述一个或多个模式包括社交模式、流行模式、新近模式、工作模式、游玩模式以及用户兴趣模式中的一个或多个;
启用和禁用被配置成向混合现实显示程序提供所述地理定位数据项中的一个或多个以供所述显示设备显示的一个或多个创作应用;以及
向混合现实显示程序提供地理定位数据项的所述经过滤收集以供所述显示设备显示。
2.如权利要求1所述的混合现实过滤系统,其特征在于,所述混合现实过滤程序还被配置成:
基于一个或多个优先级因子来排定地理定位数据项的所述经过滤收集的优先级;以及
向所述混合现实显示程序提供预定数量的经排定优先级的地理定位数据项以供所述显示设备显示。
3.如权利要求2所述的混合现实过滤系统,其特征在于,所述一个或多个优先级因子是从包括项年龄、项评分、用户偏好数据、项流行度、项来源权威、商业优先地位、物理邻近度以及社交邻近度的组中选择的。
4.如权利要求1所述的混合现实过滤系统,其特征在于,所述显示设备包括在操作上连接至所述计算设备的头戴式显示设备。
5.一种用于选择性地过滤多个地理定位数据项的方法,所述多个地理定位数据项包括混合现实环境中的地理定位全息项和其他地理定位数据项,所述方法包括:
接收所述多个地理定位数据项;
基于一个或多个模式选择性地过滤所述多个地理定位数据项以产生地理定位数据项的经过滤收集,所述一个或多个模式包括社交模式、流行模式、新近模式、工作模式、游玩模式以及用户兴趣模式中的一个或多个;
启用和禁用被配置成向混合现实显示程序提供所述地理定位数据项中的一个或多个以供显示设备显示的一个或多个创作应用;以及
向混合现实显示程序提供地理定位数据项的所述经过滤收集以供显示设备显示。
6.如权利要求5所述的方法,其特征在于,进一步包括基于一个或多个数据类型选择性地过滤所述多个地理定位数据项以产生地理定位数据项的所述经过滤的收集。
7.如权利要求5所述的方法,其特征在于,进一步包括基于应用第三方过滤准则的一个或多个第三方透镜来选择性地过滤所述多个地理定位数据项。
8.如权利要求5所述的方法,其特征在于,进一步包括在星场中呈现所述地理定位数据项的所述经过滤收集,所述星场描绘所述混合现实环境中的数据项密度,所述星场包括多个指示符,每个指示符表示所述经过滤收集中的所述地理定位数据项中一个不同的地理定位数据项。
9.如权利要求8所述的方法,其特征在于,所述地理定位数据项中的每一个地理定位数据项对应于多个数据类型之一,并且进一步包括向所述多个指示符中的每一个指示符提供数据类型性质,所述数据类型性质标识来自所述多个数据类型的对应数据类型。
CN201480005607.7A 2013-01-22 2014-01-15 混合现实过滤 Active CN105051648B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/747,297 US9412201B2 (en) 2013-01-22 2013-01-22 Mixed reality filtering
US13/747,297 2013-01-22
PCT/US2014/011560 WO2014116466A2 (en) 2013-01-22 2014-01-15 Mixed reality filtering

Publications (2)

Publication Number Publication Date
CN105051648A CN105051648A (zh) 2015-11-11
CN105051648B true CN105051648B (zh) 2018-02-06

Family

ID=50097830

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480005607.7A Active CN105051648B (zh) 2013-01-22 2014-01-15 混合现实过滤

Country Status (6)

Country Link
US (1) US9412201B2 (zh)
EP (1) EP2948826A4 (zh)
JP (1) JP6301962B2 (zh)
KR (1) KR102185804B1 (zh)
CN (1) CN105051648B (zh)
WO (1) WO2014116466A2 (zh)

Families Citing this family (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2501567A (en) * 2012-04-25 2013-10-30 Christian Sternitzke Augmented reality information obtaining system
US9064420B2 (en) * 2013-03-14 2015-06-23 Honda Motor Co., Ltd. Augmented reality heads up display (HUD) for yield to pedestrian safety cues
US9378590B2 (en) * 2013-04-23 2016-06-28 Microsoft Technology Licensing, Llc Augmented reality auction platform
KR101509169B1 (ko) * 2013-05-07 2015-04-07 배영식 헤드 마운트 디스플레이
US9865089B2 (en) 2014-07-25 2018-01-09 Microsoft Technology Licensing, Llc Virtual reality environment with real world objects
US9904055B2 (en) 2014-07-25 2018-02-27 Microsoft Technology Licensing, Llc Smart placement of virtual objects to stay in the field of view of a head mounted display
US10416760B2 (en) 2014-07-25 2019-09-17 Microsoft Technology Licensing, Llc Gaze-based object placement within a virtual reality environment
US10311638B2 (en) 2014-07-25 2019-06-04 Microsoft Technology Licensing, Llc Anti-trip when immersed in a virtual reality environment
US9858720B2 (en) 2014-07-25 2018-01-02 Microsoft Technology Licensing, Llc Three-dimensional mixed-reality viewport
US9766460B2 (en) 2014-07-25 2017-09-19 Microsoft Technology Licensing, Llc Ground plane adjustment in a virtual reality environment
US10451875B2 (en) 2014-07-25 2019-10-22 Microsoft Technology Licensing, Llc Smart transparency for virtual objects
GB201414609D0 (en) * 2014-08-18 2014-10-01 Tosas Bautista Martin Systems and methods for dealing with augmented reality overlay issues
US11546428B2 (en) * 2014-08-19 2023-01-03 Hand Held Products, Inc. Mobile computing device with data cognition software
US10783284B2 (en) 2014-10-15 2020-09-22 Dirtt Environmental Solutions, Ltd. Virtual reality immersion with an architectural design software application
US9779554B2 (en) 2015-04-10 2017-10-03 Sony Interactive Entertainment Inc. Filtering and parental control methods for restricting visual activity on a head mounted display
US10775878B2 (en) * 2015-04-10 2020-09-15 Sony Interactive Entertainment Inc. Control of personal space content presented via head mounted display
US10055888B2 (en) * 2015-04-28 2018-08-21 Microsoft Technology Licensing, Llc Producing and consuming metadata within multi-dimensional data
US9520002B1 (en) 2015-06-24 2016-12-13 Microsoft Technology Licensing, Llc Virtual place-located anchor
CN105554576B (zh) * 2015-12-08 2019-02-22 广州华多网络科技有限公司 一种数据筛选方法及用户终端
US10304247B2 (en) 2015-12-09 2019-05-28 Microsoft Technology Licensing, Llc Third party holographic portal
WO2017214576A1 (en) 2016-06-10 2017-12-14 Dirtt Environmental Solutions, Inc. Mixed-reality and cad architectural design environment
WO2017214559A1 (en) 2016-06-10 2017-12-14 Dirtt Environmental Solutions, Inc. Mixed-reality architectural design environment
US11044393B1 (en) * 2016-06-20 2021-06-22 Pipbin, Inc. System for curation and display of location-dependent augmented reality content in an augmented estate system
US11876941B1 (en) 2016-06-20 2024-01-16 Pipbin, Inc. Clickable augmented reality content manager, system, and network
US10334134B1 (en) 2016-06-20 2019-06-25 Maximillian John Suiter Augmented real estate with location and chattel tagging system and apparatus for virtual diary, scrapbooking, game play, messaging, canvasing, advertising and social interaction
US11785161B1 (en) 2016-06-20 2023-10-10 Pipbin, Inc. System for user accessibility of tagged curated augmented reality content
US11201981B1 (en) 2016-06-20 2021-12-14 Pipbin, Inc. System for notification of user accessibility of curated location-dependent content in an augmented estate
US20180089935A1 (en) 2016-09-23 2018-03-29 Igt Electronic gaming machines and electronic games using mixed reality headsets
CN106411889A (zh) * 2016-09-29 2017-02-15 宇龙计算机通信科技(深圳)有限公司 一种分组运动的方法、终端和系统
US20180095636A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US10536691B2 (en) 2016-10-04 2020-01-14 Facebook, Inc. Controls and interfaces for user interactions in virtual spaces
CN106843460B (zh) * 2016-12-13 2019-08-02 西北大学 基于多摄像头的多目标位置捕获定位系统及方法
US10429926B2 (en) * 2017-03-15 2019-10-01 International Business Machines Corporation Physical object addition and removal based on affordance and view
US10405374B2 (en) * 2017-03-17 2019-09-03 Google Llc Antenna system for head mounted display device
CN110573992B (zh) 2017-04-27 2023-07-18 西门子股份公司 使用增强现实和虚拟现实编辑增强现实体验
US11288913B2 (en) 2017-08-09 2022-03-29 Igt Augmented reality systems methods for displaying remote and virtual players and spectators
US20190051103A1 (en) 2017-08-09 2019-02-14 Igt Augmented reality systems and methods for providing a wagering game having real-world and virtual elements
US11430291B2 (en) 2017-08-09 2022-08-30 Igt Augmented reality systems and methods for gaming
US10741006B2 (en) 2017-08-09 2020-08-11 Igt Augmented reality systems and methods for providing player action recommendations in real time
US20200279110A1 (en) 2017-09-15 2020-09-03 Sony Corporation Information processing apparatus, information processing method, and program
KR101893038B1 (ko) 2017-12-18 2018-08-29 유미란 개별 영상신호 출력을 이용한 매핑 유사홀로그램 제공 장치 및 방법
US10521685B2 (en) 2018-05-29 2019-12-31 International Business Machines Corporation Augmented reality marker de-duplication and instantiation using marker creation information
US10713849B2 (en) 2018-05-29 2020-07-14 International Business Machines Corporation Augmented reality masking
US11195336B2 (en) 2018-06-08 2021-12-07 Vulcan Inc. Framework for augmented reality applications
US20190385372A1 (en) * 2018-06-15 2019-12-19 Microsoft Technology Licensing, Llc Positioning a virtual reality passthrough region at a known distance
US10996831B2 (en) 2018-06-29 2021-05-04 Vulcan Inc. Augmented reality cursors
US11195334B2 (en) 2018-08-03 2021-12-07 Igt Providing interactive virtual elements within a mixed reality scene
US11282331B2 (en) 2018-08-07 2022-03-22 Igt Mixed reality systems and methods for enhancing gaming device experiences
US10726680B2 (en) 2018-08-20 2020-07-28 Igt Augmented reality coin pusher
US20200082576A1 (en) * 2018-09-11 2020-03-12 Apple Inc. Method, Device, and System for Delivering Recommendations
US20200090453A1 (en) 2018-09-19 2020-03-19 Igt Pairing augmented reality devices with electronic gaming machines
US10720006B2 (en) 2018-10-11 2020-07-21 Igt Mixed reality systems and methods for displaying and recording authorized real-world and virtual elements
US10810825B2 (en) 2018-10-11 2020-10-20 Igt Systems and methods for providing safety and security features for users of immersive video devices
US10825302B2 (en) 2018-11-08 2020-11-03 Igt Augmented reality ticket experience
KR102051889B1 (ko) * 2018-12-05 2019-12-06 주식회사 증강지능 스마트 글래스에서 2d 데이터를 기반으로 3d 증강현실을 구현하는 방법 및 시스템
US11087595B2 (en) * 2019-01-24 2021-08-10 Igt System and method for wagering on virtual elements overlaying a sports betting field
US11410488B2 (en) 2019-05-03 2022-08-09 Igt Augmented reality virtual object collection based on symbol combinations
US11410487B2 (en) 2019-05-03 2022-08-09 Igt Augmented reality brand-based virtual scavenger hunt
US10743124B1 (en) 2019-05-10 2020-08-11 Igt Providing mixed reality audio with environmental audio devices, and related systems, devices, and methods
US11586764B2 (en) 2020-09-29 2023-02-21 International Business Machines Corporation Privacy negotiations in a mixed reality environment
US20220138994A1 (en) * 2020-11-04 2022-05-05 Micron Technology, Inc. Displaying augmented reality responsive to an augmented reality image
US20220398302A1 (en) * 2021-06-10 2022-12-15 Trivver, Inc. Secure wearable lens apparatus

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102213831A (zh) * 2010-04-08 2011-10-12 索尼公司 用于头部安装型显示单元的图像显示方法
CN102436663A (zh) * 2010-08-12 2012-05-02 株式会社泛泰 用于对增强现实进行选择性过滤的用户设备、服务器和方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6972734B1 (en) 1999-06-11 2005-12-06 Canon Kabushiki Kaisha Mixed reality apparatus and mixed reality presentation method
WO2007027738A2 (en) 2005-08-29 2007-03-08 Evryx Technologies, Inc. Interactivity via mobile image recognition
US7933897B2 (en) * 2005-10-12 2011-04-26 Google Inc. Entity display priority in a distributed geographic information system
CN101292268B (zh) * 2005-10-21 2012-06-13 皇家飞利浦电子股份有限公司 使用轮廓标志来交互式探测和注释医学图像的方法和系统
JP5398970B2 (ja) * 2007-09-28 2014-01-29 京セラ株式会社 移動通信装置、制御方法
US8264505B2 (en) * 2007-12-28 2012-09-11 Microsoft Corporation Augmented reality and filtering
NL1035303C2 (nl) 2008-04-16 2009-10-19 Virtual Proteins B V Interactieve virtuele reality eenheid.
US9600067B2 (en) 2008-10-27 2017-03-21 Sri International System and method for generating a mixed reality environment
US20100253700A1 (en) 2009-04-02 2010-10-07 Philippe Bergeron Real-Time 3-D Interactions Between Real And Virtual Environments
US8121867B2 (en) * 2009-04-28 2012-02-21 International Business Machines Corporation Software application generation and implementation method and system
US8577405B2 (en) * 2009-06-12 2013-11-05 Qualcomm Incorporated Systems, methods, and machine-readable media providing location-enabled group management
US9420251B2 (en) * 2010-02-08 2016-08-16 Nikon Corporation Imaging device and information acquisition system in which an acquired image and associated information are held on a display
US8788197B2 (en) 2010-04-30 2014-07-22 Ryan Fink Visual training devices, systems, and methods
KR101122149B1 (ko) * 2010-06-04 2012-03-16 진용옥 온라인 문화행사 참여 서비스 제공 시스템 및 제공방법
KR101337555B1 (ko) * 2010-09-09 2013-12-16 주식회사 팬택 객체 연관성을 이용한 증강 현실 제공 장치 및 방법
JP5014494B2 (ja) * 2011-01-21 2012-08-29 パナソニック株式会社 情報処理装置、拡張現実感システム、情報処理方法、及び情報処理プログラム
KR101330808B1 (ko) 2011-01-27 2013-11-18 주식회사 팬택 증강 현실 편집 장치
US8810598B2 (en) 2011-04-08 2014-08-19 Nant Holdings Ip, Llc Interference based augmented reality hosting platforms

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102213831A (zh) * 2010-04-08 2011-10-12 索尼公司 用于头部安装型显示单元的图像显示方法
CN102436663A (zh) * 2010-08-12 2012-05-02 株式会社泛泰 用于对增强现实进行选择性过滤的用户设备、服务器和方法

Also Published As

Publication number Publication date
KR20150108842A (ko) 2015-09-30
EP2948826A4 (en) 2015-12-09
JP2016507833A (ja) 2016-03-10
KR102185804B1 (ko) 2020-12-02
CN105051648A (zh) 2015-11-11
US9412201B2 (en) 2016-08-09
JP6301962B2 (ja) 2018-03-28
EP2948826A2 (en) 2015-12-02
WO2014116466A3 (en) 2015-04-16
WO2014116466A2 (en) 2014-07-31
US20140204117A1 (en) 2014-07-24

Similar Documents

Publication Publication Date Title
CN105051648B (zh) 混合现实过滤
Balakrishnan et al. Interaction of Spatial Computing In Augmented Reality
CN105518574B (zh) 用于混合现实分级信息递送的方法和系统
CN105050670B (zh) 混合现实体验共享
Neuburger et al. The ‘Phygital’tourist experience: The use of augmented and virtual reality in destination marketing
Rampolla et al. Augmented reality: An emerging technologies guide to AR
US9429912B2 (en) Mixed reality holographic object development
CN105190485B (zh) 混合现实交互
Dargan et al. Augmented reality: A comprehensive review
CN103761085B (zh) 混合现实全息对象开发
Marr Extended reality in practice: 100+ amazing ways virtual, augmented and mixed reality are changing business and society
EP2887322A1 (en) Mixed reality holographic object development
Reeves et al. Designing for crowds
Jenny Enhancing tourism with augmented and virtual reality
Kimura et al. Collectively sharing people’s visual and auditory capabilities: exploring opportunities and pitfalls
Pavithra et al. An emerging immersive technology-a survey
Stuart Virtual Reality Marketing: Using VR to Grow a Brand and Create Impact
Loijens et al. What is augmented reality?
Van Gisbergen Contextual connected media: How rearranging a media puzzle, brings virtual reality into being
JP7245890B1 (ja) 情報処理システム、情報処理方法、情報処理プログラム
JP2023075879A (ja) 情報処理システム、情報処理方法、情報処理プログラム
Narayanan et al. Current Trends, Challenges, and Future Prospects for Augmented Reality and Virtual Reality
Bhimani Feasibility of using virtual reality in requirements elicitation process
de Castro My Physical-Digital Self: Exploring the Detrimental Effects of the Metaverse on Relationship & Identity Development
Sonnen Metaverse For Beginners 2023: The Ultimate Guide on Investing In Metaverse, Blockchain Gaming, Virtual Lands, Augmented Reality, Virtual Reality, NFT, Real Estate, Crypto And Web 3.0

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant