CN118055131A - 增强现实移动边缘计算 - Google Patents

增强现实移动边缘计算 Download PDF

Info

Publication number
CN118055131A
CN118055131A CN202410364300.1A CN202410364300A CN118055131A CN 118055131 A CN118055131 A CN 118055131A CN 202410364300 A CN202410364300 A CN 202410364300A CN 118055131 A CN118055131 A CN 118055131A
Authority
CN
China
Prior art keywords
client
action request
result
experience
edge node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202410364300.1A
Other languages
English (en)
Inventor
B·皮克
D·G·史密斯
S·y·D·胡
G·拉古拉曼
P·J·图纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Niantic Inc
Original Assignee
Niantic Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Niantic Inc filed Critical Niantic Inc
Publication of CN118055131A publication Critical patent/CN118055131A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/216—Input arrangements for video game devices characterised by their sensors, purposes or types using geographical information, e.g. location of the game device or player using GPS
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/31—Communication aspects specific to video games, e.g. between several handheld game devices at close range
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/33—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using wide area network [WAN] connections
    • A63F13/332—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using wide area network [WAN] connections using wireless networks, e.g. cellular phone networks
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/34—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers using peer-to-peer connections
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A63F13/352—Details of game servers involving special game server arrangements, e.g. regional servers connected to a national server or a plurality of servers managing partitions of the game world
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • A63F13/358—Adapting the game course according to the network or server load, e.g. for reducing latency due to different connection speeds between clients
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/005—General purpose rendering architectures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/52—Network services specially adapted for the location of the user terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/566—Grouping or aggregating service requests, e.g. for unified processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H04L67/567—Integrating service provisioning from a plurality of service providers
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/55—Details of game data or player data management
    • A63F2300/5546—Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history
    • A63F2300/5566—Details of game data or player data management using player registration data, e.g. identification, account, preferences, game history by matching opponents or finding partners to build a team, e.g. by skill level, geographical area, background, play style

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Child & Adolescent Psychology (AREA)
  • Health & Medical Sciences (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Environmental & Geological Engineering (AREA)
  • Information Transfer Between Computers (AREA)
  • Processing Or Creating Images (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Computer And Data Communications (AREA)

Abstract

本公开实施例涉及增强现实移动边缘计算。在共享增强现实体验之内的动作的处理在通信网络的边缘节点(例如，小区塔)和服务器之间被拆分。因此，利用通常由边缘节点提供的状态更新，以及由服务器基于主状态来提供冲突解决(例如，其中连接到不同边缘节点的动作潜在地彼此干扰)，当前状态的计算可以被基于真实世界的位置被自然地共享。通过该方法，在没有经由游戏服务器来路由动作的情况下，延迟可以被减少为使用点到点(P2P)协议、连接到相同边缘节点的客户端之间所通信的游戏动作。

Description

增强现实移动边缘计算
分案说明
本申请是申请号为202080028046.8，发明名称为“增强现实移动边缘计算”的分案申请。
相关申请的交叉引用
该申请要求于2019年2月25日提交的申请号62/810,115的美国临时申请的权利，该美国临时申请通过引用并入本文。
技术领域
本公开涉及增强现实(AR)，并且特别的涉及用于提供低延时共享AR体验的分层布置的网络架构。
背景技术
在平行现实游戏系统中，玩家在至少与真实世界的部分平行的、共享的虚拟世界中经由计算设备交互。玩家在虚拟世界中的位置是基于玩家的真实世界的位置。然而，当动作主要地参考虚拟世界来进行时，虚拟世界可以成为玩家彼此互动的障碍。玩家与虚拟世界交互，使其他玩家看起来遥远或者不真实。因此，即使当许多个体在真实世界的地理区域中游戏时，游戏体验可能感到是个体的而不是社交的。
平行现实游戏系统可以使用一个或多个协议以更新虚拟世界的游戏状态，利用该游戏状态玩家交互以反映变化(例如，在游戏中其他玩家的动作的结果)。通信协议(诸如，用户数据报协议(UDP))限定用于使用计算机网络来交换数据的规则的系统。UDP遵循没有保障数据电文的递送、排序、非重复性的无连接通信模式。计算设备使用UDP来通信，以将数据报文经由计算机网络传输到彼此，该数据报文是针对通信的基本单元，每个数据报文包括报头和载荷。
无连接通信协议(诸如，UDP)通常地比定向连接的通信协议(像传输控制协议(TCP))具有更低开销和延迟，定向连接的通信协议在传送数据之前在计算设备之间建立连接。然而，现有的无连接通信协议不适于针对所要求的比由现有技术适应的更少延迟的数据传送。例如，以60帧每秒(FPS)流动的平行现实游戏会话可能要求比由当前技术所提供的延迟更低数量级的延迟。在这样的游戏会话中，帧大约以十六毫秒间隔被间隔排列，然而当前通信协议一般提供大约一百毫秒(或者更多)的延迟。
因此，这些现有的无连接通信协议的延迟在玩家和平行现实游戏系统中的虚拟世界之间提供了障碍。通过这些现有通信协议，玩家不能与当前游戏状态交互，仅能与最近的游戏状态交互。例如，在平行现实游戏中，玩家可能在老的位置处看到虚拟对象(例如，其中对象是100毫秒之前的)，然而虚拟位置数据实际上针对虚拟对象具有新的位置(例如，虚拟对象已经由另一玩家移动)。该延迟在客户端和托管或协调平行现实游戏的服务器之间通信中可能引起令人沮丧的用户体验。在多于一个用户参与游戏时，该问题可以特别地严重，因为延迟可以使一个玩家的动作在虚拟世界中的其他玩家的视野中显示明显的延时。
发明内容
增强现实(AR)系统利用计算机生成的内容补充真实世界的视野。将AR合并到平行现实游戏可以改善真实和虚拟世界之间的结合。AR也可以通过提供针对玩家参加他们交互共享游戏体验的机会来增加玩家之间的交互性。例如，在坦克战游戏中，玩家可能在真实世界位置的周围驾驶虚拟坦克，尝试摧毁彼此的坦克。在另一示例中，在标签战游戏中，玩家可以尝试利用能量球将彼此标签以得分。
常规的AR会话技术涉及游戏服务器，该游戏服务器维护主游戏状态并且周期地经由网络(例如，互联网)将玩家设备的本地游戏状态同步到主游戏状态。然而，同步玩家的本地游戏状态可能占用大量的时间(例如，～100毫秒)，这对游戏体验是有害的。玩家实际上是与过去游戏状态交互而不是与当前游戏状态交互。在多于一个用户参与AR游戏时，该问题可以特别地严重，因为延迟使一个玩家的动作在虚拟世界中的其他玩家的视野中显示明显的延时。例如，如果一个玩家在虚拟世界中移动AR对象，其他玩家可能看不到该对象已经移动，直到一百毫秒(或更多)以后，这是人可察觉的延时。如此，另一玩家可能尝试与对象在对象之前的位置交互，并且当游戏针对延迟矫正(例如，通过拒绝实现由玩家要求的动作)时感到懊恼。
该问题和其他问题可以通过在网络的边缘节点处(例如，小区塔)执行一些游戏状态处理来解决。因此，游戏状态的计算可以基于真实世界的位置被自然地共享，利用由服务器所维护的主游戏状态提供冲突解决(例如，当连接到附近的小区塔的玩家的动作潜在地彼此干扰)。延迟也可以使用点到点(P2P)协议来减少，该协议在连接到相同边缘节点的客户端之间交换更新，而没有经由游戏服务器来路由更新。例如，使用这些方法，延迟可以被减少到10毫秒或者更少。此外，这可以增加可用的带宽，使更大数量的玩家能够共享共同的AR体验。
在一个实施例中，用于由边缘节点提供共享AR体验的方法包括接收来自在边缘节点处客户端的连接请求并且基于连接请求针对客户端来标识共享AR体验。方法还包括针对共享AR体验向客户端提供地图数据和本地游戏状态。边缘节点接收来自客户端的动作请求，该请求指示在共享AR体验中与虚拟项所期望的交互并且基于由边缘节点维护的本地游戏状态来确定动作请求的结果。方法还包括向连接到边缘节点的多个客户端提供结果并且利用由服务器维护的主游戏状态验证结果。在结果初始地被提供到多个客户端后，结果可以被验证。
附图说明
图1图示了其中AR内容被提供到客户端的一个网络的计算环境的实施例。
图2是根据一个实施例的、适合在图1的网络化的计算环境中使用的数据报文的框图。
图3是根据一个实施例的、图示了用于由网络化的计算环境的边缘节点路由数据报文的处理的流程图。
图4是根据一个实施例的、图示了图1的小区塔的框图。
图5是根据一个实施例的、图示了用于提供共享AR体验的方法的流程图。
图6是根据一个实施例的、图示了适合在图1的网络化的计算环境中使用的计算机的示例的框图。
具体实施方式
附图和下面的描述仅通过图示的方式描述了某些实施例。本领域的技术人员将容易地从以下描述认识到，在没有偏离所描述的原则的情况下，结构和方法的备选的实施例可以被采用。现在参考将会以多个实施例作出，这些实施例的示例被图示在附图中。在可行的情况下，在图中使用相似或类似的附图标记来表示相似或类似的功能。其中元素共享共同数字，后面跟着不同的字母，则元素是相似或者相同的。数字单独指代这种元素的任何一个或任何组合。虽然下面描述的实施例涉及平行现实游戏，本领域技术人员将认识到所公开的技术可以被用于其他类型的共享AR体验。
示例计算环境
图1图示了其中AR内容被提供到客户端110的网络化的计算环境的一个实施例。AR内容可以是平行现实游戏的部分，在该平行现实游戏中玩家在共享的虚拟世界中交互，该共享的虚拟世界至少平行于真实世界的部分。在所示出的实施例中，网络化的计算环境包括服务器110、小区塔120、以及两个客户端130。虽然为了方便仅两个客户端130被示出，在实践中，更多(例如，数十或者数百的)客户端130可以被连接到小区塔120。在其他实施例，网络化的计算环境可以包括不同的或者附加的组件。例如，网络的计算环境可以是使用WiFi路由器作为边缘节点的局域网(LAN)，而不是小区塔120。另外，功能可以与所描述相比不同的方式分布在元素之间。
服务器110是在通信网络中向客户端130的一个或多个计算设备提供服务。服务器110经由边缘通信网络小区塔的边缘节点(例如，小区塔120)与客户端130通信。在一个实施例中，服务器110维护针对平行现实游戏的主游戏状态，即平行现实游戏的最终的真实数据状态。在该上下文中，主游戏状态相当于真实数据状态，因为其中冲突在主游戏状态和本地游戏状态之间产生时，主游戏状态统治游戏状态。这可以在其中两个本地游戏状态(例如，两个本地游戏状态由在网络中相邻的小区塔维护)对应于重叠地理区域时特别地有用。因此，在连接到不同的AR会话时，连接到两个小区塔120的设备可以与相同的游戏内容(在主游戏状态中)交互。
小区塔120是边缘节点，客户端130经由该边缘节点连接到通信网络。如上文所描述的，计算机网络可以包括除小区塔120之外或者替换小区塔120但是允许相似通信的其他边缘节点。在一个实施例中，小区塔包括被配置为存储AR数据并且向所连接的客户端130的一个或多个计算设备提供AR服务。因为客户端130相对地位于靠近小区塔并且直接连接到小区塔，在提供数据和服务到客户端中的滞后时间与针对服务器110的滞后时间相比可以显著地更短。参考图4，小区塔120的各种实施例在以下被更详细地描述。
客户端130是计算设备，诸如个人计算机，笔记本，平板计算机，智能电话等。在涉及平行现实游戏的实施例中，客户端130通常是具有连接到或者内置照相机并且玩家可以易于携带的智能电话或者平板计算机。客户端(例如，客户端130A)可以通过将P2P消息发送到小区塔120通信，该小区塔将消息转发到其他连接到相同小区塔的客户端(例如，客户端130B)。客户端130也可以通过将消息发送到服务器110(经由小区塔120)该服务器转而将消息转发到接收者来与另一客户端通信。例如，以这种方式，客户端130A可以将消息发送到另一客户端130B，该客户端连接到不同小区塔120或者服务器110。
在一个实施例中，客户端通信可以通过服务器110或者点对点(P2P)来路由。通过服务器110被路由的通信可以经由小区塔120从第一客户端130A去到服务器110，并且然后通过小区塔120回到第二客户端130B。相反，P2P通信可以从第一客户端130A去到小区塔120，并且然后直接到第二客户端130B。注意在一些情况中，通信可以穿过其他中间设备(或者节点)，诸如信号放大器。如本文中所用的，如果通信被从发送客户端130A被路由到目标客户端130B而没有穿过服务器110，则通信被认为是P2P。这可以通过在通信被发送到目标客户端130B之前绕过将通信发送到服务器110的需要来减少延迟。例如，如果目标客户端130B被连接到与发送客户端130A相同的小区塔120，消息(例如，数据报文)可以被以P2P发送，否则消息可能经由服务器110被路由。在另一实施例中，客户端130完全地使用P2P通信。
在一个实施例中，客户端130使用协调服务(例如，在服务器处托管并且经由TCP来通信)以同步IP地址。客户端130因此可以使用面向公共IP地址或局域网(LAN)通信(例如，经由UDP)。例如，第一客户端130A可以经由TCP将请求发送到协调服务以加入本地AR共享体验。协调服务可以利用连接到提供AR体验的AR会话的第二客户端130B的IP地址来提供第一客户端130A(例如，经由相同的小区塔120)。协调服务器也可以向第二客户端130B提供第一客户端的IP地址，或者第一客户端可以使用第二客户端的IP地址(如由协调服务器所提供的)直接提供它。在一些实施例中，在第二客户端的IP地址被提供之前，协调服务器可以提示第二客户端130B以批准第一客户端130A(例如，通过请求用户确认或者检查所批准的客户端130的列表以与第二客户端130B连接)。
在其他的优点中，以图1所示的方式构造网络计算环境能够实现计算的有效分布。信息可以被在具有短滞后时间的客户端130之间被P2P交换，允许玩家以应当在真实世界中交互相似的方式在共享AR体验中交互。相似地，小区塔120可以确定向客户端130提供什么地图数据并且同步所连接的客户端之间的游戏状态。小区塔120可以以比与利用服务器110全局地同步相同的状态相比更少的延迟来同步游戏状态。服务器110可以然后被用以处理更长期的处理并且解决冲突。例如，服务器110可以管理在地理区域之间的由不同小区塔120处理的连接，双重检查由小区塔做出的决定(并且如果需要，做出纠正)，执行附加的安全检查，分析从客户端130接收的数据以检测欺骗，维护全局数据(例如，针对大于单个小区塔的覆盖范围的区域的总队得分)。
示例P2P协议
图2图示了一个适用于在图1的网络化的计算环境中使用的数据报文200的实施例。如之前所描述的，数据报文200是针对通信的基本单元。在实施例中示出的，数据报文200包括载荷202和报头204，后者包括P2P标志206，又称为指示符。报头204是指定数据报文200的各个方面的元数据(诸如源端口、目的端口、数据报文200的长度、以及数据报文200的校验和)。载荷202是通过数据报文200来通信的数据。在其他实施例中，数据报文200可以包括不同的或附加的元素。
载荷202包括数据报文200的内容，该内容旨在用于递送到接收客户端或者客户端130。在一个实施例中，报头204可以是与具有附加的P2P标志206的UDP头相似。报头204可以包含附加的元数据。P2P标志206被用以确定节点是否数据报文被发送到服务器110或者被P2P发送到另一客户端130。在其他实施例中，P2P标志206被在提供相似功能的报头内的一个或多个其他指示符代替。
图3是根据一个实施例，图示了用于在网络边缘节点处(例如，小区塔120)使用P2P通信协议的流程的流程图。在图3中，小区塔120从客户端130A接收305数据报文200。小区塔120分析310数据报文200以确定其是否应该P2P或经由服务器110发送。在一个实施例中，P2P标志206指示数据报文200是P2P消息，并且小区塔120将数据报文200发送325到连接到客户端130A的一个或多个客户端130。例如，如果数据报文200的报头204指示目的端口是客户端130B，小区塔120将数据报文200发送315到客户端130B。备选地，小区塔可以维护所连接的客户端130的列表，该列表中的客户端参与本地AR会话并且将数据报文200发送315到参与本地AR会话的所有客户端130(或者客户端的子集，诸如那些对应于玩家的队友的客户端)。相反地，如果P2P标志206指示数据报文200是直接到服务器110，小区塔120将数据报文200发送320到服务器110。
在另一实施例中，发送客户端130A可以设置P2P标志206以指示如果可能，数据报文200应当被P2P发送。小区塔120接收305并且分析310数据报文200，并且，假设P2P标志206指示数据报文200应当被P2P发送，确定目标客户端130B当前是否连接到小区塔120(例如，通过将目标客户端130B的标识符与当前连接到客户端130的列表比较)。如果目标客户端130B是连接到小区塔120，小区塔120将数据报文200直接地发送315到目标客户端130B，而不是经由服务器110去。相反，如果目标客户端130B没有被连接到小区塔120，小区塔120将数据报文发送320到服务器110，以被发送到目标客户端130B上(例如，经由目标客户端130B当前所连接的第二小区塔120)。例如，服务器110可能维护数据库或者其他列表，该列表是小区塔120当前或者最近连接到哪些客户端设备130的列表。在一些实施例中，小区塔120可以将数据报文200发送到目标客户端130B和服务器110两者。
在其他实施例中，P2P标志206可以是实体(诸如，AR会话、用户、设备、游戏账号等)的标识符。小区塔维护P2P标志206的列表，针对该列表数据报文200应当被P2P发送(或者如果可能，P2P)。小区塔120接收305并且分析310数据报文200以确定其是否应当经由服务器110或P2P发送。如果P2P标志206包括在列表上的实体的标识符，数据报文200是P2P消息并且小区塔将数据包200发送315到与标识的实体相关联的一个或多个客户端130B。例如，如果数据报文200的报头204包括目标客户端130B的标识符，小区塔120将数据报文200发送315到目标客户端130B。为了给出其他示例，如果P2P标志206标识AR会话，数据报文200被发送到所有连接到该会话的客户端130，并且如果P2P标志是游戏账号，数据报文被发送到与该游戏账号相关联的一个或多个客户端等。相反地，如果P2P标志206标识不在列表上的实体，小区塔120将P2P标志206发送320到服务器110，以被转发到与实体相关联的客户端130。备选地，列表可以针对不被P2P发送的消息来指示P2P标志206，在这种情况下，如果P2P标志206不在列表上，默认的行为是P2P发送对应的数据报文到目标客户端130B。
示例边缘节点
图4图示了在通信网络中的边缘节点的一个实施例。在所示出的实施例中，边缘节点是小区塔120，该小区塔包括路由模块410、数据提取模块420、AR会话模块430、地图处理模块440、权限检查模块450、以及本地数据存储460。小区塔120也包括用于建立到用于交换数据的服务器110和客户端130的连接的硬件和固件或者软件(未示出)。例如，小区塔120可以经由光纤或者其他有线互联网连接到服务器110并且使用无线连接(例如，4G或者5G)连接到客户端130。在其他实施例，小区塔可以包括不同的或附加的部件。此外，功能可以以与所描述的不同方式在元素之间分布。
路由模块410接收数据分组并且将这些分组发送到一个或多个接收设备。在一个实施例中，路由模块从客户端130接收数据报文200并且使用之前参考图3所描述的方法以决定将所接收的数据报文发送到的地点。路由模块410也可以从服务器接收数据包，该数据包寻址到特定的客户端130或者连接到小区塔120的所有客户端。路由模块410将数据包转发到客户端130，数据分组被寻址到该客户端130。
数据提取模块420从一个或多个源接收数据，小区塔120使用该源以经由所连接的客户端130向玩家提供共享AR体验。在一个实施例中，数据提取模块420接收关于真实世界情况(例如，从第三方服务)的实时或者基本上的实时信息。例如，数据提取模块420可能周期性地(例如，每小时地)从天气服务接收天气信息，该天气信息指示小区塔120周围在地理区域中天气情况。作为另一示例，数据提取模块420可能检索针对公园、博物馆、或者其他公共空间的开放时间。作为又一实施例，数据提取模块420可以接收交通数据，该交通数据指示小区塔120周围的地理区域中多少车辆正在路上运动。这样的关于真实世界情况的信息可以被用以提高虚拟世界和真实世界之间的协同。
AR会话模块430管理AR会话，在AR会话中玩家在小区塔120周围的地理区域中可以参与共享AR体验。在一个实施例中，当执行AR游戏时客户端130连接到小区塔120，并且AR会话模块430将客户端130连接到针对游戏的AR会话。所有连接到小区塔120的玩家可以共享单独的AR会话或者玩家可以在多个AR会话之间被分开。例如，在特定的AR会话中可以存在最多的数目的玩家(例如，十、二十、一百等)。其中存储在多个AR会话，最近连接的客户端130可以被随机地放置在会话中或者客户端130可以提供用户接口(UI)以使玩家能够选择哪个会话以加入。因此，玩家可以选择与朋友参与AR会话。在一些实施例中，玩家可以建立访问被保护的(例如，需要密码或代码以加入)的私人AR会话。
在各种实施例中，使AR对象能够似乎与真实世界的特征交互(例如，跳过障碍物而不是穿过他们)，AR会话模块430向所连接的客户端提供地图数据，该地图数据表示在客户端附近的真实世界(例如，存储在本地数据存储460中)。AR会话模块430可以接收针对客户端130的本地数据(例如，GPS位置)并且提供针对客户端周围地理区域(例如，在客户端的当前位置的阈值距离之内)的地图数据。
地图数据可以包括一个或多个不同类型的真实世界的表示。例如，地图数据可以包括点云模型、平面匹配模型、线匹配模型、地理信息系统(GIS)模型、建筑物识别模型、以及景观识别模型等。地图数据可以包括多于一个的、以不同的细节级别的给定类型的表示。例如，地图数据可以包括两个或多个点云模型，每个点云模型包括不同数目的点。
客户端130可以将地图数据与由客户端130上的一个或多个传感器所收集的数据相比较以细化客户端的位置。例如，通过将在客户端130上由照相机所捕捉的图像映射到点云模型，客户端的位置和方向可以被精确地确定(例如，以在一厘米和0.1度之内)。客户端130将所确定的位置和定向与由玩家所做出的动作(例如，射击、选择虚拟项以交互、丢弃虚拟项等)一起提供回到AR会话模块430。因此，AR会话模块430可以针对所有参与AR会话的玩家更新游戏的状态以精确地反映在AR会话中玩家的位置。
地图处理模块440基于当前情况(例如，来自数据提取模块420的数据)来更新地图数据。因为真实世界不是静止的，在本地数据存储460中的地图数据可能不表示当前真实世界的情况。例如，在佛蒙特州中的相同的公园小路在不同季节中可以看起来非常不同。在夏季中，小路可以是清晰的并且周围的树覆盖着树叶。相反地，在冬季中，小路可以是被积雪阻塞的并且树是秃的。地图处理模块440可以将地图数据转换到近似这样的变化。
在一个实施例中，地图处理模块440检索当前情况数据以标识转换并且将该转换应用到地图数据。针对不同情况的转换可以由常识、采用所训练的机器学习模型的形式、或者使用两者的结合来限定。例如，地图处理模块440可以接收当前天气情况数据，选择针对当前天气情况的转换，并且将该转换应用到地图数据。备选地，地图处理模块440可以预计算所转换的地图并且存储所转换的地图(例如，在本地数据存储460中)。在该情况中，当客户端130连接到小区塔120，地图处理模块440确定当前情况，选择适当的地图数据的预计算版本，并且向客户端130该版本。
权限检查模块450维护在不同的客户端130的游戏状态之间的同步。在一个实施例中，权限检查模块450确认从客户端130所接收的游戏动作是与由AR会话模块430维护的游戏状态一致。例如，如果两个玩家都尝试捡起游戏中同一的项，权限检查模块决定哪个玩家接收项(例如，基于与请求相关联的时间戳)。如所描述的，P2P协议的使用以及在小区塔120处的本地处理可以通过直接向其他玩家的客户端130提供由玩家所请求的动作(例如，捕捉虚拟对象)的结果来显著地减少在AR会话期间在其他玩家的客户端130处看到玩家的动作的延迟。因此，在动作之间产生的并且被权限检查模块450所解决的冲突的实例的可能性(和数目)被减少并且AR体验被改善。
权限检查模块450也可以维护它的游戏状态本地副本与由服务器110维护的主游戏状态之间的同步。在一个实施例中，权限检查模块450周期性地(例如，每一到十秒钟)接收关于来自服务器110的游戏状态的全局更新。权限检查模块450将这些更新与游戏状态的本地副本相比较并且解决任何差异。例如，如果玩家的捡起项的请求初始地由权限模块450批准，但是来自服务器110的游戏更新指示在玩家尝试捡起该项之前，该项被另一玩家捡起(或其他方式使得项不可用)，权限检查模块450可以将指示项应当从玩家的库存中移除的更新发送到玩家的客户端130。
该处理可以针对位于接近由不同小区塔120所提供的覆盖之间的边界的客户端130来提供价值。在该情况中，连接到不同的小区塔120的玩家两者可以与相同的虚拟元素交互。因此，每个个体小区塔120可能初始地批准与元素冲突的交互，但是服务器110将检测冲突并且发送更新以解决冲突(例如，指示小区塔120中的一个小区塔以撤销它的动作的最初批准并且相应地更新它的本地游戏状态)。
本地数据存储460是被配置以存储由小区塔120使用的数据的一个或多个非暂态计算机可读介质。在一个实施例中，所存储的数据可以包括地图数据、当前情况数据、当前地所连接的客户端130的列表、P2P标志的列表、针对地理区域的游戏状态的本地拷贝等。虽然本地存储460被以单独实体示出，数据可以被跨多个存储介质被拆分。此外，一些数据可以被存储在通信网络的其他地方并且远程地访问。例如，小区塔120可以根据需要远程地访问当前情况数据(例如，从第三方服务器)。
示例方法
图5图示了根据一个实施例来提供共享AR体验的方法500。图5的步骤从执行方法500的边缘节点(例如，小区塔120)视角被图示。然而，步骤的一些或者所有步骤可以由其他实体或组件执行。另外，一些实施例可以并行地执行步骤、以不同顺序执行步骤、或者执行不同的步骤。
在图5中所示出的实施例中，方法500利用小区塔120接收510来自客户端130的连接请求开始。连接请求可以包括客户端130的标识符的一个或多个标识符、游戏的标识符、玩家标识符(例如，用户名)、针对客户端130的当前位置数据(例如，GPS位置)等。连接请求可以被拆分到多于一个的部分中。例如，客户端130可以首先建立与小区塔120的通信信道并且然后在客户端130上执行的AR游戏可以发送请求以加入共享AR会话以提供共享AR体验。
小区塔120针对客户端130标识520共享AR会话。特定的共享AR会话可以基于在客户端130上的特定AR游戏执行被选择，关于玩家的信息(例如，小区塔可以偏向连接具有他们的联系方式的玩家或者其他具有相似游戏中简档的玩家等)，已经连接到正在进行的AR会话的玩家的数目等。在一个实施例中，客户端130标识哪个共享AR会话以加入(例如，基于玩家输入)，该共享会话与小区塔120通信。注意，在某些情况下，仅单独的共享AR会话是可用的。在该情况中，小区塔120可以自动地将客户端130连接到该共享会话。
小区塔120向客户端130提供530针对共享AR会话的地图数据和本地游戏状态。在一个实施例中，小区塔使用从客户端130所接收的位置数据(例如，GPS数据)以标识可用的地图数据的子集以提供530到客户端。例如，小区塔120可以提供在客户端130的阈值距离之内的描述真实世界位置的地图数据。如之前所描述的，地图数据可以包括表示客户端130周围真实世界地理区域的一个或多个模型。客户端130使用地图数据以在共享AR会话之内定位客户端130并且基于本地游戏状态来呈现包括AR内容(例如，虚拟项、生物、符号等)的AR体验。
小区塔120接收540来自客户端130的动作请求。动作请求可以表示在玩家和AR体验中的内容之间的任何所期望的交互(诸如，虚拟项，虚拟角色，虚拟生物，或者其他玩家)。例如，玩家可以期望：捡起虚拟项、丢弃虚拟项、使用虚拟项、与虚拟项交互、与虚拟角色谈话、攻击虚拟生物、攻击另一玩家等。本领域技术人员将认识到取决于特定的AR游戏的性质，大范围的可能动作可以被执行。
小区塔120基于游戏状态请求来确定550针对动作的结果。取决于特定的动作，结果可以是基于具有各种复杂水平的一系列规则。例如，如果动作是捡起虚拟项，动作可以简单地成功除非小区塔确定另一玩家已经捡起、移动、或者摧毁该项。如之前所注意的，由于使用所公开的技术成功减少延迟，这可能是罕见发生的。相反地，如果动作是攻击虚拟生物，结果可以是基于计算和虚拟死亡角色集。本领域的技术人员将认识到大范围的可能的规则集和方式可以被使用以确定动作的结果。
小区塔120向所连接的客户端130提供560动作的结果。在一个实施例中，小区塔120将结果提供到所有连接到AR会话的客户端。在另一实施例中，小区塔120仅向执行动作的玩家的真实世界距离阈值(例如，一百米)之内的这些客户端提供结果。由于所公开的技术导致的延迟是相当地低的(例如，十微秒或者更少)，玩家可以体验基本上实时的动作结果。因此，玩家可以产生他们在共享AR体验中直接彼此交互的印象。
小区塔120利用由服务器110维护的主游戏状态验证570动作的结果。在一些实施例中，小区塔120将指示发送到服务器110以更新主游戏状态，该主游戏状态反映任何玩家在其本地游戏状态中所采取的动作，所提供的动作在主游戏状态的视角下被证明有效。在一个实施例中，小区塔120周期性地(例如，每一到十秒钟)验证它的本地游戏状态与主游戏状态相一致。如先前所描述的，这可能在小区塔120所覆盖的区域的边缘处特别地有用，以处理其中连接到不同小区塔120的玩家的动作可能彼此干扰的情况。如果在本地游戏数据状态和主游戏状态之间的差异被检测到，小区塔120可以将更新推送到所连接的客户端130以将他们的游戏状态同步到主状态。此外，在一些实施例中，小区塔120可以将动作和它的结果发送到用于验证的服务器，并且如果服务器指示该结果与主游戏状态冲突，小区塔120更新本地游戏状态以撤销结果。
计算系统示例
图6是根据实施例图示了适用于在图1中所示出的网络的计算环境100之内的示例计算机600的高级框图。示例计算机600包括至少一个耦合到芯片集604的处理器602。为了方便，处理器602指代单个实体，但是应当被理解，对应的功能可以分布在多个使用多种方法的处理器之间(包括使用多核处理器)，将特定的操作分配到专门的处理器(例如，图形处理单元)，并且跨分布式计算环境划分操作。任何对处理器602的参考应当被解释包括这样的架构。
芯片集604包括存储器控制器集线器620和输入/输出(I/O)控制器集线器622。存储器606和图形适配器612被耦合到存储器控制器集线器620，并且显示器618被耦合到图形适配器612。存储设备608、键盘610、指向设备614、以及网络适配器616被耦合到I/O控制器集线器622。其他计算机600的实施例具有不同的架构。
在图6示出的实施例中，存储设备608是非暂态计算机可读存储介质(诸如硬盘、光盘只读存储器(CD-ROM)、DVD、或者固态存储设备)。存储器606保存由处理器602使用的指令和数据。指向设备614是鼠标、轨迹球、触摸屏、或者其他类型的定点设备，并且与键盘610组合使用(其可以是屏幕键盘)以将数据输入到计算机系统600中。图形适配器612在显示器618上显示图像和其他信息。网络适配器616将计算机系统600耦合到一个或多个计算机网络。
由图1中实体所使用的计算机的类型可以取决于实施例和实体所需要的处理能力来变化。例如，处理器110可能包括多个服务器共同工作以提供所描述的功能的分布式数据库系统。此外，计算机可以缺少一些上面所描述的部件(诸如，键盘610、图像处理器612、以及显示器618)。
附加的考虑因素
上面的描述的部分描述了在算法处理或者操作的方面的实施例。这些算法描述和表示是数据处理领域中技术人员通常使用的，以有效地将他们工作的实质传达到本领域的其他技术人员。当从功能上、计算上、或者逻辑上描述这些操作时，其被理解为由计算机程序实现，该计算机程序包括用于由处理器或其他等同的电路、微代码等执行的指令。此外，在不丧失一般性的情况下，将这些功能操作安排称为模块有时也被证明是方便的。
如本文中所使用的，任何涉及“一个实施例”或“一实施例”意味着与被包括在至少一个实施例中的实施例相关联的特定的元素、特征、结构、或者特性。在说明书中的不同位置的出现的短语“在一个实施例中”不必然指代相同的实施例。
一些实施例可以使用表达“耦合”和“连接”和他们的派生词来描述。应当被理解，这些术语不旨在彼此作为同义词。例如，一些实施例可以使用术语“连接”来描述，以指示两个或多个元素是彼此直接物理或者电接触的。在另一实施例中，一些实施例可以使用术语“耦合”来描述，以指示两个或多个元素是直接物理或电接触。然而，术语“耦合”也可以意味着两个或多个元素不是直接相互接触，但是还是协作或者彼此交互。实施例不限于该上下文。
如本文中所使用的，术语“包括”、“包含”、“涵盖”、“含有”、“具有”、“拥有”或者任何其他他们的变型旨在覆盖非排他的包括。例如，包括元素的列表的过程、方法、制品、或者装置该列表不必然限于这些元素，而是可以包括没有明确列出的或者这种流程、方法、制品、或者装置固有的其他元素。此外，除非明确载明相反，“或者”指代包含的或者，而不是排他性的或者。例如，条件A或B由以下任一项满足：A为真(或者存在)并且B为假(或者不存在)，A为假(或者不存在)并且B为真(或者存在)，A和B都为真(或者存在)。
另外，“一”或者“一个”的使用被采用以描述实施例的元素和组件。这仅是为了方便，并且给出公开的普遍含义。本说明书应当被理解为包括一个或者至少一个，并且单数也包括复数，除非其明显另有含义。
最后，虽然特定的实施例和应用已经被图示和描述了，但是应当理解，这些实施例是说明性的。对于本领域技术人员来说，对所公开示例的各种修改、改变和变化是明显的。因此，不应当认为所公开的实施例限制了保护范围。相反，保护范围应当仅限于以下权利要求。

Claims (18)

1.一种用于由通信网络的边缘节点提供共享增强现实AR体验的方法，所述方法包括：
在边缘节点处接收来自客户端的连接请求；
基于所述连接请求来标识针对所述客户端的共享AR会话；
向所述客户端提供由所述共享AR会话提供的AR体验的、由所述边缘节点维护的地图数据和本地状态；
从所述客户端接收动作请求，所述动作请求指示与所述AR体验中的虚拟项的所期望的交互；
基于所述AR体验的所述本地状态来确定所述动作请求的结果；
基于与所述动作请求相关联的第一预定条件被满足，向被连接到所述边缘节点的多个客户端中的一个或多个客户端点对点地提供所述结果；以及
基于与所述动作请求相关联的第二预定条件被满足，向服务器提供所述结果。
2.根据权利要求1所述的方法，其中所述第一预定条件和所述第二预定条件中的每个预定条件与对应于所述动作请求的数据报文中的标志相关联。
3.根据权利要求2所述的方法，其中所述边缘节点维护标志列表，并且其中所述方法还包括：
基于与所述动作请求相对应的所述数据报文中的所述标志是否被包括在由所述边缘节点维护的所述标志列表中，向所述多个客户端中的一个或多个客户端点对点地提供所述结果。
4.根据权利要求1所述的方法，其中所述第一预定条件和所述第二预定条件中的每个预定条件与所述客户端的位置相关联。
5.根据权利要求1所述的方法，还包括：
在点对点地提供所述结果之后，利用由所述服务器维护的所述AR体验的主状态验证所述结果。
6.根据权利要求5所述的方法，其中所述主状态使用多个不同的本地状态而被计算，每个本地状态由不同真实世界位置处的不同边缘节点来维护。
7.根据权利要求5所述的方法，其中利用所述AR体验的所述主状态验证所述结果包括：
响应于从所述服务器接收到所述结果与所述主状态冲突的指示，更新所述本地状态以撤销所述结果；以及
向所述多个客户端中的所述一个或多个客户端中的每个客户端发送指示所述结果被撤销的更新。
8.根据权利要求5所述的方法，其中所述验证包括验证所述结果不与所述主状态冲突。
9.根据权利要求1所述的方法，其中所述边缘节点是被连接到所述多个客户端和所述服务器的小区塔。
10.根据权利要求1所述的方法，其中所述地图数据包括以下一个或多个：点云模型、平面匹配模型、线匹配模型、地理信息系统(GIS)模型、建筑物识别模型、以及景观识别模型。
11.一种用于由通信网络的边缘节点提供共享增强现实AR体验的方法，所述方法包括：
在边缘节点处接收来自客户端的连接请求；
基于所述连接请求来标识针对所述客户端的共享AR会话；
向所述客户端提供由所述共享AR会话提供的AR体验的、由所述边缘节点维护的地图数据和本地状态；
从所述客户端接收动作请求，所述动作请求指示与所述AR体验中的虚拟项的所期望的交互；
从所述共享AR会话的附加客户端接收附加动作请求，所述附加动作请求指示与所述AR体验中的所述虚拟项的所期望的交互；以及
基于与所述动作请求相关联的时间戳和与所述附加动作请求相关联的时间戳的比较，确定来自所述客户端的所述动作请求的结果和来自所述附加客户端的所述附加动作请求的结果。
12.根据权利要求11所述的方法，其中向被连接到所述边缘节点的多个客户端点对点地提供所述动作请求的所述结果和所述附加动作请求的所述结果。
13.根据权利要求12所述的方法，还包括：
在提供所述结果之后，利用由服务器维护的所述AR体验的主状态验证所述结果。
14.根据权利要求13所述的方法，其中利用所述AR体验的所述主状态验证所述结果包括：
响应于从所述服务器接收到所述结果与所述主状态冲突的指示，更新所述本地状态以撤销所述结果；以及
向所述多个客户端中的每个客户端发送指示所述结果被撤销的更新。
15.一种非暂态计算机可读存储介质，包括由处理器可执行的指令，所述指令包括：
用于在通信网络的边缘节点处从客户端接收连接请求的指令；
用于基于所述连接请求来标识针对所述客户端的共享AR会话的指令；
用于向所述客户端提供由所述共享AR会话提供的AR体验的、由所述边缘节点维护的地图数据和本地状态的指令；
用于从所述客户端接收动作请求的指令，所述动作请求指示与所述AR体验中的虚拟项的所期望的交互；
用于基于所述AR体验的所述本地状态来确定所述动作请求的结果的指令；
用于基于与所述动作请求相关联的第一预定条件被满足来向被连接到所述边缘节点的多个客户端中的一个或多个客户端点对点地提供所述结果的指令；以及
用于基于与所述动作请求相关联的第二预定条件被满足，向服务器提供所述结果的指令。
16.根据权利要求15所述的非暂态计算机可读存储介质，其中所述第一预定条件和所述第二预定条件中的每个预定条件与对应于所述动作请求的数据报文中的标志相关联。
17.根据权利要求16所述的非暂态计算机可读存储介质，其中所述边缘节点维护标志列表，并且其中所述指令还包括：
用于基于与所述动作请求相对应的所述数据报文中的所述标志是否被包括在由所述边缘节点维护的所述标志列表中来向所述多个客户端中的一个或多个客户端点对点地提供所述结果的指令。
18.一种非暂态计算机可读存储介质，包括由处理器可执行的指令，所述指令包括：
用于在通信网络的边缘节点处从客户端接收连接请求的指令；
用于基于所述连接请求来标识针对所述客户端的共享AR会话的指令；
用于向所述客户端提供由所述共享AR会话提供的AR体验的、由所述边缘节点维护的地图数据和本地状态的指令；
用于从所述客户端接收动作请求的指令，所述动作请求指示与所述AR体验中的虚拟项的所期望的交互；
用于从所述共享AR会话的附加客户端接收附加动作请求的指令，所述附加动作请求指示与所述AR体验中的所述虚拟项的所期望的交互；以及
用于基于与所述动作请求相关联的时间戳和与所述附加动作请求相关联的时间戳的比较，确定来自所述客户端的所述动作请求的结果和来自所述附加客户端的所述附加动作请求的结果的指令。
CN202410364300.1A 2019-02-25 2020-02-25 增强现实移动边缘计算 Pending CN118055131A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962810115P 2019-02-25 2019-02-25
US62/810,115 2019-02-25
CN202080028046.8A CN113728362B (zh) 2019-02-25 2020-02-25 增强现实移动边缘计算
PCT/IB2020/051614 WO2020174404A1 (en) 2019-02-25 2020-02-25 Augmented reality mobile edge computing

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202080028046.8A Division CN113728362B (zh) 2019-02-25 2020-02-25 增强现实移动边缘计算

Publications (1)

Publication Number Publication Date
CN118055131A true CN118055131A (zh) 2024-05-17

Family

ID=72142647

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202410364300.1A Pending CN118055131A (zh) 2019-02-25 2020-02-25 增强现实移动边缘计算
CN202080028046.8A Active CN113728362B (zh) 2019-02-25 2020-02-25 增强现实移动边缘计算

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202080028046.8A Active CN113728362B (zh) 2019-02-25 2020-02-25 增强现实移动边缘计算

Country Status (9)

Country Link
US (2) US11420116B2 (zh)
EP (1) EP3918579A4 (zh)
JP (2) JP7185068B2 (zh)
KR (1) KR102577903B1 (zh)
CN (2) CN118055131A (zh)
AU (2) AU2020228333B2 (zh)
CA (2) CA3218625A1 (zh)
TW (1) TWI849064B (zh)
WO (1) WO2020174404A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11077365B2 (en) * 2018-06-27 2021-08-03 Niantic, Inc. Low latency datagram-responsive computer network protocol
KR102577903B1 (ko) 2019-02-25 2023-09-14 나이앤틱, 인크. 증강 현실 모바일 에지 컴퓨팅
TWI756998B (zh) 2019-12-20 2022-03-01 美商尼安蒂克公司 用於資料傳輸路徑選擇之資料階層協定
US11717753B2 (en) * 2020-09-29 2023-08-08 Activision Publishing, Inc. Methods and systems for generating modified level of detail visual assets in a video game
US11724188B2 (en) * 2020-09-29 2023-08-15 Activision Publishing, Inc. Methods and systems for selecting a level of detail visual asset during the execution of a video game
US11833423B2 (en) 2020-09-29 2023-12-05 Activision Publishing, Inc. Methods and systems for generating level of detail visual assets in a video game
JP6913809B1 (ja) * 2020-10-21 2021-08-04 株式会社Ｃｙｇａｍｅｓ ゲームシステム、エッジ側サーバ、クラウド側サーバ、ゲーム端末及びゲーム制御方法
US20220147616A1 (en) * 2020-11-11 2022-05-12 Red Hat, Inc. Implementing trusted clients using secure execution environments
CN113628347B (zh) * 2021-07-16 2024-07-02 炫彩互动网络科技有限公司 基于边缘计算的云ar实景共享方法及系统
CN113706721A (zh) * 2021-09-07 2021-11-26 中国计量大学 一种基于增强现实技术的电梯检验方法及系统
TWI823146B (zh) * 2021-09-14 2023-11-21 仁寶電腦工業股份有限公司 用於即時mr互動應用之邊緣渲染運算方法及系統
CN115242774B (zh) * 2022-06-24 2024-09-03 浪潮通信技术有限公司 边缘计算网关配置传输方法及装置
TWI817825B (zh) * 2022-11-11 2023-10-01 財團法人資訊工業策進會 擴增實境互動系統、伺服器以及行動裝置
WO2024143659A1 (ko) * 2022-12-28 2024-07-04 서울과학기술대학교 산학협력단 콘텐츠 시각화 시스템 및 방법

Family Cites Families (62)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6473404B1 (en) 1998-11-24 2002-10-29 Connect One, Inc. Multi-protocol telecommunications routing optimization
US6865169B1 (en) 1999-11-02 2005-03-08 Ipwireless, Inc. Cellular wireless internet access system using spread spectrum and internet protocol
TW463840U (en) 2000-05-26 2001-11-11 Great Asia Engineering Consult Construction device for retaining wall and foundation pile of caisson type
SE520129C2 (sv) 2000-10-27 2003-05-27 Terraplay Systems Ab Kommunikationsinfrastrukturanordning i och en datorläsbar programprodukt för ett databearbetningssystem för fleranvändarapplikationer
US7616961B2 (en) 2002-04-29 2009-11-10 Harris Corporation Allocating channels in a mobile ad hoc network
US8149707B2 (en) 2003-02-12 2012-04-03 Rockstar Bidco, LP Minimization of radio resource usage in multi-hop networks with multiple routings
EP1678886B1 (en) 2003-10-27 2009-02-18 Nokia Corporation Method and devices for relayed peer-to-peer communications between terminals in mobile networks
US20170310500A1 (en) 2005-03-16 2017-10-26 Icontrol Networks, Inc. Controlling Data Routing in Premises Management Systems
WO2006125454A1 (en) 2005-05-23 2006-11-30 Telefonaktiebolaget L.M. Ericsson (Publ.) Traffic diversion in an ethernet-based access network
US20070104190A1 (en) 2005-11-07 2007-05-10 Nokia Corporation User datagram protocol packet processing on network elements
US7839815B2 (en) 2006-02-10 2010-11-23 Alcatel-Lucent Usa Inc. Triggering migration of a network access agent associated with an access terminal
US7780522B2 (en) 2007-02-23 2010-08-24 Cfph, Llc Game at cash register
US8787366B2 (en) 2007-06-29 2014-07-22 Qualcomm Incorporated Community driven program access system and method
US8407605B2 (en) * 2009-04-03 2013-03-26 Social Communications Company Application sharing
EP2225664A4 (en) 2007-11-29 2010-11-10 Bigfoot Networks Inc TELEPHONE GUIDANCE GUIDANCE APPARATUS AND METHOD THEREFOR
US8654709B2 (en) 2008-04-29 2014-02-18 Nokia Siemens Networks Oy Decentrallizing core network functionalities
US8619756B2 (en) 2009-07-15 2013-12-31 Qualcomm Incorporated Systems and methods for providing resource allocation meeting communication constraints for multi-hop network data flows
US9992762B2 (en) 2010-02-25 2018-06-05 James Michael Graziano Reverse path communication system
JP2011188358A (ja) 2010-03-10 2011-09-22 Panasonic Corp Ｖｐｎ装置及びｉｐ通信装置
US8402515B2 (en) 2010-05-06 2013-03-19 Jonathan Weizman Apparatus and method for establishing a peer-to-peer communication session with a client device
JP5507350B2 (ja) 2010-06-11 2014-05-28 任天堂株式会社 携帯型情報端末、携帯型情報端末制御プログラム、携帯型情報システム、および、携帯型情報端末制御方法
KR101763887B1 (ko) 2011-01-07 2017-08-02 삼성전자주식회사 디바이스간 동기화된 인터랙션을 제공하는 콘텐츠 동기화 장치 및 방법
KR101292463B1 (ko) * 2011-01-27 2013-07-31 주식회사 팬택 원격으로 증강현실 서비스를 공유하는 증강현실 시스템 및 그 방법
CA2827776C (en) 2011-02-21 2016-07-26 Research In Motion Limited On the managed peer-to-peer sharing in cellular networks
CN102843349B (zh) 2011-06-24 2018-03-27 中兴通讯股份有限公司 实现移动增强现实业务的方法及系统、终端及服务器
US20130034047A1 (en) 2011-08-05 2013-02-07 Xtreme Labs Inc. Method and system for communicating with web services using peer-to-peer technology
CN102984186A (zh) 2011-09-05 2013-03-20 中兴通讯股份有限公司 会话建立方法及装置
RU2621633C2 (ru) * 2011-10-28 2017-06-06 Мэджик Лип, Инк. Система и способ для дополненной и виртуальной реальности
CA2857961A1 (en) 2011-12-02 2013-06-06 No Strings Toys, Llc Wireless devices and control method
US20130178257A1 (en) * 2012-01-06 2013-07-11 Augaroo, Inc. System and method for interacting with virtual objects in augmented realities
JP6048784B2 (ja) 2012-02-16 2016-12-21 任天堂株式会社 ゲームシステム、ゲーム制御方法、携帯型ゲーム装置及びゲーム制御プログラム
EP2645667A1 (en) 2012-03-27 2013-10-02 Alcatel-Lucent Apparatus for updating and transmitting augmented reality data
US20140015858A1 (en) 2012-07-13 2014-01-16 ClearWorld Media Augmented reality system
US9148484B2 (en) 2013-07-15 2015-09-29 Federico Fraccaroli Method, system and apparatus for providing a mediated sensory experience to users positioned in a shared location
WO2014031899A1 (en) 2012-08-22 2014-02-27 Goldrun Corporation Augmented reality virtual content platform apparatuses, methods and systems
CN102968549B (zh) * 2012-10-17 2016-01-20 北京大学 基于智能移动终端设备的多人在线交互方法与系统
AU2014204252B2 (en) 2013-01-03 2017-12-14 Meta View, Inc. Extramissive spatial imaging digital eye glass for virtual or augmediated vision
GB2513345B (en) 2013-04-23 2017-07-26 Gurulogic Microsystems Oy Data communication system and method
US9413797B2 (en) 2013-04-23 2016-08-09 Gurulogic Microsystems Oy Data communication system and method
KR20160092014A (ko) * 2013-12-01 2016-08-03 인터디지탈 패튼 홀딩스, 인크 정책 기반 결정 엔진을 사용하는 경험 품질 최적화
CN103760972B (zh) * 2013-12-18 2017-03-01 微软技术许可有限责任公司 跨平台的增强现实体验
US10142444B2 (en) 2014-07-01 2018-11-27 Trinity Mobile Networks, Inc. Methods, devices, and systems for implementing centralized hybrid wireless self-organizing networks
KR101608172B1 (ko) 2014-12-22 2016-03-31 주식회사 넥슨코리아 객체를 제어하는 방법 및 장치
US11627639B2 (en) 2015-01-26 2023-04-11 Ievgen Verzun Methods and apparatus for HyperSecure last mile communication
JP5937709B1 (ja) 2015-01-29 2016-06-22 エヌ・ティ・ティ・コミュニケーションズ株式会社 通信制御装置、通信制御方法及び通信制御プログラム
SG10201505822UA (en) 2015-07-27 2017-02-27 Huawei Internat Pte Ltd A policy aware unified file system
US10382322B2 (en) 2015-11-20 2019-08-13 Sap Se Data routing for electronic devices
US10201755B2 (en) * 2016-02-25 2019-02-12 Pick A Play Networks Inc. System and method for providing a platform for real time interactive game participation
US10238965B2 (en) 2016-04-28 2019-03-26 Sony Interactive Entertainment America Llc Cloud gaming device handover
KR101940720B1 (ko) * 2016-08-19 2019-04-17 한국전자통신연구원 공간 기반 증강현실을 위한 콘텐츠 저작 장치 및 그 방법
US10812936B2 (en) 2017-01-23 2020-10-20 Magic Leap, Inc. Localization determination for mixed reality systems
CN106656800B (zh) 2017-02-21 2020-04-14 网宿科技股份有限公司 一种路径选取方法及系统、网络加速节点及网络加速系统
US20180262432A1 (en) 2017-03-10 2018-09-13 Vidscale, Inc. Vertical packet aggregation using a distributed network
JP6872631B2 (ja) 2017-03-23 2021-05-19 ヴィド スケール インコーポレイテッド ３６０度適応ストリーミングのエクスペリエンスを改善するためのメトリックおよびメッセージ
CN110691634A (zh) 2017-06-08 2020-01-14 索尼公司 信息处理设备、信息处理方法和程序
US10885714B2 (en) 2017-07-07 2021-01-05 Niantic, Inc. Cloud enabled augmented reality
JP6598863B2 (ja) 2017-07-14 2019-10-30 ガンホー・オンライン・エンターテイメント株式会社 サーバ装置、プログラム及び方法
US10717005B2 (en) 2017-07-22 2020-07-21 Niantic, Inc. Validating a player's real-world location using activity within a parallel reality game
US11077365B2 (en) * 2018-06-27 2021-08-03 Niantic, Inc. Low latency datagram-responsive computer network protocol
US10911381B2 (en) * 2018-12-27 2021-02-02 Verizon Media Inc. Presenting and sharing augmented reality objects
KR102577903B1 (ko) 2019-02-25 2023-09-14 나이앤틱, 인크. 증강 현실 모바일 에지 컴퓨팅
US11182966B2 (en) * 2019-06-24 2021-11-23 At&T Intellectual Property I, L.P. System for collaboration of augmented reality events

Also Published As

Publication number Publication date
JP7185068B2 (ja) 2022-12-06
JP7518139B2 (ja) 2024-07-17
JP2022523215A (ja) 2022-04-21
CA3130880C (en) 2024-01-02
KR20230132894A (ko) 2023-09-18
JP2023029888A (ja) 2023-03-07
WO2020174404A1 (en) 2020-09-03
US20220355195A1 (en) 2022-11-10
US20200269132A1 (en) 2020-08-27
US11420116B2 (en) 2022-08-23
AU2020228333B2 (en) 2023-05-25
AU2020228333A1 (en) 2021-10-28
CA3218625A1 (en) 2020-09-03
EP3918579A4 (en) 2022-04-13
AU2023219969A1 (en) 2023-09-14
CA3130880A1 (en) 2020-09-03
CN113728362B (zh) 2024-04-16
TWI849064B (zh) 2024-07-21
US11794101B2 (en) 2023-10-24
CN113728362A (zh) 2021-11-30
KR102577903B1 (ko) 2023-09-14
EP3918579A1 (en) 2021-12-08
KR20210121289A (ko) 2021-10-07
TW202040981A (zh) 2020-11-01

Similar Documents

Publication Publication Date Title
CN113728362B (zh) 增强现实移动边缘计算
CN112352413B (zh) 低时延数据报响应的计算机网络协议
KR102722069B1 (ko) 증강 현실 모바일 에지 컴퓨팅
US20220407804A1 (en) Routing using partial message parsing

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination