CN116601546A - 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 - Google Patents

将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 Download PDF

Info

Publication number
CN116601546A
CN116601546A CN202280007867.2A CN202280007867A CN116601546A CN 116601546 A CN116601546 A CN 116601546A CN 202280007867 A CN202280007867 A CN 202280007867A CN 116601546 A CN116601546 A CN 116601546A
Authority
CN
China
Prior art keywords
media content
5gmsd
media
stream
scene description
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280007867.2A
Other languages
English (en)
Inventor
伊拉吉·索达加
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent America LLC
Original Assignee
Tencent America LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent America LLC filed Critical Tencent America LLC
Publication of CN116601546A publication Critical patent/CN116601546A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/1059—End-user terminal functionalities specially adapted for real-time communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/10—Architectures or entities
    • H04L65/1063—Application servers providing network services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/612—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for unicast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/131—Protocols for games, networked simulations or virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/2869—Terminals specially adapted for communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W48/00—Access restriction; Network selection; Access point selection
    • H04W48/17—Selecting a data network PoA [Point of Attachment]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2210/00—Indexing scheme for image generation or computer graphics
    • G06T2210/08—Bandwidth reduction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/06—Selective distribution of broadcast services, e.g. multimedia broadcast multicast service [MBMS]; Services to user groups; One-way selective calling services

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Security & Cryptography (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

提供了一种方法。该方法包括：选择包括完整场景描述的媒体内容；基于完整场景描述，选择第五代(5G)媒体流式传输下行链路(5GMSd)应用服务器(AS)来流式传输媒体内容；基于完整场景描述，导出简化的场景描述；以及基于简化的场景描述，创建增强现实(AR)/混合现实(MR)会话。

Description

将动态5G AR/MR体验流式传输到具有可更新场景的5G设备的 方法
相关申请的交叉引用
本申请要求于2021年11月3日在美国专利商标局提交的美国临时申请No.63/275,358的优先权，该专利申请的全部内容通过引用整体并入本文中。
技术领域
本申请总体上涉及第五代(5G)增强现实(AR)/混合现实(MR)，更具体地，涉及一种用于向其中场景被动态更新的5G设备提供AR/MR内容的方法和装置。
背景技术
第三代合作伙伴项目(3GPP)TS26.501定义了用于第五代(5G)网络的媒体流式传输架构。3GPP发布了一份关于支持增强现实(AR)/混合现实(MR)应用的技术报告。3GPP TR26.998定义了5G网络中对眼镜式(glass-type)AR/MR设备的支持。考虑了两种设备类别：完全能够解码和播放复杂AR/MR内容的设备(即，独立AR(stand-alone AR，STAR))；以及具有较小计算资源和/或较小物理尺寸(即，较小电池)、且只有在5G边缘服务器、网络或云上而不是在设备上执行较大部分计算时才能够运行此类应用的设备(边缘相关AR(edgedependent AR，EDGAR))。然而，EDGAR设备的调用流不支持场景更新。
发明内容
根据本公开的一个方面，一种方法可以包括：选择包括完整场景描述的媒体内容；基于完整场景描述，选择5G媒体流式传输下行链路(5th generation(5G)media streamingdownlink，5GMSd)应用服务器(application server，AS)以流式传输媒体内容；基于完整场景描述，导出简化的场景描述；以及基于简化的场景描述，创建增强现实(augmentedreality，AR)/混合现实(mixed reality，MR)会话。
根据本公开的一个方面，一种设备可以包括：至少一个存储器，配置为存储程序代码；以及至少一个处理器，配置为读取程序代码并按照程序代码的指示操作，程序代码包括：第一选择代码，配置为使得至少一个处理器选择包括完整场景描述的媒体内容；第二选择代码，配置为使得至少一个处理器基于完整场景描述选择5GMSd AS以流式传输媒体内容；第一导出代码，配置为使得至少一个处理器基于完整场景描述导出简化的场景描述；以及第一创建代码，配置为使得至少一个处理器基于简化的场景描述创建AR/MR会话。
根据本公开的一个方面，一种非暂时性计算机可读介质可以存储指令，指令包括一个或多个指令，该一个或多个指令当由设备的一个或多个处理器执行时，使得一个或多个处理器：选择包括完整场景描述的媒体内容；基于完整场景描述，选择5GMSd AS以流式传输媒体内容；基于完整场景描述，导出简化的场景描述；以及基于简化的场景，描述创建AR/MR会话。
附图说明
通过以下详细描述和附图，所公开的主题的其他特征、性质和各种优势将更加明显，在附图中：
图1是根据实施例的可以在其中实现本文描述的方法、装置和系统的环境的示图。
图2是图1的一个或多个设备的示例组件的框图。
图3是根据实施例的用于媒体上行链路流式传输的媒体架构的示图。
图4是根据实施例的用于媒体下行链路流式传输的媒体架构的示图。
图5A和图5B是根据实施例的边缘相关增强现实(AR)(EDGAR)第五代媒体流式传输下行链路(5GMSd)下载架构的示图。
图6A、图6B和图6C是根据实施例的基于EDGAR的5G下行链路流式传输的操作流程的示图。
图7是根据实施例的用于基于EDGAR的5G下行链路流式传输的方法的流程图。
具体实施例
图1是根据实施例的可以在其中实现本文所描述的方法、装置和系统的环境100的示图。如图1所示，环境100可以包括用户设备110、平台120和网络130。环境100的设备可以通过有线连接、无线连接或有线和无线连接的组合进行互连。
用户设备110包括一个或多个设备，该一个或多个设备能够接收、生成、存储、处理和/或提供与平台120相关的信息。例如，用户设备110可以包括计算设备(例如，台式计算机、膝上型计算机、平板计算机、手持式计算机、智能扬声器、服务器等)、移动电话(例如，智能电话、无线电话等)、可穿戴设备(例如，智能眼镜或智能手表)或类似设备。在一些实现方式中，用户设备110可以从平台120接收信息和/或向平台120发送信息。
平台120包括如本文其它位置所描述的一个或多个设备。在一些实现方式中，平台120可包括云服务器或一组云服务器。在一些实现方式中，平台120可设计成模块化平台，使得软件组件可根据特定需要被调入或调出。因此，平台120可针对不同用途而容易地和/或快速地重新配置。
在一些实现方式中，如图所示，平台120可驻留在云计算环境122中。应注意，虽然本文描述的实现方式将平台120描述成驻留在云计算环境122中，但是在一些实现方式中，平台120可以不基于云(即，可以在云计算环境之外实现)或者可部分地基于云。
云计算环境122包括托管平台120的环境。云计算环境122可提供不需要终端用户(例如，用户设备110)知道托管平台120的系统和/或设备的物理位置和配置的计算、软件、数据访问、存储等服务。如图所示，云计算环境122可包括一组计算资源124(统称为“计算资源124”，单独称为“计算资源124”)。
计算资源124包括一个或多个个人计算机、工作站计算机、服务器设备或其它类型的计算和/或通信设备。在一些实现方式中，计算资源124可控制平台120。云资源可包括在计算资源124中运行的计算实例、在计算资源124中提供的存储设备、由计算资源124提供的数据传输设备等。在一些实现方式中，计算资源124可经由有线连接、无线连接或者有线连接和无线连接的组合与其它计算资源124通信。
如图1进一步所示，计算资源124包括一组云资源，例如一个或多个应用程序(“APP”)124-1、一个或多个虚拟机(“VM”)124-2、虚拟化存储器(“VS”)124-3、一个或多个管理程序(“HYP”)124-4等。
应用程序124-1包括可提供给用户设备110和/或平台120或者由用户设备110和/或平台120访问的一个或多个软件应用程序。应用程序124-1可消除在用户设备110上安装和运行软件应用程序的需要。例如，应用程序124-1可包括与平台120相关联的软件和/或能够经由云计算环境122提供的任何其它软件。在一些实现方式中，一个应用程序124-1可经由虚拟机124-2向一个或多个其它应用程序124-1发送信息/从一个或多个其它应用程序124-1接收信息。
虚拟机124-2包括像物理机那样运行程序的机器(例如计算机)的软件实现。根据虚拟机124-2对任何实机的对应程度和用途，虚拟机124-2可以是系统虚拟机或过程虚拟机。系统虚拟机可提供支持完整操作系统(OS)的运行的完整系统平台。过程虚拟机可运行单个程序，且可支持单个进程。在一些实现方式中，虚拟机124-2可代表用户(例如用户设备110)来运行，且可管理云计算环境122的基础设施，例如数据管理、同步或长时间数据传输。
虚拟化存储器124-3包括在计算资源124的存储系统或设备内使用虚拟化技术的一个或多个存储系统和/或一个或多个设备。在一些实现方式中，在存储系统的上下文中，虚拟化的类型可包括块虚拟化和文件虚拟化。块虚拟化可指的是逻辑存储从物理存储的抽象化(或分离)，使得可以在不考虑物理存储或异构结构的情况下访问存储系统。分离可允许存储系统的管理员在管理员如何管理终端用户的存储方面具有灵活性。文件虚拟化可消除以文件级访问的数据和物理地存储文件的位置之间的依赖性。这可实现存储器使用、服务器整合和/或无中断文件迁移性能的优化。
管理程序124-4可提供硬件虚拟化技术，硬件虚拟化技术允许多个操作系统(例如“客户操作系统”)同时在主控计算机(例如计算资源124)上运行。管理程序124-4可以给客户操作系统呈现虚拟操作平台，且可管理客户操作系统的运行。各种操作系统的多个实例可共享虚拟化硬件资源。
网络130包括一个或多个有线网络和/或无线网络。例如，网络130可包括蜂窝网络(例如第五代(5G)网络、长期演进(LTE)网络、第三代(3G)网络、码分多址(CDMA)网络等)、公共陆地移动网络(PLMN)、局域网(LAN)、广域网(WAN)、城域网(MAN)、电话网(例如公共交换电话网(PSTN))、专用网络、自组织网络、内部网、因特网、基于光纤的网络等，和/或这些网络或其它类型网络的组合。
图1所示的设备和网络的数量和布置作为示例提供。在实践中，可存在额外的设备和/或网络、更少的设备和/或网络、不同的设备和/或网络、或与图1所示的设备和/或网络不同地布置的设备和/或网络。此外，图1所示的两个或更多个设备可以在单个设备内实现，或者图1所示的单个设备可实现为多个分布式设备。另外或者替代地，环境100的一组设备(例如，一个或多个设备)可执行被描述成由环境100的另一组设备执行的一个或多个功能。
图2是图1的一个或多个设备的示例组件的框图。设备200可对应于用户设备110和/或平台120。如图2所示，设备200可包括总线210、处理器220、存储器230、存储组件240、输入组件250、输出组件260和通信接口270。
总线210包括允许设备200的组件之间通信的组件。处理器220以硬件、固件或硬件和软件的组合来实现。处理器220是中央处理单元(CPU)、图形处理单元(GPU)、加速处理单元(APU)、微处理器、微控制器、数字信号处理器(DSP)、现场可编程门阵列(FPGA)、专用集成电路(ASIC)或另一类型的处理组件。在一些实现方式中，处理器220包括能够被编程以执行功能的一个或多个处理器。存储器230包括随机存取存储器(RAM)、只读存储器(ROM)，和/或存储供处理器220使用的信息和/或指令的另一类型的动态或静态存储设备(例如，闪存、磁性存储器和/或光学存储器)。
存储组件240存储与设备200的操作和使用相关的信息和/或软件。例如，存储组件240可包括硬盘(例如，磁盘、光盘、磁-光盘和/或固态盘)、紧凑盘(CD)、数字多功能盘(DVD)、软盘、盒式磁盘、磁带和/或另一类型的非暂时性计算机可读介质、以及相应的驱动器。
输入组件250包括允许设备200例如经由用户输入(例如，触摸屏显示器、键盘、小键盘、鼠标、按钮、开关和/或麦克风)接收信息的组件。另外或者替代地，输入组件250可包括用于感测信息的传感器(例如，全球定位系统(GPS)组件、加速度计、陀螺仪和/或致动器)。输出组件260包括提供来自设备200的输出信息的组件(例如，显示器、扬声器和/或一个或多个发光二极管(LED))。
通信接口270包括类收发器的组件(例如收发器和/或单独的接收器和发射器)，其使得设备200能够例如经由有线连接、无线连接或者有线连接和无线连接的组合与其它设备通信。通信接口270可允许设备200接收来自另一设备的信息和/或向另一设备提供信息。例如，通信接口270可包括以太网接口、光学接口、同轴接口、红外接口、射频(RF)接口、通用串行总线(USB)接口、Wi-Fi接口、蜂窝网络接口等。
设备200可执行本文描述的一个或多个过程。设备200可响应于处理器220运行由诸如存储器230和/或存储组件240之类的非暂时性计算机可读介质存储的软件指令来执行这些过程。计算机可读介质在本文中定义为非暂时性存储器设备。存储器设备包括单个物理存储设备内的存储器空间或散布在多个物理存储设备上的存储器空间。
软件指令可经由通信接口270从另一计算机可读介质或从另一设备读入存储器230和/或存储组件240中。当运行时，存储在存储器230和/或存储组件240中的软件指令可使得处理器220执行本文描述的一个或多个过程。另外或者替代地，可使用硬连线电路来代替软件指令或者与软件指令组合，以执行本文描述的一个或多个过程。因此，本文描述的实现方式不限于硬件电路和软件的任何特定组合。
图2所示的组件的数量和布置作为示例提供。在实践中，设备200可包括额外的组件、更少的组件、不同的组件、或与图2所示的组件不同地布置的组件。另外或者替代地，设备200的一组组件(例如，一个或多个组件)可执行被描述成由设备200的另一组组件执行的一个或多个功能。
5G媒体流式传输(5G media streaming，5GMS)系统可以是5G媒体流式传输架构的应用功能(AF)、应用服务器和接口的集合(assembly)，其支持下行链路媒体流式传输服务、或支持上行链路媒体流式传输服务、或支持两者。5GMS应用提供商可以包括与5GMS系统的功能交互、并提供与5GMS系统的功能交互的5GMS感知应用(Aware Application)的一方。5GMS感知应用可以指由5GMS应用提供商提供的用户设备(User Equipment，UE)中的应用，该应用包含5GMS应用服务的服务逻辑，并且经由5GMS架构中定义的接口和应用编程接口(Application Programming Interfaces，API)与其它5GMS客户端和网络功能交互。5GMS客户端可以指一个UE功能，其既可以是5GMS下行链路(5GMS downlink，5GMSd)客户端，也可以是5GMS上行链路(5GMS uplink，5GMSu)客户端，或者两者兼有。
5GMSd客户端可以指UE功能，该UE功能至少包括5G媒体流式传输播放器和用于下行链路流式传输的媒体会话处理器(media session handler)，并且可以通过明确定义的接口/API来访问。5GMSu客户端可以指可以通过明确定义的接口/API访问的5GMSu服务的发起者。5GMSu流媒体播放器(media streamer)可以指UE功能，该UE功能使得能够将流式传输媒体内容上行递送到5GMS应用提供商的应用服务器(Application Server，AS)功能，并且与用于媒体捕获和后续流式传输的5GMSu感知应用以及用于媒体会话控制的媒体会话处理器交互。
动态策略可以指在媒体会话期间用于上行链路、或下行链路应用流(applicationflow)的动态策略和计费控制(Policy and Charging Control，PCC)规则。排出会话(EgestSession)可以指从5GMS AS到5GMSu应用提供商的上行链路媒体流式传输会话(uplinkmedia streaming session)。接入会话(ingest session)可以指将媒体内容上传到5GMSdAS的会话。策略模板(policy template)可以指(半静态)策略、或控制功能(PCF)/网络开放功能(Network Exposure Function，NEF)API参数的集合，这些参数专用于5GMS应用提供商以及由此产生的PCC规则。策略模板ID可以识别期望的策略模板，该期望的策略模板由5GMSd应用功能(Application Function，AF)使用为5G系统选择适当的PCF/NEF API，使得PCF能够编译期望的PCC规则。媒体播放器条目(Media Player Entry)可以指一个文档、或指向定义媒体呈现(media presentation)(例如，DASH的媒体呈现描述(MediaPresentation Description，MPD)或视频剪辑文件(video clip file)的统一资源定位符(Uniform Resource Locator，URL))的文档的指针。媒体流条目(Media Streamer Entry)可以指定义上行链路媒体流式传输会话的入口点(entry point)的指针(例如，以URL的形式)。表示条目(presentation entry)可以指文档、或指向定义应用呈现(applicationpresentation)的文档(比如，HTML5文档)的指针。
调配会话(provisioning session)可以指由5GMSd应用提供商在接口(M1d)处提供的数据结构，该5GMSd应用提供商配置与一组5GMSd感知应用相关的5GMSd特征。5GMSd媒体播放器可以指UE功能，该UE功能基于媒体播放条目(media play entry)启用媒体呈现的播放和渲染，并向5GMSd感知应用公开一些基本控件，例如，播放、暂停、搜索、停止。服务器访问信息可以指激活接收流式传输会话所需的一组参数和地址(包括5GMSd AF和5GMSd AS地址)。服务和内容发现可以指由5GMSd应用提供商向5GMS感知应用提供的功能和程序，该功能和程序使得终端用户能够发现可用的流式传输服务和内容产品(contentofferings)，并且选择特定的服务或内容项进行访问。服务通告(service announcement)可以指在5GMS感知应用与5GMS应用提供商之间执行的程序，使得5GMS感知应用能够直接、或以引用该信息的形式获得5GMS服务访问信息。
第三方播放器可以指应用程序的一部分，其使用API来执行选定的5GMSd功能以回放媒体内容。第三方上行链路流媒体(third party uplink streamer)可以指应用程序的一部分，其使用API来执行选定的5GMSu功能以捕获和流式传输媒体内容。
图3是根据实施例的用于媒体上行链路流式传输的媒体架构300的示图。5GMSu应用提供商301可以使用5GMSu进行上行链路流式传输服务。5GMSu应用提供商301可以提供UE303上的5GMSu感知应用302，以使用5GMSu客户端304以及使用5GMSu中定义的接口和API的网络功能。5GMSu AS可以是专用于5G媒体上行链路流式传输的AS。5GMSu客户端304可以是专用于5G媒体上行链路流式传输的UE 303内部功能。
5GMSu AF 306和5GMSu AS 305可以是数据网络(Data Network，DN)307功能。可信DN(trusted DN)中的功能可以被运营商的网络信任。因此，可信DN中的AF可以直接与所有5G核心功能通信。外部DN(external DN)中的功能可以使用链路320经由NEF 308仅与5G核心功能通信。
媒体架构300可以连接UE 303内部功能和用于5G媒体上行链路流式传输的相关网络功能。相应地，媒体架构300可以包括多个功能。例如，UE 303上的5GMSu客户端304可以是可通过接口/API访问的5GMSu服务的发起者。5GMSu客户端304可以包括两个子功能，媒体会话处理器(media session handler)309和流媒体播放器(media streamer)310。媒体会话处理器309可以与5GMSu AF 306通信，以便建立、控制和支持媒体会话的递送。媒体会话处理器309可以开放由5GMSu感知应用302使用的API。流媒体播放器310可以与5GMSu AS 305通信，以便流式传输媒体内容，并且向5GMSu感知应用302提供用于媒体捕获和流式传输的服务，并向媒体会话处理器309提供用于媒体会话控制的服务。5GMSu感知应用302可以通过实现外部应用、或内容服务提供商专用逻辑(content service provider specificlogic)，并启用媒体会话的建立来控制5GMSu客户端304。5GMSu AS 305可以托管5G媒体功能，并且可以实现为例如内容分发网络(content delivery network，CDN)。5GMSu应用提供商301可以是使用5GMSu从5GMSu感知应用302流式传输媒体的外部应用或内容特定的媒体功能(content specific media functionality)，例如，媒体存储、消耗、转码和重新分发。5GMSu AF 306可以向UE 303的媒体会话处理器309，和/或，5GMSu应用提供商301提供各种控制功能。5GMSu AF 306可以中继、或发起对不同PCF 311处理的请求或与其它网络功能交互。
媒体架构300可以包括多个不同的接口。例如，链路321可以与M1u相关，M1u可以是由5GMSu AF 306开放的5GMSu调配API，以调配媒体架构300的使用并获得反馈。链路322可以与M2u相关，M2u可以是由5GMSu AS 305开放的5GMSu发布API，并且当选择可信DN(例如DN307)中的5GMSu AS 305来接收流式传输服务的内容时使用。链路323可以与M3u相关，M3u可以是一个内部API，用于在诸如DN 307之类的可信DN内交换针对5GMSu AS 305托管内容的信息。链路324可以与M4u相关，M4u可以是由5GMSu AS 323向流媒体播放器310开放的媒体上行链路流式传输API，以流式传输媒体内容。链路325可以与M5u相关，M5u可以是由5GMSuAF 305向媒体会话处理器开放的媒体会话处理API，以用于媒体会话处理、控制和辅助，媒体会话处理、控制和辅助还包括适当的安全机制，例如，授权和认证。链路326可以与M6u相关，M6u可以是由媒体会话处理器309向5GMSu感知应用302开放、以使用5GMSu功能的UE 303媒体会话处理API。链路327可以与M7u相关，M7u可以是由流媒体播放器310向5GMSu感知应用302和媒体会话处理器309开放、以使用流媒体播放器310的UE流媒体播放器API。链路328可以与M8u相关，M8u可以是用于5GMSu感知应用302与5GMSu应用提供商301之间的信息交换的应用API，例如，向5GMSu感知应用302提供服务访问信息。UE 303也可以以自包含的方式实现，以不开放接口M6u 326和M7u 327。
图4是根据实施例的用于媒体下行链路流式传输的媒体架构400的示图。5GMSd应用提供商401可以使用5GMSd进行下行链路流式传输服务。5GMSd应用提供商401可以在UE403上提供5GMSd感知应用402，以通过5GMSd中定义的接口和API使用5GMSd客户端404和网络功能。5GMSd AS可以是专用于5G媒体下行链路流式传输的AS。5GMSd客户端404可以是专用于5G媒体下行链路流式传输的UE 403内部功能。
5GMSd AF 406和5GMSd AS 405可以是DN 407功能。可信DN中的功能可以被运营商的网络信任。因此，可信DN中的AF可以直接与所有5G核心功能通信。外部DN中的功能可以使用链路420经由NEF 408仅与5G核心功能通信。
媒体架构400可以连接UE 403内部功能和用于5G媒体下行链路流式传输的相关网络功能。因此，媒体架构400可以包括多个功能。例如，UE 403上的5GMSd客户端404可以是可以通过接口/API访问的5GMSd服务的接收器。5GMSd客户端404可以包括两个子功能，媒体会话处理器409和媒体播放器410。媒体会话处理器409可以与5GMSd AF 406通信，以便建立、控制和支持媒体会话的传送。媒体会话处理器409可开放可由5GMSd感知应用402使用的API。媒体播放器410可以与5GMSd AS 405通信，以便流式传输媒体内容并向5GMSd感知应用402提供服务用于媒体回放，以及向媒体会话处理器409提供服务用于媒体会话控制。5GMSd感知应用402可以通过实现外部应用或内容服务提供商特定逻辑，并启用媒体会话的建立来控制5GMSd客户端404。5GMSd AS 405可以托管5G媒体功能。5GMSd应用程序提供商401可以是外部应用程序或内容特定媒体功能，例如，使用5GMSd将媒体流式传输到5GMSd感知应用程序402的媒体创建、编码和格式化(formatting)。5GMSd AF 406可以向UE 403上的媒体会话处理器409，和/或，5GMSd应用提供商401提供各种控制功能。5GMSd AF 406可以中继、或发起对不同PCF 411处理的请求或与其他网络功能交互。
媒体架构400可以包括多个不同的接口。例如，链路421可以与M1d相关，M1d可以是由5GMSd AF 406公开的5GMSd调配API，以调配媒体架构400的使用并获得反馈。链路422可以涉及M2d，其可以是由5GMSd AS 405开放的5GMSd发布API，并且在选择可信DN(例如DN407)中的5GMSd AS 405来接收流式传输服务的内容时使用。链路423可以与M3d相关，M3d可以是一个内部API，用于在诸如DN 407之类的可信DN内交换针对5GMSd AS 405托管内容的信息。链路424可以与M4d相关，M4d可以是由5GMSd AS 423向媒体播放器410开放的媒体下行链路流式API，以流式传输媒体内容。链路425可以与M5d相关，M5d可以是由5GMSd AF 405向媒体会话处理器公开的媒体会话处理API，用于媒体会话处理、控制和辅助，媒体会话处理、控制和辅助还包括适当的安全机制，例如授权和认证。链路426可以与M6d相关，M6d可以是由媒体会话处理器409向5GMSd感知应用402开放，以使用5GMSd功能的UE 403媒体会话处理API。链路427可以与M7d相关，M7d可以是由媒体播放器410向5GMSd感知应用402和媒体会话处理器409开放、以使用媒体播放器410的UE媒体播放器API。链路428可以与M8d相关，M8d可以是用于5GMSd感知应用402和5GMSd应用提供商401之间的信息交换的应用API，例如，向5GMSd感知应用402提供服务访问信息。
图5A和图5B是根据实施例的边缘相关增强现实(AR)(EDGAR)5GMSd下载架构500的示图。AR EDGAR 5GMSd架构500也可以应用于混合现实(MR)。架构500包括5G EDGAR UE502、云/边缘服务器504和AR/MR应用提供商506。5G EDGAR UE 502包括AR运行时间(runtime)508、轻量级场景管理器510、5GMS客户端512和基本AR/MR应用程序514。AR运行时间508包括视觉引擎/同步定位和映射(SLAM)516、姿态校正模块518和声场映射模块520。轻量级场景管理器510包括基本场景图形处理器(SGH)522和合成器524。5GMS客户端512包括媒体会话处理器(包括边缘会话)526和媒体客户端528。媒体客户端528包括场景描述递送模块530、内容递送模块532和基本编解码器534。5G EDGAR UE 502包括与云/边缘服务器504的5G系统(gNb)538通信的5G轻量级系统(Uu)536。
云/边缘服务器504包括AR/MR应用程序540和媒体递送功能542。媒体递送功能542包括媒体AF 544和媒体AS 546。媒体AS 546包括内容递送功能548、场景描述功能(SDF)550、解码器552和编码器554。AR/MR应用程序540包括AR场景管理器556、AR功能564、语义感知模块566、社交整合模块568和媒体资产数据库570。AR场景管理器556包括场景图形生成器558、沉浸式视觉渲染器560和沉浸式音频渲染器562。
AR/MR应用提供商506包括沉浸式媒体服务器574。沉浸式媒体服务器574包括场景描述模块576、清单服务器578和片段服务器580。
媒体客户端528通过M4接口582向内容递送模块548传输(例如，传输姿态和交互)。内容递送模块548通过M4接口584向媒体客户端528传输(例如，发送预渲染媒体)。媒体会话处理器526通过M5d接口586与媒体AF 544通信。基本AR/MR应用程序514通过M8接口588与AR/MR应用程序540通信。基本AR/MR应用程序514可以从AR运行时间508接收用户输入591和AR数据590。AR运行时间508可以从相机592和传感器593接收数据，并且可以将数据输出到显示器594和扬声器595。
本公开的实施例提供了包括两个循环的调用流：作为外循环的流式传输场景和场景更新，以及作为内循环的流式传输每个场景的媒体对象。
图6A、图6B和图6C是根据实施例的基于EDGAR的5G下行链路流式传输的操作流程的示图。执行图6的操作流程的系统可以包括基本AR/MR应用程序606、AR运行时间608、AR/MR场景管理器610、媒体客户端612和媒体会话处理器614，这些可以是EDGAR UE 602的一部分(此外，媒体客户端612和媒体会话处理器614可以是媒体访问功能的一部分)。该系统还包括5GMSd AF 616、5GMSd AS 618，5GMSd AF 616和5GMSd AS 618可以是云/边缘服务器604的一部分。该系统还可以包括AR/MR应用提供商620。应用程序提供商620可以被称为场景服务器。
在操作630中，场景内容由5GMSd AS 618接收。在操作632中，AR/MR应用程序606触发服务公告和内容递送。服务访问信息包括媒体客户端条目，或者通过M8d接口提供对服务访问信息的引用。在操作634中，选择媒体内容/场景。在操作636中，根据需要获取或更新服务访问信息(即，操作636可以是可选的)。在操作638中，AR/MR应用程序606使用入口点(即，完整场景描述)URL初始化场景管理器610。在操作640中，媒体客户端612建立用于接收入口点的传输会话。在操作641中，媒体客户端612请求并接收入口点或对场景描述的更新。在操作642中，处理入口点。
在操作644中，系统基于场景描述和设备能力选择5GMSd AS，并实例化边缘处理。基于所处理的场景描述和设备能力，选择5GMSd AS，并且使用在边缘服务器604中定义的进程来实例化边缘进程。AR/MR场景管理器610可以向5GMSd AS 618发送场景描述和设备能力。5GMSd AS 618导出边缘AS(EAS)关键性能指标(KPI)，并且如果需要，基于新的KPI(例如，通过AF 616)选择新的AS/EAS。开始边缘处理，并且向AR/MR场景管理器610提供新的入口点URL。替代地，在一些实施例中，AR/MR场景管理器610可以从场景描述和设备能力导出EAS KPI，并且请求5GMSd AF 616提供合适的EAS的列表。AR/MR场景管理器610可以选择AS/EAS并请求开始AS中的边缘处理(例如，所选择的AS可以是5GMSd AS 618)。开始边缘处理，并向AR/MR场景管理器提供新的入口点URL。
在操作646中，AR/MR场景管理器610请求简化的场景入口点/场景描述。边缘过程从完整场景描述中导出简化的场景条目/描述，并将其提供给AR/MR场景管理器。在操作648中，处理简化的入口点(即，简化的场景描述)。
在操作650中，AR/MR场景管理器610请求从AR运行时间608创建新的AR/MR会话。在操作652中，AR运行时间608创建新的AR/MR会话。在操作654中，创建流式传输会话。媒体客户端612和/或AR/MR场景管理器610可以向媒体会话处理器614提供必要的服务质量(QoS)信息。在操作656中，配置一个或多个流式传输会话。一些实施例中，媒体会话处理器614可以与5GMSd AF 616共享信息，该信息包括期望的QoS信息。基于AR/MR应用程序提供商620的现有调配，5GMSd AF 616可以请求对协议数据单元(PDU)会话的QoS修改。
在操作658中，建立用于递送清单的传输会话。对于所需的媒体内容，媒体客户端612建立传输会话以获取递送清单信息。在操作660中，媒体客户端612从5GMSd AS 618请求并接收递送清单。在操作662中，媒体客户端612处理递送清单。例如，媒体客户端612确定媒体获取所需的传输会话的数量。媒体客户端612被配置为使用递送清单信息来初始化每个媒体流的媒体流水线。在操作664中，AR/MR场景管理器610和媒体客户端612配置渲染和递送媒体流水线。
在操作666中，媒体客户端612建立传输会话以获取媒体内容。在操作668中，5GMSdAS 618发起并开始媒体会话。媒体会话形成特定于UE的有状态会话循环(即，操作670、672、674和676)。
在操作670中，由AR/MR场景管理器610获取最新姿态信息并与媒体客户端612共享。在操作672中，媒体客户端612向5GMSd AS 618发送最新姿态信息。在操作674中，5GMSdAS 618基于最新接收的姿态信息和可能的任何原始场景更新来执行媒体的预渲染。预渲染可以包括解码和渲染沉浸式媒体以及对所渲染的(即二维)媒体进行编码。在操作676中，5GMSd AS 618将预渲染媒体发送到媒体客户端612。在操作678中，媒体客户端612递送、解码和处理媒体数据。对于加密的媒体数据，媒体客户端612还可以执行解密。在操作680中，媒体客户端612将媒体数据递送给AR/MR场景管理器610。在操作682中，AR/MR场景管理器610渲染媒体并将渲染的媒体递送给AR运行时间608。AR运行时间608执行进一步处理，例如将AR内容注册到真实世界、合成和姿态校正。
AR/MR场景可以在流式传输到EDGAR设备期间被动态更新，因此场景可以在流式传输会话期间被完全改变。EDGAR设备的场景更新是与媒体对象相同的循环的一部分。但是，场景更新发生在边缘网络上的媒体应用服务器上。因此，客户端将任何场景更新视为视频流式传输会话的连续部分。
图7是根据实施例的用于基于EDGAR的5G下行链路流式传输的方法的流程图。在操作702中，系统选择包括完整场景描述的媒体内容。在操作704中，系统基于完整场景描述选择5GMSd AS以流式传输媒体内容。在操作706中，系统基于完整场景描述导出简化的场景描述。在操作708中，系统基于简化的场景描述创建AR/MR会话。
尽管图7示出了过程700的示例块，但在一些实施方式中，过程700可以包括与图7中描绘的块相比的附加块、更少的块、不同的块或不同排列的块。另外地，或者替代地，过程700的两个或更多个块可以并行地执行。
此外，所提出的方法可以通过处理电路(例如，一个或多个处理器或一个或多个集成电路)来实现。在一个示例中，一个或多个处理器执行存储在非暂时性计算机可读介质中的程序，以执行一个或多个所提出的方法。
上述技术可以使用计算机可读指令实现为计算机软件，并且物理地存储在一个或多个计算机可读介质中。
本申请的实施例可以单独使用或以任何顺序组合使用。此外，每一个实施例(及其方法)可以通过处理电路(例如，一个或多个处理器或一个或多个集成电路)来实现。在一个示例中，一个或多个处理器执行存储在非暂时性计算机可读介质中的程序。
上述公开提供了说明和描述，但是不旨在穷举或将实现方式限制为所公开的精确形式。根据本公开可进行修改和变化，或者可从实现方式的实践中获得修改和变化。
如本文所使用的，术语“组件”旨在广义地解释为硬件、固件、或者硬件和软件的组合。
即使在权利要求中记载和/或在说明书中公开了特征的组合，这些组合并不旨在限制可能的实现方式的公开内容。实际上，这些特征中的许多特征可以以未在权利要求中具体记载和/或未在说明书中公开的方式组合。虽然下面列出的每个从属权利要求可仅直接从属于一个权利要求，但是可能的实现方式的公开内容包括每个从属权利要求与权利要求集中的每一个其它权利要求的组合。
本文使用的任何元素、动作或指令不可被解释为关键的或必要的，除非如此明确描述。此外，如本文所使用的，冠词“一”和“一个”旨在包括一个或多个项目，且可与“一个或多个”互换地使用。此外，如本文所使用的，术语“集”旨在包括一个或多个项目(例如，相关项目、不相关项目、相关项目和不相关项目的组合等)，且可与“一个或多个”互换地使用。在意图仅是一个项目的情况下，使用术语“一个”或类似的语言。此外，如本文所使用的，术语“具有”、“含有”、“有”或类似术语旨在是开放式术语。此外，短语“基于”意指“至少部分地基于”，除非另有明确说明。

Claims (20)

1.一种方法，包括：
选择包括完整场景描述的媒体内容；
基于所述完整场景描述，选择5G媒体流式传输下行链路5GMSd应用服务器AS来流式传输所述媒体内容；
基于所述完整场景描述，导出简化的场景描述；以及
基于所述简化的场景描述，创建增强现实AR/混合现实MR会话。
2.根据权利要求1所述的方法，其中，选择5GMSd AS来流式传输所述媒体内容包括：导出第一5GMSd AS的至少一个关键性能指标KPI。
3.根据权利要求2所述的方法，其中，选择5GMSd AS来流式传输所述媒体内容还包括：基于所述至少一个KPI，选择所述第一5GMSd AS来流式传输所述媒体内容。
4.根据权利要求2所述的方法，其中，所述方法还包括：提供用于流式传输所述媒体内容的适当的边缘应用服务器EAS列表，
其中，选择5GMSd AS来流式传输所述媒体内容还包括：从所述EAS列表中选择EAS。
5.根据权利要求1所述的方法，其中，所述方法还包括：在选择5GMSd AS来流式传输所述媒体内容后，向AR/MR场景管理器提供新的入口点统一资源定位器URL。
6.根据权利要求1所述的方法，其中，所述方法还包括：
接收所述媒体内容的更新姿态信息；以及
基于所述更新姿态信息，预渲染所述媒体内容。
7.根据权利要求6所述的方法，其中，在流式传输所述媒体内容的媒体流式传输会话期间，执行接收所述更新姿态信息和预渲染所述媒体内容。
8.一种设备，包括：
至少一个存储器，配置为存储程序代码；以及
至少一个处理器，配置为读取所述程序代码并按照所述程序代码的指示操作，所述程序代码包括：
第一选择代码，配置为使得所述至少一个处理器选择包括完整场景描述的媒体内容；
第二选择代码，配置为使得所述至少一个处理器基于所述完整场景描述，选择5G媒体流式传输下行链路5GMSd应用服务器AS来流式传输所述媒体内容；
第一导出代码，配置为使得所述至少一个处理器基于所述完整场景描述导出简化的场景描述；以及
第一创建代码，配置为使得所述至少一个处理器基于所述简化的场景描述，创建增强现实AR/混合现实MR会话。
9.根据权利要求8所述的设备，其中，所述第二选择代码还使得所述至少一个处理器导出第一5GMSd AS的至少一个关键性能指标KPI。
10.根据权利要求9所述的设备，其中，所述第二选择代码还使得所述至少一个处理器基于所述至少一个KPI选择所述第一5GMSd AS来流式传输所述媒体内容。
11.根据权利要求9所述的设备，其中，所述设备还包括：第一提供代码，配置为使得所述至少一个处理器提供用于流式传输所述媒体内容的适当的边缘应用服务器EAS列表；
其中，所述第二选择代码还使得所述至少一个处理器从所述EAS列表中选择EAS。
12.根据权利要求8所述的设备，其中，所述设备还包括：第二提供代码，配置为使得所述至少一个处理器在选择5GMSd AS来流式传输所述媒体内容后，向AR/MR场景管理器提供新的入口点统一资源定位器URL。
13.根据权利要求8所述的设备，其中，所述设备还包括：
第一接收代码，配置为使得所述至少一个处理器接收所述媒体内容的更新姿态信息；以及
第一预渲染代码，配置为使得所述至少一个处理器基于所述更新姿态信息预渲染所述媒体内容。
14.根据权利要求13所述的设备，其中，在流式传输所述媒体内容的媒体流式传输会话期间，执行接收所述更新姿态信息和预渲染所述媒体内容。
15.一种非暂时性计算机可读介质，存储有指令，所述指令包括一个或多个指令，所述一个或多个指令当由设备的一个或多个处理器执行时，使得所述一个或多个处理器：
选择包括完整场景描述的媒体内容；
基于所述完整场景描述，选择5G媒体流式传输下行链路5GMSd应用服务器AS来流式传输所述媒体内容；
基于所述完整场景描述，导出简化的场景描述；以及
基于所述简化的场景描述，创建增强现实AR/混合现实MR会话。
16.根据权利要求15所述的非暂时性计算机可读介质，其中，所述指令在由所述一个或多个处理器执行时，还使得所述一个或多个处理器通过以下方式选择5GMSd AS来流式传输所述媒体内容：导出第一5GMSd AS的至少一个关键性能指标KPI。
17.根据权利要求16所述的非暂时性计算机可读介质，其中，所述指令在由所述一个或多个处理器执行时，还使得所述一个或多个处理器通过以下方式选择5GMSd AS来流式传输所述媒体内容：基于所述至少一个KPI，选择所述第一5GMSd AS来流式传输所述媒体内容。
18.根据权利要求16所述的非暂时性计算机可读介质，其中，所述指令在由所述一个或多个处理器执行时，还使得所述一个或多个处理器提供用于流式传输所述媒体内容的适当的边缘应用服务器EAS列表，
其中，选择5GMSd AS来流式传输所述媒体内容还包括：从所述EAS列表中选择EAS。
19.根据权利要求15所述的非暂时性计算机可读介质，其中，所述指令在由所述一个或多个处理器执行时，还使得所述一个或多个处理器在选择5GMSd AS来流式传输所述媒体内容后，向AR/MR场景管理器提供新的入口点统一资源定位器URL。
20.根据权利要求15所述的非暂时性计算机可读介质，其中，所述指令在由所述一个或多个处理器执行时，还使得所述一个或多个处理器：
接收所述媒体内容的更新姿态信息；以及
基于所述更新姿态信息，预渲染所述媒体内容。
CN202280007867.2A 2021-11-03 2022-03-29 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法 Pending CN116601546A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US202163275358P 2021-11-03 2021-11-03
US63/275,358 2021-11-03
US17/705,905 US12045940B2 (en) 2021-11-03 2022-03-28 Method for streaming dynamic 5G AR/MR experience to 5G devices with updatable scenes
US17/705,905 2022-03-28
PCT/US2022/022269 WO2023080920A1 (en) 2021-11-03 2022-03-29 A method for streaming dynamic 5g ar/mr experience to 5g devices with updatable scenes

Publications (1)

Publication Number Publication Date
CN116601546A true CN116601546A (zh) 2023-08-15

Family

ID=86145401

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202280007867.2A Pending CN116601546A (zh) 2021-11-03 2022-03-29 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法
CN202280015977.3A Pending CN116888650A (zh) 2021-11-03 2022-05-11 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202280015977.3A Pending CN116888650A (zh) 2021-11-03 2022-05-11 将动态5g ar/mr体验流式传输到具有可更新场景的5g设备的方法

Country Status (6)

Country Link
US (2) US12045940B2 (zh)
EP (2) EP4427199A1 (zh)
JP (2) JP2024508487A (zh)
KR (2) KR20230118150A (zh)
CN (2) CN116601546A (zh)
WO (2) WO2023080920A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20230362257A1 (en) * 2022-05-05 2023-11-09 Tencent America LLC Procedure for discovery of capabilities and performance of 5g edgar devices

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6714201B1 (en) * 1999-04-14 2004-03-30 3D Open Motion, Llc Apparatuses, methods, computer programming, and propagated signals for modeling motion in computer applications
RU2621633C2 (ru) * 2011-10-28 2017-06-06 Мэджик Лип, Инк. Система и способ для дополненной и виртуальной реальности
CN108476088B (zh) * 2016-08-12 2021-02-05 华为技术有限公司 一种数据传输方法及设备
US10063612B2 (en) * 2016-09-30 2018-08-28 Amazon Technologies, Inc. Request-based encoding for streaming content portions
US20180285129A1 (en) * 2017-04-04 2018-10-04 General Dynamics Mission Systems, Inc. Systems and methods for providing computer interface interaction in a virtualized environment
KR102555443B1 (ko) 2017-05-01 2023-07-12 매직 립, 인코포레이티드 콘텐츠를 공간 3d 환경에 매칭
US10559126B2 (en) * 2017-10-13 2020-02-11 Samsung Electronics Co., Ltd. 6DoF media consumption architecture using 2D video decoder
CN107909643B (zh) * 2017-11-06 2020-04-24 清华大学 基于模型分割的混合场景重建方法及装置
US10504280B2 (en) * 2018-01-10 2019-12-10 Qualcomm Incorporated Accelerated occlusion computation
US10755425B2 (en) * 2018-02-05 2020-08-25 Intel Corporation Automatic tuning of image signal processors using reference images in image processing environments
US11026122B2 (en) * 2019-08-15 2021-06-01 At & T Intellectual Property I, L.P. Radio access network intelligent controller-based dynamic time division duplex communication in a radio communication network
EP4046139A4 (en) * 2019-10-15 2023-11-22 Magic Leap, Inc. EXTENDED REALITY SYSTEM WITH LOCATION SERVICE
US20210105451A1 (en) * 2019-12-23 2021-04-08 Intel Corporation Scene construction using object-based immersive media
JP7305194B2 (ja) * 2019-12-30 2023-07-10 ティーエムアールダブリュー ファウンデーション アイピー エスエーアールエル ｎ層アーキテクチャにより仮想世界計算を最適化するためのシステムおよび方法
US11395027B2 (en) * 2020-02-28 2022-07-19 Verizon Patent And Licensing Inc. Methods and systems for request-based graphics rendering at a multi-access server
US11496532B2 (en) * 2020-04-10 2022-11-08 Samsung Electronics Co., Ltd. Offering media services through network edge
US20230351705A1 (en) * 2020-08-27 2023-11-02 Samsung Electronics Co., Ltd. Method and apparatus for performing anchor based rendering for augmented reality media objects
US11563827B1 (en) * 2021-07-12 2023-01-24 Verizon Patent And Licensing Inc. Method and system for network performance optimization service
KR20230085767A (ko) * 2021-12-07 2023-06-14 삼성전자주식회사 성능 기반의 스플릿 컴퓨팅 제공 방법 및 장치
US20230215075A1 (en) * 2022-01-01 2023-07-06 Samsung Electronics Co., Ltd. Deferred rendering on extended reality (xr) devices

Also Published As

Publication number Publication date
JP2024508487A (ja) 2024-02-27
US20230135220A1 (en) 2023-05-04
KR20230109755A (ko) 2023-07-20
US12045940B2 (en) 2024-07-23
KR20230118150A (ko) 2023-08-10
EP4427199A1 (en) 2024-09-11
US20230139635A1 (en) 2023-05-04
WO2023080920A1 (en) 2023-05-11
WO2023080926A1 (en) 2023-05-11
CN116888650A (zh) 2023-10-13
JP2024508491A (ja) 2024-02-27
EP4427210A1 (en) 2024-09-11

Similar Documents

Publication Publication Date Title
CN115606165B (zh) 在5g网络上运行媒体流式传输和服务的方法和装置
US11889506B2 (en) Method and apparatus for configuring 5G application servers in connected uplink-to-downlink streaming
JP7512421B2 (ja) ５ｇアップリンク・ストリーミングにおけるエジェスト・コンフィギュレーション及びプロトコルを定める方法及び装置
JP7497529B2 (ja) ダイナミックシーン更新を含む５ｇエッジサーバ／クラウド上でａｒ／ｍｒ処理を実行することによって５ｇデバイスにａｒ／ｍｒアプリケーションを提供するための手順
US12045940B2 (en) Method for streaming dynamic 5G AR/MR experience to 5G devices with updatable scenes
US20230138606A1 (en) Method and apparatus for delivering 5g ar/mr cognitive experience to 5g devices
CN116250221A (zh) 用于5g网络中上行链路流式传输的贡献报告的方法和装置
US20240371103A1 (en) Method for streaming dynamic 5g ar/mr experience to 5g devices with updatable scenes
US11799937B2 (en) CMAF content preparation template using NBMP workflow description document format in 5G networks
KR102723228B1 (ko) 5g 네트워크들에서 nbmp 워크플로우 설명 문서 포맷을 이용하는 cmaf 콘텐츠 준비 템플릿
US20240275836A1 (en) Method and apparatus for signaling individual and group service operation points for multiple formats in 5g media streaming
US20220369073A1 (en) Methods for implementing various uplink streaming deployment scenarios in 5g networks
CN115715461A (zh) 5g网络中用于上行链路和下行链路流式传输的媒体服务入口的发现方法
CN118451773A (zh) 用于5g网络中排出上行链路流的方法和装置
CN118383020A (zh) 用于为5g媒体网络中的上行链路流式传输提供服务访问信息的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40090855

Country of ref document: HK