CN113132761A - 多媒体资源获取方法、服务器集群、用户终端设备及系统 - Google Patents

多媒体资源获取方法、服务器集群、用户终端设备及系统 Download PDF

Info

Publication number
CN113132761A
CN113132761A CN201911406263.1A CN201911406263A CN113132761A CN 113132761 A CN113132761 A CN 113132761A CN 201911406263 A CN201911406263 A CN 201911406263A CN 113132761 A CN113132761 A CN 113132761A
Authority
CN
China
Prior art keywords
user terminal
equipment
multimedia resource
request
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201911406263.1A
Other languages
English (en)
Inventor
王旭浩
陈庆勇
桑建
梁玲玲
董冠军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Chengdu ICT Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Chengdu ICT Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Chengdu ICT Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201911406263.1A priority Critical patent/CN113132761A/zh
Publication of CN113132761A publication Critical patent/CN113132761A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808—Management of client data
    • H04N21/25816—Management of client data involving client authentication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明实施例公开了一种多媒体资源获取方法、服务器集群、用户终端设备及系统。该多媒体资源获取方法，应用于服务器集群，包括：接收用户终端设备发送的请求；用户终端设备包括增强现实AR设备、虚拟现实VR设备；基于请求，获取请求对应的多媒体资源；向用户终端设备发送多媒体资源。根据本发明实施例，能够实现服务器和用户终端设备之间去耦合，进而提高系统的兼容性。

Description

多媒体资源获取方法、服务器集群、用户终端设备及系统
技术领域
本发明属于计算机与云计算技术领域，尤其涉及一种多媒体资源获取方法及系统、获取多媒体资源的服务器集群及用户终端设备。
背景技术
传统的云系统平台(服务器)仅能兼容类型有限的、特定的虚拟现实(VirtualReality，VR)头显设备(例如GEAR VR和Oculus GO等设备)，其原因在于云系统平台与虚拟现实头显设备之间过于耦合。例如，对于一些计算复杂度高的视频渲染处理操作只能由特定的虚拟现实头显设备去执行。
因此，如何实现服务器和用户终端设备之间去耦合，进而提高系统的兼容性是本领域技术人员亟需解决的技术问题。
发明内容
本发明实施例提供一种多媒体资源获取方法及系统、获取多媒体资源的服务器集群及用户终端设备，能够实现服务器和用户终端设备之间去耦合，进而提高系统的兼容性。
第一方面，提供了一种多媒体资源获取方法，应用于服务器集群，包括：
接收用户终端设备发送的请求；用户终端设备包括增强现实AR设备、虚拟现实VR设备；
基于请求，获取请求对应的多媒体资源；
向用户终端设备发送多媒体资源。
可选地，接收用户终端设备发送的请求之前，还包括：
接收用户终端设备发送的统一设备标识符；
根据统一设备标识符，确定用户终端设备的身份验证信息及设备类型信息。
可选地，确定用户终端设备的身份验证信息及设备类型信息之后，还包括：
根据身份验证信息，确定用户终端设备的历史浏览信息；
向用户终端设备的发送历史浏览信息。
可选地，接收用户终端设备发送的请求，包括：
接收AR设备发送的图像处理请求；
或，
接收VR设备发送的视音频处理请求。
可选地，基于请求，获取请求对应的多媒体资源，包括：
基于图像处理请求，对图像处理请求对应的图像进行第一处理，获取图像资源；
或，
基于视音频处理请求，对视音频处理请求对应的视音频进行第二处理，获取视音频资源。
可选地，基于图像处理请求，对图像处理请求对应的图像进行第一处理，获取图像资源，包括：
基于图像处理请求，对图像处理请求对应的图像进行图像增强和/或图像捕捉，获得图像资源。
可选地，基于视音频处理请求，对视音频处理请求对应的视音频进行第二处理，获取视音频资源，包括：
基于视音频处理请求，对视音频处理请求对应的视频进行渲染，获取视频资源。
可选地，向用户终端设备发送多媒体资源，包括：
对多媒体资源进行编码，得到编码后的多媒体资源；
向用户终端设备发送编码后的多媒体资源。
第二方面，提供了一种多媒体资源获取方法，应用于用户终端设备，用户终端设备包括增强现实AR设备、虚拟现实VR设备，包括：
向服务器集群发送请求；
接收服务器集群发送的、与请求对应的多媒体资源。
可选地，接收服务器集群发送的、与请求对应的多媒体资源，包括：
接收服务器集群发送的编码后的多媒体资源；
对编码后的多媒体资源进行解码，得到解码后的多媒体资源。
第三方面，提供了一种获取多媒体资源的服务器集群，包括：
接收模块，用于接收用户终端设备发送的请求；用户终端设备包括增强现实AR设备、虚拟现实VR设备；
获取模块，用于基于请求，获取请求对应的多媒体资源；
发送模块，用于向用户终端设备发送多媒体资源。
可选地，接收模块还用于接收用户终端设备发送的统一设备标识符；根据统一设备标识符，确定用户终端设备的身份验证信息及设备类型信息。
可选地，接收模块还用于根据身份验证信息，确定用户终端设备的历史浏览信息；向用户终端设备的发送历史浏览信息。
可选地，接收模块用于接收AR设备发送的图像处理请求；或，接收VR设备发送的视音频处理请求。
可选地，获取模块用于基于图像处理请求，对图像处理请求对应的图像进行第一处理，获取图像资源；或，基于视音频处理请求，对视音频处理请求对应的视音频进行第二处理，获取视音频资源。
可选地，获取模块用于基于图像处理请求，对图像处理请求对应的图像进行图像增强和/或图像捕捉，获得图像资源。
可选地，获取模块用于基于视音频处理请求，对视音频处理请求对应的视频进行渲染，获取视频资源。
可选地，发送模块用于对多媒体资源进行编码，得到编码后的多媒体资源；向用户终端设备发送编码后的多媒体资源。
第四方面，提供了一种获取多媒体资源的用户终端设备，用户终端设备包括增强现实AR设备、虚拟现实VR设备，包括：
发送模块，用于向服务器集群发送请求；
接收模块，用于接收服务器集群发送的、与请求对应的多媒体资源。
可选地，接收模块用于接收服务器集群发送的编码后的多媒体资源；对编码后的多媒体资源进行解码，得到解码后的多媒体资源。
第五方面，提供了一种多媒体资源获取系统，包括：
第三方面或者第三方面任一可选的实现方式中的获取多媒体资源的服务器集群，和第四方面或者第四方面任一可选的实现方式中的获取多媒体资源的用户终端设备。
本发明实施例的多媒体资源获取方法及系统、获取多媒体资源的服务器集群及用户终端设备，能够实现服务器和用户终端设备之间去耦合，进而提高系统的兼容性。该多媒体资源获取方法，应用于服务器集群，在接收用户终端设备(包括增强现实AR设备、虚拟现实VR设备)发送的请求后，获取请求对应的多媒体资源，也就是说是服务器集群执行了多媒体资源的处理操作，实现了服务器和用户终端设备之间去耦合，提高了系统的兼容性。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例中所需要使用的附图作简单的介绍，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种多媒体资源获取方法的流程示意图；
图2是本发明实施例提供的另一种多媒体资源获取方法的流程示意图；
图3是本发明实施例提供的又一种多媒体资源获取方法的流程示意图；
图4是本发明实施例提供的一种云渲染相关操作流程图；
图5是本发明实施例提供的一种获取多媒体资源的服务器集群的结构示意图；
图6是本发明实施例提供的一种获取多媒体资源的用户终端设备的结构示意图。
具体实施方式
下面将详细描述本发明的各个方面的特征和示例性实施例，为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及具体实施例，对本发明进行进一步详细描述。应理解，此处所描述的具体实施例仅被配置为解释本发明，并不被配置为限定本发明。对于本领域技术人员来说，本发明可以在不需要这些具体细节中的一些细节的情况下实施。下面对实施例的描述仅仅是为了通过示出本发明的示例来提供对本发明更好的理解。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
传统的云系统平台(服务器)仅能兼容类型有限的、特定的虚拟现实(VirtualReality，VR)头显设备(例如GEAR VR和Oculus GO等设备)，其原因在于云系统平台与虚拟现实头显设备之间过于耦合。例如，对于一些计算复杂度高的视频渲染处理操作只能由特定的虚拟现实头显设备去执行。
为了解决现有技术问题，本发明实施例提供了一种多媒体资源获取方法及系统、获取多媒体资源的服务器集群及用户终端设备。下面首先对本发明实施例所提供的多媒体资源获取方法进行介绍。
图1是本发明实施例提供的一种多媒体资源获取方法的流程示意图，该多媒体资源获取方法应用于服务器集群，如图1所示，包括：
S101、接收用户终端设备发送的请求；用户终端设备包括增强现实(AugmentedReality，AR)设备、虚拟现实(Virtual Reality，VR)设备。
为了提高多媒体资源传输的安全性，在一个实施例中，接收用户终端设备发送的请求之前，通常还可以包括：接收用户终端设备发送的统一设备标识符；根据统一设备标识符，确定用户终端设备的身份验证信息及设备类型信息。
为了便于用户快速获取感兴趣的多媒体资源，在一个实施例中，确定用户终端设备的身份验证信息及设备类型信息之后，通常还可以包括：根据身份验证信息，确定用户终端设备的历史浏览信息；向用户终端设备的发送历史浏览信息。
为了提高系统的兼容性，在一个实施例中，接收用户终端设备发送的请求，通常可以包括：接收AR设备发送的图像处理请求；或，接收VR设备发送的视音频处理请求。
S102、基于请求，获取请求对应的多媒体资源。
为了提高系统的兼容性，在一个实施例中，基于请求，获取请求对应的多媒体资源，通常可以包括：基于图像处理请求，对图像处理请求对应的图像进行第一处理，获取图像资源；或，基于视音频处理请求，对视音频处理请求对应的视音频进行第二处理，获取视音频资源。
进一步地，在一个实施例中，基于图像处理请求，对图像处理请求对应的图像进行第一处理，获取图像资源，通常可以包括：基于图像处理请求，对图像处理请求对应的图像进行图像增强和/或图像捕捉，获得图像资源。在一个实施例中，基于视音频处理请求，对视音频处理请求对应的视音频进行第二处理，获取视音频资源，通常可以包括：基于视音频处理请求，对视音频处理请求对应的视频进行渲染，获取视频资源。
S103、向用户终端设备发送多媒体资源。
在一个实施例中，向用户终端设备发送多媒体资源，通常可以包括：对多媒体资源进行编码，得到编码后的多媒体资源；向用户终端设备发送编码后的多媒体资源。
该多媒体资源获取方法，应用于服务器集群，在接收用户终端设备发送的请求后，获取请求对应的多媒体资源，也就是说是服务器集群执行了多媒体资源的处理操作，实现了服务器和用户终端设备之间去耦合，提高了系统的兼容性。
图2是本发明实施例提供的另一种多媒体资源获取方法的流程示意图，该多媒体资源获取方法应用于用户终端设备，用户终端设备包括增强现实AR设备、虚拟现实VR设备，如图2所示，包括：
S201、向服务器集群发送请求。
S202、接收服务器集群发送的、与请求对应的多媒体资源。
在一个实施例中，接收服务器集群发送的、与请求对应的多媒体资源，通常可以包括：接收服务器集群发送的编码后的多媒体资源；对编码后的多媒体资源进行解码，得到解码后的多媒体资源。
下面以一个实施例对上述内容进行说明，具体如下：
如图3所示，用户设备启动后进行设备认证，若设备认证失败，则直接结束；若设备认证成功，则进行设备类型的确认。当确认用户设备为AR设备时，则利用应用运行服务器支撑AR应用；当确认用户设备为VR设备时，则利用云渲染服务器支撑VR应用。最后通过流媒体服务器传输，用户设备接收多媒体资源。具体流程如下：
1、设备认证。用户在使用设备终端时，终端便会开机连接网络，通过设备本身所具有的统一设备标识符将设备信息上传至平台登录服务器，服务器根据统一设备标识码确认登录等相关信息，将设备终端的历史浏览信息，上次播放位置等相关信息回传至终端设备，供用户使用和选择。
2、数据包结算。用户在终端操作某个应用或者播放某一段视频时，就将请求发送到应用运行服务器，应用运行服务器根据用户的请求分配相应的服务器资源，且对数据包进行解算，根据统一设备标识码等相关信息确定设备类型以及请求的应用的类型，根据请求类型将请求分发到相应的服务器。
3、应用支撑。因为AR和VR终端设备应有需求情况的不同，根据设备类型和使用的应用的类型的不同将各个数据包分发至不同的服务器。其规则是：面向于AR设备的应用，主要的需求是图像增强和图像捕捉，以及设备所在的地理位置信息。将相关应用服务支撑分发至应用运行服务器，应用服务器主要支撑AR应用，其特点主要在具有多核中央处理器(central processing unit，CPU)，能够运行多种应用。面向于VR设备的应用，主要的需求就是对于视频的渲染。应用分发服务器将该应用分发到云渲染服务器，在云渲染服务器将需求的资源进行再次加工。云渲染服务器主要特征在于具有图形处理器(GraphicsProcessing Unit，GPU)，对于图像处理与渲染能力较强。
4、流媒体传输。从应用运行服务器和云渲染服务器所得到的视频等多媒体资源，传到流媒体服务器，通过流媒体服务器的相关特性，将多媒体资源流化，回传至用户终端。
5、用户端呈现。用户终端将流媒体格式解码，使视频等相关内容呈现在使用者面前。
本发明实施例为了解决多种设备的兼容性的问题，对于多种终端设备都提供相关的资源与技术支持，将原本终端所具有的渲染的相关能力放到云端，去除图像渲染的相关芯片之后，减小了终端设备的成本和重量。另外，本发明实施例为了解决VR/AR传输低延迟的要求，终端需具备无线局域网(Wireless Local Area Network，WLAN)支持IEEE802.11.a/b/g/n/ac标准，并开放5G接口接入，网络时延将降低在2ms内。
本发明实施例为了满足平台的兼容多种设备的要求，优化的方案主要包括以下几个方面：
一、用户使用终端：
(1)统一标识符登录验证。终端设备可采集VR/AR设备头部姿态数据、速度、加速度、角速度、角加速度等相关信息，将这些数据信息压缩成数据帧，其主要包括设备统一标识符：
标签是唯一标识设备的一个数据元素，其内容主要是一个2个字节的无符号整数，接入平台的设备每一个都有一个专属的设备统一标识符，用于接入平台的认证与登录。
值长度字段指明了值域所占的存储空间的大小，该字段所占的字节数随着数据传输量的变化而变化，可能为2字节或者4字节。当值域长度无法确定时，则用0XFFFFFFFF表示。
值域存放的数据元素主要存储VR/AR设备头部姿态数据、速度、加速度、角速度、角加速度等多种信息，根据值长度字段所定义的内容，将这些信息存储在相应的位置上。校验段主要采用循环冗余码校验(Cyclical Redundancy Check，CRC)，对于之前的数据进行校验判断。如果没有通过CRC检验，就重新向终端重新请求相关校验码。将这些数据信息组合成一个数据包，实现了数据格式的兼容性。
(2)支持多种传输方案。该模块支持WLAN、IEEE 802.11.a/b/g/n/ac标准，并对5G模组提供相应的接口。通过兼容多种无线传输格式，适配头戴式，分体机，一体机等多种相关设备。
二、云端系统平台：
(1)分为登录服务器、应用运行服务器、云渲染服务器和流媒体传输服务器。
(2)登录服务器与应用运行服务器相连接，用于对接入设备进行验证，并将设备端的请求分发到相应的应用运行服务器和云渲染服务器。具体的分配思路为：使云渲染服务器与应用运行服务器的负载最小并且客户端的连接时延最短。
(3)应用运行服务器用于为接入的设备端在满足预设的负载均衡的条件下分配到相应到云渲染服务器，并将分配的信息返回至客户端。即在登录服务器分配到应用运行服务器之后，设备终端向所分配的应用发起连接的请求，建立连接，然后在应用运行服务器上，为满足负载均衡的条件下的设备终端提供相应的应用服务支持。
(4)云渲染服务器主要面向于应用运行服务器的VR视频和AR相关应用，根据用户的需求对视频再处理。该服务器具有支持GPU虚拟化的能力，以便支持多用户的接入，在单个物理地点内，需具备处理资源及用户的调度功能。在单个虚拟机节点内需支持多个用户，可支持多个用户计算资源的动态调整。其渲染的主要步骤为：
首先接收用户上行传送的头部姿态数据、用户输入数据及定位数据，相关数据依照OpenVR/WebGL/WebVR/WebXR标准提供，平台根据相关数据要求，执行渲染调度指令，分配相关的GPU，之后启动应用控制模块，进行渲染采集和渲染编码等相关工作，之后将渲染后的资源通过流媒体服务器推送到用户的专用设备。
平台渲染接口支持Unity3D、Unreal、CryEngine、Unigine、OSG等主流引擎开发的AR或VR应用，根据业务逻辑调用图形接口进行双眼AR或VR画面渲染；通过3D加速卡(Direct3D，D3D)或显卡硬件应用程序接口(Application Programming Interface，API)抓取音频、视频。
图4是本发明实施例提供的一种云渲染相关操作流程图，如图4所示：
针对于应用部署，首先运营/运维人员将相关的VR/AR应用打包，将其部署到应用运行服务器并且进行中心管理。通过基础通信服务4G/5G获取应用的安装包并进行相关的安装，使应用能够顺利运行在服务器上。在打包应用的同时，将应用相关的数据上传存储到存储模块。
在应用部署之后，用户可以通过终端设备请求服务器所提供的相关的服务，将启动VR/AR服务的指令上传至服务器，将数据推送到应用运行服务器，根据终端指令，应用运行服务器对于相关数据进行渲染采集、渲染编码等相关的工作，最后将视频推送到用户终端。
(5)流媒体服务器主要针对于应用运行服务器和云渲染服务器上的数据进行收集，其收集的数据主要包括音频和视频信息；将双眼画面及渲染用的头部姿态数据用H.264封装后，利用下行网络传输到VR/AR终端，其中头部姿态七元数(旋转和位置信息)放在头部的网络抽象层(Network Abstract Layer，NAL)单元，并采用多线程的方式，在不同的线程中分别对采集的音频和视频数据进行编码处理。在对编码后的视频和音频数据进行封装后，基于实时消息传输的协议将封装后的数据传输至对应的客户端。而且，在视频数据编码时，对所述视频数据直接采用I帧和p帧编码的方案；在传输时，实时监测网络的拥塞状态，若存在拥塞，则减小码流的传输速率；若拥塞消失，则增大码流的传输速率。
(6)用户终端在接收到流媒体服务器的返回数据之后，对于返回数据进行解码，使画面呈现在用户终端面前。
本发明实施例中的云端系统平台支持RealMax乾、RealMax 100、Realwear HMT-1、PICO neo、PICO goblin、大鹏、创维、HTC VIVE等多种VR设备接入，并且兼容于日后出产的三自由度(3DOF)的头盔和手柄与六自由度(6DOF)的头盔和手柄。
本发明实施例将计算复杂度高的视频渲染处理从终端本地移到服务器端，解除设备与系统平台的耦合，使平台兼容多种AR与VR设备。该方案可以在将VR/AR终端价格大幅降低的同时，进一步体验高端VR/AR的画面与性能。
本发明实施例提出了一种兼容于VR/AR设备的云视频平台，解决了VR/AR设备所存在的异构性，并且对于未来即将技术规格为3DOF与6DOF的设备都兼容，其具体优点为：
(1)同时支持VR/AR终端。本系统与终端设备去耦合，通过应用运行服务器、流媒体服务器、云渲染服务器等相关组件，构成能够支持VR、AR多种应用的平台，并且支持不同厂商不同型号的多种终端。
(2)帧率、码率、分辨率可调节。云VR/AR对网络带宽的需求主要为云端向终端进行视频推流的带宽(即下行带宽)，以及用户操作指令上传到云端系统的带宽(即上行带宽)，对于不同VR/AR提供不同带宽。也可以调节帧率、码率、视频分辨率等相关信息，并且能够根据上述信息的不同智能调节带宽。
(3)时延低，带来更良好的体验。系统具备低时延以保证用户接入云平台后的服务体验。从用户发出操作指令，到用户在显示屏看到结果反馈的整个过程称之为端到端时延，系统的端到端体验时延在不考虑网络延迟的情况下控制在50ms以下。
本发明实施例还提供一种获取多媒体资源的服务器集群，如图5所示，包括：
接收模块501，用于接收用户终端设备发送的请求；用户终端设备包括增强现实AR设备、虚拟现实VR设备；
获取模块502，用于基于请求，获取请求对应的多媒体资源；
发送模块503，用于向用户终端设备发送多媒体资源。
可选地，在一个实施例中，接收模块501还用于接收用户终端设备发送的统一设备标识符；根据统一设备标识符，确定用户终端设备的身份验证信息及设备类型信息。
可选地，在一个实施例中，接收模块501还用于根据身份验证信息，确定用户终端设备的历史浏览信息；向用户终端设备的发送历史浏览信息。
可选地，在一个实施例中，接收模块501用于接收AR设备发送的图像处理请求；或，接收VR设备发送的视音频处理请求。
可选地，在一个实施例中，获取模块502用于基于图像处理请求，对图像处理请求对应的图像进行第一处理，获取图像资源；或，基于视音频处理请求，对视音频处理请求对应的视音频进行第二处理，获取视音频资源。
可选地，在一个实施例中，获取模块502用于基于图像处理请求，对图像处理请求对应的图像进行图像增强和/或图像捕捉，获得图像资源。
可选地，在一个实施例中，获取模块502用于基于视音频处理请求，对视音频处理请求对应的视频进行渲染，获取视频资源。
可选地，在一个实施例中，发送模块503用于对多媒体资源进行编码，得到编码后的多媒体资源；向用户终端设备发送编码后的多媒体资源。
图5提供的服务器集群中的各个模块具有实现图1所示实例中各个步骤的功能，并达到与图1所示多媒体资源获取方法相同的技术效果，为简洁描述，在此不再赘述。
本发明实施例还提供一种获取多媒体资源的用户终端设备，用户终端设备包括增强现实AR设备、虚拟现实VR设备，如图6所示，包括：
发送模块601，用于向服务器集群发送请求；
接收模块602，用于接收服务器集群发送的、与请求对应的多媒体资源。
可选地，在一个实施例中，接收模块602用于接收服务器集群发送的编码后的多媒体资源；对编码后的多媒体资源进行解码，得到解码后的多媒体资源。
图6提供的用户终端设备中的各个模块具有实现图2所示实例中各个步骤的功能，并达到与图2所示多媒体资源获取方法相同的技术效果，为简洁描述，在此不再赘述。
本发明实施例还提供一种多媒体资源获取系统，包括：如图5所示的获取多媒体资源的服务器集群和如图6所示的获取多媒体资源的用户终端设备。
需要明确的是，本发明并不局限于上文所描述并在图中示出的特定配置和处理。为了简明起见，这里省略了对已知方法的详细描述。在上述实施例中，描述和示出了若干具体的步骤作为示例。但是，本发明的方法过程并不限于所描述和示出的具体步骤，本领域的技术人员可以在领会本发明的精神后，作出各种改变、修改和添加，或者改变步骤之间的顺序。
以上所述的结构框图中所示的功能块可以实现为硬件、软件、固件或者它们的组合。当以硬件方式实现时，其可以例如是电子电路、专用集成电路(ASIC)、适当的固件、插件、功能卡等等。当以软件方式实现时，本发明的元素是被用于执行所需任务的程序或者代码段。程序或者代码段可以存储在机器可读介质中，或者通过载波中携带的数据信号在传输介质或者通信链路上传送。“机器可读介质”可以包括能够存储或传输信息的任何介质。机器可读介质的例子包括电子电路、半导体存储器设备、ROM、闪存、可擦除ROM(EROM)、软盘、CD-ROM、光盘、硬盘、光纤介质、射频(RF)链路，等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。
还需要说明的是，本发明中提及的示例性实施例，基于一系列的步骤或者装置描述一些方法或系统。但是，本发明不局限于上述步骤的顺序，也就是说，可以按照实施例中提及的顺序执行步骤，也可以不同于实施例中的顺序，或者若干步骤同时执行。
以上所述，仅为本发明的具体实施方式，所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的系统、模块和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。应理解，本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。

Claims (13)

1.一种多媒体资源获取方法，其特征在于，应用于服务器集群，包括：
接收用户终端设备发送的请求；所述用户终端设备包括增强现实AR设备、虚拟现实VR设备；
基于所述请求，获取所述请求对应的多媒体资源；
向所述用户终端设备发送所述多媒体资源。
2.根据权利要求1所述的多媒体资源获取方法，其特征在于，所述接收用户终端设备发送的请求之前，还包括：
接收所述用户终端设备发送的统一设备标识符；
根据所述统一设备标识符，确定所述用户终端设备的身份验证信息及设备类型信息。
3.根据权利要求2所述的多媒体资源获取方法，其特征在于，所述确定所述用户终端设备的身份验证信息及设备类型信息之后，还包括：
根据所述身份验证信息，确定所述用户终端设备的历史浏览信息；
向所述用户终端设备的发送所述历史浏览信息。
4.根据权利要求1所述的多媒体资源获取方法，其特征在于，所述接收用户终端设备发送的请求，包括：
接收所述AR设备发送的图像处理请求；
或，
接收所述VR设备发送的视音频处理请求。
5.根据权利要求4所述的多媒体资源获取方法，其特征在于，所述基于所述请求，获取所述请求对应的多媒体资源，包括：
基于所述图像处理请求，对所述图像处理请求对应的图像进行第一处理，获取图像资源；
或，
基于所述视音频处理请求，对所述视音频处理请求对应的视音频进行第二处理，获取视音频资源。
6.根据权利要求5所述的多媒体资源获取方法，其特征在于，所述基于所述图像处理请求，对所述图像处理请求对应的图像进行第一处理，获取图像资源，包括：
基于所述图像处理请求，对所述图像处理请求对应的图像进行图像增强和/或图像捕捉，获得所述图像资源。
7.根据权利要求5所述的多媒体资源获取方法，其特征在于，所述基于所述视音频处理请求，对所述视音频处理请求对应的视音频进行第二处理，获取视音频资源，包括：
基于所述视音频处理请求，对所述视音频处理请求对应的视频进行渲染，获取视频资源。
8.根据权利要求1所述的多媒体资源获取方法，其特征在于，所述向所述用户终端设备发送所述多媒体资源，包括：
对所述多媒体资源进行编码，得到编码后的多媒体资源；
向所述用户终端设备发送所述编码后的多媒体资源。
9.一种多媒体资源获取方法，其特征在于，应用于用户终端设备，所述用户终端设备包括增强现实AR设备、虚拟现实VR设备，包括：
向服务器集群发送请求；
接收所述服务器集群发送的、与所述请求对应的多媒体资源。
10.根据权利要求9所述的多媒体资源获取方法，其特征在于，所述接收所述服务器集群发送的、与所述请求对应的多媒体资源，包括：
接收所述服务器集群发送的编码后的多媒体资源；
对所述编码后的多媒体资源进行解码，得到解码后的多媒体资源。
11.一种获取多媒体资源的服务器集群，其特征在于，包括：
接收模块，用于接收用户终端设备发送的请求；所述用户终端设备包括增强现实AR设备、虚拟现实VR设备；
获取模块，用于基于所述请求，获取所述请求对应的多媒体资源；
发送模块，用于向所述用户终端设备发送所述多媒体资源。
12.一种获取多媒体资源的用户终端设备，其特征在于，所述用户终端设备包括增强现实AR设备、虚拟现实VR设备，包括：
发送模块，用于向服务器集群发送请求；
接收模块，用于接收所述服务器集群发送的、与所述请求对应的多媒体资源。
13.一种多媒体资源获取系统，其特征在于，包括：
权利要求11所述的获取多媒体资源的服务器集群，和权利要求12所述的获取多媒体资源的用户终端设备。
CN201911406263.1A 2019-12-31 2019-12-31 多媒体资源获取方法、服务器集群、用户终端设备及系统 Pending CN113132761A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911406263.1A CN113132761A (zh) 2019-12-31 2019-12-31 多媒体资源获取方法、服务器集群、用户终端设备及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911406263.1A CN113132761A (zh) 2019-12-31 2019-12-31 多媒体资源获取方法、服务器集群、用户终端设备及系统

Publications (1)

Publication Number Publication Date
CN113132761A true CN113132761A (zh) 2021-07-16

Family

ID=76768710

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911406263.1A Pending CN113132761A (zh) 2019-12-31 2019-12-31 多媒体资源获取方法、服务器集群、用户终端设备及系统

Country Status (1)

Country Link
CN (1) CN113132761A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107529711A (zh) * 2017-08-01 2018-01-02 杭州安恒信息技术有限公司 流媒体的显示方法及装置
CN108419090A (zh) * 2017-12-27 2018-08-17 广东鸿威国际会展集团有限公司 三维直播流展示系统和方法
CN109995838A (zh) * 2018-01-02 2019-07-09 中国移动通信有限公司研究院 虚拟内容调度方法、装置、设备及计算机可读存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107529711A (zh) * 2017-08-01 2018-01-02 杭州安恒信息技术有限公司 流媒体的显示方法及装置
CN108419090A (zh) * 2017-12-27 2018-08-17 广东鸿威国际会展集团有限公司 三维直播流展示系统和方法
CN109995838A (zh) * 2018-01-02 2019-07-09 中国移动通信有限公司研究院 虚拟内容调度方法、装置、设备及计算机可读存储介质

Similar Documents

Publication Publication Date Title
CN108255605B (zh) 一种基于神经网络的图像识别协同计算方法及系统
CN113434300B (zh) 一种数据处理方法以及相关装置
US11303526B2 (en) Network slice deployment method and apparatus
US20160029079A1 (en) Method and Device for Playing and Processing a Video Based on a Virtual Desktop
CN108965884B (zh) 一种转码任务的分配方法及调度设备、转码设备
US20230118176A1 (en) Data transmission method and apparatus, computer-readable storage medium, electronic device, and computer program product
US10404774B2 (en) Mobile device and method for controlling transmission to web server in mobile device
WO2010147433A2 (en) Apparatus and method for transmitting and receiving a user interface in a communication system
CN111093094A (zh) 视频转码方法、装置、系统及电子设备及可读存储介质
CN113181646A (zh) 游戏数据方法及装置、电子设备、存储介质
CN115134632B (zh) 视频码率控制方法、设备、介质及内容分发网络cdn系统
CN109040786A (zh) 摄像头数据的传输方法、装置、系统及存储介质
CN104349177A (zh) 一种在桌面云下转向播放多媒体文件的方法、虚拟机及系统
US20170034551A1 (en) Dynamic screen replication and real-time display rendering based on media-application characteristics
CN108881817A (zh) 一种数据同步的方法、装置和系统
CN108401163B (zh) 一种实现vr直播的方法、装置及ott业务系统
CN113691812B (zh) 基于鸿蒙系统的分布式视频处理方法、终端和可读介质
CN113453025A (zh) 数据获取方法及装置
CN115989527A (zh) 用于对增强现实媒体对象执行基于锚点的渲染的方法和装置
CN113132761A (zh) 多媒体资源获取方法、服务器集群、用户终端设备及系统
US20230018087A1 (en) Data coding method and apparatus, and computer-readable storage medium
CN107426114B (zh) 资源分配方法及系统
CN115243053B (zh) 点云编解码方法及相关设备
CN101800751B (zh) 分布式实时数据编码传输方法
CN114172873B (zh) 分辩率调整方法、装置、服务器及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210716