CN115604506B - 一种云渲染数据同步处理方法、装置及设备 - Google Patents

一种云渲染数据同步处理方法、装置及设备 Download PDF

Info

Publication number
CN115604506B
CN115604506B CN202211529314.1A CN202211529314A CN115604506B CN 115604506 B CN115604506 B CN 115604506B CN 202211529314 A CN202211529314 A CN 202211529314A CN 115604506 B CN115604506 B CN 115604506B
Authority
CN
China
Prior art keywords
user
data
rendering
engine end
basic information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211529314.1A
Other languages
English (en)
Other versions
CN115604506A (zh
Inventor
毛波
刘祥德
李继永
陈志浩
安琪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Digital City Research Center
Original Assignee
Beijing Digital City Research Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Digital City Research Center filed Critical Beijing Digital City Research Center
Priority to CN202211529314.1A priority Critical patent/CN115604506B/zh
Publication of CN115604506A publication Critical patent/CN115604506A/zh
Application granted granted Critical
Publication of CN115604506B publication Critical patent/CN115604506B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23412—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs for generating or manipulating the scene composition of objects, e.g. MPEG-4 objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80—Responding to QoS
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44012—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving rendering scenes according to scene graphs, e.g. MPEG-4 scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Processing Or Creating Images (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请提出一种云渲染数据同步处理方法、装置及设备，涉及渲染的技术领域，第一引擎端根据第一用户的客户端发送的动作指令得到第一用户的基本信息；第一引擎端基于第一用户的视角结合基本信息及目标渲染场景的数据进行渲染获得第一渲染数据，并发送至第一用户的客户端；第一引擎端将基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，第二引擎端基于第二引擎端对应的第二用户的视角，获得第二渲染数据，并将其发送给第二用户的客户端，第一用户和第二用户在同一目标渲染场景内。如此能够，在不同的引擎端渲染不同的用户数据，减少单引擎渲染和计算的数据量，从而减少客户端出现图像延时以及卡顿的问题。

Description

一种云渲染数据同步处理方法、装置及设备
技术领域
本申请涉及渲染技术领域，尤其涉及一种云渲染数据同步处理方法、装置及设备。
背景技术
当前云渲染例如游戏等，能够为用户提供实时渲染。例如游戏中，每个用户在游戏场景中会出现各种动作形态，例如奔跑、跳跃、攻击、防守等，此类动作形态要展现在用户所在的客户端上需要进行渲染才能展示对应的图像，会出现用户动作形态的游戏场景可称为渲染场景。且在同一个渲染场景中，多用户之间会进行协作或攻击。并且，每个用户需要观察其他用户的动作，才能为下一步动作作出判断。因此，每个用户所在的客户端需要实时展示同一渲染场景中其他用户的图像。
当前，随着渲染场景的逐渐复杂化，当对同一渲染场景中多个用户的图像进行渲染时，引擎端数据处理压力大，会造成客户端出现图像延时以及卡顿等问题。
发明内容
有鉴于此，本申请实施例提供了一种云渲染数据同步处理方法、装置及设备，减少客户端出现图像延时以及卡顿的问题。
第一方面，本申请提出一种云渲染数据同步处理方法，包括：
响应于获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息，所述基本信息包括位姿、地理坐标、旋转角度，所述第一引擎端与所述第一用户对应；
第一引擎端基于第一用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第一渲染数据，并将所述第一渲染数据发送至所述第一用户的客户端，以便所述第一用户的客户端根据所述第一渲染数据显示图像；
第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，以便所述第二引擎端基于第二引擎端对应的第二用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第二渲染数据，并将所述第二渲染数据发送给所述第二用户的客户端，以便所述第二用户的客户端根据所述第二渲染数据显示图像；所述第二引擎端与所述第二用户对应，所述第一用户和所述第二用户均为属于所述目标渲染场景内的用户。
可选的，在所述响应于获取第一用户的客户端发送的动作指令，第一引擎端根据目标渲染场景的数据进行数据渲染，得到所述第一用户的第一渲染数据之前，所述方法还包括：
所述第一引擎端获取所述第一用户的用户标识；
所述第一引擎端根据所述第一用户的用户标识，建立与所述第一用户的对应关系。
可选的，所述第一引擎端获取第一用户的用户标识，包括：
所述第一引擎端获取由数据同步服务器分配的所述第一用户的用户标识。
可选的，所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，包括：
第一引擎端将所述第一用户的基本信息封装，得到封装信息；
第一引擎端将所述封装信息发送至数据同步服务器。
可选的所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，包括：
第一引擎端将所述第一用户的基本信息发送至数据同步服务器，所述数据同步服务器用于基于配置项对所述第一用户的基本信息进行筛选，并向所述第二引擎端发送筛选后的第一用户的基本信息。
可选的，所述响应于获取第一用户的客户端发送的动作指令，包括：
响应于利用实时音视频服务webrtc获取第一用户的客户端发送的动作指令。
可选的，所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，包括：
所述第一引擎端通过用户数据报协议UDP向所述数据同步服务器发送所述第一用户的基本信息。
第二方面，本申请还提出一种云渲染数据同步处理装置，包括：
第一获取模块，用于响应于获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息，所述基本信息包括位姿、地理坐标、旋转角度，所述第一引擎端与所述第一用户对应；
第一发送模块，用于所述第一引擎端基于第一用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第一渲染数据，并将所述第一渲染数据发送至所述第一用户的客户端，以便所述第一用户的客户端根据所述第一渲染数据显示图像；
第二发送模块，用于所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，以便所述第二引擎端基于第二引擎端对应的第二用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第二渲染数据，并将所述第二渲染数据发送给所述第二用户的客户端，以便所述第二用户的客户端根据所述第二渲染数据显示图像；所述第二引擎端与所述第二用户对应，所述第一用户和所述第二用户均为属于所述目标渲染场景内的用户。
可选的，包括：
第二获取单元，用于所述第一引擎端获取所述第一用户的用户标识；
关系建立单元，用于所述第一引擎端根据述第一用户的用户标识，建立与所述第一用户的对应关系。
可选的，包括：
第二发送模块，还用于第一引擎端将所述第一用户的基本信息发送至数据同步服务器，所述数据同步服务器用于基于配置项对所述第一用户的基本信息进行筛选，并向所述第二引擎端发送筛选后的第一用户的基本信息。
第三方面，本申请还提出一种云渲染数据同步处理设备，包括：处理器和存储器，所述存储器用于存储程序或代码，所述处理器用于调用所述程序或代码实现上述的一种云渲染数据同步处理方法。
本申请实施例提供了一种云渲染数据同步处理方法、装置及设备。响应于获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息；第一引擎端根据第一用户的客户端的动作指令，获得基本信息，了解第一用户在目标渲染场景中的动作变化。第一引擎端基于第一用户视角，结合动作的基本信息，结合目标渲染场景的数据进行渲染，使第一用户在客户端基于第一用户视角，观察第一用户在目标渲染场景中的动作变化。所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，以便所述第二引擎端基于第二引擎端对应的第二用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第二渲染数据，并将所述第二渲染数据发送给所述第二用户的客户端，以便所述第二用户的客户端根据所述第二渲染数据显示图像。第二用户的客户端获得第二引擎端基于第二用户视角，结合第一用户的基本信息和目标渲染场景的数据进行渲染后获得的第二渲染数据，方便第二用户的客户端基于第二用户的视角，更新目标渲染场景的变化。通过数据同步服务器，同步其他引擎端的用户基本信息，使同一目标渲染场景中的各个用户基于各自的用户视角，获得对应的渲染数据，并更新用户的客户端的图像。每个引擎端分配处理同一渲染场景内部分用户的动作指令获得渲染图像，并通过引擎端间的数据同步，使每个用户的客户端均能够获得同一渲染场景内所有用户图像的同时，减少每个引擎端处理数据的压力，减少客户端出现图像延时、卡顿的问题。
附图说明
为更清楚地说明本实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种云渲染数据同步处理方法流程图；
图2为本申请实施例提供的另一种云渲染数据同步处理方法流程图；
图3为本申请实施例提供的一种云渲染数据同步处理装置结构示意图。
具体实施方式
当前云渲染例如游戏等，能够为用户提供实时渲染。例如游戏中，每个用户在游戏场景中会出现各种动作形态，例如奔跑、跳跃、攻击、防守等，此类动作形态要展现在用户所在的客户端上需要进行渲染才能展示对应的图像，会出现用户动作形态的游戏场景可称为渲染场景。且在同一个渲染场景中，多用户之间会进行协作或攻击。并且，每个用户需要观察其他用户的动作，才能为下一步动作作出判断。因此，每个用户所在的客户端需要实时展示同一渲染场景中其他用户的图像。
当前，随着渲染场景的逐渐复杂化，当对同一渲染场景中多个用户的图像通过一个引擎端进行图像的渲染处理，造成引擎端数据处理压力大，在用户的客户端常常出现图像延时以及卡顿等问题。
基于上述原因，本申请通过设置多个引擎端，每个引擎端处理同一渲染场景内部分用户的动作指令获得渲染图像，并通过引擎端间的数据同步，使每个用户的客户端均能够获得同一渲染场景内所有用户图像的同时，减少每个引擎端处理数据的压力，减少客户端出现图像延时、卡顿的问题。此外，客户端可以设置接受的数据类型的配置项，向该客户端发送渲染数据前，可以根据配置项对全量的渲染数据进行筛选再发送，加快数据传输的速度，减少无关数据对进程的占用，进一步减少客户端出现图像延时、卡顿的问题。
显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
图1为本申请实施例提供的一种云渲染数据同步处理方法流程图，参见图1，一种云渲染数据同步处理方法，所述方法包括：
S101、响应于获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息，所述基本信息包括位姿、地理坐标、旋转角度，所述第一引擎端与所述第一用户对应。
动作指令可以是游戏中的前进、后退、进攻等触控指令，也可以是VR场景中第一用户握持客户端挥动的动作，当然也可以是其他场景中需要实时更新反馈的动作指令。
目标渲染场景可以是用户执行动作指令的游戏场景，也可以是其他配合用户指令进行实时图像渲染的场景。
在一种可能的实现方式中，响应于获取第一用户的客户端发送的动作指令，可以是响应于利用实时音视频服务webrtc获取第一用户的客户端发送的动作指令。
第一引擎端获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息，通过基本信息包括的位姿、地理坐标、旋转角度等体现第一用户在目标渲染场景内的动作变化，为后续基于用户的视角进行渲染做好准备。
需要说明的是，第一引擎端是多个引擎端中的一个，每个引擎端内可对应多个用户，例如第一引擎端可设置多个第一用户，每个引擎端接收对应的用户的客户端发送的动作指令。
S102、所述第一引擎端基于所述第一用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第一渲染数据，并将所述第一渲染数据发送至所述第一用户的客户端，以便所述第一用户的客户端根据所述第一渲染数据显示图像。
具体的，第一引擎端设置多个第一用户时，获取第一引擎端内的每个第一用户的第一渲染数据时，可以是，第一引擎端根据第一引擎端内的多个第一用户的基本信息和目标渲染场景的数据，基于每个第一用户的视角，形成每个第一用户的第一渲染数据，最后将每个用户的第一渲染数据发送至该第一用户的客户端，以便该客户端根据第一渲染数据显示图像。
S103、所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，以便所述第二引擎端基于第二引擎端对应的第二用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第二渲染数据，并将所述第二渲染数据发送给所述第二用户的客户端，以便所述第二用户的客户端根据所述第二渲染数据显示图像；所述第二引擎端与所述第二用户对应，所述第一用户和所述第二用户均为属于所述目标渲染场景内的用户。
数据同步服务器为加入目标渲染场景的用户分配引擎端；当用户有多个时，为了减少每个引擎端的压力，可以为弹性的增加引擎端的个数，当目标渲染场景中的用户减少，可以弹性的减少引擎端的个数，每个引擎端可以设置至少分配一个用户，本申请中，第一引擎端可以对应多个第一用户，第二引擎端可以对应多个第二用户，第二引擎端也可以设置有多个。
第一引擎端将所述第一用户的基本信息发送至数据同步服务器，可以是，第一引擎端将所述第一用户的基本信息封装，得到封装信息；第一引擎端将所述封装信息发送至数据同步服务器。
将基本信息发送至数据同步服务器，然后通过数据同步服务器再同步给第二引擎端，通过基本信息而非渲染后的数据通过数据同步服务器在引擎端间同步，数据传输效率高。第二引擎端根据接收到的基本信息，结合第二引擎端对应的每个第二用户的视角及目标渲染场景的数据进行图像渲染，确定基于每个第二用户视角的第二渲染数据，每个第二用户的客户端基于第二渲染数据显示图像。引擎端会基于引擎端对应的用户的视角进行图像的渲染，每个引擎端的数据处理量大，因此，根据上述步骤S101-S103可知，本申请设置多个引擎端，每个引擎端将接收到的用户动作指令解析为基本信息，并通过数据同步服务器将基本信息发送到其他引擎端。各个引擎端分别基于对应的用户视角进行数据渲染。通过设置多个引擎端，并通过数据同步服务器同步，减少每个引擎端处理数据的压力，减少客户端出现延时卡顿的问题。
在本申请实施例中，在上述图1所述的步骤S101之前，还存在的一种可能的实现方式，建立第一用户与第一引擎端的对应关系，下面具体进行介绍。
A1、所述第一引擎端获取所述第一用户的用户标识。
在一种可能的实现的方式中，第一引擎端可以获取由数据同步服务器发送的所述第一用户的用户标识。
具体的，第一用户所在的客户端向数据同步服务器发送加入目标渲染场景的请求；数据同步服务器为第一用户注册用户标识；数据同步服务器根据加入目标渲染场景中的用户总数量，灵活配置对应数量的引擎端（每个引擎端配置的用户数量不超过预先设定的用户数量），数据同步服务器为第一用户所在的客户端分配第一引擎端，数据同步服务器保存分配的引擎端的引擎端标识，及各个引擎端对应的用户标识，数据同步服务器与第一引擎端采用全双工通讯协议建立连接，向第一引擎端发送第一用户的用户标识，第一引擎端获取第一用户的用户标识。
在另一种可能的实现方式中，第一引擎端可以从第一用户的用户端获取第一用户的用户标识。
具体的，第一用户所在的客户端向数据同步服务器发送加入目标渲染场景的请求后，数据同步服务器为第一用户注册用户标识；数据同步服务器根据加入目标渲染场景中的用户总数量，灵活配置对应数量的引擎端（每个引擎端配置的用户数量不超过预先设定的用户数量），数据同步服务器为注册的第一用户分配第一引擎端，数据同步服务器保存分配的引擎端的引擎端标识，及各个引擎端对应的用户标识，数据同步服务器与第一用户的客户端采用全双工通讯协议建立连接，数据同步服务器将第一用户的用户标识与分配的第一引擎端的引擎端标识发送至第一用户的客户端；第一引擎端与所述第一用户的客户端采用全双工通讯协议建立连接，第一用户的客户端向第一引擎端发送第一用户的用户标识，第一引擎端获取第一用户的用户标识。
A2、所述第一引擎端根据所述第一用户的用户标识，建立与所述第一用户的对应关系。
第一引擎端可以设置引擎端标识，可以将第一引擎端的引擎端标识与第一用户的用户端标识建立对应关系，并将对应关系存储于数据同步服务器中。
通过步骤A1-A2的内容可知，第一引擎端与第一用户之间的对应关系，方便第一引擎端与第一用户的客户端建立连接，并获取第一用户的客户端发送的动作指令，同时，第一引擎端获得第一渲染数据后，也能根据对应关系传输给第一用户对应的客户端，根据对应关系保证数据准确传输到对应的位置。
在本申请实施例中，在上述图1所述的步骤S103中，第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，还存在其他的可能的实现方式，下面具体进行介绍。
第一引擎端将所述第一用户的基本信息发送至数据同步服务器，所述数据同步服务器用于基于配置项对所述第一用户的基本信息进行筛选，并向所述第二引擎端发送筛选后的第一用户的基本信息。
配置项为在第二用户的客户端与数据同步服务平台之间采用全双工通讯协议建立连接后，第二用户的客户端根据需要的数据类型在数据服务平台上设置的。例如，游戏中，基本信息中包括第一用户在目标渲染场景中有前进方式数据、前进距离数据等，当第二用户的客户端例如仅需要前进距离数据，则在数据服务平台上设置配置向为距离配置项，数据服务平台筛选第一用户的基本信息中的配置项选择前进距离数据通过第二引擎端发送第二用户的客户端。
通过上述的内容可知，第二用户的客户端接收第一用户的基本信息时，只需选择需要配置的数据进行传输，无需传输全量的基本信息，加快数据传输的速度，减少无关数据对进程的占用，使第二用户的客户端及时根据筛选后的第一用户的基本信息进行数据渲染。
在本申请实施例中，基于上述的一种云渲染数据同步处理方法，本申请还基于具体的应用场景，提出另一种云渲染数据同步处理方法，下面具体进行介绍。
图2为本申请实施例提供的另一种云渲染数据同步处理方法流程图，对应同一目标渲染场景设定有第一引擎端为引擎1，第二引擎端为引擎端2和引擎端3，引擎1包括两个第一用户分别为用户A和用户B，引擎端2包括两个第二用户分别为用户C和用户D，引擎端3包括用户E和用户F。
需要说明的是，在上述同一目标渲染场景中，由数据同步服务器为加入该目标渲染场景的用户分配引擎端，引擎端的数量根据用户加入和退出的数量弹性调整。例如，当有新的用户H申请加入该目标渲染场景中，数据同步服务器可以为该用户H增加分配引擎端4。此外，本实施例中，设定每个引擎端对应配置两个用户，当然也可以根据引擎端的数据处理能力调整用户的数量。
每个用户向数据同步服务器发送加入目标渲染场景的请求时，同步服务器会为该用户注册用户标识，例如用户F，并为该用户F分配引擎端，例如引擎端3，数据同步服务器存储目标渲染场景对应的引擎1、引擎2、引擎3，也会存储引擎端与用户的对应关系，例如存储引擎端3分别与用户E和用户F的对应关系。
参见图2，另一种云渲染数据同步处理方法，包括：
S201、响应于获取用户A的客户端发送的动作指令一，引擎1根据动作指令一得到用户A在目标渲染场景内的第一基本信息；响应于获取用户B的客户端发送的动作指令二，引擎1根据动作指令二得到用户B在目标渲染场景内的第二基本信息。
基本信息包括位姿、地理坐标、旋转角度等。
S202、引擎1基于用户A的视角，结合用户A的基本信息及目标渲染场景的数据进行渲染获得渲染数据一，并将渲染数据一发送至用户A的客户端，以便用户A根据渲染数据一显示图像；引擎1基于用户B的视角，结合用户A的基本信息及目标渲染场景的数据进行渲染获得渲染数据二，并将渲染数据二发送至用户B的客户端，以便用户B根据渲染数据二显示图像。
S203、引擎端1将用户A的第一基本信息及用户B的第二基本数据封装，得到封装数据，封装数据中的用户A的第一基本信息还对应标注有用户A，用户B的第二基本数据还对应标注有用户B，封装数据标注有引擎端1。
S204、引擎端1向数据同步服务器发送封装数据，数据同步服务器将封装数据分发给引擎端2和引擎端3。 封装数据还可以通过配置想进行结合引擎端2或引擎端3的用户需要设置的配置向进行筛选。
S205、引擎端2基于用户C和用户D的视角，结合封装数据及目标渲染场景的数据进行渲染分别获得对应用户C视角的渲染数据三和对应用户D视角的渲染数据四，并将所述渲染数据三发送给用户C的客户端，以便所述用户C的客户端根据渲染数据三显示图像，同理用户D的客户端根据渲染数据四显示图像。
引擎端3基于用户E和用户F的视角，结合封装数据及目标渲染场景的数据进行渲染分别获得对应用户E视角的渲染数据五和对应用户F视角的渲染数据六，并将所述渲染数据五发送给用户E的客户端，以便所述用户E的客户端根据所述渲染数据五显示图像，同理用户D的客户端根据渲染数据六显示图像。
根据上述步骤S201-S204可知，通过设置多个引擎端，每个引擎端处理同一渲染场景内部分用户的动作指令获得基本信息，并通过引擎端间的数据同步，使每个用户的客户端均能够对应的引擎端的数据渲染，获得同一渲染场景内所有用户图像的同时，减少每个引擎端处理数据的压力，减少客户端出现图像延时、卡顿的问题。
根据上述实施例所述的一种云渲染数据同步处理方法，本申请还对应提出一种云渲染数据同步处理装置，具体实现方式如下。
图3为本申请提出的一种云渲染数据同步处理装置结构示意图，参见图3，云渲染数据的处理装置，包括，
第一获取模块301，用于响应于获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息，所述基本信息包括位姿、地理坐标、旋转角度，所述第一引擎端与所述第一用户对应；
第一发送模块302，用于所述第一引擎端基于所述第一用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第一渲染数据，并将所述第一渲染数据发送至所述第一用户的客户端，以便所述第一用户的客户端根据所述第一渲染数据显示图像；
第二发送模块303，用于所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，以便所述第二引擎端基于第二引擎端对应的第二用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第二渲染数据，并将所述第二渲染数据发送给所述第二用户的客户端，以便所述第二用户的客户端根据所述第二渲染数据显示图像；所述第二引擎端与所述第二用户对应，所述第一用户和所述第二用户均为属于所述目标渲染场景内的用户。
根据上述的一种云渲染数据同步处理装置可知，通过设置多个引擎端，并通过多个引擎间借助数据同步服务器进行数据同步，减少一个引擎端处理过多用户数据带来的数据处理压力，减少客户端出现图像延时、卡顿的问题。
在一种可能的实现方式中，一种云渲染数据同步处理装置，还包括：
第二获取单元，用于所述第一引擎端获取所述第一用户的用户标识；
关系建立单元，用于所述第一引擎端根据所述第一用户的用户标识，建立与所述第一用户的对应关系。
所述第一引擎端获取由数据同步服务器分配的所述第一用户的用户标识。
在另一种可能的实现方式中，第二发送模块303，还用于第一引擎端将所述第一用户的基本信息发送至数据同步服务器，所述数据同步服务器用于基于配置项对所述第一用户的基本信息进行筛选，并向所述第二引擎端发送筛选后的第一用户的基本信息。
所述第一引擎端通过用户数据报协议UDP向所述数据同步服务器发送第一用户的基本信息。
在又一种可能的实现方式中，第一获取模块301，还用于响应于利用实时音视频服务webrtc获取第一用户的客户端发送的动作指令。
一种云渲染数据同步处理的处理设备，包括：处理器和存储器，所述存储器用于存储程序或代码，所述处理器用于调用所述程序或代码实现上述实施例所述的一种云渲染数据同步处理方法。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述仅是本申请示例性的实施方式，并非用于限定本申请的保护范围。

Claims (11)

1.一种云渲染数据同步处理方法，其特征在于，包括：
响应于获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息，所述基本信息包括位姿、地理坐标、旋转角度，所述第一引擎端与所述第一用户对应；
所述第一引擎端基于所述第一用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第一渲染数据，并将所述第一渲染数据发送至所述第一用户的客户端，以便所述第一用户的客户端根据所述第一渲染数据显示图像；
所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，以便所述第二引擎端基于第二引擎端对应的第二用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第二渲染数据，并将所述第二渲染数据发送给所述第二用户的客户端，以便所述第二用户的客户端根据所述第二渲染数据显示图像；所述第二引擎端与所述第二用户对应，所述第一用户和所述第二用户均为属于所述目标渲染场景内的用户。
2.根据权利要求1所述的方法，其特征在于，在所述响应于获取第一用户的客户端发送的动作指令，第一引擎端根据目标渲染场景的数据进行数据渲染，得到所述第一用户的第一渲染数据之前，所述方法还包括：
所述第一引擎端获取所述第一用户的用户标识；
所述第一引擎端根据所述第一用户的用户标识，建立与所述第一用户的对应关系。
3.根据权利要求2所述的方法，其特征在于，所述第一引擎端获取第一用户的用户标识，包括：
所述第一引擎端获取由数据同步服务器分配的所述第一用户的用户标识。
4.根据权利要求1所述的方法，其特征在于，所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，包括：
第一引擎端将所述第一用户的基本信息封装，得到封装信息；
第一引擎端将所述封装信息发送至数据同步服务器。
5.根据权利要求1所述的方法，其特征在于，所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，包括：
所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，所述数据同步服务器用于基于配置项对所述第一用户的基本信息进行筛选，并向所述第二引擎端发送筛选后的第一用户的基本信息。
6.根据权利要求1所述的方法，其特征在于，所述响应于获取第一用户的客户端发送的动作指令，包括：
响应于利用实时音视频服务webrtc获取第一用户的客户端发送的动作指令。
7.根据权利要求4所述的方法，其特征在于，所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，包括：
所述第一引擎端通过用户数据报协议UDP向所述数据同步服务器发送所述第一用户的基本信息。
8.一种云渲染数据同步处理装置，其特征在于，包括：
第一获取模块，用于响应于获取第一用户的客户端发送的动作指令，第一引擎端根据所述动作指令得到所述第一用户在目标渲染场景内的基本信息，所述基本信息包括位姿、地理坐标、旋转角度，所述第一引擎端与所述第一用户对应；
第一发送模块，用于所述第一引擎端基于第一用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第一渲染数据，并将所述第一渲染数据发送至所述第一用户的客户端，以便所述第一用户的客户端根据所述第一渲染数据显示图像；
第二发送模块，用于所述第一引擎端将所述第一用户的基本信息发送至数据同步服务器，以便数据同步服务器将第一用户的基本信息发送至第二引擎端，以便所述第二引擎端基于第二引擎端对应的第二用户的视角，结合所述第一用户的基本信息及目标渲染场景的数据进行渲染获得第二渲染数据，并将所述第二渲染数据发送给所述第二用户的客户端，以便所述第二用户的客户端根据所述第二渲染数据显示图像；所述第二引擎端与所述第二用户对应，所述第一用户和所述第二用户均为属于所述目标渲染场景内的用户。
9.根据权利要求8所述的装置，其特征在于，包括：
第二获取单元，用于所述第一引擎端获取所述第一用户的用户标识；
关系建立单元，用于所述第一引擎端根据述第一用户的用户标识，建立与所述第一用户的对应关系。
10.根据权利要求8所述的装置，其特征在于，包括：
第二发送模块，还用于第一引擎端将所述第一用户的基本信息发送至数据同步服务器，所述数据同步服务器用于基于配置项对所述第一用户的基本信息进行筛选，并向所述第二引擎端发送筛选后的第一用户的基本信息。
11.一种云渲染数据同步处理设备，其特征在于，包括：处理器和存储器，所述存储器用于存储程序或代码，所述处理器用于调用所述程序或代码实现权利要求1-7任意一项所述的一种云渲染数据同步处理方法。
CN202211529314.1A 2022-12-01 2022-12-01 一种云渲染数据同步处理方法、装置及设备 Active CN115604506B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211529314.1A CN115604506B (zh) 2022-12-01 2022-12-01 一种云渲染数据同步处理方法、装置及设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211529314.1A CN115604506B (zh) 2022-12-01 2022-12-01 一种云渲染数据同步处理方法、装置及设备

Publications (2)

Publication Number Publication Date
CN115604506A CN115604506A (zh) 2023-01-13
CN115604506B true CN115604506B (zh) 2023-02-17

Family

ID=84852063

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211529314.1A Active CN115604506B (zh) 2022-12-01 2022-12-01 一种云渲染数据同步处理方法、装置及设备

Country Status (1)

Country Link
CN (1) CN115604506B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110751712A (zh) * 2019-10-22 2020-02-04 中设数字技术股份有限公司 基于云平台的在线三维渲染技术及系统
CN111767503A (zh) * 2020-07-29 2020-10-13 腾讯科技（深圳）有限公司 一种游戏数据处理方法、装置、计算机及可读存储介质
CN111790145A (zh) * 2019-09-10 2020-10-20 厦门雅基软件有限公司 数据处理的方法、装置、云游戏引擎及计算机存储介质
CN113082721A (zh) * 2021-05-11 2021-07-09 腾讯音乐娱乐科技（深圳）有限公司 集成游戏模块的应用程序的资源管理方法、装置、电子设备及存储介质
CN114942713A (zh) * 2022-03-31 2022-08-26 北京大甜绵白糖科技有限公司 基于增强现实的展示方法、装置、设备、存储介质及程序
CN115409680A (zh) * 2021-05-29 2022-11-29 华为云计算技术有限公司 渲染方法、设备以及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8885023B2 (en) * 2010-09-01 2014-11-11 Disney Enterprises, Inc. System and method for virtual camera control using motion control systems for augmented three dimensional reality

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111790145A (zh) * 2019-09-10 2020-10-20 厦门雅基软件有限公司 数据处理的方法、装置、云游戏引擎及计算机存储介质
CN110751712A (zh) * 2019-10-22 2020-02-04 中设数字技术股份有限公司 基于云平台的在线三维渲染技术及系统
CN111767503A (zh) * 2020-07-29 2020-10-13 腾讯科技（深圳）有限公司 一种游戏数据处理方法、装置、计算机及可读存储介质
CN113082721A (zh) * 2021-05-11 2021-07-09 腾讯音乐娱乐科技（深圳）有限公司 集成游戏模块的应用程序的资源管理方法、装置、电子设备及存储介质
CN115409680A (zh) * 2021-05-29 2022-11-29 华为云计算技术有限公司 渲染方法、设备以及系统
CN114942713A (zh) * 2022-03-31 2022-08-26 北京大甜绵白糖科技有限公司 基于增强现实的展示方法、装置、设备、存储介质及程序

Also Published As

Publication number Publication date
CN115604506A (zh) 2023-01-13

Similar Documents

Publication Publication Date Title
CN106385587B (zh) 分享虚拟现实视角的方法、装置及系统
CN106161219B (zh) 消息处理方法及装置
CN110248226B (zh) 信息的投屏方法、装置、系统、存储介质和处理器
CN102724138B (zh) 即时通信中的信息共享方法及装置
CN106507133B (zh) 弹幕消息的处理方法、装置、系统及其设备
CN107864122B (zh) 一种连麦主播直播流的显示方法及装置
CN107517399B (zh) 一种媒体信息同步的方法以及服务器
CN112291579A (zh) 数据处理方法、装置、设备和存储介质
CN103813202A (zh) 具有互动功能的智能电视和手持设备及其互动方法
CN106453231A (zh) 信令获取、传输方法和装置
CN113286190A (zh) 一种跨网络同屏控制方法、装置和跨网络同屏系统
CN111479036A (zh) 基于摄像头的子弹时间特效拍摄系统及方法
CN202444580U (zh) 一种获得电视节目截屏图片的系统，终端和服务器
CN109104632A (zh) 一种电视终端ar场景的实现方法及系统
CN115604506B (zh) 一种云渲染数据同步处理方法、装置及设备
CN113274727B (zh) 直播交互方法、装置和存储介质及电子设备
CN105578110A (zh) 一种视频通话方法、装置和系统
CN112039899B (zh) 虚拟现实系统控制方法、系统和存储介质
CN113244609A (zh) 多画面的显示方法和装置、存储介质及电子设备
EP2847888B1 (en) Method of transmitting contents and user's interactions among multiple devices
CN112532913A (zh) 一种视频混流方法、视频系统及服务器
CN108271033B (zh) 一种视频直播方法及装置
CN113244615B (zh) 聊天面板的显示控制方法和装置、存储介质及电子设备
CN113099281B (zh) 视频互动方法、装置、存储介质及终端
CN111195432B (zh) 对象显示方法和装置、存储介质及电子装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant