CN111491210A

CN111491210A - 数据处理方法、装置及系统

Info

Publication number: CN111491210A
Application number: CN202010219829.6A
Authority: CN
Inventors: 卢涛; 李超; 范志刚
Original assignee: Xian Wanxiang Electronics Technology Co Ltd
Current assignee: Xian Wanxiang Electronics Technology Co Ltd
Priority date: 2020-03-25
Filing date: 2020-03-25
Publication date: 2020-08-04

Abstract

本公开提供一种数据处理方法、装置及系统，涉及数据处理领域，该方法包括：获取操作信息，所述操作信息中包括设备标识、账号信息、基于所述账号信息的操作动作和显示信息；查询本地是否存储有与所述基于所述账号信息的操作动作对应的动作状态信息；若查询到本地存储有与所述基于所述账号信息的操作动作对应的动作状态信息，则根据所述动作状态信息和显示信息生成渲染指令，并将所述渲染指令发送给服务器；接收服务器发送的渲染画面信息，并将所述渲染画面信息发送给所述设备标识对应的终端设备，所述渲染画面信息是第二服务器根据所述渲染指令生成的。本公开能够实现同一用户账号同时使用多个终端设备的功能。

Description

数据处理方法、装置及系统

技术领域

本公开涉及数据处理领域，尤其涉及数据处理方法、装置及系统。

背景技术

云端虚拟化技术当前发展以及非常迅速。随着各个公有云平台的进一步发展，对于虚拟桌面云平台的需求进一步加大。同时，由于用户对云端渲染图像的能力要求也越来越高，为了满足用户对图像的高需求，提出了图形处理器池(Graphics Processing Unit，GPU POOL)。GPU POOL能够对来自虚拟机(Virtual Machine，VM)的渲染指令进行渲染，并将渲染生成的图像发送给接收(Receiver，R)端，R端可以是硬R或者软R，软R运行在终端设备上，硬R为独立终端设备，R仅具有解码和显示功能，用户针对系统的所有操作都由VM完成。终端设备可以仅包括GPU、简单CPU和显示屏。

在一个用户同时使用多个终端设备，也即一个用户账号同时登录三个R 的场景下，比如用户使用一个用户账号同时使用多个终端设备，在基于GPU POOL的云终端系统中，如何实现同一用户账号同时使用多个终端设备是尚待解决的问题。

发明内容

本公开实施例提供一种数据处理方法、装置及系统，本公开能够实现同一用户账号同时使用多个终端设备的功能。所述技术方案如下：

根据本公开实施例的第一方面，提供一种数据处理方法，应用于数据处理装置，该方法包括：

获取操作信息，操作信息中包括设备标识、账号信息、基于账号信息的操作动作和显示信息；

查询本地是否存储有与基于账号信息的操作动作对应的动作状态信息；

若查询到本地存储有与基于账号信息的操作动作对应的动作状态信息，则根据动作状态信息和显示信息生成渲染指令，并将渲染指令发送给服务器；

接收服务器发送的渲染画面信息，并将渲染画面信息发送给设备标识对应的终端设备，渲染画面信息是第二服务器根据渲染指令生成的。

在一个实施例中，该方法还包括：

若查询到本地未存储与基于账号信息的操作动作对应的动作状态信息，则根据操作动作生成渲染指令，并将渲染指令发送给第二服务器。

在一个实施例中，该方法还包括：

获取与基于账号信息的操作动作对应的动作状态信息并存储。

在一个实施例中，渲染画面信息包括存储位置信息，存储位置信息用于指示渲染画面存储的位置，存储位置信息和设备标识对应。

在一个实施例中，该动作状态信息包括：与操作动作对应的页面信息；

页面信息包括以下至少之一：用户名、密码、操作状态、操作对象名称。

在一个实施例中，操作动作包括播放视频，动作状态信息包括以下至少之一：播放的视频地址、播放的视频名称，播放模式、播放内容、播放音量、播放进度。

根据本公开实施例的第二方面，提供一种数据处理装置，该装置包括：

获取模块，用于获取操作信息，操作信息中包括设备标识、账号信息、基于账号信息的操作动作和显示信息；

查询模块，用于查询本地是否存储有与基于账号信息的操作动作对应的动作状态信息；

第一生成模块，用于若查询到本地存储有与基于账号信息的操作动作对应的动作状态信息，则根据动作状态信息和显示信息生成渲染指令，并将渲染指令发送给第二服务器；

发送模块，用于接收第二服务器发送的渲染画面信息，并将渲染画面信息发送给设备标识对应的终端设备，渲染画面信息是第二服务器根据渲染指令生成的。

在一个实施例中，该装置还包括：

第二生成模块，用于若查询到本地未存储与基于账号信息的操作动作对应的动作状态信息，则根据操作动作生成渲染指令，并将渲染指令发送给第二服务器。

在一个实施例中，该装置还包括：

存储模块，用于获取与基于账号信息的操作动作对应的动作状态信息并存储。

本公开中针对同一个账号对应的各终端设备间的进行信息共享和同步，此外，由服务器将完成渲染的画面对应的编码数据保存在各终端设备对应的存储位置信息，保证各终端设备的编码数据不会混淆。

根据本公开实施例的第三方面，提供一种数据处理系统，该系统包括上述第二方面所描述的数据处理装置、服务器和终端设备。

在一个实施例中，服务器根据渲染指令生成渲染画面，并将渲染画面进行编码，得到编码数据，存储编码数据并生成存储位置信息，存储位置信息用于指示渲染画面存储的位置，存储位置信息和设备标识对应。

在一个实施例中，终端设备通过存储位置信息与服务器建立传输链路，传输链路用于传输编码数据。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是本公开实施例提供的一种数据处理系统结构图；

图2是本公开实施例提供的一种数据处理方法流程图；

图3是本公开实施例提供的一种数据处理方法流程图；

图4是本公开实施例提供的一种数据处理装置结构图；

图5是本公开实施例提供的一种数据处理装置结构图；

图6是本公开实施例提供的一种数据处理装置结构图；

图7是本公开实施例提供的一种数据处理系统结构图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

以下描述的一部分明确地或者暗含地涉及算法和对计算机存储器内数据的操作的功能或者符号表示。这些算法的描述和功能或者符号表示是数据处理领域内技术人员用于更有效地向本领域内其它技术人员表达他们工作实质的方法。此处通常将算法设想为生成期望结果的一系列有条理的步骤。这些步骤是需要对诸如能够存储、传送、组合、对比以及通过其它方式操控的电、磁或者光信号的物理量进行物理操控的步骤。

说明书还公开了用于执行方法操作的设备。这种设备为所需的目的而特别构成，或者可以包括通用计算机或者其它存储在计算机中的计算机程序选择性启动或者重新配置的其它设备。本文介绍的算法和显示不是固有地与任何具体计算机或者其它设备相关。各种通用机器可以根据本文教导的程序一起使用。可替换地，用于执行所要求的方法步骤的更特殊的设备构造是可以适用的。常规的通用计算机的结构将在以下描述中介绍。

此外，由于可以由计算机代码实施本文描述方法的各步骤对本领域技术人员是显而易见的，因此本说明书还暗含地公开计算机程序。该计算机程序不试图限制于任何具体的编程语言及其执行。应该理解，可以使用多种编程语言及其代码以执行本文包含的公开的教导。此外，该计算机程序不试图限制于任何具体的控制流。在不脱离本发明精神或者范围的情况下，存在许多其它种类的、可以使用不同控制流的计算机程序。

而且，可以并行地而不是顺序地执行计算机程序的一个或者多个步骤。这种计算机程序可以存储在任何计算机可读介质上。计算机可读介质可以包括的存储设备诸如为磁盘或者光盘、存储器芯片或者适于与通用计算机接口的其它存储设备等。计算机可读介质还可以包括诸如在因特网系统中的硬接线介质，或者无线介质。当在这种通用计算机上加载和执行计算机程序时，计算机程序有效地产生实施优选方法的步骤的设备。

本发明还可被实施为硬件模块。更具体地，在硬件意义下，模块是被设计为与其它部件或模块一起使用的功能性硬件单元。例如，模块可使用分立电子部件实施，或者其可以形成整个电子电路诸如特定用途集成电路(ASIC) 的一部分。还存在许多其它可能。本领域技术人员应理解，该系统还可被实施为硬件和软件模块的组合。

图1为本公开实施例提供的一种数据处理系统结构图，如图1所示的数据处理系统为云端虚拟化系统，该系统包括GPU POOL服务器(图中的GPU POOL系统)和云服务器(图中的云端虚拟化系统)。云端虚拟化系统包括多个VM，一个VM包括S1模块和多个虚拟R端应用，一个虚拟R端应用模块包括多个业务。GPU POOL系统包括GPU POOL模块、S2模块和管理模块，当然，S2模块和管理模块都可以集成在GPU POOL模块中。

VM用于接收用户使用同一用户账号在R端的操作信息，执行操作信息，并生成操作信息对应的渲染指令，将渲染指令发送给GPU POOL；还用于同步更新VM所管理的各虚拟R端应用的信息。

虚拟R端应用，用于执行用户在一个R上的操作信息，一个R对应一个虚拟R端应用模块，虚拟R端应用模块与R的标识符绑定；具体的，为用户在该R上的每个操作动作建立一个业务。

业务模块，用于执行用户在R上的操作动作，比如观看视频A，浏览购物网站B等；并根据操作动作生成渲染指令，将渲染指令发送给GPU POOL 进行渲染。

比如，操作动作为观看视频A，那么，渲染指令则为生成该视频A的播放画面。

需要说明的是，业务模块之间通过不同的业务类型来区分，相同类型的业务在不同虚拟R端应用之间，也就是不同R之间，可以同步业务状态。

管理模块，用于将来自R端的消息转发至云端虚拟化系统。

具体的，一个用户账号对应一个VM；一个R端对应一个虚拟R端应用，一个虚拟R端应用与一个R端的标识符绑定，一个用户动作对应一个业务，一个业务与一个动作绑定。

GPU POOL模块，用于接收并执行业务模块发送的渲染指令，生成渲染画面，将渲染画面发送到S2模块。

S2模块，用于对渲染后的画面进行编码和保存，编码数据的保存位置由 IP地址+端口号组成。

S1模块，用于对VM账号的管理；具体包括：保存用户的动作状态(比如，用户名、密码、操作状态、操作对象的名称等等与用户的操作动作对应的页面有关的信息)，保存各R所需的编码数据的保存位置与各R的标识符之间的对应关系等。

比如，用户使用用户账号A在R1观看视频，那么，用户账号A对应的 VM中的S1模块可以记录用户的动作状态，动作状态可以包括：播放的视频地址和名称，播放的模式、字母和音量、播放的进度等与用户行为相关的状态。当用户在其他R上播放与R1上播放的同样的视频时，S1模块会将动作状态发送给其他R对应的虚拟R端应用，其他R对应的虚拟R端应用可以根据动作状态生成渲染指令，GPU POOL根据渲染指令生成的视频画面，与 R1上正在播放的视频画面相同。

此外，由于S1模块中保存了各R所需的编码数据的保存位置与各R的标识符之间的对应关系，因此，当R向S1模块发送获取编码数据的请求时，获取请求携带R自身的标识符，S1能够根据R的标识符和对应关系，查找对R所需的编码数据的保存位置，并返回R端，以使R端能够从编码数据的保存位置中获取所需的编码数据。

图2是基于图1中数据处理系统的数据处理方法流程图，包括以下几个步骤：

步骤201、用户使用用户账号A，操作登陆R3。

需要说明的是，用户已使用用户账号A，成功登录R1和R2。

在本步骤中，R3向云端虚拟化系统发送用户操作信息(账号信息)，其中，用户操作信息(账号信息)中携带R3端的标识码、用户账号A、操作动作和R3的显示信息，显示信息包括显示分辨率和显示形式，显示形式包括详细版和简约版。

比如，QQ在电脑上的显示形式可以为详细版，在手机上的显示形式可以为简约版，当接收到新消息时，详细版可以为弹出完整的聊天界面，简约版可以为弹出一条聊天信息。

又比如，R端的标识码可以为硬件标识码，以便云端虚拟化系统能够区分不同的R。

步骤202、确定用户账号A对应的VM1；将由S1模块为R3分配对应的虚拟R端应用3，由虚拟R端应用3为用户的操作动作(账号信息)分配业务3。

第一、VM1中的S1模块在接收到来自用户账号A的用户操作信息之后，从用户操作信息中解析出用户账号、R端的标识码、显示信息和操作动作；

第二、S1模块根据R端的标识码，判断VM1中是否已存在R3对应的虚拟R端应用模块3，若没有，则新建一个虚拟R端应用模块3，并将显示信息和操作动作发送给虚拟R端应用模块3；

第三、虚拟R端应用模块3根据操作动作，判断是否存在该操作动作(账号信息)对应的业务，若没有，则建立一个新的业务3，并将显示信息发送给业务3，此外，虚拟R端应用3与R3的硬件标识码绑定；

步骤203、业务3从S1模块处获取该操作动作(账号信息)对应的动作状态(用户名、密码)，根据动作状态，执行该操作动作，并基于显示信息，生成渲染指令。

其中，渲染指令用于生成用户登录成功后的页面；业务3与用户登录的动作绑定。

比如，操作动作是用户登录，业务3根据R3的显示信息(分辨率和显示形式)，确定用于生成登录成功画面的渲染指令。

步骤204、业务3将渲染指令发送给GPU POOL系统中的GPU POOL 模块；GPU POOL模块根据渲染指令完成渲染任务，生成渲染画面，并将渲染画面发送给S2模块进行编码并保存编码数据。

编码数据在GPU POOL系统中的保存位置为IP地址+端口。

步骤205、R3周期性向S1模块发送获取编码数据的请求，S1模块向R3 返回编码数据的保存位置。

由于S1模块中事先保存了各R所需的编码数据的保存位置与各R的标识符之间的对应关系，因此，当R向S1模块发送获取编码数据的请求时，获取请求携带R自身的标识符，S1能够根据R的标识符和对应关系，查找对R所需的编码数据的保存位置，并返回R端，以使R端能够从编码数据的保存位置中获取所需的编码数据。

需要说明的是，在R3第一次从GPU POOL系统中获取编码数据后，建立R3与GPUPOOL中用于保存R3编码数据的保存位置的传输链路；在GPU POOL中用于保存R3编码数据的保存位置接收到新的编码数据之后，GPU POOL将新的编码数据通过传输链路直接发送给R3，无需R3再请求。

在R1 R2 R3均登录成功后，R1 R2 R3均建立与GPU POOL的传输链路。

这样，由一个VM控制多个R，方便一个账号对应的各R间的信息共享和同步，此外，由GPU POOL将完成渲染的画面对应的编码数据保存在各R 对应的地址，保证各R的编码数据不会混淆。

图3是本公开实施例提供的一种数据处理方法流程图，应用于数据处理装置，如图3所示的数据处理方法包括：

步骤301、获取操作信息，操作信息中包括设备标识、账号信息、基于账号信息的操作动作和显示信息；

其中，设备标识可以唯一标识终端设备，例如终端设备的硬件识别码，可以区分不同意账号对应的不同终端设备。

账号信息用于识别不同终端设备是同一个用户。

显示信息包括显示分辨率和显示形式，显示形式包括详细版和简约版。

步骤302、查询本地是否存储有与基于账号信息的操作动作对应的动作状态信息；

动作状态信息包括：与操作动作对应的页面信息；

操作动作包括播放视频，动作状态信息包括以下至少之一：播放的视频地址、播放的视频名称，播放模式、播放内容、播放音量、播放进度。

若查询到本地存储有与基于账号信息的操作动作对应的动作状态信息，则执行步骤303，若查询到本地未存储与基于账号信息的操作动作对应的动作状态信息，则执行步骤304。

步骤303、根据动作状态信息和显示信息生成渲染指令，并将渲染指令发送给服务器；

跳至步骤306。

步骤304、根据操作动作生成渲染指令，并将渲染指令发送给第二服务器。

步骤305、获取与基于账号信息的操作动作对应的动作状态信息并存储。

渲染画面信息包括存储位置信息，存储位置信息用于指示渲染画面存储的位置，存储位置信息和设备标识对应。步骤306、接收服务器发送的渲染画面信息，并将渲染画面信息发送给设备标识对应的终端设备，渲染画面信息是第二服务器根据渲染指令生成的。

图4是本本公开实施例提供的一种数据处理装置结构图，如图4所示的数据处理装置40包括获取模块401、查询模块402、第一生成模块403和发送模块404；

获取模块401，用于获取操作信息，操作信息中包括设备标识、账号信息、基于账号信息的操作动作和显示信息；

查询模块402，用于查询本地是否存储有与基于账号信息的操作动作对应的动作状态信息；

第一生成模块403，用于若查询到本地存储有与基于账号信息的操作动作对应的动作状态信息，则根据动作状态信息和显示信息生成渲染指令，并将渲染指令发送给第二服务器；

发送模块404，用于接收第二服务器发送的渲染画面信息，并将渲染画面信息发送给设备标识对应的终端设备，渲染画面信息是第二服务器根据渲染指令生成的。

图5是本本公开实施例提供的一种数据处理装置结构图，如图5所示的数据处理装置40包括获取模块401、查询模块402、第一生成模块403、发送模块404和第二生成模块405；

第二生成模块405，用于若查询到本地未存储与基于账号信息的操作动作对应的动作状态信息，则根据操作动作生成渲染指令，并将渲染指令发送给第二服务器。

图6是本本公开实施例提供的一种数据处理装置结构图，如图6所示的数据处理装置40包括获取模块401、查询模块402、第一生成模块403、发送模块404、第二生成模块405和存储模块406；

存储模块406，用于获取与基于账号信息的操作动作对应的动作状态信息并存储。

渲染画面信息包括存储位置信息，存储位置信息用于指示渲染画面存储的位置，存储位置信息和设备标识对应。

该动作状态信息包括：与操作动作对应的页面信息；

图7是本公开实施例提供的一种数据处理系统结构图，如图7所示的数据处理系统70包括：数据处理装置701、服务器702和终端设备703。

数据处理装置701为上述实施例中的数据处理装置。

可选的，服务器702根据渲染指令生成渲染画面，并将渲染画面进行编码，得到编码数据，存储编码数据并生成存储位置信息，存储位置信息用于指示渲染画面存储的位置，存储位置信息和设备标识对应。

可选的，终端设备703通过存储位置信息与服务器建立传输链路，传输链路用于传输编码数据。

具体的，数据处理装置701还包括至少一个虚拟机，虚拟机和账号信息对应，每个虚拟机中可以启动至少一个应用。

具体的，数据处理装置可以根据账号信息分配与设备标识对应的虚拟机，根据所述设备标识分配与所述终端设备对应的应用，并在所述应用中分配与所述操作动作对应的业务。

首先根据所述设备标识，判断所述虚拟机中是否已存在与设备标识对应的应用；

若不存在，新建与所述设备标识对应的应用；

根据所述操作动作，判断是否存在与操作动作对应的业务；

若不存在，新建与操作动作对应的业务。

基于所述对应的业务执行所述操作动作，并根据执行的结果生成渲染指令。

可选的，终端设备703可以是智能手机、智能手表或智能眼镜等。

基于上述图3对应的实施例中所描述的数据处理方法，本公开实施例还提供一种计算机可读存储介质，例如，非临时性计算机可读存储介质可以是只读存储器(英文：ReadOnly Memory，ROM)、随机存取存储器(英文： Random Access Memory，RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机指令，用于执行上述图3对应的实施例中所描述的数据处理方法，此处不再赘述。

本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

Claims

1.一种数据处理方法，应用于数据处理装置，其特征在于，所述方法包括：

获取操作信息，所述操作信息中包括设备标识、账号信息、基于所述账号信息的操作动作和显示信息；

查询本地是否存储有与所述基于所述账号信息的操作动作对应的动作状态信息；

若查询到本地存储有与所述基于所述账号信息的操作动作对应的动作状态信息，则根据所述动作状态信息和显示信息生成渲染指令，并将所述渲染指令发送给服务器；

接收服务器发送的渲染画面信息，并将所述渲染画面信息发送给所述设备标识对应的终端设备，所述渲染画面信息是第二服务器根据所述渲染指令生成的。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

若查询到本地未存储与所述基于所述账号信息的操作动作对应的动作状态信息，则根据所述操作动作生成渲染指令，并将所述渲染指令发送给第二服务器。

3.根据权利要求2所述的方法，其特征在于，所述方法还包括：

获取与所述基于所述账号信息的操作动作对应的动作状态信息并存储。

4.根据权利要求1-3任一项所述的方法，其特征在于，所述渲染画面信息包括存储位置信息，所述存储位置信息用于指示渲染画面存储的位置，所述存储位置信息和设备标识对应。

5.根据权利要求4所述的方法，其特征在于，所述动作状态信息包括：与所述操作动作对应的页面信息；

所述页面信息包括以下至少之一：用户名、密码、操作状态、操作对象名称。

6.根据权利要求5所述的方法，其特征在于，所述操作动作包括播放视频，所述动作状态信息包括以下至少之一：播放的视频地址、播放的视频名称，播放模式、播放内容、播放音量、播放进度。

7.一种数据处理装置，其特征在于，所述装置包括：

获取模块，用于获取操作信息，所述操作信息中包括设备标识、账号信息、基于所述账号信息的操作动作和显示信息；

查询模块，用于查询本地是否存储有与所述基于所述账号信息的操作动作对应的动作状态信息；

第一生成模块，用于若查询到本地存储有与所述基于所述账号信息的操作动作对应的动作状态信息，则根据所述动作状态信息和显示信息生成渲染指令，并将所述渲染指令发送给第二服务器；

发送模块，用于接收第二服务器发送的渲染画面信息，并将所述渲染画面信息发送给所述设备标识对应的终端设备，所述渲染画面信息是第二服务器根据所述渲染指令生成的。

8.一种数据处理系统，其特征在于，所述系统包括权利要求7所述的数据处理装置、服务器和终端设备。

9.根据权利要求8所述的系统，其特征在于，

所述服务器根据所述渲染指令生成渲染画面，并将渲染画面进行编码，得到编码数据，存储所述编码数据并生成存储位置信息，所述存储位置信息用于指示渲染画面存储的位置，所述存储位置信息和设备标识对应。

10.根据权利要求9所述的系统，其特征在于，

所述终端设备通过所述存储位置信息与所述服务器建立传输链路，所述传输链路用于传输所述编码数据。