CN105677282B - 一种图像绘制的方法、用户设备、服务器及系统 - Google Patents

Abstract

本发明公开了一种图像绘制的方法，所述方法应用于云交互系统，所述云交互系统包括用户设备和服务器，所述服务器获取图像帧的所有绘制指令和绘制资源；对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，用户设备确定所述会影响图像绘制的绘制资源中包含执行所述会影响图像绘制的绘制指令所需的绘制资源时，执行每条绘制指令，利用绘制资源进行图像绘制，得到所述图像帧的绘制画面。本发明实施例提供的图像绘制的方法，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

Description

一种图像绘制的方法、用户设备、服务器及系统

技术领域

本发明涉及云技术领域，具体涉及一种图像绘制的方法、用户设备、服务器及系统。

背景技术

随着近年来网络带宽的高速发展，云计算技术的日趋成熟催生了云交互系统。现有的云交系统通常包括服务器和多个用户设备，服务器可以是集群服务器，多种交互式应用都可以运行在云交互系统中。在云交互系统中有关图像绘制方面的应用，现有技术中通常都是由服务器负责图像绘制，绘制完成后，将绘制好的图像帧发送给用户设备，用户设备接收到绘制好的图像帧后，直接解码图像帧，然后显示图像画面。

由服务器进行图像绘制，对服务器的硬件要求较高，而随着科技水平的提高，用户设备通常都具有较好的配置，这样无疑增加了对服务器的要求，而且同时浪费了用户设备的硬件资源。

发明内容

本发明实施例提供一种图像绘制的方法，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。本发明实施例还提供了相应的用户设备、服务器和系统。

本发明第一方面提供一种图像绘制的方法，所述方法应用于云交互系统，所述云交互系统包括用户设备和服务器，所述方法包括：

所述用户设备接收所述服务器发送的图像帧的绘制指令和绘制资源，所述绘制指令为会影响图像绘制的绘制指令，所述绘制资源为所述会影响图像绘制的绘制指令所对应的绘制资源；

所述用户设备确定所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令；

所述用户设备利用所述每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

本发明第二方面提供一种图像绘制的方法，所述方法应用于云交互系统，所述云交互系统包括用户设备和服务器，所述方法包括：

所述服务器获取图像帧的所有绘制指令和绘制资源；

所述服务器对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；

所述服务器向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面。

本发明第三方面提供一种用户设备，所述用户设备应用于云交互系统，所述云交互系统还包括服务器，所述用户设备包括：

接收单元，用于接收所述服务器发送的图像帧的绘制指令和绘制资源，所述绘制指令为会影响图像绘制的绘制指令，所述绘制资源为所述会影响图像绘制的绘制指令所对应的绘制资源；

处理单元，用于确定所述接收单元接收的所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令；

绘制单元，用于利用所述处理单元执行的每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

本发明第四方面提供一种服务器，所述服务器应用于云交互系统，所述云交互系统还包括用户设备，所述服务器包括：

获取单元，用于获取图像帧的所有绘制指令和绘制资源；

确定单元，用于对所述获取单元获取的每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；

发送单元，用于向所述用户设备发送所述确定单元确定的所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面。

本发明第五方面提供一种用户设备，所述用户设备应用于云交互系统，所述云交互系统还包括服务器，所述用户设备包括：

所述用户设备包括：收发器、中央处理器、图形处理器和存储器，所述存储器用于存储所述中央处理器执行控制输入法显示的程序；

所述收发器用于接收所述服务器发送的图像帧的绘制指令和绘制资源，所述绘制指令为会影响图像绘制的绘制指令，所述绘制资源为所述会影响图像绘制的绘制指令所对应的绘制资源；

所述中央处理器用于确定所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令；

所述图形处理器用于利用所述每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

本发明第六方面提供一种服务器，所述服务器应用于云交互系统，所述云交互系统还包括用户设备，所述服务器包括：收发器、处理器和存储器，所述存储器用于存储所述处理器执行控制输入法显示的程序；

所述处理器用于获取图像帧的所有绘制指令和绘制资源；对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；

所述收发器用于向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面。

本发明第七方面提供一种云交互系统，包括用户设备和服务器，

所述服务器用于：

获取图像帧的所有绘制指令和绘制资源，对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令，向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面；

所述用户设备用于：

接收所述服务器发送的所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源；确定所述所对应的绘制资源中包含执行所述会影响图像绘制的绘制指令所需的绘制资源时，执行所述会影响图像绘制的绘制指令中各条绘制指令；利用所述各条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

与现有技术中对服务器的硬件要求较高，而且浪费用户设备的硬件资源相比，本发明实施例提供的图像绘制的方法，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例中云交互式系统的一实施例示意图；

图2是本发明实施例中图像绘制的方法的一实施例示意图；

图3是本发明实施例中图像绘制的方法的另一实施例示意图；

图4是本发明实施例中用户设备的一实施例示意图；

图5是本发明实施例中用户设备的另一实施例示意图；

图6是本发明实施例中服务器的一实施例示意图；

图7是本发明实施例中服务器的另一实施例示意图；

图8是本发明实施例中服务器的另一实施例示意图；

图9是本发明实施例中用户设备的另一实施例示意图；

图10是本发明实施例中服务器的另一实施例示意图。

具体实施方式

本发明实施例提供一种图像绘制的方法，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。本发明实施例还提供了相应的用户设备、服务器和系统。以下分别进行详细说明。

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1为本发明实施例中云交互式系统的一实施例示意图。

参阅图1，云交互式系统可以理解为是云游戏系统，通常包括服务器和用户设备，用户设备可以有多个，服务器也可以是服务器集群，多种交互式应用都可以运行在云交互系统中。用户设备可以是个人电脑(Personal Computer，PC)、笔记本和手机等终端设备。服务器可以是专用的游戏服务器，目前游戏的画面都是由服务器完成绘制，然后一帧一帧的传输给用户设备，在用户设备上显示。但本发明实施例中，服务器要将每帧图像的绘制指令和绘制资源传输给用户设备，由用户设备来完成图像绘制，每帧图像在本发明实施例中成为图像帧。这样既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

结合图1所示的云交互式系统，下面参阅图2所示的图像绘制的方法的示意图，对本发明实施例提供的图像绘制的过程进行说明。

参阅图2，本发明实施例提供的图像绘制的方法的一实施例包括：

101、服务器获取图像帧的所有绘制指令和绘制资源。

每帧图像帧有很多条绘制指令，通常有1000-100000个左右，绘制指令统计上虽然有大量的重复，但是不同的组合会得到不同的效果。

102、服务器对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令。

图像帧的所有绘制指令中，有些绘制指令会影响绘制状态和绘制结果，也就是说会影响绘制流程，但有些绘制指令不会影响绘制状态和绘制结果，这样，这些不影响绘制流程的绘制指令就不需要发送给用户设备，所以可以通过指令过滤，过滤掉这些不影响绘制流程的绘制指令。

指令过滤的过程就是：识别这一条绘制命令是否会影响绘制状态和最终的绘制结果，比如D3D中获取相关状态的函数是不会影响绘制流程的，因此这些函数的绘制指令不需要传输给用户设备，这一步的操作就是指令过滤。

103、服务器向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源。

会影响图像绘制的绘制指令就是过滤后剩余的会影响绘制状态和最终的绘制结果的绘制指令。

104、用户设备接收到所述服务器发送的图像帧的会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，确定所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令。

绘制指令和绘制资源可能没有同步到达，所以在执行绘制之前要先确定该绘制指令的绘制资源是否已存在，如果已存在，则可以执行绘制指令，若未存在，则可能会导致指令执行失败。

105、利用所述每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

此处的每条绘制指令指的是会影响图像绘制的绘制指令中的每条绘制指令。

与现有技术中对服务器的硬件要求较高，而且浪费用户设备的硬件资源相比，本发明实施例提供的图像绘制的方法，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

为了便于对本发明实施例中图像绘制的方法进行更详细的理解，下面参阅图3进一步说明本发明实施例提供的图像绘制的方法。

参阅图3，本发明实施例提供的图像绘制的方法的另一实施例包括：

201、服务器获取图像帧的所有绘制指令。

202、服务器对该图像帧的所有绘制指令进行指令过滤，判断每条绘制指令是否对绘制有影响，若有影响，则执行步骤203。

203、服务器根据所述会影响图像绘制的绘制指令中各绘制指令的类型，将所述各绘制指令划分到不同的指令缓存空间，并将所述各绘制指令所对应的绘制资源划分到资源缓存区。

绘制指令的类型可以是不同的缓存类型、索引类型和流格式等。

本发明实施例中的绘制指令可以包括图3所示的指令标识和指令数据两部分，绘制资源为图3中的绘制数据。

所有的指令标识放在一个缓存空间可以保证绘制指令的强顺序性。

对于绘制指令，服务器中设置了指令缓存空间，每个缓存空间存储一种类型的指令，根据指令类型把绘制指令填充到对应的缓存空间中。同时我们还需要获得绘制指令所涉及的绘制资源，对于这些绘制资源，存在一个单独的资源缓存区。

对于每一条绘制指令都做了上面的步骤后，创建的各个指令缓存空间和资源缓存空间都会相应的被填充不同数量的数据，接下来的一步是对每个缓存空间做压缩，也就是执行步骤204和205。

指令数据，每种类型单独划分到一个缓存空间buffer，这样做的好处是相似含义的数据具有规律性，然后使用压缩算法压缩可以得到高压缩比，这样一帧总共要传输的数据总量可以减少。

本发明实施例中按照绘制指令的类型进行指令划分，目的是为了让后续指令传输过程中减少网络传输的数据量。如果不用减少网络传输的数据量，也可以不用做任何区分，直接传输就可以。

204、服务器进行指令数据压缩。

205、服务器进行资源数据压缩。

206和207、服务器通过双通道发送压缩后的指令数据和资源数据。

图3所示的指令数据是要与指令标识同时传递到用户设备的数据，需要与指令标识放在一个通道中传输，指令数据通常包括顶点数据，用来构建虚拟场景，指令数据不到程序会崩溃。绘制资源也就是资源数据主要指纹理，用来给场景贴图，资源数据不到会影响绘制效果，但不会导致程序崩溃，所以可以通过另外一条通道传输，当然，资源数据还可以通过多个通道异步到达用户设备即可。

本发明实施例中，指令数据和资源数据通过两个通道分别传输给用户设备。这么做的目的就是在网络带宽不够或者网络流量控制的情况下，可以优先保障绘制指令通道的指令数据传输，资源数据可以慢慢发送。还有这部分数据一般都是图片，数据量很大，双通道划分了以后可以单独对资源数据作处理，减少需要传输的数据量。

对于发送数据的时间点：所述服务器在所述图像帧传输时隙到来时或到来之前，开始向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，在所述图像帧的传输时隙结束时，发送完成所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源；

其中，所述到来之前为在所述图像帧的传输时隙还未到来，但所述图像帧的会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源的数据量超过预置阈值时。

也就是说在每一帧结束的时候一定会把这一帧所涉及到的所有绘制命令和资源都发送。另外，还可以设定，当各个缓存空间数据量达到一定程度的时候，可以提前发送掉这一帧的数据内容，一帧的数据内容可以分多次发送完成。

208、用户设备通过一条通道接收指令数据。

接收指令数据后，将所述绘制指令分配到指令缓冲区存储。尤其是在确定所述资源缓冲区中未存储有所述绘制指令所需的绘制资源时，将所述绘制指令分配到指令缓冲区存储。

209、用户设备通过另一条通道接收资源数据。

接收资源数据后，将所述绘制资源分配到资源缓冲区存储。

210、所述用户设备利用所述每条绘制指令所需的绘制资源进行图像绘制。

用户设备通过解析指令数据获得D3D绘制函数命令，因为采用双通道或多通道的传输方式，因此会存在指令到达但是指令执行所需资源还没有完全到达的情况。因此在这里我们需要去判断一下用户设备是否已经完整的接收到了当前正在解析执行的绘制命令所需的资源，如果没有，暂时放弃执行这条绘制命令，继续存放在指令数据缓冲区；如果有，则表示可以执行这条绘制命令。

211、所述用户设备在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

最终在执行完一帧传输过来的所有绘制命令后，即表示绘制完成。

参阅图4，本发明实施例提供的用户设备30应用于云交互系统，所述云交互系统还包括服务器，所述用户设备包括：

接收单元301，用于接收所述服务器发送的图像帧的绘制指令和绘制资源，所述绘制指令为会影响图像绘制的绘制指令，所述绘制资源为所述会影响图像绘制的绘制指令所对应的绘制资源；

处理单元302，用于确定所述接收单元301接收的所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令；

绘制单元303，用于利用所述处理单元302执行的每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

与现有技术中对服务器的硬件要求较高，而且浪费用户设备的硬件资源相比，本发明实施例提供的用户设备，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

可选地，在上述图4对应的实施例的基础上，本发明实施例提供的用户设备的第一个可选实施例中，

所述接收单元301，用于通过至少两条通道接收图像帧的绘制指令和绘制资源，所述绘制指令与所述绘制资源通过不同的传输通道接收。

可选地，在上述用户设备对应的第一个可选实施例的基础上，参阅图5，本发明实施例提供的用户设备的第二个可选实施例中，所述用户设备还包括控制单元304，

所述控制单元304，用于将所述接收单元301接收的所述绘制指令分配到指令缓冲区存储，将所述绘制资源分配到资源缓冲区存储。

通过双通道传输可以在网络带宽不够或者网络流量控制的情况下，可以优先保障绘制指令通道的指令数据传输。

在上述图5对应的实施例的基础上，本发明实施例提供的用户设备的第二个可选实施例中，

所述控制单元304，用于确定所述资源缓冲区中未存储有所述绘制指令所需的绘制资源时，将所述绘制指令分配到指令缓冲区存储。

参阅图6，本发明实施例提供的服务器40应用于云交互系统，所述云交互系统还包括用户设备，所述服务器包括：

获取单元401，用于获取图像帧的所有绘制指令和绘制资源；

确定单元402，用于对所述获取单元401获取的每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；

发送单元403，用于向所述用户设备发送所述确定单元402确定的所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面。

与现有技术中对服务器的硬件要求较高，而且浪费用户设备的硬件资源相比，本发明实施例提供的服务器，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

可选地，在上述图6对应的实施例的基础上，参阅图7，本发明实施例提供的服务器的第一个可选实施例中，所述服务器还包括：处理单元404，

所述处理单元404，用于根据所述会影响图像绘制的绘制指令中各绘制指令的类型，将所述各绘制指令划分到不同的指令缓存空间，并将所述各绘制指令所对应的绘制资源划分到资源缓存区。

可选地，在上述图7对应的实施例的基础上，参阅图8，本发明实施例提供的服务器的第二个可选实施例中，所述服务器还包括压缩单元405，

所述压缩单元405，用于对所述处理单元404划分到所述每个指令缓存空间中的绘制指令和所述资源缓存区的绘制资源分别进行压缩；

所述发送单元403，用于向所述用户设备发送所述压缩单元405压缩的绘制指令和绘制资源。

可选地，在上述图6至图8对应的任一实施例的基础上，本发明实施例提供的服务器的第三个可选实施例中，

所述发送单元403，用于通过至少两条通道向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，其中，所述会影响图像绘制的绘制指令占用一条通道。

可选地，在上述图6至图8对应的任一实施例的基础上，本发明实施例提供的服务器的第四个可选实施例中，

所述发送单元403，用于在所述图像帧传输时隙到来时或到来之前，开始向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，在所述图像帧的传输时隙结束时，发送完成所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源；

其中，所述到来之前为在所述图像帧的传输时隙还未到来，但所述图像帧的会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源的数据量超过预置阈值时。

图9是本发明实施例提供的用户设备30的结构示意图。所述用户设备30应用于云交互系统，所云交互系统包括用户设备和服务器，所述用户设备30包括中央处理器(Central Processing Unit，CPU)3101和图形处理器(Graphic Processing Unit，GPU)3102、收发器340、存储器350和输入/输出(I/O)设备330，输入/输出(I/O)设备330可以是键盘或鼠标，图形处理器3102用于图形渲染，存储器350可以包括只读存储器和随机存取存储器，并向处理器310提供操作指令和数据。存储器350的一部分还可以包括非易失性随机存取存储器(NVRAM)。

在一些实施方式中，存储器350存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集:

在本发明实施例中，通过调用存储器350存储的操作指令(该操作指令可存储在操作系统中)，

所述收发器340用于接收所述服务器发送的图像帧的绘制指令和绘制资源，所述绘制指令为会影响图像绘制的绘制指令，所述绘制资源为所述会影响图像绘制的绘制指令所对应的绘制资源；

所述中央处理器3101用于确定所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令；

所述图形处理器3102用于利用所述每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

与现有技术中对服务器的硬件要求较高，而且浪费用户设备的硬件资源相比，本发明实施例提供的用户设备，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

中央处理器3101控制用户设备30的操作。存储器350可以包括只读存储器和随机存取存储器，并向中央处理器3101提供指令和数据。存储器350的一部分还可以包括非易失性随机存取存储器(NVRAM)。具体的应用中用户设备30的各个组件通过总线系统320耦合在一起，其中总线系统320除包括数据总线之外，还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见，在图中将各种总线都标为总线系统320。

上述本发明实施例揭示的方法可以应用于处理器310中，或者由处理器310实现。处理器310可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器310中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器310可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器350，处理器310读取存储器350中的信息，结合其硬件完成上述方法的步骤。

可选地，收发器340用于通过至少两条通道接收图像帧的绘制指令和绘制资源，所述绘制指令与所述绘制资源通过不同的传输通道接收.

可选地，中央处理器3101还用于将所述绘制指令分配到指令缓冲区存储，将所述绘制资源分配到资源缓冲区存储。

可选地，中央处理器3101还用于确定所述资源缓冲区中未存储有所述绘制指令所需的绘制资源时，将所述绘制指令分配到指令缓冲区存储。

输入/输出设备330还用于显示所述第二交互式应用界面。

以上的用户设备30可以参阅图1至图5部分的相关描述进行理解，本处不做过多赘述。

图10是本发明实施例提供的服务器40的结构示意图。所述服务器40应用于云交互系统，所述云交互系统包括用户设备和服务器，所述服务器40包括处理器410、存储器450和收发器430，存储器450可以包括只读存储器和随机存取存储器，并向处理器410提供操作指令和数据。存储器450的一部分还可以包括非易失性随机存取存储器(NVRAM)。

在一些实施方式中，存储器450存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集:

在本发明实施例中，通过调用存储器450存储的操作指令(该操作指令可存储在操作系统中)，

所述处理器410用于获取图像帧的所有绘制指令和绘制资源；对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；

所述收发器430用于向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面。

与现有技术中对服务器的硬件要求较高，而且浪费用户设备的硬件资源相比，本发明实施例提供的服务器，可以由用户设备进行图像绘制，既降低了对服务器的硬件要求，同时提高了用户设备的资源利用效率。

处理器410控制服务器40的操作，处理器410还可以称为CPU(Central ProcessingUnit，中央处理单元)。存储器450可以包括只读存储器和随机存取存储器，并向处理器410提供指令和数据。存储器450的一部分还可以包括非易失性随机存取存储器(NVRAM)。具体的应用中服务器40的各个组件通过总线系统420耦合在一起，其中总线系统420除包括数据总线之外，还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见，在图中将各种总线都标为总线系统420。

上述本发明实施例揭示的方法可以应用于处理器410中，或者由处理器410实现。处理器410可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器410中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器410可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器450，处理器410读取存储器450中的信息，结合其硬件完成上述方法的步骤。

可选地，处理器410还用于根据所述会影响图像绘制的绘制指令中各绘制指令的类型，将所述各绘制指令划分到不同的指令缓存空间，并将所述各绘制指令所对应的绘制资源划分到资源缓存区。

可选地，对每个指令缓存空间中的绘制指令和所述资源缓存区的绘制资源分别进行压缩；

收发器430用于向所述用户设备发送压缩的绘制指令和绘制资源。

可选地，收发器430用于通过至少两条通道向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，其中，所述会影响图像绘制的绘制指令占用一条通道。

可选地，收发器430用于在所述图像帧传输时隙到来时或到来之前，开始向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，在所述图像帧的传输时隙结束时，发送完成所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源；

其中，所述到来之前为在所述图像帧的传输时隙还未到来，但所述图像帧的会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源的数据量超过预置阈值时。

以上的服务器40可以参阅图1至图3部分的相关描述进行理解，本处不做过多赘述。

本发明实施例提供的云交互系统可以参阅图1至图3部分的相关描述进行理解，本处不做过多赘述。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：ROM、RAM、磁盘或光盘等。

以上对本发明实施例所提供的图像绘制的方法、用户设备、服务器以及系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (19)

1.一种图像绘制的方法，其特征在于，所述方法应用于云交互系统，所述云交互系统包括用户设备和服务器，所述方法包括：

所述用户设备接收所述服务器发送的图像帧的绘制指令和绘制资源，所述绘制指令为会影响图像绘制的绘制指令，所述绘制资源为所述会影响图像绘制的绘制指令所对应的绘制资源，所述服务器用于获取所述图像帧的所有绘制指令，对每条所述绘制指令进行指令过滤，确定会影响图像绘制的绘制指令，并向所述用户设备发送所述会影响图像绘制的绘制指令；

所述用户设备确定所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令；

所述用户设备利用所述每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

2.根据权利要求1所述的方法，其特征在于，所述用户设备接收图像帧的绘制指令和绘制资源，包括：

所述用户设备通过至少两条通道接收图像帧的绘制指令和绘制资源，所述绘制指令与所述绘制资源通过不同的传输通道接收。

3.根据权利要求1或2或所述的方法，其特征在于，所述方法还包括：

所述用户设备将所述绘制指令分配到指令缓冲区存储，将所述绘制资源分配到资源缓冲区存储。

4.根据权利要求3所述的方法，其特征在于，所述用户设备将所述绘制指令分配到指令缓冲区存储，包括：

所述用户设备确定所述资源缓冲区中未存储有所述绘制指令所需的绘制资源时，将所述绘制指令分配到指令缓冲区存储。

5.一种图像绘制的方法，其特征在于，所述方法应用于云交互系统，所述云交互系统包括用户设备和服务器，所述方法包括：

所述服务器获取图像帧的所有绘制指令和绘制资源；

所述服务器对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；

所述服务器向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面。

6.根据权利要求5所述的方法，其特征在于，所述服务器对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令之后，所述方法还包括：

所述服务器根据所述会影响图像绘制的绘制指令中各绘制指令的类型，将所述各绘制指令划分到不同的指令缓存空间，并将所述各绘制指令所对应的绘制资源划分到资源缓存区。

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

所述服务器对每个指令缓存空间中的绘制指令和所述资源缓存区的绘制资源分别进行压缩；

所述服务器向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，包括：

所述服务器向所述用户设备发送压缩的绘制指令和绘制资源。

8.根据权利要求5-7任一所述的方法，其特征在于，所述服务器向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，包括：

所述服务器通过至少两条通道向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，其中，所述会影响图像绘制的绘制指令占用一条通道。

9.根据权利要求5-7任一所述的方法，其特征在于，所述服务器向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，包括：

所述服务器在所述图像帧传输时隙到来时或到来之前，开始向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，在所述图像帧的传输时隙结束时，发送完成所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源；

其中，所述到来之前为在所述图像帧的传输时隙还未到来，但所述图像帧的会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源的数据量超过预置阈值时。

10.一种用户设备，其特征在于，所述用户设备应用于云交互系统，所述云交互系统还包括服务器，所述用户设备包括：

接收单元，用于接收所述服务器发送的图像帧的绘制指令和绘制资源，所述绘制指令为会影响图像绘制的绘制指令，所述绘制资源为所述会影响图像绘制的绘制指令所对应的绘制资源，所述服务器用于获取所述图像帧的所有绘制指令，对每条所述绘制指令进行指令过滤，确定会影响图像绘制的绘制指令，并向所述用户设备发送所述会影响图像绘制的绘制指令；

处理单元，用于确定所述接收单元接收的所述绘制资源中包含执行所述绘制指令所需的绘制资源时，执行每条绘制指令；

绘制单元，用于利用所述处理单元执行的每条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。

11.根据权利要求10所述的用户设备，其特征在于，

所述接收单元，用于通过至少两条通道接收图像帧的绘制指令和绘制资源，所述绘制指令与所述绘制资源通过不同的传输通道接收。

12.根据权利要求10或11所述的用户设备，其特征在于，所述用户设备还包括控制单元，

所述控制单元，用于将所述接收单元接收的所述绘制指令分配到指令缓冲区存储，将所述绘制资源分配到资源缓冲区存储。

13.根据权利要求12所述的用户设备，其特征在于，

所述控制单元，用于确定所述资源缓冲区中未存储有所述绘制指令所需的绘制资源时，将所述绘制指令分配到指令缓冲区存储。

14.一种服务器，其特征在于，所述服务器应用于云交互系统，所述云交互系统还包括用户设备，所述服务器包括：

获取单元，用于获取图像帧的所有绘制指令和绘制资源；

确定单元，用于对所述获取单元获取的每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令；

发送单元，用于向所述用户设备发送所述确定单元确定的所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面。

15.根据权利要求14所述的服务器，其特征在于，所述服务器还包括：处理单元，

所述处理单元，用于根据所述会影响图像绘制的绘制指令中各绘制指令的类型，将所述各绘制指令划分到不同的指令缓存空间，并将所述各绘制指令所对应的绘制资源划分到资源缓存区。

16.根据权利要求15所述的服务器，其特征在于，所述服务器还包括压缩单元，

所述压缩单元，用于对所述处理单元划分到每个所述指令缓存空间中的绘制指令和所述资源缓存区的绘制资源分别进行压缩；

所述发送单元，用于向所述用户设备发送所述压缩单元压缩的绘制指令和绘制资源。

17.根据权利要求14-16任一所述的服务器，其特征在于，

所述发送单元，用于通过至少两条通道向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，其中，所述会影响图像绘制的绘制指令占用一条通道。

18.根据权利要求14-16任一所述的服务器，其特征在于，

所述发送单元，用于在所述图像帧传输时隙到来时或到来之前，开始向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，在所述图像帧的传输时隙结束时，发送完成所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源；

其中，所述到来之前为在所述图像帧的传输时隙还未到来，但所述图像帧的会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源的数据量超过预置阈值时。

19.一种云交互系统，其特征在于，包括用户设备和服务器，

所述服务器用于：

获取图像帧的所有绘制指令和绘制资源，对每条绘制指令进行指令过滤，确定会影响图像绘制的绘制指令，向所述用户设备发送所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源，所述会影响图像绘制的绘制指令和所述所对应的绘制资源用于所述用户设备执行所述会影响图像绘制的绘制指令，绘制得到所述图像帧的绘制画面；

所述用户设备用于：

接收所述服务器发送的所述会影响图像绘制的绘制指令和所述会影响图像绘制的绘制指令所对应的绘制资源；确定所述所对应的绘制资源中包含执行所述会影响图像绘制的绘制指令所需的绘制资源时，执行所述会影响图像绘制的绘制指令中各条绘制指令；利用所述各条绘制指令所需的绘制资源进行图像绘制，在执行完所述图像帧的所有绘制指令后，得到所述图像帧的绘制画面。