CN105727556B - 一种图像绘制的方法、相关设备及系统 - Google Patents

一种图像绘制的方法、相关设备及系统 Download PDF

Info

Publication number
CN105727556B
CN105727556B CN201610064037.XA CN201610064037A CN105727556B CN 105727556 B CN105727556 B CN 105727556B CN 201610064037 A CN201610064037 A CN 201610064037A CN 105727556 B CN105727556 B CN 105727556B
Authority
CN
China
Prior art keywords
user equipment
resource
server
rendering
rendering resource
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610064037.XA
Other languages
English (en)
Other versions
CN105727556A (zh
Inventor
程东哲
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201610064037.XA priority Critical patent/CN105727556B/zh
Publication of CN105727556A publication Critical patent/CN105727556A/zh
Priority to KR1020187022631A priority patent/KR102117180B1/ko
Priority to PCT/CN2017/072410 priority patent/WO2017129107A1/zh
Priority to JP2018538862A priority patent/JP2019515516A/ja
Application granted granted Critical
Publication of CN105727556B publication Critical patent/CN105727556B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/70—Game security or game management aspects
    • A63F13/77—Game security or game management aspects involving data related to game devices or game servers, e.g. configuration data, software version or amount of memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • G06T15/205—Image-based rendering
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/30—Interconnection arrangements between game servers and game devices; Interconnection arrangements between game devices; Interconnection arrangements between game servers
    • A63F13/35—Details of game servers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/60—Memory management
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/20—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterised by details of the game platform
    • A63F2300/206—Game information storage, e.g. cartridges, CD ROM's, DVD's, smart cards
    • A63F2300/207—Game information storage, e.g. cartridges, CD ROM's, DVD's, smart cards for accessing game resources from local storage, e.g. streaming content from DVD
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/50—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers
    • A63F2300/53—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing
    • A63F2300/538—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by details of game servers details of basic data processing for performing operations on behalf of the game client, e.g. rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Computing Systems (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例公开了一种图像绘制的方法、相关设备及系统。本发明实施例中服务器侧方法包括：服务器在与用户设备的中断连接恢复后，确定用户设备中中断图像帧未保存的第一绘制资源；服务器向用户设备发送第一绘制资源；服务器向用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。本发明实施例节省了网络带宽，提高了传输效率且降低了实现难度。

Description

一种图像绘制的方法、相关设备及系统
技术领域
本发明涉及云技术领域，特别涉及一种图像绘制的方法、相关设备及系统。
背景技术
随着近年来终端技术和网络带宽的高速发展，云计算技术的日趋成熟催生了云交互系统，现有的云交互式系统通常包括服务器和多个用户设备，服务器可以是集群服务器，多种交互式应用都可以运行在云交互系统中。
现有的云交互系统中大部是基于视频流，也就是说服务器把图像渲染出来，然后压缩后传输到用户设备，这个过程需要很大的带宽，并需要大量服务器资源，如果用户设备断线，还需要重新上线发送完整视频流，这个过程也需要大量服务器存储资源进行视频流的保存，技术实现困难。
发明内容
本发明实施例提供了一种图像绘制的方法、相关设备及系统，节省了网络带宽，提高了传输效率且降低了实现难度。
本发明实施例中第一方面提供了一种图像绘制的方法，所述方法应用于云交互式系统，所述云交互式系统包括用户设备和服务器，所述方法包括：
所述服务器在与所述用户设备的中断连接恢复后，确定所述用户设备中中断图像帧未保存的第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述服务器向所述用户设备发送所述第一绘制资源，所述第一绘制资源传输到所述用户设备后被所述用户设备缓存；
所述服务器向所述用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。
本发明实施例中第二方面提供了一种图像绘制的方法，所述方法应用于云交互式系统，所述云交互式系统包括用户设备和服务器，所述方法包括：
所述用户设备在与所述服务器的中断连接恢复后，接收所述服务器发送的中断图像帧的第一绘制资源，并缓存所述第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述用户设备接收所述服务器发送的绘制指令，并调用所述绘制指令对应的绘制资源；
所述用户设备使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
本发明实施例中第三方面提供了一种服务器，所述服务器应用于云交互式应用系统，所述云交互式应用系统还包括用户设备，所述服务器包括：
确定单元，用于在与所述用户设备的中断连接恢复后，确定所述用户设备中中断图像帧未保存的第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
发送单元，用于向所述用户设备发送所述第一绘制资源，所述第一绘制资源传输到所述用户设备后被所述用户设备缓存；
所述发送单元还用于向所述用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。
本发明实施例中第四方面提供了一种用户设备，所述用户设备应用于云交互式应用系统，所述云交互式应用系统还包括服务器，所述用户设备包括：
接收单元，用于在与所述服务器的中断连接恢复后，接收所述服务器发送的中断图像帧的第一绘制资源，并缓存所述第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述接收单元还用于接收所述服务器发送的绘制指令，并调用所述绘制指令对应的绘制资源；
处理单元，用于使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
本发明实施例中第五方面提供了一种云交互式系统，，包括服务器和用户设备，所述服务器为如第三方面中任一所述的服务器，所述用户设备为如第四方面中任一所述的用户设备。
从以上技术方案可以看出，本发明实施例具有以下优点：
而本发明实施例中在服务器在与所述用户设备的中断连接恢复后，将用户设备中中断图像帧未保存的绘制资源发送到用户设备，使得用户设备和服务器实现资源的同步，同时发送相应的绘制指令，实现图像的显示，由于服务器和用户设备中断连接恢复后，服务器并不需要向用户设备发送全部的绘制数据，节省了网络带宽，提高了传输效率且降低了实现难度。
附图说明
图1是云交互式系统的示意图；
图2是本发明实施例中图像绘制的方法的一个实施例示意图；
图3是本发明实施例中图像绘制的方法的另一个实施例示意图；
图4是本发明实施例中图像绘制的方法的另一个实施例示意图；
图5是本发明实施例中服务器的一个实施例示意图；
图6是本发明实施例中服务器的另一个实施例示意图；
图7是本发明实施例中用户设备的一个实施例示意图；
图8是本发明实施例中用户设备的另一个实施例示意图。
具体实施方式
本发明实施例提供了一种图像绘制的方法、相关设备及系统，节省了网络带宽，提高了传输效率且降低了实现难度。
为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
如图1所示，为本发明实施例中提供的云交互式系统的一个场景示意图，所述云交互式系统包括用户设备和服务器，其中，服务器和用户设备通过网络进行数据交互，例如，服务器将录制的图像帧的绘制数据通过网络发送到用户设备，其中，绘制数据可以是绘制指令或绘制资源，绘制指令可以被用户设备使用执行相应的绘制资源，得到相应图像帧绘制后的图像，服务器、用户设备可以上下面实施例描述的任一种可能的服务器、用户设备。
下面首先介绍本发明实施例中图像绘制的方法，所述方法应用于所述云交互式系统。
请参阅图2，本发明实施例中图像绘制的方法一个实施例包括：
201、服务器在与所述用户设备的中断连接恢复后，确定所述用户设备中中断图像帧未保存的第一绘制资源；
其中，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
在云交互式系统中，经常会有一些突发的状况导致服务器和用户设备中断连接，例如网络不稳定等，此时，在服务器中可以设置一资源缓存，用于保存服务器向用户设备发送的绘制资源，在服务器和用户设备中断连接恢复后，可以根据资源缓存中的绘制资源同步到用户设备，以保证服务器和用户设备之间的绘制资源同步，在资源缓存中，同时可以将用户设备发送的绘制指令保存在资源缓存中。
本发明实施例中，所述确定所述用户设备中中断图像帧未保存的第一绘制资源，有多种实现方式，下面分别进行说明。
(1)用户设备确定第一绘制资源并告知服务器；
具体的，所述确定所述用户设备中中断图像帧未保存的第一绘制资源，可以包括：
所述服务器向所述用户设备发送第一哈希值，所述第一哈希值用于所述用户设备确定所述用户设备中是否保存有所述第一绘制资源；
所述服务器接收所述用户设备发送的资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
(2)服务器确定第一绘制资源
具体的，所述确定所述用户设备中中断图像帧未保存的第一绘制资源，可以包括：
所述服务器接收所述用户设备发送的第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存；
所述服务器根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
其中，服务器根据第二哈希值，确定所述用户设备中未保存的所述第一绘制资源，具体可以是：服务器根据自身已保存的所有绘制资源，分别生成对应的哈希值，在所生成的哈希值中有与所述第二哈希值不同的哈希值时，确定该不同的哈希值对应的绘制资源为所述用户设备中未保存的绘制资源，即所述用户设备中未保存的所述第一绘制资源。
本实施例中，哈希值可以消息摘要算法第五版(Message Digest Algorithm MD5，MD5)、MD4等类型的哈希值，需要说明的是，在同一个技术方案中，涉及哈希值比对判断的过程，可以理解为同一类型的哈希值比对判断。
202、服务器向所述用户设备发送所述第一绘制资源；
其中，所述第一绘制资源传输到所述用户设备后被所述用户设备缓存，用户设备通过接收服务器发送到的第一绘制资源，实现用户设备和服务器中绘制资源的同步。
在实际发送第一绘制资源的过程中，第一绘制资源的数据大小可能较大，此时，为了避免流量过大，可以先发低精度资源显示画面，再发高精度资源慢慢替换低精度资源的显示，例如可以先发第一绘制资源的压缩数据，再发第一绘制资源。
因此，此处所述服务器向所述用户设备发送所述第一绘制资源，可以包括：
所述服务器向所述用户设备发送第一资源，所述第一资源由所述第一绘制资源压缩后得到；
所述服务器向所述用户设备发送第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
203、服务器向所述用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。
而本发明实施例中在服务器在与所述用户设备的中断连接恢复后，将用户设备中中断图像帧未保存的绘制资源发送到用户设备，使得用户设备和服务器实现资源的同步，同时发送相应的绘制指令，实现图像的显示，由于服务器和用户设备中断连接恢复后，服务器并不需要向用户设备发送全部的绘制数据，节省了网络带宽，提高了传输效率且降低了实现难度。
下面介绍用户设备侧图像绘制的方法的实施例，所述方法应用于云交互式系统，所述云交互式系统包括用户设备和服务器。
请参阅图3，本发明实施例中图像绘制的方法的另一个实施例包括：
301、用户设备在与所述服务器的中断连接恢复后，接收所述服务器发送的中断图像帧的第一绘制资源，并缓存所述第一绘制资源；
其中，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧，所述第一绘制资源可以为所述用户设备中未保存的绘制资源，服务器发送给用户设备进行缓存，以备后续从服务器接收到相应的绘制指令后，使用该绘制资源执行相应的绘制指令，得到图像帧的图像。
302、用户设备接收所述服务器发送的绘制指令，并调用所述绘制指令对应的绘制资源；
303、用户设备使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
在所述第一绘制资源为所述用户设备中未保存的绘制资源时，所述接收所述服务器发送的中断图像帧的第一绘制资源之前，所述方法还可以包括确认第一绘制资源的过程，此过程具体实现方式有多种，下面分别进行介绍：
(1)，所述接收所述服务器发送的中断图像帧的第一绘制资源之前，所述方法还包括：
所述用户设备接收所述服务器发送的第一哈希值；
所述用户设备根据所述第一哈希值确定所述用户设备中是否保存有所述第一绘制资源；
所述用户设备确定未保存有所述第一绘制资源时，向所述服务器发送资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
(2)所述接收所述服务器发送的中断图像帧的第一绘制资源之前，所述方法还包括：
所述用户设备向所述服务器发送第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存，以使所述服务器根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
在本发明的一些实施例中，所述接收所述服务器发送的中断图像帧的第一绘制资源，可以包括：
所述用户设备接收所述服务器发送的第一资源，所述第一资源由所述第一绘制资源压缩后得到；
所述用户设备接收所述服务器发送的第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
下面以云交互式应用系统为云游戏系统为例，以一具体应用场景上述实施例中服务器和用户设备的云游戏客户端之间的交互进行介绍。
请参阅图4，本发明实施例中图像绘制的方法的另一个实施例，包括：
401、服务器在与云游戏客户端的中断连接恢复后，向所述用户设备发送MD5值；
所述MD5值用于所述用户设备确定所述用户设备中是否保存有绘制资源A；
402、云游戏客户端根据MD5值确定所述用户设备中是否保存有绘制资源A，若否，则执行步骤403；
403、云游戏客户端向所述服务器发送资源缺失响应；
其中，所述资源缺失响应用于指示所述服务器在所述云游戏客户端中未保存绘制资源A。
服务器接收到所述用户设备发送的资源缺失响应后，即可确定云游戏客户端中中断图像帧未保存的绘制资源A。
404、服务器向云游戏客户端发送绘制资源A；
此时，云游戏客户端中的绘制资源和服务器中实现了同步。
云游戏客户端接收绘制资源A并缓存；
405、服务器向所述用户设备发送绘制指令，云游戏客户端接收所述服务器发送的绘制指令，
406、云游戏客户端调用所述绘制指令对应的绘制资源，使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
下面介绍本发明实施例中服务器的实施例，所述服务器应用于云交互式应用系统，所述云交互式应用系统还包括用户设备。
请参阅图5，本发明实施例中服务器500的一个实施例包括：
确定单元501，用于在与所述用户设备的中断连接恢复后，确定所述用户设备中中断图像帧未保存的第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
发送单元502，用于向所述用户设备发送所述第一绘制资源，所述第一绘制资源传输到所述用户设备后被所述用户设备缓存；
所述发送单元502还用于向所述用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。
可选的，所述确定单元501具体用于向所述用户设备发送第一哈希值，所述第一哈希值用于所述用户设备确定所述用户设备中是否保存有所述第一绘制资源；接收所述用户设备发送的资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
可选的，所述确定单元501具体用于接收所述用户设备发送的第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存；根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
可选的，所述发送单元502具体用于：
向所述用户设备发送第一资源，所述第一资源由所述第一绘制资源压缩后得到；
向所述用户设备发送第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
上面从单元化功能实体的角度对本发明实施例中的服务器进行了描述，下面从硬件处理的角度对本发明实施例中的服务器进行描述，请参阅图6，本发明实施例中的服务器600包括：
输入装置601、输出装置602、处理器603和存储器604(其中处理器603的数量可以一个或多个，图6中以一个处理器603为例)。在本发明的一些实施例中，输入装置601、输出装置602、处理器603和存储器604可通过总线或其它方式连接，其中，图6中以通过总线连接为例。
本发明实施例涉及的服务器可以具有比图6所示出的更多或更少的部件，可以组合两个或更多个部件，或者可以具有不同的部件配置或设置，各个部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件或硬件和软件的组合实现。
其中，通过调用存储器604存储的操作指令，处理器603用于执行如下步骤：
所述服务器在与所述用户设备的中断连接恢复后，确定所述用户设备中中断图像帧未保存的第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
通过输出装置602向所述用户设备发送所述第一绘制资源，所述第一绘制资源传输到所述用户设备后被所述用户设备缓存；
通过输出装置602向所述用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。
可选的，通过调用存储器604存储的操作指令，处理器603具体用于执行如下步骤：
通过输出装置602向所述用户设备发送第一哈希值，所述第一哈希值用于所述用户设备确定所述用户设备中是否保存有所述第一绘制资源；
通过输入装置601接收所述用户设备发送的资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
可选的，通过调用存储器604存储的操作指令，处理器603具体用于执行如下步骤：
通过输入装置601接收所述用户设备发送的第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存；
根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
可选的，通过调用存储器604存储的操作指令，处理器603具体用于执行如下步骤：
通过输出装置602向所述用户设备发送第一资源，所述第一资源由所述第一绘制资源压缩后得到；
通过输出装置602向所述用户设备发送第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
下面介绍本发明实施例中用户设备的实施例，所述用户设备应用于云交互式应用系统，所述云交互式应用系统还包括服务器。
请参阅图7，本发明实施例中用户设备700的一个实施例包括：
接收单元701，用于在与所述服务器的中断连接恢复后，接收所述服务器发送的中断图像帧的第一绘制资源，并缓存所述第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述接收单元701还用于接收所述服务器发送的绘制指令，并调用所述绘制指令对应的绘制资源；
处理单元702，用于使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
可选的，在所述接收单元701接收所述服务器发送的中断图像帧的第一绘制资源之前，所述接收单元还用于接收所述服务器发送的第一哈希值；
所述处理单元702还用于根据所述第一哈希值确定所述用户设备中是否保存有所述第一绘制资源；
所述用户设备还包括：
第一发送单元，用于在确定未保存有所述第一绘制资源时，向所述服务器发送资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
可选的，所述用户设备还包括：
第二发送单元，用于在所述接收单元接收所述服务器发送的中断图像帧的第一绘制资源之前，向所述服务器发送第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存，以使所述服务器根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
可选的，所述接收单元具体用于：
接收所述服务器发送的第一资源，所述第一资源由所述第一绘制资源压缩后得到；
接收所述服务器发送的第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
上面从单元化功能实体的角度对本发明实施例中的用户设备进行了描述，下面从硬件处理的角度对本发明实施例中的用户设备进行描述，请参阅图8，所述用户设备30应用于云交互系统，所云交互系统包括用户设备和服务器，所述用户设备30包括中央处理器(Central Processing Unit，CPU)3101和图形处理器(Graphic Processing Unit，GPU)3102、收发器340、存储器350和输入/输出(I/O)设备330，输入/输出(I/O)设备330可以是键盘或鼠标，图形处理器3102用于图形渲染，存储器350可以包括只读存储器和随机存取存储器，并向处理器310提供操作指令和数据。存储器350的一部分还可以包括非易失性随机存取存储器(NVRAM)。
在一些实施方式中，存储器350存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集:
在本发明实施例中，通过调用存储器350存储的操作指令(该操作指令可存储在操作系统中)，
所述收发器340用于所述用户设备在与所述服务器的中断连接恢复后，接收所述服务器发送的中断图像帧的第一绘制资源，并缓存所述第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述收发器340还用于接收所述服务器发送的绘制指令；
所述图形处理器3102用于调用所述绘制指令对应的绘制资源，使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
中央处理器3101控制用户设备30的操作。存储器350可以包括只读存储器和随机存取存储器，并向中央处理器3101提供指令和数据。存储器350的一部分还可以包括非易失性随机存取存储器(NVRAM)。具体的应用中用户设备30的各个组件通过总线系统320耦合在一起，其中总线系统320除包括数据总线之外，还可以包括电源总线、控制总线和状态信号总线等。但是为了清楚说明起见，在图中将各种总线都标为总线系统320。
上述本发明实施例揭示的方法可以应用于处理器310中，或者由处理器310实现。处理器310可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器310中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器310可以是通用处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器350，处理器310读取存储器350中的信息，结合其硬件完成上述方法的步骤。
可选地，收发器340具体用于接收所述服务器发送的第一哈希值；
中央处理器3101具体用于根据所述第一哈希值确定所述用户设备中是否保存有所述第一绘制资源；
收发器340具体还用于确定未保存有所述第一绘制资源时，向所述服务器发送资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
可选地，收发器340具体用于向所述服务器发送第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存，以使所述服务器根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
可选地，收发器340具体用于接收所述服务器发送的第一资源，所述第一资源由所述第一绘制资源压缩后得到；
收发器340具体用于还接收所述服务器发送的第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源；
输入/输出设备330还用于显示所述第二交互式应用界面。
以上的用户设备30可以参阅图3至图4部分的相关描述进行理解，本处不做过多赘述。
本发明实施例还提供一种计算机存储介质，其中，该计算机存储介质可存储有程序，该程序执行时包括上述方法实施例中记载的至少图像绘制的方法的方法的部分或全部步骤。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (17)

1.一种图像绘制的方法，其特征在于，所述方法应用于云交互式系统，所述云交互式系统包括用户设备和服务器，所述方法包括：
所述服务器在与所述用户设备的中断连接恢复后，确定所述用户设备中中断图像帧未保存的第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述服务器向所述用户设备发送所述第一绘制资源，所述第一绘制资源传输到所述用户设备后被所述用户设备缓存；
所述服务器向所述用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。
2.根据权利要求1所述的方法，其特征在于，所述确定所述用户设备中中断图像帧未保存的第一绘制资源，包括：
所述服务器向所述用户设备发送第一哈希值，所述第一哈希值用于所述用户设备确定所述用户设备中是否保存有所述第一绘制资源；
所述服务器接收所述用户设备发送的资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
3.根据权利要求1所述的方法，其特征在于，所述确定所述用户设备中中断图像帧未保存的第一绘制资源，包括：
所述服务器接收所述用户设备发送的第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存；
所述服务器根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
4.根据权利要求1至3中任一所述的方法，其特征在于，所述服务器向所述用户设备发送所述第一绘制资源，包括：
所述服务器向所述用户设备发送第一资源，所述第一资源由所述第一绘制资源压缩后得到；
所述服务器向所述用户设备发送第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
5.一种图像绘制的方法，其特征在于，所述方法应用于云交互式系统，所述云交互式系统包括用户设备和服务器，所述方法包括：
所述用户设备在与所述服务器的中断连接恢复后，接收所述服务器发送的中断图像帧的第一绘制资源，并缓存所述第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述用户设备接收所述服务器发送的绘制指令，并调用所述绘制指令对应的绘制资源；
所述用户设备使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
6.根据权利要求5所述的方法，其特征在于，所述接收所述服务器发送的中断图像帧的第一绘制资源之前，所述方法还包括：
所述用户设备接收所述服务器发送的第一哈希值；
所述用户设备根据所述第一哈希值确定所述用户设备中是否保存有所述第一绘制资源；
所述用户设备确定未保存有所述第一绘制资源时，向所述服务器发送资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
7.根据权利要求5所述的方法，其特征在于，所述接收所述服务器发送的中断图像帧的第一绘制资源之前，所述方法还包括：
所述用户设备向所述服务器发送第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存，以使所述服务器根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
8.根据权利要求5-7任一所述的方法，其特征在于，所述接收所述服务器发送的中断图像帧的第一绘制资源，包括：
所述用户设备接收所述服务器发送的第一资源，所述第一资源由所述第一绘制资源压缩后得到；
所述用户设备接收所述服务器发送的第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
9.一种服务器，其特征在于，所述服务器应用于云交互式应用系统，所述云交互式应用系统还包括用户设备，所述服务器包括：
确定单元，用于在与所述用户设备的中断连接恢复后，确定所述用户设备中中断图像帧未保存的第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
发送单元，用于向所述用户设备发送所述第一绘制资源，所述第一绘制资源传输到所述用户设备后被所述用户设备缓存；
所述发送单元还用于向所述用户设备发送绘制指令，所述绘制指令被所述用户设备使用与所述绘制指令对应的绘制资源执行，得到所述中断图像帧绘制后的图像。
10.根据权利要求9所述的服务器，其特征在于，所述确定单元具体用于向所述用户设备发送第一哈希值，所述第一哈希值用于所述用户设备确定所述用户设备中是否保存有所述第一绘制资源；接收所述用户设备发送的资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
11.根据权利要求9所述的服务器，其特征在于，所述确定单元具体用于接收所述用户设备发送的第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存；根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
12.根据权利要求9至11中任一所述的服务器，其特征在于，所述发送单元具体用于：
向所述用户设备发送第一资源，所述第一资源由所述第一绘制资源压缩后得到；
向所述用户设备发送第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
13.一种用户设备，其特征在于，所述用户设备应用于云交互式应用系统，所述云交互式应用系统还包括服务器，所述用户设备包括：
接收单元，用于在与所述服务器的中断连接恢复后，接收所述服务器发送的中断图像帧的第一绘制资源，并缓存所述第一绘制资源，所述中断图像帧为在传输绘制资源时发生连接中断的图像帧；
所述接收单元还用于接收所述服务器发送的绘制指令，并调用所述绘制指令对应的绘制资源；
处理单元，用于使用所述绘制指令对应的绘制资源执行所述绘制指令，得到所述中断图像帧绘制后的图像。
14.根据权利要求13所述的用户设备，其特征在于，
在所述接收单元接收所述服务器发送的中断图像帧的第一绘制资源之前，所述接收单元还用于接收所述服务器发送的第一哈希值；
所述处理单元还用于根据所述第一哈希值确定所述用户设备中是否保存有所述第一绘制资源；
所述用户设备还包括：
第一发送单元，用于在确定未保存有所述第一绘制资源时，向所述服务器发送资源缺失响应，所述资源缺失响应用于指示所述服务器在所述用户设备中未保存所述第一绘制资源。
15.根据权利要求13所述的用户设备，其特征在于，所述用户设备还包括：
第二发送单元，用于在所述接收单元接收所述服务器发送的中断图像帧的第一绘制资源之前，向所述服务器发送第二哈希值，所述第二哈希值用于指示所述服务器所述第二哈希值对应的第二绘制资源在所述用户设备中已保存，以使所述服务器根据所述第二哈希值，确定所述用户设备中未保存的所述第一绘制资源。
16.根据权利要求13至15中任一所述的用户设备，其特征在于，所述接收单元具体用于：
接收所述服务器发送的第一资源，所述第一资源由所述第一绘制资源压缩后得到；
接收所述服务器发送的第二资源；
其中，所述第二资源由所述第一绘制资源压缩后得到，所述第一资源的数据精度低于所述第二资源的数据精度，或者所述第二资源为所述第一绘制资源。
17.一种云交互式系统，其特征在于，包括服务器和用户设备，所述服务器为如权利要求9至12中任一所述的服务器，所述用户设备为如权利要求13至16中任一所述的用户设备。
CN201610064037.XA 2016-01-29 2016-01-29 一种图像绘制的方法、相关设备及系统 Active CN105727556B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201610064037.XA CN105727556B (zh) 2016-01-29 2016-01-29 一种图像绘制的方法、相关设备及系统
KR1020187022631A KR102117180B1 (ko) 2016-01-29 2017-01-24 이미지 드로잉 방법, 관련된 디바이스 및 시스템
PCT/CN2017/072410 WO2017129107A1 (zh) 2016-01-29 2017-01-24 一种图像绘制的方法、相关设备及系统
JP2018538862A JP2019515516A (ja) 2016-01-29 2017-01-24 画像描画方法、関係するデバイス及びシステム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610064037.XA CN105727556B (zh) 2016-01-29 2016-01-29 一种图像绘制的方法、相关设备及系统

Publications (2)

Publication Number Publication Date
CN105727556A CN105727556A (zh) 2016-07-06
CN105727556B true CN105727556B (zh) 2019-05-31

Family

ID=56247084

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610064037.XA Active CN105727556B (zh) 2016-01-29 2016-01-29 一种图像绘制的方法、相关设备及系统

Country Status (4)

Country Link
JP (1) JP2019515516A (zh)
KR (1) KR102117180B1 (zh)
CN (1) CN105727556B (zh)
WO (1) WO2017129107A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111861854A (zh) * 2019-04-30 2020-10-30 华为技术有限公司 用于图形渲染的方法及装置
CN110138769B (zh) * 2019-05-09 2021-06-15 深圳市腾讯网域计算机网络有限公司 一种图像传输的方法以及相关装置
CN114377394B (zh) * 2022-01-17 2023-05-05 吉林省磨铁互娱手游研发有限公司 一种云游戏画面渲染方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957731A (zh) * 2009-07-17 2011-01-26 株式会社理光 图像形成设备、图像形成系统及图像形成方法
CN102724430A (zh) * 2011-12-26 2012-10-10 新奥特（北京）视频技术有限公司 一种非线性编辑系统与图文包装系统的交互方法
CN104582806A (zh) * 2012-08-24 2015-04-29 微软公司 游戏迁移

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100610689B1 (ko) * 2005-06-24 2006-08-09 엔에이치엔(주) 3차원 화면에 동영상을 삽입하는 방법 및 이를 위한 기록매체
JP2007060444A (ja) * 2005-08-25 2007-03-08 Fuji Xerox Co Ltd 光無線通信装置、端末機、情報システム、光無線通信方法、及びプログラム
KR100781528B1 (ko) * 2006-06-29 2007-12-03 삼성전자주식회사 무결성을 보장하는 비디오 스트림을 제공하는 장치 및 그방법
JP2011030108A (ja) * 2009-07-28 2011-02-10 Toshiba Corp 医用画像読影システム
US20110055581A1 (en) * 2009-08-31 2011-03-03 Apple Inc. Hash function based on painting techniques

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101957731A (zh) * 2009-07-17 2011-01-26 株式会社理光 图像形成设备、图像形成系统及图像形成方法
CN102724430A (zh) * 2011-12-26 2012-10-10 新奥特（北京）视频技术有限公司 一种非线性编辑系统与图文包装系统的交互方法
CN104582806A (zh) * 2012-08-24 2015-04-29 微软公司 游戏迁移

Also Published As

Publication number Publication date
KR102117180B1 (ko) 2020-05-29
JP2019515516A (ja) 2019-06-06
KR20180102605A (ko) 2018-09-17
CN105727556A (zh) 2016-07-06
WO2017129107A1 (zh) 2017-08-03

Similar Documents

Publication Publication Date Title
CN112233217B (zh) 一种虚拟场景的渲染方法和装置
JP7465959B2 (ja) データ処理方法、装置、コンピュータデバイスおよびコンピュータプログラム
CN106453572B (zh) 基于云服务器同步图像的方法及系统
CN109756536A (zh) 一种数据传输的方法、装置及系统
CN105727556B (zh) 一种图像绘制的方法、相关设备及系统
EP3410302B1 (en) Graphic instruction data processing method, apparatus
CN109040786B (zh) 摄像头数据的传输方法、装置、系统及存储介质
CN108052299A (zh) 终端设备、多屏拼接系统和方法
US5454079A (en) Computer workstation
WO2014187108A1 (zh) 服务器、客户端及视频处理方法
CN109525802A (zh) 一种视频流传输方法和装置
CN102959955A (zh) 共享图像
CN109120687B (zh) 数据包发送方法、装置、系统、设备及存储介质
CN107135167A (zh) 数据传输方法、数据传输装置和服务器
CN104253842A (zh) 同步终端镜像的方法、装置、终端及服务器
CN110024395A (zh) 图像数据处理、传输的方法以及控制终端
CN105578110A (zh) 一种视频通话方法、装置和系统
CN109640105B (zh) 游戏直播方法、装置、存储介质和电子装置
CN104639501A (zh) 一种数据流传输的方法、设备及系统
CN109600423A (zh) 数据同步方法、装置、电子设备及存储介质
CN111701232A (zh) 游戏画面的处理方法、装置及电子装置
CN111318012A (zh) 游戏数据的传输方法及装置
CN106302670B (zh) 一种图片更新方法、通信终端及服务器
CN116546262A (zh) 一种数据处理方法、装置、设备及存储介质
CN104965786B (zh) 一种应用程序的调试方法、调试主机及运行主机

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant