CN109508159A - 录像文件以及录像生成的方法、相关设备以及存储介质 - Google Patents

录像文件以及录像生成的方法、相关设备以及存储介质 Download PDF

Info

Publication number
CN109508159A
CN109508159A CN201710821887.4A CN201710821887A CN109508159A CN 109508159 A CN109508159 A CN 109508159A CN 201710821887 A CN201710821887 A CN 201710821887A CN 109508159 A CN109508159 A CN 109508159A
Authority
CN
China
Prior art keywords
drawing command
video
video recording
request
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710821887.4A
Other languages
English (en)
Inventor
乐超超
赵贵阳
周春楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
YIYANG SAFETY TECHNOLOGY Co Ltd
Original Assignee
YIYANG SAFETY TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by YIYANG SAFETY TECHNOLOGY Co Ltd filed Critical YIYANG SAFETY TECHNOLOGY Co Ltd
Priority to CN201710821887.4A priority Critical patent/CN109508159A/zh
Publication of CN109508159A publication Critical patent/CN109508159A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G06F3/1462—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay with means for detecting differences between the image stored in the host and the images displayed on the remote displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请实施例公开了一种录像文件生成的方法，用于减轻服务器产生的负担。本申请实施例方法包括：远程桌面协议RDP代理设备获取服务器发送的绘图数据，所述绘图数据由所述服务器接收到终端发送的操作事件后生成，所述绘图数据包括绘图命令、绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求；所述RDP代理设备获取所述绘图数据中的图像编码；所述RDP代理设备根据所述图像编码生成录像文件。通过上述方法生成录像文件，并减轻服务器产生的负担。

Description

录像文件以及录像生成的方法、相关设备以及存储介质
技术领域
本申请涉及通信领域，尤其涉及一种录像文件以及录像生成的方法、相关设备以及存储介质。
背景技术
随着信息技术的不断发展和信息化建设的不断进步，信息系统已经在企业的运营中全面渗透，如何确保信息系统的安全已成为全社会关注的问题。除了病毒传播、网络窃听等外部攻击，信息系统面临的更多是来自内部的威胁。根据资料统计，在对企业信息系统造成严重损害的案例中，超过70％均属组织里的内部人员所为或由内外勾结所产生的破坏。为了改善这种局面，众多用于访问控制和安全审计的安全管控产品应运而生。
现在，许多安全管控产品都采用屏幕录制方式产生录像日志。在Windows服务器操作系统上，管理员给每一个用户分配一个账号，当一个用户访问一个服务器虚拟化的应用时，在系统为该用户单独开设的会话空间上运行录屏软件。当多个用户同时访问时，会在每个用户会话上分别运行录屏程序，每个录像和当前系统账号相关联，这样即可实现可溯源的录像审计。
但是，由于采用是屏幕录制的方式，这种方式相当于在每个用户会话上都运行一个录屏程序。如果有多个用户同时访问虚拟化的应用时，多个录屏程序的同时运行对服务器的性能会造成很大的负担。由于录屏程序同时运行会造成服务器的性能消耗过大。
发明内容
本申请实施例提供了一种录像文件以及录像生成的方法、设备以及存储介质，用于减轻服务器产生的负担。
有鉴于此，本申请第一方面提供了一种录像文件生成的方法，包括：
远程桌面协议(英文：Remote Desktop Protocol，简写：RDP)代理设备获取服务器发送的绘图数据，所述绘图数据由所述服务器接收到终端发送的操作事件后生成，所述绘图数据包括绘图命令、绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求；所述RDP代理设备获取所述绘图数据中的图像编码；所述RDP代理设备根据所述图像编码生成录像文件。
基于第一方面，本申请实施例还提供了第一方面的第一种实施方式：
所述RDP代理设备根据RDP协议对所述图像编码进行压缩，所述压缩后的图像编码为录像文件。
基于第一方面，或第一方面的第一种实施方式，本申请实施例还提供了第一方面的第二种实施方式：
所述RDP代理设备根据所述绘图数据中的绘图命令对所述图像编码中的目标位图进行相关处理，所述目标位图为所述绘图命令所指示的位图；所述RDP代理设备根据字段压缩编码方式对处理后的目标位图进行压缩。
基于第一方面，或第一方面的第一种实施方式，或第一方面的第一种实施方式，或第一方面的第二种实施方式，本申请实施例还提供了第一方面的第三种实施方式：
所述RDP代理设备将所述录像文件发送给录像设备，以使得所述录像设备根据所述录像文件中的录像数据生成动画。
本申请第二方面提供了一种录像生成的方法，包括：
录像设备接收RDP代理设备发送的录像数据，所述录像数据包括绘图命令、录像信息和绘图请求，所述绘图请求为服务器向终端请求生成操作录像的请求；所述录像设备对所述绘图命令进行解码；所述录像设备根据所述录像信息和解码后的绘图命令生成动画。
基于第二方面，本申请实施例还提供了第二方面的第一种实施方式：
所述绘图命令包括：主绘图命令类型、辅助绘图命令类型以及备用辅助绘图命令类型中至少一个类型的绘图命令；所述录像设备对所述绘图命令进行解码包括：所述录像设备通过RDP协议识别绘图命令的类型；所述录像设备根据所述绘图命令的类型进行编码，其中，若所述绘图命令的类型包括主绘图命令类型，则根据主绘图命令对图像进行渲染操作；若所述绘图命令的类型包括辅助绘图命令类型，则根据辅助绘图命令对图像进行逐层解析操作；若所述绘图命令的类型包括备用辅助命令类型，则根据备用辅助绘图命令对图像进行预设操作；所述录像设备根据所述录像信息和解码后的绘图命令生成动画包括：所述录像设备根据所述录像信息和所述至少一个类型的绘图命令生成动画。
本申请第三方面提供了一种远程桌面协议RDP代理设备，包括：
获取单元，用于获取服务器发送的绘图数据，所述绘图数据由所述服务器接收到终端发送的操作事件后生成，所述绘图数据包括绘图命令、绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求；所述获取单元还用于获取所述绘图数据中的图像编码；生成单元，用于根据获取单元获取所述图像编码后生成录像文件。
基于第三方面，本申请实施例还提供了第三方面的第一种实施方式：
压缩单元，用于根据RDP协议对所述图像编码进行压缩；所述压缩后的图像编码为录像文件。
基于第三方面，或第三方面的第一种实施方式，本申请实施例还提供了第三方面的第二种实施方式：
处理单元，用于根据所述绘图数据中的绘图命令对所述图像编码中的目标位图进行相关处理，所述目标位图为所述绘图命令所指示的位图；
目标位图压缩单元，用于根据字段压缩编码方式对处理后的目标位图进行压缩。
基于第三方面，或第三方面的第一种实施方式，或第三方面的第二种实施方式，本申请实施例还提供了第三方面的第三种实施方式：
发送单元，用于将所述录像文件发送给录像设备，以使得所述录像设备根据所述录像文件中的录像数据生成动画。
本申请第四方面提供了一种录像设备，包括：
接收单元，用于接收RDP代理设备发送的录像数据，所述录像数据包括绘图命令、录像信息和绘图请求，所述绘图请求为服务器向终端请求生成操作录像的请求；解码单元，用于对所述绘图命令进行解码；生成单元，用于根据所述录像数据和解码后的绘图命令生成动画。
基于第四方面，本申请实施例还提供了第四方面的第一种实施方式：
识别单元，用于通过RDP协议识别绘图命令的类型；编码单元，用于根据所述绘图命令的类型进行编码，其中，若所述绘图命令的类型包括主绘图命令类型，则根据主绘图命令对图像进行渲染操作；若所述绘图命令的类型包括辅助绘图命令类型，则根据辅助绘图命令对图像进行逐层解析操作；若所述绘图命令的类型包括备用辅助命令类型，则根据备用辅助绘图命令对图像进行预设操作；所述生成单元还具体用于：根据所述录像数据和至少一种所述绘图命令的类型生成动画。
本申请第五方面提供了一种终端服务系统装置，包括：
远程桌面协议RDP代理设备、录像设备和服务器；其中，所述RDP代理设备如本申请实施例第三方面中任意一项所述，所述录像设备如本申请实施例第四方面中任意一项所述。
本申请实施例第六方面提供了一种计算机程序产品，该计算机程序产品包括计算机软件指令，该计算机软件指令可通过处理器进行加载来实现上述第一方面或者第二方面中任意一项的录像文件以及录像生成方法中的流程。
本申请第七方面提供了一种计算机存储介质，该计算机存储介质用于储存为上述RDP代理设备或录像设备所用的计算机软件指令，其包括用于执行为RDP代理设备或录像设备所设计的程序。
从以上技术方案可以看出，本申请实施例具有以下优点：
在本申请方案中，终端发送操作事件给服务器，所述服务器接收到操作事件后生成对应的绘图数据，所述绘图数据包括绘图命令、绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求。RDP代理设备获取所述服务器发送给所述终端的绘图数据后，再获取到所述绘图数据中的图像编码，再通过所述图像编码生成录像文件。在现有技术，终端发送操作事件给服务器，服务器再通过安装在其上的录屏软件生成录像文件，当多个用户操作时，多个录屏软件就会在服务器上运行。而在本方案中，服务器将录像文件的生成交给RDP代理设备去操作，从而服务器不需要在其上运行程序生成录像文件，从而对减轻对服务器产生的负担。
附图说明
图1为本申请实施例中的场景示意图；
图2为本申请实施例中录像文件生成的方法的一个实施例示意图；
图3为本申请实施例中录像文件生成的方法的另一个实施例示意图；
图4为本申请实施例中录像生成的方法的一个实施例示意图；
图5为本申请实施例中录像生成的方法的另一个实施例示意图；
图6为本申请实施例中代理设备的一个实施例示意图；
图7为本申请实施例中代理设备的另一个实施例示意图；
图8为本申请实施例中录像设备的一个实施例示意图；
图9为本申请实施例中录像设备的另一个实施例示意图；
图10为本申请实施例中设备的另一个实施例示意图。
具体实施方式
本申请实施例提供了一种录像文件以及录像生成的方法、相关设备以及存储介质，用于减轻服务器产生的负担。
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
如图1所示，图1为本申请实施例的场景示意图。终端服务(英文：TerminalServices，简称：TS)，它集成在系统服务器中，作为系统服务器服务组件存在。终端服务主要由终端服务器软件、终端服务客户端、RDP协议3部分组成。如图1，在TS服务器上(以下用服务器简称)，终端与服务器通过终端服务客户端来建立和维护连接。终端服务客户端它能将所有的用户输入，比如键盘录入或鼠标移动传送给服务器，并且将所有服务器端的输出，如应用程序显示信息及打印流程返回给终端：远程桌面连接、远程桌面管理单元以及远程桌面Web连接。而在图1中，终端与服务器的连接中串行了RDP代理设备，所述RDP代理设备使用RDP协议并串行在终端到服务器的访问通道中，所述RDP协议是一个基于T.120标准的通信协议，该协议依赖传输控制协议/因特网互联协议(英文：Transmission ControlProtocol/Internet Protocol，简写：TCP/IP)协议的多信道通信协议。它是一种双字节兼容的协议，使用在各种网络环境下用来实现网络定位、自动断开连接以及远程配置。RDP协议用于负责终端与服务器之间通信，并传输用于显示在终端的图形数据，使得终端的用户看起来好像坐在服务器前亲自操作服务器。
如图1所示，在服务器上，终端发送操作事件给服务器，服务器接收到操作事件后生成对应的绘图数据，该绘图数据包括绘图请求和图像编码，该绘图请求用于所述服务器向终端请求生成操作录像的请求。RDP代理设备获取服务器发送终端给的绘图数据，再获取绘图数据中的图像编码，并对绘图数据中的图像编码进行压缩，压缩完成后的图像编码即为录像文件，发送给录像设备。录像设备接收到录像文件后，对录像文件中的录像数据进行解析，根据解析后的录像数据生成动画并将动画存储至本地。
为方便说明，以下方案执行主体为RDP代理设备端进行阐述，下面请参阅图2，本申请实施例中录像文件生成的方法的一个实施例包括：
201、获取服务器发送的绘图数据。
服务器接收到终端发送的操作事件后，将操作事件生成对应的绘图数据，绘图数据中包括有绘图请求和图像编码，绘图请求用于指示服务器向终端请求生成录像的请求，所以服务器将绘图数据发送给终端。RDP代理设备从服务器发送到终端的通道中获取到绘图数据，因为RDP代理设备是串行在终端到服务器的访问通道中，所以服务器向终端发送的数据RDP代理设备都能获取到。在现有技术中，终端发送操作事件给服务器，服务器再通过安装在其上的录屏软件生成录像文件，当多个用户操作时，多个录屏软件就会在服务器上运行，从而对服务器产生较大的负担。而在本方案中，服务器通过将终端发送过来的操作事件生成相对应的绘图数据，再将绘图数据发送给终端。RDP代理设备从中获取到绘图数据，并根据绘图数据中的信息生成录像文件，从而达到减轻服务器的负担。可选的，服务器接收到终端发送的操作事件后，将操作事件生成对应的绘图数据，但是服务器并不将该绘图数据发送给终端，指示终端生成操作录像，而是直接将该绘图数据发送给RDP代理设备进行处理，然后生成录像文件。
202、获取绘图数据中的图像编码。
RDP代理设备获取到服务器发送给终端的绘图数据后，对绘图数据进行分析，并获取绘图数据的图像编码信息。获取到图像编码信息是为了让RDP代理设备生成录像文件。
203、根据图像编码生成录像文件。
RDP代理设备获取到绘图数据中的图像编码后，生成录像文件。例如，通过绘图数据中的绘图命令对图像编码中的位图进行压缩处理，经过压缩处理后的图像编码即为录像文件。可选的，RDP代理设备还可以将一些绘图命令等信息同时写入该录像文件中，以便该录像文件发送给录像设备后，录像设备根据绘图命令进行相对应的操作。服务器通过接收终端发送的操作事件生成的绘图数据中还包括有绘图命令，该绘图命令是定义的对图像编码中的位图进行各种操作的命令，例如，该绘图命令用于指示对图像编码中的位图进行压缩以得到录像文件。
在本申请方案中，RDP代理设备通过获取服务器发送给终端的绘图数据，再通过获取绘图数据中的图像编码生成录像文件。在现有技术中，终端发送操作事件给服务器，服务器再通过安装在其上的录屏软件生成录像文件，当多个用户操作时，多个录屏软件就会在服务器上运行。而在本方案中，通过RDP代理设生成将录像文件，从而服务器不需要在其上运行程序生成录像文件，从而对减轻对服务器产生的负担。
下面请参阅图3，本申请实施例中录像文件生成的方法的另一个实施例包括：
301、获取服务器发送的绘图数据。
步骤301与上述方案中的步骤201相类似，具体此处不再赘述。
302、获取绘图数据中的图像编码。
步骤302与上述方案中的步骤202相类似，具体此处不再赘述。
303、RDP代理设备根据绘图数据中的绘图命令对图像编码中的目标位图进行相关处理。
RDP代理设备获取绘图数据中的图像编码后，RDP协议会对获取到的图像编码进行压缩。RDP代理设备根据绘图数据中的绘图命令对图像编码中的目标位图进行相关处理，该目标位图为绘图命令所指示的位图。而绘图数据中的绘图命令用于指示RDP代理设备对图像编码中的位图进行相对应的处理，例如，RDP代理设备通过绘图命令对图像编码中的位图进行压缩处理。
304、RDP代理设备根据字段压缩编码方式对处理后的目标位图进行压缩。
RDP代理设备接收到绘图数据后，对绘图数据进行分析得到绘图命令，通过绘图命令对目标位图进行相关处理，再通过字段压缩编码对目标位图进行压缩处理，经过压缩处理后的位图即为录像文件。RDP代理设备通过字段压缩编码方式对图像编码中的位图进行压缩处理后的文件信息会比现有技术中通过录屏软件生成的录像文件有很大的缩减。
305、将录像文件发送给录像设备。
RDP代理设备将生成的录像文件中的录像数据发送给录像设备，录像设备接收到录像文件后，将录像文件解析后生成动画保存起来，当终端需要播放动画时，访问录像设备将生成的动画下载到终端再进行播放或者直接访问录像设备播放动画。
RDP代理设备首先接收服务器发送的绘图数据，然后RDP代理设备根据绘图数据中的绘图命令对图像编码中的目标位图进行相关处理，并通过字段压缩编码方式对处理后的目标位图进行压缩，该压缩后的图像编码即为录像文件。RDP代理设备再将录像文件发送给录像设备，以使得录像设备根据录像文件生成动画，通过压缩处理后的位图生成的录像文件会比从服务器直接生成的预设格式的录像文件的文件大小要小，比如预设格式一般为avi格式。这样，通过RDP代理设备生成的录像文件的空间占用比率大大减少，同时因为空间占用比率减少，终端与录像设备通信的数据量也会大大减少。
RDP代理设备在生成录像文件后，将录像文件的数据发送给录像设备，以使得录像设备根据录像数据生成动画，以便工程师根据动画对终端用户的操作进行测试。下面对录像设备生成动画进行详细说明。该录像设备可以是独立于服务器和RDP代理设备的设备，也可以是和服务器合设的设备。当该录像设备是独立的设备时，接收RDP代理设备发送的录像文件生成动画，录像设备可以将动画存储在本地或者上传给服务器。当该录像设备是和服务器合设的设备时，该录像设备可以作为是服务器的一个功能模块。为方便说明，以下方案以录像设备为执行主体进行说明。下面请参阅图4，本申请实施例中录像生成的方法的一个实施例包括：
401、接收RDP代理设备发送的录像数据。
录像设备接收RDP代理设备发送的录像数据，RDP代理设备根据压缩后的图像编码生成录像文件，该录像文件包括录像数据，所述录像数据包括绘图请求、录像信息和绘图命令。该录像信息为压缩后的位图信息。录像设备接收RDP发送的录像数据后，对录像数据进行分析并生成对应的动画。
402、对绘图命令进行解码。
录像设备接收到RDP代理设备发送的录像数据，所述录像数据包括录像文件、绘图请求、录像信息和绘图命令。由于RDP代理设备获取服务器发送的绘图数据时，也会同时获取到所有的不同类型的绘图命令并将所有绘图命令写入录像文件。而绘图命令用于执行传输位图数据，编码图形渲染图元，操作数据缓存，管理渲染图层，支持应用程序远程和支持桌面组合的操作。录像设备接收到录像数据后，对录像数据中的绘图命令进行解码操作，识别出绘图命令，并根据绘图命令执行相应的绘图操作。
403、根据录像信息和解码后的绘图命令生成动画。
录像设备对录像数据中的绘图命令进行解码并根据绘图命令执行相应的绘图操作，所述录像信息为压缩后的位图信息，再根据执行完的操作跟录像信息把录像文件生成动画。生成动画后保存在录像设备上。当终端需要观看时，录像设备将动画发送给终端进行播放或者终端直接访问录像设备进行播放。
在本申请实施例中，录像设备先接收到RDP代理设备发送的录像数据，录像数据包括有录像文件、录像信息和绘图命令。再对绘图命令进行解码操作，识别出绘图命令，并根据绘图命令执行相应的绘图操作。再根据录像信息和解码后的绘图命令生成动画。本方案通过录像设备生成动画，当终端有需要进行观看视频时，录像设备将动画发送给终端进行播放或者终端直接访问录像设备将动画进行播放。在本实施例方案中RDP代理设备生成录像文件后将录像文件发送给录像设备再进行处理，就不需要通过服务器生成录像文件再发送给终端，从而减轻了服务器的负担。
下面请参阅5，本申请实施例中录像生成的方法的另一个实施例包括：
501、接收RDP代理设备发送的录像数据。
步骤501与上述实施例中步骤401相类似，具体此处不再赘述。
502、通过RDP协议识别绘图命令的类型。
RDP代理设备会获取到所有的绘图命令并将所有绘图命令写入录像文件。而绘图命令用于执行传输位图数据，编码图形渲染图元，操作数据缓存，管理渲染图层，支持应用程序远程和支持桌面组合的操作。绘图命令主要分为三种：主绘图命令、辅助绘图命令和备用辅助绘图命令。录像设备接收到录像数据后，判断并识别出绘图命令的类型，
503、根据绘图命令的类型进行编码。
绘图命令主要分为主绘图命令、辅助绘图命令和备用辅助绘图命令这三种绘图命令，主绘图命令主要用于指示录像设备对位图进行渲染操作。辅助绘图命令主要用于指示录像设备进行数据缓存的添加或者删除，数据缓存包括位图缓存、颜色表缓存、字体缓存和画刷缓存。位图缓存用于存储位图图像操作，颜色表缓存于指示存储调色板，字体缓存用于存储字体图像，画刷缓存用于将像素填充区域。辅助绘图命令还用于对图像的图层进行逐层解析。而备用辅助绘图命令主要是对图像进行预设操作，预设的操作指的是绘图操作中的一些特殊的操作，该特殊的操作不包括主绘图命令的操作和辅助绘图命令的操作。比如该特殊操作为屏幕外位图缓存操作，所述屏幕外位图缓存用于存储可写位图。录像文件识别出绘图命令的类型后，对图像进行绘图命令类型的相对应的操作。
504、根据录像信息和至少一个类型的绘图命令生成动画。
录像设备根据识别后至少一个绘图命令的类型和录像信息，将录像文件生成动画。生成动画后保存在录像设备上。当终端需要观看时，再将动画发送给终端进行播放或者终端直接访问录像设备进行播放。
在本申请实施例中，录像设备先接收RDP代理设备发送的录像数据，然后通过RDP协议将录像数据中的绘图命令进行识别，识别出绘图命令的类型后，录像设备接收识别后的绘图命令并根据绘图命令的类型对图像进行相对应的操作，最后再根据录像信息和至少一个类型的绘图命令生成动画并保存起来。当终端需要观看时，再将动画发送给终端进行播放或者终端直接访问录像设备进行播放。通过这种方案，从而达到不需要服务器生成录像文件再发送给终端的目的，从而减轻了服务器的负担。
上面对本申请实施例中的录像文件及录像生成的方法进行了描述，下面对本申请实施例中的设备进行描述，请参阅图6，本申请实施例中RDP代理设备的一个实施例包括：
获取单元601，用于获取服务器发送的绘图数据，所述绘图数据由所述服务器接收到终端发送的操作事件后生成，所述绘图数据包括绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求；
所述获取单元601还用于获取所述绘图数据中的图像编码；
生成单元602，用于根据获取单元601获取所述绘图数据中的图像编码后生成录像文件。
图6实施例中各个单元的功能的详细描述参照图2实施例中录像文件生成的方法所描述的内容，具体此处不做赘述。
请参阅图7，本申请实施例中RDP代理设备的另一个实施例包括：
获取单元701，用于获取服务器发送的绘图数据，所述绘图数据由所述服务器接收到终端发送的操作事件后生成，所述绘图数据包括绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求；
所述获取单元701还用于获取所述绘图数据中的图像编码；
生成单元702，用于根据获取单元701获取所述绘图数据中的图像编码后生成录像文件。
压缩单元703，用于根据RDP协议对所述图像编码进行压缩，所述压缩后的图像编码为录像文件。
处理单元704，用于根据所述绘图数据中的绘图命令对所述图像编码中的目标位图进行相关处理，所述目标位图为所述绘图命令所指示的位图；
目标位图压缩单元705，用于根据字段压缩编码方式对处理后的目标位图进行压缩。
发送单元706，用于将所述录像文件发送给录像设备，以使得录像设备根据所述录像文件生成动画。
图7实施例中各个单元的功能的详细描述参照图3实施例中录像文件生成的方法所描述的内容，具体此处不做赘述。
请参阅图8，本申请实施例中录像设备的一个实施例包括：
接收单元801，用于接收远程桌面协议RDP代理设备发送的录像数据，所述录像数据包括绘图命令、录像信息和绘图请求，所述绘图请求为服务器向终端请求生成操作录像的请求；
解码单元802，用于对所述绘图命令进行解码；
生成单元803，用于根据所述录像数据和解码后的绘图命令生成动画。
图8实施例中各个单元的功能的详细描述参照图4实施例中定位的方法所描述的内容，具体此处不做赘述。
请参阅图9，本申请实施例中录像设备的另一个实施例包括：
接收单元901，用于接收远程桌面协议RDP代理设备发送的录像数据，所述录像数据包括绘图命令、录像信息和绘图请求，所述绘图请求为服务器向终端请求生成操作录像的请求；
识别单元902，用于通过RDP协议识别绘图命令的类型；
编码单元903，用于根据所述绘图命令的类型进行编码，其中，若所述绘图命令的类型包括主绘图命令类型，则根据主绘图命令对图像进行渲染操作；若所述绘图命令的类型包括辅助绘图命令类型，则根据辅助绘图命令对图像进行逐层解析操作；若所述绘图命令的类型包括备用辅助命令类型，则根据备用辅助绘图命令对图像进行预设操作；
生成单元904，用于根据所述录像数据和至少一种所述绘图命令的类型生成动画。
图9实施例中各个单元的功能的详细描述参照图5实施例中定位的方法所描述的内容，具体此处不做赘述。
上面从模块化功能实体的角度对本申请实施例中的代理设备和录像设备进行描述，下面从硬件处理的角度对本申请实施例中的代理设备和录像设备进行描述，请参阅图10，本申请实施例中的代理设备或录像设备另一实施例包括：
输入装置1001、输出装置1002、处理器1003和存储器1004(其中处理器1001的数量可以一个或多个，图10中以一个处理器1001为例)。在本申请的一些实施例中，输入装置1001、输出装置1002、处理器1003和存储器1004可通过总线或其它方式连接，其中，图10中以通过总线连接为例。
其中，通过调用存储器1004存储的操作指令，处理器1003，用于执行如图2至图3所示的RDP代理设备的录像文件生成的方法步骤，或图4至图5所示的录像设备的录像生成的方法步骤，具体此处不再赘述。
本实施例中，处理器1003中的具体功能模块划分可以与前述图7中所描述的获取单元、生成单元、压缩单元、处理单元、目标位图压缩单元、发送单元等单元的功能模块划分方式类似，此处不再赘述。
本实施例中，处理器1003中的具体功能模块划分也可以与前述图9中所描述的接收单元、识别单元、编码单元、识别单元、生成单元等单元的功能模块划分方式类似，此处不再赘述。
本申请实施例还提供了一种计算机存储介质，该计算机存储介质用于储存为上述录像文件及录像生成所用的计算机软件指令，其包括用于执行如图2至图3或图4至图5中任意一项的程序。
本申请实施例还提供了一种计算机程序产品，该计算机程序产品包括计算机软件指令，该计算机软件指令可通过处理器进行加载来实现上述图2至图3或图4至图5中任意一项的录像文件及录像生成的方法中的流程。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取存储器(英文：Random Access Memory，简称：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (15)

1.一种录像文件生成的方法，其特征在于，包括：
远程桌面协议RDP代理设备获取服务器发送的绘图数据，所述绘图数据由所述服务器接收到终端发送的操作事件后生成，所述绘图数据包括绘图命令、绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求；
所述RDP代理设备获取所述绘图数据中的图像编码；
所述RDP代理设备根据所述图像编码生成录像文件。
2.根据权利要求1所述的方法，其特征在于，所述RDP代理设备根据所述图像编码生成录像文件包括：
所述RDP代理设备根据RDP协议对所述图像编码进行压缩，所述压缩后的图像编码为录像文件。
3.根据权利要求2所述的方法，其特征在于，所述RDP代理设备根据RDP协议对所述图像编码进行压缩包括：
所述RDP代理设备根据所述绘图数据中的绘图命令对所述图像编码中的目标位图进行相关处理，所述目标位图为所述绘图命令所指示的位图；
所述RDP代理设备根据字段压缩编码方式对处理后的目标位图进行压缩。
4.根据权利要求1至3任一项所述的方法，其特征在于，所述方法还包括：
所述RDP代理设备将所述录像文件发送给录像设备，以使得所述录像设备根据所述录像文件中的录像数据生成动画。
5.一种录像生成的方法，其特征在于，包括：
录像设备接收远程桌面协议RDP代理设备发送的录像数据，所述录像数据包括绘图命令、录像信息和绘图请求，所述绘图请求为服务器向终端请求生成操作录像的请求；
所述录像设备对所述绘图命令进行解码；
所述录像设备根据所述录像信息和解码后的绘图命令生成动画。
6.根据权利要求5所述的方法，其特征在于，所述绘图命令包括：主绘图命令类型、辅助绘图命令类型以及备用辅助绘图命令类型中至少一个类型的绘图命令；
所述录像设备对所述绘图命令进行解码包括：
所述录像设备通过RDP协议识别绘图命令的类型；
所述录像设备根据所述绘图命令的类型进行编码，其中，若所述绘图命令的类型包括主绘图命令类型，则根据主绘图命令对图像进行渲染操作；若所述绘图命令的类型包括辅助绘图命令类型，则根据辅助绘图命令对图像进行逐层解析操作；若所述绘图命令的类型包括备用辅助命令类型，则根据备用辅助绘图命令对图像进行预设操作；
所述录像设备根据所述录像信息和解码后的绘图命令生成动画包括：
所述录像设备根据所述录像信息和所述至少一个类型的绘图命令生成动画。
7.一种远程桌面协议RDP代理设备，其特征在于，包括：
获取单元，用于获取服务器发送的绘图数据，所述绘图数据由所述服务器接收到终端发送的操作事件后生成，所述绘图数据绘图命令、包括绘图请求和图像编码，所述绘图请求用于所述服务器向所述终端请求生成操作录像的请求；
所述获取单元还用于，获取所述绘图数据中的图像编码；
生成单元，用于根据获取单元获取所述图像编码后生成录像文件。
8.根据权利要求7所述的代理设备，其特征在于，所述生成单元包括：
压缩单元，用于根据RDP协议对所述图像编码进行压缩；所述压缩后的图像编码为录像文件。
9.根据权利要求8所述的代理设备，其特征在于，所述压缩单元包括：
处理单元，用于根据所述绘图数据中的绘图命令对所述图像编码中的目标位图进行相关处理，所述目标位图为所述绘图命令所指示的位图；
目标位图压缩单元，用于根据字段压缩编码方式对处理后的目标位图进行压缩。
10.根据权利要求7至9任一项所述的代理设备，其特征在于，所述装置还包括：
发送单元，用于将所述录像文件发送给录像设备，以使得所述录像设备根据所述录像文件中的录像数据生成动画。
11.一种录像设备，其特征在于，包括：
接收单元，用于接收远程桌面协议RDP代理设备发送的录像数据，所述录像数据包括绘图命令、录像信息和绘图请求，所述绘图请求为服务器向终端请求生成操作录像的请求；
解码单元，用于对所述绘图命令进行解码；
生成单元，用于根据所述录像数据和解码后的绘图命令生成动画。
12.根据权利要求11所述的录像设备，其特征在于，所述解码单元包括：
识别单元，用于通过RDP协议识别绘图命令的类型；
编码单元，用于根据所述绘图命令的类型进行编码，其中，若所述绘图命令的类型包括主绘图命令类型，则根据主绘图命令对图像进行渲染操作；若所述绘图命令的类型包括辅助绘图命令类型，则根据辅助绘图命令对图像进行逐层解析操作；若所述绘图命令的类型包括备用辅助命令类型，则根据备用辅助绘图命令对图像进行预设操作；
所述生成单元具体还用于：
根据所述录像数据和至少一种所述绘图命令的类型生成动画。
13.一种终端服务系统装置，其特征在于，包括：
远程桌面协议RDP代理设备、录像设备和服务器；其中，所述RDP代理设备如权利要求7至10任意一项所述，所述录像设备如权利要求11至12任意一项所述。
14.一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行如权利要求1至4或5至6中任意一项所述的方法。
15.一种计算机可读存储介质，包括指令，当所述指令在计算机上运行时，使得计算机执行如权利要求1至4或5至6中任意一项所述的方法。
CN201710821887.4A 2017-09-12 2017-09-12 录像文件以及录像生成的方法、相关设备以及存储介质 Pending CN109508159A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710821887.4A CN109508159A (zh) 2017-09-12 2017-09-12 录像文件以及录像生成的方法、相关设备以及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710821887.4A CN109508159A (zh) 2017-09-12 2017-09-12 录像文件以及录像生成的方法、相关设备以及存储介质

Publications (1)

Publication Number Publication Date
CN109508159A true CN109508159A (zh) 2019-03-22

Family

ID=65744286

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710821887.4A Pending CN109508159A (zh) 2017-09-12 2017-09-12 录像文件以及录像生成的方法、相关设备以及存储介质

Country Status (1)

Country Link
CN (1) CN109508159A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100228871A1 (en) * 2009-03-09 2010-09-09 Microsoft Corporation Tear-free remote desktop protocal (rdp) display
CN102227718A (zh) * 2008-11-26 2011-10-26 微软公司 用于远程桌面协议的硬件加速
US20120151372A1 (en) * 2010-12-10 2012-06-14 Wyse Technology Inc. Methods and systems for facilitating a remote desktop session utilizing a remote desktop client common interface
CN103430123A (zh) * 2010-12-10 2013-12-04 韦斯技术有限公司 用于经由支持2d画布和动态绘图的html来进行远程桌面会话的方法和系统
CN103973781A (zh) * 2014-04-29 2014-08-06 上海上讯信息技术股份有限公司 一种基于代理服务器的屏幕监控方法及其系统
CN104145258A (zh) * 2011-09-09 2014-11-12 石器公司 基于服务器的远程桌面记录和回放方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102227718A (zh) * 2008-11-26 2011-10-26 微软公司 用于远程桌面协议的硬件加速
US20100228871A1 (en) * 2009-03-09 2010-09-09 Microsoft Corporation Tear-free remote desktop protocal (rdp) display
CN102349063A (zh) * 2009-03-09 2012-02-08 微软公司 无拆分远程桌面协议(rdp)显示
US20120151372A1 (en) * 2010-12-10 2012-06-14 Wyse Technology Inc. Methods and systems for facilitating a remote desktop session utilizing a remote desktop client common interface
CN103430123A (zh) * 2010-12-10 2013-12-04 韦斯技术有限公司 用于经由支持2d画布和动态绘图的html来进行远程桌面会话的方法和系统
CN104145258A (zh) * 2011-09-09 2014-11-12 石器公司 基于服务器的远程桌面记录和回放方法和装置
CN103973781A (zh) * 2014-04-29 2014-08-06 上海上讯信息技术股份有限公司 一种基于代理服务器的屏幕监控方法及其系统

Similar Documents

Publication Publication Date Title
CN103412701B (zh) 远程桌面图像处理方法及装置
CN110841278A (zh) 一种云游戏实现方法及装置
CN108040285A (zh) 视频直播画面调整方法、计算机设备及存储介质
CN108989885A (zh) 视频文件转码系统、分割方法、转码方法及装置
US10410312B2 (en) Method and system for interactive graphics streaming
NZ585909A (en) System and method for storing program code and data within an application hosting center
CN109640116A (zh) 云手机网络视频编码方法与服务器
CN104067627B (zh) 一种视频重定向的方法、装置、系统及计算机可读介质
CN109302637A (zh) 图像处理方法、图像处理装置和电子设备
CN113556584A (zh) 云手机的截图传输方法、装置、电子设备和存储介质
CN115695857B (zh) 云应用的视频编码方法及装置
CN109522139A (zh) 一种数据表服务生成调用方法、装置、设备及存储介质
US8255461B1 (en) Efficient transmission of changing images using image caching
WO2016146009A1 (zh) Html页面压缩方法及装置
CN108121449A (zh) 可编辑更新的基于体感控制的可视化交互管理系统
CN110807111A (zh) 三维图形的处理方法及装置、存储介质、电子设备
CN101411164B (zh) 用于呈现远程可视合成的方法
CN109508159A (zh) 录像文件以及录像生成的方法、相关设备以及存储介质
CN106844763B (zh) 一种对互联网媒体文件进行修改式展现的方法及其装置
CN108337248A (zh) 媒体重放设备和媒体服务设备
CN110443873A (zh) 一种儿童图书的ar场景展现方法、装置、存储介质
CN112445624B (zh) 一种面向任务的gpu资源优化配置方法及装置
CN112702625B (zh) 视频处理方法、装置、电子设备及存储介质
CN103209178A (zh) CloudStack平台上兼容SPICE协议的方法
CN115061751A (zh) 插件加载方法、插件加载装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination