CN104053019A - 基于虚拟桌面的视频播放、处理方法及装置 - Google Patents

Abstract

本发明公开了一种基于虚拟桌面的视频播放、处理方法及装置。其中，该方法包括：终端接收当前需要播放的视频文件的原始码流，其中，原始码流是由虚拟桌面系统获取后发送给终端的；终端按照原始码流播放视频文件。通过本发明，避免或减少了对虚拟机主机的CPU资源的占用，达到了视频文件的顺畅播放的效果。

Description

基于虚拟桌面的视频播放、处理方法及装置

技术领域

本发明涉及通信领域，具体而言，涉及一种基于虚拟桌面的视频播放、处理方法及装置。

背景技术

随着IT技术的演进，基础架构方面也在推陈出新，伴随虚拟化技术的不断成熟，云计算也发展到了新的阶段。云计算是分布式处理、并行计算和网格计算等概念的发展和商业实现，其技术实质是计算、存储、服务器、应用软件等IT软硬件资源的虚拟化，云计算在虚拟化、数据存储、数据管理、编程模式等方面具有自身独特的技术。

虚拟机（即服务器虚拟化）是云计算底层架构的重要基石。在服务器虚拟化中，虚拟化软件需要实现对硬件的抽象，资源的分配、调度和管理，虚拟机与宿主操作系统及多个虚拟机间的隔离等功能，目前典型的实现（基本成为事实标准）有Citrix Xen、VMware ESX Server和Microsoft Hype-V等。

云计算的虚拟桌面是利用和突出桌面优点的同时创建一种新的基于云计算的Web应用开发和发布平台。虚拟桌面即Web桌面，运行在浏览器上，能整合Web应用、Web服务、C\S应用、C\S应用服务器以及本地客户端应用到一个桌面环境上。

目前在虚拟桌面应用过程中，如果在虚拟桌面服务器上播放高清视频，经常出现显示图像慢、不清晰、甚至是无法播放的情况，目前终端性能不存在问题，问题在于两个方面：1.虚拟机主机的性能，图像数据的压缩占用了大量的主机CPU资源，尤其是高清视频；2.终端同虚拟服务器之间的网络带宽不足。

图1是根据相关技术的图像捕捉压缩播放方法的实现过程示意图，如图1所示，该实现过程主要包括以下几个步骤：

（1）在虚拟桌面上，打开媒体播放器程序，媒体播放器打开媒体文件；

（2）虚拟桌面操作系统对桌面扫描，扫描出变化的区域。得到相关图像信息（主要是在GPU里面的信息）；

（3）虚拟桌面系统对图像信息进行压缩，目前主要是采用MJPEG格式的压缩；

（4）将压缩好的图像信息通过网络传输给终端；

（5）终端接收到压缩后的图像信息，解压图像；

（6）终端系统对图像进行回放。

在上述实现过程中，步骤（3）由于对图像进行压缩，导致对CPU的资源占用比较明显，在这种情况下，虚拟机主机的性能将大大降低，从而容易产生在虚拟桌面服务器上播放高清视频时失败的情况。

针对相关技术中虚拟服务器的性能较低或终端与虚拟服务器之间的网络带宽不足容易导致的在虚拟桌面服务器上播放高清视频失败的问题，目前尚未提出有效的解决方案。

发明内容

本发明提供了一种基于虚拟桌面的视频播放、处理方法及装置，以至少解决上述问题。

根据本发明的一个方面，提供了一种基于虚拟桌面的视频播放方法，包括：终端接收当前需要播放的视频文件的原始码流，其中，原始码流是由虚拟桌面系统获取后发送给终端的；终端按照原始码流播放视频文件。

根据本发明的另一个方面，提供了一种基于虚拟桌面的视频播放装置，位于终端，包括：接收模块，用于接收当前需要播放的视频文件的原始码流，其中，原始码流是由虚拟桌面系统获取后发送给终端的；播放模块，用于按照原始码流播放视频文件。

根据本发明的又一个方面，提供了一种基于虚拟桌面的视频处理方法，包括：虚拟桌面系统将当前需要播放的视频文件的原始码流发送给视频格式转换器进行格式转换；虚拟桌面系统将转换后的码流发送给终端进行视频播放。

优选地，在虚拟桌面系统将当前需要播放的视频文件的原始码流发送给视频格式转换器进行格式转换之前，还包括：虚拟桌面系统从视频文件中获取原始码流。

优选地，视频格式转换器预先设置在虚拟服务器上。

根据本发明的再一个方面，提供了一种基于虚拟桌面的视频处理装置，包括：第一发送模块，用于将当前需要播放的视频文件的原始码流发送给预先设置在虚拟服务器上的视频格式转换器进行格式转换；第二发送模块，用于将转换后的码流发送给终端进行视频播放。

根据本发明的又一个方面，提供了一种基于虚拟桌面的视频处理方法，包括：虚拟桌面系统对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；虚拟桌面系统将第一图像信息发送给格式压缩器进行压缩；虚拟桌面系统将压缩得到的第二图像信息发送给终端进行视频播放。

优选地，第一图像信息包括：位于图像处理单元（Graphic Processing Unit，简称为GPU）的信息。

根据本发明的再一个方面，提供了一种基于虚拟桌面的视频处理装置，包括：扫描模块，用于对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；第一发送模块，用于将第一图像信息发送给格式压缩器进行压缩；第二发送模块，用于将压缩得到的第二图像信息发送给终端进行视频播放。

优选地，第一图像信息包括：位于图像处理单元GPU的信息。

根据本发明的又一个方面，提供了一种基于虚拟桌面的视频处理方法，包括：虚拟桌面系统对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；虚拟桌面系统将第一图像信息和预先设定的压缩策略发送给虚拟机服务器或预置的压缩器进行压缩，其中，压缩策略能够根据网络带宽进行动态调整为不同的压缩比率；虚拟桌面系统将压缩得到的第二图像信息发送给终端进行视频播放。

优选地，压缩策略包括多个不同的压缩比率，压缩比率的大小与网络带宽的大小成正比。

优选地，第一图像信息包括：位于图像处理单元GPU的信息。

根据本发明的还一个方面，提供了一种基于虚拟桌面的视频处理装置，包括：扫描模块，用于对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；第一发送模块，用于将第一图像信息和预先设定的压缩策略发送给虚拟机服务器或预置的压缩器进行压缩，其中，压缩策略能够根据网络带宽进行动态调整为不同的压缩比率；第二发送模块，用于将压缩得到的第二图像信息发送给终端进行视频播放。

通过本发明，采用将视频文件的原始码流直接发送给终端进行播放、通过预置在虚拟服务器上的视频格式转换器对视频文件进行转换后发送给终端进行解码播放、由视频格式压缩器对视频文件变化区域的图像信息进行压缩操作后发送给终端进行解压缩播放，或者由虚拟桌面系统使用根据当前网络带宽的大小动态选择的压缩比率对视频文件变化区域的图像信息进行压缩后发送给终端进行解压缩播放的任意一种方式，解决了相关技术中虚拟服务器的性能较低或终端与虚拟服务器之间的网络带宽不足容易导致的在虚拟桌面服务器上播放高清视频失败的问题，避免或减少了对虚拟机主机的CPU资源的占用，进而达到了视频文件的顺畅播放的效果。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据相关技术的图像捕捉压缩播放方法的实现过程示意图；

图2是根据本发明实施例一的基于虚拟桌面的视频播放方法流程图；

图3是根据本发明实施例一的基于虚拟桌面的视频播放装置的结构框图；

图4是根据本发明优选实施例一的传输原始码流到终端播放流程示意图；

图5是根据本发明实施例二的基于虚拟桌面的视频处理方法流程图；

图6是根据本发明实施例二的基于虚拟桌面的视频处理装置的结构框图；

图7是根据本发明优选实施例二的原始码流转换后到终端处理流程示意图；

图8是根据本发明实施例三的基于虚拟桌面的视频处理方法流程图；

图9是根据本发明实施例三的基于虚拟桌面的视频处理装置的结构框图；

图10是根据本发明优选实施例三的图像压缩分担方法的实现流程示意图；

图11是根据本发明实施例四的基于虚拟桌面的视频处理方法流程图；

图12是根据本发明实施例四的基于虚拟桌面的视频处理装置的结构框图；

图13是根据本发明优选实施例四的根据网络带宽动态调整压缩率方法的实现流程示意图。

具体实施方式

下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

图2是根据本发明实施例一的基于虚拟桌面的视频播放方法流程图，如图2所示，该方法主要包括以下步骤（步骤S202-步骤S204）：

步骤S202，终端接收当前需要播放的视频文件的原始码流，其中，原始码流是由虚拟桌面系统获取后发送给终端的；

步骤S204，终端按照原始码流播放视频文件。

图3是根据本发明实施例一的基于虚拟桌面的视频播放装置的结构框图，该装置位于终端，用于实现图2所示的基于虚拟桌面的视频播放方法，如图3所示，该基于虚拟桌面的视频播放装置包括：接收模块10，用于接收当前需要播放的视频文件的原始码流，其中，原始码流是由虚拟桌面系统获取后发送给终端的；播放模块20，连接至接收模块10，用于按照原始码流播放视频文件。

下面结合图4对本实施例一提供的基于虚拟桌面的视频播放方法进行更进一步的描述。

图4是根据本发明优选实施例一的传输原始码流到终端播放方法示意图，在图4中，虚拟桌面系统在得到当前需要马上播放的视频文件的原始码流后，对该原始码流不作任何处理，而通过网络直接将该原始码流传输到终端，交由终端进行视频播放。这里需要说明的是，在虚拟桌面里面是不直接播放视频文件的，这与在个人电脑（PC）上播放视频有着本质的区别。终端接收到原始码流后，不需要对该码流进行任何其他的解码的工作，即开始播放该视频文件（以原始码流的形式组成）。

这里还需要说明的是：（1）此处构成视频文件的原始码流不一定是指整个视频文件，该视频文件也可以是以流媒体的方式进行播放，并且将视频文件以类似流媒体的方式传输到终端。这种播放方式的核心在于：不对视频文件的原始码流进行任何压缩操作，而将视频文件直接发送到客户端（终端）进行播放；（2）播放软件可以通过设计做成类似嵌入在桌面内部播放。

这种播放方式因为不在服务器端进行视频的播放，因此具有不占用服务器的CPU资源的优点，大大提高播放成功率。

图5是根据本发明实施例二的基于虚拟桌面的视频处理方法流程图，如图5所示，该方法主要包括以下步骤（步骤S502-步骤S504）：

步骤S502，虚拟桌面系统将当前需要播放的视频文件的原始码流发送给视频格式转换器进行格式转换；

步骤S504，虚拟桌面系统将转换后的码流发送给终端进行视频播放。

在本实施例中，在虚拟桌面系统将当前需要播放的视频文件的原始码流发送给视频格式转换器进行格式转换之前，还包括：虚拟桌面系统从视频文件中获取原始码流。

在本实施例中，视频格式转换器预先设置在虚拟服务器上。

图6是根据本发明实施例二的基于虚拟桌面的视频处理装置的结构框图，该装置用于实现图5所示的基于虚拟桌面的视频处理方法，如图6所示，该基于虚拟桌面的视频处理装置包括：第一发送模块30，用于将当前需要播放的视频文件的原始码流发送给预先设置在虚拟服务器上的视频格式转换器进行格式转换；第二发送模块40，与第一发送模块30连接，用于将转换后的码流发送给终端进行视频播放。

下面结合图7对本实施例二提供的基于虚拟桌面的视频处理方法进行更进一步的描述。

图7是根据本发明优选实施例二的原始码流转换后到终端处理方法示意图，在图7中，虚拟桌面系统在获取得到当前需要立即播放的视频文件的原始码流后，将其发送给预先在虚拟服务器上增加的视频格式转换器，由视频格式转换器对由原始码流组成的视频文件进行格式转换，待转换完成后，虚拟桌面系统把转换以后的码流传输到终端，终端经过解码后通过播放软件播放该视频文件。

需要说明的是，该视频处理方式是对实施例一提供的视频播放方法的其中一种更加优选的实施方式，这里在虚拟服务器上增加的视频格式转换器是一个比较常见的模块（目前很多厂商都有现成的产品，只要是具有视频格式转换功能并且能够集成在虚拟机服务器上的产品都可以使用），当然，该视频处理方式的重点并不在于该视频格式转换器。该视频处理方式同时在终端需要能支持转换以后格式的解码器。

该视频处理方式的优点是能够为支持解码功能的客户端节约了带宽资源。

图8是根据本发明实施例三的基于虚拟桌面的视频处理方法流程图，如图8所示，该方法主要包括以下步骤（步骤S802-步骤S806）：

步骤S802，虚拟桌面系统对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；

步骤S804，虚拟桌面系统将第一图像信息发送给格式压缩器进行压缩；

步骤S806，虚拟桌面系统将压缩得到的第二图像信息发送给终端进行视频播放。

在本实施例中，第一图像信息包括：位于图像处理单元GPU的信息。

图9是根据本发明实施例三的基于虚拟桌面的视频处理装置的结构框图，该装置用于实现图8所示的基于虚拟桌面的视频处理方法，如图9所示，该基于虚拟桌面的视频处理装置包括：扫描模块50，用于对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；第一发送模块60，连接至扫描模块50，用于将第一图像信息发送给格式压缩器进行压缩；第二发送模块70，连接至第一发送模块60，用于将压缩得到的第二图像信息发送给终端进行视频播放。

在本实施例中，第一图像信息包括：位于图像处理单元GPU的信息。

下面结合图10对本实施例三提供的基于虚拟桌面的视频处理方法进行更进一步的描述。

图10是根据本发明优选实施例三的图像压缩分担方法的实现流程示意图，在图10中，当用户在虚拟桌面上打开媒体播放器程序（媒体播放器）打开媒体文件（视频文件）时，虚拟桌面系统首先对桌面进行扫描，扫描出视频文件发生变化的区域，并得到该变化区域对应的图像信息（主要是在GPU里面的信息）。虚拟桌面系统再把图像信息发送给视频格式压缩器进行压缩（目前比较不错的压缩比率是H.264格式），视频格式压缩器在完成压缩操作以后，把码流返回给虚拟桌面虚拟机服务器。虚拟桌面系统将压缩好的图像信息通过网络传输给终端。终端接收到压缩后的图像信息，先对图像信息进行解压操作之后再对图像信息进行回放。

需要说明的是，该处理方式针对实施例一中的视频播放方式进行适当改进，主要通过增加一个视频格式压缩器的方式把视频压缩的工作分担出去，以达到减小对CPU资源的使用。该处理方式中用到的视频格式压缩器属于成熟产品，并不属于该处理方式的重点，视频格式压缩器主要完成对码流大小的压缩工作，压缩成什么样的格式，在实际应用中完全不受限定。

图11是根据本发明实施例四的基于虚拟桌面的视频处理方法流程图，如图11所示，该方法主要包括以下步骤（步骤S1102-步骤S1106）：

步骤S1102，虚拟桌面系统对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；

步骤S1104，虚拟桌面系统将第一图像信息和预先设定的压缩策略发送给虚拟机服务器或预置的压缩器进行压缩，其中，压缩策略能够根据网络带宽进行动态调整为不同的压缩比率；

步骤S1106，虚拟桌面系统将压缩得到的第二图像信息发送给终端进行视频播放。

在本实施例中，压缩策略包括多个不同的压缩比率，压缩比率的大小与网络带宽的大小成正比。

在本实施例中，第一图像信息包括：位于图像处理单元GPU的信息。

图12是根据本发明实施例四的基于虚拟桌面的视频处理装置的结构框图，该装置用于实现图11所示的基于虚拟桌面的视频处理方法，如图12所示，该基于虚拟桌面的视频处理装置包括：扫描模块80，用于对虚拟桌面上的视频文件进行扫描，得到描述视频文件的变化区域的第一图像信息；第一发送模块90，连接至扫描模块80，用于将第一图像信息和预先设定的压缩策略发送给虚拟机服务器或预置的压缩器进行压缩，其中，压缩策略能够根据网络带宽进行动态调整为不同的压缩比率；第二发送模块100，连接至第一发送模块90，用于将压缩得到的第二图像信息发送给终端进行视频播放。

下面结合图13对本实施例四提供的基于虚拟桌面的视频处理方法进行更进一步的描述。

图13是根据本发明优选实施例四的根据网络带宽动态调整压缩率方法的实现流程示意图，在图13中，当用户在虚拟桌面上打开媒体播放器程序（媒体播放器）打开媒体文件（视频文件）时，虚拟桌面系统首先对桌面扫描，扫描出视频文件发生变化的区域，并得到该变化区域对应的图像信息（主要是在GPU里面的信息）。虚拟桌面系统根据当时的网络实际情况（网络带宽的大小），采用不同压缩策略（分别包括不同的压缩比率，例如：如果网络带宽在100Kbps的情况下，压缩比率为1080P，如果网络带宽在10Kbps的情况下，压缩比率为480P等），需要说明的是，不同的压缩策略是可以预先在虚拟桌面系统里面配置的。虚拟桌面系统将压缩好的图像信息通过网络传输给终端。终端在接收到压缩后的图像信息之后，首先对图像信息进行解压操作后，再对图像信息进行回放。

需要说明的是，该处理方式中对视频文件的压缩可以是在虚拟机服务器中完成的，也可以是在新增的视频格式压缩器中完成的。该处理方式的重点主要是能够根据实际的网络带宽进行压缩比率的动态选取（预先设置了多种不同的压缩比率）。通过该种处理方式，用户可以实时地、顺畅地收看视频文件。该处理方式的最大优点在于：在网络带宽资源充裕的情况下，用户收看到的视频会清晰些，在网络带宽资源紧缺的情况下，用户收看到的视频会稍微模糊些，但视频文件都能够顺畅地播放，更不会发生播放视频失败的情况。

针对上述四个实施例，需要强调的是，四个实施例均能够保证视频播放的流畅，而且改造过程也非常简单实用，具有较强的实用性。

从以上的描述中，可以看出，本发明实现了如下技术效果：采用将视频文件的原始码流直接发送给终端进行播放、通过预置在虚拟服务器上的视频格式转换器对视频文件进行转换后发送给终端进行解码播放、由视频格式压缩器对视频文件变化区域的图像信息进行压缩操作后发送给终端进行解压缩播放，或者由虚拟桌面系统使用根据当前网络带宽的大小动态选择的压缩比率对视频文件变化区域的图像信息进行压缩后发送给终端进行解压缩播放的任意一种方式，解决了相关技术中虚拟服务器的性能较低或终端与虚拟服务器之间的网络带宽不足容易导致的在虚拟桌面服务器上播放高清视频失败的问题，避免或减少了对虚拟机主机的CPU资源的占用，进而达到了视频文件的顺畅播放的效果。

显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种基于虚拟桌面的视频播放方法，其特征在于，包括：

终端接收当前需要播放的视频文件的原始码流，其中，所述原始码流是由虚拟桌面系统获取后发送给所述终端的；

所述终端按照所述原始码流播放所述视频文件。

2.一种基于虚拟桌面的视频播放装置，位于终端，其特征在于，包括：

接收模块，用于接收当前需要播放的视频文件的原始码流，其中，所述原始码流是由虚拟桌面系统获取后发送给所述终端的；

播放模块，用于按照所述原始码流播放所述视频文件。

3.一种基于虚拟桌面的视频处理方法，其特征在于，包括：

虚拟桌面系统将当前需要播放的视频文件的原始码流发送给视频格式转换器进行格式转换；

所述虚拟桌面系统将转换后的码流发送给终端进行视频播放。

4.根据权利要求3所述的方法，其特征在于，在虚拟桌面系统将当前需要播放的视频文件的原始码流发送给视频格式转换器进行格式转换之前，还包括：

所述虚拟桌面系统从所述视频文件中获取所述原始码流。

5.根据权利要求3或4所述的方法，其特征在于，所述视频格式转换器预先设置在虚拟服务器上。

6.一种基于虚拟桌面的视频处理装置，其特征在于，包括：

第一发送模块，用于将当前需要播放的视频文件的原始码流发送给预先设置在虚拟服务器上的视频格式转换器进行格式转换；

第二发送模块，用于将转换后的码流发送给终端进行视频播放。

7.一种基于虚拟桌面的视频处理方法，其特征在于，包括：

虚拟桌面系统对虚拟桌面上的视频文件进行扫描，得到描述所述视频文件的变化区域的第一图像信息；

所述虚拟桌面系统将所述第一图像信息发送给格式压缩器进行压缩；

所述虚拟桌面系统将压缩得到的第二图像信息发送给终端进行视频播放。

8.根据权利要求7所述的方法，其特征在于，所述第一图像信息包括：位于图像处理单元GPU的信息。

9.一种基于虚拟桌面的视频处理装置，其特征在于，包括：

扫描模块，用于对虚拟桌面上的视频文件进行扫描，得到描述所述视频文件的变化区域的第一图像信息；

第一发送模块，用于将所述第一图像信息发送给格式压缩器进行压缩；

第二发送模块，用于将压缩得到的第二图像信息发送给终端进行视频播放。

10.根据权利要求9所述的装置，其特征在于，所述第一图像信息包括：位于图像处理单元GPU的信息。

11.一种基于虚拟桌面的视频处理方法，其特征在于，包括：

虚拟桌面系统对虚拟桌面上的视频文件进行扫描，得到描述所述视频文件的变化区域的第一图像信息；

所述虚拟桌面系统将所述第一图像信息和预先设定的压缩策略发送给虚拟机服务器或预置的压缩器进行压缩，其中，所述压缩策略能够根据网络带宽进行动态调整为不同的压缩比率；

所述虚拟桌面系统将压缩得到的第二图像信息发送给终端进行视频播放。

12.根据权利要求11所述的方法，其特征在于，所述压缩策略包括多个不同的压缩比率，所述压缩比率的大小与所述网络带宽的大小成正比。

13.根据权利要求11或12所述的方法，其特征在于，所述第一图像信息包括：位于图像处理单元GPU的信息。

14.一种基于虚拟桌面的视频处理装置，其特征在于，包括：

扫描模块，用于对虚拟桌面上的视频文件进行扫描，得到描述所述视频文件的变化区域的第一图像信息；

第一发送模块，用于将所述第一图像信息和预先设定的压缩策略发送给虚拟机服务器或预置的压缩器进行压缩，其中，所述压缩策略能够根据网络带宽进行动态调整为不同的压缩比率；

第二发送模块，用于将压缩得到的第二图像信息发送给终端进行视频播放。