CN110062286A - 一种在虚拟桌面中实现视频重定向的方法 - Google Patents

Abstract

一种在虚拟桌面中实现视频重定向的方法，基于HTTP协议将视频文件传输到客户端，通过客户端物理CPU和显卡解码、播放视频文件，视频在播放时大量调用客户端硬件资源，同时降低了虚拟机及网络资源的占用，即保证了视频播放的流畅，又能让虚拟机上的其它程序顺利运行；同时通过抓取虚拟机端窗体区域，拼接出对播放器窗口的遮罩区域，在客户端对播放器窗口进行裁切，将客户端播放器窗口与虚拟机端窗体无缝融合，不改变用户的操作习惯。

Description

一种在虚拟桌面中实现视频重定向的方法

技术领域

本发明属于桌面虚拟化技术领域，具体涉及一种在虚拟桌面中实现视频重定向的方法。

背景技术

近年来，虚拟桌面以其数据安全性，高效维护性等优势在国内越来越多的被使用，虚拟桌面通过接入协议将虚拟机的桌面推送到客户端，而视频是桌面内容重要的一部分。目前虚拟桌面对视频的处理方式一般是通过在虚拟机端先解码，通过压缩传输到客户端，客户端再解压的方式来播放的。但由于虚拟机无法使用物理GPU解码，只能使用软件来对视频解码，其占用CPU资源相当大，同时由于压缩和解压算法本身会带来大量的计算，从而对虚拟机和客户端造成了巨大的负担。但这种处理方式带来的结果却并不能令人满意，视频卡顿，丢帧，声音不同步等问题依然十分明显，虚拟机和客户度由于CPU和网络资源占用过大导致没有响应等问题也很突出。

虽然各个桌面接入协议近年来对视频部分做了大量优化，通过特定视频文件重定向及各种压缩算法，局部刷新算法，及非关键帧丢帧算法等，使上述的问题等到了部分改善，但并不能从根本上使虚拟桌面播放视频效果差这个问题得到解决。

现有的虚拟桌面中，视频的解码和播放都是在虚拟机中进行的，然后通过远程协议传输到客户端，虽然各种协议都对视频传输都做了大量的优化，但受制于虚拟机视频解码性能及网络传输延迟，其花屏和卡顿都比较明显，无法满足用户播放视频的需求。

发明内容

为了克服上述现有技术的不足，本发明的目的是提供一种在虚拟桌面中实现视频重定向的方法，基于HTTP协议将视频文件传输到客户端，通过客户端物理CPU和显卡解码、播放视频文件，视频在播放时大量调用客户端硬件资源，同时降低了虚拟机及网络资源的占用，即保证了视频播放的流畅，又能让虚拟机上的其它程序顺利运行；同时通过抓取虚拟机端窗体区域，拼接出对播放器窗口的遮罩区域，在客户端对播放器窗口进行裁切，将客户端播放器窗口与虚拟机端窗体无缝融合，不改变用户的操作习惯。

为了实现上述目的，本发明采用的技术方案是：

一种在虚拟桌面中实现视频重定向的方法，包括虚拟机端和客户端两部分，虚拟机端包括HTTP服务器、窗体消息拦截器、视频播放代理和消息服务器四个模块；客户端包括视频播放器、播放器窗体裁切程序和消息客户端三个模块，所述的HTTP服务器：通过http协议传输视频文件；

所述的窗体消息拦截器拦截虚拟机里窗体的创建、销毁、移动、改变大小等消息，并记录消息处理之后，窗体的位置和尺寸；

所述的视频播放代理关联视频文件，当用户播放视频文件时，获取视频文件的路径，并将该路径转换为HTTP服务器的URL；

所述的消息服务器作为虚拟机和客户端通讯的的服务器端；

所述的视频播放器接收视频文件URL，通过HTTP协议边下载视频文件边播放；

所述的播放器窗体裁切程序接收窗体消息拦截器发送的窗体位置和尺寸，及当前视频播放器位置和尺寸，计算播放器窗体遮罩，并裁切播放器窗体；

所述的消息客户端作为虚拟机和客户端通讯的的客户端；

其虚拟桌面中实现视频重定向的方法包括以下步骤：

1）在虚拟机中安装视频重定向组件服务端，在客户机中安装视频重定客户端；虚拟机防火墙开放9999和8080端口分别用作消息通讯和视频流下载；

2）虚拟桌面客户端连接虚拟机，虚拟机启动消息服务器和窗体拦截器，等待客户端连接；

3）虚拟桌面客户端获取虚拟机ip地址，并将虚拟机ip地址作为启动参数启动视频重定向客户端，视频重定向客户端通过ip地址连接到虚拟机里的消息服务器，建立消息连接；

4）当用户在虚拟机里播放视频文件时，视频播放代理程序获取到文件路径，并将文件路径转换为http服务器的url，通过消息服务器发送到客户端；

5）客户端收到视频播放消息后，将url作为客户端播放器启动参数启动播放器，播放器通过url对视频文件一边下载，一边播放，同时将播放器窗体永远置顶；

6）当虚拟机上的窗体发生创建、销毁、移动、改变大小等操作时，窗体消息拦截器会拦截其消息，然后获取该窗体在接收到消息后的位置、大小、是否隐藏等信息，并将这些窗体信息发送到客户端；

7）客户端维护一个虚拟机端窗体信息队列，在收到虚拟机端窗体信息时，从队列里查找该窗体旧信息，并将其删除；如果队列里没有该窗体信息，则略过这一步；

7）如果虚拟机窗体消息内容为窗体销毁，则略过这一步继续下一步；如果虚拟机窗体消息内容为窗体创建、移动、改变大小则将窗体信息添加到窗体队列的最后端；

8）客户端播放器窗体的大小、位置信息也在播放器窗体发生变化时，按照步骤7）、步骤8）步的逻辑添加到窗体队列的最后端；

9）维持窗体队列，在每次窗体队列发生改变后，将位于播放器窗体信息后队列中所有窗体信息中的位置和大小进行叠加，计算出这些窗体对播放器窗体的遮罩区域，然后按照遮罩区域对播放器窗体区域进行裁切，最终达到将播放器窗体和虚拟机窗体无缝融合的效果。

本发明的有益效果是：

1）解决了虚拟桌面播放视频卡顿的问题，由于使用客户端硬件资源对视频文件进行解码播放，视频是在客户端直接播放的，其播放效果也和本地直接播放视频无异，大大提高了用户的使用感受；

2）由于视频解码和播放的工作都在客户端完成，大大降低虚拟机的CPU消耗，可以使同一台服务器承载更多的虚拟桌面，降低了用户的成本；

3）网络上传递的是未解码的视频文件，相对于解码后的视频流，其数据量要小了很多，节省了大量的网络开销，减轻了虚拟桌面对网络的压力。

附图说明

图1为本发明的虚拟桌面视频重定向模块图。

图2为本发明的虚拟桌面视频重定向消息时序图。

图3为本发明软件图标示意图。

图4为本发明方法涉及的安装实施例图。

图5为本发明的界面图。

图6为本发明实施例效果图。

具体实施方式

以下结合附图即实施例对本发明进一下叙述。

如图1如图1、2所示，一种在虚拟桌面中实现视频重定向的方法，包括虚拟机端和客户端两部分。虚拟机端包括HTTP服务器、窗体消息拦截器、视频播放代理和消息服务器四个模块；客户端包括视频播放器、播放器窗体裁切程序和消息客户端三个模块；

所述的HTTP服务器：通过http协议传输视频文件。

所述的窗体消息拦截器：拦截虚拟机里窗体的创建、销毁、移动、改变大小等消息，并记录消息处理之后，窗体的位置和尺寸。

所述的视频播放代理：关联视频文件，当用户播放视频文件时，获取视频文件的路径，并将该路径转换为HTTP服务器的URL。

所述的消息服务器：作为虚拟机和客户端通讯的的服务器端。

所述的视频播放器：接收视频文件URL，通过HTTP协议边下载视频文件边播放。

所述的播放器窗体裁切程序：接收窗体消息拦截器发送的窗体位置和尺寸，及当前视频播放器位置和尺寸，计算播放器窗体遮罩，并裁切播放器窗体。

所述的消息客户端：作为虚拟机和客户端通讯的的客户端。

实施例

1）在虚拟机中安装视频重定向组件服务端，在客户机中安装视频重定客户端；虚拟机防火墙开放9999和8080端口分别用作消息通讯和视频流下载；

2）虚拟桌面客户端连接虚拟机，虚拟机启动消息服务器和窗体拦截器，等待客户端连接；

3）虚拟桌面客户端获取虚拟机ip地址，并将虚拟机ip地址作为启动参数启动视频重定向客户端，视频重定向客户端通过ip地址连接到虚拟机里的消息服务器，建立消息连接；

4）当用户在虚拟机里播放视频文件时，视频播放代理程序获取到文件路径，并将文件路径转换为http服务器的url，通过消息服务器发送到客户端；

5）客户端收到视频播放消息后，将url作为客户端播放器启动参数启动播放器，播放器通过url对视频文件一边下载，一边播放，同时将播放器窗体永远置顶；

6）当虚拟机上的窗体发生创建、销毁、移动、改变大小等操作时，窗体消息拦截器会拦截其消息，然后获取该窗体在接收到消息后的位置、大小、是否隐藏等信息，并将这些窗体信息发送到客户端；

7）客户端维护一个虚拟机端窗体信息队列，在收到虚拟机端窗体信息时，从队列里查找该窗体旧信息，并将其删除；如果队列里没有该窗体信息，则略过这一步；

7）如果虚拟机窗体消息内容为窗体销毁，则略过这一步继续下一步；如果虚拟机窗体消息内容为窗体创建、移动、改变大小则将窗体信息添加到窗体队列的最后端；

8）客户端播放器窗体的大小、位置信息也在播放器窗体发生变化时，按照步骤7）、步骤8）步的逻辑添加到窗体队列的最后端；

9）维持窗体队列，在每次窗体队列发生改变后，将位于播放器窗体信息后队列中所有窗体信息中的位置和大小进行叠加，计算出这些窗体对播放器窗体的遮罩区域，然后按照遮罩区域对播放器窗体区域进行裁切，最终达到将播放器窗体和虚拟机窗体无缝融合的效果。安装见图3

在虚拟机里运行AgentSetup.exe,在客户端运行ViewClientSetup.exe

配置见图4

在虚拟机防火墙配置里添加端口例外，允许外部程序访问虚拟机9000和8080端口；

启动见图5

运行ViewClient.exe,输入虚拟桌面账号并登陆，在虚拟机列表里点击要登陆的虚拟机；

使用见图6

在虚拟机中播放视频文件，自动调用客户端播放器，并与虚拟机窗体无缝融合。

Claims (1)

1.一种在虚拟桌面中实现视频重定向的方法，包括虚拟机端和客户端两部分，其特征在于，虚拟机端包括HTTP服务器、窗体消息拦截器、视频播放代理和消息服务器四个模块；客户端包括视频播放器、播放器窗体裁切程序和消息客户端三个模块，所述的窗体消息拦截器拦截虚拟机里窗体的创建、销毁、移动、改变大小等消息，并记录消息处理之后，窗体的位置和尺寸；

所述的视频播放代理关联视频文件，当用户播放视频文件时，获取视频文件的路径，并将该路径转换为HTTP服务器的URL；

所述的消息服务器作为虚拟机和客户端通讯的的服务器端；

所述的视频播放器接收视频文件URL，通过HTTP协议边下载视频文件边播放；

所述的播放器窗体裁切程序接收窗体消息拦截器发送的窗体位置和尺寸，及当前视频播放器位置和尺寸，计算播放器窗体遮罩，并裁切播放器窗体；

所述的消息客户端作为虚拟机和客户端通讯的的客户端；

其虚拟桌面中实现视频重定向的方法包括以下步骤：

1）在虚拟机中安装视频重定向组件服务端，在客户机中安装视频重定客户端；虚拟机防火墙开放9999和8080端口分别用作消息通讯和视频流下载；

2）虚拟桌面客户端连接虚拟机，虚拟机启动消息服务器和窗体拦截器，等待客户端连接；

3）虚拟桌面客户端获取虚拟机ip地址，并将虚拟机ip地址作为启动参数启动视频重定向客户端，视频重定向客户端通过ip地址连接到虚拟机里的消息服务器，建立消息连接；

4）当用户在虚拟机里播放视频文件时，视频播放代理程序获取到文件路径，并将文件路径转换为http服务器的url，通过消息服务器发送到客户端；

5）客户端收到视频播放消息后，将url作为客户端播放器启动参数启动播放器，播放器通过url对视频文件一边下载，一边播放，同时将播放器窗体永远置顶；

6）当虚拟机上的窗体发生创建、销毁、移动、改变大小等操作时，窗体消息拦截器会拦截其消息，然后获取该窗体在接收到消息后的位置、大小、是否隐藏等信息，并将这些窗体信息发送到客户端；

7）客户端维护一个虚拟机端窗体信息队列，在收到虚拟机端窗体信息时，从队列里查找该窗体旧信息，并将其删除；如果队列里没有该窗体信息，则略过这一步；

7）如果虚拟机窗体消息内容为窗体销毁，则略过这一步继续下一步；如果虚拟机窗体消息内容为窗体创建、移动、改变大小则将窗体信息添加到窗体队列的最后端；

8）客户端播放器窗体的大小、位置信息也在播放器窗体发生变化时，按照步骤7）、步骤8）步的逻辑添加到窗体队列的最后端；

9）维持窗体队列，在每次窗体队列发生改变后，将位于播放器窗体信息后队列中所有窗体信息中的位置和大小进行叠加，计算出这些窗体对播放器窗体的遮罩区域，然后按照遮罩区域对播放器窗体区域进行裁切，最终达到将播放器窗体和虚拟机窗体无缝融合的效果。