CN106936936B - 一种虚拟桌面远程通信系统 - Google Patents

一种虚拟桌面远程通信系统 Download PDF

Info

Publication number
CN106936936B
CN106936936B CN201710324613.4A CN201710324613A CN106936936B CN 106936936 B CN106936936 B CN 106936936B CN 201710324613 A CN201710324613 A CN 201710324613A CN 106936936 B CN106936936 B CN 106936936B
Authority
CN
China
Prior art keywords
data
audio
module
client
agreement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710324613.4A
Other languages
English (en)
Other versions
CN106936936A (zh
Inventor
黄孝锋
谢昆明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Yun Chao Science And Technology Ltd
Original Assignee
Zhejiang Yun Chao Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Yun Chao Science And Technology Ltd filed Critical Zhejiang Yun Chao Science And Technology Ltd
Priority to CN201710324613.4A priority Critical patent/CN106936936B/zh
Publication of CN106936936A publication Critical patent/CN106936936A/zh
Application granted granted Critical
Publication of CN106936936B publication Critical patent/CN106936936B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/08Protocols specially adapted for terminal emulation, e.g. Telnet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00Network architectures or network communication protocols for network security
    • H04L63/04Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer And Data Communications (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种虚拟桌面远程通信系统,包括客户端、服务端,客户端与服务端互相发送数据流,客户端的数据流程:用户登录请求发送给客户端登录界面,然后发送格式化登录请求数据给客户端主逻辑,然后封装成协议请求数据后发送给加密通信模块,然后将协议请求数据加密后发送协议请求数据流给服务端,服务端向客户端发送协议响应数据流,加密通信模块将协议响应数据流解密出协议响应数据后发送给客户端主逻辑,客户端主逻辑根据协议响应数据的种类向客户端相应的模块发送指令,然后模块响应指令,本发明可以有效地降低在虚拟桌面办公传输的数据量,降低带宽,满足公有云的低带宽要求。

Description

一种虚拟桌面远程通信系统
技术领域
本发明涉及一种虚拟桌面远程通信系统。
背景技术
传统的PC桌面是硬件、软件紧密结合在一起的,用户只能在固定场所办公,无法移动办公,无法随时随地访问桌面。传统PC在信息安全,PC维护、灾备等方面也存在不足。
桌面云,通过IAAS架构和桌面虚拟化技术,可以将用户的桌面搭建在IAAS架构上,通过桌面虚拟化的虚拟桌面远程通信协议,将构建在IAAS架构上的桌面分发给最终用户。基于桌面虚拟化技术,用户使用终端设备上的虚拟桌面远程通信协议客户端通过网络就可以随时随地访问虚拟桌面,用户使用终端设备包括PC、笔记本,平板电脑、智能手机、瘦终端等。
使用虚拟桌面办公,在浏览网页,播放视频等情况下,现有的虚拟桌面远程通信协议传输大量数据,图像数据占比最大。虽然可以对图像数据进行压缩后传输,但是传输的数据量仍旧很大,占用高带宽,无法在低带宽的环境下使用,也就无法满足公有云的要求。
在桌面虚拟化领域,目前主流的虚拟桌面远程通信协议包括微软的RDP协议,VMware的PCoIP协议等等。RDP协议和PCoIP协议都需要传输大量数据,占用高带宽,无法满足高带宽要求因而卡顿,不适合公网环境下使用。
发明内容
本发明的目的是克服现有产品中的不足,提供一种虚拟桌面远程通信系统。
为了达到上述目的,本发明是通过以下技术方案实现的:
一种虚拟桌面远程通信系统,包括客户端、服务端,所述客户端与服务端互相发送数据流,
所述客户端的数据流程如下:
S11:用户登录请求发送给客户端登录界面;
S12:客户端登录界面发送格式化登录请求数据给客户端主逻辑;
S13:客户端主逻辑将格式化登录请求数据封装成协议请求数据后发送给加密通信模块;
S14:加密通信模块将协议请求数据加密后发送协议请求数据流给服务端;
S15:服务端向客户端发送协议响应数据流;
S16:加密通信模块将协议响应数据流解密出协议响应数据后发送给客户端主逻辑;
S17:客户端主逻辑根据协议响应数据的种类向客户端相应的模块发送指令,然后模块响应指令;
所述服务端的数据流程如下:
S21:服务端将接收到客户端的协议请求数据流发送给加密通信模块,加密通信模块将协议请求数据流解密出协议请求数据;
S22:若协议请求数据是第一次,则通过路径A发送协议响应数据给加密通信模块,同时此时协议Agent模块处于工作状态,然后协议Agent模块发送音频驱动工作请求给虚拟音频驱动且发送显示驱动工作请求给虚拟显示驱动,使得虚拟音频驱动和虚拟显示驱动都处于工作状态,与此同时加密通信模块将协议响应数据进行加密后向客户端发送协议响应数据流;若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,协议Agent模块根据协议请求数据的种类判断是向操作系统发送协议请求数据或是通过操作系统反馈协议响应数据给协议Agent模块,协议Agent模块通过加密通信模块发送协议响应数据流给客户端或是协议Agent模块发送显示驱动停止请求给虚拟显示驱动且发送音频驱动停止请求给音频显示驱动,使得虚拟显示驱动停止工作和虚拟音频驱动停止工作,同时协议Agent模块停止工作。
所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为音频录制数据,则向操作系统发送音频录制数据,所述向操作系统发送音频录制数据的流程为:协议Agent模块向虚拟音频驱动发送音频录制数据,然后虚拟音频驱动向操作系统发送音频录制数据。
所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为键盘输入数据或鼠标输入数据,则通过操作系统反馈协议响应数据发送给客户端。
若协议请求数据为键盘输入数据,则通过操作系统反馈协议响应数据发送给客户端,通过操作系统反馈协议响应数据发送协议响应数据流给客户端的流程为:协议Agent模块向虚拟键盘驱动发送键盘输入数据,然后虚拟键盘驱动向操作系统发送键盘输入数据,然后操作系统反馈虚拟桌面原始更新数据或者虚拟桌面原始音频播放数据,
若操作系统反馈虚拟桌面原始更新数据,然后操作系统反馈虚拟桌面原始更新数据给虚拟显示驱动,然后虚拟显示驱动将虚拟桌面原始更新数据发送给图形优化模块,然后图形优化模块发送视频流或者图形流给协议Agent模块,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端;
若操作系统反馈虚拟桌面原始音频播放数据,然后操作系统反馈虚拟桌面原始音频播放数据给虚拟音频驱动,虚拟音频驱动将虚拟桌面原始音频播放数据发送给音频优化模块,音频优化模块向协议Agent模块发送音频流,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端。
若协议请求数据为鼠标输入数据,则通过操作系统反馈协议响应数据发送给客户端,通过操作系统反馈协议响应数据发送协议响应数据流给客户端的流程为:协议Agent模块向虚拟鼠标驱动发送鼠标输入数据,然后虚拟鼠标驱动向操作系统发送鼠标输入数据,然后操作系统反馈虚拟桌面原始更新数据或者虚拟桌面原始音频播放数据,
若操作系统反馈虚拟桌面原始更新数据,然后操作系统反馈虚拟桌面原始更新数据给虚拟显示驱动,然后虚拟显示驱动将虚拟桌面原始更新数据发送给图形优化模块,然后图形优化模块发送视频流或者图形流给协议Agent模块,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端;
若操作系统反馈虚拟桌面原始音频播放数据,然后操作系统反馈虚拟桌面原始音频播放数据给虚拟音频驱动,虚拟音频驱动将虚拟桌面原始音频播放数据发送给音频优化模块,音频优化模块向协议Agent模块发送音频流,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端。
所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为用户断开请求数据,则协议Agent模块发送显示驱动停止请求给虚拟显示驱动且发送音频驱动停止请求给音频显示驱动,使得虚拟显示驱动停止工作和虚拟音频驱动停止工作,同时协议Agent模块停止工作。
所述路径A的流程如下:
S31:协议请求数据发送给协议服务模块;
S32:协议服务模块发送会话控制请求给协议Agent模块,使得协议Agent模块处于工作状态;
S33:协议Agent模块处理后向协议服务模块发送会话响应请求;
S34:协议服务模块发送协议响应数据给加密通信模块。
若协议响应数据的种类为音频流,则客户端主逻辑向音频优化模块发送音频流,然后音频优化模块向客户端音频模块发送虚拟桌面原始音频播放数据,然后客户端音频模块向音频设备发送播放音频;若协议响应数据的种类为视频流或图形流,则客户端主逻辑向图形优化模块发送视频流或图形流,然后图形优化模块向客户端显示模块发送虚拟桌面更新数据,然后客户端显示模块向客户端虚拟桌面显示界面发送虚拟桌面显示数据。
所述请求为键盘输入数据或鼠标输入数据或用户断开请求数据或音频录制数据或显示驱动停止请求数据或显示驱动工作请求数据或音频驱动工作请求或音频驱动停止请求。
本发明的有益效果如下:本发明服务端通过虚拟驱动从操作系统获取最原始的数据,服务端的虚拟显示驱动模块将虚拟桌面原始更新数据发送给图形优化模块,经过图形优化模块处理生成视频流或图形流,大大减少了虚拟桌面原始更新数据的发送量。服务端的虚拟音频驱动模块将虚拟桌面原始音频播放数据发送给音频优化模块,经过音频优化模块处理生成音频流,也大大减少了虚拟桌面原始音频播放数据的发送量。基于以上方法,也就可以有效地降低在虚拟桌面办公传输的数据量,降低带宽,满足公有云的低带宽要求。
附图说明
图1为客户端的数据流程图;
图2为服务端的数据流程图。
具体实施方式
下面结合说明书附图对本发明的技术方案作进一步说明:
图2中的操作系统为同一个操作系统。
如图1、图2所示,一种虚拟桌面远程通信系统,包括客户端、服务端,所述客户端与服务端互相发送数据流,
所述客户端的数据流程如下:
S11:用户登录请求发送给客户端登录界面;
S12:客户端登录界面发送格式化登录请求数据给客户端主逻辑;
S13:客户端主逻辑将格式化登录请求数据封装成协议请求数据后发送给加密通信模块;
S14:加密通信模块将协议请求数据加密后发送协议请求数据流给服务端;
S15:服务端向客户端发送协议响应数据流;
S16:加密通信模块将协议响应数据流解密出协议响应数据后发送给客户端主逻辑;
S17:客户端主逻辑根据协议响应数据的种类向客户端相应的模块发送指令,然后模块响应指令;
所述服务端的数据流程如下:
S21:服务端将接收到客户端的协议请求数据流发送给加密通信模块,加密通信模块将协议请求数据流解密出协议请求数据;
S22:若协议请求数据是第一次,则通过路径A发送协议响应数据给加密通信模块,同时此时协议Agent模块处于工作状态,然后协议Agent模块发送音频驱动工作请求给虚拟音频驱动且发送显示驱动工作请求给虚拟显示驱动,使得虚拟音频驱动和虚拟显示驱动都处于工作状态,与此同时加密通信模块将协议响应数据进行加密后向客户端发送协议响应数据流;若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,协议Agent模块根据协议请求数据的种类判断是向操作系统发送协议请求数据或是通过操作系统反馈协议响应数据给协议Agent模块,协议Agent模块通过加密通信模块发送协议响应数据流给客户端或是协议Agent模块发送显示驱动停止请求给虚拟显示驱动且发送音频驱动停止请求给音频显示驱动,使得虚拟显示驱动停止工作和虚拟音频驱动停止工作,同时协议Agent模块停止工作。
所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为音频录制数据,则向操作系统发送音频录制数据,所述向操作系统发送音频录制数据的流程为:协议Agent模块向虚拟音频驱动发送音频录制数据,然后虚拟音频驱动向操作系统发送音频录制数据。
所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为键盘输入数据或鼠标输入数据,则通过操作系统反馈协议响应数据发送给客户端。
若协议请求数据为键盘输入数据,则通过操作系统反馈协议响应数据发送给客户端,通过操作系统反馈协议响应数据发送协议响应数据流给客户端的流程为:协议Agent模块向虚拟键盘驱动发送键盘输入数据,然后虚拟键盘驱动向操作系统发送键盘输入数据,然后操作系统反馈虚拟桌面原始更新数据或者虚拟桌面原始音频播放数据,
若操作系统反馈虚拟桌面原始更新数据,然后操作系统反馈虚拟桌面原始更新数据给虚拟显示驱动,然后虚拟显示驱动将虚拟桌面原始更新数据发送给图形优化模块,然后图形优化模块发送视频流或者图形流给协议Agent模块,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端;
若操作系统反馈虚拟桌面原始音频播放数据,然后操作系统反馈虚拟桌面原始音频播放数据给虚拟音频驱动,虚拟音频驱动将虚拟桌面原始音频播放数据发送给音频优化模块,音频优化模块向协议Agent模块发送音频流,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端。
若协议请求数据为鼠标输入数据,则通过操作系统反馈协议响应数据发送给客户端,通过操作系统反馈协议响应数据发送协议响应数据流给客户端的流程为:协议Agent模块向虚拟鼠标驱动发送鼠标输入数据,然后虚拟鼠标驱动向操作系统发送鼠标输入数据,然后操作系统反馈虚拟桌面原始更新数据或者虚拟桌面原始音频播放数据,
若操作系统反馈虚拟桌面原始更新数据,然后操作系统反馈虚拟桌面原始更新数据给虚拟显示驱动,然后虚拟显示驱动将虚拟桌面原始更新数据发送给图形优化模块,然后图形优化模块发送视频流或者图形流给协议Agent模块,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端;
若操作系统反馈虚拟桌面原始音频播放数据,然后操作系统反馈虚拟桌面原始音频播放数据给虚拟音频驱动,虚拟音频驱动将虚拟桌面原始音频播放数据发送给音频优化模块,音频优化模块向协议Agent模块发送音频流,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端。
所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为用户断开请求数据,则协议Agent模块发送显示驱动停止请求给虚拟显示驱动且发送音频驱动停止请求给音频显示驱动,使得虚拟显示驱动停止工作和虚拟音频驱动停止工作,同时协议Agent模块停止工作。
所述路径A的流程如下:
S31:协议请求数据发送给协议服务模块;
S32:协议服务模块发送会话控制请求给协议Agent模块,使得协议Agent模块处于工作状态;
S33:协议Agent模块处理后向协议服务模块发送会话响应请求;
S34:协议服务模块发送协议响应数据给加密通信模块。
若协议响应数据的种类为音频流,则客户端主逻辑向音频优化模块发送音频流,然后音频优化模块向客户端音频模块发送虚拟桌面原始音频播放数据,然后客户端音频模块向音频设备发送播放音频;若协议响应数据的种类为视频流或图形流,则客户端主逻辑向图形优化模块发送视频流或图形流,然后图形优化模块向客户端显示模块发送虚拟桌面更新数据,然后客户端显示模块向客户端虚拟桌面显示界面发送虚拟桌面显示数据。
所述请求为键盘输入数据或鼠标输入数据或用户断开请求数据或音频录制数据或显示驱动停止请求数据或显示驱动工作请求数据或音频驱动工作请求或音频驱动停止请求。
协议Agent模块发送音频驱动工作请求给虚拟音频驱动且发送显示驱动工作请求给虚拟显示驱动,这样虚拟音频驱动和虚拟显示驱动就处于工作状态,而虚拟键盘驱动和虚拟鼠标驱动不需要收到请求就一直在工作状态。
客户端中的图形优化模块的说明:
图像优化模块对视频流或图形流进行处理,如果是视频流,则通过H264解码,生成虚拟桌面更新数据;如果是图形流,针对不同类型的数据进行处理如果是文字更新数据及对应的缓存id,则记录缓存id,并将文字更新数据缓存到本地,通过图像压缩算法解压文字更新数据,生成虚拟桌面更新数据;如果是文字更新数据缓存id,则取出缓存在本地的文字更新数据,通过图像压缩算法解压文字更新数据,生成虚拟桌面更新数据;如果是新的图像更新数据及对应的特征值,则记录特征值,并将新的图像更新数据缓存到本地,通过图像压缩算法解压新的图像更新数据,生成虚拟桌面更新数据;如果是新的图像更新数据特征值,则取出缓存在本地的新的图像更新数据,通过图像压缩算法解压新的图像更新数据,生成虚拟桌面更新数据。
客户端中的音频优化模块,如果是音频流,则发送给音频优化模块处理。音频优化模块解码解压,生成虚拟桌面原始音频播放数据,发送给客户端音频模块。
服务端中的图形优化模块的说明:
虚拟桌面原始更新数据经过图形优化模块,该模块对数据进行分析并识别为视频流或图形流,并进行相应的处理。如果是视频流,则对数据进行H264编码,如果是图形流,图形数据分为文字更新数据和图像更新数据。如果是文字更新数据,则对文字更新数据编码生成缓存id,发送文字更新数据和缓存id,客户端接收到缓存id后,会将该文字更新数据缓存到客户端本地;当命中缓存id,则只发送缓存id,不发送文字更新数据。如果是图像更新数据,首先通过图像合并裁剪算法,将更新相同区域的图像更新数据进行合并或裁剪。然后,通过图像分割算法对图像更新数据进行处理,产生新的图像更新数据。对所有新的图像更新数据提取特征值,发送新的图像更新数据及对应的特征值。客户端接收到特征值,会将该新的图像更新数据缓存到客户端本地。当命中特征值,则只发送特征值,不发送新的图像更新数据。最后,通过图像压缩算法,对所有的图像更新数据压缩。
虚拟桌面原始音频播放数据经过音频优化模块后,该模块会对音频数据进行编码压缩,形成音频流,发送到客户端。
服务端通过虚拟驱动从操作系统获取最原始的数据,服务端的虚拟显示驱动模块将虚拟桌面原始更新数据发送给图形优化模块,经过图形优化模块处理生成视频流或图形流,大大减少了虚拟桌面原始更新数据的发送量。服务端的虚拟音频驱动模块将虚拟桌面原始音频播放数据发送给音频优化模块,经过音频优化模块处理生成音频流,也大大减少了虚拟桌面原始音频播放数据的发送量。基于以上方法,也就可以有效地降低在虚拟桌面办公传输的数据量,降低带宽,满足公有云的低带宽要求。
需要注意的是,以上列举的仅是本发明的一种具体实施例。显然,本发明不限于以上实施例,还可以有许多变形。总之,本领域的普通技术人员能从本发明公开的内容直接导出或联想到的所有变形,均应认为是本发明的保护范围。

Claims (9)

1.一种虚拟桌面远程通信系统,其特征在于,包括客户端、服务端,所述客户端与服务端互相发送数据流,
所述客户端的数据流程如下:
S11:用户登录请求发送给客户端登录界面;
S12:客户端登录界面发送格式化登录请求数据给客户端主逻辑;
S13:客户端主逻辑将格式化登录请求数据封装成协议请求数据后发送给加密通信模块;
S14:加密通信模块将协议请求数据加密后发送协议请求数据流给服务端;
S15:服务端向客户端发送协议响应数据流;服务端通过虚拟驱动从操作系统获取最原始的数据,服务端的虚拟显示驱动模块将虚拟桌面原始更新数据发送给图形优化模块,经过图形优化模块处理生成视频流或图形流;服务端的虚拟音频驱动模块将虚拟桌面原始音频播放数据发送给音频优化模块,经过音频优化模块处理生成音频流;
S16:加密通信模块将协议响应数据流解密出协议响应数据后发送给客户端主逻辑;
S17:客户端主逻辑根据协议响应数据的种类向客户端相应的模块发送指令,然后模块响应指令;若协议响应数据的种类为音频流,则客户端主逻辑向音频优化模块发送音频流,然后音频优化模块向客户端音频模块发送虚拟桌面原始音频播放数据,然后客户端音频模块向音频设备发送播放音频;若协议响应数据的种类为视频流或图形流,则客户端主逻辑向图形优化模块发送视频流或图形流,然后图形优化模块向客户端显示模块发送虚拟桌面更新数据,然后客户端显示模块向客户端虚拟桌面显示界面发送虚拟桌面显示数据;
所述服务端的数据流程如下:
S21:服务端将接收到客户端的协议请求数据流发送给加密通信模块,加密通信模块将协议请求数据流解密出协议请求数据;
S22:若协议请求数据是第一次,则通过路径A发送协议响应数据给加密通信模块,同时此时协议Agent模块处于工作状态,然后协议Agent模块发送音频驱动工作请求给虚拟音频驱动且发送显示驱动工作请求给虚拟显示驱动,使得虚拟音频驱动和虚拟显示驱动都处于工作状态,与此同时加密通信模块将协议响应数据进行加密后向客户端发送协议响应数据流;若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,协议Agent模块根据协议请求数据的种类判断是向操作系统发送协议请求数据或是通过操作系统反馈协议响应数据给协议Agent模块,协议Agent模块通过加密通信模块发送协议响应数据流给客户端或是协议Agent模块发送显示驱动停止请求给虚拟显示驱动且发送音频驱动停止请求给音频显示驱动,使得虚拟显示驱动停止工作和虚拟音频驱动停止工作,同时协议Agent模块停止工作。
2.根据权利要求1所述一种虚拟桌面远程通信系统,其特征在于,所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为音频录制数据,则向操作系统发送音频录制数据,所述向操作系统发送音频录制数据的流程为:协议Agent模块向虚拟音频驱动发送音频录制数据,然后虚拟音频驱动向操作系统发送音频录制数据。
3.根据权利要求1所述一种虚拟桌面远程通信系统,其特征在于,所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为键盘输入数据或鼠标输入数据,则通过操作系统反馈协议响应数据发送给客户端。
4.根据权利要求3所述一种虚拟桌面远程通信系统,其特征在于,若协议请求数据为键盘输入数据,则通过操作系统反馈协议响应数据发送给客户端,通过操作系统反馈协议响应数据发送协议响应数据流给客户端的流程为:协议Agent模块向虚拟键盘驱动发送键盘输入数据,然后虚拟键盘驱动向操作系统发送键盘输入数据,然后操作系统反馈虚拟桌面原始更新数据或者虚拟桌面原始音频播放数据,
若操作系统反馈虚拟桌面原始更新数据,然后操作系统反馈虚拟桌面原始更新数据给虚拟显示驱动,然后虚拟显示驱动将虚拟桌面原始更新数据发送给图形优化模块,然后图形优化模块发送视频流或者图形流给协议Agent模块,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端;
若操作系统反馈虚拟桌面原始音频播放数据,然后操作系统反馈虚拟桌面原始音频播放数据给虚拟音频驱动,虚拟音频驱动将虚拟桌面原始音频播放数据发送给音频优化模块,音频优化模块向协议Agent模块发送音频流,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端。
5.根据权利要求3所述一种虚拟桌面远程通信系统,其特征在于,若协议请求数据为鼠标输入数据,则通过操作系统反馈协议响应数据发送给客户端,通过操作系统反馈协议响应数据发送协议响应数据流给客户端的流程为:协议Agent模块向虚拟鼠标驱动发送鼠标输入数据,然后虚拟鼠标驱动向操作系统发送鼠标输入数据,然后操作系统反馈虚拟桌面原始更新数据或者虚拟桌面原始音频播放数据,
若操作系统反馈虚拟桌面原始更新数据,然后操作系统反馈虚拟桌面原始更新数据给虚拟显示驱动,然后虚拟显示驱动将虚拟桌面原始更新数据发送给图形优化模块,然后图形优化模块发送视频流或者图形流给协议Agent模块,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端;
若操作系统反馈虚拟桌面原始音频播放数据,然后操作系统反馈虚拟桌面原始音频播放数据给虚拟音频驱动,虚拟音频驱动将虚拟桌面原始音频播放数据发送给音频优化模块,音频优化模块向协议Agent模块发送音频流,然后协议Agent模块将协议响应数据发送给加密通信模块,然后加密通信模块将协议响应数据加密后发送协议请求数据流给客户端。
6.根据权利要求1所述一种虚拟桌面远程通信系统,其特征在于,所述步骤S22中:若协议请求数据不是第一次则协议Agent模块接收到协议请求数据,若协议请求数据为用户断开请求数据,则协议Agent模块发送显示驱动停止请求给虚拟显示驱动且发送音频驱动停止请求给音频显示驱动,使得虚拟显示驱动停止工作和虚拟音频驱动停止工作,同时协议Agent模块停止工作。
7.根据权利要求1所述一种虚拟桌面远程通信系统,其特征在于,所述路径A的流程如下:
S31:协议请求数据发送给协议服务模块;
S32:协议服务模块发送会话控制请求给协议Agent模块,使得协议Agent模块处于工作状态;
S33:协议Agent模块处理后向协议服务模块发送会话响应请求;
S34:协议服务模块发送协议响应数据给加密通信模块。
8.根据权利要求1所述一种虚拟桌面远程通信系统,其特征在于,所述步骤S17中:若协议响应数据的种类为音频流,则客户端主逻辑向音频优化模块发送音频流,然后音频优化模块向客户端音频模块发送虚拟桌面原始音频播放数据,然后客户端音频模块向音频设备发送播放音频;若协议响应数据的种类为视频流或图形流,则客户端主逻辑向图形优化模块发送视频流或图形流,然后图形优化模块向客户端显示模块发送虚拟桌面更新数据,然后客户端显示模块向客户端虚拟桌面显示界面发送虚拟桌面显示数据。
9.根据权利要求1所述一种虚拟桌面远程通信系统,其特征在于,所述用户登录请求为键盘输入数据或鼠标输入数据或用户断开请求数据或音频录制数据或显示驱动停止请求数据或显示驱动工作请求数据或音频驱动工作请求或音频驱动停止请求。
CN201710324613.4A 2017-05-10 2017-05-10 一种虚拟桌面远程通信系统 Active CN106936936B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710324613.4A CN106936936B (zh) 2017-05-10 2017-05-10 一种虚拟桌面远程通信系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710324613.4A CN106936936B (zh) 2017-05-10 2017-05-10 一种虚拟桌面远程通信系统

Publications (2)

Publication Number Publication Date
CN106936936A CN106936936A (zh) 2017-07-07
CN106936936B true CN106936936B (zh) 2019-12-03

Family

ID=59429993

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710324613.4A Active CN106936936B (zh) 2017-05-10 2017-05-10 一种虚拟桌面远程通信系统

Country Status (1)

Country Link
CN (1) CN106936936B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113849251B (zh) * 2020-06-28 2024-10-18 中兴通讯股份有限公司 虚拟云桌面监测方法、客户端、服务端和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102215265A (zh) * 2011-06-14 2011-10-12 杭州思福迪信息技术有限公司 实现远程虚拟桌面访问统一管理和监控的系统及方法
CN102937911A (zh) * 2011-08-16 2013-02-20 中兴通讯股份有限公司 虚拟机资源的管理方法及系统
CN103348655A (zh) * 2011-11-29 2013-10-09 华为技术有限公司 一种虚拟桌面场景下音频压缩算法选择方法、装置及通信系统
CN106101794A (zh) * 2016-06-22 2016-11-09 杭州华三通信技术有限公司 一种虚拟桌面视频数据的处理方法、装置及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9542080B2 (en) * 2012-04-25 2017-01-10 Vmware, Inc. User interface virtualization of context menus

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102215265A (zh) * 2011-06-14 2011-10-12 杭州思福迪信息技术有限公司 实现远程虚拟桌面访问统一管理和监控的系统及方法
CN102937911A (zh) * 2011-08-16 2013-02-20 中兴通讯股份有限公司 虚拟机资源的管理方法及系统
CN103348655A (zh) * 2011-11-29 2013-10-09 华为技术有限公司 一种虚拟桌面场景下音频压缩算法选择方法、装置及通信系统
CN106101794A (zh) * 2016-06-22 2016-11-09 杭州华三通信技术有限公司 一种虚拟桌面视频数据的处理方法、装置及系统

Also Published As

Publication number Publication date
CN106936936A (zh) 2017-07-07

Similar Documents

Publication Publication Date Title
US9510048B2 (en) Dynamically changing streaming video quality
US20060184614A1 (en) Thin-client network computing method and system
US8677022B2 (en) Method and apparatus for updating a graphical display in a distributed processing environment using compression
DE112018000226T5 (de) Mobiles Cloud-Computing-Endgerät und Betriebsverfahren dafür
CN107145340B (zh) 虚拟桌面图像传输方法及装置
US20040181577A1 (en) System and method for facilitating real-time collaboration
US20040181796A1 (en) Real-time collaboration client
US20100111410A1 (en) Remote computing platforms providing high-fidelity display and interactivity for clients
US10645391B2 (en) Graphical instruction data processing method and apparatus, and system
KR20070120108A (ko) 분산 프로세싱 환경에서 그래픽 디스플레이를 갱신하는방법 및 장치
CN102741830A (zh) 用于多媒体流的客户机侧远程呈现的系统和方法
WO2019228207A1 (zh) 一种图像编码、解码方法、相关装置及存储介质
JP2005057771A (ja) シンクライアント方式を改善したホームメディアゲートウェイのマルチメディアデータ処理装置及びその方法
US20180307508A1 (en) Implementing web browser in virtual machine
KR20120058227A (ko) 프리젠테이션 가상화를 위한 화면 부호화 방법 및 서버
CN115190345B (zh) 用于显示媒体的协调控制方法、客户端设备及存储介质
CN110891084A (zh) 一种基于自主hvdp协议的瘦客户端远程桌面控制系统
CN102664939A (zh) 一种屏幕镜像移动终端的方法及设备
CN106936936B (zh) 一种虚拟桌面远程通信系统
CN106210865A (zh) 一种基于远程桌面呈现协议的视频重定向方法及系统
CN113766146B (zh) 音视频处理方法、装置、电子设备及存储介质
CN113709493A (zh) 一种kvm系统的视频流数据加密装置、方法及设备
CN117370696A (zh) 小程序页面的加载方法、装置、电子设备及存储介质
CN115052043B (zh) 一种云桌面的视频传输方法、电子设备、装置及介质
CN114827692A (zh) 一种基于智能电视操作云桌面的系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant