CN103179431B - Vdi环境下音视频重定向转码分离方法 - Google Patents

Vdi环境下音视频重定向转码分离方法 Download PDF

Info

Publication number
CN103179431B
CN103179431B CN201310092069.7A CN201310092069A CN103179431B CN 103179431 B CN103179431 B CN 103179431B CN 201310092069 A CN201310092069 A CN 201310092069A CN 103179431 B CN103179431 B CN 103179431B
Authority
CN
China
Prior art keywords
data
client terminal
code
module
media
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310092069.7A
Other languages
English (en)
Other versions
CN103179431A (zh
Inventor
张辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian Centerm Information Co Ltd
Original Assignee
Fujian Centerm Information Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Centerm Information Co Ltd filed Critical Fujian Centerm Information Co Ltd
Priority to CN201310092069.7A priority Critical patent/CN103179431B/zh
Publication of CN103179431A publication Critical patent/CN103179431A/zh
Application granted granted Critical
Publication of CN103179431B publication Critical patent/CN103179431B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种VDI环境下音视频重定向转码分离方法,在VDI网络中建立一脱离虚拟桌面所在操作系统的数据编解码服务器,虚拟桌面服务器通过网络将客户端不可硬解的媒体数据发送至该数据编解码服务器,由该数据编解码服务器编码成客户端可硬解的媒体格式后,传送至客户端渲染播放。本发明在原有技术的基础上,通过在VDI网络中建立数据编解码服务,经网络通信将媒体数据发送至此编解码服务进行转码处理,使得对多媒体数据的解码及实时编码的操作脱离虚拟桌面所在操作系统,从而可降低多媒体播放过程中对虚拟桌面所在虚拟机CPU等资源的占用及消耗。

Description

VDI环境下音视频重定向转码分离方法
技术领域
本发明涉及一种VDI环境下音视频重定向转码分离方法。
背景技术
VDI环境下的音视频重定向技术,是通过将截获的服务器端音视频数据并重定向至客户端,然后由客户端进行解码和渲染来完成播放的。音视频重定向转码技术则是在音视频重定向技术的基础上,在服务器端将截获的音视频数据实时转码成为某种通用的编码格式,然后再将其重定向至客户端,客户端通过软件解码和硬件解码相结合的方式完成解码及渲染播放。
音视频重定向转码技术存在以下缺点:在原有实现中,数据编解码器是存在于虚拟桌面所在操作系统中的,对多媒体数据进行解码以及实时编码将会极大的消耗系统CPU及内存等计算资源。如此一来,在不改变虚拟桌面系统资源配置的情况下,用户在虚拟桌面环境下进行音视频播放时,将很难保证其他并行应用操作的流畅性。如果增加虚拟桌面系统的计算资源,将导致同一虚拟机所支持虚拟桌面数量的降低;另外,随着多媒体技术的快速发展,视频的分辨率及码流会不断增加,一味的增加资源配置,会带来成本的增加的同时,虚拟资源未必能够满足未来应用的需要。
发明内容
本发明要解决的技术问题,在于提供一种VDI环境下音视频重定向转码分离方法,降低多媒体播放过程中对虚拟桌面所在虚拟机CPU等资源的占用及消耗。
本发明是这样实现的:一种VDI环境下音视频重定向转码分离方法,在VDI网络中建立一脱离虚拟桌面所在操作系统的数据编解码服务器,虚拟桌面服务器通过网络将客户端不可硬解的媒体数据发送至该数据编解码服务器,由该数据编解码服务器编码成客户端可硬解的媒体格式后,传送至客户端渲染播放。
进一步的,所述虚拟桌面服务器提供:分离器,用于解析媒体文件,并从中分离出音、视频数据流;重定向器,对媒体数据流进行截获,对媒体数据进行处理;重定向器包括转接模块和第一通信模块,转接模块用于将截获到的媒体流数据通过网络转发至数据编解码服务器及将从数据编解码服务器接收到的媒体数据转发给客户端;
所述数据编解码服务器提供:接收模块,用于从转接模块接收媒体流数据,并送至第一解码器;第一解码器,用于对从接收模块接收到的媒体流数据进行解码,形成原始格式的媒体数据并送至编码器;编码器,用于将从第一解码器接收到的原始格式音视频数据进行实时编码压缩处理后的数据送至发送模块,编码的格式选取客户端支持的硬解码媒体格式;发送模块,负责将从编码器接收到的媒体流数据送至所述第一通信模块;
所述客户端提供:第二通信模块,负责将从第一通信模块接收到的媒体流数据送至客户端播放组件进行处理,将从播放组件返回的控制命令通过通信协议经网络传输至虚拟桌面服务器的第一通信模块;播放组件,用于调用第二解码器或者硬解码器的媒体数据进行解码并完成渲染播放,并将播放画面在虚拟桌面进行显示;第二解码器,用于被播放组件调用,实现媒体数据的软解码;硬解码器,用于被播放组件调用,实现媒体数据的硬解码。
进一步的,本发明方法具体包括如下步骤:
步骤10、用户通过客户端远程登录虚拟桌面,并进行视频播放操作;
步骤20、虚拟桌面服务器端建立播放链路,该播放链路由数据源、分离器、重定向器构成;
步骤30、开始播放时,重定向器将对截获到的视频数据进行选择性处理:若编码格式为客户端支持的硬件解码格式,则进行步骤50;否则,进入步骤40;
步骤40、数据通过转接模块送至数据编解码服务器的接收模块,经第一解码器和编码器将数据编码成客户端可硬解的媒体格式,通过发送模块送至第一通信模块,进行步骤50;
步骤50、将数据由第一通信模块通过通信协议传送至客户端;
步骤60、客户端第二通信模块接收到数据后,送至播放组件;
步骤70、播放组件调用第二解码器或者硬解码器对数据进行解码,最后进行渲染播放。
本发明具有如下优点:在原有技术的基础上,通过在VDI网络中建立数据编解码服务,经网络通信将媒体数据发送至此编解码服务进行转码处理,使得对多媒体数据的解码及实时编码的操作脱离虚拟桌面所在操作系统,降低多媒体播放过程中对虚拟桌面所在虚拟机CPU等资源的占用及消耗,在不改变原有虚拟桌面系统资源配置、不降低同一虚拟机所支持虚拟桌面数量的情况下,使其能更好的响应用户其他并行的应用操作。
附图说明
下面参照附图结合实施例对本发明作进一步的说明。
图1为本发明方法中涉及的各组成部分的系统框图。
具体实施方式
如图1所示,本发明的VDI环境下音视频重定向转码分离方法,该VDI网络的组成包括虚拟桌面服务器1和客户端2,本发明在VDI网络中建立一脱离虚拟桌面所在操作系统的数据编解码服务器3,虚拟桌面服务器1通过网络将客户端2不可硬解的媒体数据发送至该数据编解码服务器3,由该数据编解码服务器3编码成客户端2可硬解的媒体格式后,传送至客户端2渲染播放。
所述虚拟桌面服务器1提供:
分离器11,用于解析媒体文件,并从中分离出音、视频数据流;
重定向器12,对媒体数据流进行截获,对媒体数据进行处理;重定向器包括转接模块13和第一通信模块14,
转接模块13,用于将截获到的媒体流数据通过网络转发至数据编解码服务器3的接收模块31,及将从数据编解码服务器3的发送模块34接收到的媒体数据转发给客户端2;
第一通信模块14,一方面从重定向器12收到的截获的媒体数据通过通信协议经网络传输至客户端2的第二通信模块21;另一方面,将从转接模块13接收到的媒体流数据,通过通信协议经网络传输至客户端2的第二通信模块21,接收从第二通信模块21中传输的播放控制命令。
所述数据编解码服务器3提供:
接收模块31,用于从转接模块13接收媒体流数据,并送至第一解码器32;
第一解码器32,用于对从接收模块31接收到的媒体流数据进行解码,形成原始格式的媒体数据并送至编码器33;
编码器33,用于将从第一解码器32接收到的原始格式音视频数据进行实时编码压缩处理后的数据送至发送模块34,编码的格式选取客户端支持的硬解码媒体格式;
发送模块34,负责将从编码器33接收到的媒体流数据通过转接模块13送至所述第一通信模块14;
所述客户端提供:
第二通信模块21,负责将从第一通信模块14接收到的媒体流数据送至客户端2的播放组件22进行处理,将从播放组件22返回的控制命令通过通信协议经网络传输至虚拟桌面服务器1的第一通信模块14;
播放组件22,用于调用第二解码器23或者硬解码器24的媒体数据进行解码并完成渲染播放,并将播放画面在虚拟桌面进行显示;
第二解码器23,用于被播放组件22调用,实现媒体数据的软解码;
硬解码器24,用于被播放组件22调用,实现媒体数据的硬解码。
基于上述各服务器和客户端的软件模块,本发明方法具体包括如下步骤:
步骤10、用户通过客户端2远程登录虚拟桌面服务器1的虚拟桌面,并进行视频播放操作;
步骤20、虚拟桌面服务器1端建立播放链路,该播放链路由数据源、分离器11、重定向器12构成;
步骤30、开始播放时,重定向器12将对截获到的视频数据进行选择性处理:若编码格式为客户端2支持的硬件解码格式,则进行步骤50;否则,进入步骤40;
步骤40、数据通过转接模块13送至数据编解码服务器3的接收模块31,经第一解码器32和编码器33将数据编码成客户端2可硬解的媒体格式,通过发送模块34送至第一通信模块14,进行步骤50;
步骤50、将数据由第一通信模块14通过通信协议传送至客户端2;
步骤60、客户端第二通信模块21接收到数据后,送至播放组件22;
步骤70、播放组件22调用第二解码器23或者硬解码器24对数据进行解码,最后进行渲染播放。
综上所述,本发明是在原有技术的基础上,通过在VDI网络中建立数据编解码服务,经网络通信将媒体数据发送至此编解码服务进行转码处理,使得对多媒体数据的解码及实时编码的操作脱离虚拟桌面所在操作系统,降低多媒体播放过程中对虚拟桌面所在虚拟机CPU等资源的占用及消耗,在不改变原有虚拟桌面系统资源配置、不降低同一虚拟机所支持虚拟桌面数量的情况下,使其能更好的响应用户其他并行的应用操作。
虽然以上描述了本发明的具体实施方式,但是熟悉本技术领域的技术人员应当理解,我们所描述的具体的实施例只是说明性的,而不是用于对本发明的范围的限定,熟悉本领域的技术人员在依照本发明的精神所作的等效的修饰以及变化,都应当涵盖在本发明的权利要求所保护的范围内。

Claims (3)

1.一种VDI环境下音视频重定向转码分离方法,其特征在于:在VDI网络中建立一脱离虚拟桌面所在操作系统的数据编解码服务器,虚拟桌面服务器通过网络将客户端不可硬解的媒体数据发送至该数据编解码服务器,由该数据编解码服务器编码成客户端可硬解的媒体格式后,传送至客户端渲染播放。
2.根据权利要求1所述的VDI环境下音视频重定向转码分离方法,其特征在于:
所述虚拟桌面服务器提供:
分离器,用于解析媒体文件,并从中分离出音、视频数据流;
重定向器,对媒体数据流进行截获,对媒体数据进行处理;重定向器包括转接模块和第一通信模块,转接模块用于将截获到的媒体流数据通过网络转发至数据编解码服务器及将从数据编解码服务器接收到的媒体数据转发给客户端;
所述数据编解码服务器提供:
接收模块,用于从转接模块接收媒体流数据,并送至第一解码器;
第一解码器,用于对从接收模块接收到的媒体流数据进行解码,形成原始格式的媒体数据并送至编码器;
编码器,用于将从第一解码器接收到的原始格式音视频数据进行实时编码压缩处理后的数据送至发送模块,编码的格式选取客户端支持的硬解码媒体格式;
发送模块,负责将从编码器接收到的媒体流数据送至所述第一通信模块;
所述客户端提供:
第二通信模块,负责将从第一通信模块接收到的媒体流数据送至客户端播放组件进行处理,将从播放组件返回的控制命令通过通信协议经网络传输至虚拟桌面服务器的第一通信模块;
播放组件,用于调用第二解码器或者硬解码器的媒体数据进行解码并完成渲染播放,并将播放画面在虚拟桌面进行显示;
第二解码器,用于被播放组件调用,实现媒体数据的软解码;
硬解码器,用于被播放组件调用,实现媒体数据的硬解码。
3.根据权利要求2所述的VDI环境下音视频重定向转码分离方法,其特征在于:具体包括如下步骤:
步骤10、用户通过客户端远程登录虚拟桌面,并进行视频播放操作;
步骤20、虚拟桌面服务器端建立播放链路,该播放链路由数据源、分离器、重定向器构成;
步骤30、开始播放时,重定向器将对截获到的视频数据进行选择性处理:若编码格式为客户端支持的硬件解码格式,则进行步骤50;否则,进入步骤40;
步骤40、数据通过转接模块送至数据编解码服务器的接收模块,经第一解码器和编码器将数据编码成客户端可硬解的媒体格式,通过发送模块送至第一通信模块,进行步骤50;
步骤50、将数据由第一通信模块通过通信协议传送至客户端;
步骤60、客户端第二通信模块接收到数据后,送至播放组件;
步骤70、播放组件调用第二解码器或者硬解码器对数据进行解码,最后进行渲染播放。
CN201310092069.7A 2013-03-21 2013-03-21 Vdi环境下音视频重定向转码分离方法 Active CN103179431B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310092069.7A CN103179431B (zh) 2013-03-21 2013-03-21 Vdi环境下音视频重定向转码分离方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310092069.7A CN103179431B (zh) 2013-03-21 2013-03-21 Vdi环境下音视频重定向转码分离方法

Publications (2)

Publication Number Publication Date
CN103179431A CN103179431A (zh) 2013-06-26
CN103179431B true CN103179431B (zh) 2016-06-01

Family

ID=48639002

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310092069.7A Active CN103179431B (zh) 2013-03-21 2013-03-21 Vdi环境下音视频重定向转码分离方法

Country Status (1)

Country Link
CN (1) CN103179431B (zh)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103873568A (zh) * 2014-03-04 2014-06-18 赛特斯信息科技股份有限公司 基于云计算实现远程虚拟桌面显示的系统及方法
CN104038778B (zh) * 2014-05-23 2017-11-24 深信服科技股份有限公司 多媒体重定向播放的控制方法及装置
CN105208406A (zh) * 2014-06-11 2015-12-30 中兴通讯股份有限公司 视频数据提供方法、视频播放方法、装置及系统
CN105227527A (zh) * 2014-06-26 2016-01-06 中兴通讯股份有限公司 播放多媒体的方法及系统、服务器
CN104375825B (zh) * 2014-09-25 2018-06-08 福建升腾资讯有限公司 Vdi环境下桌面窗口元素的跟踪识别方法及系统
CN104281485A (zh) * 2014-09-25 2015-01-14 福建升腾资讯有限公司 Vdi环境下一体化富媒体加速方法及系统
CN106331765B (zh) * 2015-06-30 2020-06-05 腾讯科技(深圳)有限公司 一种硬解测试方法、终端、服务器和计算机可读存储介质
CN106559679B (zh) 2015-09-28 2019-10-08 腾讯科技(深圳)有限公司 视频解码的方法、服务器和移动终端
CN105611394B (zh) * 2015-12-21 2018-11-06 福建时迅信息科技有限公司 Vdi环境下的视频重定向方法及系统
CN106210036A (zh) * 2016-07-08 2016-12-07 中霆云计算科技(上海)有限公司 虚拟桌面呈现设备中的视频显示加速方法
CN108040258B (zh) * 2017-11-21 2020-05-15 北京臻迪科技股份有限公司 一种编码、解码方法、装置及系统
US10742725B2 (en) * 2018-05-04 2020-08-11 Citrix Systems, Inc. Detection and repainting of semi-transparent overlays
CN111050192A (zh) * 2018-10-12 2020-04-21 华为技术有限公司 媒体处理方法及装置
US11012485B1 (en) * 2020-01-02 2021-05-18 Microsoft Technology Licensing, Llc Multi-media redirection for media applications
CN114157919A (zh) * 2020-09-07 2022-03-08 华为云计算技术有限公司 数据处理的方法和系统、云终端、服务器和计算设备
CN112422978A (zh) * 2020-11-16 2021-02-26 浙江宇视科技有限公司 一种智能转码方法、装置、电子设备和存储介质
CN112738056B (zh) * 2020-12-24 2023-05-05 北京飞讯数码科技有限公司 编解码方法及系统
CN113327302A (zh) * 2021-05-26 2021-08-31 浙江大华技术股份有限公司 图片处理方法及装置、存储介质、电子装置
CN114286146A (zh) * 2021-12-08 2022-04-05 华特数字科技有限公司 一种基于云桌面技术的fpga音视频处理方法及系统
CN115278366B (zh) * 2022-09-28 2023-03-24 天津卓朗昆仑云软件技术有限公司 虚拟机视频流的数据处理方法、装置以及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102308560A (zh) * 2011-07-18 2012-01-04 华为技术有限公司 云计算系统中的媒体流数据的传输方法及装置
CN102695094A (zh) * 2012-05-15 2012-09-26 福建升腾资讯有限公司 Vdi环境下软硬件一体化音视频重定向的方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102547394B (zh) * 2011-12-27 2013-10-09 福建升腾资讯有限公司 Vdi环境下云接入设备通用的音视频重定向方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102308560A (zh) * 2011-07-18 2012-01-04 华为技术有限公司 云计算系统中的媒体流数据的传输方法及装置
CN102695094A (zh) * 2012-05-15 2012-09-26 福建升腾资讯有限公司 Vdi环境下软硬件一体化音视频重定向的方法

Also Published As

Publication number Publication date
CN103179431A (zh) 2013-06-26

Similar Documents

Publication Publication Date Title
CN103179431B (zh) Vdi环境下音视频重定向转码分离方法
US11063999B2 (en) Distributed fragment timestamp synchronization
EP3056014B1 (en) Method and apparatus for content delivery
CN107846633B (zh) 一种直播方法及系统
CN102695094B (zh) Vdi环境下软硬件一体化音视频重定向的方法
CN106165434A (zh) 用于将媒体数据流式传送的定向广告插入
CN1893430A (zh) 具有格式与协议转换的内容整合方法
CN105900445A (zh) Dash的稳健实况操作
CN102421033A (zh) 一种在移动终端上实现电视节目共享的方法
EP2556440A1 (en) Video content distribution
CN109618170B (zh) 基于网络编码的d2d实时视频流传输方法
CN102325181A (zh) 一种基于共享业务的音视频即时交互通信方法及系统
CN102648584A (zh) 使用前向纠错检验可用带宽的系统、方法和介质
CN102802024A (zh) 在服务器端实现的转码方法以及转码系统
CN102291399A (zh) 一种流媒体切换台
CN103826084A (zh) 一种音频编码方法
US9838463B2 (en) System and method for encoding control commands
CN110868610B (zh) 流媒体传输方法、装置、服务器及存储介质
CN1933480A (zh) 一种多媒体数据转换网关的方法
CN112073727B (zh) 转码方法、装置、电子设备及存储介质
CA3041692A1 (en) Multichannel video programming distributor stream controller
CN102436818A (zh) 一种基于能量优先的服务器端选路混音方法
WO2016107174A1 (zh) 多媒体文件数据的处理方法及系统、播放器和客户端
CN107248991B (zh) 基于视频关键帧的ip流调度系统及方法
CN113747181A (zh) 基于远程桌面的网络直播方法、直播系统及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant