CN104301687B - 应用于虚拟桌面环境的摄像头视频处理方法和相应设备 - Google Patents
应用于虚拟桌面环境的摄像头视频处理方法和相应设备 Download PDFInfo
- Publication number
- CN104301687B CN104301687B CN201410585043.0A CN201410585043A CN104301687B CN 104301687 B CN104301687 B CN 104301687B CN 201410585043 A CN201410585043 A CN 201410585043A CN 104301687 B CN104301687 B CN 104301687B
- Authority
- CN
- China
- Prior art keywords
- video
- client computer
- camera
- virtual machine
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 11
- 230000002093 peripheral effect Effects 0.000 claims abstract description 41
- 238000004891 communication Methods 0.000 claims abstract description 21
- 238000013507 mapping Methods 0.000 claims abstract description 16
- 230000002452 interceptive effect Effects 0.000 claims abstract description 14
- 230000005540 biological transmission Effects 0.000 claims description 20
- 238000012545 processing Methods 0.000 claims description 20
- 230000006837 decompression Effects 0.000 claims description 14
- 238000000034 method Methods 0.000 claims description 12
- 230000000977 initiatory effect Effects 0.000 claims description 6
- 230000003362 replicative effect Effects 0.000 claims description 6
- 230000006835 compression Effects 0.000 claims description 5
- 238000007906 compression Methods 0.000 claims description 5
- 239000011800 void material Substances 0.000 claims 2
- 230000006870 function Effects 0.000 description 47
- 238000010586 diagram Methods 0.000 description 5
- 230000007246 mechanism Effects 0.000 description 2
- 238000012163 sequencing technique Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000002592 echocardiography Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Landscapes
- Computer And Data Communications (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
一种应用于虚拟桌面环境的摄像头视频处理方法和相应设备,客户机通过视频业务专用通道接收虚拟机发送的启动摄像头视频业务的指令及窗口信息,摄像头视频业务具有回显功能;客户机根据指令启动摄像头,接收本地摄像头采集的视频数据,生成未经压缩的视频流;客户机根据窗口信息和未经压缩的视频流生成显示数据并在显示器进行回显;其中,视频业务专用通道是客户机与虚拟机之间交互摄像头视频业务数据且独立于外设映射通道的通信通道。虚拟机则通过视频业务专用通道向客户机发送启动摄像头视频业务的指令及窗口信息,在摄像头视频业务具有回显功能时,屏蔽回显功能。本发明可避免大量的回路流量,使视频业务可以正常开展。
Description
技术领域
本发明涉及视频压缩,更具体地,涉及一种应用于虚拟桌面系统的摄像头视频处理方法及相应的客户机和虚拟机。
背景技术
桌面虚拟化是在物理服务器上安装虚拟主机系统,由虚拟主机系统模拟出操作系统运行所需要的硬件资源,如:CPU、内存、网卡、存储等。操作系统运行在这些虚拟的硬件资源之上,可以达到多个操作系统共享物理服务器的硬件资源,从而提高资源利用率。桌面虚拟化将所有桌面虚拟机(简称为虚拟机)在数据中心进行托管并统一管理,虚拟桌面的存储、运算和执行(包括操作系统、应用程序和用户数据)都集中在数据中心,仅将操作系统桌面呈现在用户面前。用户可以通过客户机在局域网或者远程访问虚拟机,获得与传统PC一致的用户体验。
虚拟桌面环境的逻辑架构如图1所示,包括通过网络连接的多台客户机10和物理服务器2,物理服务器2上运行有多台虚拟机20,客户机与虚拟机之间通过外设映射通道相互通信。
如图2所示,客户机10上连接各种外设,如摄像头、显示器、打印机、扫描仪、U盘等,它们是通过并口、串口、USB等接口连接到客户机10,客户机10的操作系统模块101安装有相应的外设驱动程序。为了在虚拟机20中同样使用这些外设,需在客户机10的操作系统模块101上安装虚拟桌面客户机侧的外设映射接口102。客户机10所连接的外设的硬件信息、状态以及从外设中读取的数据均通过该外设映射接口102发送到虚拟机20。
相应地,如图3所示,虚拟机20的操作系统模块201上安装有虚拟桌面服务器侧的外设映射接口202,该外设映射接口202与虚拟桌面客户机侧的外设映射接口102之间构成了外设映射通道。客户机10发送的外设硬件信息、状态以及从外设中读取的数据通过外设映射通道发送给虚拟机20,同时虚拟机对外设的写入数据及控制信息也通过外设映射通道发送给客户机10。客户机10收到后对外设进行数据写入或控制。其中,客户机10所需的屏幕显示数据由虚拟机20的屏幕显示数据生成模块203根据虚拟机20的操作系统模块201及各种应用程序模块(包括摄像头视频应用模块205)生成的显示数据统一生成,生成屏幕显示数据时可以调用视频压缩解压模块204对视频流进行压缩和/或解压缩。
摄像头视频业务是一种很常见的业务类型,用户进行摄像时或者用户之间通过视频通话时都需要启动摄像头视频业务。摄像头视频业务可能涉及到以下功能中的一种或多种:回显功能,即将终端本地连接的摄像头采集的视频直接在本地显示;向通信对端传送视频功能,即将终端本地连接的摄像头采集的视频传送到通信对端;显示通信对端视频功能,即将通信对端传送过来的视频在本地显示。
在传统的虚拟桌面环境下开展摄像头视频业务时,涉及的设备的连接关系如图4所示,摄像头通过USB线或其他连接线与客户机10连接,而客户机10与虚拟机20之间,及虚拟机20和通信对端之间一般是通过IP网络通信。由于虚拟桌面的存储、运算和执行等处理都集中在虚拟机侧,摄像头视频业务涉及的几种功能的数据流如下所述:
一,摄像头视频业务的回显功能涉及的流量:
客户机连接的本地摄像头获取的未经压缩的视频数据到达客户机,客户机生成未经压缩的视频流,通过外设映射通道传送到虚拟机中,虚拟机根据该未经压缩的视频流生成摄像头视频业务的显示数据,和其他业务的显示数据统一生成屏幕显示数据后回送给客户机,再在客户机连接的显示器上进行回显。其路径可表示为:摄像头-〉客户机-〉虚拟机-〉客户机-〉显示器,即但流量经虚拟机走了一个回路,会带来大量的回路流量。
二、摄像头视频业务的向通信对端传送视频功能涉及的流量
客户机连接的本地摄像头获取的未经压缩的视频数据到达客户机,客户机生成未经压缩的视频流,通过外设映射通道传送到虚拟机中,虚拟机对该视频流进行压缩后,通过网络发送到通信对端。其中,外设映射通道中传送的是未经压缩的视频流。不经压缩的视频流的数据量随摄像设置的分辨率、帧速在十几到几十Mbps左右。而通过MPEG-4、H.264等算法压缩后,会降低到几百Kbps到几Mbps。
三,摄像头视频业务的显示通信对端视频功能涉及的流量
虚拟机收到通信对端传输过来的压缩视频流,在虚拟机内进行解压缩后生成摄像头视频业务的显示数据,和其他业务的显示数据统一生成屏幕显示数据后回送给客户机,再在客户机连接的显示器上进行回显。虽然屏幕显示数据时也可以进行压缩,但其压缩率往往小于视频流的压缩率。
可见摄像头视频业务在虚拟化环境下带来大量回路流量和未压缩视频流量,而因为客户机与虚拟机的网络连接为IP网络,该网络甚至可能为广域网范围的,其网络时延带宽等指标无法满足这些视频流的传输需求。
发明内容
本发明要解决的技术问题是提供一种应用于虚拟桌面环境的可以更好地满足视频流传输需求的摄像头视频处理方法和相应的客户机和虚拟机。
为了解决的上述技术问题,本发明提供了一种应用于虚拟桌面系统的摄像头视频处理方法,所述虚拟桌面系统包括通过网络连接的客户机和虚拟机,所述方法包括:
所述客户机通过视频业务专用通道接收所述虚拟机发送的启动摄像头视频业务的指令及窗口信息,所述摄像头视频业务具有回显功能;
所述客户机根据所述指令启动摄像头,接收本地摄像头采集的视频数据,生成未经压缩的视频流;
所述客户机根据所述窗口信息和未经压缩的视频流生成显示数据并在显示器进行回显;
其中,所述视频业务专用通道是所述客户机与虚拟机之间交互摄像头视频业务数据且独立于外设映射通道的通信通道。
较佳地,
所述摄像头视频业务还具有向通信对端传送视频的功能;
所述客户机生成未经压缩的视频流之后,还包括:通过复制得到两份所述未经压缩的视频流,一份用于生成所述显示数据,另一份先进行压缩,得到的压缩视频流再通过所述视频业务专用通道发送给所述虚拟机。
较佳地,
所述方法还包括:所述客户机通过所述视频业务专用通道接收所述虚拟机转发的通信对端的压缩视频流,解压后生成显示数据并在显示器显示。
为了解决的上述技术问题,本发明还提供了一种应用于虚拟桌面系统的摄像头视频处理方法,所述虚拟桌面系统包括通过网络连接的客户机和虚拟机,所述方法包括:
所述虚拟机通过视频业务专用通道向所述客户机发送启动摄像头视频业务的指令及窗口信息,在所述摄像头视频业务具有回显功能时,屏蔽所述回显功能;
所述虚拟机通过视频业务专用通道接收所述客户机发送的所述摄像头视频业务的压缩视频流,并发送给通信对端;
其中,所述视频业务专用通道是所述虚拟机与客户机之间交互摄像头视频业务数据且独立于外设映射通道的通信通道。
较佳地,
还包括:所述虚拟机接收到通信对端的压缩视频流后,通过所述视频业务专用通道直接转发给所述客户机。
相应地,本发明提供的虚拟桌面系统中的客户机,包括操作系统模块及外设映射接口,还包括视频业务专用接口和视频显示处理模块,其中:
所述视频业务专用接口是所述客户机用于与虚拟机交互摄像头视频业务数据且独立于所述外设映射接口的通信接口;
所述视频显示处理模块包括:
业务启动单元,用于通过视频业务专用接口接收到虚拟机发送的启动摄像头视频业务的指令及窗口信息后,通过所述操作系统模块启动本地摄像头,并从所述操作系统模块接收本地摄像头采集的视频数据,生成未经压缩的视频流,其中,所述摄像头视频业务具有回显功能;
图像回显单元,用于在启动本地摄像头后,根据所述窗口信息和未经压缩的视频流生成显示数据,通过所述操作系统模块在显示器进行回显。
较佳地,
所述客户机还包括:视频压缩模块,用于对视频流进行压缩;
所述视频显示处理模块还包括:图像传送单元;
所述视频显示处理模块中的业务启动单元还用于在所述摄像头视频业务具有向通信对端传送视频的功能时,通过复制得到两份所述未经压缩的视频流,一份输出到所述图像回显单元,另一份输出到所述图像传送单元;
所述图像传送单元,用于调用所述视频压缩模块对所述未经压缩的视频流进行压缩,得到的压缩视频流通过所述视频业务专用接口发送给所述虚拟机。
较佳地,
所述客户机还包括:视频解压模块,用于对压缩视频流进行解压缩;
所述视频显示处理模块还包括:图像显示单元,用于通过所述视频业务专用接口接收所述虚拟机转发的通信对端的压缩视频流,调用所述视频解压模块对所述压缩视频流解压后,生成显示数据并通过所述操作系统模块在显示器显示。
相应地,本发明提供的虚拟桌面系统中的虚拟机包括操作系统模块、摄像头视频应用模块及外设映射接口,还包括视频业务专用接口,其中:
所述视频业务专用接口是所述虚拟机用于与客户机交互摄像头视频业务数据且独立于所述外设映射接口的通信接口;
所述摄像头视频应用模块包括:
业务控制单元,用于通过所述视频业务专用接口向客户机发送启动摄像头视频业务的指令及窗口信息,且在所述摄像头视频业务具有回显功能时,屏蔽所述回显功能;
第一收发单元,用于通过所述视频业务专用接口接收客户机发送的所述摄像头视频业务的压缩视频流,再通过所述操作系统模块发送给通信对端。
较佳地,
所述摄像头视频应用模块还包括:
第二收发单元,用于通过所述操作系统模块接收通信对端的压缩视频流后,然后通过所述视频业务专用接口直接转发给所述客户机。
上述应用于虚拟桌面环境的摄像头视频处理方法和相应的设备,对传统虚拟桌面环境下的客户机和虚拟机的工作机制进行了改进,在客户机和虚拟机之间创建视频业务专用通道,通过该视频业务专用通道来完成客户机和虚拟机之间的摄像头视频业务的信息交互,并在客户机新增视频显示处理功能,从而可以在客户机本地完成回显功能,避免大量的回路流量。此外,通过客户机预先对摄像头采集的视频流进行压缩,再通过视频业务专用通道发送到虚拟机;及虚拟机将通信对端发送的压缩视频流通过视频业务专用通道直接转发给客户机等方式,可以使得客户机到虚拟机的视频流占用带宽大大降低,更好地满足视频业务的正常开展需要。
附图说明
图1是现有桌面虚拟环境的逻辑架构图;
图2是现有虚拟桌面环境下客户机的模块示意图;
图3是现有虚拟桌面环境下虚拟机的模块示意图;
图4是虚拟桌面环境下摄像头视频业务相关设备的连接示意图;
图5是本发明实施例摄像头视频处理方法客户机侧的流程图;
图6是本发明实施例摄像头视频处理方法虚拟机侧的流程图;
图7是本发明实施例虚拟桌面环境下客户机的模块示意图;
图8是本发明实施例虚拟桌面环境下虚拟机的模块示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,下文中将结合附图对本发明的实施例进行详细说明。需要说明的是,在不冲突的情况下,本发明中的实施例及实施例中的特征可以相互任意组合。
本实施例虚拟桌面环境相对于传统的虚拟桌面环境,在客户机与虚拟机之间新增了视频业务专用通道,即客户机与虚拟机之间交互摄像头视频业务数据且独立于外设映射通道的通信通道。客户机与虚拟机之间的其他视频业务数据交互可以使用该视频业务专用通道,也可以使用原有的外设映射通道。另外,本实施例的客户机可以实现回显功能和对视频流的压缩解压功能。而虚拟机对摄像头视频业务的处理也与传统虚拟桌面环境下的虚拟机有所不同,屏蔽了回显功能和对通信对端压缩视频流的解压缩功能。
本实施例的摄像头视频业务具有回显功能、向通信对端传送视频功能及显示通信对端视频功能。本实施例的摄像头视频业务处理方法中,客户机侧的流程如图5所示,包括:
步骤110,客户机通过视频业务专用通道接收虚拟机发送的启动摄像头视频业务的指令及窗口信息;
本实施例中,摄像头视频业务可以由客户机发起,但也可以由通信对端发起。由客户机发起时,如用户通过键盘、鼠标、触摸屏等进行输入操作来发起,相应的输入指令将由客户机通过外设映射通道发送到虚拟机,虚拟机根据该输入指令启动摄像头视频业务。如果是通信对端发起,客户机会将通信对端的摄像头视频业务请求呈现给用户,并将用户同意该请求的输入指令通过外设映射通道发送到虚拟机,虚拟机再根据该输入指令启动摄像头视频业务。
本实施例虚拟机启动摄像头视频业务后,会通过视频业务专用通道向客户机发送启动摄像头视频业务的指令及窗口信息。其中的窗口信息包括窗口大小、窗口位置、窗口中回显区域的信息,窗口状态(如是否激活,是否隐藏)等等。在传统虚拟桌面环境下,虚拟机并不会将摄像头视频业务的窗口信息下发给客户机,而是会生成摄像头视频业务的显示数据,再和其他显示数据统一生成屏幕显示数据,再发送给客户机。而本实施例为了避免回路流量,对传统虚拟桌面环境下的客户机和虚拟机的分工机制进行了改进,将回显功能的显示数据生成处理放在客户机侧执行,因而虚拟机需要将相应的窗口信息下发给客户机以生成所述显示数据。
步骤120,所述客户机根据所述指令启动摄像头,接收本地摄像头采集的视频数据,生成未经压缩的视频流;
客户机接收本地摄像头采集的视频数据后,其上的操作系统会调用摄像头驱动程序来生成未经压缩的视频流。
步骤130,所述客户机通过复制得到两份所述未经压缩的视频流;
该步骤是可选的,因为本实施例的摄像头视频业务同时具有回显功能和向通信对端传送视频功能,因此需要对未经压缩的视频流进行复制,在另一实施例中,摄像头视频业务不具有向通信对端传送视频功能,则无需复制,也无需在下一步骤中对未经压缩的视频流进行压缩和发送。
步骤140,所述客户机根据所述窗口信息和一份未经压缩的视频流生成显示数据并在显示器进行回显;同时对另一份未经压缩的视频流进行压缩,得到的压缩视频流通过所述视频业务专用通道发送给所述虚拟机。
从本步骤可以看出,本实施例客户机根据本地摄像头采集的视频数据生成未经压缩的视频流后,直接就利用该未经压缩的视频流生成显示数据在显示器回显,而不是等待虚拟机发送的屏幕显示数据再回显,因而避免了大量的回路流量。而在摄像头视频业务具有向通信对端传送视频功能时,由于先进行了压缩,因而所占用的带宽大大减少。
步骤150,所述客户机通过所述视频业务专用通道接收所述虚拟机转发的通信对端的压缩视频流,解压后生成显示数据并在显示器显示。
本步骤对通信对端压缩视频流的处理与对本地摄像头采集的视频数据的处理并无一定的先后顺序。
与传统虚拟桌面环境下客户机接收屏幕显示数据不同的是,本实施例的客户机具有对视频进行解压缩的功能及根据视频流生成显示数据的功能,因而可以通过视频业务专用通道接收到通信对端发送的摄像头视频业务的压缩视频流,对其进行解压,生成显示数据并在显示器显示。从而节约传输通信对端的视频流所需的带宽资源。
需要说明的是,在另一实施例中,如果摄像头视频业务不具有显示通信对端视频功能,则无需执行本步骤。
相应的,本实施例的摄像头视频业务处理方法中,虚拟机侧的流程如图6所示,包括:
步骤210,虚拟机通过视频业务专用通道向所述客户机发送启动摄像头视频业务的指令及窗口信息,在所述摄像头视频业务具有回显功能时,屏蔽所述回显功能;
虚拟机可以根据客户机传送的输入指令启动摄像头视频业务,在启动摄像头视频业务后,通过视频业务专用通道向所述客户机发送启动摄像头视频业务的指令及窗口信息。
因为本实施例回显功能在客户机本地实现,因此虚拟机需要屏蔽摄像头视频业务的回显功能。所谓屏蔽摄像头视频业务的回显功能,即在收到客户机传送的摄像头视频业务的视频流后,不再生成用于回显的显示数据,因而虚拟机传送回客户机的屏幕显示数据中就不包括用于摄像头视频业务回显功能的显示数据,从而节约大量带宽。
步骤220,所述虚拟机通过视频业务专用通道接收所述客户机发送的所述摄像头视频业务的压缩视频流,并发送给通信对端;
在本实施例中,因为接收的视频流已经过压缩,因此无需再进行压缩,而因为回显功能被屏蔽,因而本步骤收到客户机发送的压缩视频流后,不再生成用于回显的显示数据。
步骤230,所述虚拟机接收到通信对端的压缩视频流后,通过所述视频业务专用通道直接转发给所述客户机。
本步骤对通信对端的压缩视频流的转发处理与对客户机发送的压缩视频流的处理并无一定的先后顺序。
本步骤是可选的,因为本实施例客户机具有解压缩功能和生成显示数据的功能,因而对于通信对端的压缩视频流,虚拟机可以不进行解压缩和生成显示数据,而是可以直接转发,即简化了虚拟机侧的处理,又可以节约传输带宽。
可见,基于本实施例的方案,避免了摄像头视频业务在虚拟化环境下带来的大量回路流量和未压缩视频流量,可以这些视频流的传输需求。
本实施例的虚拟桌面系统中的客户机30如图7所示,包括操作系统模块301和外设映射接口302,新增了视频显示处理模块303、视频业务专用接口304和视频压缩解压模块305,其中:
视频业务专用接口304是客户机用于与虚拟机交互摄像头视频业务数据且独立于所述外设映射接口的通信接口。
视频压缩解压模块305包括:视频压缩模块,用于对视频流进行压缩;及视频解压模块,用于对压缩视频流进行解压缩。
视频显示处理模块303包括:
业务启动单元,用于通过视频业务专用接口接收到虚拟机发送的启动摄像头视频业务的指令及窗口信息后,通过所述操作系统模块启动本地摄像头,并从所述操作系统模块接收本地摄像头采集的视频数据,生成未经压缩的视频流,所述摄像头视频业务具有回显功能。如果所述摄像头视频业务还具有向通信对端传送视频的功能,则业务启动单元还通过复制得到两份所述未经压缩的视频流,一份输出到所述图像回显单元,另一份输出到所述图像传送单元。
图像回显单元,用于在启动本地摄像头后,根据所述窗口信息和未经压缩的视频流生成显示数据,通过所述操作系统模块在显示器进行回显。
图像传送单元,用于调用视频压缩模块对所述未经压缩的视频流进行压缩,得到的压缩视频流通过所述视频业务专用接口发送给所述虚拟机。
图像显示单元,用于通过所述视频业务专用接口接收所述虚拟机转发的通信对端的压缩视频流,调用所述视频解压模块对所述压缩视频流解压后,生成显示数据并通过所述操作系统模块在显示器显示。
虽然本实施例的客户机具有以上模块和单元,但本发明在客户机涉及的摄像头视频业务的功能有所不同时,如不具有向通信对端传送视频功能和/或显示通信对端视频功能,上述的图像传送单元和视频压缩模块,和/或图像显示单元和视频解压模块是可选的。
本实施例的虚拟桌面系统中的虚拟机40如图8所示,包括操作系统模块401、外设映射接口402、屏幕显示数据生成模块403、视频压缩解压模块404及摄像头视频应用模块405,其中,摄像头视频应用模块405与传统虚拟桌面环境下的虚拟机中的摄像头视频应用模块不同,并新增了视频业务专用接口406。其中:
视频业务专用接口406是所述虚拟机用于与客户机交互摄像头视频业务数据且独立于所述外设映射接口的通信接口;
摄像头视频应用模块405包括:
业务控制单元,用于通过所述视频业务专用接口向客户机发送启动摄像头视频业务的指令及窗口信息,且在所述摄像头视频业务具有回显功能时,屏蔽所述回显功能。
第一收发单元,用于通过所述视频业务专用接口接收客户机发送的所述摄像头视频业务的压缩视频流,再通过所述操作系统模块发送给通信对端。
第二收发单元,用于通过所述操作系统模块接收通信对端的压缩视频流后,然后通过所述视频业务专用接口直接转发给所述客户机。
本领域普通技术人员可以理解上述方法中的全部或部分步骤可通过程序来指令相关硬件完成,所述程序可以存储于计算机可读存储介质中,如只读存储器、磁盘或光盘等。可选地,上述实施例的全部或部分步骤也可以使用一个或多个集成电路来实现,相应地,上述实施例中的各模块/单元可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。本发明不限制于任何特定形式的硬件和软件的结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (4)
1.一种应用于虚拟桌面系统的摄像头视频处理方法,所述虚拟桌面系统包括通过网络连接的客户机和虚拟机,所述方法包括:
在客户机与虚拟机之间设置视频业务专用通道,所述视频业务专用通道独立于所述客户机与虚拟机之间的外设映射通道,作为所述客户机与虚拟机之间交互摄像头视频业务数据的通信通道;
所述客户机通过所述视频业务专用通道接收所述虚拟机发送的启动摄像头视频业务的指令及窗口信息,所述摄像头视频业务具有回显功能;
所述客户机根据所述指令启动摄像头,接收本地摄像头采集的视频数据,生成未经压缩的视频流;
在所述摄像头视频业务具有回显功能时,虚拟机屏蔽回显功能,所述客户机根据所述窗口信息和未经压缩的视频流生成显示数据并在显示器进行回显;
所述摄像头视频业务还具有向通信对端传送视频的功能;
所述客户机生成未经压缩的视频流之后,还包括:通过复制得到两份所述未经压缩的视频流,一份用于生成所述显示数据,另一份先进行压缩,得到的压缩视频流再通过所述视频业务专用通道发送给所述虚拟机;
其中,所述方法还包括:所述客户机通过所述视频业务专用通道接收所述虚拟机转发的通信对端的压缩视频流,解压后生成显示数据并在显示器显示。
2.一种应用于虚拟桌面系统的摄像头视频处理方法,所述虚拟桌面系统包括通过网络连接的客户机和虚拟机,所述方法包括:
在虚拟机与客户机之间设置视频业务专用通道,所述视频业务专用通道独立于所述虚拟机与客户机之间的外设映射通道,作为所述虚拟机与客户机之间交互摄像头视频业务数据的通信通道;
所述虚拟机通过视频业务专用通道向所述客户机发送启动摄像头视频业务的指令及窗口信息,在所述摄像头视频业务具有回显功能时,屏蔽所述回显功能;
所述虚拟机通过视频业务专用通道接收所述客户机发送的所述摄像头视频业务的压缩视频流,并发送给通信对端;
所述客户机根据所述窗口信息和接收所述虚拟机转发的通信对端的压缩视频流进行解压生成显示数据在显示器进行回显;
还包括:所述虚拟机接收到通信对端的压缩视频流后,通过所述视频业务专用通道直接转发给所述客户机。
3.一种虚拟桌面系统中的客户机,包括操作系统模块及外设映射接口,其特征在于,还包括视频业务专用接口和视频显示处理模块,其中:
所述视频业务专用接口是所述客户机用于与虚拟机交互摄像头视频业务数据且独立于所述外设映射接口的通信接口,用于构建所述客户机与虚拟机之间的视频业务专用通道,所述视频业务专用通道作为所述客户机与虚拟机之间交互摄像头视频业务数据的通信通道;
所述视频显示处理模块包括:
业务启动单元,用于通过视频业务专用接口接收到虚拟机经由所述视频业务专用通道发送的启动摄像头视频业务的指令及窗口信息后,通过所述操作系统模块启动本地摄像头,并从所述操作系统模块接收本地摄像头采集的视频数据,生成未经压缩的视频流,其中,所述摄像头视频业务具有回显功能,所述回显功能被虚拟机屏蔽;
图像回显单元,用于在启动本地摄像头后,根据所述窗口信息和未经压缩的视频流生成显示数据,通过所述操作系统模块在显示器进行回显;
所述客户机还包括:视频压缩模块,用于对视频流进行压缩;
所述视频显示处理模块还包括:图像传送单元;
所述视频显示处理模块中的业务启动单元还用于在所述摄像头视频业务具有向通信对端传送视频的功能时,通过复制得到两份所述未经压缩的视频流,一份输出到所述图像回显单元,另一份输出到所述图像传送单元;
所述图像传送单元,用于调用所述视频压缩模块对所述未经压缩的视频流进行压缩,得到的压缩视频流通过所述视频业务专用接口经由所述视频业务专用通道发送给所述虚拟机;
所述客户机还包括:视频解压模块,用于对压缩视频流进行解压缩;
所述视频显示处理模块还包括:图像显示单元,用于通过所述视频业务专用接口接收所述虚拟机经由所述视频业务专用通道转发的通信对端的压缩视频流,调用所述视频解压模块对所述压缩视频流解压后,生成显示数据并通过所述操作系统模块在显示器显示。
4.一种虚拟桌面系统中的虚拟机,包括操作系统模块、摄像头视频应用模块及外设映射接口,其特征在于,还包括视频业务专用接口,其中:
所述视频业务专用接口是所述虚拟机用于与客户机交互摄像头视频业务数据且独立于所述外设映射接口的通信接口,用于构建所述虚拟机与客户机之间的视频业务专用通道,所述视频业务专用通道作为所述虚拟机与客户机之间交互摄像头视频业务数据的通信通道;
所述摄像头视频应用模块包括:
业务控制单元,用于通过所述视频业务专用接口经由所述视频业务专用通道向客户机发送启动摄像头视频业务的指令及窗口信息,且在所述摄像头视频业务具有回显功能时,屏蔽所述回显功能;
第一收发单元,用于通过所述视频业务专用接口接收客户机经由所述视频业务专用通道发送的所述摄像头视频业务的压缩视频流,再通过所述操作系统模块发送给通信对端;
其中,所述摄像头视频应用模块还包括:
第二收发单元,用于通过所述操作系统模块接收通信对端的压缩视频流后,然后通过所述视频业务专用接口经由所述视频业务专用通道直接转发给所述客户机;
所述回显功能通过客户机根据所述业务控制单元发送的窗口信息和未经压缩的视频生成显示数据在显示器实现。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410585043.0A CN104301687B (zh) | 2014-10-27 | 2014-10-27 | 应用于虚拟桌面环境的摄像头视频处理方法和相应设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410585043.0A CN104301687B (zh) | 2014-10-27 | 2014-10-27 | 应用于虚拟桌面环境的摄像头视频处理方法和相应设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104301687A CN104301687A (zh) | 2015-01-21 |
CN104301687B true CN104301687B (zh) | 2018-03-23 |
Family
ID=52321223
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410585043.0A Active CN104301687B (zh) | 2014-10-27 | 2014-10-27 | 应用于虚拟桌面环境的摄像头视频处理方法和相应设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104301687B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106161541A (zh) * | 2015-04-10 | 2016-11-23 | 中兴通讯股份有限公司 | 数据传输方法、装置和系统 |
CN106027882A (zh) * | 2016-05-16 | 2016-10-12 | 深圳市青葡萄科技有限公司 | 摄像头外设在虚拟化环境下的重定向方法 |
CN106101548A (zh) * | 2016-07-08 | 2016-11-09 | 北京国电通网络技术有限公司 | 一种云终端处理摄像头视频数据的方法和装置 |
CN106851317A (zh) * | 2017-02-15 | 2017-06-13 | 福建时迅信息科技有限公司 | 一种提高图像数据传输速度的方法和系统 |
CN107506232A (zh) * | 2017-09-26 | 2017-12-22 | 深信服科技股份有限公司 | 一种图片获取方法及系统 |
CN108989729A (zh) * | 2018-08-03 | 2018-12-11 | 湖南华南光电科技股份有限公司 | 一种视音频记录方法、实现装置及电子设备 |
WO2020228650A1 (zh) * | 2019-05-14 | 2020-11-19 | 华为技术有限公司 | 一种虚拟机远程访问usb外设的数据的方法 |
CN111949344A (zh) * | 2019-05-14 | 2020-11-17 | 华为技术有限公司 | 一种虚拟机远程访问usb外设的数据的方法 |
CN112584221A (zh) * | 2020-11-06 | 2021-03-30 | 西安万像电子科技有限公司 | 图像采集方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101582926A (zh) * | 2009-06-15 | 2009-11-18 | 中国电信股份有限公司 | 实现远程媒体播放重定向的方法和系统 |
CN102413150A (zh) * | 2010-09-20 | 2012-04-11 | 联想(北京)有限公司 | 服务器、虚拟桌面控制方法以及虚拟桌面控制系统 |
CN103139202A (zh) * | 2013-01-24 | 2013-06-05 | 中兴通讯股份有限公司 | 瘦客户机及其通信方法和装置 |
CN103414867A (zh) * | 2013-07-19 | 2013-11-27 | 华为技术有限公司 | 多媒体通话控制方法、终端及系统 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20140029764A1 (en) * | 2012-07-24 | 2014-01-30 | Lg Cns Co., Ltd. | Virtual machine-based sound control for computerized devices in a networked computing environment |
CN103650458B (zh) * | 2013-08-16 | 2016-11-02 | 华为技术有限公司 | 媒体流的传输方法、装置与系统 |
-
2014
- 2014-10-27 CN CN201410585043.0A patent/CN104301687B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101582926A (zh) * | 2009-06-15 | 2009-11-18 | 中国电信股份有限公司 | 实现远程媒体播放重定向的方法和系统 |
CN102413150A (zh) * | 2010-09-20 | 2012-04-11 | 联想(北京)有限公司 | 服务器、虚拟桌面控制方法以及虚拟桌面控制系统 |
CN103139202A (zh) * | 2013-01-24 | 2013-06-05 | 中兴通讯股份有限公司 | 瘦客户机及其通信方法和装置 |
CN103414867A (zh) * | 2013-07-19 | 2013-11-27 | 华为技术有限公司 | 多媒体通话控制方法、终端及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN104301687A (zh) | 2015-01-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104301687B (zh) | 应用于虚拟桌面环境的摄像头视频处理方法和相应设备 | |
CN111433743B (zh) | 一种app远程控制方法及相关设备 | |
CN101346683B (zh) | 显示数据捕获方法、使用该方法的电子装置及计算机系统 | |
CN112073758B (zh) | 一种云桌面投屏方法、装置、计算机设备、计算机可读存储介质及云桌面投屏交互系统 | |
US20180113663A1 (en) | Browser based display system for displaying image data | |
US9801146B2 (en) | Terminal and synchronization control method among terminals | |
CN103533034A (zh) | Vdi虚拟桌面中无缝使用云终端本地摄像头的方法 | |
CA2920050C (en) | Image display method and apparatus | |
CN108762934B (zh) | 远程图形传输系统、方法及云服务器 | |
CN113032080B (zh) | 页面实现方法、应用程序、电子设备及存储介质 | |
US20220066812A1 (en) | Method for remotely accessing data of a usb device by a virtual machine | |
TW201426325A (zh) | 顯示畫面的方法及系統 | |
GB2538797B (en) | Managing display data | |
WO2023030519A1 (zh) | 投屏处理方法及相关设备 | |
CN113778583A (zh) | 一种云桌面的本地应用的发布方法、装置、设备和介质 | |
US20150186095A1 (en) | Inter-terminal image sharing method, terminal device, and communications system | |
CN111681157A (zh) | 图像渲染方法及系统 | |
CN114675914B (zh) | 虚拟桌面的图像传输方法、装置、电子设备及存储介质 | |
CN102968807A (zh) | 图像自动生成方法和系统 | |
CN112565818B (zh) | 二三维一体化的操作站平台构建方法和电子设备 | |
CN102724213A (zh) | 一种虚拟无缝桌面及实现方法 | |
KR20210052884A (ko) | 크로마키를 활용한 개인 맞춤형 영상 제작 시스템 및 방법 | |
CN107404458B (zh) | 一种图像获取方法、服务端设备以及客户端设备 | |
CN111610920B (zh) | 多设备控制方法、装置和系统 | |
CN116841438A (zh) | 云应用截图方法、系统及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |