CN103475953A - 一种基于桌面云的媒体控制方法和设备 - Google Patents

一种基于桌面云的媒体控制方法和设备 Download PDF

Info

Publication number
CN103475953A
CN103475953A CN201310418721XA CN201310418721A CN103475953A CN 103475953 A CN103475953 A CN 103475953A CN 201310418721X A CN201310418721X A CN 201310418721XA CN 201310418721 A CN201310418721 A CN 201310418721A CN 103475953 A CN103475953 A CN 103475953A
Authority
CN
China
Prior art keywords
client
multimedia
cloud server
data stream
cloud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310418721XA
Other languages
English (en)
Other versions
CN103475953B (zh
Inventor
高林
戴欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201310418721.XA priority Critical patent/CN103475953B/zh
Publication of CN103475953A publication Critical patent/CN103475953A/zh
Priority to EP14844959.8A priority patent/EP3046331B1/en
Priority to CA2922867A priority patent/CA2922867C/en
Priority to JP2016541770A priority patent/JP6288594B2/ja
Priority to PCT/CN2014/074665 priority patent/WO2015035767A1/zh
Priority to US15/068,289 priority patent/US10397627B2/en
Application granted granted Critical
Publication of CN103475953B publication Critical patent/CN103475953B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/226—Characteristics of the server or Internal components of the server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/633—Control signals issued by server directed to the network components or client
    • H04N21/6332—Control signals issued by server directed to the network components or client directed to client
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例提供一种基于桌面云的媒体控制方法和设备，涉及桌面云应用领域，以减少在媒体控制过程中多媒体数据流的传输占用的带宽，该方法包括：客户端获取多媒体数据流，并展示该多媒体数据流，接收该云服务器发送的控制指令，并根据该控制指令对展示的该多媒体数据流执行对应的控制操作。该方法实施例用于媒体的控制。

Description

一种基于桌面云的媒体控制方法和设备
技术领域
本发明涉及桌面云应用领域，尤其涉及一种基于桌面云的媒体控制方法和设备。
背景技术
在桌面云的应用场景中，用户可以通过瘦客户端访问云服务器，该云服务器为瘦客户端提供对应的云桌面，用户通过瘦客户端访问云桌面从而实现对跨平台应用程序的访问，也就是说，只需要一个瘦客户端设备或者其他任何可以连接网络的设备，通过专用程序或者浏览器，就可以访问云服务器为瘦客户端提供的云桌面以及各种应用。
在现有技术中，瘦客户端可以外接多媒体外设（如摄像头、麦克风等），并通过该多媒体外设获取多媒体数据流，瘦客户端与云服务器之间可以传输静态的屏幕图像、鼠标、键盘数据以及通过多媒体外设获取的多媒体数据流，其中，该多媒体数据流可以是视频数据流或者音频数据流，对于多媒体数据流的传输，瘦客户端将该多媒体数据流传输至云服务器，该云服务器对该多媒体数据流进行解码，并将解码后的多媒体数据流传输至瘦客户端，瘦客户端展示该解码后的多媒体数据流，另外，当用户需要对展示的多媒体数据流进行控制（如视频的录制）时，通过云桌面向云服务器发送控制指令，云服务器根据该控制指令对该多媒体数据流进行处理。
由上可知，多媒体数据流需要由瘦客户端传输至云服务器，并由云服务器进行解码，再传输至瘦客户端以便瘦客户端进行展示，而由于多媒体数据流的传输过程往往占用较大的带宽，例如，对于高清多媒体摄像头的应用场景，瘦客户端到云服务器之间传输的视频需要带宽在20Mbps以上才能保障多媒体数据流传输的流畅，在带宽低的情况下，多媒体数据流的传输就会出现延迟，造成多媒体数据流展示时出现明显的卡顿，从而降低了用户体验。
发明内容
本发明的实施例提供一种基于桌面云的媒体控制方法和设备，以减少在多媒体数据流控制过程中多媒体数据流的传输占用的带宽。
为达到上述目的，本发明的实施例采用如下技术方案：
第一方面，提供一种基于桌面云的媒体控制方法，包括：
客户端获取多媒体数据流；其中，所述客户端包括应用在桌面云场景下的客户端，在所述桌面云场景下，云服务器为所述客户端建立对应的云桌面，所述客户端通过所述云桌面访问所述云服务器；
所述客户端展示所述多媒体数据流；
所述客户端接收所述云服务器发送的控制指令，并根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作，其中，所述控制指令是用户通过所述云桌面向所述云服务器下发的指令。
在第一方面第一种可能的实现方式中，所述客户端展示所述多媒体数据流包括：
所述客户端对所述多媒体数据流进行解码，并展示所述解码后的多媒体数据流。
结合第一方面第一种可能的实现方式，在第二种可能的实现方式中，所述展示所述解码后的多媒体数据流包括：
确定展示窗口的位置；其中，所述展示窗口用于展示所述解码后的多媒体数据流，所述展示窗口的位置对应多媒体展示区，所述多媒体展示区为在所述云桌面中展示多媒体数据流的区域；
通过所述展示窗口展示所述解码后的多媒体数据流。
结合第一方面第二种可能的实现方式，在第三种可能的实现方式中，所述确定展示窗口的位置包括：
接收所述云服务器发送的所述多媒体展示区在所述云桌面上的位置信息；
根据所述多媒体展示区的位置信息，确定所述展示窗口的位置，以便所述展示窗口的位置与所述多媒体展示区在所述云桌面上的位置相同。
结合第一方面第二种可能的实现方式或第三种可能的实现方式，在第四种可能的实现方式中，所述接收所述云服务器发送的控制指令，根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作包括：
接收所述云服务器发送的窗口调整指令；
根据所述窗口调整指令调整所述展示窗口。
结合第一方面至第一方面第四种可能的实现方式中的任一种，在第五种可能的实现方式中，所述接收所述云服务器发送的控制指令，并根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作包括：
接收云服务器发送的第一操作指令；
根据所述第一操作指令确定第一多媒体数据子流；
对所述第一多媒体数据子流进行编码获得对应的多媒体文件；
将所述多媒体文件发送至所述云服务器。
结合第一方面至第一方面第四种可能的实现方式中的任一种，在第六种可能的实现方式中，所述接收所述云服务器发送的控制指令，并根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作包括：
接收云服务器发送的第二操作指令；
根据所述第二操作指令确定第二多媒体数据子流；
将所述第二多媒体数据子流发送至云服务器，以便所述云服务器对所述第二多媒体数据子流进行编码获得对应的多媒体文件。
结合第一方面至第一方面第六种可能的实现方式中的任一种，在第七种可能的实现方式中，所述方法还包括：
配置多媒体插件；
所述客户端展示所述多媒体数据流包括：
通过所述多媒体插件展示所述多媒体数据流；
所述接收所述云服务器发送的控制指令包括：
通过所述多媒体插件接收所述云服务器发送的控制指令。
第二方面，提供一种客户端，包括：
获取单元，用于获取多媒体数据流；其中，所述客户端包括应用在桌面云场景下的客户端，在所述桌面云场景下，云服务器为所述客户端建立对应的云桌面，所述客户端通过所述云桌面访问所述云服务器；
展示单元，用于展示所述获取单元获取的多媒体数据流；
所述获取单元还用于，接收所述云服务器发送的控制指令；
处理单元，用于根据所述获取单元接收的控制指令对展示的所述多媒体数据流执行对应的控制操作；
其中，所述控制指令是用户通过所述云桌面向所述云服务器下发的指令。
在第二方面第一种可能的实现方式中，所述展示单元具体用于对所述获取单元获取的多媒体数据流进行解码，并展示所述解码后的多媒体数据流。
结合第二方面第一种可能的实现方式，在第二种可能的实现方式中，所述展示单元具体用于确定展示窗口的位置，并通过所述展示窗口展示所述解码后的多媒体数据流；
其中，所述展示窗口用于展示所述解码后的多媒体数据流，所述展示窗口的位置对应多媒体展示区，所述多媒体展示区为在所述云桌面中展示多媒体数据流的区域。
结合第二方面第二种可能的实现方式，在第三种可能的实现方式中，所述展示单元具体用于，接收所述云服务器发送的所述多媒体展示区在所述云桌面上的位置信息，并根据所述多媒体展示区的位置信息，确定所述展示窗口的位置，以便所述展示窗口的位置与所述多媒体展示区在所述云桌面上的位置相同。
结合第二方面第二种可能的实现方式或第三种可能的实现方式，在第四种可能的实现方式中，所述获取单元还用于接收所述云服务器发送的窗口调整指令；
所述展示单元还用于根据所述窗口调整指令调整所述展示窗口。
结合第二方面至第二方面第四种可能的实现方式，在第五种可能的实现方式中，所述获取单元还用于，接收云服务器发送的第一操作指令，其中，所述第一操作指令是用户通过云桌面向所述云服务器下发的指令；
所述处理单元还用于，根据所述获取单元获取的第一操作指令确定第一多媒体数据子流，并对所述第一多媒体数据子流进行编码获得对应的多媒体文件；
所述客户端还包括：第一发送单元，用于将所述处理单元获得的多媒体文件发送至所述云服务器。
结合第二方面至第二方面第四种可能的实现方式，在第六种可能的实现方式中，所述获取单元还用于，接收云服务器发送的第二操作指令，其中，所述第二操作指令是用户通过云桌面向所述云服务器下发的指令；
所述处理单元还用于，根据所述第二操作指令确定第二多媒体数据子流；
所述客户端还包括：第二发送单元，用于将所述处理单元确定的第二多媒体数据子流发送至所述云服务器，以便所述云服务器对所述第二多媒体数据子流进行编码获得对应的多媒体文件。
结合第二方面至第二方面第六种可能的实现方式，在第七种可能的实现方式中，所述处理单元还用于，
配置多媒体插件；
所述展示单元具体用于，通过所述处理单元配置的多媒体插件展示所述多媒体数据流；
所述获取单元具体用于，通过所述处理单元配置的多媒体插件接收所述云服务器发送的控制指令。
通过采用上述方案，客户端通过获取多媒体数据流，对该多媒体数据流进行解码，并展示该解码后的多媒体数据流，并通过从云服务器接收的控制指令实现对展示的多媒体数据流的控制，这样，客户端不需要再将多媒体数据流发送至云服务器，而是直接由客户端对获取的多媒体数据流进行解码，客户端和服务器之间只传输控制指令，从而减少在媒体控制过程中多媒体数据流的传输占用的带宽，解决了多媒体数据流展示时出现明显的卡顿，从而提高了用户体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种基于桌面云的媒体控制的系统图；
图2为本发明实施例提供的一种基于桌面云的媒体控制方法的流程示意图；
图3为本发明实施例提供的另一种基于桌面云的媒体控制方法的流程示意图；
图4为本发明实施例提供的一种客户端的结构示意图；
图5为本发明实施例提供的另一种客户端的结构示意图；
图6为本发明实施例提供的另一种客户端的结构示意图；
图7为本发明实施例提供的另一种客户端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明以下各实施例都是基于桌面云场景下的媒体控制进行的描述，该桌面云场景可以是远程桌面或者虚拟桌面场景，在该桌面云场景下，云服务器为该客户端建立对应的云桌面，该客户端通过该云桌面访问该云服务器，如图1所示，该桌面云场景包括：
外接设备10，与瘦客户端11相连，并向瘦客户端提供多媒体数据流。
瘦客户端11，与云服务器12相连，用于对获得的多媒体数据流进行解码，并展示解码后的多媒体数据流，还用于接收服务器发送的控制指令，并根据该控制指令控制解码后的多媒体数据流的展示。
云服务器12包括虚拟机121，云服务器为瘦客户端分配虚拟机，虚拟机用于为瘦客户端提供云桌面，云服务器与瘦客户端通过远程桌面传输协议进行数据传输，还用于接收用户下发的控制指令，并将该控制指令发送至瘦客户端。
本发明实施例提供一种基于桌面云的媒体控制方法，如图2所示，该方法的执行主体为客户端，该方法包括：
S201、客户端获取多媒体数据流。
其中，该客户端包括应用在桌面云场景下的客户端，在该桌面云场景下，云服务器为该客户端建立对应的云桌面，该客户端通过该云桌面访问该云服务器；
具体地，该客户端包括应用在桌面云场景下的客户端，例如，该客户端可以为瘦客户端。其中，该瘦客户端指的是在现有的客户端-服务器网络体系中的一个无需应用程序的计算机终端。它通过一些协议和服务器通信，进而接入局域网，瘦客户端将其鼠标、键盘等输入传送到服务器处理，服务器再把处理结果回传至客户端。
进一步地，客户端可以外接多媒体外设（如摄像头或者麦克风等），客户端通过该多媒体外设获取该多媒体数据流。
例如，该多媒体外设为摄像头，则该摄像头将拍摄的动态影像通过多媒体数据流发送至客户端。
S202、客户端展示多媒体数据流。
具体地，该客户端对该多媒体数据流进行解码，并展示该解码后的多媒体数据流。
具体地，客户端确定展示窗口的位置，并通过该展示窗口展示该解码后的多媒体数据流。
其中，该展示窗口用于展示该解码后的多媒体数据流，该展示窗口的位置对应多媒体展示区，该多媒体展示区为在该云桌面中展示多媒体数据流的区域。
在本发明一种可能的实现方式中，客户端接收云服务器发送的该多媒体展示区在该云桌面上的位置信息，并根据该多媒体展示区的位置信息，确定该展示窗口的位置，以便该展示窗口的位置与该多媒体展示区在该云桌面上的位置相同。
其中，该云服务器可以是桌面云平台虚拟化服务器，是模拟多台虚拟机的物理计算机，每个虚拟机对应一个客户端，该云服务器负责为客户端提供云桌面，用户可以通过云桌面访问云服务器中对应的虚拟机实现对网络资源的访问，应用数据的保存等操作。
具体地，云服务器在接收到用户通过客户端显示的云桌面下发的初始化指令后，将多媒体展示区的位置信息发送至客户端，客户端根据该位置信息确定该展示窗口的位置。
示例地，用户在通过云桌面向云服务器发送针对视频应用程序的启动指令后，云服务器根据该启动指令启动对应的视频应用程序，此时，云服务器向客户端发送视频展示区（即多媒体展示区）在云桌面上的位置信息，例如，云服务器可以向客户端发送该视频展示区在云桌面上的坐标信息，客户端在接收到该位置信息后，根据该位置信息确定该视频展示区在该云桌面上的位置，从而确定展示窗口的位置即为该视频展示区在该云桌面上的位置，也就是说，该展示窗口覆盖了该云桌面上的视频展示区，而对于用户来说，用户通过客户端显示的云桌面看到该展示窗口与该云桌面在同一平面上。
S203、客户端接收该云服务器发送的控制指令，并根据该控制指令对展示的该多媒体数据流执行对应的控制操作。
其中，该控制指令是用户通过该云桌面向该云服务器下发的指令，该控制指令包括窗口调整指令和操作指令。
进一步地，该客户端配置多媒体插件，通过该多媒体插件展示该多媒体数据流，并通过该多媒体插件接收该云服务器发送的控制指令，并根据该控制指令对展示的多媒体数据流执行对应的控制操作。
具体地，该多媒体插件能够对获取的多媒体数据流进行解码，从而使得该客户端通过该多媒体插件展示解码后的多媒体数据流，云服务器在获取到用户下发的控制指令后，可以通过自身配置的插件向该客户端配置的多媒体插件发送该控制指令，客户端通过配置的多媒体插件接收云服务器发送的控制指令，并通过该多媒体插件实现对展示的解码后的多媒体数据流执行对应的控制操作。
这样，由于客户端中的多媒体插件实现了对获取的多媒体数据流进行解码以及展示，因此，云服务器中配置的插件只需向客户端中的多媒体插件发送控制指令以实现对展示的多媒体数据流的控制，也就是说，云服务器中的插件不需要在对从客户端接收的多媒体数据流进行解码等操作，客户端在获取到多媒体数据流后，也不需要再将该多媒体数据流发送至云服务器，而由客户端中配置的多媒体插件对获取的多媒体数据流进行解码以及展示，云服务器中的插件只向客户端中的多媒体插件发送控制指令，不再进行对多媒体数据流的解码等操作，由于控制指令的传输占用的带宽小于多媒体数据流的传输占用的带宽，因此减少了在媒体控制过程中多媒体数据流的传输占用的带宽。
在本发明实施例一种可能的实现方式中，该客户端根据接收到的窗口调整指令执行相应操作，以便调整窗口。
具体地，该客户端接收该云服务器发送的窗口调整指令，并根据该窗口调整指令调整该展示窗口。
进一步地，当用户需要对该展示窗口进行操作时，客户端接收云服务器发送的窗口调整指令，并根据该窗口调整指令对该展示窗口进行对应的操作。
其中，该窗口调整指令是用户通过云桌面向该云服务器下发的指令，该窗口调整指令可以是拖曳指令、窗口放大指令或者窗口缩小指令，其中，该拖曳指令可以是对展示窗口的位置进行改变的指令，该窗口放大指令可以增大当前展示窗口的尺寸，该窗口缩小指令可以减小当前展示窗口的尺寸。
例如，当用户确定增加当前展示窗口的尺寸时，用户可以在客户端显示的云桌面上通过鼠标等输入设备拖动该展示窗口的边缘，从而向云服务器下发窗口放大指令，则该云服务器在接收到该窗口放大指令后，根据该窗口放大指令增大多媒体展示区的尺寸，并将该窗口放大指令发送至客户端，以便客户端根据该窗口放大指令增大该展示窗口的尺寸，从而保证该多媒体展示区与该展示窗口的同步放大，上述描述的窗口放大指令只是举例说明，不作限定，本发明实施例中的窗口调整指令还可以是拖曳指令或者窗口缩小指令，其具体的实现方式与上述关于窗口放大指令的描述类似，此处不再赘述。
在本发明实施例另一种可能的实现方式中，该客户端在接收到的操作指令后可以包括以下两种实施方式：
方式一：客户端接收云服务器发送的第一操作指令，并根据该第一操作指令确定第一多媒体数据子流，客户端对该第一多媒体数据子流进行编码获得对应的多媒体文件，将该多媒体文件发送至该云服务器。
其中，该第一操作指令是用户通过云桌面向该云服务器下发的指令，例如，该第一操作指令可以为拍照指令或者录制指令。
示例地，以该多媒体数据流为视频数据流为例进行说明，用户通过客户端展示给用户的云桌面向云服务器下发录制指令，云服务器将该录制指令发送至客户端，该客户端根据该录制指令确定第一多媒体数据子流，例如，用户通过客户端展示给用户的云桌面向云服务器下发录制开始指令，云服务器将该录制开始指令发送至客户端，该客户端根据该录制开始指令开始执行视频的录制，直至在接收到录制结束指令，停止执行该视频的录制，则录制的视频对应的视频数据流即为上述第一多媒体数据子流，对该视频数据流进行编码，以得到对应的视频数据文件（即为上述多媒体文件），并将该视频数据文件发送至云服务器，该云服务器在接收到该视频数据文件后，可以保存该视频数据文件。
方式二：客户端接收云服务器发送的第二操作指令，并根据该第二操作指令确定第二多媒体数据子流，将该第二多媒体数据子流发送至云服务器，以便该云服务器对该第二多媒体数据子流进行编码获得对应的多媒体文件。
其中，该第二操作指令是用户通过云桌面向该云服务器下发的指令，例如，该第二操作指令可以为拍照指令或者录制指令。
示例地，以该多媒体数据流为视频数据流为例进行说明，用户通过客户端展示给用户的云桌面向云服务器下发录制指令，云服务器将该录制指令发送至客户端，该客户端根据该录制指令确定第二多媒体数据子流，例如，用户通过客户端展示给用户的云桌面向云服务器下发录制开始指令，云服务器将该录制开始指令发送至客户端，该客户端根据该录制开始指令开始执行视频的录制，直至在接收到录制结束指令，停止执行该视频的录制，则录制的视频对应的视频数据流即为上述第二多媒体数据子流，客户端将该第二多媒体数据子流发送至云服务器，该云服务器对该视频数据流进行编码，以得到对应的视频数据文件（即为上述多媒体文件），该云服务器在接收到该视频数据文件后，可以保存该视频数据文件。这里只是举例说明，不作限定。
由上可知，上述方式一与方式二的区别在于：方式一中，是由客户端对多媒体数据子流进行编码，并将编码后的多媒体数据子流发送至云服务器，方式二中，客户端将多媒体数据子流发送至云服务器，由云服务器对多媒体数据子流进行编码。
需要说明的是，方式一中，客户端向云服务器发送的编码后的多媒体数据子流占用的带宽小于编码前的多媒体数据子流，因此，减少了在传输的过程中占用的带宽；方式二中，客户端将多媒体数据子流发送至云服务器，由云服务器对多媒体数据子流进行编码，由于在客户端将多媒体数据子流发送至云服务器后，云服务器不需要再将编码后的多媒体数据子流发送至客户端以便客户端进行显示，因此，也减少了带宽的占用。
另外，上述操作指令和控制指令是通过云服务器中与客户端对应的虚拟机在云服务器与客户端之间实现交互的。
通过采用上述执行主体为客户端的方案，客户端不需要再将多媒体数据流发送至云服务器，而是直接由客户端对获取的多媒体数据流进行解码，从而减少在多媒体数据流展示过程中多媒体数据流的传输占用的带宽，解决了多媒体数据流展示时出现明显的卡顿，从而提高了用户体验。
本发明实施例提供一种基于桌面云的媒体控制方法，如图3所示，该发明实施例中的客户端可以为瘦客户端，该方法包括：
S301、瘦客户端获取多媒体数据流。
其中，该客户端包括应用在桌面云场景下的客户端，在该桌面云场景下，云服务器为该客户端建立对应的云桌面，该客户端通过该云桌面访问该云服务器。
具体地，瘦客户端可以外接多媒体外设（如摄像头或者麦克风等），瘦客户端通过该多媒体外设获取该多媒体数据流。
例如，该多媒体外设为摄像头，则该摄像头将拍摄的动态影像通过多媒体数据流发送至该瘦客户端。
S302、瘦客户端在接收到该多媒体数据流后，对该多媒体数据流进行解码，并确定该解码后的多媒体数据流对应的展示窗口的位置。
其中，该展示窗口用于展示该解码后的多媒体数据流，该展示窗口的位置对应多媒体展示区，该多媒体展示区为在该云桌面中展示多媒体数据流的区域。
具体地，云服务器在接收到用户通过瘦客户端显示的云桌面下发的初始化指令后，将多媒体展示区的位置信息发送至瘦客户端，瘦客户端根据该多媒体展示区的位置信息，确定该展示窗口的位置，以便该展示窗口的位置与该多媒体展示区在该云桌面上的位置相同。
示例地，用户在通过云桌面向云服务器发送针对视频应用程序的启动指令后，云服务器根据该启动指令启动对应的视频应用程序，此时，云服务器向瘦客户端发送视频展示区（即多媒体展示区）在云桌面上的位置信息，例如，云服务器可以向瘦客户端发送该视频展示区在云桌面上的坐标信息，瘦客户端在接收到该位置信息后，根据该位置信息确定该视频展示区在该云桌面上的位置，从而确定展示窗口的位置即为该视频展示区在该云桌面上的位置，也就是说，该展示窗口覆盖了该云桌面上的视频展示区，而对于用户来说，用户通过瘦客户端显示的云桌面看到该展示窗口与该云桌面在同一平面上。
S303、瘦客户端通过该展示窗口展示该解码后的多媒体数据流。
具体地，在用户需要对该展示窗口进行控制操作时，执行以下步骤S304至步骤S305。
需要说明的是，该瘦客户端配置有多媒体插件，通过该多媒体插件展示该多媒体数据流，并通过该多媒体插件接收该云服务器发送的控制指令，并根据该控制指令对展示的多媒体数据流执行对应的控制操作。
具体地，该多媒体插件能够对获取的多媒体数据流进行解码，从而使得该瘦客户端通过该多媒体插件展示解码后的多媒体数据流，云服务器在获取到用户下发的控制指令后，可以通过自身配置的插件向该瘦客户端配置的多媒体插件发送该控制指令，瘦客户端通过配置的多媒体插件接收云服务器发送的控制指令，并通过该多媒体插件实现对展示的解码后的多媒体数据流执行对应的控制操作。
这样，由于瘦客户端中的多媒体插件实现了对获取的多媒体数据流进行解码以及展示，因此，云服务器中配置的插件只需向瘦客户端中的多媒体插件发送控制指令以实现对展示的多媒体数据流的控制，也就是说，云服务器中的插件不需要在对从瘦客户端接收的多媒体数据流进行解码等操作，瘦客户端在获取到多媒体数据流后，也不需要再将该多媒体数据流发送至云服务器，而由瘦客户端中配置的多媒体插件对获取的多媒体数据流进行解码以及展示，云服务器中的插件只向瘦客户端中的多媒体插件发送控制指令，不再进行对多媒体数据流的解码等操作，由于控制指令的传输占用的带宽小于多媒体数据流的传输占用的带宽，因此减少了在媒体控制过程中多媒体数据流的传输占用的带宽。
S304、瘦客户端接收云服务器发送的窗口调整指令。
其中，该窗口调整指令是用户通过云桌面向该云服务器下发的指令，该窗口调整指令可以是拖曳指令、窗口放大指令或者窗口缩小指令，其中，该拖曳指令可以是对展示窗口的位置进行改变的指令，该窗口放大指令可以增大当前展示窗口的尺寸，该窗口缩小指令可以减小当前展示窗口的尺寸。
S305、瘦客户端根据该窗口调整指令调整该展示窗口。
例如，当用户确定增加当前展示窗口的尺寸时，用户可以在瘦客户端显示的云桌面上通过鼠标等输入设备拖动该展示窗口的边缘，从而向云服务器下发窗口放大指令，则该云服务器在接收到该窗口放大指令后，根据该窗口放大指令增大多媒体展示区的尺寸，并将该窗口放大指令发送至瘦客户端，以便瘦客户端根据该窗口放大指令增大该展示窗口的尺寸，从而保证该多媒体展示区与该展示窗口的同步放大，上述描述的窗口放大指令只是举例说明，不作限定，本发明实施例中的窗口调整指令还可以是拖曳指令或者窗口缩小指令，其具体的实现方式与上述关于窗口放大指令的描述类似，此处不再赘述。
可选地，在用户确定对多媒体数据流中的部分多媒体数据流执行控制操作（如用户需要从视频数据流对应的视频中录制一段视频文件或者从音频数据流对应的音频中录制一段录音）时，执行以下步骤S306至步骤S308。
S306、瘦客户端接收云服务器发送的操作指令，并根据该操作指令确定多媒体数据子流。
其中，该操作指令是用户通过云桌面向该云服务器下发的指令，例如，该操作指令可以为拍照指令或者录制指令。
S307、瘦客户端对该多媒体数据子流进行编码获得对应的多媒体文件，将该多媒体文件发送至该云服务器。
S308、云服务器保存该多媒体文件。
例如，用户通过瘦客户端展示给用户的云桌面向云服务器下发录制开始指令，云服务器将该录制开始指令发送至瘦客户端，该瘦客户端根据该录制开始指令开始执行视频的录制，直至在接收到录制结束指令，停止执行该视频的录制，则录制的视频对应的视频数据流即为上述多媒体数据子流，对该视频数据流进行编码，以得到对应的视频数据文件（即为上述多媒体文件），并将该视频数据文件发送至云服务器，该云服务器保存该视频数据文件。
当然，瘦客户端也可以在接收到该云服务器发送的操作指后，根据该操作指令确定多媒体数据子流，将该多媒体数据子流发送至云服务器，以便该云服务器对该多媒体数据流进行编码获得对应的多媒体文件，并保存该多媒体文件。
例如，用户通过瘦客户端展示给用户的云桌面向云服务器下发录制开始指令，云服务器将该录制开始指令发送至瘦客户端，该瘦客户端根据该录制开始指令开始执行视频的录制，直至在接收到录制结束指令，停止执行该视频的录制，则录制的视频对应的视频数据流即为上述第二多媒体数据子流，瘦客户端将该第二多媒体数据子流发送至云服务器，该云服务器对该视频数据流进行编码，以得到对应的视频数据文件（即为上述多媒体文件），并将该视频数据文件发送至云服务器，该云服务器保存该视频数据文件，这里只是举例说明，不作限定。
通过采用上述方案，瘦客户端不需要再将多媒体数据流发送至云服务器，而是直接由该瘦客户端对获取的多媒体数据流进行解码，从而减少在多媒体数据流展示过程中多媒体数据流的传输占用的带宽，解决了多媒体数据流展示时出现明显的卡顿，从而提高了用户体验。
需要说明的是，对于上述方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
本发明实施例提供一种客户端40，如图4所示，该客户端40包括：
获取单元41，用于获取多媒体数据流。
其中，该客户端包括应用在桌面云场景下的客户端，在该桌面云场景下，云服务器为该客户端建立对应的云桌面，该客户端通过该云桌面访问该云服务器。
展示单元42，用于展示该获取单元41获取的多媒体数据流。
该获取单元41还用于，接收该云服务器发送的控制指令。
处理单元43，用于根据该获取单元接收的控制指令对展示的该多媒体数据流执行对应的控制操作。
可选地，该展示单元42具体用于对该获取单元获取的多媒体数据流进行解码，并展示该解码后的多媒体数据流。
可选地，该展示单元42具体用于确定展示窗口的位置，并通过该展示窗口展示该解码后的多媒体数据流；
其中，该展示窗口用于展示该解码后的多媒体数据流，该展示窗口的位置对应多媒体展示区，该多媒体展示区为在该云桌面中展示多媒体数据流的区域。
进一步地，该展示单元42具体用于，接收该云服务器发送的该多媒体展示区在该云桌面上的位置信息，根据该多媒体展示区的位置信息，确定该展示窗口的位置，以便该展示窗口的位置与该多媒体展示区在该云桌面上的位置相同。
具体地，云服务器在接收到用户通过客户端显示的云桌面下发的初始化指令后，将多媒体展示区的位置信息发送至客户端，客户端根据该位置信息确定该展示窗口的位置。
示例地，用户在通过云桌面向云服务器发送针对视频应用程序的启动指令后，云服务器根据该启动指令启动对应的视频应用程序，此时，云服务器向客户端发送视频展示区（即多媒体展示区）在云桌面上的位置信息，例如，云服务器可以向客户端发送该视频展示区在云桌面上的坐标信息，客户端在接收到该位置信息后，根据该位置信息确定该视频展示区在该云桌面上的位置，从而确定展示窗口的位置即为该视频展示区在该云桌面上的位置，也就是说，该展示窗口覆盖了该云桌面上的视频展示区，而对于用户来说，用户通过客户端显示的云桌面看到该展示窗口与该云桌面在同一平面上。
更进一步地，该获取单元41还用于，接收云服务器发送的窗口调整指令。
该处理单元43还用于，根据该获取单元41获取的窗口调整指令调整该展示窗口。
其中，该窗口调整指令是用户通过云桌面向该云服务器下发的指令，该窗口调整指令可以是拖曳指令、窗口放大指令或者窗口缩小指令，其中，该拖曳指令可以是对展示窗口的位置进行改变的指令，该窗口放大指令可以增大当前展示窗口的尺寸，该窗口缩小指令可以减小当前展示窗口的尺寸。
例如，当用户确定增加当前展示窗口的尺寸时，用户可以在客户端显示的云桌面上通过鼠标等输入设备拖动该展示窗口的边缘，从而向云服务器下发窗口放大指令，则该云服务器在接收到该窗口放大指令后，根据该窗口放大指令增大多媒体展示区的尺寸，并将该窗口放大指令发送至客户端，以便客户端根据该窗口放大指令增大该展示窗口的尺寸，从而保证该多媒体展示区与该展示窗口的同步放大，上述描述的窗口放大指令只是举例说明，不作限定，本发明实施例中的窗口调整指令还可以是拖曳指令或者窗口缩小指令，其具体的实现方式与上述关于窗口放大指令的描述类似，此处不再赘述。
可选地，如图5所示，该获取单元41还用于，接收云服务器发送的第一操作指令。
该处理单元43还用于，根据该获取单元41获取的第一操作指令确定第一多媒体数据子流，并对该第一多媒体数据子流进行编码获得对应的多媒体文件。
其中，该第一操作指令是用户通过云桌面向该云服务器下发的指令，例如，该第一操作指令可以为拍照指令或者录制指令。
该客户端40还包括：第一发送单元44，用于将该处理单元43获得的多媒体文件发送至该云服务器。
示例地，以该多媒体数据流为视频数据流为例进行说明，用户通过客户端展示给用户的云桌面向云服务器下发录制指令，云服务器将该录制指令发送至客户端，该客户端根据该录制指令确定第一多媒体数据子流，例如，用户通过客户端展示给用户的云桌面向云服务器下发录制开始指令，云服务器将该录制开始指令发送至客户端，该客户端根据该录制开始指令开始执行视频的录制，直至在接收到录制结束指令，停止执行该视频的录制，则录制的视频对应的视频数据流即为上述第一多媒体数据子流，对该视频数据流进行编码，以得到对应的视频数据文件（即为上述多媒体文件），并将该视频数据文件发送至云服务器，该云服务器保存该视频数据文件。
可选地，如图6所示，该获取单元41，还用于接收云服务器发送的第二操作指令。
该处理单元43，还用于根据该第二操作指令确定第二多媒体数据子流。
其中，该第二操作指令是用户通过云桌面向该云服务器下发的指令，例如，该第二操作指令可以为拍照指令或者录制指令。
该客户端40还包括：第二发送单元45，用于将该处理单元43确定的第二多媒体数据子流发送至该云服务器，以便该云服务器对该第二多媒体数据子流进行编码获得对应的多媒体文件。
示例地，以该多媒体数据流为视频数据流为例进行说明，用户通过客户端展示给用户的云桌面向云服务器下发录制指令，云服务器将该录制指令发送至客户端，该客户端根据该录制指令确定第二多媒体数据子流，例如，用户通过客户端展示给用户的云桌面向云服务器下发录制开始指令，云服务器将该录制开始指令发送至客户端，该客户端根据该录制开始指令开始执行视频的录制，直至在接收到录制结束指令，停止执行该视频的录制，则录制的视频对应的视频数据流即为上述第二多媒体数据子流，客户端将该第二多媒体数据子流发送至云服务器，该云服务器对该视频数据流进行编码，以得到对应的视频数据文件（即为上述多媒体文件），并将该视频数据文件发送至云服务器，该云服务器在接收到该视频数据文件后，可以保存该视频数据文件，这里只是举例说明，不作限定。
进一步地，该处理单元43还用于，配置多媒体插件，该展示单元具体用于，通过该处理单元配置的多媒体插件展示该多媒体数据流，该获取单元具体用于，通过该处理单元配置的多媒体插件接收该云服务器发送的控制指令。
具体地，该多媒体插件能够对获取的多媒体数据流进行解码，从而使得该瘦客户端通过该多媒体插件展示解码后的多媒体数据流，云服务器在获取到用户下发的控制指令后，可以通过自身配置的插件向该瘦客户端配置的多媒体插件发送该控制指令，瘦客户端通过配置的多媒体插件接收云服务器发送的控制指令，并通过该多媒体插件实现对展示的解码后的多媒体数据流执行对应的控制操作。
这样，由于瘦客户端中的多媒体插件实现了对获取的多媒体数据流进行解码以及展示，因此，云服务器中配置的插件只需向瘦客户端中的多媒体插件发送控制指令以实现对展示的多媒体数据流的控制，也就是说，云服务器中的插件不需要在对从瘦客户端接收的多媒体数据流进行解码等操作，瘦客户端在获取到多媒体数据流后，也不需要再将该多媒体数据流发送至云服务器，而由瘦客户端中配置的多媒体插件对获取的多媒体数据流进行解码以及展示，云服务器中的插件只向瘦客户端中的多媒体插件发送控制指令，不再进行对多媒体数据流的解码等操作，由于控制指令的传输占用的带宽小于多媒体数据流的传输占用的带宽，因此减少了在媒体控制过程中多媒体数据流的传输占用的带宽。
通过采用客户端，客户端不需要再将多媒体数据流发送至云服务器，而是直接由该客户端对获取的多媒体数据流进行解码，从而减少在多媒体数据流展示过程中多媒体数据流的传输占用的带宽，解决了多媒体数据流展示时出现明显的卡顿，从而提高了用户体验。
所属本领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的客户端的具体工作过程和描述，可以参考前述方法实施例中的对应过程，在此不再赘述。
本发明实施例提供一种客户端70，如图7所示，所述客户端包括：
处理器（processor）71、通信接口（Communications Interface）72、存储器（memory）73和通信总线74；其中，所述处理器71、所述通信接口72和所述存储器73通过所述通信总线74完成相互间的通信。
处理器71可能是一个中央处理器CPU，或者是特定集成电路ASIC（Application Specific Integrated Circuit），或者是被配置成实施本发明实施例的一个或多个集成电路。
存储器73用于存放程序代码，所述程序代码包括计算机操作指令。存储器73可能包含高速RAM存储器，也可能还包括非易失性存储器（non-volatile memory），例如至少一个磁盘存储器。
所述通信接口72，用于实现这些装置之间的连接通信。
所述处理器71执行程序代码，用于获取多媒体数据流，并展示该多媒体数据流；接收该云服务器发送的控制指令，并根据该控制指令对展示的该多媒体数据流执行对应的控制操作，其中，该控制指令是用户通过该云桌面向该云服务器下发的指令。
其中，该客户端包括应用在桌面云场景下的客户端，在该桌面云场景下，云服务器为该客户端建立对应的云桌面，该客户端通过该云桌面访问该云服务器。
可选地，该处理器71还用于，对该多媒体数据流进行解码，并展示该解码后的多媒体数据流。
可选地，该处理器71还用于，确定展示窗口的位置，并通过该展示窗口展示该解码后的多媒体数据流。
其中，该展示窗口用于展示该解码后的多媒体数据流，该展示窗口的位置对应多媒体展示区，该多媒体展示区为在该云桌面中展示多媒体数据流的区域。
可选地，该处理器71还用于，接收该云服务器发送的该多媒体展示区在该云桌面上的位置信息，并根据该多媒体展示区的位置信息，确定该展示窗口的位置，以便该展示窗口的位置与该多媒体展示区在该云桌面上的位置相同。
可选地，该处理器71还用于，接收该云服务器发送的窗口调整指令，并根据该窗口调整指令调整该展示窗口。
可选地，该处理器71具体用于，接收云服务器发送的第一操作指令，并根据该第一操作指令确定第一多媒体数据子流；对该第一多媒体数据子流进行编码获得对应的多媒体文件，并将该多媒体文件发送至该云服务器。
可选地，该处理器71还用于，接收云服务器发送的第二操作指令，并根据该第二操作指令确定第二多媒体数据子流；将该第二多媒体数据子流发送至云服务器，以便该云服务器对该第二多媒体数据子流进行编码获得对应的多媒体文件。
可选地，该处理器71还用于，配置多媒体插件，通过该多媒体插件展示该多媒体数据流，并通过该多媒体插件接收该云服务器发送的控制指令。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应该以权利要求的保护范围为准。

Claims (16)

1.一种基于桌面云的媒体控制方法，其特征在于，包括：
客户端获取多媒体数据流；其中，所述客户端包括应用在桌面云场景下的客户端，在所述桌面云场景下，云服务器为所述客户端建立对应的云桌面，所述客户端通过所述云桌面访问所述云服务器；
所述客户端展示所述多媒体数据流；
所述客户端接收所述云服务器发送的控制指令，并根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作，其中，所述控制指令是用户通过所述云桌面向所述云服务器下发的指令。
2.根据权利要求1所述的方法，其特征在于，所述客户端展示所述多媒体数据流包括：
所述客户端对所述多媒体数据流进行解码，并展示所述解码后的多媒体数据流。
3.根据权利要求2所述的方法，其特征在于，所述展示所述解码后的多媒体数据流包括：
确定展示窗口的位置；其中，所述展示窗口用于展示所述解码后的多媒体数据流，所述展示窗口的位置对应多媒体展示区，所述多媒体展示区为在所述云桌面中展示多媒体数据流的区域；
通过所述展示窗口展示所述解码后的多媒体数据流。
4.根据权利要求3所述的方法，其特征在于，所述确定展示窗口的位置包括：
接收所述云服务器发送的所述多媒体展示区在所述云桌面上的位置信息；
根据所述多媒体展示区的位置信息，确定所述展示窗口的位置，以便所述展示窗口的位置与所述多媒体展示区在所述云桌面上的位置相同。
5.根据权利要求3或4所述的方法，其特征在于，所述接收所述云服务器发送的控制指令，根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作包括：
接收所述云服务器发送的窗口调整指令；
根据所述窗口调整指令调整所述展示窗口。
6.根据权利要求1至5任一项所述的方法，其特征在于，所述接收所述云服务器发送的控制指令，并根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作包括：
接收云服务器发送的第一操作指令；
根据所述第一操作指令确定第一多媒体数据子流；
对所述第一多媒体数据子流进行编码获得对应的多媒体文件；
将所述多媒体文件发送至所述云服务器。
7.根据权利要求1至5任一项所述的方法，其特征在于，所述接收所述云服务器发送的控制指令，并根据所述控制指令对展示的所述多媒体数据流执行对应的控制操作包括：
接收云服务器发送的第二操作指令；
根据所述第二操作指令确定第二多媒体数据子流；
将所述第二多媒体数据子流发送至云服务器，以便所述云服务器对所述第二多媒体数据子流进行编码获得对应的多媒体文件。
8.根据权利要求1至7任一项所述的方法，其特征在于，所述方法还包括：
配置多媒体插件；
所述客户端展示所述多媒体数据流包括：
通过所述多媒体插件展示所述多媒体数据流；
所述接收所述云服务器发送的控制指令包括：
通过所述多媒体插件接收所述云服务器发送的控制指令。
9.一种客户端，其特征在于，包括：
获取单元，用于获取多媒体数据流；其中，所述客户端包括应用在桌面云场景下的客户端，在所述桌面云场景下，云服务器为所述客户端建立对应的云桌面，所述客户端通过所述云桌面访问所述云服务器；
展示单元，用于展示所述获取单元获取的多媒体数据流；
所述获取单元还用于，接收所述云服务器发送的控制指令；
处理单元，用于根据所述获取单元接收的控制指令对展示的所述多媒体数据流执行对应的控制操作；
其中，所述控制指令是用户通过所述云桌面向所述云服务器下发的指令。
10.根据权利要求9所述的客户端，其特征在于，所述展示单元，具体用于对所述获取单元获取的多媒体数据流进行解码，并展示所述解码后的多媒体数据流。
11.根据权利要求10所述的客户端，其特征在于，所述展示单元具体用于确定展示窗口的位置，并通过所述展示窗口展示所述解码后的多媒体数据流；
其中，所述展示窗口用于展示所述解码后的多媒体数据流，所述展示窗口的位置对应多媒体展示区，所述多媒体展示区为在所述云桌面中展示多媒体数据流的区域。
12.根据权利要求11所述的客户端，其特征在于，所述展示单元具体用于，接收所述云服务器发送的所述多媒体展示区在所述云桌面上的位置信息，根据所述多媒体展示区的位置信息，确定所述展示窗口的位置，以便所述展示窗口的位置与所述多媒体展示区在所述云桌面上的位置相同。
13.根据权利要求11或12所述的客户端，其特征在于，所述获取单元还用于接收所述云服务器发送的窗口调整指令；
所述处理单元还用于根据所述窗口调整指令调整所述展示窗口。
14.根据权利要求9至13任一项所述的客户端，其特征在于，所述获取单元还用于，接收云服务器发送的第一操作指令，其中，所述第一操作指令是用户通过云桌面向所述云服务器下发的指令；
所述处理单元还用于，根据所述获取单元获取的第一操作指令确定第一多媒体数据子流，并对所述第一多媒体数据子流进行编码获得对应的多媒体文件；
所述客户端还包括：第一发送单元，用于将所述处理单元获得的多媒体文件发送至所述云服务器。
15.根据权利要求9至13任一项所述的客户端，其特征在于，所述获取单元还用于，接收云服务器发送的第二操作指令，其中，所述第二操作指令是用户通过云桌面向所述云服务器下发的指令；
所述处理单元还用于，根据所述第二操作指令确定第二多媒体数据子流；
所述客户端还包括：第二发送单元，用于将所述处理单元确定的第二多媒体数据子流发送至所述云服务器，以便所述云服务器对所述第二多媒体数据子流进行编码获得对应的多媒体文件。
16.根据权利要求9至15任一项所述的客户端，其特征在于，所述处理单元还用于，
配置多媒体插件；
所述展示单元具体用于，通过所述处理单元配置的多媒体插件展示所述多媒体数据流；
所述获取单元具体用于，通过所述处理单元配置的多媒体插件接收所述云服务器发送的控制指令。
CN201310418721.XA 2013-09-13 2013-09-13 一种基于桌面云的媒体控制方法和设备 Active CN103475953B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201310418721.XA CN103475953B (zh) 2013-09-13 2013-09-13 一种基于桌面云的媒体控制方法和设备
EP14844959.8A EP3046331B1 (en) 2013-09-13 2014-04-02 Media control method and system based on cloud desktop
CA2922867A CA2922867C (en) 2013-09-13 2014-04-02 Desktop-cloud-based media control method and device
JP2016541770A JP6288594B2 (ja) 2013-09-13 2014-04-02 デスクトップクラウドベースのメディア制御方法およびデバイス
PCT/CN2014/074665 WO2015035767A1 (zh) 2013-09-13 2014-04-02 一种基于桌面云的媒体控制方法和设备
US15/068,289 US10397627B2 (en) 2013-09-13 2016-03-11 Desktop-cloud-based media control method and device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310418721.XA CN103475953B (zh) 2013-09-13 2013-09-13 一种基于桌面云的媒体控制方法和设备

Publications (2)

Publication Number Publication Date
CN103475953A true CN103475953A (zh) 2013-12-25
CN103475953B CN103475953B (zh) 2017-11-17

Family

ID=49800627

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310418721.XA Active CN103475953B (zh) 2013-09-13 2013-09-13 一种基于桌面云的媒体控制方法和设备

Country Status (6)

Country Link
US (1) US10397627B2 (zh)
EP (1) EP3046331B1 (zh)
JP (1) JP6288594B2 (zh)
CN (1) CN103475953B (zh)
CA (1) CA2922867C (zh)
WO (1) WO2015035767A1 (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105245915A (zh) * 2015-09-30 2016-01-13 上海有孚计算机网络有限公司 云桌面高清视频传输方法
CN105554518A (zh) * 2015-12-04 2016-05-04 浙江宇视科技有限公司 一种控制视频流传输的方法和装置
CN107257380A (zh) * 2017-07-03 2017-10-17 南京南瑞继保电气有限公司 一种基于改进的瘦客户端技术的继电保护定值整定计算架构及方法
WO2017193821A1 (zh) * 2016-05-09 2017-11-16 中兴通讯股份有限公司 云桌面图像处理方法、服务器、客户端及计算机存储介质
CN107885564A (zh) * 2017-10-31 2018-04-06 南京斯坦德云科技股份有限公司 一种超融合云桌面系统
CN107957869A (zh) * 2017-11-16 2018-04-24 中国烟草总公司四川省公司 一种固定办公云桌面系统
CN108512928A (zh) * 2018-04-08 2018-09-07 上海微穹信息科技有限公司 云端虚拟机及其文件管理方法、系统、虚拟机瘦客户端
CN108810583A (zh) * 2018-06-26 2018-11-13 中国联合网络通信集团有限公司 桌面虚拟化环境下视频流传输的方法、装置、设备及介质
CN109040792A (zh) * 2018-08-13 2018-12-18 中兴通讯股份有限公司 一种视频重定向的处理方法、云终端和云桌面服务器
CN110225415A (zh) * 2018-03-01 2019-09-10 中兴通讯股份有限公司 一种媒体文件的播放方法
CN111818150A (zh) * 2020-07-03 2020-10-23 重庆中科云仿科技有限公司 一种基于云平台的cae仿真系统
CN111830920A (zh) * 2020-07-23 2020-10-27 重庆中科云仿科技有限公司 一种基于物联网的工厂智慧监测共享云平台
CN112135052A (zh) * 2020-09-24 2020-12-25 张晏铭 基于桌面云的摄影系统和方法
CN112291285A (zh) * 2019-07-23 2021-01-29 中兴通讯股份有限公司 云桌面与终端外围设备的文件传送方法及装置
WO2021115349A1 (zh) * 2019-12-13 2021-06-17 中兴通讯股份有限公司 桌面显示方法及装置、计算机可读的存储介质、电子装置
CN113015019A (zh) * 2021-03-09 2021-06-22 北京百度网讯科技有限公司 数据处理方法、装置和系统
WO2022068276A1 (zh) * 2020-09-29 2022-04-07 华为云计算技术有限公司 桌面云系统以及相关方法、装置、设备、介质
CN114661193A (zh) * 2022-03-02 2022-06-24 阿里巴巴（中国）有限公司 基于云端应用的窗口调整方法、装置、系统和电子设备
CN115328372A (zh) * 2022-07-30 2022-11-11 深圳乐播科技有限公司 同步显示方法、装置、电子设备及存储介质

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105578150B (zh) * 2016-01-20 2018-06-22 武汉市公安局公共交通分局 一种公安视频侦查作战舱装置及其视频展示方法
CN108989811B (zh) * 2017-06-05 2022-06-03 中兴通讯股份有限公司 云桌面系统、及其图像序列压缩编码方法和介质
CN108366285B (zh) * 2017-07-06 2019-12-06 新华三云计算技术有限公司 一种视频数据显示方法和装置
CN111124332B (zh) * 2019-11-18 2024-03-01 北京小米移动软件有限公司 设备呈现内容的控制方法、控制装置及存储介质
CN112312057A (zh) * 2020-02-24 2021-02-02 北京字节跳动网络技术有限公司 多媒体会议数据处理方法、装置和电子设备
CN114222167B (zh) * 2020-09-04 2023-12-19 百度在线网络技术（北京）有限公司 云投屏控制方法、装置、服务器、系统和可读存储介质
CN114157919A (zh) * 2020-09-07 2022-03-08 华为云计算技术有限公司 数据处理的方法和系统、云终端、服务器和计算设备
CN114374726A (zh) * 2022-01-07 2022-04-19 阿里巴巴（中国）有限公司 一种云桌面处理方法及系统
CN114629897A (zh) * 2022-03-08 2022-06-14 阿里巴巴（中国）有限公司 数据处理方法以及系统
CN114827692A (zh) * 2022-04-29 2022-07-29 深圳市瑞云科技有限公司 一种基于智能电视操作云桌面的系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1571508A (zh) * 2003-07-19 2005-01-26 华为技术有限公司 一种实现多画面的方法
US20080022199A1 (en) * 2006-07-18 2008-01-24 Sony Corporation Information presentation method, information processing apparatus, and recording medium
CN101198067A (zh) * 2006-12-07 2008-06-11 中兴通讯股份有限公司 多画面视频显示处理方法
CN102177693A (zh) * 2008-10-08 2011-09-07 日本电气株式会社 用于建立瘦客户端会话的方法
CN102611809A (zh) * 2012-03-29 2012-07-25 华为技术有限公司 呼叫处理方法和控制装置、自动呼叫分配装置和座席终端
CN103139202A (zh) * 2013-01-24 2013-06-05 中兴通讯股份有限公司 瘦客户机及其通信方法和装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2003223929A1 (en) 2003-05-13 2004-12-03 Medical Insight A/S Method and system for remote and adaptive visualization of graphical image data
US7844661B2 (en) * 2006-06-15 2010-11-30 Microsoft Corporation Composition of local media playback with remotely generated user interface
US20080228865A1 (en) * 2007-03-15 2008-09-18 Nazareno Brier Cruzada Electronic personal computing and videophone system consisting of a remote server system providing dynamic, subscription based virtual computing services & resources, a thin client hardware device connected to a television set and wireless keyboard & mouse, and a wireless mobile device (a Pocket PC Phone)
JP5305754B2 (ja) * 2008-06-24 2013-10-02 キヤノン株式会社 情報処理装置、クライアント、情報処理方法およびプログラム
US20110211679A1 (en) * 2010-02-26 2011-09-01 Vladimir Mezhibovsky Voice Response Processing
US8949316B2 (en) * 2010-03-09 2015-02-03 Avistar Communications Corp. Scalable high-performance interactive real-time media architectures for virtual desktop environments
JP5787129B2 (ja) * 2010-12-20 2015-09-30 日本電気株式会社 リモート接続画面のデータ転送方法及びプログラム
TWI451268B (zh) * 2011-11-08 2014-09-01 Inst Information Industry 提供虛擬桌面之雲端系統、於虛擬桌面播放多媒體之方法以及其電腦可讀取記錄媒體
US9612724B2 (en) * 2011-11-29 2017-04-04 Citrix Systems, Inc. Integrating native user interface components on a mobile device
WO2014022919A1 (en) * 2012-08-10 2014-02-13 Transaxy Inc. System for entering data into a data processing system
US20150009222A1 (en) * 2012-11-28 2015-01-08 Nvidia Corporation Method and system for cloud based virtualized graphics processing for remote displays
US20140250447A1 (en) * 2013-03-04 2014-09-04 United Video Properties, Inc. Systems and methods for providing a private viewing experience

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1571508A (zh) * 2003-07-19 2005-01-26 华为技术有限公司 一种实现多画面的方法
US20080022199A1 (en) * 2006-07-18 2008-01-24 Sony Corporation Information presentation method, information processing apparatus, and recording medium
CN101198067A (zh) * 2006-12-07 2008-06-11 中兴通讯股份有限公司 多画面视频显示处理方法
CN102177693A (zh) * 2008-10-08 2011-09-07 日本电气株式会社 用于建立瘦客户端会话的方法
CN102611809A (zh) * 2012-03-29 2012-07-25 华为技术有限公司 呼叫处理方法和控制装置、自动呼叫分配装置和座席终端
CN103139202A (zh) * 2013-01-24 2013-06-05 中兴通讯股份有限公司 瘦客户机及其通信方法和装置

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105245915B (zh) * 2015-09-30 2018-11-23 上海有孚网络股份有限公司 云桌面高清视频传输方法
CN105245915A (zh) * 2015-09-30 2016-01-13 上海有孚计算机网络有限公司 云桌面高清视频传输方法
CN105554518A (zh) * 2015-12-04 2016-05-04 浙江宇视科技有限公司 一种控制视频流传输的方法和装置
CN107360443A (zh) * 2016-05-09 2017-11-17 中兴通讯股份有限公司 一种云桌面图像处理方法、云桌面服务器及客户端
WO2017193821A1 (zh) * 2016-05-09 2017-11-16 中兴通讯股份有限公司 云桌面图像处理方法、服务器、客户端及计算机存储介质
CN107257380A (zh) * 2017-07-03 2017-10-17 南京南瑞继保电气有限公司 一种基于改进的瘦客户端技术的继电保护定值整定计算架构及方法
CN107885564A (zh) * 2017-10-31 2018-04-06 南京斯坦德云科技股份有限公司 一种超融合云桌面系统
CN107957869A (zh) * 2017-11-16 2018-04-24 中国烟草总公司四川省公司 一种固定办公云桌面系统
CN110225415A (zh) * 2018-03-01 2019-09-10 中兴通讯股份有限公司 一种媒体文件的播放方法
CN110225415B (zh) * 2018-03-01 2022-06-21 中兴通讯股份有限公司 一种媒体文件的播放方法
CN108512928A (zh) * 2018-04-08 2018-09-07 上海微穹信息科技有限公司 云端虚拟机及其文件管理方法、系统、虚拟机瘦客户端
CN108810583A (zh) * 2018-06-26 2018-11-13 中国联合网络通信集团有限公司 桌面虚拟化环境下视频流传输的方法、装置、设备及介质
CN109040792B (zh) * 2018-08-13 2021-04-09 中兴通讯股份有限公司 一种视频重定向的处理方法、云终端和云桌面服务器
CN109040792A (zh) * 2018-08-13 2018-12-18 中兴通讯股份有限公司 一种视频重定向的处理方法、云终端和云桌面服务器
CN112291285A (zh) * 2019-07-23 2021-01-29 中兴通讯股份有限公司 云桌面与终端外围设备的文件传送方法及装置
WO2021115349A1 (zh) * 2019-12-13 2021-06-17 中兴通讯股份有限公司 桌面显示方法及装置、计算机可读的存储介质、电子装置
CN111818150A (zh) * 2020-07-03 2020-10-23 重庆中科云仿科技有限公司 一种基于云平台的cae仿真系统
CN111830920A (zh) * 2020-07-23 2020-10-27 重庆中科云仿科技有限公司 一种基于物联网的工厂智慧监测共享云平台
CN112135052A (zh) * 2020-09-24 2020-12-25 张晏铭 基于桌面云的摄影系统和方法
WO2022068276A1 (zh) * 2020-09-29 2022-04-07 华为云计算技术有限公司 桌面云系统以及相关方法、装置、设备、介质
CN113015019A (zh) * 2021-03-09 2021-06-22 北京百度网讯科技有限公司 数据处理方法、装置和系统
CN113015019B (zh) * 2021-03-09 2023-02-28 北京百度网讯科技有限公司 数据处理方法、装置和系统
CN114661193A (zh) * 2022-03-02 2022-06-24 阿里巴巴（中国）有限公司 基于云端应用的窗口调整方法、装置、系统和电子设备
CN115328372A (zh) * 2022-07-30 2022-11-11 深圳乐播科技有限公司 同步显示方法、装置、电子设备及存储介质
CN115328372B (zh) * 2022-07-30 2024-01-09 深圳乐播科技有限公司 同步显示方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
WO2015035767A1 (zh) 2015-03-19
EP3046331A4 (en) 2016-08-31
CN103475953B (zh) 2017-11-17
JP6288594B2 (ja) 2018-03-07
US10397627B2 (en) 2019-08-27
CA2922867C (en) 2019-05-28
EP3046331A1 (en) 2016-07-20
CA2922867A1 (en) 2015-03-19
JP2016536710A (ja) 2016-11-24
EP3046331B1 (en) 2020-07-15
US20160198208A1 (en) 2016-07-07

Similar Documents

Publication Publication Date Title
CN103475953A (zh) 一种基于桌面云的媒体控制方法和设备
US11909820B2 (en) Method and apparatus for execution of applications in a cloud system
CN102413150B (zh) 服务器、虚拟桌面控制方法以及虚拟桌面控制系统
US11089349B2 (en) Apparatus and method for playing back and seeking media in web browser
US20170192734A1 (en) Multi-interface unified displaying system and method based on virtual reality
US20170195617A1 (en) Image processing method and electronic device
CN104580097A (zh) 一种数据处理方法、装置及系统
CN103248682A (zh) 一种带宽使用优化方法及装置
US10158868B2 (en) Systems and methods to limit lag between a client and a server for remote computing
CN105357249A (zh) 一种文件分享方法及装置
CN103795953A (zh) 一种显示接口卡及显示系统
CN103873886A (zh) 一种处理图像信息的方法、装置及系统
CN103399649A (zh) 一种基于kvm的数据处理方法和kvm发送装置
CN104765636A (zh) 一种远程桌面图像的合成方法和装置
CN106385627B (zh) 视频编码方法和装置
CN103606367A (zh) 一种信号级联传输方法及信号级联装置
CN104639501A (zh) 一种数据流传输的方法、设备及系统
CN106775690B (zh) 一种基于gdi/gdi+窗口被覆盖的录制方法及装置
US11134114B2 (en) User input based adaptive streaming
TWI600312B (zh) 顯示介面帶寬調制
CN112997220A (zh) 经由远程渲染的视频流进行3d模型的可视化和交互的系统和方法
CN114827692A (zh) 一种基于智能电视操作云桌面的系统
JP2018534648A (ja) グラフィカルコマンドトークンの修正
US10025550B2 (en) Fast keyboard for screen mirroring
CN105141626A (zh) 优化的spice wan的系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant