CN113595976A - 多媒体播放方法、云服务器、系统及存储介质 - Google Patents

Abstract

本申请实施例提供一种多媒体播放方法、云服务器、系统及存储介质。在本申请实施例中，终端设备与云服务器相互配合进行多媒体内容的播放，云服务器负责多媒体内容的流化处理，得到适合终端设备播放的流化后的多媒体内容，而终端设备负责对流化后的多媒体内容进行播放处理；在云端流化过程中，云服务器针对符合设定条件的多媒体内容进行局部流化，得到适合终端设备播放的流化后的多媒体内容，而不是执行全局流化，这不仅可以保证终端设备能够成功播放流化后的多媒体内容，而且还可以简化流化操作，节约流化操作所消耗的云端资源。

Description

多媒体播放方法、云服务器、系统及存储介质

技术领域

本申请涉及云计算技术领域，尤其涉及一种多媒体播放方法、云服务器、系统及存储介质。

背景技术

网络机顶盒(NetWork Set-Top Box)是连接于电视机与网络资源之间的桥梁设备，可以把网络资源转换为电视内容，供电视机播放。用户可以在网络机顶盒中安装第三方的应用软件，通过网络机顶盒运行第三方的应用软件来观看第三方提供的各种网络资源。

随着应用软件的不断升级，网络机顶盒的配置可能不再满足要求，于是出现了云化机顶盒的概念，即将原本运行在网络机顶盒上的应用软件转移到云端实现，由云端对应用软件播放的原始内容进行流化等操作，并生成流化内容后提供给云化机顶盒，云化机顶盒仅负责流化内容的播放、界面呈现等简单操作。

其中，云端流化过程包括利用云上应用软件播放原始内容，对原始内容进行采集、再编码、加密以及封装等一系列操作，整个过程需要耗费大量的云端资源。

发明内容

本申请的多个方面提供一种多媒体播放方法、云服务器、系统及存储介质，用以减轻云端对多媒体内容进行流化所消耗的资源，简化流化操作。

本申请实施例提供一种多媒体播放系统，包括：云服务器，以及与所述云服务器网络连接的终端设备；所述云服务器，用于根据所述终端设备发送的播放控制指令，获取所述终端设备请求播放的第一多媒体内容；在所述第一多媒体内容符合设定条件的情况下，对所述第一多媒体内容进行局部流化，以得到适于所述终端设备播放的第二多媒体内容，并将所述第二多媒体内容传输给所述终端设备；所述终端设备，用于响应于播放输入操作，向所述云服务器发送所述播放控制指令，并对所述云服务器返回的由所述第一多媒体内容局部流化得到的第二多媒体内容进行播放处理。

本申请实施例还提供一种多媒体播放方法，包括：接收终端设备发送的播放控制指令，所述播放控制指令用于请求播放第一多媒体内容；根据所述播放控制指令，获取所述终端设备请求播放的第一多媒体内容；在所述第一多媒体内容符合设定条件的情况下，对所述第一多媒体内容进行局部流化，以得到第二多媒体内容；将所述第二多媒体内容传输给所述终端设备，以供所述终端设备对所述第二多媒体内容进行播放处理。

本申请实施例还提供一种云服务器，包括：存储器和处理器；所述存储器，用于存储计算机程序；所述处理器与所述存储器耦合，用于执行所述计算机程序，以用于实现本申请实施例提供的多媒体播放方法中的步骤。

本申请实施例还提供一种存储有计算机程序的计算机可读存储介质，当所述计算机程序被处理器执行时，致使所述处理器实现本申请实施例提供的多媒体播放方法中的步骤。

本申请实施例还提供一种计算机程序产品，包括计算机程序/指令，当所述计算机程序/指令被处理器执行时，致使所述处理器实现本申请实施例提供的多媒体播放方法中的步骤。

在本申请实施例中，终端设备与云服务器相互配合进行多媒体内容的播放，云服务器负责多媒体内容的流化处理，得到适合终端设备播放的流化后的多媒体内容，而终端设备负责对流化后的多媒体内容进行播放处理；在云端流化过程中，云服务器针对符合设定条件的多媒体内容进行局部流化，得到适合终端设备播放的流化后的多媒体内容，而不是执行全局流化，这不仅可以保证终端设备能够成功播放流化后的多媒体内容，而且还可以简化流化操作，节约流化操作所消耗的云端资源。

附图说明

此处所说明的附图用来提供对本申请的进一步理解，构成本申请的一部分，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：

图1a为本申请示例性实施例提供的一种多媒体播放系统的结构及其一种工作原理示意图；

图1b为本申请示例性实施例提供的一种多媒体播放系统的结构及其另一种工作原理示意图；

图1c为本申请示例性实施例提供的一种多媒体播放系统的结构及其又一种工作原理示意图；

图1d为本申请示例性实施例提供的一种多媒体播放系统的结构及其又一种工作原理示意图；

图2为本申请示例性实施例提供的一种云服务器的内部结构示意图；

图3为本申请示例性实施例提供的一种多媒体播放方法的流程示意图；

图4为本申请示例性实施例提供的一种云服务器的结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请具体实施例及相应的附图对本申请技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

针对云端流化过程中需要消耗大量云端资源的问题，在本申请实施例中，云服务器针对符合设定条件的多媒体内容进行局部流化，得到适合终端设备播放的流化后的多媒体内容，而不是执行全局流化，这不仅可以保证终端设备能够成功播放流化后的多媒体内容，而且还可以简化流化操作，节约流化操作所消耗的云端资源。

以下结合附图，详细说明本申请各实施例提供的技术方案。

图1a为本申请示例性实施例提供的一种多媒体播放系统的结构示意图。如图1a所示，该系统100包括：云服务器10和终端设备20；云服务器10和终端设备20网络连接。

在本实施例中，云服务器10和终端设备20相互配合完成多媒体内容的播放。其中，云服务器10是指处理能力可弹性伸缩的计算服务器，云服务器10负责运行与多媒体内容播放相关的应用程序，例如各类视频APP等，这可以将终端设备20从应用程序的运行、维护、升级等操作中解放出来，降低对终端设备20的软件配置、硬件资源等的要求，有利于终端设备20更加专注于其擅长的播放、显示与人机交互等操作。另外，由于应用程序运行在云服务器10上，故云服务器10还需要负责多媒体内容的流化处理，向终端设备20提供适合其播放的流化后的多媒体内容。

终端设备20是指可以配合云服务器进行多媒体内容播放控制的终端设备，主要负责流化后多媒体内容的播放、界面呈现和一些相对简单的人机交互操作，例如接收语音指令、按键操作等，而原本应该运行在终端设备20上的应用软件被转移到云服务器10上实现，由云服务器10对应用软件播放的多媒体内容进行至少部分流化操作，以在一定程度上将终端设备20从多媒体流化操作中解放出来。在实现形态上，终端设备20可以是但不限于：云机顶盒、网络机顶盒、播放控制器等类似设备。

具体地，如图1a所示，终端设备20可以接收播放输入操作，该播放输入操作表达用户的播放需求，用于指示终端设备20对哪些多媒体内容进行播放。为了便于描述和区分，将该播放输入操作指示播放的多媒体内容称为第一多媒体内容，第一多媒体内容可以是某个电视剧中的剧集、某个电影、电视节目或某档综艺节目等等。在本实施例中，对终端设备20所支持的输入方式不做限定，下面举例说明。

在一可选实施例中，终端设备20可以配有遥控器，则用户可以通过遥控器向终端设备20发出播放输入操作，即该播放输入操作可以是遥控器输入操作。可选地，用户可以通过遥控器上的按键，确定要播放的多媒体内容，并按压相应按键，从而向终端设备20发出播放输入操作，在该可选实施例中，多媒体内容与遥控器上的按键之间具有对应关系。

进一步可选地，终端设备20还可以自带或外接电子屏幕，该电子屏幕支持与用户进行交互，用户也可以同时通过遥控器和终端设备20自带或外接的电子屏幕发出播放输入操作。具体地，终端设备20在电子屏幕上显示候选内容列表，用户通过遥控器的选择按键进行左右和/或上下选择操作，选中要播放的多媒体内容，再点击遥控器上的确认按键，发出播放输入操作。

进一步可选地，终端设备20自带或外接的电子屏幕还可以支持触控操作，则用户可以点选、触控、长按、双击等电子屏幕上显示的候选内容，从而向终端设备20发出播放输入操作。

在一可选实施例中，终端设备20可以具有语音识别功能，支持语音输入，则用户可以通过语音方式向终端设备20发出播放输入操作，即该播放输入操作可以是语音输入操作。

在本实施例中，终端设备20在接收到播放输入操作之后，可根据该播放输入操作生成播放控制指令，该播放控制指令用于请求播放第一多媒体内容。其中，第一多媒体内容可能是视频内容、音频内容、文本内容、图像内容或音视频内容，对此不做限定。之后，终端设备20将播放控制指令发送给云服务器10，以向云服务器10请求与第一多媒体内容播放相关的流化服务。

云服务器10接收终端设备20发送的播放控制指令，根据该播放控制指令，获取终端设备20请求播放的第一多媒体内容；之后，可以对第一多媒体内容进行流化处理，得到适合终端设备20播放的流化后的多媒体内容，将流化得到的多媒体内容通过网络传输给终端设备20，以供终端设备20对流化得到的多媒体内容进行播放处理。对终端设备20来说，主要负责播放和界面显示，终端设备20的处理负担较轻，且对终端设备20的配置和硬件资源等要求较低。

在通常情况下，云服务器10可以采用标准的全局流化方式对终端设备20请求播放的多媒体内容进行全局流化处理，得到适合终端设备20播放的流化后的多媒体内容。但是，全局流化处理包含的操作相对较多，资源消耗较大，为了节约云服务器的资源，本申请实施例提供一种局部流化方式，相对于全局流化方式，局部流化方式只需包含全局流化方式中的部分操作，相对简单、易于实施、资源消耗较少。本实施例的局部流化方式也是以得到与终端设备20的能力适配、适合终端设备20播放的多媒体内容为目的的，但是，考虑到并不是所有场景都适用于局部流化方式，在本申请实施例中进一步预先设定适合局部流化方式的条件；也就是说，云服务器10同时支持全局流化方式和局部流化方式，针对符合设定条件的情况，云服务器10采用局部流化方式进行流化处理，得到与终端设备20的能力适配、适合终端设备20播放的多媒体内容；针对不符合设定条件的情况，云服务器10采用全局流化方式进行流化处理，得到与终端设备20的能力适配、适合终端设备20播放的多媒体内容。

基于上述，云服务器10在获取第一多媒体内容之后，可以先判断第一多媒体内容是否符合设定条件，在第一多媒体内容符合设定条件的情况下，对第一多媒体内容进行局部流化，得到适合终端设备20播放的第二多媒体数据，将第二多媒体数据传输给终端设备20；终端设备20对第二多媒体内容进行播放处理。进一步可选地，在第一多媒体内容不符合设定条件的情况下，对第一多媒体内容进行全局流化，得到适合终端设备20播放的第三多媒体数据，将第三多媒体数据传输给终端设备20；终端设备20对第三多媒体内容进行播放处理。

在本实施例中，并不对全局流化方式和局部流化方式的详细实现进行限定，局部流化方式是相对于全局流化方式而言的，在全局流化方式确定的情况下，局部流化方式可以由全局流化方式中任何可组合实施的部分操作构成。下面举例说明：

在一可选实施例中，定义全局流化方式包括：对终端设备请求播放的多媒体内容进行解封装、解码、抓屏以及再编码、再封装为例，则局部流化方式可以包括对多媒体内容进行解封装、再封装，而不包含解码、抓屏和再编码等操作，可简化流化操作，节约流化资源。

具体地，终端设备20可以接收播放输入操作，响应于该播放输入操作，向云服务器10发送播放控制指令，以请求播放第一多媒体内容。其中，第一多媒体内容由数据源端30提供，如图1a所示。在本实施例中，数据源端30负责向终端设备20提供各种多媒体内容，包括但不限于：音频内容、视频内容、图像内容、音视频内容或文件内容等。在物理实现上，数据源端30可以是各种多媒体网站、多媒体内容提供商的资源服务器、和/或是网络中存储有多媒体内容的各种网络节点，例如终端设备、常规服务器、云服务器、云主机、虚拟中心或服务器阵列等。

如图1a所示，云服务器10根据该播放控制指令，从数据源端30获取第一多媒体内容；接着，判断第一多媒体内容是否符合设定条件。在第一多媒体内容符合设定条件的情况下，云服务器10采用与数据源端30适配的解封装方法对第一多媒体内容进行解封装，得到待解码多媒体内容；再利用与终端设备20适配的封装方法对待解码多媒体内容进行二次封装，得到第二多媒体内容；将第二多媒体内容网络传输给终端设备20。终端设备20对第二多媒体内容进行与上述二次封装操作对应的解封装操作，得到待解码多媒体内容；接着利用与数据源端30适配的解码方法对待解码多媒体内容进行解码操作，并将输出解码出的结果数据。其中，解码出的结果数据是适合播放的数据，例如可以是视频帧。

进一步可选地，如图1b所示，在第一多媒体内容不符合设定条件的情况下，云服务器10采用与数据源端30适配的解封装方法对第一多媒体内容进行解封装，得到待解码多媒体内容；接着，利用与数据源端30适配的解码方法对待解码多媒体内容进行解码操作，得到解码后的多媒体内容；进一步利用与终端设备20适配的编码方法对解码后的多媒体内容进行二次编码，得到重新编码后的多媒体内容；最后，利用与终端设备20适配的封装方法对重新编码后的多媒体内容进行二次封装，得到第三多媒体内容；将第三多媒体内容网络传输给终端设备20。终端设备20对第三多媒体内容进行与上述二次封装操作对应的解封装操作，得到重新编码后的多媒体内容；接着利用与终端设备20适配的解码方法对重新编码后的多媒体内容进行解码操作，并将输出解码出的结果数据。其中，解码出的结果数据是适合播放的数据，例如可以是视频帧。

在另一可选实施例中，定义全局流化方式包括：对终端设备请求播放的多媒体内容进行解密、解封装、解码、抓屏以及再编码、再封装、加密为例，则局部流化方式可以包括对多媒体内容进行解密、解封装、再封装和再加密，而不包含解码、抓屏和再编码等操作，可简化流化操作，节约流化资源。

具体地，终端设备20可以接收播放输入操作，响应于该播放输入操作，向云服务器10发送播放控制指令，以请求播放第一多媒体内容。其中，第一多媒体内容由数据源端30提供，如图1c所示。关于数据源端30的相关描述可参见前述实施例，在此不在赘述。

如图1c所示，云服务器10根据该播放控制指令，从数据源端30获取第一多媒体内容；接着，判断第一多媒体内容是否符合设定条件。在第一多媒体内容符合设定条件的情况下，云服务器10采用与数据源端30适配的加解密方法对第一多媒体内容进行解密处理，得到解密后的多媒体内容；利用与数据源端30适配的解封装方法对上述解密后的多媒体内容进行解封装，得到待解码多媒体内容；再利用与终端设备20适配的封装方法对待解码多媒体内容进行二次封装，得到二次封装后的多媒体内容；接着利用与终端设备20适配的加解密方法对二次封装后的多媒体内容进行再加密处理，得到第二多媒体内容；将第二多媒体内容网络传输给终端设备20。终端设备20先采用其所支持的加解密方法对第二多媒体内容进行解密，得到上述二次封装后的多媒体内容；接着对二次封装后的多媒体内容进行与上述二次封装操作对应的解封装操作，得到待解码多媒体内容；接着利用与数据源端30适配的解码方法对待解码多媒体内容进行解码操作，并将输出解码出的结果数据。其中，解码出的结果数据是适合播放的数据，例如可以是视频帧。

进一步可选地，如图1d所示，在第一多媒体内容不符合设定条件的情况下，云服务器10采用数据源端30使用的加解密方法对第一多媒体内容进行解密处理，得到解密后的多媒体数据；利用与数据源端30适配的解封装方法对解密后的多媒体数据进行解封装，得到待解码多媒体内容；接着，利用与数据源端30适配的解码方法对待解码多媒体内容进行解码操作，得到解码后的多媒体内容；进一步利用与终端设备20适配的编码方法对解码后的多媒体内容进行二次编码，得到重新编码后的多媒体内容；利用与终端设备20适配的封装方法对重新编码后的多媒体内容进行二次封装，得到二次封装后的多媒体内容；最后利用终端设备20使用的加解密方法对二次封装后的多媒体内容进行再加密处理，得到第三多媒体内容；将第三多媒体内容网络传输给终端设备20。终端设备20首先采用其所使用的加解密方法对第三多媒体内容进行解密处理，得到二次封装后的多媒体内容；对二次封装后的多媒体内容进行与上述二次封装操作对应的解封装操作，得到重新编码后的多媒体内容；接着利用与终端设备20适配的解码方法对重新编码后的多媒体内容进行解码操作，并将输出解码出的结果数据。其中，解码出的结果数据是适合播放的数据，例如可以是视频帧。

在上述示例中，仅以局部流化方式包括解封装和再封装，或者包括解密、解封装和再封装、再加密为例进行了说明，但并不限于此。例如，在一可选实施例中，在数据源端30与终端设备20采用的封装协议相同的情况下，局部流化操作也可以仅包括解密和再解密操作。在本申请实施例中，将局部流化过程中在解码操作之前执行的一种或多种操作统称为预处理操作，这些预处理操作包括但不限于：解封装和/或解密，以及对应的再封装和/或再解密。基于此，可以将云服务器10对第一多媒体内容进行局部流化的过程概括为：对第一多媒体内容进行解码前的首次预处理操作，得到待解码多媒体内容；接着，对待解码多媒体内容进行二次预处理操作，得到第二多媒体内容。其中，二次预处理操作与首次预处理操作的处理方向相反。例如，首次预处理操作可以包括解密和/或解封装处理；相应地，二次预处理包括再加密和/或再封装处理。相应地，可以将终端设备20对第二多媒体内容进行播放处理的过程概括为：对第二多媒体内容进行与二次预处理操作相反的预处理操作，以得到待解码多媒体内容；对待解码多媒体内容进行解码，并输出解码出的结果数据。

在上述示例中，在全局流化过程中，对多媒体内容进行解协议、解封装和解码等操作，可利用云上应用程序完成，即云上应用程序可模拟多媒体内容的播放过程，在该播放过程中完成对多媒体内容的解协议、解封装和解码操作，但不限于此。相应地，上述全局流化过程中的抓屏操作是指在云上应用播放第一多媒体内容的过程中，从云上应用程序中抓取当前屏幕上需要显示的媒体内容的过程。其中，抓屏的方式可以包含但不限于：图形设备接口(Graphics Device Interface，GDI)、直接延伸(Direct eXtension，DirectX)或者直接延伸图形基础结构(DirectX Graphics Infrastructure，DXGI)等。另外，在此说明，在本申请实施例中并不限定数据源端30或终端设备20所采用的编码方式，例如可以采用H264或H265等。

在本实施例中，并不对用于限定可以采用局部流化方式的条件进行限定。在一可选实施例中，可以根据多媒体内容的类型，设定某种或某几种类型的多媒体内容可以采用局部流化方式，而其它类型的多媒体内容必须采用全局流化方式。在另一可选实施例中，可以根据播放控制指令的类型，设定某种或某些类型的播放控制指令可以采用局部流化方式，而其它类型的播放控制指令必须采用全局流化方式。在又一可选实施例中，可以根据数据源端进行划分，设定某些数据源端提供的多媒体内容可以采用局部流化方式，而其它数据源端提供的多媒体内容必须采用全局流化方式。无论是上述那种可选实施方式，在设定可以使用局部流化方式的条件时，可以考虑终端设备20的能力，如果终端设备20有能力处理局部流化方式之外的其它操作(是指全局流化方式中未包含在局部流化方式中的哪些操作)，则可以采用局部流化方式；如果终端设备20无法或不支持处理局部流化方式之外的其它操作，则只能采用全局流化方式。

例如，假设终端设备20仅能处理视频内容，无法处理一些网页数据，且采用与数据源端30相同的编解码方式，但对于加解密方式、封装格式等均与数据源端30不同，基于此，可以设定能够使用局部流化方式的条件为播放控制指令的类型为视频播放控制指令或者终端设备请求播放的多媒体内容为视频内容或者提供该多媒体内容的数据源端为提供视频内容的指定数据源端。相应地，云服务器在判断第一多媒体内容是否符合设定条件时，可以对接收到的播放控制指令进行解析，从而得到播放控制指令的类型或播放控制指令中包含的内容参数，该内容参数是指指向第一多媒体内容或提供第一多媒体内容的数据源端的参数，例如可以是第一多媒体内容的的名称、文件扩展名或者统一资源定位系统(UniformResource Locator，URL)；进而，判断该播放控制指令是否为视频播放控制指令或判断该内容参数标识的第一多媒体内容是否为视频内容或该内容参数标识的数据源端为指定数据源端；在在该播放控制指令为视频播放控制指令或该内容参数标识第一多媒体内容为视频内容或该内容参数标识所述数据源端为指定数据源端的情况下，确定第一多媒体内容符合设定条件，于是，针对第一多媒体内容进行局部流化，而非全局流化。这样可以充分利用终端设备的具有的处理能力，减轻云服务器的流化负担，节约云服务器的流化资源；同时，由于云服务器利用云端资源进行了部分流化，也有利于降低对终端设备自身处理能力的要求。

在上述过程中，若上述内容参数为第一多媒体内容的文件扩展名，若第一多媒体内容的文件扩展名为“.avi”，则可以确定第一多媒体内容的类型为视频类型；若第一多媒体内容的文件扩展名为“JEPG”，则可以确定第一多媒体内容的类型为图片类型。又例如，若上述内容参数为第一多媒体内容的URL，该URL中包括：第一多媒体内容的类型、存放第一多媒体内容的主机域名、第一多媒体内容的文件名等信息，则可以根据该URL直接获取第一多媒体内容的类型

在本实施例中，并不限定云服务器10的内部实现结构，其中，如图2所示，为云服务器10的一种内部实现结构包括：应用运行模块11、全局流化模块12、局部流化模块13和推流模块14，进一步，还包括交互模块15、资源获取模块16和控制模块17。

其中，交互模块15可作为云服务器10与终端设备20进行交互的接口，用于接收终端设备20发送的播放控制指令。资源获取模块16用于根据播放控制指令，从数据源端30获取第一多媒体内容。控制模块17用于判断第一多媒体内容是否符合设定条件，在第一多媒体内容符合设定条件的情况下，将第一多媒体内容提供给局部流化模块13。相应地，局部流化模块13用于对符合设定条件的第一多媒体内容进行局部流化，以得到第二多媒体内容。例如，若局部流化过程包括对多媒体内容进行解封装和再封装为例，则局部流化模块13可以采用与数据源端适配的解封装方法对第一多媒体内容进行解封装，得到待解码多媒体内容；再利用与终端设备适配的封装方法对待解码多媒体内容进行二次封装，得到第二多媒体内容。又例如，若局部流化方式包括对多媒体内容进行解密、解封装、再封装和再加密，则局部流化模块13可以采用与数据源端适配的加解密方法对第一多媒体内容进行解密处理，得到解密后的多媒体内容；利用与数据源端适配的解封装方法对上述解密后的多媒体内容进行解封装，得到待解码多媒体内容；再利用与终端设备适配的封装方法对待解码多媒体内容进行二次封装，得到二次封装后的多媒体内容；接着利用与终端设备适配的加解密方法对二次封装后的多媒体内容进行再加密处理，得到第二多媒体内容。关于局部流化的具体过程，可参见前述实施例，在此不再赘述。

进一步，在第一多媒体内容不符合设定条件的情况下，控制模块17将第一多媒体内容提供给应用运行模块11。相应地，应用运行模块11利用本地运行的目标应用程序对第一多媒体内容进行播放处理，在该播放处理过程中可对第一多媒体内容进行解密、解封装、解码以及模拟显示等处理。全局流化模块12用于在目标应用程序播放第一多媒体内容过程中，对第一多媒体内容进行全局流化，以得到第三多媒体内容。其中，由全局流化模块12执行的全局流化主要包括再编码、再封装和再加密等。其中，解密和再加密为一对可选操作。关于整个全局流化的过程，可参见前述实施例，在此不再赘述。其中，应用运行模块11的实现形态与终端设备20的运行的系统有关。若终端设备20采用安卓系统，则应用运行模块11可以实现为安卓虚拟化模块，该模块可运行安卓系统下的各种应用程序；若终端设备20采用windows系统，则应用运行模块11可以实现为windows虚拟化模块，该模块可运行windows系统下的各种应用程序。

在本实施例中，推流模块14与全局流化模块12和局部流化模块13连接，用于将局部流化模块13得到的第二多媒体内容或全局流化模块12得到的第三多媒体内容传输给终端设备20。例如，可以利用传输控制协议(Transmission Control Protocol，TCP)、用户数据报协议(User Datagram Protocol，UDP)。进一步还可以是实时流传输协议(Real TimeStreaming Protocol，RTSP)或者实时消息传输协议(Real Time Messaging Protocol，RTMP等。

在此说明，在上述实施例中，无论是全局流化过程还是局部流化过程，以再封装和/或再加密由全局流化模块12或局部流化模块13执行为例进行的说明，但并不限于此。其中，再封装和/或再加密操作也可以下放到推流模块14，由推流模块14对全局流化模块12或局部流化模块13提供的中间态的多媒体数据进行再封装和/或再加密处理，从而得到第三多媒体内容或第二多媒体内容。

在一可选实施例中，考虑到终端设备请求播放多媒体内容的过程是动态变化的，所以其请求播放的第一多媒体内容可能会从不符合设定条件转换为符合设定条件，也可能从符合设定条件转换为不再符合设定条件。基于此，当终端设备请求播放的第一多媒体内容从不符合设定条件转换为符合设定条件的情况下，则控制模块17可以控制从全局流化路径切换至局部流化路径上，即可以保存全局流化模块12和应用运行模块11的状态信息，并使全局流化模块12和应用运行模块11处于非工作状态，并使局部流化模块13进入工作状态。其中，状态信息可以是但不限于：当前窗口显示的大小、位置、背景颜色或用户设置的参数等信息，以便下次运行全局流化模块12和应用运行模块11时，能保持上次关闭前的状态。非工作状态可以是休眠态或者关闭态等。在完成对第一多媒体内容的局部流化之后，控制模块17可以基于状态信息重新使全局流化模块12和应用运行模块11处于工作状态，并使局部流化模块进入非工作状态。

在本实施例中，应用运行模块和全局流化模块配合完成全局流化过程的成本较高，可能是局部流化模块实现局部流化过程所需成本的十倍以上，也就是说，全局流化相比局部流化会耗费更多的云端资源。而在本申请实施例中，云服务器同时支持全局流化方式和局部流化方式，对于符合设定条件的多媒体内容，例如视频类数据，可以利用局部流化方式进行局部流化，而对于不符合设定条件的多媒体内容，则利用全局流化方式进行全局流化，在保证终端设备能够成功播放多媒体数据的同时，还可以充分利用终端设备已有的处理能力，简化流化操作，节约流化消耗的云端资源，极大地降低云服务器的运行成本。

进一步，在上述一些实施例中，全局流化过程包括对多媒体内容(尤其是视频内容)的解码和再编码过程，这相当于对多媒体内容进行二次编码。二次编码过程实际上是对多媒体内容进行再次压缩的过程，二次编码过程不仅消耗云端资源，而且对多媒体内容的播放质量具有不可逆的伤害，编码次数越多，多媒体内容的播放质量越差。再者，为了保证多媒体内容播放的实时性和并发能力，在全局流化过程中还会主动牺牲一些编码质量，导致媒体数据的播放质量更差。而在本申请实施例中，针对多媒体内容(尤其是视频内容)可以采用局部流化方式，在局部流化过程中省去了对视频内容进行二次编码的过程，不仅可以节约云端资源，还可以克服二次编码带来的质量损失，有利于提高多媒体内容的播放质量。

场景化实施例：

下面以云服务器10是流化服务端，终端设备20是云机顶盒，数据源端30是多媒体内容提供商的资源网站，并且限定视频内容可以采用局部流化方式为例，对多媒体内容播放的过程进行说明。其中，流化服务端内部结构如图2所示包括：交互模块、资源获取模块、控制模块、安卓虚拟化模块、全局流化模块、局部流化模块以及推流模块。

云机顶盒外接电视机，通过电视机显示机顶盒需要播放的多媒体内容。机顶盒可以响应于用户通过遥控器发送的播放输入操作，例如，开启机顶盒和点击资源网站A等操作，播放输入操作用于指向用户想要打开资源网站A，则机顶盒可以响应于播放输入操作，以键值的形式向流化服务端发送播放控制指令，播放控制指令用于请求流化服务端对资源网站A的网页内容进行流化处理。

流化服务端利用交互模块接收该播放输入操作，并通过资源获取模块获取资源网站A的网页内容。控制模块判断网页内容不属于视频类，则将网页内容提供给安卓虚拟化模块，利用安卓虚拟化模块，模拟资源网站A的网页内容的显示过程。该显示过程包括对网页内容的解封装、解码和显示等操作。在显示网页内容过程中，全局流化模块可以对网页内容进行抓屏，接着对抓屏到的网页内容进行再编码，并将再编码后的网页内容提供给推流模块，推流模块对再编码后的网页内容进行再封装，得到适合云机顶盒的网页内容，并传输给云机顶盒。云机顶盒采用自己支持的解封装、解码方式依次对网页内容进行解封装、和解码操作，并将最终解码出的网页内容输出到电视机上进行显示。

接着，用户通过电视机可以观看到资源网站A的网页内容，网页内容上具有资源网站A可以提供的一些视频内容，例如电视剧、电影、综艺、小视频等。用户想要观看电影B，于是通过遥控器选择资源网站A的网页内容上显示的电影B的链接，该链接具体可以由网页上显示的电影B的图片和/或名称进行承载，对此不做限定。云机顶盒响应于遥控器对该电影B发出的选择操作，将包含电影B的URL和/或名称的播放控制指令发送给流化服务端的交互模块；资源获取模块根据交互模块接收到的播放控制指令中包含的电影B的URL和/或名称，从资源网站A获取电影B的视频文件。由于电影B为视频类内容，则将电影B的视频文件提供给局部流化模块，局部流化模块利用与资源网站A适配的解封装和解密方法，对电影B的视频文件进行解封装和解密，得到待解码的电影B的视频文件，并利用与云机顶盒适配的封装和加密方法，对待解码的电影B的视频文件进行再加密和再封装，得到二次封装后的电影B的视频文件，并将二次封装后的电影B的视频文件提供给推流模块，推流模块将二次封装后的电影B的视频文件提供给云机顶盒。机顶盒对二次封装后的电影B的视频文件进行解封装和解密，并利用与资源网站A适配的解码方法，对解密后的电影B的视频文件进行解码，得到电影B的视频码流，并通过电视机对解码得到的电影B的视频码流进行播放。

其中，在云机顶盒请求播放的多媒体内容从网页内容切换为电影视频内容的情况下，控制模块可以保存全局流化模块和安卓虚拟化模块的状态信息，例如，当前窗口显示的大小、位置、背景颜色或用户设置的参数等信息，并将全局流化模块和安卓虚拟化模块处于休眠状态，释放全局流化模块和安卓虚拟化模块占用的云端资源，与此同时，使局部流化模块进入工作状态。进一步，在电影B播放完毕之后，控制模块还可以基于之前保存的状态信息，重新使全局流化模块和安卓虚拟化模块重新处于的工作状态，并重新使局部流化模块重新进入非工作状态。

由此可见，通过利用云机顶盒的已有功能，可以实现局部流化方式，节约云端用于流化处理的资源；进一步，在云机顶盒场景中，视频播放是用户的主要播放需求，因此利用局部流化方式可以极大程度地降低云端用于流化的资源，例如可以把整体流化成本降低到原来的20％-30％，或者换个角度来说，可以提高单个流化服务端的流化支撑能力，可以为更多用户或机顶盒提供流化服务，例如整体流化支撑能力可以提升3-5倍。

图3为本申请实施例提供的一种多媒体播放方法的流程示意图。该方法是从云服务器的角度进行的描述，如图3所示，该方法包括：

31、接收终端设备发送的播放控制指令，该播放控制指令用于请求播放第一多媒体内容；

32、根据上述播放控制指令，获取终端设备请求播放的第一多媒体内容；

33、在第一多媒体内容符合设定条件的情况下，对第一多媒体内容进行局部流化，以得到第二多媒体内容；

34、将第二多媒体内容传输给终端设备，以供终端设备对第二多媒体内容进行播放处理。

在一可选实施例中，上述对第一多媒体内容进行局部流化，以得到第二多媒体内容，包括：对第一多媒体内容进行解码前的首次预处理操作，得到待解码多媒体内容；对待解码多媒体内容进行二次预处理操作，得到第二多媒体内容。

在一可选实施例中，上述对第一多媒体内容进行解码前的预处理操作，得到待解码多媒体内容，包括：利用与提供第一多媒体内容的数据源端适配的解封装和/或解密方法，对第一多媒体内容进行解封装和/或解密，以得到待解码多媒体内容；

相应地，对待解码多媒体内容进行二次预处理操作，得到第二多媒体内容，包括：利用与终端设备适配的加密和/或封装方法，对待解码多媒体内容进行加密和/或封装，以得到第二多媒体内容。

在一可选实施例中，本实施例的方法还包括：在第一多媒体内容不符合设定条件的情况下，基于云端运行的目标应用程序对第一多媒体内容进行全局流化，以得到第三多媒体内容；将第三多媒体内容传输给终端设备，以供终端设备对第三多媒体内容进行播放处理。

在一可选实施例中，本实施例的方法还包括：对播放控制指令进行解析，以得到播放控制指令的类型或播放控制指令中包含的内容参数，内容参数指向第一多媒体内容或提供第一多媒体内容的数据源端；在播放控制指令为视频播放控制指令或内容参数标识第一多媒体内容为视频内容或内容参数标识数据源端为指定数据源端的情况下，确定第一多媒体内容符合设定条件。

关于上述方法实施例中的各步骤，其详细实施过程可参见前述实施例的描述，在此不再赘述。

在本实施例中，终端设备与云服务器相互配合进行多媒体内容的播放，云服务器负责多媒体内容的流化处理，得到适合终端设备播放的流化后的多媒体内容，而终端设备负责对流化后的多媒体内容进行播放处理；在云端流化过程中，云服务器针对符合设定条件的多媒体内容进行局部流化，得到适合终端设备播放的流化后的多媒体内容，而不是执行全局流化，这不仅可以保证终端设备能够成功播放流化后的多媒体内容，而且还可以简化流化操作，节约流化操作所消耗的云端资源。

需要说明的是，在上述实施例及附图中的描述的一些流程中，包含了按照特定顺序出现的多个操作，但是应该清楚了解，这些操作可以不按照其在本文中出现的顺序来执行或并行执行，操作的序号如31、32等，仅仅是用于区分开各个不同的操作，序号本身不代表任何的执行顺序。另外，这些流程可以包括更多或更少的操作，并且这些操作可以按顺序执行或并行执行。需要说明的是，本文中的“第一”、“第二”等描述，是用于区分不同的消息、设备、模块等，不代表先后顺序，也不限定“第一”和“第二”是不同的类型。

图4为本申请示例性实施例提供的一种云服务器的结构示意图。如图4所示，该云服务器包括：存储器41和处理器42。

存储器41，用于存储计算机程序，并可被配置为存储其它各种数据以支持在云服务器上的操作。这些数据的示例包括用于在云服务器上操作的任何应用程序或方法的指令，消息，图片，视频等。

处理器42，与存储器41耦合，用于执行存储器41中的计算机程序，以用于：接收终端设备发送的播放控制指令，该播放控制指令用于请求播放第一多媒体内容；根据上述播放控制指令，获取终端设备请求播放的第一多媒体内容；在第一多媒体内容符合设定条件的情况下，对第一多媒体内容进行局部流化，以得到第二多媒体内容；将第二多媒体内容传输给终端设备，以供终端设备对第二多媒体内容进行播放处理。

在一可选实施例中，处理器42在对第一多媒体内容进行局部流化时，具体用于：对第一多媒体内容进行解码前的首次预处理操作，得到待解码多媒体内容；对待解码多媒体内容进行二次预处理操作，得到第二多媒体内容。

在一可选实施例中，处理器42在对第一多媒体内容进行解码前的预处理操作时具体用于：利用与提供第一多媒体内容的数据源端适配的解封装和/或解密方法，对第一多媒体内容进行解封装和/或解密，以得到待解码多媒体内容。

相应地，处理器42在对待解码多媒体内容进行二次预处理操作时具体用于：利用与终端设备适配的加密和/或封装方法，对待解码多媒体内容进行加密和/或封装，以得到第二多媒体内容。

在一可选实施例中，处理器42还用于：在第一多媒体内容不符合设定条件的情况下，基于云端运行的目标应用程序对第一多媒体内容进行全局流化，以得到第三多媒体内容；将第三多媒体内容传输给终端设备，以供终端设备对第三多媒体内容进行播放处理。

在一可选实施例中，处理器42还用于：对播放控制指令进行解析，以得到播放控制指令的类型或播放控制指令中包含的内容参数，内容参数指向第一多媒体内容或提供第一多媒体内容的数据源端；在播放控制指令为视频播放控制指令或内容参数标识第一多媒体内容为视频内容或内容参数标识数据源端为指定数据源端的情况下，确定第一多媒体内容符合设定条件。

进一步，如图4所示，该云服务器还包括：通信组件43、电源组件44等其它组件。图4中仅示意性给出部分组件，并不意味着云服务器只包括图4所示组件。

相应地，本申请实施例还提供一种存储有计算机程序的计算机可读存储介质，当计算机程序被处理器执行时，致使处理器能够实现本申请实施例提供的多媒体播放方法中的各步骤。

相应地，本申请实施例还提供一种计算机程序产品，包括计算机程序/指令，当计算机程序/指令被处理器执行时，致使处理器能够实现本申请实施例提供的多媒体播放方法中的各步骤。

上述实施例中的存储器可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

上述实施例中的通信组件被配置为便于通信组件所在设备和其他设备之间有线或无线方式的通信。通信组件所在设备可以接入基于通信标准的无线网络，如WiFi，2G、3G、4G/LTE、5G等移动通信网络，或它们的组合。在一个示例性实施例中，通信组件经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

上述图4中的电源组件，为电源组件所在设备的各种组件提供电力。电源组件可以包括电源管理系统，一个或多个电源，及其他与为电源组件所在设备生成、管理和分配电力相关联的组件。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。

以上所述仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (12)

1.一种多媒体播放系统，其特征在于，包括：云服务器，以及与所述云服务器网络连接的终端设备；

所述云服务器，用于根据所述终端设备发送的播放控制指令，获取所述终端设备请求播放的第一多媒体内容；在所述第一多媒体内容符合设定条件的情况下，对所述第一多媒体内容进行局部流化，以得到适于所述终端设备播放的第二多媒体内容，并将所述第二多媒体内容传输给所述终端设备；

所述终端设备，用于响应于播放输入操作，向所述云服务器发送所述播放控制指令，并对所述云服务器返回的由所述第一多媒体内容局部流化得到的第二多媒体内容进行播放处理。

2.根据权利要求1所述的系统，其特征在于，所述云服务器在对所述第一多媒体内容进行局部流化时，具体用于：对所述第一多媒体内容进行解码前的首次预处理操作，得到待解码多媒体内容；对所述待解码多媒体内容进行二次预处理操作，得到第二多媒体内容；

所述终端设备在对所述第二多媒体内容进行播放处理时，具体用于：对所述第二多媒体内容进行与所述二次预处理操作反向的预处理操作，以得到待解码多媒体内容；对所述待解码多媒体内容进行解码并输出解码出的结果数据。

3.根据权利要求2所述的系统，其特征在于，所述云服务器包括：应用运行模块、全局流化模块、局部流化模块和推流模块；

所述应用运行模块，用于在所述第一多媒体内容不符合设定条件的情况下，利用云端运行的目标应用程序对所述第一多媒体内容进行播放处理；

所述全局流化模块，用于在所述目标应用程序播放第一多媒体内容过程中，对所述第一多媒体内容进行全局流化，以得到第三多媒体内容；

所述局部流化模块，用于在若所述第一多媒体内容符合设定条件的情况下，对所述第一数据进行局部流化，以得到所述第二多媒体内容；

所述推流模块，用于将所述第二多媒体内容或所述第三多媒体内容传输给所述终端设备。

4.根据权利要求3所述的系统，其特征在于，所述云服务器还用于：

在所述第一多媒体内容从不符合设定条件转换为符合设定条件的情况下，保存所述全局流化模块和所述应用运行模块的状态信息，并使所述全局流化模块和所述应用运行模块处于非工作状态，使所述局部流化模块进入工作状态；以及

在完成对所述第一多媒体内容的局部流化之后，基于所述状态信息重新使所述全局流化模块和所述应用运行模块处于工作状态，使所述局部流化模块进入非工作状态。

5.一种多媒体播放方法，其特征在于，包括：

接收终端设备发送的播放控制指令，所述播放控制指令用于请求播放第一多媒体内容；

根据所述播放控制指令，获取所述终端设备请求播放的第一多媒体内容；

在所述第一多媒体内容符合设定条件的情况下，对所述第一多媒体内容进行局部流化，以得到第二多媒体内容；

将所述第二多媒体内容传输给所述终端设备，以供所述终端设备对所述第二多媒体内容进行播放处理。

6.根据权利要求5所述的方法，其特征在于，对所述第一多媒体内容进行局部流化，以得到第二多媒体内容，包括：

对所述第一多媒体内容进行解码前的首次预处理操作，得到待解码多媒体内容；

对所述待解码多媒体内容进行二次预处理操作，得到第二多媒体内容。

7.根据权利要求6所述的方法，其特征在于，对所述第一多媒体内容进行解码前的预处理操作，得到待解码多媒体内容，包括：利用与提供所述第一多媒体内容的数据源端适配的解封装和/或解密方法，对所述第一多媒体内容进行解封装和/或解密，以得到所述待解码多媒体内容；

相应地，对所述待解码多媒体内容进行二次预处理操作，得到第二多媒体内容，包括：利用与所述终端设备适配的加密和/或封装方法，对所述待解码多媒体内容进行加密和/或封装，以得到所述第二多媒体内容。

8.根据权利要求5-7中任一项所述的方法，其特征在于，还包括：

在所述第一多媒体内容不符合设定条件的情况下，基于云端运行的目标应用程序对所述第一多媒体内容进行全局流化，以得到第三多媒体内容；

将所述第三多媒体内容传输给所述终端设备，以供所述终端设备对所述第三多媒体内容进行播放处理。

9.根据权利要求5-7中任一项所述的方法，其特征在于，还包括：

对所述播放控制指令进行解析，以得到所述播放控制指令的类型或所述播放控制指令中包含的内容参数，所述内容参数指向所述第一多媒体内容或提供所述第一多媒体内容的数据源端；

在所述播放控制指令为视频播放控制指令或所述内容参数标识所述第一多媒体内容为视频内容或所述内容参数标识所述数据源端为指定数据源端的情况下，确定所述第一多媒体内容符合设定条件。

10.一种云服务器，其特征在于，包括：存储器和处理器；所述存储器，用于存储计算机程序；所述处理器，与所述存储器耦合，用于执行所述计算机程序，以用于实现权利要求5-9任一项所述方法中的步骤。

11.一种存储有计算机程序的计算机可读存储介质，其特征在于，当所述计算机程序被处理器执行时，致使所述处理器实现权利要求5-9任一项所述方法中的步骤。

12.一种计算机程序产品，包括计算机程序/指令，其特征在于，当所述计算机程序/指令被处理器执行时，致使所述处理器实现权利要求5-9任一项所述方法中的步骤。

Images