CN102487455B

CN102487455B - 一种富媒体内容的视频播放系统和方法

Info

Publication number: CN102487455B
Application number: CN200910210182.4A
Authority: CN
Inventors: 包盛; 王爱宝; 施唯佳; 冯明; 马钰璐
Original assignee: China Telecom Corp Ltd
Current assignee: China Telecom Corp Ltd
Priority date: 2009-10-29
Filing date: 2009-10-29
Publication date: 2014-12-17
Anticipated expiration: 2029-10-29
Also published as: CN102487455A

Abstract

本发明公开一种富媒体内容的视频播放系统和方法，该系统包括：富媒体内容生产系统，用于将多种富媒体元素组合为包括控制通道和数据通道的富媒体内容，富媒体内容编码系统，用于将富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络进行传输；富媒体内容解码系统，用于对接收的所述富媒体流进行解码后还原为数据通道的富媒体内容；富媒体内容呈现系统，用于接收数据通道和控制通道的富媒体内容，对数据通道和控制通道的富媒体内容进行解析并播放呈现。本发明提供的富媒体内容的视频播放系统和方法，更好地利用富媒体的表现形式，扩充富媒体应用范围。

Description

一种富媒体内容的视频播放系统和方法

技术领域

本发明涉及媒体内容处理技术领域，尤其涉及一种富媒体内容的视频播放系统和方法。

背景技术

富媒体业务是指具有富媒体元素的有丰富表现力和交互性的应用，包含下列常见的形式之一或者几种的组合：动画、声音、视频、矢量图、图像、文件和实现交互作用的脚本等。富媒体业务是随着宽带网络、编解码、流传输等技术的发展而出现的新业务表现形式，具备良好的互动性。

但是，如何充分利用富媒体的表现形式，扩充富媒体应用范围，也存在不少挑战和要求。

发明内容

本发明要解决的一个技术问题是提供一种富媒体内容的视频播放系统和方法，可以更好地利用富媒体的表现形式，扩充富媒体应用范围。

本发明提供一种富媒体内容的视频播放系统，包括：富媒体内容生产系统，用于将多种富媒体元素组合为富媒体内容，该富媒体内容包括控制通道和至少两个数据通道，每个富媒体通道包括通道标识；其中，将交互式脚本、标签和控制对象组合为控制通道，将其他富媒体元素组合为数据通道；富媒体内容编码系统，用于接收富媒体内容生产系统输出的数据通道的富媒体内容，将接收的富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络进行传输；富媒体内容解码系统，用于接收来自富媒体内容传输网络的富媒体流，对接收的富媒体流进行解码后还原为数据通道的富媒体内容；将解码得到的数据通道的富媒体内容和通道标识传递给富媒体内容呈现系统；富媒体内容呈现系统，用于接收富媒体内容解码系统解码后的数据通道的富媒体内容，获得控制通道的富媒体内容，对数据通道和控制通道的富媒体内容进行解析并播放呈现。

根据本发明的富媒体内容的视频播放系统的一个实施例，富媒体内容生产系统使用XML协议的标签表示富媒体的特征和元素，使用XML协议的标签携带通道标识；富媒体内容呈现系统，能够识别富媒体内容的通道标签，运行富媒体控制通道中的交互式脚本，将多个通道的富媒体内容根据通道标签及交互式脚本进行视频合成后播放呈现。

根据本发明的富媒体内容的视频播放系统的一个实施例，控制通道的富媒体内容在富媒体内容生产系统生成后直接传输到所述富媒体内容呈现系统。

根据本发明的富媒体内容的视频播放系统的一个实施例，富媒体内容编码系统对所述数据通道和控制通道的富媒体内容进行编码生成富媒体流，通过富媒体内容传输网络进行传输；富媒体内容解码系统对接收的富媒体流进行解码后还原为数据通道和控制通道的富媒体内容，将解码得到的所述数据通道和控制通道的富媒体内容和通道标识传递给富媒体内容呈现系统。

本发明还提供一种富媒体内容的视频播放方法，包括：将多种富媒体元素组合为富媒体内容，该富媒体内容包括控制通道和至少两个数据通道，每个富媒体通道包括通道标识；其中，将交互式脚本、标签和控制对象组合为控制通道，将其他富媒体元素组合为数据通道；将数据通道的富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络进行传输；接收来自富媒体内容传输网络的富媒体流，对富媒体流进行解码后还原为所述数据通道的富媒体内容，并获得数据通道的通道标识；获得控制通道的富媒体内容，对数据通道和控制通道的富媒体内容进行解析并播放呈现。

根据本发明的富媒体内容的视频播放方法的一个实施例，控制通道的富媒体内容在生成后不经过编码直接传输到富媒体内容呈现系统进行解析并播放呈现；

或者，

数据通道和控制通道的富媒体内容进行编码生成富媒体流，通过所述富媒体内容传输网络进行传输；对接收的富媒体流进行解码后还原为数据通道和控制通道的富媒体内容，将解码得到的数据通道和控制通道的富媒体内容和通道标识传递给富媒体内容呈现系统进行解析并播放呈现。

根据本发明的富媒体内容的视频播放方法的一个实施例，使用通过XML协议自定义标签对富媒体内容的通道进行标识；所述XML协议自定义标签包含媒体内容分类定义、媒体内容信息定义和媒体内容触发事件定义。

根据本发明的富媒体内容的视频播放方法的一个实施例，交互式脚本基于ECMAScript标准并对其进行扩展，包含用户鉴权、业务鉴权、业务计费、版权保护、内容举报、特效处理和/或异常处理方法。

本发明提供的富媒体内容的视频播放系统和方法，将多中富媒体元素组合为多个通道的富媒体内容，其中包括控制通道，经过编码、传输和解码后，根据控制通道的脚本进行富媒体内容的播放呈现，更好地利用富媒体的表现形式，扩充富媒体应用范围。

附图说明

图1示出本发明的富媒体内容的视频播放系统的一个实施例的系统示意图；

图2示出本发明的富媒体内容的视频播放系统的另一个实施例的系统示意图；

图3示出本发明的富媒体内容呈现系统的一个示例的框图；

图4示出本发明的富媒体内容的视频播放方法的一个实施例的流程图；

图5示出本发明的富媒体内容的视频播放方法的另一个实施例的流程图；

图6示出本发明的一个应用例的流程图。

具体实施方式

下面参照附图对本发明进行更全面的描述，其中说明本发明的示例性实施例。在附图中，相同的标号表示相同或者相似的组件或者元素。

图1示出本发明的富媒体内容的视频播放系统的一个实施例的系统示意图。如图1所示，该视频播放系统包括富媒体内容生产系统11、富媒体内容编码系统12、富媒体内容解码系统14和富媒体内容呈现系统15。其中，富媒体内容生产系统11用于将多种富媒体元素组合为多个通道的富媒体内容，该富媒体内容包括控制通道和至少两个数据通道，并且每个富媒体通道包括通道标识。将交互式脚本、标签和控制对象组合为控制通道，将动画、声音、视频、矢量图、图像、文件等其他富媒体元素组合为数据通道。富媒体内容生产系统11将生成的数据通道的富媒体内容发送给富媒体内容编码系统12进行处理，将控制通道的富媒体内容通过富媒体内容传输网络13进行传输。富媒体内容编码系统12，用于接收富媒体内容生产系统11输出的数据通道的富媒体内容，将接收的富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络13进行传输。富媒体内容传输网络13能够接收、传输富媒体内容，并无损伤的传递富媒体内容的内容源标识以及通道标识。富媒体内容解码系统14，用于接收来自富媒体内容传输网络13的富媒体流，对接收的富媒体流进行解码后还原为数据通道的富媒体内容；将解码得到的数据通道的富媒体内容和通道标识传递给富媒体内容呈现系统15。富媒体内容呈现系统15，用于接收富媒体内容解码系统14解码后的数据通道的富媒体内容，通过富媒体内容传输网络13获得控制通道的富媒体内容，对数据通道和控制通道的富媒体内容进行解析并播放呈现。

根据本发明的一个实施例，控制通道的富媒体内容在富媒体内容生产系统生成后直接传输到富媒体内容呈现系统，不经过富媒体内容编码系统进行编码处理。富媒体内容呈现系统15通过主动获取的方式获得控制通道的富媒体内容。根据本发明的另一个实施例，控制通道的富媒体内容被主动推送到富媒体内容呈现系统15。通过将控制通道和数据通道的内容进行分离，为富媒体内容的生成、传输、控制和管理提供更大的灵活性和自由度。

图2示出本发明的富媒体内容的视频播放系统的另一个实施例的系统示意图。如图2所示，该视频播放系统包括富媒体内容生产系统21、富媒体内容编码系统22、富媒体内容解码系统24和富媒体内容呈现系统25。和图1相比，图2中的富媒体内容生产系统21生成多个通道的富媒体内容后，将数据通道和控制通道的富媒体内容都发送给富媒体内容编码系统22。富媒体内容编码系统22将接收的富媒体内容(包括数据通道和控制通道)经过编码后生成富媒体流，通过富媒体内容传输网络13进行传输。富媒体内容解码系统24，用于接收来自富媒体内容传输网络13的富媒体流，对接收的富媒体流进行解码后还原为数据通道和控制通道的富媒体内容；将解码得到的富媒体内容和通道标识传递给富媒体内容呈现系统25。富媒体内容呈现系统25，用于接收富媒体内容解码系统24解码后的数据通道和控制通道的富媒体内容，对数据通道和控制通道的富媒体内容进行解析并播放呈现。在该实施例中，控制通道和数据通道的内容一起被编码和传输，便于保持内容的同步和完整性。

下面介绍一个生成富媒体流以及富媒体流格式的例子。

在富媒体内容编码系统中，通过由客户端向编码服务器发出流创建命令，服务器端响应，从而生成富媒体流。流创建命令的格式参见下表1：

字段名称	类型	说明
			Command	string	创建富媒体流命令
Sequence ID	int	唯一标识命令ID
			Reserved	obj	保留对象

表1

服务器端响应结果如下表2：

字段名称	类型	说明
			Command	string	返回创建富媒体流命令
Sequence ID	int	唯一标识命令ID
			Stream ID	choice	返回创建的流的数组
Reserved	obj	保留对象

表2

其中，每个Stream ID标识一个富媒体流，每个富媒体流由数据包(data)或对象包(object)组成，数据包用于传输音视频等内容，对象包用于传输脚本对象等内容。将媒体流数据和对象数据组成一个富媒体流后得到的结构如下表3：(0表示一个富媒体流，1表示另一个富媒体流)

消息头0

消息数据0

消息头1

消息数据1

表3

每个消息头用于表示该媒体流包含的数据内容，消息头的结构如下：

消息类型

有效数据长度

时间戳

所属Stream ID

表4

数据包与一般的流媒体传输中的音视频数据包类似，在此不再详细解释。对象包的结构如下：

消息头

对象名称

版本号

标志位

事件类型

事件数据长度

事件数据

...

表5

对象包中的事件可以被富媒体内容呈现系统解析后对媒体流进行处理。

富媒体内容生产系统生产的富媒体内容分为数据通道和控制通道，每个通道都是一种富媒体元素，多个通道组成的富媒体内容具有丰富的表现形式。根据本发明的富媒体内容的视频播放系统的一个实施例，富媒体内容生产系统使用XML协议的标签表示富媒体的特征和元素，使用XML协议的标签携带通道标识，支持使用XML协议的标签携带内容源标识。富媒体内容呈现系统，能够识别富媒体内容的通道标签，运行富媒体控制通道中的交互式脚本，将多个通道的富媒体内容根据通道标签及交互式脚本进行视频合成后播放呈现。

富媒体内容生产系统产生的富媒体内容可使用通过XML协议自定义标签对播放通道(即富媒体内容的通道)进行标识；XML协议自定义标签包含媒体内容分类定义、媒体内容信息定义和媒体内容触发事件定义。

图3示出本发明的富媒体内容呈现系统的一个示例的框图。如图3所示，该富媒体内容呈现系统35包括内容接收模块351、XML解析模块352和内容播放模块353。其中，内容接收模块351用于接收数据通道和控制通道的富媒体内容，将控制通道的富媒体内容发送到XML解析模块352，将数据内容发送到内容播放模块353。XML解析模块352用于对接收的控制通道的富媒体内容进行解析，获得脚本指令，将脚本指令发送给内容播放模块353。内容播放模块353用于接收数据通道的媒体内容和脚本指令，根据脚本指令对数据通道的内容进行处理和呈现。

根据本发明的富媒体内容的视频播放系统的一个实施例，交互式脚本基于ECMAScript标准并对其进行扩展，包含用户鉴权、业务鉴权、业务计费、版权保护、内容举报、特效处理和/或异常处理方法。例如，交互式脚本遵循ECMAScript标准，采用JavaScript语言进行编写，创建一些交互式应用所需要的对象，如广告Adobj，并为这个对象创建一些方法和属性，如playad()，stopad()，showad(width，highth)，hidead()，通过这些应用脚本实现视频广告的播放、暂停、显示、隐藏等操作，交互式脚本的解析由富媒体内容呈现系统完成。

下面提供一个控制通道的XML表示的例子。在该例子中，控制通道的xml格式描述了两个通道，一个通道是主视频(不透明)，播放影片“赤壁”，满屏播放(屏幕尺寸530＊420)，另一个通道是广告视频，在主视频播放到第10分钟时开始，持续时间5分钟，播放窗口在右下角，大小为50＊40，叠加窗口的透明度为50％。

“

<？xml version＝″1.0″encoding＝″UTF-8″？>

<Channel Type>Video</Channel Type>

</Channel>

<Channel Type>Video</Channel Type>

</Channel>

”

图4示出本发明的富媒体内容的视频播放方法的一个实施例的流程图。

如图4所示，在步骤402，将多种富媒体元素组合为富媒体内容，富媒体内容包括控制通道和至少两个数据通道，每个富媒体通道包括通道标识；其中，将交互式脚本、标签和控制对象组合为控制通道，将其他富媒体元素组合为数据通道。富媒体内容生产系统组合所需的富媒体内容相关的各种元素，形成数据通道；通过XML协议的标签方式组织其内容元素，产生内容源标识、内容通道标识等标签，加入交互式脚本后形成控制通道。

在步骤404，将数据通道的富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络进行传输。将需要达到播放效果的多个数据通道的富媒体内容传入编码系统，进行编码计算，将控制通道的富媒体内容传入富媒体内容传输网络。

在步骤406，接收来自富媒体内容传输网络的富媒体流，对富媒体流进行解码后还原为所述数据通道的富媒体内容，并获得数据通道的通道标识。对接收到的富媒体内容进行解码，对富媒体内容的通道标签进行解析，解码后生成原始的数据通道的富媒体内容，每个富媒体内容都使用控制通道中的信息进行标识。

在步骤408，获得控制通道的富媒体内容，对数据通道和控制通道的富媒体内容进行解析并播放呈现。富媒体解码系统将解码生成的富媒体内容传递给内容呈现系统，传输系统将控制通道的内容传递给内容呈现系统，内容呈现系统将获取的多个富媒体内容根据控制通道进行合成播放，以达到最终的呈现效果

图5示出本发明的富媒体内容的视频播放方法的另一个实施例的流程图。

如图5所示，在步骤502，将多种富媒体元素组合为富媒体内容，富媒体内容包括控制通道和至少两个数据通道，每个富媒体通道包括通道标识；其中，将交互式脚本、标签和控制对象组合为控制通道，将其他富媒体元素组合为数据通道。例如，富媒体内容生产系统对采集的视频内容进行制作，编辑导演、演员、字幕等信息，这些信息采用xml格式进行存储；在视频内容中添加广告，编辑视频内容，在XX分钟时调用脚本函数，播放某个视频广告，视频广告的内容元数据采用xml格式进行存储。组合后的富媒体内容具体表现为一个带有标签和脚本的控制通道，一个包括视频内容的数据通道，另一个为需要播放的广告内容的数据通道。

在步骤504，将数据通道和控制通道的富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络进行传输。例如，通过富媒体内容编码系统22对内容进行编码操作，将富媒体内容编码成适合电信业务平台的格式(例如，3GP封装的H.264)。

在步骤506，接收来自富媒体内容传输网络的富媒体流，对富媒体流进行解码后还原为数据通道和控制通道的富媒体内容，获得各个通道的通道标识。

在步骤508，运行富媒体控制通道中的交互式脚本的功能，根据每个富媒体内容的通道标签，将多个富媒体内容根据通道标签及交互式脚本进行视频合成后播放呈现。

图6示出本发明的一个应用例的流程图。

如图6所示，在步骤602，富媒体内容生产系统产生的数据通道C1，C2；控制通道C3：XML格式的数据标签和交互式脚本。其中，在C3控制通道中编写脚本函数，要求对C1和C2内容通道进行叠加，产生立体的视觉效果，并要求对于用户点击C2内容的操作，弹出与C2相关的内容介绍，C2内容介绍的相关数据使用XML标签进行标识。

在步骤602，富媒体内容编码系统对富媒体内容进行编码，通过媒体内容传输网络进行传输。

在步骤606，富媒体内容解码系统对富媒体流进行解码，将还原后的多通道富媒体内容传输给富媒体内容呈现系统。

在步骤608，富媒体内容呈现系统接收富媒体内容，并使用XML脚本解析模块解析C3通道的脚本；

在步骤610，富媒体内容呈现系统的内容播放模块根据XML解析模块得到的脚本指令，对C1和C2通道进行叠加处理，并在用户点击C2时显示相关的内容信息。

本发明的描述是为了示例和描述起见而给出的，而并不是无遗漏的或者将本发明限于所公开的形式。很多修改和变化对于本领域的普通技术人员而言是显然的。选择和描述实施例是为了更好说明本发明的原理和实际应用，并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。

Claims

1.一种富媒体内容的视频播放系统，其特征在于，包括：

富媒体内容生产系统，用于将多种富媒体元素组合为富媒体内容，所述富媒体内容包括控制通道和至少两个数据通道，每个富媒体通道包括通道标识；其中，将交互式脚本标签和控制对象组合为控制通道，将其他富媒体元素组合为数据通道；

富媒体内容编码系统，用于接收所述富媒体内容生产系统输出的数据通道的富媒体内容，将接收的富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络进行传输；

富媒体内容解码系统，用于接收来自所述富媒体内容传输网络的富媒体流，对接收的所述富媒体流进行解码后还原为所述至少两个数据通道的富媒体内容；将解码得到的所述数据通道的富媒体内容和通道标识传递给富媒体内容呈现系统；

所述富媒体内容呈现系统，用于接收所述富媒体内容解码系统解码后的所述至少两个数据通道的富媒体内容，获得所述控制通道的富媒体内容，对所述至少两个数据通道和所述控制通道的富媒体内容进行解析并播放呈现。

2.根据权利要求1所述富媒体内容的视频播放系统，其特征在于，所述控制通道的富媒体内容在所述富媒体内容生产系统生成后直接传输到所述富媒体内容呈现系统。

3.根据权利要求1所述富媒体内容的视频播放系统，其特征在于，所述富媒体内容编码系统对所述数据通道和控制通道的富媒体内容进行编码生成富媒体流，通过所述富媒体内容传输网络进行传输；所述富媒体内容解码系统对接收的所述富媒体流进行解码后还原为所述数据通道和控制通道的富媒体内容，将解码得到的所述数据通道和控制通道的富媒体内容和通道标识传递给富媒体内容呈现系统。

4.根据权利要求1至3中任意一项所述的富媒体内容的视频播放系统，其特征在于，所述富媒体内容生产系统使用XML协议的标签表示富媒体的特征和元素，使用XML协议的标签携带通道标识；

所述富媒体内容呈现系统，能够识别富媒体内容的通道标签，运行富媒体控制通道中的交互式脚本，将多个通道的富媒体内容根据通道标签及交互式脚本进行视频合成后播放呈现。

5.根据权利要求4所述的富媒体内容的视频播放系统，其特征在于，所述富媒体内容呈现系统包括：

内容接收模块，用于接收所述数据通道和控制通道的富媒体内容，将所述控制通道的富媒体内容发送到XML解析模块，将数据通道的富媒体内容发送到内容播放模块；

所述XML解析模块，用于对接收的所述控制通道的富媒体内容进行解析，获得脚本指令，将所述脚本指令发送给所述内容播放模块；

所述内容播放模块，用于接收所述数据通道的媒体内容和所述脚本指令，根据所述脚本指令对所述数据通道的内容进行处理和呈现。

6.根据权利要求1至3中任意一项所述的富媒体内容的视频播放系统，其特征在于，所述富媒体内容生产系统产生的富媒体内容可使用通过XML协议自定义标签对富媒体内容的通道进行标识；所述XML协议自定义标签包含媒体内容分类定义、媒体内容信息定义和媒体内容触发事件定义。

7.根据权利要求1至3中任意一项所述的富媒体内容的视频播放系统，其特征在于，所述交互式脚本基于ECMAScript标准并对其进行扩展，包含用户鉴权、业务鉴权、业务计费、版权保护、内容举报、特效处理和/或异常处理方法。

8.一种富媒体内容的视频播放方法，其特征在于，包括：

将多种富媒体元素组合为富媒体内容，所述富媒体内容包括控制通道和至少两个数据通道，每个富媒体通道包括通道标识；其中，将交互式脚本、标签和控制对象组合为控制通道，将其他富媒体元素组合为数据通道；

将所述数据通道的富媒体内容经过编码后生成富媒体流，通过富媒体内容传输网络进行传输；

接收来自所述富媒体内容传输网络的富媒体流，对所述富媒体流进行解码后还原为所述至少两个数据通道的富媒体内容，并获得各个数据通道的通道标识；

获得所述控制通道的富媒体内容，对所述至少两个数据通道和控制通道的富媒体内容进行解析并播放呈现。

9.根据权利要求8所述的富媒体内容的视频播放方法，其特征在于，

所述控制通道的富媒体内容在生成后不经过编码直接传输到富媒体内容呈现系统进行解析并播放呈现；

或者，

所述数据通道和控制通道的富媒体内容进行编码生成富媒体流，通过所述富媒体内容传输网络进行传输；

对接收的所述富媒体流进行解码后还原为所述数据通道和控制通道的富媒体内容，将解码得到的所述数据通道和控制通道的富媒体内容和通道标识传递给所述富媒体内容呈现系统进行解析并播放呈现。

10.根据权利要求8或9所述的富媒体内容的视频播放方法，其特征在于，使用通过XML协议自定义标签对富媒体内容的通道进行标识；所述XML协议自定义标签包含媒体内容分类定义、媒体内容信息定义和媒体内容触发事件定义。

11.根据权利要求8或9所述的富媒体内容的视频播放方法，其特征在于，所述交互式脚本基于ECMAScript标准并对其进行扩展，包含用户鉴权、业务鉴权、业务计费、版权保护、内容举报、特效处理和/或异常处理方法。