CN101938451B - 显示互动内容的系统、方法及相关装置 - Google Patents

Abstract

本发明公开了一种显示互动内容的系统、方法及相关装置，用以解决现有技术中无法在播放视频的过程中进行各个操作时显示互动内容的问题。该系统包括流媒体业务服务器和流媒体客户端，其中：流媒体业务服务器，用于接收流媒体客户端发来的流媒体控制请求消息，在所述流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容，并向所述流媒体客户端发送已携带互动指令和所述互动指令对应的互动内容的流媒体控制响应消息；流媒体客户端，用于从接收到的流媒体控制响应消息中获得互动指令和互动内容，并根据获得的互动指令，显示获得的互动内容。

Description

显示互动内容的系统、方法及相关装置

技术领域

本发明涉及多媒体技术领域，尤其涉及一种显示互动内容的系统、显示互动内容的方法、一种控制流媒体客户端显示互动内容的方法、一种流媒体业务服务器和一种流媒体客户端。

背景技术

移动流媒体业务是指用户通过移动电话、个人数字助理(PDA，PersonalDigital Assistant)等移动终端，借助于无线通信网络，实现在线观看视频、上传视频文件、下载视频文件等操作。请参照附图1，为现有的移动流媒体技术中，用户观看视频时，移动终端与流媒体业务服务器之间交互过程的示意图。

步骤101，移动终端向流媒体业务服务器发送页面请求消息；

步骤102，流媒体业务服务器向移动终端发送步骤101中的页面请求消息对应的页面请求响应消息，该响应消息中包含业务内容链接，例如rtsp://example.com；

步骤103，移动终端接收到页面请求响应消息后，通过点击其中的业务内容链接，触发移动终端中的流媒体客户端，该流媒体客户端向流媒体业务服务器发送RTSP描述文件请求消息；

步骤104，流媒体业务服务器接收到RTSP描述文件请求消息后，向流媒体客户端发送对应的RTSP响应消息，该响应消息中包含媒体描述文件SDP(Session Description Protocol)；

步骤105，移动终端中的流媒体客户端从流媒体业务服务器发来的RTSP响应消息中获知媒体描述文件后，向流媒体业务服务器发送实时流协议建立(RTSP SETUP，Real-Time Streaming Protocol SETUP)请求消息，请求建立数据传输通道；

步骤106，流媒体业务服务器接收到RTSP SETUP请求消息后，向移动终端中的流媒体客户端发送RTSP 200 OK响应消息；

步骤107，移动终端中的流媒体客户端向流媒体业务服务器发送用于请求播放视频的RTSP播放请求消息PLAY；

步骤108，流媒体业务服务器向移动终端中的流媒体客户端发送PLAY请求消息对应的响应消息RTSP 200 OK；

步骤109，流媒体业务服务器向流媒体客户端发送实时传送协议(RTP，Real-time Transport Protocol)媒体数据包；

步骤110，媒体客户端接收到RTP媒体数据包后，播放该数据包对应的媒体内容；

步骤111，用户在需要暂停播放时，向流媒体业务服务器发送暂停请求消息Pause；

步骤112，流媒体业务服务器接收到暂停请求消息后，停止发送RTP媒体数据包，并向媒体客户端发送Pause请求消息对应的响应消息RTSP 200 OK；

步骤113，内容播放结束后，流媒体客户端向流媒体业务服务器发送断开请求消息(或称之为停止请求消息)RTSP TEARDOWN；

步骤114，流媒体业务服务器接收到断开请求消息RTSP TEARDOWN后，向流媒体客户端发送该消息对应的响应消息RTSP 200 OK。

上述流媒体客户端向流媒体业务服务器发送的RTSP描述文件请求消息、RTSP SETUP请求消息、RTSP播放请求消息等被称为流媒体控制请求消息，流媒体业务服务器对应流媒体控制请求消息发送的RTSP 200 OK消息被称为流媒体控制响应消息。

移动流媒体互动业务是指基于移动流媒体技术实现的具有用户交互能力的增值业务，例如面向移动网络的DIMS(Dynamic and Interactive MultimediaScenes)技术和面向活动图像专家组(MPEG，Motion Picture Experts Group)视频体系结构的LASeR(Lightweight Application Scene Representation)技术等。DIMS技术和LASeR技术通过将流媒体视频业务和图片文字等互动内容元素组合到一起以扩展终端屏幕上的媒体元素，即在上述步骤109中流媒体业务服务器将互动内容与流媒体视频数据结合而获得的RTP媒体数据发送给流媒体客户端，从而使移动终端的界面可以在播放多媒体视频数据的同时显示互动内容。

然而，上述方案只能提供互动场景和与视频同步的互动内容，即在播放视频的同时显示互动内容，而无法在整个视频播放过程中的开始、暂停、停止等时机显示互动内容以及进行互动操作。

发明内容

本发明实施例提供一种显示互动内容的系统，用以解决现有技术中流媒体客户端无法在播放视频的过程中进行各个操作时显示互动内容的问题。

本发明实施例还提供了一种显示互动内容的方法，流媒体客户端采用该方法来显示互动内容。

本发明实施例还提供了一种控制流媒体客户端显示互动内容的方法，流媒体业务服务器采用该方法来控制流媒体客户端显示互动内容。

对应地，本发明实施例还提供了一种用来实施上述方法的流媒体业务服务器和流媒体客户端。

本发明实施例提供的技术方案如下：

一种显示互动内容的系统，包括流媒体业务服务器和流媒体客户端，其中：

流媒体业务服务器，用于接收流媒体客户端发来的流媒体控制请求消息，在所述流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容，并向所述流媒体客户端发送已携带互动指令和所述互动指令对应的互动内容的流媒体控制响应消息；

流媒体客户端，用于从接收到的流媒体控制响应消息中获得互动指令和互动内容，并根据获得的互动指令，显示获得的互动内容。

一种显示互动内容的方法，包括：流媒体客户端接收流媒体业务服务器发来的流媒体控制响应消息，所述流媒体控制响应消息中携带有互动指令和所述互动指令对应的互动内容；并从接收到的流媒体控制响应消息中获得互动指令和互动内容；以及根据获得的互动指令，显示获得的互动内容。

一种控制流媒体客户端显示互动内容的方法，包括：流媒体业务服务器接收流媒体客户端发来的流媒体控制请求消息；并在所述流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容；并将已携带互动指令和互动内容的流媒体控制响应消息发送给流媒体客户端。

一种流媒体业务服务器，包括：接收单元，用于接收流媒体控制请求消息；携带单元，用于在接收单元接收到的流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容；发送单元，用于发送已携带互动指令和所述互动指令对应的互动内容的流媒体控制响应消息。

一种流媒体客户端，包括：接收单元，用于接收流媒体控制响应消息；获取单元，用于从接收单元接收到的流媒体控制响应消息中获得互动指令和互动内容；第一显示单元，用于根据获取单元获得的互动指令，显示获取单元获得的互动内容。

本发明实施例通过流媒体业务服务器在流媒体控制响应消息中携带互动指令和该互动指令对应的互动内容，并将已携带有互动指令和互动内容的流媒体控制响应消息发送给流媒体客户端，流媒体客户端从接收到的流媒体控制响应消息中获得互动指令和互动内容，并根据获得的互动指令，显示获得的互动内容的技术方案，解决了现有技术无法在播放视频过程中的各个操作处理时实现互动业务的问题。

附图说明

图1为现有技术在播放多媒体视频的过程中，移动终端与流媒体业务服务器之间交互过程的示意图；

图2为本发明实施例的主要实现原理流程图；

图3为本发明实施例提出的基于流媒体业务实现互动业务的方案的流程示意图；

图4为本发明实施例提出的流媒体业务服务器的结构示意图；

图5为本发明实施例提出的流媒体客户端的结构示意图。

具体实施方式

由于现有的基于流媒体业务实现互动业务的技术方案是将互动内容和流媒体视频数据结合后，由流媒体客户端显示结合后的视频数据，因而只能在播放视频的同时显示互动内容，而无法在点击播放指令后，在播放媒体视频数据前的时间段、或暂停、停止等操作时展示互动内容。本发明实施例通过由流媒体客户端从流媒体控制响应消息中获取流媒体业务服务器携带在该响应消息中的互动指令和互动内容，并根据获得的互动指令，显示获得的互动内容，解决了现有技术的上述问题。

下面结合各个附图对本发明实施例技术方案的主要实现原理、具体实施方式及其对应能够达到的有益效果进行详细的阐述。

如图2所示，本发明实施例的主要实现原理流程如下：

步骤10，流媒体业务服务器在流媒体控制响应消息中携带互动指令和该互动指令对应的互动内容，并把已携带有互动指令和互动内容的流媒体响应消息发送给流媒体客户端；

步骤20，流媒体客户端从接收到的流媒体控制响应消息中获得互动指令和互动内容；

步骤30，流媒体客户端根据步骤20中获得的互动指令，显示步骤20中获得的互动内容。

下面将依据本发明上述发明原理，详细介绍一个实施例来对本发明方法的主要实现原理进行详细的阐述和说明。

请参照附图3，为本发明实施例提出的基于流媒体业务实现互动业务的方案的流程图，其中步骤301～305与现有技术相似，

步骤301，移动终端向流媒体业务服务器发送页面请求消息；

步骤302，流媒体业务服务器向移动终端发送步骤301中的页面请求消息对应的页面请求响应消息，该响应消息中包含业务内容链接；

步骤303，移动终端接收到页面请求响应消息后，通过点击其中的业务内容链接，触发移动终端中的流媒体客户端，该流媒体客户端向流媒体业务服务器发送RTSP描述文件请求消息；

步骤304，流媒体业务服务器接收到RTSP描述文件请求消息后，向流媒体客户端发送对应的RTSP响应消息，该响应消息中包含媒体描述文件SDP；

步骤305，移动终端中的流媒体客户端从流媒体业务服务器发来的RTSP响应消息中获知媒体描述文件后，向流媒体业务服务器发送RTSP SETUP请求消息，请求建立数据传输通道；

步骤306，流媒体业务服务器接收到RTSP SETUP请求后，向流媒体业务服务器发送RTSP SETUP请求对应的响应消息RTSP 200 OK；

步骤307，移动终端中的流媒体客户端向流媒体业务服务器发送用于请求播放视频的RTSP播放请求消息；

步骤308，流媒体业务服务器在流媒体播放请求对应的响应消息中携带互动指令Command1和该互动指令对应的互动内容Content1，并将已携带互动指令Command1和互动内容Content1的RTSP 200 OK响应消息发送给移动终端，其中流媒体业务服务器可以在接收到移动终端发送的流媒体控制请求消息后，从互动业务服务器中获取要携带的互动指令和互动内容；此外，互动指令和互动指令对应的互动内容也可以是预先存储在流媒体业务服务器中的；流媒体业务服务器可以有多种方式来获得要携带在控制响应消息中的互动指令和互动内容；

步骤309，流媒体客户端接收到流媒体业务服务器发来的携带互动指令和互动内容的流媒体播放请求对应的响应消息后，从该响应消息中读取互动指令和互动内容，并根据读取的互动指令Command1，显示该响应消息中携带的互动内容Content1；

步骤310，流媒体客户端接收流媒体业务服务器发来的RTP媒体数据包，接收RTP媒体数据包可以在步骤309之后，也可以与步骤309中的显示互动内容的过程可以同步地完成；

步骤311，流媒体客户端播放步骤310中接收到的RTP媒体数据包对应的媒体内容；

步骤312，移动终端中的流媒体客户端向流媒体业务服务器发送流媒体暂停请求消息；

步骤313，流媒体业务服务器接收到流媒体暂停请求消息后，在该请求对应的响应消息中携带互动指令Command2和该互动指令对应的互动内容Content2，并将已携带互动指令Command2和互动内容Content2的RTSP 200OK响应消息发送给移动终端；

步骤314，流媒体客户端接收到流媒体业务服务器发来的携带互动指令和互动内容的流媒体暂停请求对应的响应消息后，从该响应消息中读取互动指令和互动内容，并根据读取的互动指令Command2，显示该响应消息中携带的互动内容Content2；

步骤315，移动终端中的流媒体客户端向流媒体业务服务器发送流媒体停止请求消息；

步骤316，流媒体业务服务器接收到流媒体停止请求消息后，在该请求对应的响应消息中携带互动指令Command3和该互动指令对应的互动内容Content3，并将已携带互动指令Command3和互动内容Content3的RTSP 200OK响应消息发送给移动终端；

步骤317，流媒体客户端接收到流媒体业务服务器发来的携带互动指令和互动内容的流媒体停止请求对应的响应消息后，从该响应消息中读取互动指令和互动内容，并根据读取的互动指令Command3，显示该响应消息中携带的互动内容Content3。

其中，在上述步骤308中流媒体业务服务器在流媒体控制响应消息中携带互动指令和该互动指令对应的互动内容的具体方式具体如下：

将互动指令附加在流媒体控制响应消息的消息头中，同时将互动内容附加在所述流媒体控制响应消息的消息负荷中，例如，在步骤306中流媒体业务服务器接收到RTSP SETUP请求消息的片段如表1所示，

表1 RTSP SETUP请求消息片段

C-＞S：SETUP rtsp://example.com RTSP/1.0CSeq：302Transport：RTP/AVP；unicast；client_port＝4588-4589

已携带互动指令和互动内容的上述RTSP SETUP请求消息对应的响应消息片段如表2所示，

表2 RTSP SETUP请求消息对应的响应消息片段

S-＞C：RTSP/1.0 200 OKCSeq：302Date：23 Jan 1997 15:35:06 GMTSession：47112344X-interactive-code：345Transport：RTP/AVP；unicast；client_port＝4588-4589；server_port＝6256-6257Content-Type：application/soap+xml；charset＝utf-8Content-Length：nnn<svg width＝″100％″height＝″100％″version＝″1.1″xmlns＝″http://www.w3.org/2000/svg″><g transform＝″translate(100，100)″><text id＝″TextElement″x＝″0″y＝″0″style＝″font-family:Verdana；font-size:24；visibility:hidden″>EnjoyMobile TV Now！<set attributeName＝″visibility″attributeType＝″CSS″to＝″visible″begin＝″1s″dur＝″5s″fill＝″freeze″/><animateMotion path＝″M 0 0 L 100 100″begin＝″1s″dur＝″5s″fill＝″freeze″/><animateTransform attributeName＝″transform″attributeType＝″XML″type＝″rotate″from＝″-30″to＝″0″begin＝″1s″dur＝″5s″fill＝″freeze″/><animateTransform attributeName＝″transform″attributeType＝″XML″type＝″scale″from＝″1″to＝″3″additive＝″sum″begin＝″1s″dur＝″5s″fill＝″freeze″/></text></g></svg>

表2中的“X-interactive-code：345”为互动指令，其中“X”为互动指令的标识，数字标识345与一个预定的显示方式相对应，流媒体业务服务器和流媒体客户端中预先存储有数字标识与显示方式之间的对应关系；表2中“<svg”与“</svg>”之间的粗体字部分为互动指令对应的互动内容。

流媒体客户端在接收到流媒体业务服务器发来的流媒体控制响应消息后，首先解析消息头，在消息头部存在互动指令的标识“X”时，表明消息头存在互动指令，获取消息头中的互动指令，并根据互动内容的标签“<svg”与“</svg>”从流媒体控制响应消息负荷中读取互动内容，以及根据互动指令中数字标识345对应的显示方式来显示互动内容。

在步骤313、316中，流媒体业务服务器在流媒体控制响应消息中携带互动指令和互动内容的方式与上述在步骤308中携带互动指令、互动内容的方式类似，在这里不再详述。

本发明实施例通过由流媒体客户端从流媒体控制响应消息中获取流媒体业务服务器携带在该响应消息中的互动指令和互动内容，并根据获得的互动指令，显示获得的互动内容，这样在播放视频数据之前、暂停、停止操作时都能够展示互动内容。并且，采用本发明实施提供的方案利用流媒体控制响应消息来携带互动内容，无需像现有技术一样，需要将互动内容与视频数据结合在一起后，再发送给流媒体客户端，因此与现有技术相比节约了视频数据的数据量，以及流媒体业务服务器向流媒体客户端传输视频数据时占用的传输资源。

相应地，本发明实施例还提供了一种流媒体业务服务器，请参照附图4，该装置包括接收单元401、携带单元402和发送单元403，其中，

接收单元401，用于接收流媒体客户端发来的流媒体控制请求消息；

携带单元401，用于在接收单元401接收到的流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容；

发送单元403，用于发送已携带互动指令和所述互动指令对应的互动内容的流媒体控制响应消息。

较佳地，上述携带单元具体包括第一携带子单元和第二携带子单元，其中，

第一携带子单元，用于将互动指令附加在流媒体控制响应消息的消息头中；

第二携带子单元，用于将互动内容附加在所述流媒体控制响应消息的消息负荷中。

较佳地，请参照附图4，在上述流媒体业务服务器中，还包括请求单元404和接收单元405，

请求单元404，用于在接收单元401接收到流媒体控制请求消息后，向互动业务服务器请求互动指令和互动指令对应的互动内容；

接收单元405，用于接收互动业务服务器根据请求单元的请求发来的互动指令和互动指令对应的互动内容，并将所述互动指令和互动内容提供给携带单元402；

携带单元402将接收单元405接收到的互动指令和互动内容携带在流媒体控制响应消息中。

请参照附图5，本发明实施例还提供了一种流媒体客户端，该客户端包括接收单元501、获取单元502和第一显示单元503，其中，

接收单元501，用于接收流媒体控制响应消息；

获取单元502，用于从接收单元501接收到的流媒体控制响应消息中获得互动指令和互动内容；

第一显示单元503，用于根据获取单元502获得的互动指令，显示获取单元获得的互动内容。

较佳地，上述客户端还包括第二显示单元504，用于在第一显示单元显示完互动内容后，显示流媒体视频数据。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (15)

1.一种显示互动内容的系统，包括流媒体业务服务器和流媒体客户端，其特征在于，其中：

流媒体业务服务器，用于接收流媒体客户端发来的流媒体控制请求消息，在所述流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容，并向所述流媒体客户端发送已携带互动指令和所述互动指令对应的互动内容的流媒体控制响应消息；

其中，所述流媒体控制请求消息包括：流媒体播放请求、流媒体暂停请求和流媒体停止请求；

流媒体客户端，用于从接收到的流媒体控制响应消息中获得互动指令和互动内容，并根据获得的互动指令，显示获得的互动内容。

2.如权利要求1所述的系统，其特征在于，还包括：

互动业务服务器，用于在流媒体业务服务器在接收到流媒体客户端发来的流媒体控制请求消息后，根据流媒体业务服务器的请求，将预先存储的互动内容和互动指令提供给流媒体业务服务器。

3.一种显示互动内容的方法，其特征在于，包括：

流媒体客户端接收流媒体业务服务器发来的流媒体控制响应消息，所述流媒体控制响应消息中携带有互动指令和所述互动指令对应的互动内容；并

从接收到的流媒体控制响应消息中获得互动指令和互动内容；以及

根据获得的互动指令，显示获得的互动内容；

其中，所述流媒体控制响应消息包括：流媒体播放请求对应的响应消息、流媒体暂停请求对应的响应消息和流媒体停止请求对应的响应消息。

4.一种控制流媒体客户端显示互动内容的方法，其特征在于，包括：

流媒体业务服务器接收流媒体客户端发来的流媒体控制请求消息；并

在所述流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容；并

将已携带互动指令和互动内容的流媒体控制响应消息发送给流媒体客户端；

其中，所述流媒体控制请求消息包括：流媒体播放请求、流媒体暂停请求和流媒体停止请求。

5.如权利要求4所述的方法，其特征在于，所述流媒体业务服务器在流媒体控制响应消息中携带互动指令和互动内容，具体包括：

所述流媒体业务服务器将互动指令附加在流媒体控制响应消息的消息头中，以及

将互动内容附加在所述流媒体控制响应消息的消息负荷中。

6.如权利要求4所述的方法，其特征在于，所述互动指令和该互动指令对应的互动内容为流媒体业务服务器在接收到流媒体客户端发来的流媒体控制请求消息后，向预先存储有互动内容和互动指令的互动业务服务器请求获得的。

7.如权利要求4所述的方法，其特征在于，所述互动指令和该互动指令对应的互动内容预先存储在所述流媒体业务服务器中。

8.如权利要求4至7中任一权利要求所述的方法，其特征在于，所述流媒体控制响应消息包括播放请求消息对应的响应消息。

9.如权利要求8所述的方法，其特征在于，流媒体客户端显示完流媒体控制响应消息中携带的互动内容后，还包括：

显示流媒体业务服务器发来的流媒体视频数据。

10.如权利要求8所述的方法，其特征在于，所述流媒体控制响应消息还包括暂停请求消息对应的响应消息和停止请求消息对应的响应消息。

11.一种流媒体业务服务器，其特征在于，包括：

接收单元，用于接收流媒体控制请求消息，所述流媒体控制请求消息包括：流媒体播放请求、流媒体暂停请求和流媒体停止请求；

携带单元，用于在接收单元接收到的流媒体控制请求消息对应的流媒体控制响应消息中携带互动指令和所述互动指令对应的互动内容；

发送单元，用于发送已携带互动指令和所述互动指令对应的互动内容的流媒体控制响应消息。

12.如权利要求11所述的服务器，其特征在于，所述携带单元具体包括：

第一携带子单元，用于将互动指令附加在流媒体控制响应消息的消息头中；

第二携带子单元，用于将互动内容附加在所述流媒体控制响应消息的消息负荷中。

13.如权利要求11或12所述的服务器，其特征在于，还包括：

请求单元，用于在接收单元接收到流媒体控制请求消息后，向互动业务服务器请求互动指令和互动指令对应的互动内容；

接收单元，用于接收互动业务服务器根据请求单元的请求发来的互动指令和互动指令对应的互动内容，并提供给所述携带单元。

14.一种流媒体客户端，其特征在于，包括：

接收单元，用于接收流媒体控制响应消息；

获取单元，用于从接收单元接收到的流媒体控制响应消息中获得互动指令和互动内容；

第一显示单元，用于根据获取单元获得的互动指令，显示获取单元获得的互动内容；

其中，所述流媒体控制响应消息包括：流媒体播放请求对应的响应消息、流媒体暂停请求对应的响应消息和流媒体停止请求对应的响应消息。

15.如权利要求14所述的客户端，其特征在于，还包括：

第二显示单元，用于在第一显示单元显示完互动内容后，显示流媒体视频数据。

Images