CN101052038A

CN101052038A - 一种基于通讯协议的媒体流数据处理方法及装置

Info

Publication number: CN101052038A
Application number: CN 200610083231
Authority: CN
Inventors: 吴平
Original assignee: Huawei Technologies Co Ltd
Current assignee: Huawei Technologies Co Ltd
Priority date: 2006-05-31
Filing date: 2006-05-31
Publication date: 2007-10-10

Abstract

本发明提供了一种基于通讯协议的媒体流数据处理方法及装置，涉及通讯领域。本发明针对现有技术下，通讯装置中的媒体处理功能无法满足用户要求的情况，提供了媒体播放和媒体发送两种业务。通过该技术方案，用户可以在享受到通讯装置提供的通讯能力的同时，充分利用其它媒体处理设备强大的媒体处理能力，综合获取一个高质量的服务。

Description

一种基于通讯协议的媒体流数据处理方法及装置

技术领域

本发明涉及通讯领域，具体的说是可以实现通讯终端通讯控制和媒体处理分离的一种基于通讯协议的媒体流数据处理方法及装置。

背景技术

现有技术下，手机等通讯终端利用其本身自带的媒体处理功能进行媒体播放已经是比较成熟的技术，手机通过登陆服务器或建立终端用户间的视频连接，进行视频播放。但这种技术存在的缺点是：

1、受屏幕限制，无法提供高质量的大画面视频。

2、受手机软硬件限制，难以提供多种视频编解码方式。

另外还有一种点击业务技术方案：在该技术方案中，一个业务区分为两个设备，一个是控制设备，一个是媒体处理设备。控制设备在通讯的过程中，将媒体设备的地址通知对端。对端在发送媒体流的时候，就将媒体流发送到要求的媒体处理设备上。这种技术方案的缺点在于：

1、要求媒体处理设备也有对端通讯能力。

2、需要通讯双方支持的通讯协议具备强大的通讯协商能力，能够对信令流和媒体流分别处理和路由。目前大部分通讯协议都不支持，因此，应用范围小。

3、通讯网络需要了解通讯控制设备媒体处理设备的绑定关系，否则，可能存在非法攻击。由于存在绑定关系，通讯控制设备和媒体处理设备实际分离并不彻底，不能灵活更改两者的关系。

而对于现有技术下的IPTV技术，采用电视+机顶盒的形式。改变了以往电视只能单向接收的功能。机顶盒通过广播电视网络的通讯，实现视频点播和其它一些附加服务。

其不足之处则是：

1、IPTV主要是向内容服务器获取或定制服务，不能实现用户的端到端之间的连接，更无法建立多方连接，如会议。

2、IPTV主要是单向业务。不能提供双向视频服务。

发明内容

为了克服现有技术中的不足，本发明提供了一种基于通讯协议的媒体流数据处理方法及装置。通过该技术方案，用户可以在享受到通讯装置提供的通讯能力的同时，充分利用其它媒体处理设备强大的媒体处理能力，综合获取一个高质量的服务。

本发明采用的技术方案如下所述：

1、一种基于通讯协议的媒体流数据处理方法，其过程包括：

A、媒体控制终端和对端通过通讯协议建立联系；

B、媒体控制终端和近端媒体设备通过两者之间的近端通讯通道进行媒体流数据的传送。

近端媒体设备包括近端媒体播放设备，其工作步骤如下：

A、媒体控制终端和对端通过通讯协议建立联系，并接收对端的媒体流数据；

B、所述媒体控制终端收到所述媒体流数据后，通过近端通讯通道将媒体流数据分发到近端媒体播放设备进行播放。

步骤B具体包括：所述媒体控制终端根据近端通讯协议，将媒体流数据发送到近距离通讯接口，进而发给近端媒体播放设备进行解码、播放。

步骤B还包括：媒体控制终端依据媒体重定向交换关系，将媒体流数据重定向至近端媒体播放设备。

近端媒体设备包括近端媒体采集设备，其工作步骤如下：

A、媒体控制终端和对端通过通讯协议建立联系；

B、近端媒体采集设备将采集到的媒体流数据整理汇总，并由近端通讯通道发送给媒体控制终端；

C、媒体控制终端将汇总处理后的媒体流数据发送给对端用户。

步骤B中，近端媒体采集设备采集到的媒体流数据进行整理汇总后，根据近端通讯协议，通过近距离通讯端口映射、复用，传递给媒体控制终端。

步骤B还包括：近端媒体采集设备依据媒体接收交换关系，将媒体流数据发送至媒体控制终端。

一种基于通讯协议的媒体流数据处理装置，包括媒体控制终端和近端媒体设备，媒体控制终端和近端媒体设备之间设有近端通讯通道，近端媒体设备通过所述近端通讯通道传输媒体流数据。

所述近端通讯通道包括数据线和近距离通讯接口，媒体控制终端通过数据线连接近端媒体设备上设置的近距离通讯接口。

所述近端媒体设备包括近端媒体播放设备和近端媒体采集设备。

所述媒体控制终端包括媒体控制器和数据收发器，近端媒体播放设备包括媒体解码器和媒体播放器。

所述媒体控制终端包括媒体控制器、数据收发器和媒体解码器，近端媒体播放设备包括媒体播放器。

当数据收发器和至少2个的媒体解码器进行连接时，媒体控制终端上设置重定向接口，使媒体流数据能够重定向到媒体解码器上。

所述近端媒体采集设备包括数据采集器和媒体编码器，媒体控制终端包括媒体控制器和数据收发器。

所述近端媒体采集设备包括数据采集器，媒体控制终端包括媒体编码器、媒体控制器和数据收发器。

当数据收发器和至少2个的媒体编码器进行连接时，媒体控制终端上设置媒体接收端口，使媒体流数据能够被媒体控制终端接收。

通过该技术方案，有效地实现了通讯领域和影像领域的优势互补。媒体控制器/数据收发器可以采用目前通讯领域成熟的手机或电脑作为原型进行升级，充分利用了手机或电脑通讯控制能力强。以及手机移动性，安全性高等特点。媒体编码器/媒体解码器可以采用VCD，DVD或个人电脑等外设进行升级，充分利用这些设备强大的编解码能力。媒体播放器和媒体采集器无特殊要求，可以采用目前流行的任何设备。通过这些设备的组合，实现更好的业务体验。

附图说明

下面结合附图对本发明进一步说明。

图1为本发明的一种基于通讯协议的媒体流数据处理方法及装置的原理流程图；

图2为本发明的一种基于通讯协议的媒体流数据处理方法及装置的原理流程图

图3为本发明的一种基于通讯协议的媒体流数据处理方法及装置的媒体播放的流程框图；

图4为本发明的一种基于通讯协议的媒体流数据处理方法及装置的媒体发送的流程框图。

具体实施方式

下面结合附图和实施例来进一步说明本发明，但并不作为对本发明的限定。

实施例1：

一种播放方法，其工作步骤如下：

B、媒体控制终端由近端通讯通道将媒体流数据分发到近端媒体播放设备进行解码、播放。

媒体控制终端包括媒体控制器和数据收发器，近端媒体播放设备包括媒体解码器和媒体播放器，其工作步骤具体如下：

A、媒体控制器和对端通过通讯协议建立联系，并接收对端的媒体流数据；

B、数据收发器对从对端接收的媒体流数据进行检错、纠错和重传，并将生成的性能指标上报给媒体控制器；

C、媒体控制器根据上述性能指标对数据收发器发出指令，控制数据收发器由近端通讯通道将媒体流数据分发到媒体解码器；

D、媒体解码器将媒体流数据转换后发送至媒体播放器进行播放。

数据收发器将媒体流数据去除链路层、网络层和传输层的封装后，根据媒体控制器的数据转发要求，将媒体净荷发送到和媒体解码器相连的近距离通讯接口，按照两者协商的近端通讯协议，将媒体数据发给媒体解码器进行处理。

当数据收发器和至少2个的媒体解码器进行连接时，数据收发器使媒体流数据能够重定向到媒体解码器上。

媒体控制终端依据媒体重定向交换关系，将媒体流数据重定向至近端媒体播放设备的媒体解码器上。所述重定向交换关系如下表：

媒体流数据	对应媒体播放设备
媒体流数据	对应媒体播放设备	音频数据	音频播放设备的音频解码器
视频数据	视频播放设备的视频解码器	音频数据	音频播放设备的音频解码器

一种播放方法的具体过程如下：

在进行媒体播放功能前，各组成部分进入预备阶段：

1、媒体解码器和媒体播放器建立连接：媒体解码器选用媒体播放器支持的播放格式，作为解码后的格式输出。

2、数据收发器和媒体解码器建立连接：连接方式包括，红外连接，蓝牙技术，无线局域网等。建立连接可选的方式如：在数据接收器和媒体解码器分别进行手工选择和设置，保证两边一致等。

3、媒体控制器获取媒体解码器的解码能力：媒体控制器获取媒体解码器的解码能力，可选的方式如：通过手工设置或两者的自动协商，在媒体控制器上，确定媒体解码器的解码能力集。

当预备阶段完成后，进行媒体播放功能的流程如下：

1、外部媒体处理功能启动。

如果通讯协议没有媒体协商能力，则在通讯连接建立前进行媒体协商。媒体控制终端先读出内部的配置文件，确定装置支持的媒体处理的能力集。如果通讯建立前需要进行媒体协商，则将媒体处理能力的信息在通讯交互中给出。同时，下发配置命令给数据收发器，使数据收发器和各近端媒体处理设备建立数据通道。如果媒体控制器和媒体解码器之间存在控制通道，也可下发命令给媒体控制器，使其在特定的端口侦听特定格式的媒体流。

2、媒体控制终端和对端建立联系。

建立联系的过程中，可以采用各种通讯协议。

3、媒体流处理。

通讯连接建立完成后，通讯的参与方可以相互收到对端过来的媒体流。数据收发器根据传输协议和媒体控制器的要求，对从对端收到的数据进行检错，纠错和重传。并将错包率，丢包率，重传率，时延，抖动等性能指标上报给媒体控制器。媒体控制器根据数据收发器反馈的统计数据，对数据收发器做出进一步的控制。数据收发器还根据媒体控制器的媒体流转发要求，将数据分发到各媒体解码器进行处理。媒体解码器将数据进行转换后，发给媒体播放器进行播放。

4、媒体重协商。

不同的通讯协议，媒体协商能力各不相同。对于某些通讯协议，允许在连接建立后，重新进行媒体能力协商。媒体控制器可以根据使用者的意愿，和对端协商另外的媒体处理方式。如果媒体重协商成功，则近端媒体处理设备将新的媒体流转发要求发给数据收发器。数据收发器收到命令后，重新转发媒体流给媒体解码器。媒体解码器将数据进行转换后，发给媒体播放器进行播放。

5、连接释放。

通讯双方通过通讯协议结束会话

实施例2：

一种播放装置，包括媒体控制终端和近端媒体播放设备，媒体控制终端和近端媒体播放设备通过近端通讯通道相连，近端媒体播放设备通过所述近端通讯通道接收媒体流数据。

所述近端通讯通道包括数据线和近距离通讯接口，媒体控制终端通过数据线连接近端媒体播放设备上设置的近距离通讯接口。

由于媒体控制器和数据收发器需要接收对端传来的信令和数据。为了减少物理设备冗余，这两个功能模块也可以集成在一起。

所述媒体控制终端还可以包括媒体控制器、数据收发器和媒体解码器，近端媒体播放设备包括媒体播放器。

其中，媒体控制器的主要功能是进行通讯连接建立/释放，媒体格式协商，数据收发控制。

数据收发器的主要功能是完成和对端设备的数据收发。具体是在媒体控制器的控制下，在特定的数据收发端口，在特定的数据传输协议下进行数据收发。媒体流一般采用RTP协议承载。RTP则采用UDP承载，链路层协议则可采用红外、蓝牙或其他协议。数据接收过程中的检错，纠错，重传按照数据传输协议和媒体控制器的控制策略的要求进行。对于重传过程中出现的错包率，丢包率，重传率，时延，抖动等统计指标。数据收发器都可以上报给媒体控制器。媒体控制器可根据这些性能统计指标调整对数据收发器的控制策略。数据收发器将从对端发过来的数据去除链路层，网络层和传输层的包分装后，根据媒体控制器下发的数据转发要求，将媒体净荷发送到和媒体解码器相连的数据发送通道，按照两者协商的近端通讯协议，将媒体数据发给媒体解码器进行处理。

媒体解码器的主要功能是进行媒体格式的解码和视频适配。在本技术方案中，媒体解码器可以有多个。媒体解码器在近端通讯通道接收来自数据收发器的数据。转换成媒体播放器支持的格式后，在和媒体播放器协商好的通道上，将媒体数据或信号发给媒体播放器进行播放。媒体解码器支持多种媒体格式的解码能力。根据媒体控制器和通讯对端进行的媒体协商结果，启动特定的媒体解码器。媒体解码器也可以进行媒体格式自动分析，如果采用这种方式，就无需媒体控制器对其媒体解码格式进行选择。媒体解码器支持的媒体能力需要反馈给媒体控制器，以便媒体控制器在通讯建立前或通讯建立后的媒体协商过程中通知对端。将媒体能力反馈给媒体控制器可选的途径包括直接手工在媒体控制器上对媒体能力进行设置。媒体解码器同时需要了解媒体播放器进行播放的格式，以便在格式转化时，能够转换为正确的格式。媒体解码器了解和设置媒体播放器的播放格式包括直接在媒体解码器上进行参数设置或者媒体解码器和媒体播放器同时支持某个标准。还可以通过不同的物理端口支持不同的播放格式，根据实际应用情况选用不同的物理端口。

媒体播放器的主要功能是进行媒体播放。本发明方案中对媒体播放器没有特殊要求，可以是现在市面流行的任何媒体播放器。

在一个装置中，媒体解码器和媒体播放器可以有多个。对于某些通讯终端，本来就具备了内部的媒体解码器和媒体播放器。多个媒体解码器和媒体播放器的使用是相互独立的。

实施例3：

一种发送方法，其工作步骤如下：

A、近端媒体采集设备将采集到的媒体流数据整理汇总，并由近端通讯通道发送给媒体控制终端；

B、媒体控制终端和对端通过通讯协议建立联系，并将汇总处理后的媒体流数据发送给对端用户。

近端媒体采集设备包括媒体采集器和媒体编码器，媒体控制终端包括数据收发器和媒体控制器，其工作步骤如下：

A、媒体控制器的控制终端和对端通过通讯协议建立联系；

如果通讯协议没有媒体协商能力，则在通讯连接建立前进行媒体协商。媒体控制终端先读出内部的配置文件，确定装置支持的媒体处理的能力集。如果通讯建立前需要进行媒体协商，则将媒体处理能力的信息在通讯交互中给出。同时，下发配置命令给数据收发器，使数据收发器和各媒体编码器建立数据通道。如果媒体控制器和媒体编码器之间存在控制通道，也可下发命令给媒体编码器，使其在特定的端口输出特定格式的媒体流。

B、媒体采集器将采集到的媒体流数据发送到媒体编码器；

通讯连接建立完成后，通讯的参与方可以相互收到对端过来的媒体流。媒体采集器将采集到的数据发给媒体编码器。媒体编码器对媒体采集器上送来的数据进行整理汇总，按协商好的格式送到预定的通道上，发给数据收发器。

C、媒体编码器将媒体流数据整理汇总，再由近端通讯通道发送给对端的数据收发器；

数据收发器根据媒体控制器的媒体流接收要求，将各媒体编码器过来的数据进行汇总处理。再通过已经建立的连接通道，将数据送到对端用户。

D、数据收发器再汇总处理数据后，发送给对端用户。

媒体编码器将媒体采集器采集到的媒体流数据进行整理汇总，再通过近距离通讯端口映射、复用后，传递给数据收发器。

近端媒体采集设备采集到的媒体流数据进行整理汇总后，根据近端通讯协议，通过近距离通讯端口映射、复用，传递给媒体控制终端。

当数据收发器对应至少2个媒体编码器时，数据编码器上的媒体接收端口，使从媒体采集器和媒体编码器上发送来的媒体流数据，可以被数据收发器接收并发送。

近端媒体采集设备依据媒体接收交换关系，将媒体流数据发送至媒体控制终端。所述接收交换关系如下表：

近端媒体采集设备	对应媒体控制终端
近端媒体采集设备	对应媒体控制终端	音频采集设备	媒体控制终端的音频编码器
视频采集设备	媒体控制终端的视频编码器	音频采集设备	媒体控制终端的音频编码器

一种发送方法的具体过程如下：

在进行媒体发送功能前，首先各组成部分进入预备阶段：

1、媒体编码器和媒体采集器建立连接：媒体采集器将信号采集的结果按一定格式输出给媒体编码器，作为媒体编码器的输入。

2、数据收发器和媒体编码器建立连接：在两者采用了不同的物理设备时，需要采用某种连接技术对其进行连接。采用的连接技术包括：红外连接，蓝牙技术，无线局域网等。建立连接可选的方式如在媒体控制器上进行手工没置后，再由媒体控制器启动数据接收器和媒体解码器的连接。

3、媒体控制器获取媒体编码器的编码能力：通过手工设置或两者的自动协商，在媒体控制器上，确定媒体编码器的编码能力集。

当预备阶段完成后，进行媒体发送功能的流程如下：

1、外部媒体处理功能启动。

如果通讯协议没有媒体协商能力，或在通讯连接建立前进行媒体协商。媒体控制终端先读出内部的配置文件，确定装置支持的媒体处理的能力集。如果通讯建立前需要进行媒体协商，则将媒体处理能力的信息在通讯交互中给出。同时，下发配置命令给数据收发器，使数据收发器和各媒体编码器建立数据通道。如果媒体控制器和媒体编码器之间存在控制通道，也可下发命令给媒体编码器，使其在特定的端口输出特定格式的媒体流。

2、媒体控制终端和对端建立联系。建立联系的过程中，可以采用各种通讯协议。

3、媒体流处理。通讯连接建立完成后，通讯的参与方可以相互收到对端过来的媒体流。媒体采集器将采集到的数据发给媒体编码器。媒体编码器对媒体采集器上送来的数据进行整理汇总，按协商好的格式送到预定的通道上，发给数据收发器。数据收发器根据媒体控制器的媒体流接收要求，将各媒体编码器过来的数据进行汇总处理。再通过已经建立的连接通道，将数据送到对端用户。

4、媒体重协商：不同的通讯协议，媒体协商能力各不相同。对于某些通讯协议，允许在连接建立后，重新进行媒体能力协商。媒体控制器可以根据使用者的意愿，和对端协商另外的媒体处理方式。如果媒体重协商成功，则近端媒体处理设备将新的媒体流接收要求发给数据收发器。数据收发器收到命令后，重新接收媒体编码器过来的数据。

5、连接释放。通讯双方通过通讯协议结束会话。

实施例4：

一种发送装置，包括近端媒体采集设备和媒体控制终端，近端媒体采集设备和媒体控制终端通过近端通讯通道相连，所述近端媒体采集设备通过近端通讯通道传输采集处理后的媒体流数据。

媒体收发器、媒体解码器之间的近端通讯通道与媒体收发器、媒体编码器之间的近端通讯通道为同一通道。

所述近端通讯通道包括数据线和近距离通讯接口，媒体控制终端通过数据线连接近端媒体采集设备上设置的近距离通讯接口。

所述媒体控制终端还可以包括媒体控制器、数据收发器和媒体编码器，近端媒体采集设备包括媒体采集器。

其中，媒体控制器的主要功能是进行通讯连接建立，媒体格式协商，数据收发控制。

数据收发器的主要功能是完成和对端设备的数据收发。数据收发器在媒体控制器的控制下，在特定的近端通道，收集汇总从媒体编码器过来的媒体流信息。并在特定的数据收发端口，按照要求的收发带宽，在特定的数据传输协议下进行对端数据收发。

媒体编码器的主要功能是进行媒体格式的转换。媒体编码器支持多种媒体格式的编码能力。根据媒体控制器和通讯对端进行的媒体协商结果，启动特定的媒体编码器。将从采集器上采集到的信号进行汇总和格式转换，通过近端通讯端口将编码后的数据发给数据收发器。媒体编码器支持的媒体能力需要反馈给媒体控制器，以便媒体控制器在通讯建立前或通讯建立后的媒体协商过程中通知对端。将媒体能力反馈给媒体控制器可选的途径包括直接手工在媒体控制器上对媒体能力进行设置。媒体编码器同时需要了解媒体采集器对信号进行采集后输出的数据或信号格式。媒体编码器了解和设置媒体采集器的采集格式，可能的情况包括直接在媒体编码器上进行参数设置或者媒体解码器和媒体播放器同时支持某个标准。还可以通过不同的物理端口支持不同的采集格式，根据实际应用情况选用不同的物理端口。

媒体采集器的主要功能是进行媒体采集。本发明方案中对媒体采集器没有特殊要求，可以是现在市面流行的任何媒体采集器，如摄像设备，麦克风等。

本发明主要分析了媒体控制器/数据收发器同媒体解码器/媒体编码器物理上进行分离的情况。这是考虑到媒体控制器/数据收发器由于存在硬件受限，无法提供强大的媒体编解码能力。如果应用时，只考虑利用外部的媒体播放和媒体采集能力。也可以将媒体编解码集成在媒体控制器上，而将近端通讯模块做在媒体播放器和媒体采集器上。

Claims

1、一种基于通讯协议的媒体流数据处理方法，其特征在于，其过程包括：

A、媒体控制终端和对端通过通讯协议建立联系；

2、根据权利要求1所述的基于通讯协议的媒体流数据处理方法，其特征在于，近端媒体设备包括近端媒体播放设备，其工作步骤如下：

3、根据权利要求2所述的基于通讯协议的媒体流数据处理方法，其特征在于，步骤B具体包括：所述媒体控制终端根据近端通讯协议，将媒体流数据发送到近距离通讯接口，进而发给近端媒体播放设备进行解码、播放。

4、根据权利要求2所述的基于通讯协议的媒体流数据处理方法，其特征在于，步骤B还包括：媒体控制终端依据媒体重定向交换关系，将媒体流数据重定向至近端媒体播放设备。

5、根据权利要求1所述的基于通讯协议的媒体流数据处理方法，其特征在于，近端媒体设备包括近端媒体采集设备，其工作步骤如下：

A、媒体控制终端和对端通过通讯协议建立联系；

C、媒体控制终端将汇总处理后的媒体流数据发送给对端。

6、根据权利要求5所述的基于通讯协议的媒体流数据处理方法，其特征在于，步骤B中，近端媒体采集设备采集到的媒体流数据进行整理汇总后，根据近端通讯协议，通过近距离通讯端口映射、复用，传递给媒体控制终端。

7、根据权利要求5所述的基于通讯协议的媒体流数据处理方法，其特征在于，步骤B还包括：近端媒体采集设备依据媒体接收交换关系，将媒体流数据发送至媒体控制终端。

8、一种基于通讯协议的媒体流数据处理装置，包括媒体控制终端和近端媒体设备，其特征在于，媒体控制终端和近端媒体设备之间设有近端通讯通道，近端媒体设备通过所述近端通讯通道传输媒体流数据。

9、根据权利要求8所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，所述近端通讯通道包括数据线和近距离通讯接口，媒体控制终端通过数据线连接近端媒体设备上设置的近距离通讯接口。

10、根据权利要求9所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，所述近端媒体设备包括近端媒体播放设备和近端媒体采集设备。

11、根据权利要求10所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，所述媒体控制终端包括媒体控制器和数据收发器，近端媒体播放设备包括媒体解码器和媒体播放器。

12、根据权利要求10所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，所述媒体控制终端包括媒体控制器、数据收发器和媒体解码器，近端媒体播放设备包括媒体播放器。

13、根据权利11或12所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，当数据收发器和至少2个的媒体解码器进行连接时，媒体控制终端上设置重定向接口，使媒体流数据能够重定向到媒体解码器上。

14、根据权利要求10所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，所述近端媒体采集设备包括数据采集器和媒体编码器，媒体控制终端包括媒体控制器和数据收发器。

15、根据权利要求10所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，所述近端媒体采集设备包括数据采集器，媒体控制终端包括媒体编码器、媒体控制器和数据收发器。

16、根据权利要求14、15所述的一种基于通讯协议的媒体流数据处理装置，其特征在于，当数据收发器和至少2个的媒体编码器进行连接时，媒体控制终端上设置媒体接收端口，使媒体流数据能够被媒体控制终端接收。