CN101321259B

CN101321259B - 多媒体设备控制系统、控制数据传输及处理装置和方法

Info

Publication number: CN101321259B
Application number: CN200710110572A
Authority: CN
Inventors: 廖述钊
Original assignee: Huawei Technologies Co Ltd
Current assignee: Huawei Technologies Co Ltd
Priority date: 2007-06-05
Filing date: 2007-06-05
Publication date: 2012-08-29
Anticipated expiration: 2027-06-05
Also published as: US8421841B2; BRPI0812207A2; EP2157514A4; EP2157514A1; CN101321259A; WO2008148350A1; US20100079574A1

Abstract

本发明公开了一种多媒体设备控制系统、控制数据传输及处理装置和方法，其中，发送与多种媒体类型码流对应的控制数据给被控制终端设备，被控制终端设备根据与所述媒体类型码流对应的控制数据，控制产生相应的媒体类型码流的多媒体设备。因此本发明能够对多种媒体类型的码流对应的多媒体设备进行相应的控制。

Description

多媒体设备控制系统、控制数据传输及处理装置和方法

技术领域

本发明涉及通信领域，尤其涉及对多媒体设备的控制。

背景技术

H.323会议电视系统中，会场中的各个终端设备通过各自的多媒体设备，如主摄像机，辅摄像机等，采集各种媒体类型码流。各个终端设备通过一条逻辑通道传输一种媒体类型码流的方法，将所采集到的多种媒体类型的码流传输给对端；也可以传输给MCU(Multipoint Conference Unit，多点会议单元)，然后通过MCU将其中几个或全部码流对应的画面组合成一路码流，传输给终端设备。

各个终端设备在获取到对端传输给的多种媒体类型的码流后，还希望根据播放所述码流的效果，对远端的多媒体设备进行控制。

与本发明有关的现有技术提供了终端设备A基于H.323协议对终端设备B的主流摄像机进行控制的方法，其实现流程如图1所示，终端设备A和终端设备B通过呼叫建立消息建立连接；连接建立后，终端设备A与终端设备B之间通过H.245的能力交换消息(TerminalCapabilitySet)等能力集消息，申明自己具有支持远端摄像机控制的H.224能力；终端设备A与终端设备B之间，通过打开控制通道相关信令，建立一路H.224控制通道；终端设备A通过所述控制通道，传输控制数据给终端设备B，终端设备B按照所述控制数据对自己的主流摄像机进行操作，实现终端设备A对终端设备B的主流摄像机进行控制的流程。

现有技术仅仅适用于通过一个逻辑通道接收到一种媒体类型的码流后，再通过一个控制通道发送控制数据的情况，这时接收到控制数据的终端设备，会按照控制数据对相应的多媒体设备进行控制；但是当某个终端设备通过多个逻辑通道接收到多种媒体类型的码流后，再通过一个控制通道发送控制数据后，接收到控制数据的终端设备，无法区分具体为哪种媒体类型码流对应的控制数据，从而不知道该对产生哪种媒体类型码流的多媒体设备进行相应的控制。

另外，对于加入MCU(Multipoint Conference Unit，多点会议单元)召开的多点会议，由于MCU发送给终端设备的码流对应多画面，所以终端设备无法区别按照现有技术接收到的控制数据是针对哪个画面对应的码流，从而无法对产生所述码流的多媒体设备进行控制。

发明内容

本发明的实施例提供一种多媒体设备控制方法及系统、控制数据传输及处理装置和方法，其能够对多种媒体类型的码流对应的多媒体设备进行相应的控制。

本发明的实施例通过如下技术方案实现：

本发明的实施例提供一种多媒体设备控制系统，其包括：

控制终端设备和被控制终端设备；

所述控制终端设备，包括第二传输单元，用于在接收到被控制终端设备发送的多种媒体类型码流后，通过一个控制通道，将携带与所述媒体类型码流对应的属性描述信息的多种控制数据，传输给被控制终端设备；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流，所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息；

所述被控制终端设备，用于根据所述与多种媒体类型码流对应的控制数据，控制被控制终端设备产生所述媒体类型码流的多媒体设备；

所述控制终端设备和所述被控制终端设备双方都同时支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据。

本发明的实施例还提供一种控制数据传输方法，其包括：

当控制终端设备接收到被控制终端设备发送的多种媒体类型码流后，通过一个控制通道，将携带与所述媒体类型码流对应的属性描述信息的多种控制数据，传输给被控制终端设备；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流，所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息；所述控制终端设备和所述被控制终端设备双方都同时支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据。

本发明的实施例还提供一种控制数据传输装置，其包括：

第二数据映射单元，用于将携带与被控制终端设备发送的媒体类型码流对应的属性描述信息的多种控制数据，映射到一个控制通道中；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流；所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息；

第二数据传输单元，用于通过所述控制通道，将映射到所述控制通道中的控制数据传输给被控制终端设备。

本发明的实施例还提供一种控制数据处理方法，其包括：

多点会议单元MCU从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据发送给所述被控制终端设备的控制数据中携带的属性描述信息，确定被控制终端设备，并将所述控制数据通过一个控制通道发送给所述被控制终端设备；或者，MCU从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；将所述控制数据对应的被控制终端设备及其媒体类型码流，用属性描述信息描述；并通过一个控制通道，将携带所述属性描述信息的控制数据传输出去；

被控制终端设备从控制终端设备获得与多种媒体类型码流对应的控制数据，并根据所述控制数据，控制产生所述媒体类型码流的多媒体设备；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流，，所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息；所述控制终端设备和所述被控制终端设备双方都同时支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据。

本发明的实施例还提供一种控制数据代理装置，其包括：

所述第一获取单元，用于从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流；所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息；

所述第一传输单元，用于根据所述属性描述信息，确定被控制终端设备，通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备，或，用于根据所述属性描述信息，确定被控制终端设备，通过一个控制通道，将所述控制数据发送给所述被控制终端设备。

由上述本发明的实施例提供的具体实施方案可以看出，其能够发送与多种媒体类型码流对应的控制数据给被控制终端设备，从而能够对多种媒体类型的码流对应的多媒体设备进行相应的控制。

附图说明

图1为背景技术提供的对摄像机进行控制的流程图；

图2为本发明第一实施例的流程图；

图3为本发明第一实施例中终端设备A对终端设备B的摄像机进行控制的流程图；

图4为本发明第二实施例的流程图；

图5为本发明第二实施例中终端设备A对终端设备B的摄像机进行控制的流程图；

图6为本发明第三实施例的流程图；

图7为本发明第三实施例中，多点会议时终端设备A对终端设备B的摄像机进行控制的流程图；

图8为本发明第四实施例的结构原理图；

图9为本发明第七实施例的结构原理图；

图10为本发明第八实施例的结构原理图。

具体实施方式

本发明的第一实施例提供了一种多媒体设备控制方法，其为每种要控制的多媒体设备分别打开一个H.224的控制通道，控制其中一种多媒体设备的控制数据在一个控制通道上传输，控制另一种多媒体设备的控制数据在另外一个控制通道上传输。其具体实施流程如图2所示，包括：

步骤S101，当控制终端设备接收到被控制终端设备发送多种媒体类型码流后，将与所述媒体类型码流对应的控制数据，映射到多个控制通道中传输给被控制终端设备；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流，和，辅多媒体设备产生的媒体类型码流。

步骤S102，所述被控制终端设备根据与所述媒体类型码流对应的控制数据，分别控制产生所述媒体类型码流的多媒体设备。

所述被控制终端设备从各个控制通道中分别获得与多种媒体类型码流对应的控制数据，并根据所述控制数据，分别控制产生所述媒体类型码流的多媒体设备。

下面举例对本发明第一实施进行详细描述，如图3所示：假设控制终端设备为终端设备A，可以支持3个摄像机输入的作为主流的视频源，即图中的cam1/cam2/cam3；被控制终端设备为终端设备B，可以支持2个摄像机输入的作为辅流的视频源，即图中的cam4/cam5。假设终端设备A要控制的终端设备B的主流摄像机输入的视频流cam1，以及终端设备B的辅流摄像机输入的视频流cam 4，具体实施过程如下：

终端设备A和终端设备B通过呼叫建立消息建立连接；连接建立后，终端设备A与终端设备B之间通过H.245的能力交换消息(TerminalCapabilitySet)等能力集消息，申明自己具有支持远端多媒体设备控制的H.224能力；

终端设备A与终端设备B之间，通过建立控制通道相关信令，为每路要控制的多媒体设备分别建立一个H.224的控制通道；如，建立两条控制通道，一条用于传输控制主流摄像机的cam 1的控制数据的h.224main控制通道，另一条用于传输控制辅流摄像机的cam 4的控制数据的h.224Aux控制通道。

终端设备A通过所述h.224main控制通道，传输控制主流摄像机输入的视频流cam 1的控制数据给终端设备B；通过所述h.224Aux控制通道，传输控制辅流摄像机输入的视频流cam 4的控制数据给终端设备B。

终端设备B从所述h.224main控制通道中接收到控制数据后，根据所述控制数据，对产生cam 1的主流摄像机的进行控制，实现对自己的主流摄像机输入的视频流cam 1进行控制；终端设备B从所述h.224Aux控制通道中接收到控制数据后，根据所述控制数据，对产生cam 4的辅流摄像机进行控制，实现对自己的辅流摄像机输入的视频流cam 4进行控制。

在本发明第一实施例基础上，还可以进一步实现多点会议。此时多点会议单元MCU从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；通过对应的多个控制通道，将所述控制数据，传输给被控制终端设备。其余与第一实施例的相关描述雷同，这里不再详细描述。

本发明的第二实施例提供了另一种多媒体设备控制方法，其通过对H.281协议的扩展，在控制数据中增加了对要控制的多媒体设备对应的属性描述信息。其具体实施流程如图4所示，包括：

步骤S201，当控制终端设备接收到被控制终端设备发送的多种媒体类型码流后，通过一个控制通道，将携带与所述媒体类型码流对应的属性描述信息的多种控制数据，传输给被控制终端设备。

其中，所述属性描述信息包括：媒体类型码流，和，被控制终端设备的描述信息。所述媒体类型码流包括：主多媒体设备产生的媒体类型码流，和，辅多媒体设备产生的媒体类型码流。

步骤S202，所述被控制终端设备根据与所述媒体类型码流对应的控制数据，控制产生所述媒体类型码流的多媒体设备。

所述被控制终端设备从一个控制通道中获得控制数据，根据所述控制数据中携带属性描述信息，获得与自己的媒体类型码流对应的控制数据，如根据所述控制数据中携带被控制终端设备的描述信息判断要控制的是否为自己，若是自己，则进一步根据所述控制数据中携带的媒体类型码流，确定要控制的媒体类型码流是哪个多媒体设备产生的媒体类型码流；然后根据所述控制数据，控制被控制终端设备产生所述媒体类型码流的多媒体设备。

下面举例对本发明第二实施例进行详细说明：

如图5所示，假设控制终端设备为终端设备A，可以支持3个摄像机输入的作为主流的视频源，即图中的cam1/cam2/cam3；被控制终端设备为终端设备B，可以支持2个摄像机输入的作为辅流的视频源，即图中的cam4/cam5。假设终端设备A要控制的终端设备B的主流摄像机输入的视频流cam1，以及终端设备B的辅流摄像机输入的视频流cam 4，具体实施过程如下：

终端设备A与终端设备B之间，通过建立控制通道相关信令，为要控制的不同多媒体设备建立同一个H.224的控制通道。

终端设备A通过所述同一个控制通道，将携带不同属性描述信息的控制数据，传输给终端设备B。如，终端设备A要控制终端设备B的主流摄像机输入的视频流main时，则在发送的控制数据中的扩展字段填上<Tb，main>，表示要控制的媒体类型码流是主流摄像机输入的视频流main，被控制终端设备是终端设备B。终端设备B收到所述控制数据后，解析出被控制终端设备是自己，再解析出要控制的媒体类型码流是主流摄像机产生的视频流main，则按照控制数据对自己的主流摄像机进行操作，这样就可以实现终端设备A对终端设备B的主流摄像机输入的视频流进行控制。

终端设备A要控制终端设备B的辅流摄像机输入的视频流时，则在发送的控制数据中的扩展字段填上<Tb，aux>，表示要控制的是终端设备B的辅流摄像机输入的视频流aux。终端设备B收到控制数据后，解析出要控制的终端设备是自己，再解析出要控制的媒体类型码流是辅流摄像机输入的视频流aux，则按照控制数据对自己的辅流摄像机进行操作，这样就可以实现终端设备A对终端设备B的辅流摄像机输入的视频流进行控制。

本发明的第三实施例提供了第三种多媒体设备控制方法，其在第二实施例的基础上，进一步实现多点会议。其具体实现流程如图6所示，包括：

步骤S301，当控制终端设备接收到被控制终端设备发送的多种媒体类型码流后，通过一个控制通道，将携带与所述媒体类型码流对应的属性描述信息的多种控制数据，传输给被控制终端设备。

步骤S302，发送给所述被控制终端设备的控制数据到达多点会议单元MCU，所述MCU根据所述控制数据中的属性描述信息选择要控制的媒体类型码流和被控制终端设备的描述信息，根据被控制终端设备的描述信息，确定被控制终端设备，并将所述控制数据发送给所述被控制终端设备。

步骤S303，所述被控制终端设备获得携带属性描述信息的控制数据后，根据所述控制数据，控制产生所述媒体类型码流的多媒体设备。

所述被控制终端设备从一个控制通道中获得控制数据，根据所述控制数据中携带的属性描述信息，获得与自己媒体类型码流对应的控制数据，如根据所述控制数据中携带的被控制终端设备的描述信息，判断要控制的是否为自己，若是自己，则进一步根据所述控制数据中携带的媒体类型码流，确定要控制的媒体类型码流是哪个多媒体设备产生的媒体类型码流；然后根据所述控制数据，分别控制被控制终端设备产生所述媒体类型码流的多媒体设备。

下面举例对本发明的第三实施例进行详细说明：

如图7所示，假设发起控制的终端设备在多点会议中，可以同时看到t1/t2/t3/t4四个会场的画面。终端设备T4加入多点会议，MCU将t1/t2/t3/t4四个会场的画面对应的视频码流发送给终端设备T4。终端设备T4根据其看到t1/t2/t3/t4四个会场的画面，假设其控制其中的t1子画面对应的视频流Aux，则在扩展字段中填上<T1，Aux>，表示要控制的是作为被控制终端设备的终端设备T1中的辅流摄像机输入的视频流Aux。当MCU收到摄像机控制数据后，解析出要控制的是终端设备T1中的辅流摄像机输入的视频流Aux，于是将控制数据发送给终端设备T1；终端设备T1收到控制数据后，解析出要控制的媒体类型码流是自己的辅流摄像机输入的视频流Aux，于是根据所述控制数据对辅流摄像机进行控制，从而实现终端设备T4对终端设备T1的辅流摄像机输入的视频流进行控制的目的。

上述三个实施例仅仅给出通信双方同时支持通过一个控制信道发送或接收多种媒体类型码流对应的控制数据的情况，以及通信双方同时支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据的情况，当二者所支持的功能不同时，还需要通过一个网络设备，如多点会议单元MCU进行转换，具体如下：

当控制终端设备支持通过多个控制信道发送多种媒体类型码流对应的控制数据，被控制终端设备支持通过一个控制信道接收多种媒体类型码流对应的控制数据时，所述MCU，从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；将所述控制数据对应的被控制终端设备及其媒体类型码流，用属性描述信息描述；并通过一个控制通道，将携带所述属性描述信息的控制数据传输出去。

当控制终端设备支持通过一个控制信道发送多种媒体类型码流对应的控制数据被控制终端设备支持通过多个控制信道接收多种媒体类型码流对应的控制数据时，所述MCU，从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据所述属性描述信息，确定被控制终端设备，并将所述控制数据中的属性描述信息删除，通过每种媒体类型码流对应的控制通道，将删除掉属性描述信息的每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。也可以不删除所述控制数据中的属性描述信息，通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。

本发明的第四实施例提供了一种多媒体设备控制系统，其结构如图8所示，包括：控制终端设备和被控制终端设备；其中，所述控制终端设备包括第一传输单元，或者，第二传输单元。

各个单元之间的信号传递关系如下：

所述控制终端设备接收被控制终端设备发送的多种媒体类型码流；当接收到被控制终端设备发送的多种媒体类型码流后，发送与所述多种媒体类型码流对应的控制数据给被控制终端设备；具体处理时，可以通过第一传输单元，将与每种媒体类型码流对应的控制数据，映射到一个控制通道中，这样通过多个控制通道，将与所述多种媒体类型码流对应的控制数据传输给被控制终端设备；或者，可以通过第二传输单元，通过一个控制通道，将携带与所述媒体类型码流对应的属性描述信息的多种控制数据，传输给被控制终端设备。其中，所述属性描述信息包括：媒体类型码流，和，被控制终端设备的描述信息。所述媒体类型码流包括：主多媒体设备产生的媒体类型码流，和，辅多媒体设备产生的媒体类型码流。具体实现与上述方法实施例中的相关描述雷同，这里不再详细描述。

所述被控制终端设备接收到所述控制数据后，根据所述媒体类型码流对应的控制数据，控制被控制终端设备产生所述媒体类型码流的多媒体设备。

本发明的第五实施例提供了另一种多媒体设备控制系统，该系统在第四实施例的基础上增加了用于代理控制数据的第一控制数据代理装置。当发送给被控制终端设备的控制数据到达第一控制数据代理装置时，第一控制数据代理装置，从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；通过对应的多个控制通道，将所述控制数据，传输给被控制终端设备。其余与上述第四实施例的相关描述雷同，这里不再详细描述。

本发明第五实施例适用于通信双方同时支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据的情况。

本发明的第五实施例中的第一控制数据代理装置也可以是第二控制数据代理装置，用于从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；将所述控制数据对应的被控制终端设备及其媒体类型码流，用属性描述信息描述；并通过一个控制通道，将携带所述属性描述信息的控制数据传输出去。

此时该系统适用于通信一方支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据，另一方支持通过一个控制信道发送或接收多种媒体类型码流对应的控制数据的情况。

本发明的第五实施例中的第一控制数据代理装置也可以是第三控制数据代理装置，用于从一个控制通道中，获得控制数据，根据所述控制数据中的属性描述信息，确定被控制终端设备，并通过一个控制通道，将所述控制数据发送给所述被控制终端设备；

此时，此系统适用于通信双方同时支持通过一个控制信道发送或接收多种媒体类型码流对应的控制数据的情况。

本发明的第五实施例中的第一控制数据代理装置也可以是第四控制数据代理装置，用于从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据所述属性描述信息，确定被控制终端设备，并将所述控制数据中的属性描述信息删除，通过每种媒体类型码流对应的控制通道，将删除掉属性描述信息的每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。或者，不删除所述控制数据中的属性描述信息，通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。

此时该系统适用于通信一方支持通过一个控制信道发送或接收多种媒体类型码流对应的控制数据，另一方支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据的情况。

本发明的第六实施例提供了一种控制数据传输方法，其可以发送不同媒体类型码流对应的控制数据给被控制终端设备，具体实现时，可以采取两种方案实现：

第一种，当控制终端设备接收到被控制终端设备发送的多种媒体类型码流后，将与所述多种媒体类型码流对应的控制数据，映射到多个控制通道中传输给被控制终端设备。具体实现与第一实施例中的相关描述雷同，这里不再详细描述。

第二种，当控制终端设备接收到被控制终端设备发送的多种媒体类型码流后，通过一个控制通道，将携带与所述媒体类型码流对应的属性描述信息的多种控制数据，传输给被控制终端设备。其中，所述属性描述信息包括：媒体类型码流，和，被控制终端设备的描述信息。所述媒体类型码流包括：主多媒体设备产生的媒体类型码流，和，辅多媒体设备产生的媒体类型码流。具体实现与第二实施例中的相关描述雷同，这里不再详细描述。

该方法还可以适用于加入MCU的情况。

针对第一种方案，当发送给所述被控制终端设备的控制数据到达多点会议单元MCU时，所述MCU其从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；通过对应的多个控制通道，将所述控制数据，传输出去；或者，

从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；将所述控制数据对应的被控制终端设备及其媒体类型码流，用属性描述信息描述；并通过一个控制通道，将携带所述属性描述信息的控制数据传输出去。

针对第二种方案，当发送给所述被控制终端设备的控制数据到达多点会议单元MCU时，所述MCU从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据所述控制数据中携带的属性描述信息，确定被控制终端设备，并通过一个控制通道，将所述控制数据发送给所述被控制终端设备；或者，

MCU从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据所述属性描述信息，确定被控制终端设备，并将所述控制数据中的属性描述信息删除，通过每种媒体类型码流对应的控制通道，将删除掉属性描述信息的每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。也可以不删除所述控制数据中的属性描述信息，通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。

其中所述属性描述信息，确定被控制终端设备，并将所述控制数据发送给所述被控制终端设备。具体实现与第三实施例中的相关描述雷同，这里不再详细描述。

本发明的第七实施例提供了一种控制数据传输装置，其结构如图9所示，包括：第一数据映射单元和第一数据传输单元。

各个单元之间的信号传递关系如下：

所述第一数据映射单元，将与被控制终端设备发送的多种媒体类型码流对应的控制数据，映射到多个控制通道中；其中所述媒体类型码流包括：主多媒体设备产生的媒体类型码流，和，辅多媒体设备产生的媒体类型码流。

所述第一数据传输单元通过所述控制通道，将映射到所述控制通道中的控制数据传输给被控制终端设备。

本发明的第八实施例提供了另一种控制数据传输装置，其结构如图10所示，包括：第二数据映射单元和第二数据传输单元。

所述第二数据映射单元，将携带与被控制终端设备发送的媒体类型码流对应的属性描述信息的多种控制数据，映射到一个控制通道中；其中，所述属性描述信息包括：媒体类型码流，和，被控制终端设备的描述信息。所述媒体类型码流包括：主多媒体设备产生的媒体类型码流，和，辅多媒体设备产生的媒体类型码流。

所述第二数据传输单元，通过所述控制通道，将映射到所述控制通道中的控制数据传输给被控制终端设备。

本发明的第九实施例提供一种控制数据处理方法，其包括：

获得与多种媒体类型码流对应的控制数据，根据所述控制数据，控制产生所述媒体类型码流的多媒体设备。其中，所述获得与多种媒体类型码流对应的控制数据时，可以从多个控制通道中，获得与所述媒体类型码流对应的控制数据；或者，从一个控制通道中获得携带与所述媒体类型码流对应的属性描述信息的控制数据。具体实现与上述实施例中的相关描述雷同，这里不再详细描述。

第九实施例的方法还可以适用于加入MCU的情况。

当发送给所述被控制终端设备的控制数据到达多点会议单元MCU时，所述MCU，从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据发送给所述被控制终端设备的控制数据中携带的属性描述信息，确定被控制终端设备，并将所述控制数据通过一个控制通道发送给所述被控制终端设备；或者，

MCU从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；将所述控制数据对应的被控制终端设备及其媒体类型码流，用属性描述信息描述；并通过一个控制通道，将携带所述属性描述信息的控制数据传输给所述被控制终端设备。

本发明的第十实施例提供一种控制数据处理装置，其包括：控制数据获得单元和控制单元。其中所述控制数据获得单元包括第一获得子单元或者第二获得子单元。

控制数据获得单元，用于获得与多种媒体类型码流对应的控制数据；具体处理情况如下：第一获得子单元，从多个控制通道中获得与多种媒体类型码流对应的控制数据。具体处理与方法实施例中的相关描述雷同，这里不再详细描述。

控制单元，根据所述控制数据获得单元获得的控制数据，分别控制产生所述媒体类型码流的多媒体设备。

本发明的第十一实施例提供一种控制数据处理装置，其包括：控制数据获得单元和控制单元。其中所述控制数据获得单元包括第二获得子单元。

控制数据获得单元，获得与多种媒体类型码流对应的控制数据；具体处理情况如下：第二获得子单元，从一个控制通道中获得多种控制数据，根据所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息。具体处理与方法实施例中的相关描述雷同，这里不再详细描述。

本发明第十二实施例还提供一种控制数据代理装置，其包括：第一获取单元和第一传输单元。

所述第一获取单元，用于从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；其中，所述属性描述信息包括：媒体类型码流，和，被控制终端设备的描述信息。所述媒体类型码流包括：主多媒体设备产生的媒体类型码流，和，辅多媒体设备产生的媒体类型码流。

所述第一传输单元，用于根据所述属性描述信息，确定被控制终端设备，并将所述控制数据中的属性描述信息删除，通过每种媒体类型码流对应的控制通道，将删除掉属性描述信息的每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。其也可以不删除所述控制数据中的属性描述信息，通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。其也可以通过一个控制通道，将所述控制数据发送给所述被控制终端设备。

该控制数据代理装置可以是MCU，也可以是其它网关。下面以该控制数据代理装置为MCU为例，对其处理情况进行说明：

假设MCU上两个入会的终端设备，终端设备T1只支持通过多个摄像机控制通道进行主、辅流的摄像机控制，而终端设备T2只支持通过一个摄像机控制通道传输的控制数据中携带不同属性描述信息。T1与MCU之间分别打开了主流摄像机控制通道和辅流摄像机的控制通道；MCU与T2之间只打开了一个摄像机控制的控制通道。当T2要控制T1的辅流摄像机对应的码流时，T2将带有属性描述信息的控制数据，传给MCU，MCU的第一获取单元，从一个控制通道中，获得携带与T1的辅流摄像机对应的属性描述信息的控制数据；所述第一传输单元，根据所述属性描述信息，确定被控制终端设备是T1，被控制的码流为辅流摄像机对应的码流；将所述控制数据中的属性描述信息删除，通过为T1的辅流摄像机的码流打开的控制通道，将删除了属性描述信息的控制数据，发送给所述被控制终端设备T1。当T2要控制T1的主流摄像机对应的码流时，T2将带有属性描述信息的控制数据，传给MCU，MCU的第一获取单元，从一个控制通道中，获得携带与T1的主流摄像机对应的属性描述信息的控制数据；所述第一传输单元，根据所述属性描述信息，确定被控制终端设备是T1，被控制的码流为主流摄像机对应的码流；将所述控制数据中的属性描述信息删除，通过为T1的主流摄像机的码流打开的控制通道，将删除了属性描述信息的控制数据，发送给所述被控制终端设备T1。

本发明第十三实施例还提供另一种控制数据代理装置，其包括：第二获取单元和第二传输单元。

所述第二获取单元，用于从多个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据；

所述第二传输单元，用于将所述控制数据对应的被控制终端设备及其媒体类型码流，用属性描述信息描述；并通过一个控制通道，将携带所述属性描述信息的控制数据传输出去。其也可以将第一获取单元所获得的控制数据，通过多个控制通道，传输出去。

假设MCU上两个入会的终端设备，终端设备T1只支持通过多个摄像机控制通道进行主、辅流的摄像机控制，而终端设备T2只支持通过一个摄像机控制通道传输的控制数据中携带不同属性描述信息。T1正在观看T2的画面，当T1要控制T2的辅流摄像机时，T1与MCU之间分别打开了主流摄像机控制通道和辅流摄像机的控制通道；MCU与T2之间只打开了一个摄像机控制的控制通道。T1将对应主流摄像机的码流的控制数据，以及对应辅流摄像机的码流的控制数据在对应的控制通道上传给MCU；在这种情况下，MCU的第二获取单元，从多个控制通道中，获得与被控制终端设备T2的多种媒体类型码流对应的控制数据；MCU的第二传输单元将所述控制数据对应的被控制终端设备及其媒体类型码流，用属性描述信息描述，如，用属性描述信息<T2，Aux>表示需要控制的是终端设备T2的辅流摄像机对应的码流；用属性描述信息<T2，Main>表示需要控制的是终端设备T2的主流摄像机对应的码流；并通过一个控制通道，将携带所述属性描述信息的控制数据传输给T2；T2接收到后，从属性描述信息中解析出被控制的T2的辅流摄像机，对其进行控制。

由上述本发明提供的具体实施方案可以看出，其能够发送与被控制终端设备的多种媒体类型码流对应的控制数据给被控制终端设备，从而能够从而能够对多种媒体类型的码流对应的多媒体设备进行相应的控制。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims

1.一种多媒体设备控制系统，其特征在于，包括：

控制终端设备和被控制终端设备；

2.如权利要求1所述的系统，其特征在于，还包括：

第三控制数据代理装置，用于从一个控制通道中，获得与被控制终端设备的多种媒体类型码流对应的控制数据，根据所述控制数据中的属性描述信息，确定被控制终端设备，并通过一个控制通道，将所述控制数据发送给所述被控制终端设备；或者，

第四控制数据代理装置，用于从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据所述属性描述信息，确定被控制终端设备；通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。

3.一种控制数据传输方法，其特征在于，包括：

当控制终端设备接收到被控制终端设备发送的多种媒体类型码流后，通过一个控制通道，将携带与所述媒体类型码流对应的属性描述信息的多种控制数据，传输给被控制终端设备；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流，所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息，所述控制终端设备和所述被控制终端设备双方都同时支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据。

4.如权利要求3所述的方法，其特征在于，还包括：

多点会议单元MCU从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据所述控制数据中携带的属性描述信息，确定被控制终端设备，并通过一个控制通道，将所述控制数据发送给所述被控制终端设备；或者，

MCU从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；根据所述属性描述信息，确定被控制终端设备；通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备。

5.一种控制数据传输装置，其特征在于，包括：

6.一种控制数据处理方法，其特征在于，包括：

被控制终端设备从控制终端设备获得与多种媒体类型码流对应的控制数据，并根据所述控制数据，控制产生所述媒体类型码流的多媒体设备；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流，所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息，所述控制终端设备和所述被控制终端设备双方都同时支持通过多个控制信道发送或接收多种媒体类型码流对应的控制数据。

7.一种控制数据代理装置，其特征在于，包括：

第一获取单元，用于从一个控制通道中，获得控制数据，所述控制数据中携带与被控制终端设备的媒体类型码流对应的属性描述信息；其中，所述媒体类型码流包括：主多媒体设备产生的媒体类型码流和辅多媒体设备产生的媒体类型码流；所述属性描述信息包括：媒体类型码流和被控制终端设备的描述信息；

第一传输单元，用于根据所述属性描述信息，确定被控制终端设备，通过每种媒体类型码流对应的控制通道，将每种媒体类型码流对应的控制数据，发送给所述被控制终端设备，或，用于根据所述属性描述信息，确定被控制终端设备，通过一个控制通道，将所述控制数据发送给所述被控制终端设备。