CN102223515A - 远程呈现会议系统、远程呈现会议的录制与回放方法 - Google Patents

Abstract

本发明提供了一种远程呈现会议系统、远程呈现会议的录制与回放方法。上述远程呈现会议系统包括：MCU以及录播服务器；其中，MCU包括：配置模块，用于将录播服务器作为一个远程呈现会场添加进会议中；第一连接建立模块，用于向录播服务器发起一个或多个呼叫以建立通信连接，其中，该呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息；录播服务器包括：接收模块，用于接收来自于MCU的媒体流；存储记录模块，用于存储媒体流，记录各个媒体流之间的关联关系。根据本发明提供的技术方案，可以保证回放时图像的自然拼接效果和听声辨位效果。

Description

远程呈现会议系统、远程呈现会议的录制与回放方法

技术领域

本发明涉及通信领域，具体而言，涉及一种远程呈现会议系统、远程呈现会议的录制与回放方法。

背景技术

相关技术中，传统的视频会议录制与回放主要有以下方法：

一种是基于模拟方式的录制与回放方法，具体可以参见图1。如图1所示，独立于视频会议系统(由MCU101，视频终端主机103，摄像机106、麦克风107、PC108、电视机109、音箱110、显示器111组成)之外，增加一套录播系统，该录播系统包括部署在中心机房的录播服务器102和部署于会议室的编码器104和解码器105，具有采集、编码、传输、存储、解码和回放功能。其缺点是：采集/编码/解码等功能与视频会议系统具有的功能重复，造成功能冗余，系统配置成本高；无法实时跟踪主讲会场(会议中被广播会场，会议期间，每个会场都有可能成为被广播会场)。

另一种是基于数字方式的录制与回放方法，具体可以参见图2。如图2所示，独立于视频会议系统之外(由MCU201，视频终端主机203，摄像机206、麦克风207、PC208、电视机209、音箱210、显示器211组成)，增加一套录播服务器202，该录播服务器需要和MCU以及会场终端进行数字对接。录制时，根据和多点控制单元(Multipoint Control Unit，简称为MCU)的交互信令，接收MCU送过来的多媒体信息，并将其储存；回放时，根据和终端的交互信令，送出存储的多媒体信息给终端，由终端进行回放。其优点是：与视频会议系统进行功能互补，仅实现视频会议系统没有的多媒体信息储存等功能；能实时跟踪主讲会场。

由于应用和技术上的局限，传统视频会议系统一般仅需要记录视频、音频以及数据内容，对除此外的其他信息不关注。

下面详细说明远程呈现会议系统相比传统视频会议系统的特点：

远程呈现会议系统是一种高级视频会议系统，相比于传统视频会议系统而言，其特点在于：会场存在多个视频终端主机；与这些视频终端主机直接或间接相连的多个音频和视频采集设备、一个专用的远程呈现摄像头、多个音视频输出设备、一个中控触摸屏、多个桌面液晶显示屏以及专用的会议桌椅。图3显示了一个典型三屏远程呈现会场(图3中未显示终端主机)。

现有远程呈现会议系统中的通讯实体一般由若干个遵从ITU-T H.323协议的视频终端组成(例如，对于三屏远程呈现会场，一般包括三个视频终端)，这些终端和远程呈现MCU间根据ITU-T H.323协议通讯。远程呈现摄像机输出的各路图像存在空间排列关系，同时，多个麦克风采集的声音也具有位置属性，且图像和声音在空间上有对应关系。

但是，在远程呈现会议系统中，采用传统视频会议系统的录制与回放方案，无法保证回放时图像的自然拼接效果和听声辨位效果。

发明内容

针对相关技术中在远程呈现会议系统中，采用传统视频会议系统的录制与回放方案，无法保证回放时图像的自然拼接效果和听声辨位效果的问题，本发明提供了一种远程呈现会议系统、远程呈现会议的录制与回放方法，以解决上述问题至少之一。

根据本发明的一个方面，提供了一种远程呈现会议系统。

根据本发明的远程呈现会议系统包括：MCU以及录播服务器。其中，MCU包括：配置模块，用于将录播服务器作为一个远程呈现会场添加进会议中；第一连接建立模块，用于向录播服务器发起一个或多个呼叫以建立通信连接，其中，该呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息；录播服务器包括：接收模块，用于接收来自于MCU的媒体流；存储记录模块，用于存储媒体流，记录各个媒体流之间的关联关系。

各个媒体流之间的关联关系包括以下至少之一：视频流之间的空间关系；数据流和视频流的对应关系；音频流和视频流的对应关系。

上述MCU包括：广播模块，用于通过召集会议的形式，根据各个媒体流之间的关联关系广播录播服务器录制的媒体流。

上述远程呈现会议系统还包括：远程呈现会场；远程呈现会场包括：第二连接建立模块，用于与录播服务器建立点对点连接；获取呈现模块，用于根据各个媒体流之间的关联关系获取录播服务器录制的媒体流并呈现。

上述第二连接建立模块包括：发起单元，用于向录播服务器发起一个或多个用于建立连接的呼叫，其中，该呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息。

上述录播服务器包括：第一发送模块，用于向视频终端中的一个或多个发送录制的媒体流所对应的文件列表信息；第二发送模块，用于响应用户根据文件列表信息进行的选择操作，根据各个媒体流之间的关联关系，向各个视频终端发送媒体流。

上述MCU与录播服务器之间的通信信令、以及远程呈现会场与录播服务器之间的通信信令是基于H.323协议规程或者IETF SIP协议规程进行扩展的信令。

根据本发明的另一方面，提供了一种远程呈现会议的录制方法。

根据本发明的远程呈现会议的录制方法包括：在远程呈现会议系统中的MCU将录播服务器作为一个远程呈现会场添加进会议之后，录播服务器接收来自于MCU发起的一个或多个用于建立连接的呼叫，其中，呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息；录播服务器接收来自于MCU的媒体流并存储，记录各个媒体流之间的关联关系。

上述MCU与录播服务器建立连接后，还包括：MCU对与录播服务器相连接的端口进行以下处理：禁止来自于录播服务器的媒体流进入会议混音器；禁止将录播服务器加入会场列表中；禁止将录播服务器的上端和下端信息通知远程呈现会议系统中的远程呈现会场；使主会场、分会场或经过混合处理后的媒体流传送至录播服务器。

各个媒体流之间的关联关系包括以下至少之一：视频流之间的空间关系；数据流和视频流的对应关系；音频流和视频流的对应关系。

当呼叫为多个时，呼叫的个数大于等于需要录制的会议中具有最多屏幕的远程呈现会场的屏幕数。

根据本发明的又一方面，提供了一种远程呈现会议的回放方法。

根据本发明的远程呈现会议的回放方法包括：远程呈现会议系统中的MCU将通过召集会议的形式，根据各个录制的媒体流之间的关联关系广播录播服务器录制的媒体流。

根据本发明的又一方面，提供了一种远程呈现会议的回放方法。

根据本发明的远程呈现会议的回放方法包括：远程呈现会议系统中的远程呈现会场的视频终端与录播服务器建立点对点连接；远程呈现会场根据录制的媒体流之间的关联关系，获取录播服务器录制的媒体流并呈现。

上述视频终端与录播服务器建立点对点连接包括：视频终端向录播服务器发起一个或多个用于建立连接的呼叫，其中，呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息。

上述远程呈现会场获取来自于录播服务器的媒体流包括：录播服务器向视频终端中的一个或多个发送录制的媒体流所对应的文件列表信息；录播服务器响应用户根据文件列表信息进行的选择操作，根据录制的媒体流之间的关联关系，向各个视频终端发送录制的媒体流。

通过本发明，录播服务器录制媒体流时，记录各个媒体流之间的关联关系，解决了相关技术中在远程呈现会议系统中，采用传统视频会议系统的录制与回放方案，无法保证回放时图像的自然拼接效果和听声辨位效果的问题，进而可以保证回放时图像的自然拼接效果和听声辨位效果。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据相关技术的基于模拟方式的视频会议系统的示意图；

图2是根据相关技术的基于数字方式的视频会议系统的示意图；

图3是根据相关技术的三屏远程呈现会场的示意图；

图4是根据本发明实施例的远程呈现会议系统的结构框图；

图5是根据本发明优选实施例的远程呈现会议系统的结构框图；

图6是根据本发明实例的远程呈现会议系统的示意图；

图7是根据本发明实施例的远程呈现会议的录制方法的流程图；

图8是根据本发明优选实施例的远程呈现会议的录制方法的流程图；

图9是根据本发明实施例的远程呈现会议的回放方法的流程图；

图10是根据本发明优选实施例的远程呈现会议的点播回放方法的流程图。

具体实施方式

下文中将参考附图并结合实施例来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。

图4是根据本发明实施例的远程呈现会议系统的结构框图。如图4所示，该远程呈现会议系统主要包括：多点控制单元(MCU)10以及录播服务器20；

上述MCU 10进一步包括：配置模块100，用于将录播服务器作为一个远程呈现会场添加进会议中；第一连接建立模块102，用于向录播服务器发起一个或多个呼叫以建立通信连接，其中，该呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息；

录播服务器20进一步包括：接收模块200，用于接收来自于MCU的媒体流；存储记录模块202，用于存储媒体流，记录各个媒体流之间的关联关系。

其中，上述各个媒体流之间的关联关系包括但不限于以下至少之一：视频流之间的空间关系；数据流和视频流的对应关系；音频流和视频流的对应关系。

在远程呈现会议系统中，远程呈现摄像机输出的各路图像存在空间排列关系，同时，多个麦克风采集的声音也具有位置属性，且图像和声音在空间上有对应关系。在远程呈现会议系统中，采用传统视频会议系统的录制与回放方案，无法保证回放时图像的自然拼接效果和听声辨位效果。图4所示的远程呈现会议系统中，MCU10在呼叫的建立消息中携带与需要建立的通信连接相关联的视频所在的方位的空间信息，发送给录播服务器，录播服务器不仅需要存储媒体流，还需要记录各个媒体流之间的关联关系。从而可以保证回放时图像的自然拼接效果和听声辨位效果。

需要注意的是，可以将MCU 10看作是其上所开多个会议的集合。其中，每个会议包含多个远程呈现会场，每个远程呈现会场包含若干个视频终端。会议中某个远程呈现会场的上端过程，意味着在该会议里MCU和该远程呈现会场的若干个视频终端建立连接的过程。

同时，可以将录播服务器看作是若干个独立的远程呈现会场的集合。在每个需要录制的会议中，录播服务器被当作一个远程呈现会场添加进会议。该远程呈现会场包含若干个由录播服务器虚拟出的视频终端。该远程呈现会场的上端过程，意味着MCU和录播服务器虚拟出的若干个视频终端之间建立连接的过程。

会议开始后，MCU 10发起对录播服务器20的多个呼叫，并将此多个呼叫所建立的通信连接绑定为一个通讯端口，用以表征这些连接同属于一个远程呈现会场。

录播服务器以及各会场正常上端后，MCU可以对与录播服务器相连接的端口进行以下处理：

(1)禁止来自于录播服务器的媒体流进入会议混音器；

(2)禁止将录播服务器加入会场列表中；

(3)禁止将录播服务器的上端和下端信息通知远程呈现会议系统中的远程呈现会场；

(4)使主会场、分会场或经过混合处理后的媒体流传送至录播服务器。

录播服务器虽然作为一个远程呈现会场添加进会议中，但其并不等同于远程呈现会场。在会议召开过程中，应当避免来自于录播服务器的媒体流进入会议混音器，从而干扰会议的正常进行。

当然，远程呈现会议系统中，远程呈现会场内的多个视频终端，物理上也可对应一个设备。进一步说，此物理设备可以在通讯协议上有诸多变化，例如，此物理设备和MCU间的通信以及和录播服务器的通信，不再表现为多个信令交互过程，而仅表现为一个信令。同样的，本方案录制与回放信令也可以采用一个信令的方式。

当发起的呼叫为多个时(即录制与回放信令并非采用一个信令的方式，各个呼叫均携带有与需要建立的通信连接相关联的视频所在的方位的空间信息)，则呼叫的个数应当大于等于需要录制的会议中具有最多屏幕的远程呈现会场的屏幕数。

只有满足上述条件，才可以将与需要建立的通信连接相关联的视频所在的方位的空间信息完整地发送至录播服务器。在回放时可以保证图像的自然完整拼接效果。

对于采用基于H.323协议的远程呈现会议系统而言，上述呼叫遵循H.323协议规程。同理，某远程呈现会场在需要回放录播服务器所存储内容时，也是采用符合H.323协议规程的通信方法与录播服务器虚拟出的若干个视频终端进行通信。当然，不仅限于H.323协议规程，也可以采用其他协议规程，例如，IETF SIP协议规程。

对于回放的方式，可以分两种情况。

一种是通过MCU召集会议的形式，由MCU广播录播服务器，将录播服务器所发送上的视音频数据流切换给其他会场，可以理解，此过程相当于是录制过程的逆过程；

优选地，如图5所示，上述MCU 10还可以包括：广播模块104，用于通过召集会议的形式，广播录播服务器录制的媒体流。

另一种是采用会场点播的方式，由远程呈现会场的视频终端与录播服务器进行通讯建立点对点连接接收所录制媒体并在电视/音箱/显示器等多媒体输出设备上呈现。

优选地，如图5所示，远程呈现会议系统还可以包括：远程呈现会场30；远程呈现会场30包括：第二连接建立模块300，用于与录播服务器建立点对点连接；获取呈现模块302，用于获取录播服务器录制的媒体流并呈现。

优选地，第二连接建立模块300可以进一步包括：发起单元3000(图5中未示出)，用于向录播服务器发起一个或多个用于建立连接的呼叫，其中，该呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息。

优选地，如图5所示，上述录播服务器20可以进一步包括：第一发送模块204，用于向视频终端中的一个或多个发送录制的媒体流所对应的文件列表信息；第二发送模块206，用于响应用户根据文件列表信息进行的选择操作，根据录制的媒体流之间的关联关系，向各个视频终端发送录制的媒体流。

回放进程中，录播服务器还可接收并响应从一个或多个视频终端传过来的快进快退等指令。在具体实施过程中，回放过程可以是直接利用远程呈现会场中通信终端设备实现，也可以是采用其他方式，例如，采用PC软件实现。

优选地，MCU 10与录播服务器20之间的通信信令、以及远程呈现会场30与录播服务器20之间的通信信令可以是基于H.323协议规程或者IETF SIP协议规程进行扩展的信令。当然，也可以是基于其他协议规程进行扩展的信令。

以下结合图6所示的示例进一步描述上述优选实施方式。

图6是根据本发明实例的远程呈现会议系统的示意图。如图6所示，该系统包括：多个远程呈现会议会场、远程呈现会议局端系统、以及录播系统。

其中，每个会场均包括：

(1)摄像机组606，包含3个摄像头，用于拍摄本地会场与会者图像；

(2)麦克风组607，包含4个麦克风，用于采集本地会场的音频信息；

(3)PC组608，包含1～3台PC，作为会议双流数据源；

(4)电视机组609，包含3个电视，用于显示远端图像信息；

(5)音箱组610，包含2个音箱，用于输出会议立体声音频信息；

(6)桌面液晶显示器组611，包含3个液晶显示器，用于显示双流数据。

可以理解，除上述设备外，还可以部署其他用以提供会议临场感的其他设备或系统，如灯光、会场装修装饰等。

其中，远程呈现会议局端系统，包括MCU 601及其管理系统(图6中未示出)

(1)MCU 601，实现多点会议控制，各会场媒体流(视音频以及数据)的广播、交换以及混合，是整套会议系统的核心设备；

(2)管理系统，提供局端管理人员的人机界面。

其中，录播系统，包括录播服务器602及其管理系统(图6中未示出)。

(1)录播服务器602，与MCU401以及远程呈现会场的视频终端主机622～624的数字交互(接口612、613)，实现多媒体内容存储与直播点播；

(2)管理系统：提供录播服务器管理人员的人机界面，实现系统配置、节目编辑等。

下面以纯三屏远程呈现会场参与的远程呈现会议的录制与回放为例，结合图6对上述优选实施方式进行具体说明。需要注意的是，其他非由纯三屏远程呈现会场参会的会议组网情况可以参考下述方法实现录制和回放。

1、会议配置过程

管理员在MCU 601的管理系统上先配置好录播服务器地址，接着定义一个需要录制的由纯三屏远程呈现会场参与的远程呈现会议，接着在向MCU 601下发这个配置后，下达开始会议命令。

2、录制过程

(1)通信连接建立过程

MCU 601在接收到管理者发出的开会通知后，向录播服务器602先后发起三个符合H.323协议规程定义的H.225.0 Q.931呼叫。在呼叫的setup消息中，根据H.225.0 Q.931协议定义的消息扩充机制，在呼叫的建立消息(setup.sourceInfo.nonStandardData.Data消息)中增加反映该呼叫所要建立的通信连接所相关的视频所在的左、中、右方位空间信息。

其后MCU 601按H.323正常规程与录播服务器建立通信连接。

(2)会议控制过程

录播服务器以及各会场正常上端后，MCU 401需要对连接的录播服务器602的端口做如下处理：

(2.1)不允许录播服务器传过来的音频信号进入会议混音器；

(2.2)不接收录播服务器传过来的视频信号，也不允许其他会场或者管理员广播/选看/切换录播服务器所发送过来的视频信号；

(2.3)不将录播服务器所代表的远程呈现会场放入会场列表，也不通知其他会场此会场的上端和下端信息；

(2.4)MCU根据会议控制策略将某分会场或主会场或经过混合处理后的音视频数据媒体流按H.323正常规程或其他规程发送给录播服务器。

(3)存储过程

录播服务器接收从三个连接上发送过来的媒体流并储存，同时记录各媒体流之间的相互关联关系，例如，视频流间的空间关系、数据流和视频流的对应关系以及音频流和视频流的对应关系等。

3、回放过程

主要分两种情况，一种是通过MCU召集会议的形式，由MCU广播录播服务器，将录播服务器所发送的视音频数据流切换给其他会场，可以理解，此过程相当于是录制过程的逆过程；另一种是采用会场点播的方式，由远程呈现会场的视频终端与录播服务器进行通讯建立点对点连接接收所录制媒体并在电视/音箱/显示器等多媒体输出设备上呈现。下面详细介绍后一种回放方式的通信连接建立过程。

远程呈现会场的三个视频终端(622-624)在接收到管理者发出的开会通知后，分别向录播服务器先后发起符合H.323协议规程或其他协议规程定义的H.225.0 Q.931呼叫。在呼叫的setup消息中，根据H.225.0 Q.931协议定义的消息扩充机制，在呼叫的建立消息(setup.sourceInfo.nonStandardData.Data消息)中增加反映该呼叫所要建立的通信连接所相关视频所在的左、中和右空间信息。

录播服务器602在接收到所有呼叫后，根据系统预先约定，向一个或多个预定视频终端(例如，对三屏远程呈现会场，约定中间的视频终端623)发送所储存内容的文件列表视频，并接收用户选择。在判定用户所选文件内容同样是一个三屏远程呈现会场会议录制内容后，根据所存储的媒体流相互间的关联关系记录，向不同视频终端送出不同媒体流。

回放进程中，录播服务器还可接受并响应从该特定视频终端传过来的快进快退等指令。

根据本发明的实施例，基于上述远程呈现会议系统，还提供了一种远程呈现会议的录制方法。

图7是根据本发明实施例的远程呈现会议的录制方法的流程图。如图7所示，该远程呈现会议的录制方法包括以下处理：

步骤S702：在远程呈现会议系统中的MCU将录播服务器作为一个远程呈现会场添加进会议之后，录播服务器接收来自于MCU发起的一个或多个用于建立连接的呼叫，其中，呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息；

步骤S704：录播服务器接收来自于MCU的媒体流并存储，记录各个媒体流之间的关联关系。

其中，各个媒体流之间的关联关系包括但不限于以下至少之一：视频流之间的空间关系；数据流和视频流的对应关系；音频流和视频流的对应关系。

图7所示的远程呈现会议方法中，MCU在呼叫的建立消息中携带与需要建立的通信连接相关联的视频所在的方位的空间信息，发送给录播服务器，录播服务器不仅需要存储媒体流，还需要记录各个媒体流之间的关联关系。从而可以保证回放时图像的自然拼接效果和听声辨位效果。

优选地，MCU与录播服务器建立连接后，MCU对与录播服务器相连接的端口进行处理，具体处理如下：

(1)禁止来自于录播服务器的媒体流进入会议混音器；

(2)禁止将录播服务器加入会场列表中；

(3)禁止将录播服务器的上端和下端信息通知远程呈现会议系统中的远程呈现会场；

(4)使主会场、分会场或经过混合处理后的媒体流传送至录播服务器。

当发起的呼叫为多个时(即录制与回放信令并非采用一个信令的方式，各个呼叫均携带有与需要建立的通信连接相关联的视频所在的方位的空间信息)，则呼叫的个数应当大于等于需要录制的会议中具有最多屏幕的远程呈现会场的屏幕数。

只有满足上述条件，才可以将与需要建立的通信连接相关联的视频所在的方位的空间信息完整地发送至录播服务器。在回放时可以保证图像的自然完整拼接效果。

当然，远程呈现会议系统中，远程呈现会场内的多个视频终端，物理上也可对应一个设备。进一步说，此物理设备可以在通讯协议上有诸多变化，例如，此物理设备和MCU间的通信以及和录播服务器的通信，不再表现为多个信令交互过程，而仅表现为一个信令。同样的，本方案录制与回放信令也可以采用一个信令的方式。

对于采用基于H.323协议的远程呈现会议系统而言，上述呼叫遵循H.323协议规程。同理，某远程呈现会场在需要回放录播服务器所存储内容时，也是采用符合H.323协议规程的通信方法与录播服务器虚拟出的若干个视频通讯终端进行通信。上述录制和回放中，MCU和录播服务器、录播服务器和远程呈现会场间的通信信令，可以采用H.323协议规程规定的消息扩充机制对标准交互信令进行扩展。当然，也不仅限于上述H.323协议规程，还可以采用其他协议规程，例如，IETF SIP协议规程。

以下结合图8进一步描述上述优选实施过程。

图8是根据本发明优选实施例的远程呈现会议的录制方法的流程图。如图8所示，该远程呈现会议的录制方法主要包括以下处理：

步骤S802：MCU将录播服务器作为一个远程呈现会场添加进会议中；

步骤S804：MCU呼叫各个会场，并录播服务器作为一个特殊的远程呈现会场，向录播服务器发起一个或多个呼叫以建立通信连接；

步骤S806：呼叫成功后，将当前广播会场媒体流发送至录播服务器，并指示各个媒体流之间的关联关系；

步骤S808：录播服务器根据上述指示存储媒体流，并记录各个媒体流之间的关联关系。

步骤S810：会议结束，录播服务器响应管理员操作指令，对录制的媒体流进行编辑和发布，等待用户点播。

根据本发明的实施例，基于上述远程呈现会议系统，还提供了一种远程呈现会议的回放方法。该方法主要包括：上述远程呈现会议系统中的MCU将通过召集会议的形式，根据录制的媒体流之间的关联关系广播录播服务器录制的媒体流。

需要注意的是，此回放过程相当于是上述录制过程的逆过程，由于回放时，根据上面提到的各个媒体流之间的关联关系广播录播服务器录制的媒体流，可以保证回放时图像的自然拼接效果和听声辨位效果。

根据本发明的实施例，基于上述远程呈现会议系统，还提供了另一种远程呈现会议的回放方法。

图9是根据本发明实施例的远程呈现会议的回放方法的流程图。如图9所示，该远程呈现会议的回放方法主要包括以下处理：

步骤S902：远程呈现会议系统中的远程呈现会场的视频终端与录播服务器建立点对点连接；

步骤S904：远程呈现会场根据录制的媒体流之间的关联关系获取录播服务器录制的媒体流并呈现。

由于回放时，远程呈现会场根据录制的媒体流之间的关联关系获取录播服务器录制的媒体流，可以保证回放时图像的自然拼接效果和听声辨位效果。

优选地，上述步骤S902可以进一步包括以下处理：视频终端向录播服务器发起一个或多个用于建立连接的呼叫，其中，呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息。

优选地，上述步骤S904可以进一步包括以下处理：

(1)录播服务器向视频终端中的一个或多个发送录制的媒体流所对应的文件列表信息；

(2)录播服务器响应用户根据文件列表信息进行的选择操作，根据录制的媒体流之间的关联关系，向各个视频终端发送录制的媒体流。

以下结合图10进一步描述远程呈现会议的点播回放方法。

图10是根据本发明优选实施例的远程呈现会议的点播回放方法的流程图。如图10所示，该远程呈现会议的点播回放方法主要包括以下处理：

步骤1002：远程呈现会场响应管理员操作指令，需要向录播服务器发起呼叫；

步骤1004：远程呈现会场各个视频终端发起对录播服务器的呼叫，并在呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息(例如，方位标识)；

步骤1006：录播服务器接收呼叫，并根据呼叫参数判断呼叫方会场类型，根据录制的媒体流之间的关联关系向各个视频终端发出相应的媒体流；

步骤1008：远程呈现会场视频终端将媒体流按照时间与空间的要求呈现在多媒体设备上。

综上所述，借助本发明提供的上述实施例，可以实现对远程呈现会议的录制和回放。录制内容不仅包含会议室内的多媒体内容(媒体流)，而且还能记录它们之间的关联关系(例如，时空关系)，从而保证了回放时会议场景的真实还原可能性。此外，现有视频会议录播服务器仅通过简单的软件升级，即可录制远程呈现会议，可以有效节省和保护用户投资。

显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

以上仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (15)

1.一种远程呈现会议系统，其特征在于，包括：多点控制单元MCU以及录播服务器；

所述MCU包括：

配置模块，用于将所述录播服务器作为一个远程呈现会场添加进会议中；

第一连接建立模块，用于向所述录播服务器发起一个或多个呼叫以建立通信连接，其中，该呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息；

所述录播服务器包括：

接收模块，用于接收来自于所述MCU的媒体流；

存储记录模块，用于存储所述媒体流，记录各个所述媒体流之间的关联关系。

2.根据权利要求1所述的系统，其特征在于，各个所述媒体流之间的关联关系包括以下至少之一：

视频流之间的空间关系；

数据流和视频流的对应关系；

音频流和视频流的对应关系。

3.根据权利要求1所述的系统，其特征在于，所述MCU包括：

广播模块，用于通过召集会议的形式，根据各个所述媒体流之间的关联关系广播所述录播服务器录制的媒体流。

4.根据权利要求1所述的系统，其特征在于，所述远程呈现会议系统还包括：远程呈现会场；所述远程呈现会场包括：

第二连接建立模块，用于与所述录播服务器建立点对点连接；

获取呈现模块，用于根据各个所述媒体流之间的关联关系获取所述录播服务器录制的媒体流并呈现。

5.根据权利要求4所述的系统，其特征在于，所述第二连接建立模块包括：

发起单元，用于向所述录播服务器发起一个或多个用于建立连接的呼叫，其中，该呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息。

6.根据权利要求4所述的系统，其特征在于，所述录播服务器包括：

第一发送模块，用于向所述视频终端中的一个或多个发送所述录制的媒体流所对应的文件列表信息；

第二发送模块，用于响应用户根据所述文件列表信息进行的选择操作，根据各个所述媒体流之间的关联关系，向各个所述视频终端发送所述媒体流。

7.根据权利要求4所述的系统，其特征在于，所述MCU与所述录播服务器之间的通信信令、以及所述远程呈现会场与所述录播服务器之间的通信信令是基于H.323协议规程或者IETF SIP协议规程进行扩展的信令。

8.一种远程呈现会议的录制方法，应用于如权利要求1至7中任一项所述的远程呈现会议系统，其特征在于，包括：

在所述远程呈现会议系统中的多点控制单元MCU将录播服务器作为一个远程呈现会场添加进会议之后，所述录播服务器接收来自于所述MCU发起的一个或多个用于建立连接的呼叫，其中，所述呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息；

所述录播服务器接收来自于所述MCU的媒体流并存储，记录各个所述媒体流之间的关联关系。

9.根据权利要求8所述的方法，其特征在于，所述MCU与所述录播服务器建立连接后，还包括：所述MCU对与所述录播服务器相连接的端口进行以下处理：

禁止来自于所述录播服务器的媒体流进入会议混音器；

禁止将所述录播服务器加入会场列表中；

禁止将所述录播服务器的上端和下端信息通知所述远程呈现会议系统中的远程呈现会场；

使主会场、分会场或经过混合处理后的媒体流传送至所述录播服务器。

10.根据权利要求8所述的方法，其特征在于，各个所述媒体流之间的关联关系包括以下至少之一：

视频流之间的空间关系；

数据流和视频流的对应关系；

音频流和视频流的对应关系。

11.根据权利要求8所述的方法，其特征在于，当所述呼叫为多个时，所述呼叫的个数大于等于需要录制的会议中具有最多屏幕的远程呈现会场的屏幕数。

12.一种远程呈现会议的回放方法，应用于如权利要求1至7中任一项所述的远程呈现会议系统，其特征在于，包括：

所述远程呈现会议系统中的多点控制单元MCU将通过召集会议的形式，根据各个录制的媒体流之间的关联关系广播录播服务器录制的媒体流。

13.一种远程呈现会议的回放方法，应用于如权利要求1至7中任一项所述的远程呈现会议系统，其特征在于，包括：

所述远程呈现会议系统中的远程呈现会场的视频终端与录播服务器建立点对点连接；

所述远程呈现会场根据录制的媒体流之间的关联关系，获取所述录播服务器录制的媒体流并呈现。

14.根据权利要求13所述的方法，其特征在于，所述视频终端与录播服务器建立点对点连接包括：

所述视频终端向所述录播服务器发起一个或多个用于建立连接的呼叫，其中，所述呼叫的建立消息中携带有与需要建立的通信连接相关联的视频所在的方位的空间信息。

15.根据权利要求13所述的方法，其特征在于，所述远程呈现会场获取来自于所述录播服务器的媒体流包括：

所述录播服务器向所述视频终端中的一个或多个发送所述录制的媒体流所对应的文件列表信息；

所述录播服务器响应用户根据所述文件列表信息进行的选择操作，根据所述录制的媒体流之间的关联关系，向各个所述视频终端发送所述录制的媒体流。

Images