CN105915837B - 一种视频切换方法、装置和系统 - Google Patents

Abstract

本发明公开了一种视频切换方法、装置和系统，以解决现有的视频切换流程繁琐以及操作不便的问题。该方法为，MCU与多个终端建立视频会议的呼叫连接；所述MCU检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系；所述MCU基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端。这样，在发生终端的视频切换时无需人工干预，基于终端之间的关联关系自动切换视频源，操作简便，减少人为操作的复杂性。

Description

一种视频切换方法、装置和系统

技术领域

本发明涉及视频会议技术领域，尤其涉及一种视频切换方法、装置和系统。

背景技术

视频业务是把语音、图像、数据等信息综合在一起进行远距离传输的多媒体业务，视频业务提供的服务是视频会议。如图1所示，现有技术中，当与会的终端数量多于2个时，必须经过多点控制单元(Multipoint Control Unit，MCU)来进行控制，所有与会的终端都要通过标准接口连接到MCU，另外，还需要经过通信网络把与会的会场与MCU连接起来，在物理上传输信道可以是光纤、电缆、微波或卫星等方式。

各个终端在加入会议后，当用户A使用新的终端加入会议时，需要人为在业务管理平台上进行手动视频切换，并广播新加入的终端，此时会议中其他终端看到用户A的视频图像，听到用户A的声音.

由此可知，现有的视频切换流程，在会议中加入第三方终端，为了保持会议持续广播用户的会议效果，需要人为在业务管理平台进行手动视频切换，并广播新入会终端，但是，在实际应用中，在大容量视频会议中参加会议的终端数量可能会很大，这样，导致视频切换流程繁琐以至于操作不方便、以及会场管理杂乱无序的问题。

发明内容

本发明实施例提供一种视频切换方法、装置和系统，以解决现有的视频切换流程繁琐以及操作不便的问题。

本发明实施例提供的具体技术方案如下：

第一方面，提供一种视频切换方法，包括：

MCU与多个终端建立视频会议的呼叫连接；

所述MCU检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；

所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系；

所述MCU基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端。

这样，在发生终端的视频切换时基于终端之间的关联关系自动切换视频源，相比于现有技术中需要人为在业务管理平台广播第一终端的技术方案，无需人工干预，自动实现视频源切换到第一终端，操作简便，减少人为操作的复杂性，提高视频的切换效率，提升用户体验。

结合第一方面，一种可能的设计中，所述MCU与多个终端建立视频会议的呼叫连接之前，所述方法还包括：

所述MCU接收业务管理平台发送的用于召开多点会议的命令信息，所述命令信息中携带有所述多个终端中每个主终端与各自对应的从终端的绑定信息。

这种设计中，业务管理平台通过召开多点会议的命令信息传递终端的绑定信息，实现方式简单，无需增加新的信令通知流程。

结合第一方面，一种可能的设计中，所述MCU与多个终端建立视频会议的呼叫连接，包括：

所述MCU向所述多个终端中任意一个从终端发送呼叫建立请求；

所述MCU接收所述任意一个从终端针对所述呼叫建立请求的呼叫连接，所述呼叫连接中携带有与所述从终端对应的主终端的绑定信息，并将所述从终端的绑定信息发送至业务管理平台；或

所述MCU接收所述多个终端中任意一个从终端发送的呼叫建立请求，所述呼叫请求中携带有与所述从终端对应的主终端的绑定信息；

所述MCU向所述从终端发送呼叫连接，并将所述从终端的绑定信息发送至业务管理平台。

这种设计中，终端的绑定信息通过呼叫信息创建并发送至业务管理平台，创建方式简单，易于实现。

结合第一方面，一种可能的设计中，所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系之前，所述方法还包括：

所述MCU接收第一终端发送的与所述第一终端对应的主终端和从终端的绑定信息，并将所述第一终端的绑定信息发送至业务管理平台。

这种设计中，在终端加入多点会议后，终端的绑定信息通过会控信令创建并发送至业务管理平台，创建方式简单，易于实现。

结合第一方面，一种可能的设计中，所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系，包括：

所述MCU检测所述第一终端与所述第二终端是否是不同终端；

所述MCU在检测到所述第一终端与所述第二终端是不同终端时，从业务管理平台获取第一终端的绑定信息和第二终端的绑定信息，所述第一终端的绑定信息包括与第一终端对应的主终端和从终端，所述第二终端的绑定信息包括与第二终端对应的主终端和从终端，

所述MCU基于所述第一终端的绑定信息和第二终端的绑定信息，确定第一终端和第二终端是否对应相同的主终端。

结合第一方面，一种可能的设计中，所述MCU基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端，包括：

所述MCU在所述第一终端与所述第二终端是相同终端时，保持广播视频源不变；

所述MCU在第一终端和第二终端对应相同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，且不向其他终端发送广播源切换的指示信息；

所述MCU在第一终端和第二终端对应不同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，并向其他终端发送广播源切换的指示信息。

这种设计中，在第一终端和第二终端是不同终端，但是对应的相同的主终端时。不向其他终端发送广播源切换的指示信息，其他终端感知不到第一终端的入会离会过程，减少了对其他终端的与会人员的影响，提升会议体验效果。

第二方面，提供一种视频切换装置，包括：

接口单元，用于与多个终端建立视频会议的呼叫连接；

检测单元，用于检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；

获取单元，用于获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系；

切换单元，用于基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端。

结合第二方面，一种可能的设计中，所述接口单元还用于：

在所述接口单元与多个终端建立视频会议的呼叫连接之前，接收业务管理平台发送的用于召开多点会议的命令信息，所述命令信息中携带有所述多个终端中每个主终端与各自对应的从终端的绑定信息。

结合第二方面，一种可能的设计中，所述接口单元具体用于：

向所述多个终端中任意一个从终端发送呼叫建立请求；

接收所述任意一个从终端针对所述呼叫建立请求的呼叫连接，所述呼叫连接中携带有与所述从终端对应的主终端的绑定信息，并将所述从终端的绑定信息发送至业务管理平台；或

接收所述多个终端中任意一个从终端发送的呼叫建立请求，所述呼叫请求

中携带有与所述从终端对应的主终端的绑定信息；

向所述从终端发送呼叫连接，并将所述从终端的绑定信息发送至业务管理平台。

结合第二方面，一种可能的设计中，所述接口单元还用于：

在所述获取单元获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系之前，接收第一终端发送的与所述第一终端对应的主终端和从终端的绑定信息，并将所述第一终端的绑定信息发送至业务管理平台。

结合第二方面，一种可能的设计中，包括；

所述检测单元，还用于检测所述第一终端与所述第二终端是否是不同终端；

所述获取单元，用于在所述检测单元检测到所述第一终端与所述第二终端是不同终端时，从业务管理平台获取第一终端的绑定信息和第二终端的绑定信息，所述第一终端的绑定信息包括与第一终端对应的主终端和从终端，所述第二终端的绑定信息包括与第二终端对应的主终端和从终端，

基于所述第一终端的绑定信息和第二终端的绑定信息，确定第一终端和第二终端是否对应相同的主终端。

结合第二方面，一种可能的设计中，所述切换单元具体用于：

在所述第一终端与所述第二终端是相同终端时，保持广播视频源不变；

在第一终端和第二终端对应相同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，且不向其他终端发送广播源切换的指示信息；

在第一终端和第二终端对应不同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，并向其他终端发送广播源切换的指示信息。

第三方面，提供一种MCU，包括收发器、存储器以及处理器，其中，所述存储器中存储一组程序，且所述处理器用于调用所述存储器中存储的程序，使得所述MCU执行如第一方面、第一方面的任何一种可能的设计中的实现方式中的任意一种所述的方法。

第四方面，提供一种视频切换系统，包括：业务管理平台、MCU和多个终端，其中，

所述业务管理平台，用于向MCU发送召开多点会议的命令信息，

所述MCU，用于接收所述业务管理平台发送的召开多点会议的命令信息，与所述多个终端建立视频会议的呼叫连接；检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系；基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端。

第五方面，提供一种视频切换方法，包括：

业务管理平台接收MCU发送的终端的绑定信息；

所述业务管理平台在接收到MCU发送的第一终端加入多点会议的指示信息时，从所述绑定信息中获取所述第一终端的绑定信息，并发送至MCU。

第六方面，提供一种视频切换装置，包括：

收发单元，用于接收MCU发送的终端的绑定信息；

所述收发单元，还用于接收MCU发送的第一终端加入多点会议的指示信息；

处理单元，用于从所述绑定信息中获取所述第一终端的绑定信息，并通过所述收发单元发送至MCU。

本发明实施例中，MCU与多个终端建立视频会议的呼叫连接；检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系；基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端，这样，在发生终端的视频切换时无需人工干预，基于终端之间的关联关系自动切换视频源，操作简便，减少人为操作的复杂性，提高视频的切换效率，提升用户体验。

附图说明

图1为现有技术中MCU控制视频会议的示意图；

图2为一种多点会议场景示意图；

图3为一种多点会议的终端视频切换场景示意图；

图4为一种多点会议的终端视频切换流程示意图；

图5为本发明实施例中视频切换方法流程图；

图6A为本发明实施例中一个终端绑定的配置界面示意图；

图6B为本发明实施例中一种终端绑定信息示意图；

图7为本发明实施例中一种动态创建各终端的绑定关系示意图；

图8为本发明实施例中一种动态创建各终端的绑定关系示意图；

图9为本发明实施例中从终端界面配置主终端的界面示意图；

图10为本发明实施例中一种动态创建各终端的绑定关系示意图；

图11为本发明实施例中的各种会议策略的发送示意图；

图12为本发明实施例一中的视频切换方法流程图；

图13为本发明实施例二中的视频切换方法流程图；

图14为本发明实施例三中的视频切换方法流程图；

图15为本发明实施例中视频切换装置结构示意图；

图16为本发明实施例MCU结构图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，并不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，现有技术的会议电视系统一般由视讯终端(又称会议电视终端，以下简称终端)、传输信道、多点控制单元、业务管理平台等几部分组成。以下将分别对终端、多点控制单元、传输信道进行说明。

一、终端

本发明实施例中，终端一般包括视频输入输出设备、音频输入输出设备、音视频编解码器、用户操作控制界面等部件；由用户手动或自动触发和远端的终端设备以及和多点控制单元建立会议，相互传输音频、视频，数据内容，进行双向或多方的媒体交换。例如和远端的终端设备建立P2P会议，和多点控制单元建立多点呼叫的会议。

视讯会议建立后，终端的视频、音频经过本地的视频、音频编码器进行图像格式的采样、压缩、编码，然后通过协商的媒体传输通道传输到远端的设备，远端设备接收后，首先解码媒体流，解压码流，缩放送到对应的媒体输出设备，还原所述终端的音频，视频，数据内容。

为了更好的会议体验效果，有的终端使用了语音跟踪技术，在视讯会议过程中，视频输入设备的输入焦点会随着所在终端声音大小调整位置，例如一个终端有两个与会者，分别坐在视频输入设备的左右两侧，开会时，左侧的用户发言时，摄像机转动到左侧，对准左侧用户，将左侧用户的视频图像完整的进行采集传输到远端设备，当摄像机右侧的用户进行发言时，摄像机自动转动到右侧，对准右侧用户，将右侧用户图像传输到远端设备。

二、多点控制单元

多点控制单元，即图1中的MCU，是会议电视系统的控制核心。当参加会议的终端数量多于2个时，必需经过MCU来进行控制。所有终端都要通过标准接口连接到MCU，MCU按照国际标准H.221、H.242、H.243、T.120等协议的规定实现图像和语音的交换与混合，实现所有终端的控制等相关功能。一般来讲，MCU分为主机和操作台两部分，主机完成上述协议规定的相关功能，操作台提供主机运行的操作控制和人机界面，通过操作台对主机进行各种操作和发布命令。在推行综合视讯业务的时候，还需要配备营业台，完成对外的会议登记、预约、收费等业务功能。

三、传输信道

要组成一个完整的会议电视系统必须经通信网络把终端设备与MCU连接起来，在物理上传输信道可以是光纤、电缆、微波或卫星等方式。会议电视常用的通信网络有：公用电话交换网(PSTN)、公用分组交换网(PSPDN)、数字数据网(DDN)等，目前以ATM技术为主导的宽带交换网络的迅速发展，为会议电视提供了一个更广的应用领域，如综合业务数字网(ISDN)、IP网和IQ网。更随着目前ISDN网和Internet的普及，使得会议电视业务具备了迅速普及到普通大众的条件。

四、业务管理平台

业务管理平台位于服务器侧与MCU连接，用于向MCU发送命令以召开视频会议，实现对MCU的管理。

例如，现有的视频切换场景，参阅图2所示，用户A、用户B、用户C使用终端1，用户D使用终端2，用户E使用终端3。业务管理平台向MCU发送召开终端1、终端2、终端3的多点会议的命令，使终端1、终端2、终端3加入MCU的多点会议中。会议管理者在业务管理平台广播终端1，此时终端1中用户A发言时，终端1的摄像头对准用户A，用户D，E看到终端1中用户A的图像。图3所示，用户A离开终端1，终端1的摄像头调整到其他用户位置，用户A采用终端4重新加入会议，其他与会者为了继续看用户A的图像以及听用户A的声音，会议管理者通过业务管理平台广播终端4的内容，其他与会者重新看到用户A的图像。整个视频源切换操作流程如图4所示。

1、业务管理平台向MCU发送召开终端1、终端2、终端3的多点会议的命令。

2、终端1、2、3加入MCU多点会议。

3、会议管理者在业务管理平台广播终端1。

4、终端1所在会议室用户A发言，终端1摄像头对准用户A，终端1向MCU上传包含用户A的图像的视频码流和包含用户A的声音的音频码流。

5、MCU转发终端1的视频码流和音频码流给终端2、终端3，终端2、终端3中的用户看到终端1中用户A的图像，听到用户A的声音。

6、用户A离开会议终端1，使用终端4加入当前的多点会议。

7、会议管理者在业务管理平台广播终端4。

8、终端4向MCU上传包含用户A的图像的视频码流和包含用户A的声音的音频码流。

9、MCU转发终端4的视频码流和音频码流给终端1、终端2和终端3，终端1、终端2和终端3中的用户看到用户A的图像，听到用户A的声音。

由此可知，现有的视频切换流程中，当用户使用新的终端加入会议时，引入了人为的视频切换流程，导致视频切换繁琐，且操作不便。因此，本发明实施例中提供一种视频切换方案，以避免用户使用新的终端加入会议时，人为切换广播的过程，简化视频切换流程，提升便利性。

基于图1所示的视频会议网络系统，下面结合附图对本申请提供的视频会议的视频切换方法进行详细说明。

如图5所示为本申请中提供的一种视频会议的视频切换方法具体流程。

步骤500：MCU与多个终端建立视频会议的呼叫连接。

步骤501：所述MCU检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端。

步骤502：所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系。

步骤503：所述MCU基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端。

具体的，为了获取所述第一终端与上一次检测到的第二终端间的关联关系，需要确定加入多点会议的多个终端之间的绑定关系，终端之间的绑定关系在业务管理平台或终端侧创建，在业务管理平台和MCU侧维护，正常会议过程中终端不需要知道终端之间的绑定关系，创建绑定关系的方式包括以下三种方式：

第一种方式，在各终端加入多点会议之前，在业务管理平台静态创建各终端的绑定关系。

具体的，所述MCU与多个终端建立视频会议的呼叫连接之前，所述MCU接收业务管理平台发送的用于召开多点会议的命令信息，所述命令信息中携带有所述多个终端中每个主终端与各自对应的从终端的绑定信息。

可选的，在业务管理平台的管理界面提供终端绑定的配置界面，具体可参阅图6A所示，用户可以指定绑定终端的参数，包括主终端的号码或IP，从终端的号码或IP，主终端仅有一个，从终端可以有一个或多个，图6B所示为终端绑定信息示意图，A终端为主终端，对应3个从终端；B终端为主终端，对应2个从终端；E终端为主终端，对应2个从终端，C终端和D终端没有绑定关系的终端。

其中，业务管理平台调用一个多点会议时，如果同时包含主终端和从终端，会议管理平台给MCU下发召开多点会议的命令信息中，包含所有主终端和从终端的绑定信息，MCU接收相关的会议信息以及会议中终端的绑定信息，并将这两组信息保存在一起。

静态绑定关系是固定的，在重新配置前终端的绑定关系不变，会议中如果更改了绑定关系，本次会议中继续维持之前的绑定关系，新的绑定关系在下次召开多点会议时才生效，随着下一次召开多点会议的命令信息下发给MCU。

如果多点会议中的终端仅包含某个绑定终端的从终端，下发给MCU的绑定信息中包含该从终端对应的主终端，以及该主终端是否加入会议的的指示信息。

第二种方式，在各终端加入多点会议之前，在各终端加入多点会议时，在终端侧通过呼叫信令动态创建各终端的绑定关系，具体包括以下两种情景：

第一种情景为MCU主动呼叫各个终端，具体过程可参阅图7所示：

S701：所述MCU向所述多个终端中任意一个从终端发送呼叫建立请求。

S702：所述MCU接收所述任意一个从终端针对所述呼叫建立请求的呼叫连接，所述呼叫连接中携带有与所述从终端对应的主终端的绑定信息。

S703：所述MCU将所述从终端的绑定信息发送至业务管理平台。

第二种情景为各个终端主动呼叫MCU，具体过程可参阅图8所示：

S801：所述MCU接收所述多个终端中任意一个从终端发送的呼叫建立请求，所述呼叫请求中携带有与所述从终端对应的主终端的绑定信息。

S802：所述MCU向所述从终端发送呼叫连接。

S803：所述MCU将所述从终端的绑定信息发送至业务管理平台。

例如，主终端加入多点会议后，从终端入会时，在从终端的呼叫信令中指定当前从终端对应的主终端的地址。以H323终端为例，在H323呼叫信令消息中，通过非标消息指定主终端的地址，按照H225.0协议的要求，使用NonStandardParamter字段携带自定义的参数。

NonStandardIdentifier表示当前字段携带的内容是主终端的地址信息，Data携带主终端的地址信息，包含地址类型定义和地址信息，地址类型包括IPV4、IPV6，E164号码类型，地址信息携带对应类型的地址值，例如IPV4地址或E164号码。

假如从终端加入多点会议时，该从终端对应的主终端没有加入多点会议，从终端呼叫过程传递主终端信息的过程和主终端加入多点会议的流程完全一致，从终端入会时识别到对应的主终端没有入会，继续把从终端对应的主终端信息发给其他会场，实现流程和主终端加入多点会议的流程完全一致。

其中，从终端绑定的主终端地址信息，呼叫前在从终端界面配置，配置方式如图9所示。

第三种方式，在各终端加入多点会议之后，在会议过程中，在终端侧通过会控信令动态创建各终端的绑定关系。

具体的，所述MCU接收第一终端发送的与所述第一终端对应的主终端和从终端的绑定信息，并将所述第一终端的绑定信息发送至业务管理平台，可选的，主从终端的绑定信息通过会控信令发送，具体可参阅图10所示。

此时的终端绑定流程类似加入多点会议时的绑定流程，都是在从终端界面进行配置，唯一区别，此模式下是在主终端和从终端加入多点会议后进行配置，配置好的终端绑定关系在会议过程中通过会控信令发送给MCU，会控信令根据H245协议，可以采用如下的消息方式：

终端的绑定关系通过H245的非标指示消息上报，采用NonStandardMessage结构体，携带的字段属性和加入多点会议时动态绑定格式和内容完全相同。该模式下，下发绑定关系仅在会议的主席终端侧，且被绑定终端中，一定存在主会场，不允许指定了被绑定终端，但不包含主终端的组合，终端的绑定关系配置后，通过会控的H245通道发送给MCU，终端的绑定信息传递到MCU侧，MCU将终端的绑定信息和当前的会议信息保存在一起，MCU同时上报终端的绑定信息给业务管理平台。

具体的，所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系时，执行以下过程：

所述MCU检测所述第一终端与所述第二终端是否是不同终端；

所述MCU在检测到所述第一终端与所述第二终端是不同终端时，从业务管理平台获取第一终端的绑定信息和第二终端的绑定信息，所述第一终端的绑定信息包括与第一终端对应的主终端和从终端，所述第二终端的绑定信息包括与第二终端对应的主终端和从终端，

所述MCU基于所述第一终端的绑定信息和第二终端的绑定信息，确定第一终端和第二终端是否对应相同的主终端。

需要说明的是，上述终端的绑定信息用于描述该终端以及与该终端绑定的主终端或终端，例如，终端1为主终端，终端2是与终端1绑定的从终端，因此，终端1对应的主终端是终端1，从终端是终端2，同理，终端2对应的主终端是终端1，从终端是终端2.

具体的，所述MCU基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端，包括：

所述MCU在所述第一终端与所述第二终端是相同终端时，保持广播视频源不变；

所述MCU在第一终端和第二终端对应相同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，不向其他终端发送广播源切换的指示信息；

所述MCU在第一终端和第二终端对应不同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，并向其他终端发送广播源切换的指示信息。

需要说明的是，基于上述三种方式创建的终端的绑定关系下发到MCU，MCU根据终端的主从绑定关系，执行各种会议策略的发送，具体的，如会场列表消息和会控消息仅发送给主终端和其他终端，而不发送给从终端，具体如图11所示。

下面通过两个实施例来详细说明上述方法。

实施例一

实施例一中的视频切换场景与图2中完全一致，区别在于，在各终端加入多点会议之前，在业务管理平台静态创建各终端的绑定关系，具体的视频切换流程可参阅图12所示。

步骤120：在业务管理平台按照上面所述的第一种方式配置主从终端的绑定关系，指定每个绑定终端的主终端以及从终端，并上报给MCU，当前配置下终端1和终端4是绑定终端，且终端1是主终端，终端4是从终端。

步骤121：业务管理平台向MCU发送召开包括终端1、终端2和终端3的多点会议的命令信息。

步骤122：MCU依次与终端1、终端2和终端3终端建立呼叫，呼叫过程中不区分主终端和从终端。

步骤123：会议管理者在业务管理平台广播终端1，终端1所在会议室用户A发言，终端1摄像头对准用户A。

步骤124：终端1向MCU上传包含用户A的图像的视频码流，包含用户A的声音的音频码流。

步骤125：MCU转发终端1的视频码流和音频码流给终端2、终端3。

步骤126：用户A离开终端1，使用终端4加入当前的多点会议。

步骤127：终端4加入多点会议，在与MCU建立呼叫后，MCU向业务管理平台上报终端4加入当前多点会议的信息。

步骤128：业务管理平台检测到当前多点会议中的终端1和终端4是绑定关系，下发绑定关系给MCU，包括终端1是主终端，终端4是从终端的绑定信息，因为终端4是从终端，所以终端4的入会指示信息不会下发给终端1、终端2、终端3，同样终端1、终端2、终端3的会场列表中看不到终端4。

步骤129：用户A使用终端4继续发言，按照声控广播的原则，MCU自动切换到广播终端4；此时因为MCU记录的终端4是终端1的绑定终端，MCU不会给终端1、终端2、终端3下发广播终端4的广播指示消息，还是维持之前广播终端1的会控状态。需要说明的是，如果后续多点会议中存在用户始终在终端1和终端4中切换，那么终端1、终端2、终端3的广播状态就一直维持是广播终端1的会控状态。

实施例二

实施例二中的视频切换场景与图2中完全一致，区别在于，在各终端加入多点会议时，在终端侧动态创建各终端的绑定关系，具体的视频切换流程可参阅图13所示。

步骤130：在从终端加入多点会议时，按照上面所述的第二种方式配置主从终端的绑定关系，指定与每个从终端绑定的主终端，当前配置下终端1和终端4是绑定终端，且终端1是主终端，终端4是从终端。

步骤131～步骤139，与图12中步骤121～129一致，在此不再赘述。

实施例三

的视频切换场景与图2中完全一致，区别在于，在各终端加入多点会议之后，通过会控信令在终端侧动态创建各终端的绑定关系，具体的视频切换流程可参阅图14所示。

步骤140：业务管理平台向MCU发送召开包括终端1、终端2、终端3、终端4的多点会议的命令信息。

步骤141：MCU依次与终端1、终端2、终端3、终端4建立呼叫。

步骤142：会议管理者在业务管理平台广播终端1，终端1所在会议室用户A发言，终端1摄像头对准用户A。

步骤143：终端1向MCU上传包含用户A的图像的视频码流，包含用户A的声音的音频码流。

步骤144：MCU转发终端1的视频码流和音频码流给终端2、终端3、终端4。

步骤145：此时在终端1做终端绑定，指定终端1为主终端，终端4为终端1的从终端，建立绑定关系。

步骤146：终端1按照会控信令的绑定消息格式将建立的绑定关系发送到MCU，MCU记录该绑定关系到当前的会议信息中，并将会议信息上报业务管理平台。

步骤147：针对绑定终端的广播，MCU检测绑定终端中音量最大的终端，识别出来后将终端1、终端4中其中一个终端的音频码流和视频码流广播给其他与会终端；如果检测的终端1的音量最大，则不调整视频源的切换，如果终端4音量最大，则广播终端4的音频码流和视频码流给其他与会终端。

需要说明的是，在步骤126中也可以建立绑定关系是终端1为从终端，终端4为终端1的主终端，同样MCU针对绑定终端的广播，检测绑定终端中音量最大的终端，识别出来将终端1、终端4中其中一个终端的音频码流和视频码流广播给其他与会终端，同时发送新的广播指示给其他终端，该广播指示中广播源为终端4；如果终端1音量最大，则不调整视频源的切换，仅发送广播指示，如果终端4音量最大，则视频源切换到终端4、同时也发送广播指示。

基于上述视频切换方法，参阅图15所示，为本发明实施例提供的视频切换装置，该装置150包括：接口单元151、检测单元152、获取单元153和切换单元154，其中：

接口单元151，用于与多个终端建立视频会议的呼叫连接；

检测单元152，用于检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；

获取单元153，用于获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系；

切换单元154，用于基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端。

可选的，所述接口单元151还用于：

在所述接口单元151与多个终端建立视频会议的呼叫连接之前，接收业务管理平台发送的用于召开多点会议的命令信息，所述命令信息中携带有所述多个终端中每个主终端与各自对应的从终端的绑定信息。

可选的，所述接口单元151具体用于：

向所述多个终端中任意一个从终端发送呼叫建立请求；

接收所述任意一个从终端针对所述呼叫建立请求的呼叫连接，所述呼叫连接中携带有与所述从终端对应的主终端的绑定信息，并将所述从终端的绑定信息发送至业务管理平台；或

接收所述多个终端中任意一个从终端发送的呼叫建立请求，所述呼叫请求中携带有与所述从终端对应的主终端的绑定信息；

向所述从终端发送呼叫连接，并将所述从终端的绑定信息发送至业务管理平台。

可选的，所述接口单元151还用于：

在所述获取单元153获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系之前，接收第一终端发送的与所述第一终端对应的主终端和从终端的绑定信息，并将所述第一终端的绑定信息发送至业务管理平台。

可选的，所述检测单元152，还用于检测所述第一终端与所述第二终端是否是不同终端；

所述获取单元153，用于在所述检测单元152检测到所述第一终端与所述第二终端是不同终端时，从业务管理平台获取第一终端的绑定信息和第二终端的绑定信息，所述第一终端的绑定信息包括与第一终端对应的主终端和从终端，所述第二终端的绑定信息包括与第二终端对应的主终端和从终端，基于所述第一终端的绑定信息和第二终端的绑定信息，确定第一终端和第二终端是否对应相同的主终端。

可选的，所述切换单元154具体用于：

在所述第一终端与所述第二终端是相同终端时，保持广播视频源不变；

在第一终端和第二终端对应相同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，且不向其他终端发送广播源切换的指示信息；

在第一终端和第二终端对应不同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，并向其他终端发送广播源切换的指示信息。

本发明实施例上述涉及的装置150，可以是独立的部件，也可以是集成于其他部件中，例如本发明实施例提供的上述装置150可以是现有视频会议系统的MCU，也可以是集成于MCU内的部件。

需要说明的是，本发明实施例中的装置150的各个单元的功能实现以及交互方式可以进一步参照相关方法实施例的描述，在此不再赘述。

另外，以上各“单元”可以通过特定应用集成电路(application-specificintegrated circuit，ASIC)，执行一个或多个软件或固件程序的处理器和存储器，集成逻辑电路，和/或其他可以提供上述功能的器件来实现。

基于相同的构思，如图16所示，为本发明实施例提供的MCU结构示意图。该MCU160可以用于执行上述方法实施例中MCU执行过程。其中：MCU160包括收发器161、存储器162以及处理器163，其中，所述存储器162中存储一组程序，且所述处理器163用于调用所述存储器162中存储的程序，使得所述MCU160执行上述视频会议的视频切换方法，MCU160还包括总线164，收发器161、存储器162以及处理器163均与总线164连接。

综上所述，本发明实施例中，MCU与多个终端建立视频会议的呼叫连接；所述MCU检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系；所述MCU基于所述关联关系控制广播视频源从所述第二终端切换到所述第一终端。这样，在发生终端的视频切换时无需人工干预，基于终端之间的关联关系自动切换视频源，操作简便，减少人为操作的复杂性。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。这样，倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种视频切换方法，其特征在于，包括：

多点控制单元MCU与多个终端建立视频会议的呼叫连接；

所述MCU检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；

所述MCU检测所述第一终端与上一次检测到的多个终端中声音最大的第二终端是否是不同终端；

所述MCU在检测到所述第一终端与所述第二终端是不同终端时，从业务管理平台获取第一终端的绑定信息和第二终端的绑定信息，所述第一终端的绑定信息包括与第一终端对应的主终端和从终端，所述第二终端的绑定信息包括与第二终端对应的主终端和从终端；

所述MCU基于所述第一终端的绑定信息和第二终端的绑定信息，确定第一终端和第二终端是否对应相同的主终端；

所述MCU在所述第一终端与所述第二终端是相同终端时，保持广播视频源不变；所述MCU在第一终端和第二终端对应相同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，且不向其他终端发送广播源切换的指示信息；所述MCU在所述第一终端和所述第二终端对应不同的主终端时，控制广播视频源从所述第二终端切换到所述第一终端，并向其他终端发送广播源切换的指示信息。

2.如权利要求1所述的方法，其特征在于，所述MCU与多个终端建立视频会议的呼叫连接之前，所述方法还包括：

所述MCU接收业务管理平台发送的用于召开多点会议的命令信息，所述命令信息中携带有所述多个终端中每个主终端与各自对应的从终端的绑定信息。

3.如权利要求1所述的方法，其特征在于，所述MCU与多个终端建立视频会议的呼叫连接，包括：

所述MCU向所述多个终端中任意一个从终端发送呼叫建立请求；

所述MCU接收所述任意一个从终端针对所述呼叫建立请求的呼叫连接，所述呼叫连接中携带有与所述从终端对应的主终端的绑定信息，并将所述从终端的绑定信息发送至业务管理平台；或

所述MCU接收所述多个终端中任意一个从终端发送的呼叫建立请求，所述呼叫请求中携带有与所述从终端对应的主终端的绑定信息；

所述MCU向所述从终端发送呼叫连接，并将所述从终端的绑定信息发送至业务管理平台。

4.如权利要求1所述的方法，其特征在于，所述MCU获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系之前，所述方法还包括：

所述MCU接收第一终端发送的与所述第一终端对应的主终端和从终端的绑定信息，并将所述第一终端的绑定信息发送至业务管理平台。

5.一种视频切换装置，其特征在于，包括：

接口单元，用于与多个终端建立视频会议的呼叫连接；

检测单元，用于检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；检测所述第一终端与上一次检测到的多个终端中声音最大的第二终端是否是不同终端；

获取单元，用于在所述检测单元检测到所述第一终端与所述第二终端是不同终端时，从业务管理平台获取第一终端的绑定信息和第二终端的绑定信息，所述第一终端的绑定信息包括与第一终端对应的主终端和从终端，所述第二终端的绑定信息包括与第二终端对应的主终端和从终端；基于所述第一终端的绑定信息和第二终端的绑定信息，确定第一终端和第二终端是否对应相同的主终端；

切换单元，用于在所述第一终端与所述第二终端是相同终端时，保持广播视频源不变；在第一终端和第二终端对应相同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，且不向其他终端发送广播源切换的指示信息；在所述第一终端和所述第二终端对应不同的主终端时，控制广播视频源从所述第二终端切换到所述第一终端，并向其他终端发送广播源切换的指示信息。

6.如权利要求5所述的装置，其特征在于，所述接口单元还用于：

在所述接口单元与多个终端建立视频会议的呼叫连接之前，接收业务管理平台发送的用于召开多点会议的命令信息，所述命令信息中携带有所述多个终端中每个主终端与各自对应的从终端的绑定信息。

7.如权利要求5所述的装置，其特征在于，所述接口单元具体用于：

向所述多个终端中任意一个从终端发送呼叫建立请求；

接收所述任意一个从终端针对所述呼叫建立请求的呼叫连接，所述呼叫连接中携带有与所述从终端对应的主终端的绑定信息，并将所述从终端的绑定信息发送至业务管理平台；或

接收所述多个终端中任意一个从终端发送的呼叫建立请求，所述呼叫请求中携带有与所述从终端对应的主终端的绑定信息；

向所述从终端发送呼叫连接，并将所述从终端的绑定信息发送至业务管理平台。

8.如权利要求5所述的装置，其特征在于，所述接口单元还用于：

在所述获取单元获取所述第一终端与上一次检测到的多个终端中声音最大的第二终端间的关联关系之前，接收第一终端发送的与所述第一终端对应的主终端和从终端的绑定信息，并将所述第一终端的绑定信息发送至业务管理平台。

9.一种多点控制单元MCU，其特征在于，包括收发器、存储器以及处理器，其中，所述存储器中存储一组程序，且所述处理器用于调用所述存储器中存储的程序，使得所述MCU执行如权利要求1至4任一所述的方法。

10.一种视频切换系统，其特征在于，包括：业务管理平台、多点控制单元MCU和多个终端，其中，

所述业务管理平台，用于向MCU发送召开多点会议的命令信息；

所述MCU，用于接收所述业务管理平台发送的召开多点会议的命令信息，与所述多个终端建立视频会议的呼叫连接；检测所述多个终端的声音大小，将检测到的所述多个终端中声音最大的终端作为第一终端；检测所述第一终端与上一次检测到的多个终端中声音最大的第二终端是否是不同终端；在检测到所述第一终端与所述第二终端是不同终端时，从业务管理平台获取第一终端的绑定信息和第二终端的绑定信息，所述第一终端的绑定信息包括与第一终端对应的主终端和从终端，所述第二终端的绑定信息包括与第二终端对应的主终端和从终端；基于所述第一终端的绑定信息和第二终端的绑定信息，确定第一终端和第二终端是否对应相同的主终端；在所述第一终端与所述第二终端是相同终端时，保持广播视频源不变；在第一终端和第二终端对应相同的主终端时，将广播视频源从所述第二终端切换到所述第一终端，且不向其他终端发送广播源切换的指示信息；在所述第一终端和所述第二终端对应不同的主终端时，控制广播视频源从所述第二终端切换到所述第一终端，并向其他终端发送广播源切换的指示信息。