CN105357467A - 音频视频会议中的远程互动方法、装置及系统 - Google Patents

Abstract

本发明公开了一种音频视频会议中的远程互动方法、装置及系统，所述方法包括：多点控制单元MCU将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端；其中，各与会终端均支持用户输入通道；会议业务管理系统统计各与会终端根据音频和/或视频界面的指引而反馈的互动信息；MCU将会议业务管理系统得到的统计结果发送至各与会终端。本发明所述方案沿用原有音频视频会议系统组网，采用简单、经济的方式实现会议中的互动。

Description

音频视频会议中的远程互动方法、装置及系统

技术领域

本发明涉及会议电视系统多媒体通信领域，特别是涉及一种音频视频会议中的远程互动方法、装置及系统。

背景技术

随着IP网络和多媒体通信技术的快速发展，以及全球环保低碳的理念的影响，用户已经不需要亲临现场就可以通过音频视频多媒体技术实现的会议电视系统参与到会议、决策等，这使得会议电视系统在各行各业中得到了广泛的应用。会议电视系统是指，利用电视等显示设备及会议电视终端，通过MCU(MultipointControlUnit，多点控制单元)将分布各地的多个用户终端召集到同一个会议中，通过音视频及数据的传送，与会人员就相关议题进行讨论，达到现场互动和沟通的目的。如图1所示，为会议电视系统的结构框图。

在现实应用中，对于一些需要用户进行投票、打分、表决的使用场景下，大多数情况都是需要用户亲临现场，对用户的差旅费和时间都是很大的浪费。

即使在目前使用会议电视系统加入到会议中，当用户需要进行投票、打分或者表决等情况的场景，都需要配套的第三方的表决系统，如图2所示，为现有技术中会议电视系统中加入第三方表决系统的基本结构示意图。

然而，上述通过引入第三方表决系统的方案需要改变当前会议系统的组网，在资源、配置等各个方面均需要匹配设置，专业性要求较高，对其使用效率产生影响；另外，购入第三方表决系统也会增大资金投入，不便于广泛推广。

发明内容

鉴于上述问题，提出了本发明，以便提供一种解决上述问题的音频视频会议中的远程互动方法、装置及系统。

依据本发明的一个方面，提供一种音频视频会议中的远程互动方法，包括：

多点控制单元MCU将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端；其中，各与会终端均支持用户输入通道；

会议业务管理系统统计各与会终端根据音频和/或视频界面的指引而反馈的互动信息；

MCU将会议业务管理系统得到的统计结果发送至各与会终端。

依据本发明的另一个方面，提供一种MCU，包括：

互动发起模块，用于在视频会议中，将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端；其中，各与会终端均支持用户输入通道；

互动处理模块，用于接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息，并将所述互动信息发送至会议业务管理系统，以及接收会议业务管理系统利用所述互动信息进行统计得到的统计结果，将所述统计结果发送至各与会终端。

依据本发明的第三个方面，提供一种视频会议中的互动系统，包括：会议业务管理系统、与会终端、以及本发明所述的MCU；

所述与会终端，用于在接收到所述MCU发送的与本次互动对应的用于指引用户输入的音频和/或视频界面后，根据音频和/或视频界面的指引进行互动操作，并将操作得到的互动信息发送至所述MCU；

所述会议业务管理系统，用于接收所述MCU发送的各与会终端根据音频和/或视频界面的指引而反馈的互动信息，并对所述互动信息进行统计后，将统计结果发送至所述MCU。

本发明有益效果如下：

本发明所述方案，不需要用户加装第三方的投票表决系统，帮助用户在一种简化的组网和经济方案中实现会议中的互动，采用音频和视频更加生动的方式帮助用户完成投票、打分、表决过程，并采用更加科学、经济和智能的方式统计用户的表决情况。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为现有技术中会议电视系统的基本结构示意图；

图2为在会议电视系统中加入第三方表决系统的基本结构示意图；

图3为本发明实施例提供的一种音频视频会议中的互动方法的流程图；

图4为本发明实施例提供的音频视频会议中的互动方法的又一流程图；

图5为本发明实施例提供的一种MCU的结构框图；

图6为本发明实施例提供的一种音频视频会议中的互动系统的结构框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供一种音频视频会议中的互动方法、装置及系统，所述方法沿用原有音频视频会议系统组网，采用简单、经济的方式实现会议中的互动。下面就通过几个具体实施例对本发明所述方案进行详细阐述。

实施例一

本发明实施例提供一种音频视频会议中的互动方法，如图3所示，所述方法包括如下步骤：

S301，MCU将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端；

该步骤中，所述互动的类型包括但不限于为：投票、打分和表决。

该步骤中，各与会终端均支持用户输入通道；确切地讲，MCU在各与会终端入会时，为各与会终端开启用户输入通道，以使各与会终端支持用户输入通道，进而为终端用户的二次输入提供技术支持。

进一步地，该步骤中，所述用于指引用户输入的音频和/或视频界面的获取方式包括：MCU获取预先存储的与本次互动对应的音频文件和图片文件，并对音频文件和图片文件分别进行合成，形成所述用以指引用户输入的音频和视频界面。

进一步地，该步骤中，MCU向各与会终端下发音频、视频还是音频和视频，由与会终端支持的信息类型来决定，举例说明：若与会终端仅支持音频或视频，则向其发送音频或者视频界面，若与会终端支持音频和视频，则向其发送音频和视频界面。其中，MCU获取各与会终端支持的信息类型的方式包括但不限于为：MCU获取为各与会终端建立的逻辑通道，根据逻辑通道的类型确定与会终端支持的信息类型；所述逻辑通道的类型包括：音频、视频和数据。

或者，将用户的意愿考虑进来，实现方式如下：MCU获取各与会终端支持的信息类型，并检测各与会终端是否对接收信息的类型进行设定；

若进行了设定，则检测对应与会终端设定的信息类型是否属于其支持的信息类型，若是，则基于设定的信息类型向对应与会终端发送音频或视频界面；否则，基于与会终端支持的信息类型向对应与会终端发送音频或视频界面；

若未进行设定，则基于各与会终端支持的信息类型，向各与会终端发送音频和/或视频界面。

S302，会议业务管理系统统计各与会终端根据音频和/或视频界面的指引而反馈的互动信息；

S303，MCU将会议业务管理系统得到的统计结果发送至各与会终端。

该步骤中，MCU将统计结果合成文字、音频和视频，并基于在先获取的各与会终端支持的信息类型，向各与会终端发送文字、音频和/或视频的统计结果。

优选方案，本实施例中为了将互动过程与现有的会议过程进行有效结合，节省网络资源，将MCU与各与会终端间交互的信息与会议中的数据、音频和视频码流一起编码为媒体流格式后进行交互。具体表现为：

MCU将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。

MCU将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。

综上所述，可知本实施例所述方法在不改变用户的会议系统组网、不改变用户对会议系统的原始使用习惯的基础上，通过本实施例所阐述的方法，能使得与会终端用户能够有如临现场一样进行投票、打分或表决的互动体验。

为了更清楚的阐述本发明，下面根据图4给出本发明一个较佳的实施例，并结合对实施例的描述，进一步给出本发明的技术细节，使其能够更好地说明本发明的提供的方法的具体实现过程。

如图4所示，本实施例提供的基于音频视频会议系统的远程互动方法，包括如下步骤：

步骤S401：会议管理员在会议业务管理系统选择终端列表，召开视频会议。业务管理系统通知协议与通道控制模块召开视频会议，呼叫各与会终端入会。

其中，能力协商和逻辑通道打开的过程中就支持用户输入的通道(UserInput)。通过支持用户输入通道为以后互动过程中用户按照指示输入提供必要的技术支持。

步骤S402：会议业务管理系统根据会议现场的需要判断，是否需要启用投票、打分或者表决的流程，如果不需要则会议保持普通的模式继续，如果需要则进入投票、打分或者表决的流程，转步骤S403。

步骤S403：MCU对已经保存好的音频文件、图片文件分别进行合成，形成提醒用户输入的音频和视频界面(即视频的用户界面UI)。

步骤S404：MCU将音频和视频界面与当前会议中的数据、音频和视频码流一起进行编码成媒体流格式。

步骤S405：MCU将音频和视频码流发送给与会终端；

对于音频会议或只支持音频能力的终端，在S401步骤中就不会打开视频通道，因此也不会将视频媒体流发送给对应的与会终端。

步骤S406：与会终端根据收到的音频和/或视频界面的引导，使用遥控器、键盘等输入自己的投票、打分或表决数据并进行提交。

其中，根据收到的音频和/视频界面的引导进行操作是一种交互式音频视频应答(IVR或者IVVR)技术。

步骤S407：MCU收到所有与会终端提交的投票、打分或表决数据，提交给业务管理系统进行决策。

步骤S408：业务管理系统将所有的投票、打分或表决数据进行汇总，根据用户意志进行决策，并将汇总结果发给MCU。

步骤S409：MCU将投票、打分或表决的结果合成文字、音频、视频发送给与会终端。其中，对于音频会议和只支持音频能力的终端，则只会发送音频给对应的与会终端告知其结果。

步骤S410：投票、打分或表决流程结束之后会议保持普通模式继续，只要会议中需要进行投票打分的过程就进入到上述流程进行，直到会议结束。

综上所述，可知本发明实施例所述方案，基于音频视频会议系统的原有组网，在会议、面试、远程互动等有关的多媒体远程现场接入的场景中，帮助用户进行投票、打分、发表自己的观点，实现了音频视频会议中的互动。

本发明实施例所述方案，实现简单，完全不需要改变用户当前的会议系统组网，也不需增加如传统的第三方表决系统，更不需要人工的在会议中统计和核算与会成员的投票打分结果，系统采用互动式音频视频应答方式(IVR、IVVR)让用户方便的进行投票打分，系统根据设置自动的统计和计算结果并以多媒体的方式展示给用户。

实施例二

本发明实施例提供一种多点控制单元MCU，如图5所示，包括：

互动发起模块510，用于在视频会议中，将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端；其中，各与会终端均支持用户输入通道；

互动处理模块520，用于接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息，并将所述互动信息发送至会议业务管理系统，以及接收会议业务管理系统利用所述互动信息进行统计得到的统计结果，将所述统计结果发送至各与会终端。

基于上述结构框架及实施原理，下面给出在上述结构下的几个具体及优选实施方式，用以细化和优化本发明所述MCU的功能，具体涉及如下内容：

互动发起模块510，通过获取预先存储的与本次互动对应的音频文件和图片文件，并对音频文件和图片文件分别进行合成，形成所述用以指引用户输入的音频和视频界面。

互动发起模块510，获取各与会终端支持的信息类型，并基于该信息类型向各与会终端发送音频和/或视频界面；或者，获取各与会终端支持的信息类型，并检测各与会终端是否对接收信息的类型进行设定，若进行了设定，则检测对应与会终端设定的信息类型是否属于其支持的信息类型，若是，则基于设定的信息类型向对应与会终端发送音频或视频界面；否则，基于与会终端支持的信息类型向对应与会终端发送音频或视频界面；若未进行设定，则基于各与会终端支持的信息类型，向各与会终端发送音频和/或视频界面。

互动处理模块520，将统计结果合成文字、音频和视频，并基于在先获取的各与会终端支持的信息类型，向各与会终端发送文字、音频和/或视频的统计结果。

优选方案，本实施例中为了将互动过程与现有的会议过程进行有效结合，节省网络资源，将MCU与各与会终端间交互的信息与会议中的数据、音频和视频码流一起编码为媒体流格式后进行交互。具体表现为：

互动发起模块510，将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端；

互动处理模块520，将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。

综上所述，可知本实施例所述MCU在不改变用户的会议系统组网、不改变用户对会议系统的原始使用习惯的基础上，通过本实施例所阐述的MCU，能使得与会终端用户能够有如临现场一样进行投票、打分或表决的互动体验。

实施例三

本发明实施例提供一种音频视频会议中的远程互动系统，如图6所示，包括：会议业务管理系统610、与会终端620、以及实施例二所述的MCU630；其中：

与会终端620，用于在接收到MCU630发送的与本次互动对应的用于指引用户输入的音频和/或视频界面后，根据音频和/或视频界面的指引进行互动操作，并将操作得到的互动信息发送至MCU630；

会议业务管理系统610，用于接收MCU630发送的各与会终端根据音频和/或视频界面的指引而反馈的互动信息，并对所述互动信息进行统计后，将统计结果发送至MCU630。

进一步地，由于实施例二中已经对MCU的具体组成以及实施原理进行了详细阐述，所以在本实施例中对其结构及功能不作赘述。

综上所述，可知本实施例所述系统在不改变用户的会议系统组网、不改变用户对会议系统的原始使用习惯的基础上，通过本实施例所阐述的MCU，能使得与会终端用户能够有如临现场一样进行投票、打分或表决的互动体验。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (15)

1.一种音频视频会议中的远程互动方法，其特征在于，包括：

多点控制单元MCU将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端；其中，各与会终端均支持用户输入通道；

会议业务管理系统统计各与会终端根据音频和/或视频界面的指引而反馈的互动信息；

MCU将会议业务管理系统得到的统计结果发送至各与会终端。

2.如权利要求1所述的方法，其特征在于，所述MCU将所述音频和/或视频界面发送至各与会终端前包括：

MCU获取预先存储的与本次互动对应的音频文件和图片文件，并对音频文件和图片文件分别进行合成，形成所述用以指引用户输入的音频和视频界面。

3.如权利要求1所述的方法，其特征在于，所述MCU将指引用户输入的音频和/或视频界面发送至各与会终端，具体包括：

MCU获取各与会终端支持的信息类型，并基于该信息类型向各与会终端发送音频和/或视频界面。

4.如权利要求1所述的方法，其特征在于，所述MCU将指引用户输入的音频和/或视频界面发送至各与会终端，具体包括：

MCU获取各与会终端支持的信息类型，并检测各与会终端是否对接收信息的类型进行设定；

若进行了设定，则检测对应与会终端设定的信息类型是否属于其支持的信息类型，若是，则基于设定的信息类型向对应与会终端发送音频或视频界面；否则，基于与会终端支持的信息类型向对应与会终端发送音频或视频界面；

若未进行设定，则基于各与会终端支持的信息类型，向各与会终端发送音频和/或视频界面。

5.如权利要求1所述的方法，其特征在于，所述MCU将统计结果发送至各与会终端，具体包括：

MCU将统计结果合成文字、音频和视频，并基于在先获取的各与会终端支持的信息类型，向各与会终端发送文字、音频和/或视频的统计结果。

6.如权利要求3或4或5所述的方法，其特征在于，所述MCU获取各与会终端支持的信息类型的方式包括：

MCU获取为各与会终端建立的逻辑通道，根据逻辑通道的类型确定与会终端支持的信息类型；所述逻辑通道的类型包括：音频、视频和数据。

7.如权利要求1至5任一项所述的方法，其特征在于，

所述MCU将指引用户输入的音频和/或视频界面发送至各与会终端，进一步包括：MCU将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端；

所述MCU将统计结果发送至各与会终端，进一步包括：MCU将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。

8.如权利要求1至5任一项所述的方法，其特征在于，所述互动的类型包括：投票、打分和表决。

9.一种多点控制单元MCU，其特征在于，包括：

互动发起模块，用于在视频会议中，将与本次互动对应的用于指引用户输入的音频和/或视频界面发送至各与会终端；其中，各与会终端均支持用户输入通道；

互动处理模块，用于接收各与会终端根据音频和/或视频界面的指引而反馈的互动信息，并将所述互动信息发送至会议业务管理系统，以及接收会议业务管理系统利用所述互动信息进行统计得到的统计结果，将所述统计结果发送至各与会终端。

10.如权利要求9所述的MCU，其特征在于，所述互动发起模块，还用于获取预先存储的与本次互动对应的音频文件和图片文件，并对音频文件和图片文件分别进行合成，形成所述用以指引用户输入的音频和视频界面。

11.如权利要求9所述的MCU，其特征在于，所述互动发起模块，具体用于获取各与会终端支持的信息类型，并基于该信息类型向各与会终端发送音频和/或视频界面。

12.如权利要求9所述的MCU，其特征在于，所述互动发起模块，具体用于获取各与会终端支持的信息类型，并检测各与会终端是否对接收信息的类型进行设定，若进行了设定，则检测对应与会终端设定的信息类型是否属于其支持的信息类型，若是，则基于设定的信息类型向对应与会终端发送音频或视频界面；否则，基于与会终端支持的信息类型向对应与会终端发送音频或视频界面；若未进行设定，则基于各与会终端支持的信息类型，向各与会终端发送音频和/或视频界面。

13.如权利要求9所述的MCU，其特征在于，

所述互动处理模块，进一步用于将统计结果合成文字、音频和视频，并基于在先获取的各与会终端支持的信息类型，向各与会终端发送文字、音频和/或视频的统计结果。

14.如权利要求9至13任一项所述的MCU，其特征在于，

所述互动发起模块，进一步用于将用于指引用户输入的音频和/或视频界面与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端；

所述互动处理模块，进一步用于将统计结果与当前会议中的数据、音频及视频码流一同编码为媒体流格式后发送至各与会终端。

15.一种音频视频会议中的远程互动系统，其特征在于，包括：会议业务管理系统、与会终端、以及权利要求9至14任意一项所述的MCU；

所述与会终端，用于在接收到所述MCU发送的与本次互动对应的用于指引用户输入的音频和/或视频界面后，根据音频和/或视频界面的指引进行互动操作，并将操作得到的互动信息发送至所述MCU；

所述会议业务管理系统，用于接收所述MCU发送的各与会终端根据音频和/或视频界面的指引而反馈的互动信息，并对所述互动信息进行统计后，将统计结果发送至所述MCU。