CN114125369A - 一种基于虚拟音视频的视频会议融合方法及系统 - Google Patents

Abstract

本发明公开了一种基于虚拟音视频的视频会议融合方法及系统，其中，所述方法包括：根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC；根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；调用本地会议音视频信息；将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

Description

一种基于虚拟音视频的视频会议融合方法及系统

技术领域

本发明涉及视频会议领域，具体地，涉及一种基于虚拟音视频的视频会议融合方法及系统。

背景技术

视频会议系统在当今社会中已有广泛的应用，大致可分为两种类型，一种是在机房中建设一套实体视频会议系统，如华为、宝利通、亿联等品牌，另一种是基于SaaS服务的云视频会议系统，如腾讯会议、钉钉、飞书等品牌。随着科学技术的发展，音视频指挥调度核心的视频会议系统已成为一种趋势。

但本申请发明人在实现本申请实施例中发明技术方案的过程中，发现上述技术至少存在如下技术问题：

现有技术中存在由于实体视频会议系统与基于SaaS服务的云视频会议系统的架构和营销模式不同，二者无法通过标准SIP、H.323协议或第三方接口SDK、API接口方式接入，使得无法实现音视频会议融合的技术问题。

发明内容

针对现有技术中的缺陷，本申请实施例的目的是，通过提供一种基于虚拟音视频的视频会议融合方法及系统，解决了现有技术中的由于实体视频会议系统与基于SaaS服务的云视频会议系统的架构和营销模式不同，二者无法通过标准SIP、H.323协议或第三方接口SDK、API接口方式接入，使得无法实现音视频会议融合的技术问题。通过将第三方音视频平台、集中部署云平台、本地视频会议平台以及应用客户端进行协议链接，同时对音视频采集装置进行接口虚拟化，可实现对本地会议音视频信息和第三方会议音视频信息的交互融合，进而达到了实现本地视频会议平台与常规视频会议系统、SaaS云视频会议系统、电话会议、集群对讲等的音视频融合通讯，实现多方异构视频会议的音视频融合通讯的技术效果。

一方面，本申请实施例提供一种基于虚拟音视频的视频会议融合方法，其中，所述方法应用于视频会议融合系统，且所述视频会议融合系统包括第三方音视频平台、集中部署云平台、本地视频会议平台、应用/直播平台以及应用客户端，所述方法包括：根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；根据所述集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；根据所述本地视频会议平台，调用本地会议音视频信息；将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

另一方面，本申请还提供了一种基于虚拟音视频的视频会议融合系统，其中，所述系统包括：第一获得单元：所述第一获得单元用于根据第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；第二获得单元：所述第二获得单元用于根据集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；第三获得单元：所述第三获得单元用于根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；第一传输单元：所述第一传输单元用于基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；第一调用单元：所述第一调用单元用于根据本地视频会议平台，调用本地会议音视频信息；第二传输单元：所述第二传输单元用于将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

第三方面，本申请实施例提供了一种基于虚拟音视频的视频会议融合设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其中，所述处理器执行所述程序时实现第一方面任一项所述方法的步骤。

本申请实施例中提供的一个或多个技术方案，至少具有如下技术效果或优点：

通过根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；根据所述集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；根据所述本地视频会议平台，调用本地会议音视频信息；将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。通过将第三方音视频平台、集中部署云平台、本地视频会议平台以及应用客户端进行协议链接，同时对音视频采集装置进行接口虚拟化，可实现对本地会议音视频信息和第三方会议音视频信息的交互融合，进而达到了实现本地视频会议平台与常规视频会议系统、SaaS云视频会议系统、电话会议、集群对讲等的音视频融合通讯，实现多方异构视频会议的音视频融合通讯的技术效果。

上述说明仅是本申请技术方案的概述，为了能够更清楚了解本申请的技术手段，而可依照说明书的内容予以实施，并且为了让本申请的上述和其它目的、特征和优点能够更明显易懂，以下特举本申请的具体实施方式。

附图说明

通过阅读参照以下附图对非限制性实施例所做的详细描述，本发明的其它特征、目的和优点将会变得更明显：

图1为本申请实施例一种基于虚拟音视频的视频会议融合方法的流程示意图；

图2为本申请实施例一种基于虚拟音视频的视频会议融合系统的结构示意图；

图3为本申请实施例示例性电子设备的结构示意图。

具体实施方式

本申请实施例通过提供一种基于虚拟音视频的视频会议融合方法及系统，解决了现有技术中的由于实体视频会议系统与基于SaaS服务的云视频会议系统的架构和营销模式不同，二者无法通过标准SIP、H.323协议或第三方接口SDK、API接口方式接入，使得无法实现音视频会议融合的技术问题。通过将第三方音视频平台、集中部署云平台、本地视频会议平台以及应用客户端进行协议链接，同时对音视频采集装置进行接口虚拟化，可实现对本地会议音视频信息和第三方会议音视频信息的交互融合，进而达到了实现本地视频会议平台与常规视频会议系统、SaaS云视频会议系统、电话会议、集群对讲等的音视频融合通讯，实现多方异构视频会议的音视频融合通讯的技术效果。

下面，将参考附图详细的描述根据本申请的示例实施例。显然，所描述的实施例仅是本申请的一部分实施例，而不是本申请的全部实施例，应理解，本申请不受这里描述的示例实施例的限制。

申请概述

由于现有技术中存在实体视频会议系统与基于SaaS服务的云视频会议系统的架构和营销模式不同，二者无法通过标准SIP、H.323协议或第三方接口SDK、API接口方式接入，使得无法实现音视频会议融合的技术问题。本发明在不影响视频会议正常进行的前提下，通过对音视频采集装置进行接口虚拟化，可实现对本地会议音视频信息和第三方会议音视频信息的交互融合。

针对上述技术问题，本申请提供的技术方案总体思路如下：

本申请实施例提供一种基于虚拟音视频的视频会议融合方法，其中，所述方法应用于视频会议融合系统，且所述视频会议融合系统包括第三方音视频平台、集中部署云平台、本地视频会议平台、应用/直播平台以及应用客户端，所述方法包括：根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；根据所述集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；根据所述本地视频会议平台，调用本地会议音视频信息；将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

为了更好地理解上述技术方案，下面将结合说明书附图以及具体的实施方式对上述技术方案进行详细的说明。

实施例一

如图1所示，本申请实施例提供了一种基于虚拟音视频的视频会议融合方法，所述方法应用于视频会议融合系统，且所述视频会议融合系统包括第三方音视频平台、集中部署云平台、本地视频会议平台、应用/直播平台以及应用客户端，所述方法包括：

步骤S100：根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；

具体而言，由于现有技术中存在实体视频会议系统与基于SaaS服务的云视频会议系统的架构和营销模式不同，二者无法通过标准SIP、H.323协议或第三方接口SDK、API接口方式接入，使得无法实现音视频会议的融合，为了解决此类问题，在本申请实施例中提出了一种基于虚拟音视频的视频会议融合方法，即通过将音视频采集装置进行接口虚拟化，可实现对本地会议音视频信息和第三方会议音视频信息的交互融合。

更具体的，所述第三方音视频平台，包括第三方视频会议系统、IP电话系统和PoC对讲系统。对于此三类第三方音视频平台，在外虚拟化PC中安装部署对应的软终端，通过标准或私有的SIP、H.323或WebRTC协议与系统实现音频、视频的双向通话。其中，所述第三方视频会议系统对应第三方软终端1，所述IP电话系统对应第三方软终端2，所述PoC对讲系统对应第三方软终端3。

SIP(Session Initiation Protocol)是一个应用层的信令控制协议。用于创建、修改和释放一个或多个参与者的会话。这些会话可以是Internet多媒体会议、IP电话或多媒体分发。会话的参与者可以通过组播(multicast)、网状单播(unicast)或两者的混合体进行通信；H.323是一种标准的音视频传输协议，能够实现远程提审功能；WebRTC是由一组标准、协议和JavaScript API组成，用于实现浏览器之间(端到端之间)的音频、视频及数据共享。WebRTC不需要安装任何插件，通过简单的JavaScript API就可以使得实时通信变成一种标准功能。

更具体的，传统视频会议系统，如华为、宝利通、亿联、科达等传统视频会议系统，需要将视频会议服务器、MCU部署在机房中，自建视频会议系统；SaaS云视频会议系统，如腾讯会议、钉钉、飞书、企业微信等云视频会议系统，需要在PC端、Android端或IOS端安装对应的视频会议应用软件，无需自建视频会议系统；IP电话系统：通过内网或外网，由IP电话实现音频语音VoIP(Voice over IP)通话，常采用SIP协议；PoC对接系统：通过运营商网络实现RoIP(Radio over IP)对讲通话常采用SIP协议。

步骤S200：根据所述集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；

具体而言，所述集中部署云平台包括外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且所述外虚拟化PC包括第三方软终端和外虚拟音视频模块，所述内虚拟化PC包括本地软终端和内虚拟音视频模块，所述外虚拟化PC用于传输转发第三方会议音视频信息，所述内虚拟化PC用于传输转发本地会议音视频信息，所述内嵌入应用平台用于控制信令服务端，即控制第三方会议音视频信息和本地会议音视频信息的交互融合。

第一，在云平台中部署多台“外虚拟PC”，在“外虚拟PC”上安装“第三方音视频平台”的“第三方软终端”，如华为视频会议软终端、腾讯视频会议APP，将此“外虚拟PC”作为视频会议系统终端接入/注册到“第三方音视频平台”。

同时在此“外虚拟PC”上，部署安装“外虚拟音视频模块”，此模块能够将“外虚拟PC”的麦克风、扬声器、屏幕显示和摄像头接口转换为虚拟接口，通过软件方式调用，包括虚拟麦克风、虚拟扬声器、虚拟屏幕和虚拟摄像头。“外虚拟音视频模块”配合此“外虚拟PC”上的“第三方软终端”一起使用，用于音频、视频的转发工作。

第二，在云平台中部署多台“内虚拟PC”，在“内虚拟PC”上安装“本地视频会议平台”的“本地软终端”，如华为视频会议软终端、腾讯视频会议APP，将此“内虚拟PC”作为视频会议系统终端接入/注册到“本地视频会议平台”。

同时在此“内虚拟PC”上，部署安装“内虚拟音视频模块”，此模块能够将“内虚拟PC”的麦克风、扬声器、屏幕显示和摄像头接口转换为虚拟接口，通过软件方式调用，包括虚拟麦克风、虚拟扬声器、虚拟屏幕和虚拟摄像头。“内虚拟音视频模块”配合此“内虚拟PC”上的“本地软终端”一起使用，用于音频、视频的转发工作。

步骤S300：根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；

步骤S400：基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；

具体而言，可基于所述N个会议终端，对N个第三方会议信息进行实时数据采集，获得所述第三方会议音视频信息，其中，所述第三方会议音视频信息包括会议过程的音频数据和视频数据。所述预设标准协议，即标准或私有的SIP协议、H.323协议或WebRTC协议等，通过将所述第三方会议音视频信息传输至所述外虚拟化PC，使得经由“外虚拟PC”上部署安装的“外虚拟音视频模块”，将“外虚拟PC”的麦克风、扬声器、屏幕显示和摄像头接口转换为虚拟接口，通过软件方式调用，经由所述内嵌入应用平台，控制所述第三方会议音视频信息转发至本地终端，进行交互双向传输。

步骤S500：根据所述本地视频会议平台，调用本地会议音视频信息；

步骤S600：将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

具体而言，所述本地视频会议平台，部署在本地的视频会议系统，如华为视频会议系统，提供MCU和会控系统，为其他终端提供接入和注册。基于所述本地视频会议平台，调用本地会议音视频信息，其中，所述本地会议音视频信息包括本地会议过程中的音频数据和视频数据，进而将所述本地会议音视频信息传输至所述内虚拟化PC，使得“内虚拟PC”上部署安装的“内虚拟音视频模块”，将“内虚拟PC”的麦克风、扬声器、屏幕显示和摄像头接口转换为虚拟接口，通过软件方式调用，进而经由所述内嵌入应用平台，控制所述本地会议音视频信息转发至第三方终端，使得与所述第三方会议音视频信息进行交互融合。

通过将第三方音视频平台、集中部署云平台、本地视频会议平台以及应用客户端进行协议链接，同时对音视频采集装置进行接口虚拟化，可实现对本地会议音视频信息和第三方会议音视频信息的交互融合，进而达到了实现本地视频会议平台与常规视频会议系统、SaaS云视频会议系统、电话会议、集群对讲等的音视频融合通讯，实现多方异构视频会议的音视频融合通讯的技术效果。

进一步的，本申请实施例包括：

步骤S410：根据所述外虚拟化PC，获得第三方软终端和外虚拟音视频模块；

步骤S420：基于所述外虚拟音视频模块，将所述外虚拟化PC的音视频采集装置转换为第一虚拟接口；

步骤S430：基于软件调用和所述第一虚拟接口，对第三方会议音视频进行转发。

具体而言，对所述第三方会议音视频进行转发包括四项内容：音频输入、音频输出、视频输入以及视频输出。其中，所述第一虚拟接口包括“外虚拟音视频模块”将“外虚拟PC”的麦克风、扬声器、屏幕显示和摄像头接口转换为虚拟接口，包括虚拟麦克风、虚拟扬声器、虚拟屏幕和虚拟摄像头。

第一，音频输入：即将第三方端会议音频信息进行输入至本地端，将“外虚拟PC”上的扬声器接口虚拟化，“外虚拟音视频模块”监听和采集“第三方软终端”输出的音频信号，“外虚拟音视频模块”将音频信号转发至“内虚拟PC”的“内虚拟音视频模块”。

第二，音频输出：即将本地端会议的音频信息进行输出至第三方端，将“外虚拟PC”的麦克风接口虚拟化，将“内虚拟音视频模块”发送至“外虚拟音视频模块”的音频数据，由虚拟麦克风发送至“第三方软终端”。

第三，视频输入：即将第三方端会议的视频信息进行输入至本地端，将“外虚拟PC”上的屏幕接口虚拟化，“外虚拟音视频模块”录制和采集“第三方软终端”输出的视频信号，“外虚拟音视频模块”将视频信号转发至“内虚拟PC”的“内虚拟音视频模块”。

第四，视频输出：即将本地端会议的视频信息进行输出至第三方端，将“外虚拟PC”的摄像头接口虚拟化，将“内虚拟音视频模块”发送至“外虚拟音视频模块”的视频数据，由虚拟摄像头发送至“第三方软终端”。

进一步的，本申请实施例包括：

步骤S610：根据所述内虚拟化PC，安装所述本地视频会议平台的本地软终端；

步骤S620：根据所述内虚拟化PC，部署内虚拟音视频模块；

步骤S630：基于所述内虚拟音视频模块，将所述内虚拟化PC的音视频采集装置转换为第二虚拟接口；

步骤S640：基于软件调用和所述第二虚拟接口，对本地会议音视频进行转发。

具体而言，对所述本地会议音视频进行转发同样包括四项内容：音频输入、音频输出、视频输入以及视频输出。其中，所述第二虚拟接口包括“内虚拟音视频模块”将“内虚拟PC”的麦克风、扬声器、屏幕显示和摄像头接口转换为虚拟接口，包括虚拟麦克风、虚拟扬声器、虚拟屏幕和虚拟摄像头。

第一，音频输入：即将本地端的音频信息输入至第三方端，将“内虚拟PC”上的扬声器接口虚拟化，“内虚拟音视频模块”监听和采集“本地软终端”输出的音频信号，“内虚拟音视频模块”将音频信号转发至“外虚拟PC”的“外虚拟音视频模块”。

第二，音频输出：即将第三方端的音频信息输出至本地端，将“内虚拟PC”的麦克风接口虚拟化，将“外虚拟音视频模块”发送至“内虚拟音视频模块”的音频数据，由虚拟麦克风发送至“本地软终端”。

第三，视频输入：即将本地端的视频信息输入至第三方端，将“内虚拟PC”上的屏幕接口虚拟化，“内虚拟音视频模块”录制和采集“本地软终端”输出的视频信号，“内虚拟音视频模块”将视频信号转发至“外虚拟PC”的“外虚拟音视频模块”。

第四，视频输出：即将第三方端的视频信息输出至本地端，将“内虚拟PC”的摄像头接口虚拟化，将“外虚拟音视频模块”发送至“内虚拟音视频模块”的视频数据，由虚拟摄像头发送至“本地软终端”。

进一步的，本申请实施例包括：

步骤S710：根据所述内嵌入应用平台，调用虚拟KVM服务；

步骤S720：基于所述虚拟KVM服务，监控所述外虚拟音视频模块和所述内虚拟音视频模块的虚拟接口状态，其中，所述虚拟接口状态包括开启状态和关闭状态。

步骤S730：根据所述应用客户端，生成第一控制信令；

步骤S740：根据所述第一控制信令，控制所述虚拟接口状态。

具体而言，调用虚拟KVM服务，即将计算机的各种实体资源(CPU、内存、磁盘空间、网络适配器等)，予以抽象、转换后呈现出来并可供分区、组合为一个或多个电脑配置环境。其中，KVM是开源软件，且x86架构且硬件支持虚拟化技术(如intel VT或AMD-V)的Linux全虚拟化解决方案，包含为处理器提供底层虚拟化可加载的核心模块kvm.ko(kvm-intel.ko或kvm-AMD.ko)，需要经过修改的QEMU软件(qemu-kvm)，作为虚拟机上层控制和界面，能在不改变linux或windows镜像的情况下同时运行多个虚拟机，(它的意思是多个虚拟机使用同一镜像)并为每一个虚拟机配置个性化硬件环境(网卡、磁盘、图形适配器……)同时KVM还能够使用ksm技术帮助宿主服务器节约内存。

通过所述虚拟KVM服务，可监控所述外虚拟音视频模块和所述内虚拟音视频模块的虚拟接口状态，即用于监控“外虚拟音视频模块”和“内虚拟音视频模块”的虚拟麦克风、虚拟扬声器、虚拟屏幕和虚拟摄像头的开启、关闭状态。

更具体的，在PC/Android/IOS终端安装所述应用客户端，应用客户端集成了“本地软终端”和“控制信令”，能够在PC/Android/IOS终端上实现与“本地软终端”、“第三方软终端”、“第三方音视频平台”下的“会议终端”召开音视频会议和音视频通话。

根据所述第一控制信令，可控制“内/外虚拟化音视频模块”实现控制开启和关闭“外虚拟化PC”和“内虚拟化PC”上的虚拟麦克风、虚拟扬声器、虚拟屏幕和虚拟摄像头接口。

进一步的，本申请实施例包括：

步骤S810：获得本地直播视频会议；

步骤S820：基于所述应用/直播平台，对所述本地直播视频会议进行对外发布。

具体而言，可基于所述本地视频会议平台，获得部署的视频会议系统，如华为视频会议系统等，提供MCU和会控系统，为其他终端提供接入和注册。

所谓应用平台，部署在本地的业务应用平台，如融合调度平台、指挥调度平台、直播平台，具有PC、Android或IOS客户端。所谓直播平台，可通过WEB-RTC、RTMP、RTSP对外发布视频会议直播服务。

更具体的，RTMP是Real Time Messaging Protocol(实时消息传输协议)的首字母缩写。该协议基于TCP，是一个协议族，包括RTMP基本协议及RTMPT/RTMPS/RTMPE等多种变种。RTMP是一种设计用来进行实时数据通信的网络协议，主要用来在Flash/AIR平台和支持RTMP协议的流媒体/交互服务器之间进行音视频和数据通信。RTSP(Real Time StreamingProtocol)，RFC2326，实时流传输协议，是TCP/IP协议体系中的一个应用层协议，该协议定义了一对多应用程序如何有效地通过IP网络传送多媒体数据。RTSP在体系结构上位于RTP和RTCP之上，它使用TCP或UDP完成数据传输。

与现有技术相比，本发明具有如下的有益效果：

1、通过根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；根据所述集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；根据所述本地视频会议平台，调用本地会议音视频信息；将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。通过将第三方音视频平台、集中部署云平台、本地视频会议平台以及应用客户端进行协议链接，同时对音视频采集装置进行接口虚拟化，可实现对本地会议音视频信息和第三方会议音视频信息的交互融合，进而达到了实现本地视频会议平台与常规视频会议系统、SaaS云视频会议系统、电话会议、集群对讲等的音视频融合通讯，实现多方异构视频会议的音视频融合通讯的技术效果。

2、无需对接SIP/H.323/WEB-RTC协议，可完美兼容任意的音视频终端。

3、应用系统可作为直播平台对外发布会议直播服务。

4、通过虚拟KVM服务，实现虚拟扬声器、虚拟麦克风、屏幕和虚拟摄像头的开启和关闭。

实施例二

基于与前述实施例中一种基于虚拟音视频的视频会议融合方法同样发明构思，本发明还提供了一种基于虚拟音视频的视频会议融合系统，如图2所示，所述系统包括：

第一获得单元11：所述第一获得单元11用于根据第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；

第二获得单元12：所述第二获得单元12用于根据集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；

第三获得单元13：所述第三获得单元13用于根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；

第一传输单元14：所述第一传输单元14用于基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；

第一调用单元15：所述第一调用单元15用于根据本地视频会议平台，调用本地会议音视频信息；

第二传输单元16：所述第二传输单元16用于将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

进一步的，所述系统还包括：

第四获得单元：所述第四获得单元用于根据所述外虚拟化PC，获得第三方软终端和外虚拟音视频模块；

第一转换单元：所述第一转换单元用于基于所述外虚拟音视频模块，将所述外虚拟化PC的音视频采集装置转换为第一虚拟接口；

第一转发单元：所述第一转发单元用于基于软件调用和所述第一虚拟接口，对第三方会议音视频进行转发。

进一步的，所述系统还包括：

第一安装单元：所述第一安装单元用于根据所述内虚拟化PC，安装所述本地视频会议平台的本地软终端；

第一部署单元：所述第一部署单元用于根据所述内虚拟化PC，部署内虚拟音视频模块；

第二转换单元：所述第二转换单元用于基于所述内虚拟音视频模块，将所述内虚拟化PC的音视频采集装置转换为第二虚拟接口；

第二转发单元：所述第二转发单元用于基于软件调用和所述第二虚拟接口，对本地会议音视频进行转发。

进一步的，所述系统还包括：

第一调用单元：所述第一调用单元用于根据所述内嵌入应用平台，调用虚拟KVM服务；

第一监控单元：所述第一监控单元用于基于所述虚拟KVM服务，监控所述外虚拟音视频模块和所述内虚拟音视频模块的虚拟接口状态，其中，所述虚拟接口状态包括开启状态和关闭状态。

进一步的，所述系统还包括：

第五获得单元：所述第五获得单元用于获得本地直播视频会议；

第一发布单元：所述第一发布单元用于基于所述应用/直播平台，对所述本地直播视频会议进行对外发布。

进一步的，所述系统还包括：

第一生成单元：所述第一生成单元用于根据所述应用客户端，生成第一控制信令；

第一控制单元：所述第一控制单元用于根据所述第一控制信令，控制所述虚拟接口状态。

前述图1实施例一中的一种基于虚拟音视频的视频会议融合方法的各种变化方式和具体实例同样适用于本实施例的一种基于虚拟音视频的视频会议融合系统，通过前述对一种基于虚拟音视频的视频会议融合方法的详细描述，本领域技术人员可以清楚的知道本实施例中一种基于虚拟音视频的视频会议融合系统的实施方法，所以为了说明书的简洁，在此不再详述。

实施例三

下面参考图3来描述本申请实施例的计算机设备。该计算机设备可以是应用版本管理服务器或终端，其内部结构图可以如图3所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种应用包的处理方法。

在该计算机设备是终端时，该计算机设备还可以包括显示屏和输入装置。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。

本领域技术人员可以理解，图3中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，还提供了一种计算机设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现上述各方法实施例中的步骤。

在一个实施例中，提供了一种计算机可读存储介质，存储有计算机程序，该计算机程序被处理器执行时实现上述各方法实施例中的步骤。

在一个实施例中，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述各方法实施例中的步骤。

本申请实施例提供一种基于虚拟音视频的视频会议融合方法，其中，所述方法应用于视频会议融合系统，且所述视频会议融合系统包括第三方音视频平台、集中部署云平台、本地视频会议平台、应用/直播平台以及应用客户端，所述方法包括：根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；根据所述集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；根据所述本地视频会议平台，调用本地会议音视频信息；将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory，ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic Random Access Memory，DRAM)等。

以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (8)

1.一种基于虚拟音视频的视频会议融合方法，其特征在于，所述方法应用于视频会议融合系统，且所述视频会议融合系统包括第三方音视频平台、集中部署云平台、本地视频会议平台、应用/直播平台以及应用客户端，所述方法包括：

根据所述第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；

根据所述集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；

根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；

基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据所述内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；

根据所述本地视频会议平台，调用本地会议音视频信息；

将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

2.如权利要求1所述的方法，其特征在于，所述方法包括：

根据所述外虚拟化PC，获得第三方软终端和外虚拟音视频模块；

基于所述外虚拟音视频模块，将所述外虚拟化PC的音视频采集装置转换为第一虚拟接口；

基于软件调用和所述第一虚拟接口，对第三方会议音视频进行转发。

3.如权利要求2所述的方法，其特征在于，所述方法包括：

根据所述内虚拟化PC，安装所述本地视频会议平台的本地软终端；

根据所述内虚拟化PC，部署内虚拟音视频模块；

基于所述内虚拟音视频模块，将所述内虚拟化PC的音视频采集装置转换为第二虚拟接口；

基于软件调用和所述第二虚拟接口，对本地会议音视频进行转发。

4.如权利要求3所述的方法，其特征在于，所述方法包括：

根据所述内嵌入应用平台，调用虚拟KVM服务；

基于所述虚拟KVM服务，监控所述外虚拟音视频模块和所述内虚拟音视频模块的虚拟接口状态，其中，所述虚拟接口状态包括开启状态和关闭状态。

5.如权利要求4所述的方法，其特征在于，所述方法包括：

获得本地直播视频会议；

基于所述应用/直播平台，对所述本地直播视频会议进行对外发布。

6.如权利要求5所述的方法，其特征在于，所述方法包括：

根据所述应用客户端，生成第一控制信令；

根据所述第一控制信令，控制所述虚拟接口状态。

7.一种基于虚拟音视频的视频会议融合系统，其特征在于，所述系统包括：

第一获得单元：所述第一获得单元用于根据第三方音视频平台，获得第三方视频会议系统、第三方IP电话系统以及第三方PoC对讲系统，其中，各系统包括N个会议终端；

第二获得单元：所述第二获得单元用于根据集中部署云平台，获得外虚拟化PC、内嵌入应用平台以及内虚拟化PC，且单个所述外虚拟化PC包括第三方软终端和外虚拟音视频模块；

第三获得单元：所述第三获得单元用于根据所述N个会议终端，获得所述第三方音视频平台的第三方会议音视频信息；

第一传输单元：所述第一传输单元用于基于预设标准协议，将所述第三方会议音视频信息传输至所述外虚拟化PC，根据内嵌入应用平台，控制所述第三方会议音视频信息进行交互双向传输；

第一调用单元：所述第一调用单元用于根据本地视频会议平台，调用本地会议音视频信息；

第二传输单元：所述第二传输单元用于将所述本地会议音视频信息传输至所述内虚拟化PC，根据所述内嵌入应用平台，控制所述本地会议音视频信息和所述第三方会议音视频信息进行交互融合。

8.一种基于虚拟音视频的视频会议融合设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现权利要求1-6任一项所述方法的步骤。

Images