CN115941876A - 音视频会议实现方法、装置、存储介质及计算机设备 - Google Patents
音视频会议实现方法、装置、存储介质及计算机设备 Download PDFInfo
- Publication number
- CN115941876A CN115941876A CN202110943581.2A CN202110943581A CN115941876A CN 115941876 A CN115941876 A CN 115941876A CN 202110943581 A CN202110943581 A CN 202110943581A CN 115941876 A CN115941876 A CN 115941876A
- Authority
- CN
- China
- Prior art keywords
- audio
- event
- video
- interface
- conference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请公开了音视频会议实现方法、装置、存储介质及计算机设备;本申请可以接收作用于音视频会议操控端的用户界面而触发的目标操作事件,音视频会议操控端包括界面控制层和逻辑处理层;在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识;向逻辑处理层传输特征数据和服务标识;在逻辑处理层根据特征数据,调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息;向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果;本申请可以有效提升软件开发效率。
Description
技术领域
本申请涉及计算机领域,具体涉及音视频会议实现方法、装置、存储介质及计算机设备。
背景技术
在音视频会议控制领域的软件开发过程中,可以基于计算机设备操作系统的原生能力实现相关的功能,也可以基于特定编程语言编写代码实现相关的功能,在对现有技术的研究和实践过程中,本申请的发明人发现,现有技术基于编程语言开发音视频会议控制领域的相关软件时,受限于该特定编程语言自身特性的限制,需要编写大量代码以实现相当复杂的逻辑,导致软件的开发效率较低。
发明内容
本申请实施例提供了音视频会议实现方法、装置、存储介质及计算机设备,可以有效提升软件开发效率。
本申请实施例提供一种音视频会议实现方法,包括:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件,所述音视频会议操控端包括界面控制层和逻辑处理层;
在所述界面控制层确定所述目标操作事件的特征数据、以及所述目标操作事件对应的事件处理服务的服务标识;
向所述逻辑处理层传输所述特征数据和所述服务标识;
在所述逻辑处理层根据所述特征数据,调用所述服务标识对应的事件处理服务进行事件处理,得到所述目标操作事件的处理结果信息;
向所述界面控制层传输所述处理结果信息,在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
具体地,本申请还提供一种音视频会议实现装置,包括:
接收模块,用于接收作用于音视频会议操控端的用户界面而触发的目标操作事件,所述音视频会议操控端包括界面控制层和逻辑处理层;
确定模块,用于在所述界面控制层确定所述目标操作事件的特征数据、以及所述目标操作事件对应的事件处理服务的服务标识;
传输模块,用于向所述逻辑处理层传输所述特征数据和所述服务标识;
调用模块,用于在所述逻辑处理层根据所述特征数据,调用所述服务标识对应的事件处理服务进行事件处理,得到所述目标操作事件的处理结果信息;
更新模块,用于向所述界面控制层传输所述处理结果信息,在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
在一些实施例中,传输模块包括处理子模块和传输子模块,其中,
处理子模块,用于在所述界面控制层对所述特征数据和所述服务标识进行序列化处理,得到所述目标操作事件的事件数据;
传输子模块,用于向所述逻辑处理层传输所述目标操作事件的事件数据。
在一些实施例中,传输子模块具体用于:
在所述界面控制层生成所述目标操作事件的事件标识;
向所述逻辑处理层传输由所述事件标识标记的所述事件数据;
此时更新模块包括结果传输子模块、确定子模块和更新子模块,其中,
结果传输子模块,用于向所述界面控制层传输由所述事件标识标记的所述处理结果信息;
确定子模块,用于在所述界面控制层根据所述事件标记,确定所述处理结果信息对应的所述目标操作事件;
更新子模块,用于在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
在一些实施例中,更新子模块具体用于:
在所述界面控制层根据所述处理结果信息,构建所述目标操作事件的事件状态信息;
在所述界面控制层基于所述事件状态信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
在一些实施例中,接收模块具体用于:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件的事件信息;
此时确定模块包括提取子模块和确定子模块,其中,
提取子模块,用于在所述界面控制层从所述事件信息中提取所述目标操作事件的特征数据;
确定子模块,用于在所述界面控制层确定所述目标操作事件对应的事件处理服务的服务标识。
在一些实施例中,提取子模块具体用于:
在所述界面控制层向控制器添加所述目标操作事件的事件信息,通过所述控制器从所述事件信息中提取所述目标操作事件的特征数据;
此时确定子模块具体用于:
在所述界面控制层向通信接口传输所述目标操作事件的特征数据,通过所述通信接口根据第一映射关系,确定所述目标操作事件对应的事件处理服务的服务标识,所述第一映射关系包括多个预设操作事件与预设服务标识之间的关系;
此时传输模块具体用于:
通过所述通信接口向所述逻辑处理层传输所述特征数据和所述服务标识。
在一些实施例中,音视频会议实现装置还包括:
消息传输模块,用于当接收到预设类型的会议变更消息时,向所述界面控制层传输所述会议变更消息;
信息显示模块,用于在所述界面控制层根据所述会议变更消息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示会议变更的信息。
在一些实施例中,音视频会议实现装置还包括:
参数发送模块,用于向所述音视频会议操控端所在的操作系统发送音视频参数信息;
播放模块,用于在所述界面控制层接收所述操作系统基于所述音视频参数信息传输的音视频流数据,在所述用户界面基于所述音视频流数据进行音视频播放。
在一些实施例中,播放模块具体用于:
在所述操作系统根据所述音视频参数信息生成音视频传输标识,向所述界面控制层发送将所述音视频传输标识,接收服务器基于数据请求消息返回的音视频流数据,所述数据请求消息为所述操作操作基于所述音视频参数信息向所述服务器发送的消息;
在所述界面控制层构建所述音视频传输标识对应的音视频传输通道,接收所述操作系统通过所述音视频传输通道传输的音视频流数据,在所述用户界面基于所述音视频流数据进行音视频播放。
在一些实施例中,所述用户界面包括响应界面和操控界面,音视频会议实现装置还包括:
响应页面显示模块,用于在所述音视频会议操控端显示针对会议硬件设备的响应界面,所述响应界面包括所述会议硬件设备对应的会议发起控件,所述响应界面为终端对所述会议硬件设备的会议信息进行响应而显示的界面;
操控页面显示模块,用于响应于针对所述会议发起控件的操作,显示所述音视频会议操控端发起的目标音视频会议的操控界面,所述操控界面包括针对所述目标音视频会议的会议操控控件、和针对所述会议硬件设备的设备操控控件,所述会议操控控件用于改变所述目标音视频会议的会议状态,所述设备操控控件用于改变所述会议硬件设备的设备状态。
在一些实施例中,所述会议操控控件包括成员音视频控制控件和成员管理控件,音视频会议实现装置还包括:
输出改变模块,用于响应于针对所述成员音视频控制控件的操作,触发改变所述目标音视频会议中会议成员所使用的会议设备的音视频输出状态;
状态改变模块,用于响应于针对所述成员管理控件的操作,触发改变所述目标音视频会议中会议成员的会议状态。
在一些实施例中,所述设备操控控件包括设备音视频控制控件、以及设备操控退出控件,音视频会议实现装置还包括:
硬件改变模块,用于响应于针对所述设备音视频控制控件的操作,触发改变所述会议硬件设备的音视频输出状态;
操控改变模块,用于响应于针对所述设备操控退出控件的操作,解除所述音视频会议操控端对所述会议硬件设备的操控状态。
相应的,本申请实施例还提供了一种存储介质,存储介质存储有计算机程序,计算机程序适于处理器进行加载,以执行本申请实施例提供的任一种音视频会议实现方法。
相应的,本申请实施例还提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,处理器执行计算机程序时实现本申请实施例提供的任一种音视频会议实现方法。
本申请可以接收作用于音视频会议操控端的用户界面而触发的目标操作事件,音视频会议操控端包括界面控制层和逻辑处理层;在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识;向逻辑处理层传输特征数据和服务标识;在逻辑处理层根据特征数据,调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息;向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
本申请可以通过包含界面控制层和逻辑处理层的音视频会议操控端,对音视频会议进行操控,具体在实现操控的过程中,可以通过界面控制层确定用户在用户界面的操作所触发的目标操作事件、目标操作事件的特征数据和服务标识,并将特征数据和服务标识传输到逻辑处理层,由逻辑处理层实施调用等过程,本申请通过分层的方式构建音视频会议操控端,逻辑处理层和界面控制层分别实现不同的功能,根据每一层所实现的功能的特点使用不同的编程语言进行开发,相比于现有技术使用单一编程语言开发整个软件,本申请可以显著提升软件开发效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请的音视频会议实现系统的场景示意图;
图2是本申请的音视频会议实现方法的流程示意图;
图3是本申请的音视频会议实现方法的用户界面示意图;
图4是本申请的音视频会议实现方法的另一用户界面示意图;
图5是本申请的音视频会议实现方法的另一用户界面示意图;
图6是本申请的音视频会议实现方法的另一用户界面示意图;
图7是本申请的音视频会议实现方法的另一用户界面示意图;
图8是本申请的音视频会议实现方法的另一流程示意图;
图9是本申请的音视频会议实现方法的部分架构示意图;
图10是本申请的音视频会议实现方法的另一部分技术流程示意图;
图11是本申请的音视频会议实现方法的部分技术流程示意图;
图12是本申请的音视频会议实现方法的另一部分技术流程示意图;
图13是本申请的音视频会议实现方法的另一部分技术流程示意图;
图14是本申请的音视频会议实现方法的另一部分技术流程示意图;
图15是本申请的音视频会议实现方法的另一部分技术流程示意图;
图16是本申请的音视频会议实现装置的结构示意图;
图17是本申请的计算机设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,本申请所描述的实施例仅仅是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的音视频会议实现方法可以集成在音视频会议实现装置中,音视频会议实现装置可以集成在音视频会议实现系统中,该音视频会议实现系统可以包括一个或多个计算机设备,该计算机设备可以包括终端、服务器等中的至少一种,其中,服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云计算服务的云服务器。终端可以是智能手机、平板电脑、笔记本电脑、台式计算机、智能音箱、智能手表、智能会议设备、智能屏幕等等,但并不局限于此。终端以及服务器可以通过有线或无线通信方式进行直接或间接地连接,本申请在此不做限制。
参见图1,图1提供了本申请的音视频会议实现方法的场景示意图,本申请的音视频会议实现方法可以集成在终端和会议硬件设备中,终端可以包括音视频会议操控端,音视频会议操控端可以显示用户界面,用户可以通过在终端的用户界面进行操作从而操控会议硬件设备,如可以在终端操控会议意见设备打开摄像头,等。
需要说明的是,图1所示的音视频会议实现系统的场景示意图仅仅是一个示例,本申请实施例描述的音视频会议实现系统以及场景是为了更加清楚的说明本申请实施例的技术方案,并不构成对于本申请实施例提供的技术方案的限定,本领域普通技术人员可知,随着音视频会议实现装置的演变和新业务场景的出现,本申请实施例提供的技术方案对于类似的技术问题,同样适用。
以下分别进行详细说明。在本实施例中,将对音视频会议实现方法进行详细描述,该音视频会议实现方法可以集成在终端上,如图2所示,图2是本申请实施例提供的音视频会议实现方法的流程示意图。该音视频会议实现方法可以包括:
101、接收作用于音视频会议操控端的用户界面而触发的目标操作事件,音视频会议操控端包括界面控制层和逻辑处理层。
其中,音视频会议操控端可以包括能够在计算机设备上实现在线音视频会议的应用程序,用户可以通过音视频会议操控端可以发起或参与音视频会议,用户界面可以包括音视频会议操控端在终端上可以显示的界面,用户可以在用户界面上进行操作,进而实现对应的功能。
其中,目标操作事件可以包括目标音视频会议开展过程由用户在用户界面操作而触发的事件,比如,用户点击用户界面的发起会议控件时,对应触发的目标操作事件可以为创建由该用户发起的会议,类似地,目标操作事件还可以如邀请会议成员、控制会议成员全员静音、在会议内上传文件A、会议结束等等。
本申请的音视频会议操控端可以包括界面控制层和逻辑处理层,本申请可以通过界面控制层实现对用户界面的控制,比如界面控制层可以确定用户在用户界面的操作所触发的目标操作事件、对用户界面的显示内容进行更新,等;本申请可以通过逻辑处理层对目标操作事件进行处理,具体地,逻辑处理层可以处理与网络相关的内容,比如向服务器发送会议创建请求、或接收服务器发送的数据,等等,逻辑处理层也可以进行相关的逻辑计算和接口调用,等。
比如,可以通过界面控制层在用户界面上显示会议成员上传的文件、更改会议成员的参会状态等,可以通过逻辑处理层接收服务器发送的文本数据、调用语音接口从而改变终端的语言音量,等等。
本申请的界面控制层和逻辑处理层可以使用不同的编程语言构建,具体地可以根据已有编程语言的特性、以及界面控制层和逻辑处理层各自所实现的功能灵活选择,比如,界面控制层可以使用Dart语言,逻辑处理层可以使用C++语言。
比如,用户A在用户界面通过触发控件的方式邀请小C加入会议1,音视频会议操控端的界面控制层可以基于用户A在用户界面的操作,接收该操作所触发的目标操作事件1(邀请小C加入会议1)。
102、在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识。
其中,特征数据可以包括表征目标操作事件的特征的数据,特征数据的数据类型以及数量等可以根据实际场景灵活设置,比如,目标操作事件为全员静音解除时,特征数据可以包括布尔类型的false,又比如目标操作事件为上传文件A时,特征数据可以包括文件A,等等。
其中,事件处理服务可以包括在逻辑处理层处理目标操作事件时所调用的服务,事件处理服务可以为接口、方法、类、函数等,具体地不同的事件处理服务有所不同,服务标识为对事件处理服务进行唯一标识的信息,服务标识可以为字符、文本等形式,具体地可以在应用过程中灵活处理。
具体地,终端可以通过预设的事件数据映射关系,获取目标操作事件对应的特征数据,终端可以预先设置事件服务映射关系,事件服务映射关系中可以包括不同操作事件对应的事件处理服务的服务标识,则界面控制层可以从该事件服务映射关系中,确定目标操作事件对应的事件处理服务的服务标识。
比如,可以在界面控制层确定目标操作事件1的特征数据1,确定目标操作事件1对应的事件处理服务的服务标识P。
在一些实施例中,步骤“接收作用于音视频会议操控端的用户界面而触发的目标操作事件”可以包括:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件的事件信息;
步骤“在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识”可以包括:
在界面控制层从事件信息中提取目标操作事件的特征数据;
在界面控制层确定目标操作事件对应的事件处理服务的服务标识。
其中,事件信息可以包括以数据形式记录目标操作事件的信息,界面控制层可以接收目标操作事件的事件信息,并从事件信息中提取目标操作事件的特征数据,再确定目标操作事件对应的事件处理服务的服务标识。
在一些实施例中,步骤“在界面控制层从事件信息中提取目标操作事件的特征数据”可以包括:
在界面控制层向控制器添加目标操作事件的事件信息,通过控制器从事件信息中提取目标操作事件的特征数据;
步骤“在界面控制层确定目标操作事件对应的事件处理服务的服务标识”可以包括:
在界面控制层向通信接口传输目标操作事件的特征数据,通过通信接口根据第一映射关系,确定目标操作事件对应的事件处理服务的服务标识,第一映射关系包括多个预设操作事件与预设服务标识之间的关系;
步骤“向逻辑处理层传输特征数据和服务标识”可以包括:
通过通信接口向逻辑处理层传输特征数据和服务标识。
在一些实施例中,界面控制层可以进一步细化为多个模块,模块的具体形式可以为组件、接口、类、实例、函数等,每个模块可以实现不同的功能,比如模块可以由控制器、通信接口等,具体地,在确定特征数据和服务标识的过程中,可以将目标操作事件的事件信息添加到控制器中,通过控制器从事件信息中提取目标操作事件的特征数据,再将特征数据发送到界面控制层的通信接口中,通过通信接口确定目标操作事件对的事件处理服务的服务标识,然后通信接口可以向逻辑处理层传输得到的特征数据和服务标识。
103、向逻辑处理层传输特征数据和服务标识。
本申请对音视频会议操控端进行分层处理,界面控制层和逻辑处理层各自较为独立地进行数据和逻辑的处理,而目标操作事件需要通过逻辑处理层进行实际的逻辑处理,则需要向逻辑处理层传输特征数据和服务标识。
比如,从界面控制层向逻辑处理层传输目标操作事件1的特征数据1和服务标识P。
在一些实施例中,步骤“向逻辑处理层传输特征数据和服务标识”可以包括:
在界面控制层对特征数据和服务标识进行序列化处理,得到目标操作事件的事件数据;
向逻辑处理层传输目标操作事件的事件数据。
在不同层之间进行数据传输前,可以对特征数据和服务标识进行处理,得到便于传输的事件数据,具体地,序列化处理可以基于一定的数据结构进行,数据结构如proto、Json等,然后可以向逻辑处理层传输目标操作事件的事件数据,对应地,逻辑处理层在接收到事件数据后,可以对事件数据进行解析得到特征数据和服务标识。
比如,可以基于proto的相关规则对特征数据1和服务标识P进行序列化处理,得到目标操作事件1的事件数据A,然后向逻辑处理层传输该事件数据A。
104、在逻辑处理层根据特征数据,调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息。
其中,处理结果信息可以包括通过事件处理服务进行事件处理后得到的目标操作事件的处理结果,比如,处理结果信息可以包括处理成功,处理结果信息也可以包括由于网络原因处理失败,等等。
逻辑处理层可以包括多个实现特定功能的服务,服务为接口、类、方法、函数等等,具体地可以在实际应用过程中灵活处理,在逻辑处理层可以根据接收到的服务标识,确定其对应的事件处理服务(即为目标操作事件的事件处理服务),然后可以根据特征数据调用该事件处理服务,从而对目标操作事件进行事件处理,得到目标操作事件的处理结果信息。根据特征数据调用事件处理服务的方式可以有多种,比如可以根据特征数据确定事件处理服务的调用方式,再以此调用方式调用时间事件处理服务,又比如,可以将特征数据输入事件处理服务从而实现对该事件处理服务的调用。
比如,可以在逻辑处理层根据特征数据1,调用服务标识P对应的事件处理服务进行事件处理,得到目标操作事件1的处理结果信息。
105、向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
逻辑处理层得到处理结果信息后,可以向界面控制层发送该处理结果信息,具体地,如可以通过逻辑处理层上的通信接口发送处理结果信息。
界面控制层可以根据处理结果信息更新用户界面,用户界面可以显示用户触发的按钮所带来的结果,比如,若用户在用户界面上传文件A,界面控制层在接收到上传成功的处理结果信息后,可以显示“上传成功”以提示用户文件A已上传成功。
在一些实施例中,步骤“向逻辑处理层传输目标操作事件的事件数据”可以包括:
在界面控制层生成目标操作事件的事件标识;
向逻辑处理层传输由事件标识标记的事件数据;
对应地,步骤“向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果”可以包括:
向界面控制层传输由事件标识标记的处理结果信息;
在界面控制层根据事件标记,确定处理结果信息对应的目标操作事件;
在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
本申请的目标操作事件需要由界面控制层和逻辑处理层共同配合,而由于是两个相对独立的层,为了便于识别和处理数据,可以为目标操作事件设置事件标识,具体地,可以在界面控制层生成目标操作事件的事件标识,目标操作事件的特征数据、服务标识、以及对特征数据和服务标识进行序列化处理得到的事件数据等,都可以由事件标识进行标记。
则界面控制层可以向逻辑处理层发送由事件标识标记的事件数据,逻辑处理层得到处理结果信息后,可以通过事件标识标记该处理结果信息,将由事件标识标记的处理结果信息向界面控制层发送,界面控制层可以根据该事件标识确定该处理结果信息对应的目标操作事件,进而根据目标操作事件的处理结果信息,对应更新用户界面。
比如,可以在界面控制层生成目标操作事件1的事件标识VV,然后向逻辑处理层传输由事件标识VV标记的事件数据,逻辑处理层在得到处理结果信息后,可以将由事件标识VV标记的处理结果信息回传到界面控制层,界面控制层根据事件标识VV确定该处理结果信息为目标操作事件1的结果,进而根据该处理结果信息更新用户界面。
在一些实施例中,步骤“在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果”可以包括:
在界面控制层根据处理结果信息,构建目标操作事件的事件状态信息;
在界面控制层基于事件状态信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
其中,事件状态信息可以包括表征目标操作事件的当前状态的信息,界面控制层的通信接口可以接收处理结果信息,接着控制器可以对处理结果信息进行识别和处理,构建目标操作事件的事件状态信息,再然后用户界面组件可以根据该事件状态信息,确定用户界面需要更新的部分,并对用户界面进行更新,更新后的用户界面可以显示目标操作事件的处理结果。
在一些实施例中,音视频会议实现方法还可以包括:
当接收到预设类型的会议变更消息时,向界面控制层传输会议变更消息;
在界面控制层根据会议变更消息,更新音视频会议操控端的用户界面,以在用户界面显示会议变更的信息。
在一些场景下,音视频会议操控端会接收服务器发送的有关音视频会议的消息,这些消息是服务器发送的,而非音视频会议操控端主动请求的,这些消息中的一部分需要通知到用户,即需要对用户界面进行更新,具体地,会议变更消息可以包括指示改变正在进行中的音视频会议的当前状态的消息,比如,会议变更消息可以指示会议结束、会议暂停、会议成员静音、当前的音频会议变为视频会议,等等。
在逻辑处理层接收到服务器发送的会议变更消息后,可以识别该会议变更消息的类型,当该会议变更消息属于预设类型时,即该会议变更消息需要向用户通知时,可以向界面控制层传输该会议变更消息,使得界面控制层根据该会议变更消息,更新音视频会议操控端的用户界面。
比如,接收服务器发送的会议变更通知1,确定该会议变更消息为类型1,则将该会议变更消息发送到界面控制层,界面控制层根据该会议变更消息,更新用户界面,更新后的用户界面显示“应主持人邀请,请开启视频会议”。
在一些实施例中,音视频会议实现方法还可以包括:
向音视频会议操控端所在的操作系统发送音视频参数信息;
在界面控制层接收操作系统基于音视频参数信息传输的音视频流数据,在用户界面基于音视频流数据进行音视频播放。
音视频会议操控端还可以进行音视频播放,音视频播放可以为播放在线会议的实时音频或实时视频,具体地,音视频会议操控端可以向其所在计算机设备的操作系统发送音视频参数信息,音视频参数信息可以包括即将进行播放的音视频的参数信息,比如清晰度、帧率、码率等。然后音视频会议操控端可以接收操作系统返回的与音视频参数信息相符合的音视频流数据,并基于这些音视频流数据进行音视频播放。
在一些实施例中,步骤“在界面控制层接收操作系统基于音视频参数信息传输的音视频流数据,在用户界面基于音视频流数据进行音视频播放”可以包括:
在操作系统根据音视频参数信息生成音视频传输标识,向界面控制层发送将音视频传输标识,接收服务器基于数据请求消息返回的音视频流数据,数据请求消息为操作操作基于音视频参数信息向服务器发送的消息;
在界面控制层构建音视频传输标识对应的音视频传输通道,接收操作系统通过音视频传输通道传输的音视频流数据,在用户界面基于音视频流数据进行音视频播放。
其中,音视频传输标识可以包括对音视频传输事件进行唯一标识的信息,音视频传输通道可以把包括在音视频会议操控端和操作系统之间实现音视频数据传输所使用的内容。
比如可以音视频会议操控端可以基于用户操作,确定将要播放的音视频数据的音视频参数信息1,然后可以向操作系统发送该音视频参数信息1,操作系统可以根据接收到的音视频参数消息1,生成数据请求消息,并将数据请求消息发送到服务器,操作系统可以接收服务器基于该数据请求消息返回的音视频数据,并通过音视频传输通道将该音视频数据发送到音视频会议操控端,音视频会议操控端可以根据该音视频数据进行音视频播放。
在一些实施例中,用户界面包括响应界面和操控界面,音视频会议实现方法还可以包括:
在音视频会议操控端显示针对会议硬件设备的响应界面,响应界面包括会议硬件设备对应的会议发起控件,响应界面为终端对会议硬件设备的会议信息进行响应而显示的界面;
响应于针对会议发起控件的操作,显示音视频会议操控端发起的目标音视频会议的操控界面,操控界面包括针对目标音视频会议的会议操控控件、和针对会议硬件设备的设备操控控件,会议操控控件用于改变目标音视频会议的会议状态,设备操控控件用于改变会议硬件设备的设备状态。
本申请中的控件可以为按钮、选择框、滑框、编辑框等等,针对控件的操作可以包括点击(如轻触、双击、单击)、滑动、长按等,本申请中的响应于,可以用于表示所执行的操作所依赖的条件或者状态,当满足所依赖的条件或状态时,所执行的一个或多个操作可以是实时的,也可以具有设定的延迟;在没有特别说明的情况下,所执行的多个操作不存在执行先后顺序的限制。
比如,参见图3,会议硬件设备的页面可以如图3,音视频会议操控端可以扫描图3中的二维码,即可显示如图4的响应页面01,响应页面01可以包括,即语音会议按钮011(即音频发起控件)和视频会议按钮012(即视频会议发起控件),用户可以点击视频会议按钮012,即可在会议硬件设备显示其发起的目标视频会议的画面,而音视频会议操控端可以显示该目标视频会议的操控页面02,操控页面02可以包括针对目标视频会议的管理会议硬件设备按钮021(即会议操控控件)和针对会议硬件设备的管理参与成员及设备按钮022(即设备操控控件)。
在一些实施例中,会议操控控件包括成员音视频控制控件和成员管理控件,音视频会议实现方法还可以包括:
响应于针对成员音视频控制控件的操作,触发改变目标音视频会议中会议成员所使用的会议设备的音视频输出状态;
响应于针对成员管理控件的操作,触发改变目标音视频会议中会议成员的会议状态。
成员音视频控制控件和成员管理控件可以在新的独立页面显示,也可以在操控页面显示,具体地可以在实际应用过程中灵活设计,再次不做限制。
比如,触发图4中的管理会议硬件设备按钮021后,可以显示如图5所示的会议操控页面03,会议操控页面03可以显示已在会议中的成员的信息,以及未进入会议的成员的信息,会议操控页面03还显示了成员会议音视频控制控件(关闭全员视频按钮031)、成员管理控件(添加参与人按钮032和添加会议设备按钮033),触发关闭全员视频按钮031可以关闭所有参会人员和设备的视频,触发添加参与人按钮032可以邀请新人加入会议,触发添加会议设备按钮033可以选择邀请新设备加入会议。
在一些实施例中,设备操控控件包括设备音视频控制控件、以及设备操控退出控件,音视频会议实现方法还可以包括:
响应于针对设备音视频控制控件的操作,触发改变会议硬件设备的音视频输出状态;
响应于针对设备操控退出控件的操作,解除音视频会议操控端对会议硬件设备的操控状态。
设备音视频控制控件和设备操控退出控件可以在新的独立页面显示,也可以在操控页面显示,具体地可以在实际应用过程中灵活设计,再次不做限制。
比如,参见图6的操控页面,图6的操控页面02包括设备音视频控制控件(静音按钮0021和关闭摄像头按钮0022)、以及设备操控退出控件(退出设备操控按钮0023),触发静音按钮0021可以使会议硬件设备静音,触发关闭摄像头按钮0022可以使会议硬件设备关闭摄像头,触发退出设备操控按钮0023可以使结束音视频会议操控端对会议硬件设备的操控。
此外,音视频会议操控端可以接收服务器传送的会议状态变更信息,并显示在用户界面上,如图7,操控页面02可以显示信息“主持人邀请当前设备开启视频,开启后麦克风也将同时打开”以及开启视频按钮和取消按钮。
本申请可以通过包含界面控制层和逻辑处理层的音视频会议操控端,对音视频会议进行操控,具体在实现操控的过程中,可以通过界面控制层确定用户在用户界面的操作所触发的目标操作事件、目标操作事件的特征数据和服务标识,并将特征数据和服务标识传输到逻辑处理层,由逻辑处理层实施调用等过程,本申请通过分层的方式构建音视频会议操控端,逻辑处理层和界面控制层分别实现不同的功能,根据每一层所实现的功能的特点使用不同的编程语言进行开发,相比于现有技术使用单一编程语言开发整个软件,本申请可以显著提升软件开发效率。
根据上述实施例所描述的方法,以下将举例作进一步详细说明。
参见图8,图8为本申请的音视频会议实现方法的又一流程图,该音视频会议实现方法可以包括:
201、终端接收作用于音视频会议操控端的用户界面而触发的目标操作事件的事件信息,音视频会议操控端包括界面控制层和逻辑处理层。
202、终端在界面控制层从事件信息中提取目标操作事件的特征数据。
203、终端在界面控制层确定目标操作事件对应的事件处理服务的服务标识。
204、终端在界面控制层生成目标操作事件的事件标识,对特征数据和服务标识进行序列化处理,得到目标操作事件的事件数据。
205、终端向逻辑处理层传输由事件标识标记的事件数据。
206、终端在逻辑处理层对事件数据进行处理,得到特征数据和服务标识,并根据特征数据调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息。
207、终端向界面控制层传输由事件标识标记的处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
参见图9,图9为音视频会议操控端的技术架构图,具体地,该技术架构图可以根据音视频会议操控端的开发过程中所使用的编程语言进行划分,比如图X中可以分为Dart层和Cpp层,Dart层和Cpp层之间可以基于远程过程调用(rpc)技术进行通信。Dart层和Cpp层之间可以基于数据描述语言protobuf对数据进行序列化转换,便于二者之间进行数据传输。Dart层和Cpp层之间可以构建观察者—消费者模型,具体实现可以通过各个层内部署的组件共同配合来实现(如Cpp层的浏览器内核模块中的观察者组件、以及Dart层中观察者组件)。
Cpp层可以处理音视频会议操控端的网络请求、以及复杂的逻辑计算,为Dart层的用户界面提供一个稳定和高效的服务,Dart层可以确定在Cpp层要调用的服务接口,以及实现用户界面的展示和交互。
其中,Dart层通过用户界面组件(UI component)、业务逻辑组件(Bloc,BusinessLogic Component)、数据描述语言protobuf、远程过程调用技术、观察者模式技术(Observer),具体地,业务逻辑组件可以包括监听器(Bloc Listener)、构造器(BlocBuilder)、事件(Events)和状态(States)等。通过用户界面组件可以合成在音视频会议操控端上显示的页面。
在Dart层中,参见图10,图10具体显示了Dart层内部的部分组件关系图,具体地,用户界面组件可以向业务逻辑组件内添加事件,业务逻辑组件在对事件进行处理后可以向UI返回状态,业务逻辑组件可以根据事件的信息向保存了数据的数据组件请求数据,数据组件会根据业务逻辑组件发送的请求信息,向业务逻辑组件返回其所请求的数据,业务逻辑组件和数据组件之间在发送消息过程中,可以为异步请求和异步响应。在这个过程中,通过Bloc可以分离data与UI,通过数据来驱动UI的变更,还可以实现多个页面之间的数据通信,利用状态驱使UI进行变更。
网络与逻辑处理层(即Cpp层)可以包括浏览器内核模块,引擎模块,工具类提供模块Utils等,其中浏览器内核可以为开源的Chromium(一种浏览器内核),Chromium可以包括服务组件、观察者组件、基于http的传输组件、加密解密组件、基础模块组件等,引擎模块(FlutterEngine)可以包括通信端口、独立运行空间、通信通道、运行环境、向量图形处理函数库等。
本申请的音视频会议操控端实现静音的流程图可以参见图11,具体地,用户在音视频会议操控端的用户页面上点击静音控件(如静音按钮),音视频会议操控端拿到全局的会议控制逻辑组件(HardwareMeetingControllerBloc),在会议控制逻辑组件中添加静音事件(ControllMemberAudioAndVideoEvent),会议控制逻辑组件可以监听该静音事件(通过mapEventToState方法),将静音事件中的数据(如指示静音的布尔型数据true)提取出来,构建数据包PVControlReq,然后将数据包发送到远程过程调用服务中,通过远程调用服务在Cpp层实现静音,异步等待远程调用服务接收到的Cpp层返回的调用结果,将调用结果输入到流数据stream中,确定调用结果对应的状态,用户界面监听流数据,可以接收流数据发送的状态并根据该状态对用户界面进行更新。
本申请的音视频会议操控端不同层之间的通信的流程图可以参见图12,Dart层可以创建HardwareRpcServiceApi实例,其中构造函数为WeRpcClient,然后通过HardwareRpcServiceApi异步调用对应的方法,将方法中的数据发送给代理类rpc client,通过代理类的invoke方法将要调用的数据和服务名称进行包装成一个新的数据包pbbuffer,代理类可以生成一个唯一的requstId,并且注册一个callback到全局的callBackCenter,然后通过dart2cpp将pb buffer发送给Cpp层,Cpp层收到数据包后,通过服务的名称和方法名找到对应的服务,通过静态代理实现对应方法的调用,并且将结果和callbackId返回到Dart层,Dart层根据requstId找到对应的callback,并执行对应的callback操作。
本申请的音视频会议操控端接收会议变更通知的流程图可以参见图13,在CppObserverCenter注册要监听的消息类型,返回一个stream的数据流,Dart层根据类型将数据流存放到map(数据结构)中,在Cpp层初始化观察者observer,实现一个消息通知的观察者-消费者模型,注册消费者事件,并且将所有的数据通过dart2cpp发送到Dart层,Dart层的调用方的数据流stream收到数据,处理相关音视频相关的业务,Dart层在生命周期结束的时候反注册observer,避免内存泄漏。
本申请的音视频会议用户界面状态切换的流程图可以参见图14,UI通过BlocBuilder监听bloc数据流,Bloc处理完数据之后根据后台的状态码构建不同的状态state,并且返回数据到UI中,UI根据不同的状态state来实现不同的UI逻辑。
本申请的音视频会议用户界面状态切换的流程图可以参见图15,创建一个Texture widget,并且通过调用通过channel的方式将创建的一些数据(初始化的数据,比如分辨率、清晰度)发送给Android/ios,Android/ios生成一个唯一的视频流id,并且将这个数据返回给flutter,拿到这个视频流id之后,建立一个EventChannel的数据传输通道,native将视频转换成PixelBuffer(一种数据格式)的数据流,通过Eventchannel发送数据视频流数据,Flutter拿到视频流数据之后开始渲染,从而在UI界面进行音视频播放。
本申请可以通过包含界面控制层和逻辑处理层的音视频会议操控端,对音视频会议进行操控,具体在实现操控的过程中,可以通过界面控制层确定用户在用户界面的操作所触发的目标操作事件、目标操作事件的特征数据和服务标识,并将特征数据和服务标识传输到逻辑处理层,由逻辑处理层实施调用等过程,本申请通过分层的方式构建音视频会议操控端,逻辑处理层和界面控制层分别实现不同的功能,根据每一层所实现的功能的特点使用不同的编程语言进行开发,相比于现有技术使用单一编程语言开发整个软件,本申请可以显著提升软件开发效率。
本申请实施例还提供一种基于上述音视频会议实现方法的装置。其中名词的含义与上述音视频会议实现方法中相同,具体实现细节可以参考方法实施例中的说明。
参见图16,图16为本申请提供的音视频会议实现装置的一结构示意图,音视频会议实现装置包括接收模块301、确定模块302、传输模块303、调用模块304、和更新模块305,其中,
接收模块301,用于接收作用于音视频会议操控端的用户界面而触发的目标操作事件,音视频会议操控端包括界面控制层和逻辑处理层;
确定模块302,用于在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识;
传输模块303,用于向逻辑处理层传输特征数据和服务标识;
调用模块304,用于在逻辑处理层根据特征数据,调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息;
更新模块305,用于向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
在一些实施例中,传输模块包括处理子模块和传输子模块,其中,
处理子模块,用于在界面控制层对特征数据和服务标识进行序列化处理,得到目标操作事件的事件数据;
传输子模块,用于向逻辑处理层传输目标操作事件的事件数据。
在一些实施例中,传输子模块具体用于:
在界面控制层生成目标操作事件的事件标识;
向逻辑处理层传输由事件标识标记的事件数据;
此时更新模块包括结果传输子模块、确定子模块和更新子模块,其中,
结果传输子模块,用于向界面控制层传输由事件标识标记的处理结果信息;
确定子模块,用于在界面控制层根据事件标记,确定处理结果信息对应的目标操作事件;
更新子模块,用于在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
在一些实施例中,更新子模块具体用于:
在界面控制层根据处理结果信息,构建目标操作事件的事件状态信息;
在界面控制层基于事件状态信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
在一些实施例中,接收模块具体用于:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件的事件信息;
此时确定模块包括提取子模块和确定子模块,其中,
提取子模块,用于在界面控制层从事件信息中提取目标操作事件的特征数据;
确定子模块,用于在界面控制层确定目标操作事件对应的事件处理服务的服务标识。
在一些实施例中,提取子模块具体用于:
在界面控制层向控制器添加目标操作事件的事件信息,通过控制器从事件信息中提取目标操作事件的特征数据;
此时确定子模块具体用于:
在界面控制层向通信接口传输目标操作事件的特征数据,通过通信接口根据第一映射关系,确定目标操作事件对应的事件处理服务的服务标识,第一映射关系包括多个预设操作事件与预设服务标识之间的关系;
此时传输模块具体用于:
通过通信接口向逻辑处理层传输特征数据和服务标识。
在一些实施例中,音视频会议实现装置还包括:
消息传输模块,用于当接收到预设类型的会议变更消息时,向界面控制层传输会议变更消息;
信息显示模块,用于在界面控制层根据会议变更消息,更新音视频会议操控端的用户界面,以在用户界面显示会议变更的信息。
在一些实施例中,音视频会议实现装置还包括:
参数发送模块,用于向音视频会议操控端所在的操作系统发送音视频参数信息;
播放模块,用于在界面控制层接收操作系统基于音视频参数信息传输的音视频流数据,在用户界面基于音视频流数据进行音视频播放。
在一些实施例中,播放模块具体用于:
在操作系统根据音视频参数信息生成音视频传输标识,向界面控制层发送将音视频传输标识,接收服务器基于数据请求消息返回的音视频流数据,数据请求消息为操作操作基于音视频参数信息向服务器发送的消息;
在界面控制层构建音视频传输标识对应的音视频传输通道,接收操作系统通过音视频传输通道传输的音视频流数据,在用户界面基于音视频流数据进行音视频播放。
在一些实施例中,用户界面包括响应界面和操控界面,音视频会议实现装置还包括:
响应页面显示模块,用于在音视频会议操控端显示针对会议硬件设备的响应界面,响应界面包括会议硬件设备对应的会议发起控件,响应界面为终端对会议硬件设备的会议信息进行响应而显示的界面;
操控页面显示模块,用于响应于针对会议发起控件的操作,显示音视频会议操控端发起的目标音视频会议的操控界面,操控界面包括针对目标音视频会议的会议操控控件、和针对会议硬件设备的设备操控控件,会议操控控件用于改变目标音视频会议的会议状态,设备操控控件用于改变会议硬件设备的设备状态。
在一些实施例中,会议操控控件包括成员音视频控制控件和成员管理控件,音视频会议实现装置还包括:
输出改变模块,用于响应于针对成员音视频控制控件的操作,触发改变目标音视频会议中会议成员所使用的会议设备的音视频输出状态;
状态改变模块,用于响应于针对成员管理控件的操作,触发改变目标音视频会议中会议成员的会议状态。
在一些实施例中,设备操控控件包括设备音视频控制控件、以及设备操控退出控件,音视频会议实现装置还包括:
硬件改变模块,用于响应于针对设备音视频控制控件的操作,触发改变会议硬件设备的音视频输出状态;
操控改变模块,用于响应于针对设备操控退出控件的操作,解除音视频会议操控端对会议硬件设备的操控状态。
本申请中,接收模块301可以接收作用于音视频会议操控端的用户界面而触发的目标操作事件,音视频会议操控端包括界面控制层和逻辑处理层,确定模块302在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识,然后传输模块303向逻辑处理层传输特征数据和服务标识,接着调用模块304在逻辑处理层根据特征数据,调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息;最后更新模块305向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
本申请可以通过包含界面控制层和逻辑处理层的音视频会议操控端,对音视频会议进行操控,具体在实现操控的过程中,可以通过界面控制层确定用户在用户界面的操作所触发的目标操作事件、目标操作事件的特征数据和服务标识,并将特征数据和服务标识传输到逻辑处理层,由逻辑处理层实施调用等过程,本申请通过分层的方式构建音视频会议操控端,逻辑处理层和界面控制层分别实现不同的功能,根据每一层所实现的功能的特点使用不同的编程语言进行开发,相比于现有技术使用单一编程语言开发整个软件,本申请可以显著提升软件开发效率。
此外,本申请实施例还提供一种计算机设备,该计算机设备可以为终端或者服务器,如图17所示,其示出了本申请实施例所涉及的计算机设备的结构示意图,具体来讲:
该计算机设备可以包括一个或者一个以上处理核心的处理器401、一个或一个以上计算机可读存储介质的存储器402、电源403和输入单元404等部件。本领域技术人员可以理解,图17中示出的计算机设备结构并不构成对计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
处理器401是该计算机设备的控制中心,利用各种接口和线路连接整个计算机设备的各个部分,通过运行或执行存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行计算机设备的各种功能和处理数据,从而对计算机设备进行整体监控。可选的,处理器401可包括一个或多个处理核心;优选的,处理器401可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户页面和应用程序等,调制解调处理器主要处理无线通讯。可以理解的是,上述调制解调处理器也可以不集成到处理器401中。
存储器402可用于存储软件程序以及模块,处理器401通过运行存储在存储器402的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器402可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据计算机设备的使用所创建的数据等。此外,存储器402可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器402还可以包括存储器控制器,以提供处理器401对存储器402的访问。
计算机设备还包括给各个部件供电的电源403,优选的,电源403可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源403还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
该计算机设备还可包括输入单元404,该输入单元404可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出,计算机设备还可以包括显示单元等,在此不再赘述。具体在本实施例中,计算机设备中的处理器401会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现各种功能,如下:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件,音视频会议操控端包括界面控制层和逻辑处理层;在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识;向逻辑处理层传输特征数据和服务标识;在逻辑处理层根据特征数据,调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息;向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
根据本申请的一个方面,提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述实施例中各种可选实现方式中提供的方法。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过计算机程序来完成,或通过计算机程序控制相关的硬件来完成,该计算机程序可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例还提供一种存储介质,其中存储有计算机程序,该计算机程序能够被处理器进行加载,以执行本申请实施例所提供的任一种音视频会议实现方法中的步骤。例如,该计算机程序可以执行如下步骤:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件,音视频会议操控端包括界面控制层和逻辑处理层;在界面控制层确定目标操作事件的特征数据、以及目标操作事件对应的事件处理服务的服务标识;向逻辑处理层传输特征数据和服务标识;在逻辑处理层根据特征数据,调用服务标识对应的事件处理服务进行事件处理,得到目标操作事件的处理结果信息;向界面控制层传输处理结果信息,在界面控制层根据处理结果信息,更新音视频会议操控端的用户界面,以在用户界面显示目标操作事件的处理结果。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的计算机程序,可以执行本申请实施例所提供的任一种音视频会议实现方法中的步骤,因此,可以实现本申请实施例所提供的任一种音视频会议实现方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的音视频会议实现方法、装置、存储介质及计算机设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上,本说明书内容不应理解为对本申请的限制。
Claims (15)
1.一种音视频会议实现方法,其特征在于,包括:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件,所述音视频会议操控端包括界面控制层和逻辑处理层;
在所述界面控制层确定所述目标操作事件的特征数据、以及所述目标操作事件对应的事件处理服务的服务标识;
向所述逻辑处理层传输所述特征数据和所述服务标识;
在所述逻辑处理层根据所述特征数据,调用所述服务标识对应的事件处理服务进行事件处理,得到所述目标操作事件的处理结果信息;
向所述界面控制层传输所述处理结果信息,在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
2.根据权利要求1所述的方法,其特征在于,所述向所述逻辑处理层传输所述特征数据和所述服务标识,包括:
在所述界面控制层对所述特征数据和所述服务标识进行序列化处理,得到所述目标操作事件的事件数据;
向所述逻辑处理层传输所述目标操作事件的事件数据。
3.根据权利要求2所述的方法,其特征在于,所述向所述逻辑处理层传输所述目标操作事件的事件数据,包括:
在所述界面控制层生成所述目标操作事件的事件标识;
向所述逻辑处理层传输由所述事件标识标记的所述事件数据;
所述向所述界面控制层传输所述处理结果信息,在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果,包括:
向所述界面控制层传输由所述事件标识标记的所述处理结果信息;
在所述界面控制层根据所述事件标记,确定所述处理结果信息对应的所述目标操作事件;
在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
4.根据权利要求3所述的方法,其特征在于,所述在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果,包括:
在所述界面控制层根据所述处理结果信息,构建所述目标操作事件的事件状态信息;
在所述界面控制层基于所述事件状态信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
5.根据权利要求1所述的方法,其特征在于,所述接收作用于音视频会议操控端的用户界面而触发的目标操作事件,包括:
接收作用于音视频会议操控端的用户界面而触发的目标操作事件的事件信息;
所述在所述界面控制层确定所述目标操作事件的特征数据、以及所述目标操作事件对应的事件处理服务的服务标识,包括:
在所述界面控制层从所述事件信息中提取所述目标操作事件的特征数据;
在所述界面控制层确定所述目标操作事件对应的事件处理服务的服务标识。
6.根据权利要求5所述的方法,其特征在于,所述在所述界面控制层从所述事件信息中提取所述目标操作事件的特征数据,包括:
在所述界面控制层向控制器添加所述目标操作事件的事件信息,通过所述控制器从所述事件信息中提取所述目标操作事件的特征数据;
所述在所述界面控制层确定所述目标操作事件对应的事件处理服务的服务标识,包括:
在所述界面控制层向通信接口传输所述目标操作事件的特征数据,通过所述通信接口根据第一映射关系,确定所述目标操作事件对应的事件处理服务的服务标识,所述第一映射关系包括多个预设操作事件与预设服务标识之间的关系;
所述向所述逻辑处理层传输所述特征数据和所述服务标识,包括:
通过所述通信接口向所述逻辑处理层传输所述特征数据和所述服务标识。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当接收到预设类型的会议变更消息时,向所述界面控制层传输所述会议变更消息;
在所述界面控制层根据所述会议变更消息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示会议变更的信息。
8.根据权利要求1所述的方法,其特征在于,所述方法还包括:
向所述音视频会议操控端所在的操作系统发送音视频参数信息;
在所述界面控制层接收所述操作系统基于所述音视频参数信息传输的音视频流数据,在所述用户界面基于所述音视频流数据进行音视频播放。
9.根据权利要求8所述的方法,其特征在于,所述在所述界面控制层接收所述操作系统基于所述音视频参数信息传输的音视频流数据,在所述用户界面基于所述音视频流数据进行音视频播放,包括:
在所述操作系统根据所述音视频参数信息生成音视频传输标识,向所述界面控制层发送将所述音视频传输标识,接收服务器基于数据请求消息返回的音视频流数据,所述数据请求消息为所述操作操作基于所述音视频参数信息向所述服务器发送的消息;
在所述界面控制层构建所述音视频传输标识对应的音视频传输通道,接收所述操作系统通过所述音视频传输通道传输的音视频流数据,在所述用户界面基于所述音视频流数据进行音视频播放。
10.根据权利要求1所述的方法,其特征在于,所述用户界面包括响应界面和操控界面,所述方法还包括:
在所述音视频会议操控端显示针对会议硬件设备的响应界面,所述响应界面包括所述会议硬件设备对应的会议发起控件,所述响应界面为终端对所述会议硬件设备的会议信息进行响应而显示的界面;
响应于针对所述会议发起控件的操作,显示所述音视频会议操控端发起的目标音视频会议的操控界面,所述操控界面包括针对所述目标音视频会议的会议操控控件、和针对所述会议硬件设备的设备操控控件,所述会议操控控件用于改变所述目标音视频会议的会议状态,所述设备操控控件用于改变所述会议硬件设备的设备状态。
11.根据权利要求10所述的方法,其特征在于,所述会议操控控件包括成员音视频控制控件和成员管理控件,所述方法还包括:
响应于针对所述成员音视频控制控件的操作,触发改变所述目标音视频会议中会议成员所使用的会议设备的音视频输出状态;
响应于针对所述成员管理控件的操作,触发改变所述目标音视频会议中会议成员的会议状态。
12.根据权利要求10所述的方法,其特征在于,所述设备操控控件包括设备音视频控制控件、以及设备操控退出控件,所述方法还包括:
响应于针对所述设备音视频控制控件的操作,触发改变所述会议硬件设备的音视频输出状态;
响应于针对所述设备操控退出控件的操作,解除所述音视频会议操控端对所述会议硬件设备的操控状态。
13.一种音视频会议实现装置,其特征在于,包括:
接收模块,用于接收作用于音视频会议操控端的用户界面而触发的目标操作事件,所述音视频会议操控端包括界面控制层和逻辑处理层;
确定模块,用于在所述界面控制层确定所述目标操作事件的特征数据、以及所述目标操作事件对应的事件处理服务的服务标识;
传输模块,用于向所述逻辑处理层传输所述特征数据和所述服务标识;
调用模块,用于在所述逻辑处理层根据所述特征数据,调用所述服务标识对应的事件处理服务进行事件处理,得到所述目标操作事件的处理结果信息;
更新模块,用于向所述界面控制层传输所述处理结果信息,在所述界面控制层根据所述处理结果信息,更新所述音视频会议操控端的用户界面,以在所述用户界面显示所述目标操作事件的处理结果。
14.一种存储介质,其特征在于,所述存储介质存储有多条计算机程序,所述计算机程序适于处理器进行加载,以执行如权利要求1至12任一项方法中的步骤。
15.一种计算机设备,包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,所述处理器执行所述计算机程序时实现如权利要求1至12任一项所述方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110943581.2A CN115941876A (zh) | 2021-08-17 | 2021-08-17 | 音视频会议实现方法、装置、存储介质及计算机设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110943581.2A CN115941876A (zh) | 2021-08-17 | 2021-08-17 | 音视频会议实现方法、装置、存储介质及计算机设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115941876A true CN115941876A (zh) | 2023-04-07 |
Family
ID=86552727
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110943581.2A Pending CN115941876A (zh) | 2021-08-17 | 2021-08-17 | 音视频会议实现方法、装置、存储介质及计算机设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115941876A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024001508A1 (zh) * | 2022-06-28 | 2024-01-04 | 腾讯科技(深圳)有限公司 | 会议控制方法、装置、电子设备、存储介质及程序产品 |
-
2021
- 2021-08-17 CN CN202110943581.2A patent/CN115941876A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024001508A1 (zh) * | 2022-06-28 | 2024-01-04 | 腾讯科技(深圳)有限公司 | 会议控制方法、装置、电子设备、存储介质及程序产品 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11470127B2 (en) | Method, system, and non-transitory computer-readable record medium for displaying reaction during VoIP-based call | |
CN111596985B (zh) | 多媒体会议场景下的界面显示方法、装置、终端及介质 | |
US20220241686A1 (en) | Information processing method, system, apparatus, device, and storage medium | |
CN109819268B (zh) | 视频直播中的直播间播放控制方法、装置、介质及设备 | |
JP6861287B2 (ja) | 映像のための効果共有方法およびシステム | |
US20180123816A1 (en) | Collaboration environments and views | |
WO2023147758A1 (zh) | 云游戏资源数据处理方法、装置、计算机设备和存储介质 | |
US10698744B2 (en) | Enabling third parties to add effects to an application | |
CN112911320A (zh) | 一种直播方法、装置、计算机设备和存储介质 | |
US20220263781A1 (en) | Method and system for managing avatar usage rights | |
CN115941876A (zh) | 音视频会议实现方法、装置、存储介质及计算机设备 | |
CN109819341B (zh) | 视频播放方法、装置、计算设备及存储介质 | |
CN112788274A (zh) | 一种基于增强现实的通信方法及装置 | |
US20230215090A1 (en) | Method and system for displaying virtual space at various point-in-times | |
CN114404996A (zh) | 资源数据处理方法、系统、编辑器、电子设备及存储介质 | |
CN114338830A (zh) | 数据传输方法、装置、计算机可读存储介质及计算机设备 | |
CN114222190A (zh) | 远程控制处理、响应方法及其装置、设备、介质、产品 | |
JP2023527624A (ja) | コンピュータプログラムおよびアバター表現方法 | |
US20230401076A1 (en) | Dynamic input interaction | |
CN110138574B (zh) | 群管理方法、装置、电子设备及可读存储介质 | |
US20220180870A1 (en) | Method for controlling external device based on voice and electronic device thereof | |
CN114189488B (zh) | 一种消息共享方法及服务器 | |
WO2023011296A1 (zh) | 交互方法、电子设备、存储介质和程序产品 | |
EP3389049B1 (en) | Enabling third parties to add effects to an application | |
CN117579854A (zh) | 直播方法、装置、计算机设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40085239 Country of ref document: HK |