CN116800917A - 远程会议的处理方法、装置、系统和存储介质 - Google Patents

Abstract

本申请涉及一种远程会议的处理方法、装置、系统和存储介质。该方法包括：获取远程会议各听众端的反馈信息；对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；控制所述远程会议主讲端播放与所述互动指令对应的互动音效。该方法能够对听众端的反馈信息进行处理，并通过声音展示听众端的处理结果，使得主讲端能够直观、快速、及时了解听众端的听众反馈，无需手动操作或者切换会议窗口，提高了远程会议互动的及时性，同时也丰富了远程会议的互动方式。

Description

远程会议的处理方法、装置、系统和存储介质

技术领域

本申请涉及通讯技术领域，特别是涉及一种远程会议的处理方法、装置、系统和存储介质。

背景技术

众所周知，基于互联网等通讯手段的远程会议，由于能够实现高效率、跨区域的沟通和交流，备受各行各业的青睐。然而，在利用远程会议分享信息时，信息输出方缺乏听众的反馈，与真实会议环境仍存在一定的区别。

相关技术中，可以通过听众举手提问的方式反馈听众的问题。但是，传统方式仍无法满足用户的需求，互动方式比较单一。

发明内容

本申请实施例提供一种远程会议的处理方法、装置、系统和存储介质。

第一方面，本申请实施例提供一种远程会议的处理方法，包括：

获取远程会议各听众端的反馈信息；

对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；

控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

第二方面，本申请实施例提供一种远程会议的处理装置，包括：

获取模块，用于获取远程会议各听众端的反馈信息；

处理模块，用于对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；

控制模块，用于控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

第三方面，本申请实施例提供一种远程会议的处理设备，包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现本申请实施例第一方面提供的远程会议的处理方法的步骤。

第四方面，本申请实施例提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现本申请实施例第一方面提供的远程会议的处理方法的步骤。

本申请实施例提供的技术方案，获取远程会议听众端的反馈信息；对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；控制所述远程会议主讲端播放与所述互动指令对应的互动音效。在本技术方案中，能够对听众端的反馈信息进行处理，并通过声音展示听众端的处理结果，使得主讲端能够直观、快速、及时了解听众端的听众反馈，无需手动操作或者切换会议窗口，提高了远程会议互动的及时性，同时也丰富了远程会议的互动方式。

附图说明

图1为本申请实施例提供的远程会议的处理方法应用的系统架构示意图；

图2为本申请实施例提供的远程会议的处理方法的一种流程示意图；

图3为本申请实施例提供的远程会议的处理装置的一种结构示意图；

图4为本申请实施例提供的远程会议的处理设备的一种结构示意图。

具体实施方式

本发明实施例提供的远程会议的处理方法，可以适用于如图1所示的远程会议的处理系统，该系统可以包括参会端10和服务端11。其中，参会端10可为可以包括主讲端和听众端。参会端10通过网络访问服务端11，服务端11为参会端10提供数据支持，包括远程会议的会议信息、共享文档信息以及其它与远程会议相关的内容数据等。可选的，在远程会议的召开过程中，可以根据远程会议的会议需求，调整参会端10的会议权限。可选的，上述参会端10可以为智能手机、平板电脑、个人数字助理以及台式电脑等具有上网功能，且可以与外部设备或者用户交互的电子设备。服务端11可以为独立的服务器，或者服务器集群，本申请实施例对参会端10和服务端11的具体形式不做限定。

通常，远程会议高频使用的一种场景就是培训类会议或者主题分享类会议，这类会议的特点是主讲端在一个单独的环境分享信息，而听众端可能分布在不同的环境，主讲端缺乏听众端的即时反馈。相关技术中，听众端可以通过举手提问的方式与主讲端进行互动，但是，对于提问之外的反馈信息无法获得，比如听众端的鼓掌信息等，导致互动方式单一，无法满足互动需求。为此，本申请实施例提供的技术方案，旨在解决上述存在的技术问题。

需要说明的是，下述方法实施例的执行主体可以是远程会议的处理装置，该装置可以通过软件、硬件或者软硬件结合的方式实现成为远程会议的处理设备(如上述服务端)的部分或者全部。下述方法实施例以执行主体是远程会议的处理设备为例进行说明。

为了使本申请的目的、技术方案及优点更加清楚明白，通过下述实施例并结合附图，对本申请实施例中的技术方案进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本申请，并不用于限定本申请。

图2为本申请实施例提供的远程会议的处理方法的一种流程示意图。如图2所示，该方法可以包括：

S201、获取远程会议听众端的反馈信息。

其中，反馈信息可以理解为听众端对主讲端所分享内容的一种反馈，该反馈信息可以包括提问信息，也可以包括除提问信息以外的其它类型的反馈信息，比如，听众的面部表情信息、听众的行为信息、听众的聊天信息、听众的语音信息以及听众主动上报的反馈信息等。

在实际应用中，由于获取的反馈信息的类型不同，上述S201采用的获取方式也会有所差异，可以结合听众端的实际情况采用相应的获取手段。

可选地，远程会议的处理设备在采集各听众端的反馈信息时可以通过但不限于如下三种方式：

方式一：在远程会议各听众端的会议界面中展示信息反馈组件；获取各听众端通过所述信息反馈组件反馈的即时信息。

具体的，可以在听众端的会议界面的某一区域显示一个信息反馈组件，比如信息聊天控件，各听众端可以通过该信息聊天控件发送相应信息，比如针对主讲端当前分享内容的提问信息、在主讲端分享到精彩内容时的鼓掌信息、欢呼信息或者惊叹信息等。当然，也可以在听众端的会议界面的某一区域显示多个信息反馈组件，例如，用于表征“太棒啦”、“没听懂”、“非常疑惑”、“鼓掌”等相应信息的控件，可选地，信息反馈组件可以是按钮的形式，也可以是划分的子区域，通过点击某一反馈信息对应的按钮，或在某一反馈信息对应的子区域内点击，实现反馈相关信息的目的。

这样，远程会议的处理设备便可以通过信息反馈组件获取各听众端发送的即时信息。

方式二：采集远程会议各听众端的听众语音信息。

其中，听众语音信息用于表征听众的声音。通常，在主讲端分享到精彩内容时，听众可能会鼓掌或者欢呼等，因此，在本实施例中，可以通过各听众端的麦克风采集各听众的声音，从而通过对声音的分析处理，以获取各听众针对远程会议的即时反馈。

方式三：采集远程会议各听众端的听众行为信息。

其中，听众行为信息可以包括听众的面部表情信息以及听众的肢体动作信息。在本实施例中，在采集听众行为信息时，可以结合各听众参会使用的设备来确定采用什么方式采集信息，例如，可以通过摄像头、红外热成像仪或者动作捕捉仪采集听众的各种行为信息。如，当听众登录上线后，红外热成像仪/动作捕捉仪自动打开，开始捕捉听众的肢体动作。还可以检测听众端是否打开摄像头，若摄像头处于打开状态，则可以通过摄像头采集听众的视频流，从视频流的每帧图像中提取听众的肢体动作或者面部表情信息。

S202、对各听众端的反馈信息进行处理，并根据处理结果触发互动指令。

具体的，在得到听众端的反馈信息之后，可以结合反馈信息的信息类型对反馈信息进行处理。其中，反馈信息的信息类型可以是文本、音频或者视频等。当反馈信息的信息类型为文本时，可以通过文本识别技术对反馈信息进行识别，以确定反馈信息中是否包含特定的文本信息及表情信息，或者是否包含与特定的文本信息及表情信息类似的信息，进而根据识别结果触发对应的互动指令。例如，通过文本识别技术识别到反馈信息中包含“鼓掌”的特定文本信息时，可以触发鼓掌互动指令。

当反馈信息的信息类型为音频时，即在采集到远程会议听众端的听众语音信息时，可以通过语音识别技术对此类型的反馈信息进行识别，以确定反馈信息中是否包含特定语音片段或者与特定语音片段类似的语音，进而根据识别结果触发对应的互动指令。例如，通过语音识别技术识别到听众语音信息中包含“欢呼”的特定声音时，可以触发欢呼互动指令。

当反馈信息的信息类型为视频时，即在采集到远程会议听众端的听众行为信息时，可以通过图像识别技术对反馈信息进行识别，以确定反馈信息中是否包含特定肢体动作及面部表情，进而根据识别结果触发对应的互动指令。例如，通过图像识别技术识别到听众行为信息中包含“鼓掌”的肢体动作时，可以触发鼓掌互动指令。

在从反馈信息中识别到特定信息后，可以直接触发相应的互动指令。可选地，上述根据处理结果触发互动指令的过程还可以为：获取各参会端的会议权限；根据各参会端的会议权限，向满足权限条件的参会端发送预控制指令，以使满足权限条件的参会端根据处理结果触发所述互动指令。

其中，上述参会端可以包括主讲端和听众端，为了确保远程会议的信息安全，可以为各参会端设置相应的会议权限，以使各参会端基于自身的会议权限进行相应的会议操作。在本实施例中，在对反馈信息进行处理后，可以根据各参会端的会议权限，向会议权限较高的参会端发送提醒，由会议权限较高的参会端基于反馈信息的处理结果触发相应的互动指令。这样，进一步丰富了远程会议的互动方式，满足了对远程会议的权限管理需求。

S203、控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

其中，该互动音效可以是预先存储在主讲端的音频片段。在具体实现时，可以基于实际需求在主讲端中预先存储一个或多个互动音效，在接收到互动指令之后，主讲端便可以根据互动指令播放对应的互动音效，使得主讲端通过所播放的声音能够及时获取到听众端的反馈。例如，主讲端根据鼓掌互动指令播放对应的鼓掌音效，根据欢呼互动指令播放对应的欢呼音效，使得主讲端与客户端犹如处于同一环境，能够及时获取听众端的反馈。

本申请实施例提供的远程会议的处理方法，获取远程会议听众端的反馈信息；对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；控制所述远程会议主讲端播放与所述互动指令对应的互动音效。在本技术方案中，能够对听众端的反馈信息进行处理，并通过声音展示听众端的处理结果，使得主讲端能够直观、快速、及时了解听众端的听众反馈，无需手动操作或者切换会议窗口，提高了远程会议互动的及时性，同时也丰富了远程会议的互动方式。

在实际应用中，当听众中有代表人物或者重要人物(如领导等)出席时，可根据实际情况对听众端的处理结果进行加权处理，权重值大的听众用户的处理结果会在一定程度上突现出来，更好地让主讲人得到重要人物的即时反馈。

可选地，上述S102可以通过下述步骤来实现：

S1021、对各听众端的反馈信息进行处理，得到各听众端的处理结果。

其中，可以结合反馈信息的信息类型对反馈信息进行处理。此处的信息类型可以为文本、音频或者视频等。

S1022、获取各听众端的权重值。

其中，可以获取不同听众的身份信息，进而根据不同听众的身份信息，为听众配置相应的权重值。例如，重要人物的权重值可以比普通身份人物的权重值大，可以根据实际情况，增加或削弱不同听众端的权重值。

S1023、根据各听众端的权重值，对各听众端的处理结果进行加权处理，并根据加权处理结果触发互动指令。

其中，可以将各处理结果进行分类，处理结果相似度高的归为同一类，并采用各听众端的权重值，对分类后的处理结果进行加权平均，得到反映远程会议整体听众的反馈信息。例如，部分听众端针对主讲端的反馈是“讲得太棒了”或者“鼓掌”，有的听众端的反馈是“烦躁”或者“听不懂”，那么，通过各听众端的权重值对各反馈信息的处理结果进行加权平均，得到整体听众针对主讲端的反馈是“鼓掌”，则可以触发鼓掌互动指令。

通过各听众端的权重值对各听众端反馈信息的处理结果进行加权处理，能够综合考虑各听众端的反馈，得到整体听众针对主讲端的反馈结果，能够更准确地触发相应的互动指令，且可以避免多个互动音效的相互干扰。

进一步地，考虑到各听众端的处理结果会有所差异，即有的听众端针对主讲端的反馈是正向反馈，如“讲得太棒了”或者“鼓掌”等，有的听众端针对主讲端的反馈是负向反馈，如“烦躁”或者“听不懂”等，如果经过各听众端的权重值对各处理结果进行加权平均处理后的反馈仍是负向反馈，在此情况下，为了提高远程会议的沟通效率，可以参照下述过程对远程会议进行处理，即当所述加权处理结果满足预设条件时，还可以根据所述加权处理结果生成会议调整信息；控制所述主讲端播放所述会议调整信息对应的报读语音。

其中，在加权处理结果满足预设条件时，如加权处理结果仍是负向反馈，此时，可以基于各听众端的负向反馈结果生成会议调整信息，会议调整信息中可以包括建议的会议语速、内容分享方式(如幽默、通俗的分享方式)以及各听众端整体反馈的疑惑内容等等。得到会议调整信息之后，远程会议的处理设备可以将会议调整信息通过语音转换技术转换为对应的报读语音，并在主讲端播放该报读语音。可选的，上述语音转换技术可以为从文本到语音(Text To Speech，TTS)技术。

通过各听众端的加权处理结果生成会议调整信息，并在主讲端播放会议调整信息对应的报读语音，通过声音展示会议调整信息，使得主讲端能够快速、及时获取到会议调整信息，便于主讲人及时基于会议调整信息对远程会议进行调整，从而提高了远程会议的沟通效率。

为了进一步丰富远程会议的互动方式，还可以根据所述加权处理结果生成听众表情图；控制所述主讲端在当前显示界面展示所述听众表情图。

在具体实施时，可以将加权处理结果映射为一种听众表情图。其中，该听众表情图可以包括但不限于：表情符号、表情图案或者颜色控件，也就是说，通过不同的表情符号、不同的表情图案或者不同颜色的控件，代表整体听众端针对主讲端不同的反馈，如：“讲得太棒了”、“鼓掌”、“烦躁”或者“听不懂”等等。可选地，可以通过深度学习，训练一个表情图生成模型，将各听众端反馈信息的加权处理结果输入至表情图生成模型，快速输出对应的听众表情图。在得到听众表情图之后，可以在主讲端的当前显示界面展示该听众表情图，如可以弹出一浮窗，通过该浮窗展示听众表情图。

通过在当前显示界面展示整体听众端的听众表情图，提高了远程会议互动的趣味性，同时所展示的听众表情图与所播放的互动音效形成相互补充，使得主讲端能够通过所播放的互动音效以及当前显示界面所展示的听众表情图及时了解听众端的听众反馈。

图3为本申请实施例提供的远程会议的处理装置的一种结构示意图。如图3所示，该装置可以包括：获取模块301、处理模块302和控制模块303。

具体的，获取模块301用于获取远程会议各听众端的反馈信息；

处理模块302用于对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；

控制模块303用于控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

本申请实施例提供的远程会议的处理装置，获取远程会议听众端的反馈信息；对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；控制所述远程会议主讲端播放与所述互动指令对应的互动音效。在本技术方案中，能够对听众端的反馈信息进行处理，并通过声音展示听众端的处理结果，使得主讲端能够直观、快速、及时了解听众端的听众反馈，无需手动操作或者切换会议窗口，提高了远程会议互动的及时性，同时也丰富了远程会议的互动方式。

在上述实施例的基础上，可选地，获取模块301具体用于在远程会议各听众端的会议界面中展示信息反馈组件；获取各听众端通过所述信息反馈组件反馈的即时信息。

在上述实施例的基础上，可选地，获取模块301具体用于采集远程会议各听众端的听众语音信息；或者，获取模块301具体用于采集远程会议各听众端的听众行为信息。

在上述实施例的基础上，可选地，处理模块302具体用于获取各参会端的会议权限；根据各参会端的会议权限，向满足权限条件的参会端发送预控制指令，以使满足权限条件的参会端根据处理结果触发所述互动指令。

在上述实施例的基础上，可选地，处理模块302可以包括：第一处理单元、获取单元和第二处理单元。

具体的，第一处理单元用于对各听众端的反馈信息进行处理，得到各听众端的处理结果；

获取单元用于获取各听众端的权重值；

第二处理单元用于根据各听众端的权重值，对各听众端的处理结果进行加权处理，并根据加权处理结果触发互动指令。

在上述实施例的基础上，可选地，上述处理模块302还可以包括：第一生成单元和第一控制单元。

具体的，第一生成单元用于当所述加权处理结果满足预设条件时，根据所述加权处理结果生成会议调整信息；

第一控制单元用于控制所述主讲端播放所述会议调整信息对应的报读语音。

在上述实施例的基础上，可选地，上述处理模块302还可以包括：第二生成单元和第二控制单元。

具体的，第二生成单元用于根据所述加权处理结果生成听众表情图；

第二控制单元用于控制所述主讲端在当前显示界面展示所述听众表情图。

在一个实施例中，提供了一种远程会议的处理设备，其内部结构图可以如图4所示。该处理设备包括通过系统总线连接的处理器、存储器和网络接口和数据库。其中，该处理设备的处理器用于提供计算和控制能力。该处理设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该处理设备的网络接口用于与外部的终端通过网络连接通信。该处理设备的数据库用于存储远程会议的处理过程中所涉及的数据。该计算机程序被处理器执行时以实现一种远程会议的处理方法。

本领域技术人员可以理解，图4中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的远程会议的处理设备的限定，具体的处理设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

在一个实施例中，提供了一种远程会议的处理设备，包括存储器和处理器，存储器中存储有计算机程序，该处理器执行计算机程序时实现以下步骤：

获取远程会议各听众端的反馈信息；

对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；

控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：在远程会议各听众端的会议界面中展示信息反馈组件；获取各听众端通过所述信息反馈组件反馈的即时信息。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：采集远程会议各听众端的听众语音信息；或者，采集远程会议各听众端的听众行为信息。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：获取各参会端的会议权限；根据各参会端的会议权限，向满足权限条件的参会端发送预控制指令，以使满足权限条件的参会端根据处理结果触发所述互动指令。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：对各听众端的反馈信息进行处理，得到各听众端的处理结果；获取各听众端的权重值；根据各听众端的权重值，对各听众端的处理结果进行加权处理，并根据加权处理结果触发互动指令。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：当所述加权处理结果满足预设条件时，根据所述加权处理结果生成会议调整信息；控制所述主讲端播放所述会议调整信息对应的报读语音。

在一个实施例中，处理器执行计算机程序时还实现以下步骤：根据所述加权处理结果生成听众表情图；控制所述主讲端在当前显示界面展示所述听众表情图。

在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：

获取远程会议各听众端的反馈信息；

对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；

控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

上述实施例中提供的远程会议的处理装置、设备以及存储介质可执行本申请任意实施例所提供的远程会议的处理方法，具备执行该方法相应的功能模块和有益效果。未在上述实施例中详尽描述的技术细节，可参见本申请任意实施例所提供的远程会议的处理方法。

以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种远程会议的处理方法，其特征在于，包括：

获取远程会议各听众端的反馈信息；

对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；

控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

2.根据权利要求1所述的方法，其特征在于，所述获取远程会议各听众端的反馈信息，包括：

在远程会议各听众端的会议界面中展示信息反馈组件；

获取各听众端通过所述信息反馈组件反馈的即时信息。

3.根据权利要求1所述的方法，其特征在于，所述获取远程会议各听众端的反馈信息，包括：

采集远程会议各听众端的听众语音信息；

或者，采集远程会议各听众端的听众行为信息。

4.根据权利要求1至3中任一项所述的方法，其特征在于，所述根据处理结果触发互动指令，包括：

获取各参会端的会议权限；

根据各参会端的会议权限，向满足权限条件的参会端发送预控制指令，以使满足权限条件的参会端根据处理结果触发所述互动指令。

5.根据权利要求1至3中任一项所述的方法，其特征在于，所述对各听众端的反馈信息进行处理，并根据处理结果触发互动指令，包括：

对各听众端的反馈信息进行处理，得到各听众端的处理结果；

获取各听众端的权重值；

根据各听众端的权重值，对各听众端的处理结果进行加权处理，并根据加权处理结果触发互动指令。

6.根据权利要求5所述的方法，其特征在于，还包括：

当所述加权处理结果满足预设条件时，根据所述加权处理结果生成会议调整信息；

控制所述主讲端播放所述会议调整信息对应的报读语音。

7.根据权利要求5所述的方法，其特征在于，还包括：

根据所述加权处理结果生成听众表情图；

控制所述主讲端在当前显示界面展示所述听众表情图。

8.一种远程会议的处理装置，其特征在于，包括：

获取模块，用于获取远程会议各听众端的反馈信息；

处理模块，用于对各听众端的反馈信息进行处理，并根据处理结果触发互动指令；

控制模块，用于控制所述远程会议主讲端播放与所述互动指令对应的互动音效。

9.一种远程会议的处理设备，包括存储器和处理器，所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7中任一项所述方法的步骤。