CN116830083A - 用于虚拟会议中视觉中断符号的队列管理 - Google Patents

用于虚拟会议中视觉中断符号的队列管理 Download PDF

Info

Publication number
CN116830083A
CN116830083A CN202180089719.5A CN202180089719A CN116830083A CN 116830083 A CN116830083 A CN 116830083A CN 202180089719 A CN202180089719 A CN 202180089719A CN 116830083 A CN116830083 A CN 116830083A
Authority
CN
China
Prior art keywords
interrupt
conference
subset
visual
participants
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202180089719.5A
Other languages
English (en)
Inventor
A·哈桑
M·塞卡兰
S·E·范弗利特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN116830083A publication Critical patent/CN116830083A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1818Conference organisation arrangements, e.g. handling schedules, setting up parameters needed by nodes to attend a conference, booking network resources, notifying involved parties
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/16Arrangements for providing special services to substations
    • H04L12/18Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
    • H04L12/1813Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
    • H04L12/1827Network arrangements for conference optimisation or adaptation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/90Buffering arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Human Computer Interaction (AREA)
  • Tourism & Hospitality (AREA)
  • Quality & Reliability (AREA)
  • General Business, Economics & Management (AREA)
  • Operations Research (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Data Mining & Analysis (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)

Abstract

公开了一种用于从请求在虚拟会议中发言的多个会议参与者中识别下一个发言者并持久地显示下一个发言者的视觉中断符号的系统和方法。该系统被配置为在与会议参与者相关联的每个会议界面的位置处保持视觉中断符号以及下一个发言者的视觉表示的显示,同时在每个会议界面的其他位置处改变其他参与者的其他视觉表示的显示。该系统还被配置为抑制来自虚拟会议的其他参与者的其他视觉中断符号的显示。

Description

用于虚拟会议中视觉中断符号的队列管理
技术领域
本公开涉及用于响应于从请求在虚拟会议中发言的多个会议参与者中识别出下一个发言者而自动适配提供虚拟会议的应用的会议界面,并持久地显示该下一个发言者的视觉中断符号的系统和方法。
背景技术
虚拟开会/会议允许在多个地点处的两个或更多个人通过在线会议中的视频、音频和文本传输进行交流,这在面对面会议不可用或麻烦的情况下特别有用。为了避免在虚拟会议中打扰他人的演示,与会者/参与者可以举手表示他/她想要发言。有时,多个参与者可能会在大约同一时间举手请求发言,但在某一时间只有一名参与者可以发言。当前的虚拟会议系统可以对进行请求的会议参与者进行分类和排序,并突出显示该类别中的每个参与者以向参与者显示。然而,在当前虚拟会议正在进行时显示每个进行请求的参与者往往会造成感官干扰。当虚拟会议中发生诸如共享、聊天、讲话等用户交互而参与者等待讲话时,该参与者的“举手”指示很容易隐藏在交互中,从而被忽略。为了及时识别并通知下一位发言者以接管会议发言权并讲话,会议组织者可能必须跟踪“举手”指示,因而损害用户体验。另一个技术问题是,当进行请求的参与者使用具有小屏幕的电子设备(例如智能手机)加入虚拟会议时,多个“举手”指示的显示可能无法适应小屏幕,进行请求的参与者的屏幕可能错过他/她的发言机会,除非他/她向下滚动视图以查看所有“举手”指示。
因此,需要一种用于对请求在虚拟会议中发言的会议参与者进行排队并持续突出显示队列的接下来的位置(一个或多个)中的一个或多个会议参与者的系统和方法。
发明内容
在一个方面,一种响应于接收到中断信号而自动适配提供虚拟会议的应用的会议界面的举手队列管理系统,包括:处理器;以及存储器,所述存储器耦合到所述处理器,被配置为存储可执行指令。指令当由所述处理器执行时,使所述处理器:从提供所述虚拟会议的应用的会议界面接收多个中断信号,其中所述会议界面是与为所述虚拟会议的相应一组参与者在相应一组客户端设备上提供所述虚拟会议的应用相关联的一组会议界面之中的;基于与所述虚拟会议相关的准则:确定显现所述中断信号的顺序;以及从所述中断信号中识别与参与者的第一子集相关联的中断信号的第一子集,其中所述中断信号的第一子集包括接收到的中断信号中的一个或多个但少于接收到的中断信号的总数;响应于识别所述中断信号的第一子集,通过通信网络向该组会议界面中的每个会议界面发送第一中断符号举起信号,所述第一中断符号举起信号被配置为开启与参与者的第一子集相关联的视觉中断符号的第一子集以在每个会议界面上显示,其中所显示的视觉中断符号的第一子集包括一个或多个视觉中断符号但少于接收到的中断信号的总数。
当由所述处理器执行时,指令还使所述处理器:响应于检测到中断符号放下信号来在每个会议界面上关闭与所述参与者的第一子集中的一个相关联的视觉中断符号的第一子集中的一个:更新每个会议界面以关闭与所述参与者的第一子集中的所述一个相关联的所述视觉中断符号的第一子集中的所述一个;在关闭所述视觉中断符号的第一子集中的所述一个之后,根据确定的顺序从多个中断信号中自动识别除了所述中断信号的第一子集之外的下一个中断信号以进行显现;以及通过所述通信网络向该组会议界面中的每个会议界面发送与所述下一个中断信号相对应的下一个中断符号举起信号,以开启与下一个参与者相关联的下一个视觉中断符号以在每个会议界面上显示。
在另一方面,一种响应于接收到中断信号而自动适配提供虚拟会议的应用的会议界面的方法,包括:从提供所述虚拟会议的应用的会议界面接收多个中断信号,其中所述会议界面是与为所述虚拟会议的相应一组参与者在相应一组客户端设备上提供所述虚拟会议的应用相关联的一组会议界面之中的;基于与所述虚拟会议相关的准则:确定显现所述中断信号的顺序;以及从所述中断信号中识别与参与者的第一子集相关联的中断信号的第一子集,其中所述中断信号的第一子集包括接收到的中断信号中的一个或多个但少于接收到的中断信号的总数;响应于识别所述中断信号的第一子集,通过通信网络向该组会议界面中的每个会议界面发送第一中断符号举起信号,所述第一中断符号举起信号被配置为开启与参与者的第一子集相关联的视觉中断符号的第一子集以在每个会议界面上进行显示,其中所显示的视觉中断符号的第一子集包括一个或多个视觉中断符号但少于接收到的中断信号的总数。
该方法还包括:响应于检测到中断符号放下信号来在每个会议界面上关闭与所述参与者的第一子集中的一个相关联的视觉中断符号的第一子集中的一个:更新每个会议界面以关闭与所述参与者的第一子集中的所述一个相关联的所述视觉中断符号的第一子集中的所述一个;在关闭所述视觉中断符号的第一子集中的所述一个之后,根据确定的顺序从多个中断信号中自动识别除了所述中断信号的第一子集之外的下一个中断信号以进行显现;以及通过所述通信网络向该组会议界面中的每个会议界面发送与所述下一个中断信号相对应的下一个中断符号举起信号,以开启与下一个参与者相关联的下一个视觉中断符号以在每个会议界面上显示。
提供本发明内容是为了以简化的形式介绍概念的选择,这些概念将在下面的具体实施方式中进一步描述。本发明内容并不旨在识别所要求保护的主题的关键特征或基本特征,也不旨在用于限制所要求保护的主题的范围。此外,所要求保护的主题不限于解决本公开的任何部分中指出的任何或所有缺点的实现方式。
附图说明
附图描绘了根据本教导的一种或多种实现方式,仅作为示例而非限制。在附图中,相同的附图标记表示相同或相似的元件。此外,应当理解,附图不一定按比例绘制。
图1是示例举手队列管理系统的框图。
图2是举手排队组件的示例组件的框图。
图3是从请求在虚拟会议中发言的多个会议参与者中识别并显示下一个发言者的总体过程的框图。
图4是用于响应于接收到中断信号而自动适配提供虚拟会议的应用的会议界面的示例方法的流程图。
图5A是呈现“举手”选项的示例图形用户接口。
图5B图示了显示下一个发言者的示例图形用户接口。
图5C图示了示例图形用户接口,其示出了图5B中的下一个发言者的持续显示。
图5D图示了示例图形用户接口,其示出了不同的永久图像。
图5E图示了同时示出两个持久图像的示例图形用户接口。
图5F图示了示例图形用户接口,其示出了呈现给会议组织者的配置界面。
图5G是由放下举起的手产生的示例图形用户接口。
图6是可以在其上实现本公开的各方面的示例计算机系统的功能框图。
具体实施方式
在下面的详细描述中,通过示例的方式阐述了许多具体细节,以便提供对相关教导的透彻理解。然而,应当明显的是,可以在没有这些细节的情况下实践本教导。在其他情况下,众所周知的方法、程序、组件和/或电路系统已在相对较高的层次上进行了描述,但没有详细说明,以避免不必要地混淆本教导的各个方面。
当多个会议参与者请求在虚拟会议中发言并且一次只能有一个参与者发言时,现有的虚拟会议系统将这些进行请求的参与者进行分类,并为类别中的每个参与者开启视觉中断符号,使得借助视觉中断符号显示的参与者可以按顺序发言。视觉中断符号表示每个参与者针对虚拟会议做出贡献的请求。在一个具体示例中,视觉中断符号对应于Microsoft或/>应用中的举手符号。这里的技术问题是每个进行请求的参与者的视觉中断符号的显示可能没有被其他交互聚焦,从而锁定参与者花费额外的时间和资源来跟踪下一个讲话的参与者。例如,当第一进行请求的参与者在会议中等待轮到他/她发言时,其他参与者可能正在口头交谈、利用文本消息进行聊天、传输文件、共享白板,即积极地活动。通常,这些活跃的参与者和活跃的交互会出现在与每个会议参与者关联的会议界面的主视图中。这可以容易地占用第一进行请求的参与者的视觉中断符号的相对不活动的显示。第一参与者需要找到看到视觉中断符号的隐藏显示并在适当的时间发言的方法。即使视觉中断符号的显示不会因其他交互而变得注意力不集中/分心(例如,在学生仅提问的虚拟课堂中),仍然存在另一个技术问题。用于加入虚拟会议的电子设备具有有限的显示空间,这可能不足以向每个进行请求的参与者显示每个视觉中断符号。因此,很可能顺位较低或优先级较低的参与者可能不知道他/她应该在什么时间发言,除非他/她导航到会议界面的另一个视图或菜单以获取这样的信息。
为解决上述技术问题,本申请所描述的技术方案仅针对队列中下一个发言的参与者持续显示视觉中断符号,并有意抑制针对其他进行请求的参与者显示其他视觉中断符号,直到轮到他们在会议上发言为止。在一种实现方式中,该技术方案包括服务器(一个或多个)和客户端设备。服务器(一个或多个)可以经由与多个客户端设备相关联的多个会议界面从多个参与者接收多个中断信号以请求允许在虚拟会议中发言。在接收到多个中断信号后,服务器(一个或多个)可以基于与虚拟会议相关联的准则来识别从第一参与者接收到的第一中断信号,并且向每个客户端设备发送第一中断符号举起信号以开启来自第一参与者的第一视觉中断符号,用于在每个会议界面上持续显示。第一视觉中断符号可以是举手符号,其指示第一参与者经由第一会议界面在会议中举起虚拟手。
通过持续显示第一视觉中断符号,该技术方案在会议参与者的会议界面的位置处保持第一视觉中断符号连同第一参与者的视觉表示的显示,同时在会议界面的其他位置处改变其他参与者的视觉表示的显示。换句话说,无论随着主动交互的其他参与者的频繁/连续的显示如何变化,队列中的下一个参与者,即下一个发言者,都将停留在会议界面的前端视图中,直到该参与者不再是下一个发言者为止,即他/她已经开始讲话或已经完成讲话。通过仅显示第一视觉中断符号,该技术解决方案抑制来自其他进行请求的参与者的其他视觉中断符号的显示。因此,只要看一眼会议界面,每位参会者就知道下一位发言者是谁。因此,本文描述的技术方案的技术益处包括节省计算资源,例如处理时间、带宽等,否则这些计算资源将花费在搜索和寻找队列中的下一个发言者上。尤其是当参会者使用小屏设备加入会议时,无需导航到层层视图/菜单,这极大提升了用户体验。
该技术方案基于与虚拟会议相关联的准则对接收到的多个中断信号进行排队。该准则包括与中断信号相关联的时间戳、与虚拟会议参与者相关联的用户角色、参与者与虚拟会议的相关性、组织者偏好以及与虚拟会议相关联的其他会议策略中的至少一项。例如,技术解决方案可以识别重要的会议参与者,并在他/她发出讲话信号时在会议界面中包括该重要参与者的持续视觉表示,而不是基于到达时间对该参与者进行排队。因此,来自重要参与者的重要消息总是可以在有限的虚拟会议持续时间内传递。又例如,如果参与者频繁举手并中断会议,则该技术方案可以将该参与者移动到队列末尾,使得将有限的带宽和资源平衡给其他参与者。因此,基于与虚拟会议和会议参与者相关的不同因素对进行请求的参与者进行排序提高了虚拟会议的效率和有效性,从而降低了虚拟会议中使用的计算资源的成本。
图1是示例举手队列管理系统100的框图。如图所示,系统100包括虚拟会议服务器101和一个或多个客户端设备103a-103n,它们耦合用于经由网络109进行电子通信。应当理解,图1所示的系统100是以示例的方式提供的,并且系统100和/或本公开所设想的另外的系统可以包括额外的和/或更少的组件,可以组合组件和/或将一个或多个组件划分为额外的组件,等等。例如,系统100可以包括任何数量的虚拟会议服务器101、客户端设备103a-103n或网络109。
网络109可以是传统类型、有线和/或无线,并且可以具有多种不同的配置,包括星形配置、令牌环配置或其他配置。例如,网络109可以包括一个或多个局域网(LAN)、广域网(WAN)(例如,互联网)、公共网络、专用网络、虚拟网络、网状网络、对等网络、和/或多个设备可以通过其进行通信的其他互连数据路径。网络109还可以耦合到电信网络或包括电信网络的部分,用于以各种不同的通信协议发送数据。在一种实现方式中,网络109包括用于发送和接收数据的蓝牙通信网络或蜂窝通信网络,包括经由短消息服务(SMS)、多媒体消息服务(MMS)、超文本传输协议(HTTP)、直接数据连接、WAP、电子邮件等。
客户端设备103a-103n(或统称为客户端设备103)可以包括虚拟或物理计算机处理器、存储器、通信接口/设备等,它们连同客户端设备的其他组件103一起经由信号线113a-113n耦合到网络109以与系统100的其他实体通信。在一种实现方式中,用户125a-125n分别经由信号线115a-115n访问的客户端设备103a-103n可以向其他客户端设备103和/或虚拟会议服务器101发送数据和从其他客户端设备103和/或虚拟会议服务器101接收数据,并且可以进一步分析和处理数据。例如,客户端设备103a-103n可以与虚拟会议服务器101通信以生成和更新会议界面以显示在客户端设备103a-103n中的每一个上。客户端设备103的非限制性示例可以包括膝上型计算机、台式计算机、平板计算机、移动电话、个人数字助理(PDA)、移动电子邮件设备或能够处理信息和访问网络109的任何其他电子设备。
虚拟会议服务器101是与一个或多个客户端设备103通信以托管在线虚拟会议并处理与一个或多个客户端设备103交换的数据的计算设备。在一种实现方式中,虚拟会议服务器101经由客户端设备103a接收来自用户125a(例如,会议组织者)的建立在线会议的虚拟空间的请求。虚拟会议服务器101支持聊天服务、呼叫服务等服务,以便多个参与者可以在虚拟空间中互相听、看、聊天并共享数据。虚拟会议服务器101还可以跟踪和分析在虚拟会议中使用的通信消息/信号,以指示一个或多个客户端设备103使用以下信息来自动更新会议界面:开启/关闭针对下一个发言者的视觉中断符号,并且至针对随后的下一个发言者而切换已显示另一个视觉中断符号。在一种实现方式中,虚拟会议服务器101可以包括服务器侧应用以与驻留在客户端设备103上的客户端应用进行通信,并经由会议界面向参与者提供虚拟会议。该应用可以是Microsoft 应用、/>应用等。虚拟会议服务器101通过信号线111通信地耦合到网络109。
如图所示,虚拟会议服务器101包括举手排队组件105。在一种实现方式中,举手排队组件105从想要在虚拟会议中讲话的多个参与者接收多个中断信号。举手排队组件105可以基于对多个进行请求的参与者进行排序的队列来逐一显示进行请求的参与者,而不是在每个会议界面上同时显示多个进行请求的参与者。例如,举手排队组件105可以识别来自第一参与者(例如,队列中的下一个发言者)的第一中断信号,并在每个会议界面上仅开启来自第一参与者的第一视觉中断符号(例如,举手符号)。该第一视觉中断符号在每个会议界面的显示中将是持久的,直到举手排队组件105检测到中断符号放下信号以关闭第一视觉中断符号为止,例如,在第一参与者在会议中开始讲话或完成讲话之后。响应于检测到中断符号放下信号,举手排队组件105可以从多个中断信号的队列中检索与下一个参与者相关联的下一个中断信号,并且开启来自下一个参与者的视觉中断符号以用于持久地显示在每个会议界面上。下面将结合图2对举手排队组件105进行更详细的描述。
尽管图1中仅描绘了一个举手排队组件105,但是举手排队组件105的一个或多个实例也可以驻留在一个或多个客户端设备103上。例如,举手排队组件105的实例可以是在虚拟会议服务器101上提供虚拟会议的服务器侧应用的一部分,而举手排队组件105的其他实例可以包括在安装在客户端设备103a-103n上的相应客户端侧应用中。每个实例可以被配置为根据实例驻留的位置来执行某些功能。在一种实现方式中,虚拟会议服务器101可以是比客户端设备103a拥有更大的计算能力和计算资源的云服务器,因此可以执行比客户端设备103a更复杂的计算。在本公开中,举手排队组件105主要是将从不同会议参与者收集到的中断信号按优先次序排列在队列中,并根据该队列执行后续操作,一般由虚拟服务器101来实现。客户端侧的举手排队组件105可以执行一些操作,例如检测、接收和发送支持在服务器侧执行的主要功能的信号,为了简单和清楚起见,图1不包括在客户端侧的举手排队组件105的实例。下面的描述将基于图1所示的系统结构。
在一种实现方式中,虚拟会议服务器101还包括数据存储库107。数据存储库107存储与不同类型的信号有关的数据,例如中断信号、中断符号举起信号、中断符号放下信号和声学信号。数据可以包括信号的时间戳(例如,何时举起手)、信号源(例如,从哪个会议界面发送信号)、信号的强度水平等。数据存储库107还存储与此处描述的操作相关的任何其他信息,例如下一个参与者等待讲话期间发生的交互、参与者请求发言的信息、参与者的用户角色等。
图2是举手排队组件105的示例组件的框图。举手排队组件105包括用于以下操作的硬件和/或软件逻辑:接收表示多个参与者对虚拟会议做贡献的请求的多个中断信号,从多个参与者中识别将在会议中接下来做贡献/发言的参与者的小子集,并在每个参与者的会议界面上仅显示所识别的参与者的视觉中断符号。通过不显示每个进行请求的参与者的每个视觉中断符号,举手排队组件105减少了在客户端设备103和虚拟会议服务器101之间交换的信号/数据量,从而改善用户导航体验并增加操作效率。
在一种实现方式中,举手排队组件105包括检测模块201、队列引擎203、动作引擎205和用户接口模块207。检测模块201接收来自虚拟会议的多个参与者的多个中断信号,并且作为响应,将接收到的中断信号连同相关联的元数据一起发送以通知队列引擎203来识别预定数量的中断信号。多个中断信号表示多个参与者请求在虚拟会议中发言。预定数量的中断信号与将在会议中接下来发言的预定数量的参与者相关联,因为多个参与者不能在会议中同时发言。下面将结合队列引擎203更详细地描述预定数量的中断信号的识别。
在一种实现方式中,多个参与者可以经由多个会议界面发送多个中断信号以请求在会议中发言而不中断会议。多个会议界面是在客户端设备103上针对每个会议参与者显示的、与虚拟会议相关联的一组会议界面之中。例如,一个参与者可以通过选择/轻敲/触摸包括在如图5A所示的会议界面中的“举手”选项来发信号示意他/她希望在会议中发言或做贡献。在一种实现方式中,每个中断信号与时间戳相关联。时间戳显示一位参与者请求发言许可的时间。在另一种实现方式中,每个中断信号还与其他元数据相关联,例如源、在特定时间段内从源接收到中断信号的次数等。检测模块201可以将与元数据相关联的接收到的中断信号发送至队列引擎203,用于识别预定数量的中断信号或中断信号的第一子集。
一旦接收到所识别的预定数量的中断信号或中断信号的第一子集,例如来自接下来将在会议中发言的第一参与者的第一中断信号,检测模块201可以生成第一中断符号举起信号并通过通信网络(例如,网络109)向每个客户端设备103发送第一中断符号举起信号,以开启来自第一参与者的第一视觉中断符号以在每个会议界面上持久地显示。应当注意,在下面的描述中可以更频繁地使用第一信号、第一符号或第一参与者,这些术语也可以表示信号、符号或参与者的第一子集。第一参与者的第一视觉中断符号将保持“开启”状态,即对每个参与者可见,直到第一参与者不再是下一个发言者为止。视觉中断符号可以是图标、旗标、按钮或其他类型的图形符号,其标识唯一的“举手”状态,即,第一参与者正在请求发言或做贡献的许可。例如,视觉中断符号是如图5B所示的举手符号。
在发送第一中断符号举起信号后,检测模块201检测是否有来自第一参与者的中断符号放下信号。中断符号放下信号指示第一参与者正在讲话或已经完成讲话,因此不再是下一个发言者。在一种实现方式中,检测模块201可以响应于从第一参与者或会议组织者中的至少一个接收到用户操作来检测用于关闭第一视觉中断符号的中断符号放下信号。例如,在选择“举手”选项以触发第一视觉中断符号出现在会议界面中后,第一参与者可以再次选择该选项以使该符号消失。在另一示例中,会议组织者可以通过选择不同的界面元素来控制关闭第一视觉中断符号。
然而,用户操作是不可预测的。在第一参与者和会议组织者两者都未能及时关闭或放下第一视觉中断符号的情况下,在一种实现方式中,检测模块201可以通知队列引擎203识别下一个发言者以进行持久显示。同时,检测模块201也可以与动作引擎205通信,以关闭第一参与者的符号。在另一种实现方式中,在经过阈值时间量而没有接收到用户操作后,检测模块201可以使能向第一参与者生成提示。该提示提醒第一参与者在第二阈值时间量内放下第一视觉中断符号/手。若仍未及时接收到用户操作,则检测模块201再次通知动作引擎205关闭第一参与者的手。
在另一实现方式中,检测模块201可以响应于检测到来自第一参与者的声学信号而自动生成中断符号放下信号。声学信号包括第一参与者的语音,这指示他/她已经开始讲话阈值时间量(例如,五秒)或者已经在虚拟会议中完成讲话。例如,检测模块201可以与识别引擎(未示出)通信,以基于语音的强度水平、第一参与者使用以访问虚拟会议的特定客户端设备(例如,客户端设备103a)等来识别第一参与者的语音。
如果检测模块201检测到来自第一参与者的中断符号放下信号,则将触发在每个会议界面上关闭来自第一参与者的第一视觉中断符号。更重要的是,响应于检测到该中断符号放下信号,举手排队组件105的模块/引擎可以彼此协作来开始新的周期,以识别在该第一参与者之后应该讲话的下一个参与者,并在与会议参与者相关联的每个会议界面上显示与该下一个参与者相对应的新的/下一个视觉中断符号。换句话说,下一个参与者将取代第一参与者来持久地显示。
队列引擎203从检测模块201接收多个中断信号和相关联的元数据,并且识别来自接下来将在虚拟会议中发言的参与者的预定数量的中断信号。预定数量是小于多个信号/参与者的数量的整数。通常,预定数量是1。在一种实现方式中,参与者(例如,会议组织者)可以经由会议界面配置预定数量。该数量通常保持较小(例如,一个或两个),使得与客户端设备103相关联的会议界面的有限显示空间不会被突出显示的参与者挤满,并因此失去对下一个发言者的有意义的突出显示。在下文的描述中,除非另有说明,否则预定数量将被认为是一。
在一种实现方式中,队列引擎203可以配置和管理从检测模块201接收到的多个中断信号的队列。队列引擎203可以根据准则对队列中的多个中断信号进行优先级排序,并基于队列识别来自下一个发言者的中断信号,即的“下一个发言者信号”。例如,队列引擎203可以将队列的开头或第一位置处的中断信号识别为下一个发言者信号。该准则可以包括以下中的至少一项:与多个中断信号相关联的时间戳、与虚拟会议的参与者相关联的用户角色、参与者与虚拟会议的相关性、组织者偏好或它们的任何组合。
在一种实现方式中,队列引擎203可以基于与多个中断信号相关联的时间戳(即,时间戳准则)来管理队列。时间戳指示接收到相应信号的时间。在这种情况下,队列引擎203将队列实现为先进先出(FIFO)队列,其中具有最近时间戳的中断信号,即最新信号,被放置在队列的末尾或最后位置。队列引擎203也可以将最早进入队列的中断信号识别为下一个发言者信号。
在一种实现方式中,队列引擎203还可以基于与虚拟会议的参与者相关联的用户角色(即,用户角色准则)来管理队列。用户角色可以包括工作角色、会议角色等。工作角色是会议参与者在公司内部所担任的职能,例如首席行政人员(CEO)、部门经理、工程师等。一种实现方式是,队列引擎203可以查询公司目录以获得每个会议参与者的工作角色并将与工作角色相关的策略准则应用于队列的排序。例如,如果CEO在虚拟会议中举起他/她的手,则队列引擎203可以将相应的中断信号放置在队列的开头,即使另一个会议参与者已经在CEO之前举手。这种队列安排可以保证来自CEO的中断信号是下一个发言者信号并且CEO是下一个发言者,从而保证来自具有重要工作角色的参与者的重要消息被传递。
另一方面,参与者的会议角色可以包括组织者、演示者、听众等。队列引擎203还使用会议角色对队列进行排序。在一种实现方式中,队列引擎203可以关联/创建到会议组织者的中断信号并将队列的位置留给该组织者中断信号,使得会议组织者可以在需要时接管发言权(take over the floor)以在会议中发言。例如,当参与者开始在会议中讲话并且中断信号队列为空(即,没有其他参与者在等待讲话)时,队列引擎203可以将组织者中断信号移向队列的顶部,使得会议组织者可以在当前参与者结束讲话后主持会议。在教授作为演示者的课堂会议的另一个示例中,队列引擎203可以以教授想要在课堂上发言时他/她总是下一个发言者的方式来安排队列。
在一种实现方式中,队列引擎203还可以基于参与者与虚拟会议的相关性(即,相关性准则)来管理队列。队列引擎203可以基于参与者的用户角色和/或会议的特性来确定相关性。会议特性可以包括类型、主题、内容、会议的预定时间、会议的预定会议室等。例如,队列引擎203可以确定与监督每个部门会议的行政人员相比而言部门经理与他/她部门的部门会议更相关。因此,当部门经理和行政人员都打算在会议中发言时,队列引擎203可以将更接近队列开头的位置分配给部门经理的中断信号而不是行政人员的中断信号。在另一示例中,对于专利公开会议,队列引擎203可以确定专利律师的意见是关键的并且因此向该律师分配比其他会议参与者更高的优先级。
队列引擎203还被配置为调整相关性确定并相应地调整队列中信号的顺序。例如,基于会议的安排时间或议程,队列引擎203可以确定虚拟会议将在第一时间段期间讨论第一部门并且在第二时间段期间讨论第二部门。响应于在第一和第二时间段接收到来自第一和第二部门经理的发言请求,队列引擎203可以在第一时间段期间将第一部门经理优先于第二部门经理,同时在第二时间段期间将第二部门经理优先于第一部门经理。在另一示例中,如果虚拟班级从第一教室移动到第二教室(例如,模拟法庭),则队列引擎203可以修改中断信号的队列,因为教授是第一教室中的会议演讲者,而学生是第二教室的演讲者。
在一种实现方式中,队列引擎203还可以基于组织者偏好(即,组织者准则)来管理队列。在这种场景中,会议组织者识别的下一个发言者将移至队列的开头。会议组织者可以经由如图5F所示的配置界面来设置他/她的偏好规则或从进行请求的参与者列表中选择下一个发言者。例如,如果参与者在特定时间段期间举起他/她的手超过阈值次数(例如,在10分钟内超过两次),则队列引擎203可以根据组织者的偏好将与此参与者相关联的中断信号的位置移动到队列的末尾。这可以防止少数观众反复举手而分散演讲者的注意力。在另一示例中,队列引擎203可以允许会议组织者选择在会议中几乎没有讲话但最终举起他/她的手的参与者作为下一个发言者。
应当注意,队列引擎203可以进一步基于与虚拟会议相关联的其他会议策略来管理队列。例如,队列引擎203可以与动作引擎205和用户接口模块207协作以显示至少两个持久图像:一个用于下一个发言者,另一个用于CEO。因此,无论何时CEO要讲话,他/她都可以在当前发言者讲话完成后立即在会议中讲话。然而,根据不同的公司策略,队列引擎203可以确定如果他们在临时会议中讨论例如去哪里野餐的话,则CEO的举手不会取代另一个参与者的举手。
如上所述,由于应用了用户角色准则、相关性准则或组织者准则等准则,队列不一定是基于中断信号到达时间所确定的FIFO队列。在这种情况下,部分参与者会出现排队延迟。例如,在CEO举手之前举起他/她的手并触发中断信号的参与者将被延迟,因为队列引擎203根据用户角色准则而将CEO移动到队列的第一位置。在一种实现方式中,队列引擎203可以设置延迟上限策略以包括可以延迟的最大时间量或最大次数。因此,在通过推翻时间戳准则并应用不同的准则将中断信号识别为下一个中断信号之后,队列引擎203将在阈值时间量流逝或延迟阈值数用完之前将其他中断信号(即,覆盖信号)确定为下一个中断信号。换句话说,延迟的参与者将能够在最大时间或最大延迟次数内讲话。这种包容性上限策略允许考虑和执行每个参与者的活动,从而改善虚拟会议中的用户体验。
队列引擎203以基于准则确定的顺序排列从检测模块201接收的多个中断信号的队列,其对应于安排在虚拟会议中发言的参与者的有序集合。在一种实现方式中,队列引擎203可以从队列开头的预定数量的位置中识别预定数量的中断信号,并将识别的每个中断信号对应于特定参与者。中断信号在队列中的位置反映了相应参与者在会议中讲话的顺序。例如,如果仅识别出一个中断信号,则对应的参与者将是下一个发言者。如果识别到第一位置和第二位置的两个中断信号,则第一位置信号对应的参与者将发言,然后第二位置信号对应的参与者将发言。预定数量通常是一个或两个。
在一种实现方式中,队列引擎203可以将所识别的参与者(例如,下一个发言者或下一个发言者之后的发言者)的信息传输到动作引擎205以供进一步处理。队列引擎203然后可以从队列中移除所识别的预定数量的中断信号并且对队列重新排序。队列引擎203还可以将队列的信息存储在数据存储库107中。
响应于从队列引擎203接收到所识别的参与者的信息,动作引擎205可以向每个会议界面发送中断符号举起信号以开启来自所识别的参与者(例如,第一参与者)的视觉中断符号,用于持久地显示在与会议参与者关联的每个会议界面上。在一种实现方式中,动作引擎205可以指示界面模块207在每个会议界面上显示第一参与者的持久图像。持久图像包括在第一参与者的视觉表示(例如,图片、化身)上摆出的视觉中断符号(例如,“举手”符号)。相比之下,其他未识别的参与者仅以相应的视觉表示显示在每个会议界面上。在识别出多于一个参与者(例如,第一参与者(下一个发言者)和第二参与者(第一参与者之后的下一个发言者))的情况下,动作引擎205还可以包括反映每个持久图像中的第一参与者和第二参与者的发言顺序的数字。在其他情况下,动作引擎205还可以改变持久图像的颜色、形状或框架,以将第一参与者与其他进行请求的参与者(即,等待的发言者和每个会议界面上的非请求会议参与者)区分开。普通技术人员可能认识到有其他方式来显示与其他参与者不同的接下来的发言者(一个或多个)。
动作引擎205操作来以持久的方式显示识别的接下来的发言者(一个或多个),即,第一参与者。在一种实现方式中,动作引擎205在会议界面的位置处保持视觉中断符号连同第一参与者的视觉表示的显示,同时在会议界面的其他位置处改变其他参与者的其他视觉表示的显示。例如,会议界面可以包括指定数量(例如,九个)的网格或图块。每个网格都包含参与者的视觉表示。当会议中的参与者超过指定数量时,网格中将仅显示部分参与者的视觉表示。第一参与者可以包括也可以不包括在网格中。然而,当第一参与者被识别为下一个发言者时,动作引擎205将在网格之一中包括第一参与者的持久图像。该持久图像,特别是与第一参与者的视觉表示相关联的视觉中断符号或“举手”符号,将停留在网格的该位置,直到第一参与者不再是下一个发言者。当第一参与者在会议中开始发言或完成发言后,第一参与者成为当前或过去的发言者。一旦第一参与者的视觉中断信号消失,如果中断信号队列不为空,则第一参与者之后的下一个参与者的视觉中断信号将出现。在动作引擎205保持第一参与者的持久图像在该位置不变的时间段内,其他网格的显示可以自由改变。例如,正在主动交换聊天消息的两个参与者可以出现在网格中以取代另外两个不活动的参与者。因此,无论其他参与者之间的交互以及随之发生的其他参与者的其他视觉表示的显示变化如何,都保持第一参与者的视觉表示和视觉中断符号在会议界面的位置无法触摸。该位置可以是网格视图的任意位置,不一定是中心位置。
当显示第一参与者的持久图像时,动作引擎205还抑制来自虚拟会议的其他参与者的其他视觉中断符号的显示。动作引擎205基于中断信号队列提取预定数量的接下来的发言者(一个或多个),并在会议界面上仅突出显示提取的发言者。动作引擎205不区分显示中的其他进行请求的参与者,尽管这些参与者正在等待按照中断信号队列中的对应位置所指示的顺序发言。因此,动作引擎205不需要通过将第一参与者放置在会议界面的中心网格中来给予与队列的开始位置/索引相关联的参与者(即,下一个发言者或第一参与者)关注中心。当只有一两个参与者被突出显示并持久地突出显示时,接下来的发言者(一个或多个)就会脱颖而出。
在一种实现方式中,动作引擎205可以在第一参与者对会议作出贡献并且不再是下一个发言者之后关闭/放下第一参与者的视觉中断符号。在一种实现方式中,动作引擎205自动生成中断符号放下信号,并将中断符号放下信号发送至每个客户端设备103,使得客户端设备103可以自动更新每个会议界面的显示并关闭视觉中断符号。例如,作为关闭视觉中断符号的结果,动作引擎205可以自动地从与会议参与者相关联的每个会议界面的网格的位置移除第一参与者的“举手”旗标或图标。在另一种实现方式中,动作引擎205从检测模块201接收中断符号放下信号,并通知客户端设备103放下与第一参与者相关联的视觉中断符号。
在一种实现方式中,动作引擎205可以在以下两种场景中自动关闭视觉中断符号或放下第一参与者的手:(1)在检测到第一参与者开始讲话之后,或(2)在检测到第一参与者停止讲话之后。在第一种场景中,动作引擎205可以在接收到包括第一参与者的语音的声学信号的特定时间量(例如,五秒)之后生成中断符号放下信号以放下“举起的手”。因此,第一参加者在讲话时可以把手放下。在第二种场景中,动作引擎205可以确定接收到的声学信号不再包括来自第一参与者的语音并且关闭视觉中断信号。换句话说,动作引擎205在第一参与者完成会议中的讲话之后放下他/她的手。在另一种实现方式中,动作引擎205可以在第一参与者或会议组织者动作以手动放下手时关闭第一参与者的视觉中断符号。一旦第一参与者的视觉中断符号被关闭,动作引擎205与举手排队组件105的其他模块和/或引擎协作以识别第一参与者之后的下一个发言者来进行持久显示。下面将参考图3和图4来描述用于识别和显示下一个发言者的总体过程。
在一种实现方式中,如果第一参与者或会议组织者未能及时放下第一参与者的手,则动作引擎205可以与用户接口模块207配合以生成提示来提醒第一参与者放下手,以便可以开始另一个识别下一个发言者的循环。动作引擎205还可以与用户接口模块207通信以在第一会议界面上向第一参与者提供配置是手动还是自动放下他/她的手的选项。动作引擎205还可以指示用户接口模块207生成其他通知,例如,允许会议组织者选择预定数量的值来控制在会议界面上可以同时显示多少“下一个发言者”。
用户接口模块207从动作引擎205接收指令以将图形数据发送到客户端设备103,使客户端设备103向用户或参与者呈现用户接口。示例用户接口如图5A-5G所示。在一种实现方式中,用户接口模块207生成用于提供用户接口的图形数据,该用户接口向参与者呈现可选择的“举手”选项或者一旦参与者选择“举手”选项就显示参与者的视觉中断符号。在另一种实现方式中,用户接口模块207可以生成通知或提示以显示在与一个或多个用户相关联的会议界面上。在又一种实现方式中,用户接口模块207可以生成允许参与者提供用于配置特定功能的输入的会议界面。用户接口模块207可以生成用于向会议参与者提供其他用户接口的图形数据。
图3是从请求在虚拟会议中发言的多个会议参与者中识别和显示下一个发言者的示例过程的框图。包括参与者X、Y和Z的一组参与者使用客户端设备103a-103n来加入虚拟会议。图3中间也分别描绘了三个参与者X、Y和Z,以解释整个排队和显示过程。几乎同时,每个参与者X、Y和Z通过分别显示在客户端设备103a、103b和103c上的会议界面分别选择“举手”选项。X的选择触发中断信号x在301a被发送到虚拟会议服务器101。Y的选择触发中断信号y在301b被发送到虚拟会议服务器101。Z的选择触发中断信号z在301c被发送到虚拟会议服务器101。这些信号指示X、Y和Z正在请求在会议中发言的许可。
虚拟会议服务器101创建队列以包括三个中断信号x、y和z。虚拟会议服务器101可以使用分别从参与者X、Y和Z接收到的信号x、y和z的队列来识别X、Y和Z中的哪一个是下一个发言者。根据用于在队列中排列信号的不同准则,队列可以不同。例如,如果虚拟会议服务器101使用与三个信号相关联的时间戳作为准则,则信号将如在第一队列351中那样被顺序排序。然而,如果虚拟会议服务器101使用另一个准则(例如用户角色准则)来形成队列,信号将如在第二队列353中那样被排序。虽然X是请求发言的第一参与者,但是Y是在应用用户角色准则时优先于X的重要参与者。因此,在第二队列353中,来自参与者Y的信号y处于第一位置,而来自参与者X的信号x处于第二位置。换句话说,如果使用第一队列351,则下一个发言者将为X,而如果使用第二队列353,则下一个发言者将为Y。假设虚拟会议服务器101应用用户角色准则来对信号进行排队,结果将是在303识别来自下一个发言者Y的中断信号y。
响应于中断信号y的识别,在305处,虚拟会议服务器101与每个客户端设备103通信以更新与虚拟会议中的每个参与者相关联的会议界面并且在每个会议界面上开启与Y相关联的视觉中断符号。尽管三个参与者X、Y和Z已请求发言,但只有发言者Y被识别为下一个发言者,并用视觉中断符号向每个会议参与者突出显示。
一旦Y被显示为下一个发言者,虚拟会议服务器101可以从队列353中移除对应的信号y。结果,队列353改变为队列355。队列355仅包括信号x和z,其中x和z的位置表示Y之后的下一个发言者是X。同时,Y正在等待轮到他/她发言。如果Y在会议中开始讲话(例如,持续阈值时间量)或已完成讲话,Y可以手动放下他/她举起的手,或者会议组织者可以手动放下Y举起的手,或者虚拟会议服务器101可以自动放下Y举起的手。这导致在307处生成中断符号放下信号并将其发送到虚拟会议服务器101。
响应于接收到中断符号放下信号,在309处,虚拟会议服务器101与每个客户端设备103通信以更新与虚拟会议中的每个参与者相关联的会议界面并且在每个会议界面上关闭与Y相关联的视觉中断符号。应该注意的是,在Y被识别为下一个发言者直到Y不再是下一个发言者的整个时间内,Y的视觉中断符号持久地向每个会议参与者显示,无论有多少变化影响其他参与者的显示。
虚拟会议服务器101现在开始新的循环以来从其余的进行请求的参与者中寻找下一个发言者。在311处,基于队列355,虚拟会议服务器101识别来自下一个发言者X的中断信号x。然后,在313处,虚拟会议服务器101与客户端设备103通信以更新每个会议界面以在每个会议界面上开启与X相关的视觉中断符号。随着向每个会议参与者显示下一个发言者X,队列355变成队列357。队列357仅包括指示X之后的最后发言者或下一个发言者是Z的信号z。在315,虚拟会议服务器101接收来自X的中断符号放下信号以释放X的持久显示。这样,虚拟会议服务器101就可以与客户端103配合,开始另一个循环,让Z在会议中取得发言权。此循环中执行的步骤类似,因此在图3中被跳过。
图4是用于响应于由虚拟会议服务器101的举手排队组件105接收到中断信号而自动适配提供虚拟会议的应用的会议界面的示例方法400的流程图。在框401,举手排队组件105从提供虚拟会议的应用的多个会议界面接收多个中断信号。中断信号代表参与者对虚拟会议做出贡献的意图/请求。多个会议界面是在与在相应组客户端设备上为虚拟会议的相应组参与者提供虚拟会议的应用相关联的一组会议界面之中的。
在框403,基于与虚拟会议相关联的准则,举手排队组件105从多个中断信号中识别与参与者的第一子集相关联的中断信号的第一子集。例如,举手排队组件105可以基于该准则来确定用于显现中断信号的顺序,并且基于该顺序来识别中断信号的第一子集。中断信号的第一子集包括一个或多个接收到的中断信号或(例如,预定数量的中断信号)但少于接收到的中断信号的总数。预定数量是诸如一或二之类的小数量。当该数字为一时,识别一个下一个发言者,例如第一参与者。当该数字为二时,识别队列的第一位置和第二位置中的两个发言者。该准则可以包括与多个中断信号相关联的时间戳、与虚拟会议的参与者相关联的用户角色、参与者与虚拟会议的相关性、组织者偏好、与虚拟会议相关联的其他会议策略或它们的任何组合中的至少一个。
在框405,响应于识别中断信号的第一子集,举手排队组件105通过通信网络向该组会议界面中的每个会议界面发送第一中断符号举起信号。中断符号举起信号被配置为开启与参与者的第一子集相关联的视觉中断符号的第一子集以显示在每个会议界面上。显示的视觉中断符号的第一子集包括一个或多个视觉中断符号但少于接收到的中断信号的总数。视觉中断符号可以是图标、旗标、按钮或标识唯一“举手”状态的其他类型的图形符号,即,第一参与者正在请求发言许可。该显示可以是持久的,即,举手排队组件105可以保持在每个会议的位置处视觉中断符号的第一子集中的每一个连同参与者的第一子集中的相应参与者的视觉表示的显示,而在每个会议界面的一个或多个其他位置处改变一个或多个其他参与者的一个或多个视觉表示的显示。持久显示还意味着举手排队组件105可以抑制与虚拟会议的其他参与者相关联的其他视觉中断符号的显示。
响应于检测到中断符号放下信号以在每个会议界面上关闭与参与者的第一子集之一相关联的视觉中断符号的第一子集之一,在框407,举手排队组件105更新每个会议界面以关闭与参与者的第一子集中的一个相关联的视觉中断符号的第一子集中的一个。一旦这个第一视觉中断符号被关闭或放下,下一个发言者需要显现以在会议界面上展示。在框409,在关闭视觉中断符号的第一子集中的一个之后,举手排队组件105从多个中断信号中自动识别除了中断信号的第一子集之外的下一个中断信号以进行显现。在框411,举手排队组件105通过通信网络向该组会议界面中的每个会议界面发送对应于下一个中断信号的下一个中断符号举起信号,以开启与下一个参与者相关联的下一个视觉中断符号以在每个会议界面上显示。下一个参与者的识别是根据通过基于准则对中断信号进行排队所确定的顺序来确定的,如框403中所描述的。
图5A示出了呈现“举手”选项的示例图形用户接口500。用户接口500是与为特定会议参与者(即,501处的用户CD)显示的在线虚拟会议相关联的会议界面。会议界面500包括用于显示参与者的视觉表示的区域503。如图所示,区域503包括九个网格,并且用户CD的视觉表示504显示在网格505中。虚拟会议总共具有11个参与者,如505所示,其中由于空间有限,在区域503中仅显示了九个参与者。除了数字指示器506之外,动作条507还包括显示虚拟会议进度的时间指示器和其他选项,例如509中的“举手”选项。打算发言的多个会议与会者或参与者,只需点击“举手”选项509即可举起虚拟手。
图5B图示了显示下一个发言者的示例图形用户接口510。用户CD是选择图5A中所示的“举手”选项的多个参与者之一。基于有序队列,CD被识别为下一个发言者。用户接口510是用户DS 511的会议界面,其显示CD被高亮显示为持久图像。网格513中CD的持久图像包括视觉表示504和视觉中断符号515。视觉中断符号515显示CD举起虚拟手并且CD的持久图像显示CD是队列中的下一个发言者。在该第一时间点,如516所示,会议中仍有11个参与者。CD的持久图像周围的视觉表示517、518和519分别代表用户AB、GM和UV。
图5C图示了示例图形用户接口520,其示出图5B中的下一个发言者的持久显示。用户接口520是用户DS 511在图5B的第一时间点之后的第二时间点的会议界面。在第二时间点,CD仍未获得讲话许可,因此CD的显示在网格513中是持久的。视觉表示504和视觉中断符号515均未改变。然而,会议参与者从11个减少到8个,如523所示。因此,九个网格中仅显示八个视觉表示,这使得529中先前表示的用户UV变为空白。此外,网格525中表示的参与者从AB更改为RST,并且网格527中表示的参与者从GM更改为DS。对比图5B和图5C,只要CD还是下一个发言者,CD就会持久显示。
图5D图示了示例图形用户接口530,其示出了不同的持久图像。代替具有不同于其他网格的颜色,网格513中的持久图像具有不同的框架。本领域的普通技术人员会意识到存在许多其他方式来显示持久图像。
图5E图示了同时示出两个持久图像的示例图形用户接口540。响应于多个会议参与者举手请求发言,可以识别预定数量的接下来的发言者(一个或多个)。当数量为一时,仅识别一个用户CD,如图5B-5D所示。如图所示,当数量变为二时,还识别出另一个用户XY。CD在网格513中仍然有持久图像,但添加了数字1以表明他/她将是下一个发言者。新识别的XY在网格543中具有持久图像,其包括543中的数字2以表明他/她将在CD之后讲话。
图5F图示了示例图形用户接口550,其示出了在551中呈现给会议组织者JD的配置界面。如图所示,当JD选择包括在下一个发言者CD的持久图像中的视觉中断符号515时,可以针对JD填充菜单来执行一些配置。例如,JD可以在553中选择“突出显示数字(HighlightNumber)”选项,在555中设置整数值。该值是预先确定的数字,定义了在会议界面上可以同时识别和显示多少接下来的发言者。在图5B-5D中,该值为一。在图5E中,该值为二。会议组织者JD也可以在557中选择“组织者偏好配置(Organizer Preference Configuration)”来设置组织者偏好或组织者准则。例如,JD可以使用不同的规则配置偏好,如558所示,或使用559中的“选择突出显示的(Select Highlighted)”选项来选择下一个演讲者。当选择选项558和/或559时,将显示其他界面元素以帮助JD完成配置任务。
图5G图示了示出放下手通知的示例图形用户接口560。用户接口560是CD响应于他/她的举手请求在会议中讲话后在561处的参与者CD的会议界面。此时,由于CD不再是下一个发言者,因此应该移除持久图像513。为了能够识别和显示队列中的下一个发言者,需要放下515中的CD的视觉中断符号或手。然而,如果经过阈值时间量并且515中的手仍然开启,则将生成提醒563并将其呈现给CD。CD可以选择565中的“是(Yes)”或567中的“否(No)”来决定是否在10分钟内放下手。如果没有,视觉中断符号515将被自动清除。
图6是可以在其上实现本公开的各方面的示例计算机系统600的功能框图。应当理解,图6中所示的逻辑块表示功能,并且不一定与特定硬件一一对应。计算机系统600可以包括数据处理器604,其通过总线602耦合到指令存储器或主存储器606、只读存储器608和存储设备610。指令存储器606可以包括可检索地存储计算机可读指令的有形介质,计算机可读指令在由数据处理器604执行时使处理器执行本文例如参考1-4所描述的功能、过程和操作。
计算机系统600还可以包括显示器612、用户接口或其他输入设备614和光标控件616,它们作为单独的设备或组合,例如,作为触摸屏显示器。计算机系统600还可以包括通信接口618,被配置为通过总线620与本地网络622接口以访问本地主机服务器624,并通过ISP 626与因特网628通信,并访问远程服务器630。
一些实现方式包括计算机可读存储介质,其包括可执行指令,当可执行指令在至少一个处理器上执行时,使处理器执行任何上述方法。
虽然已经描述了各种实现方式,但是该描述旨在是示例性的而不是限制性的,并且应当理解,在实现方式的范围内的更多实现方式和实施方式是可能的。尽管许多可能的特征组合在附图中示出并在本详细描述中讨论,但是所公开的特征的许多其他组合也是可能的。除非特别限制,否则任何实现方式的任何特征都可以与任何其他实现方式中的任何其他特征或元素结合使用或替代任何其他特征或元素。因此,应当理解,本公开中所示和/或讨论的任何特征可以以任何合适的组合一起实施。因此,除了根据所附权利要求及其等同物之外,实现方式不受限制。此外,可以在所附权利要求的范围内进行各种修改和改变。
虽然上文已经描述了被认为是最佳模式和/或其他示例的内容,但是应当理解,可以在其中进行各种修改并且可以以各种形式和示例来实现本文公开的主题,并且这些教导可以应用于许多应用中,本文仅描述了其中的一些。所附权利要求旨在要求保护落入本教导的真实范围内的任何和所有应用、修改和变化。
除非另有说明,否则本说明书(包括随后的权利要求书中)中规定的所有测量结果、值、额定值、位置、大小、尺寸和其他规格均为近似值,并非精确值。它们旨在具有一个合理的范围,该范围与它们相关的功能和它们所属领域中的惯例相一致。
保护范围仅由现在所附的权利要求书限制。该范围旨在并且应当被解释为与根据本说明书和随后的起诉历史解释权利要求书中所使用的语言的普通含义一致的广泛范围并且涵盖所有结构和功能等同物。尽管如此,任何权利要求均无意涵盖不满足《专利法》第101、106或103条要求的主题,也不应以这种方式进行解释。特此否认对此类主题的任何无意包含。
除上文所述外,所陈述或说明的任何内容均不旨在或不应被解释为导致任何组件、步骤、特征、对象、利益、优势或等同物对公众的贡献,无论它是在权利要求中记载或未记载。
应当理解,本文使用的术语和表达具有与这些术语和表达相对于它们相应的各自调查和研究领域一致的普通含义,除非本文另有规定了具体含义。诸如第一和第二等的关系术语可仅用于将一个实体或动作与另一个区分开来,而不必要求或暗示此类实体或动作之间的任何实际此类关系或顺序。术语“包括”、“包含”或其任何其他变体旨在涵盖非排他性包含,这样包含一系列要素的过程、方法、物品或装置不仅包括这些要素,而且可以包括未明确列出的或此类过程、方法、物品或装置所固有的其他元素。在没有进一步限制的情况下,以“一(a)”或“一个(an)”开头的元素不排除在包含该元素的过程、方法、物品或装置中存在额外的相同元素。
提供本公开的摘要以允许读者快速确定本公开的技术的性质。提交时应理解其不会用于解释或限制权利要求的范围或含义。此外,在前面的具体实施方式中,可以看出,为了简化公开的目的,各种特征在各种示例中组合在一起。这种公开方法不应被解释为反映权利要求要求比每项权利要求中明确记载的特征更多的特征的意图。相反,如所附权利要求所反映的,发明主题在于少于单个公开示例的所有特征。因此,以下权利要求特此并入具体实施方式中,每项权利要求独立作为单独要求保护的主题。

Claims (15)

1.一种用于响应于接收到中断信号而适配提供虚拟会议的应用的会议界面的系统,所述系统包括:
处理器;以及
存储器,其被耦合到所述处理器,所述存储器被配置为存储可执行指令,当由所述处理器执行时,所述可执行指令使所述处理器:
从提供所述虚拟会议的所述应用的会议界面接收多个中断信号,其中,所述会议界面是与为所述虚拟会议的相应一组参与者在相应一组客户端设备上提供所述虚拟会议的所述应用相关联的一组会议界面之中的;
基于与所述虚拟会议相关联的准则:
确定显现所述中断信号的顺序;以及
从所述中断信号中识别与参与者的第一子集相关联的中断信号的第一子集,其中,所述中断信号的第一子集包括接收到的中断信号中的一个或多个但少于接收到的中断信号的总数;
响应于识别所述中断信号的第一子集,通过通信网络向所述一组会议界面中的每个会议界面发送第一中断符号举起信号,所述第一中断符号举起信号被配置为开启与所述参与者的第一子集相关联的视觉中断符号的第一子集以在每个会议界面上显示,其中,所显示的视觉中断符号的第一子集包括一个或多个视觉中断符号但少于接收到的中断信号的总数;以及
响应于检测到中断符号放下信号而在每个会议界面上关闭与所述参与者的第一子集中的一个参与者相关联的所述视觉中断符号的第一子集中的一个视觉中断符号:
更新每个会议界面以关闭与所述参与者的第一子集中的所述一个参与者相关联的所述视觉中断符号的第一子集中的所述一个视觉中断符号;
在关闭所述视觉中断符号的第一子集中的所述一个视觉中断符号之后,根据所确定的顺序从所述多个中断信号中自动识别除了所述中断信号的第一子集之外的下一个中断信号以进行显现;以及
通过所述通信网络向所述一组会议界面中的每个会议界面发送与所述下一个中断信号相对应的下一个中断符号举起信号,以开启与下一个参与者相关联的下一个视觉中断符号以在每个会议界面上显示。
2.根据权利要求1所述的系统,其中,为了开启所述视觉中断符号的第一子集以进行显示,所述可执行指令还包括当由所述处理器执行时使所述处理器进行以下操作的指令:在每个会议界面的位置处保持所述视觉中断符号的第一子集中的每个视觉中断符号的显示,以及所述参与者的第一子集中的相对应参与者的视觉表示的显示,同时在每个会议界面的一个或多个其他位置处改变一个或多个其他参与者的一个或多个视觉表示的显示。
3.根据权利要求1或2所述的系统,其中,为了开启所述视觉中断符号的第一子集以进行显示,所述可执行指令还包括当由所述处理器执行时使所述处理器进行以下操作的指令:抑制与所述虚拟会议的其他参与者相关联的其他视觉中断符号的显示。
4.根据权利要求1-3所述的系统,其中,所述准则包括以下中的至少一项:与所述多个中断信号相关联的时间戳、与所述虚拟会议的参与者相关联的用户角色、所述参与者与所述虚拟会议的相关性、以及组织者偏好。
5.根据权利要求4所述的系统,其中,所述可执行指令还包括当由所述处理器执行时使所述处理器进行以下操作的指令:
基于所述准则对所述多个中断信号进行排队;以及
其中,识别所述中断信号的子集或所述下一个中断信号是基于所述多个中断信号的队列的。
6.根据权利要求1-5所述的系统,其中:
所述中断信号的第一子集包括单个中断信号,
所述参与者的第一子集包括发送所述单个中断信号的单个参与者,并且
所显示的中断符号的第一子集包括与所述单个参与者相关联的单个中断符号。
7.根据权利要求4所述的系统,其中,为了自动识别所述下一个中断信号,所述可执行指令还包括当由所述处理器执行时使所述处理器进行以下操作的指令:
从所述多个中断信号中识别除了所述中断信号的第一子集之外的第二中断信号和第三中断信号,其中,所述第二中断信号比所述第三中断信号更早被接收,由与所述第二中断信号和所述第三中断信号相关联的时间戳来指示;以及
通过基于所述准则覆盖与所述第二中断信号和所述第三中断信号相关联的时间戳,将所述第三中断信号识别为所述下一个中断信号。
8.根据权利要求7所述的系统,其中,所述可执行指令还包括当由所述处理器执行时使所述处理器进行以下操作的指令:
在经过阈值时间量之前,将被覆盖的第二中断信号识别为所述下一个中断信号。
9.根据权利要求1所述的系统,其中,所述中断符号放下信号是响应于来自以下中的至少一个的用户操作而接收的:参与者的第一子集中的所述一个参与者或会议组织者。
10.根据权利要求9所述的系统,其中,所述可执行指令还包括当由所述处理器执行时使所述处理器进行以下操作的指令:经由第一会议界面生成提示,以通知所述参与者的第一子集中的所述一个参与者执行所述用户操作并激活所述中断符号放下信号。
11.根据权利要求1所述的系统,其中,所述中断符号放下信号是响应于检测到来自所述第一参与者中的所述一个参与者的声学信号而自动生成的。
12.一种用于响应于接收到中断信号而适配提供虚拟会议的应用的会议界面的方法,所述方法包括:
从提供所述虚拟会议的所述应用的会议界面接收多个中断信号,其中,所述会议界面是与为所述虚拟会议的相应一组参与者在相应一组客户端设备上提供所述虚拟会议的所述应用相关联的一组会议界面之中的;
基于与所述虚拟会议相关联的准则:
确定显现所述中断信号的顺序;以及
从所述中断信号中识别与参与者的第一子集相关联的中断信号的第一子集,其中,所述中断信号的第一子集包括接收到的中断信号中的一个或多个中断信号但少于接收到的中断信号的总数;
响应于识别所述中断信号的第一子集,通过通信网络向所述一组会议界面中的每个会议界面发送第一中断符号举起信号,所述第一中断符号举起信号被配置为开启与所述参与者的第一子集相关联的视觉中断符号的第一子集,以在每个会议界面上进行显示,其中,所显示的视觉中断符号的第一子集包括一个或多个视觉中断符号但少于接收到的中断信号的总数;以及
响应于检测到中断符号放下信号而在每个会议界面上关闭与所述参与者的第一子集中的一个参与者相关联的视觉中断符号的第一子集中的一个视觉中断符号:
更新每个会议界面以关闭与所述参与者的第一子集中的所述一个参与者相关联的所述视觉中断符号的第一子集中的所述一个视觉中断符号;
在关闭所述视觉中断符号的第一子集中的所述一个视觉中断符号之后,根据所确定的顺序从所述多个中断信号中自动识别除了所述中断信号的第一子集之外的下一个中断信号以进行显现;以及
通过所述通信网络向所述一组会议界面中的每个会议界面发送与所述下一个中断信号相对应的下一个中断符号举起信号,以开启与下一个参与者相关联的下一个视觉中断符号以在每个会议界面上显示。
13.根据权利要求12所述的方法,其中,开启所述视觉中断符号的第一子集以进行显示还包括:
在每个会议界面的位置处保持所述视觉中断符号的第一子集中的每个视觉中断符号的显示,以及所述参与者的第一子集中的相对应的参与者的视觉表示的显示,同时在每个会议界面的一个或多个其他位置处改变一个或多个其他参与者的一个或多个视觉表示的显示。
14.根据权利要求12或13所述的方法,其中,所述准则包括以下中的至少一项:与所述多个中断信号相关联的时间戳、与所述虚拟会议的参与者相关联的用户角色、所述参与者与所述虚拟会议的相关性、以及组织者偏好。
15.一种计算机程序,所述计算机程序当被执行时,使可编程设备执行根据权利要求12-14中的任一项所述的方法。
CN202180089719.5A 2021-01-08 2021-11-01 用于虚拟会议中视觉中断符号的队列管理 Pending CN116830083A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US17/145,104 US20220224554A1 (en) 2021-01-08 2021-01-08 Queue management for visual interruption symbols in a virtual meeting
US17/145,104 2021-01-08
PCT/US2021/057561 WO2022150094A1 (en) 2021-01-08 2021-11-01 Queue management for visual interruption symbols in a virtual meeting

Publications (1)

Publication Number Publication Date
CN116830083A true CN116830083A (zh) 2023-09-29

Family

ID=78822700

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202180089719.5A Pending CN116830083A (zh) 2021-01-08 2021-11-01 用于虚拟会议中视觉中断符号的队列管理

Country Status (4)

Country Link
US (1) US20220224554A1 (zh)
EP (1) EP4275161A1 (zh)
CN (1) CN116830083A (zh)
WO (1) WO2022150094A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
NO20210230A1 (en) * 2021-02-22 2022-07-18 Pexip AS Method, computer program and system for configuring a multi-point video conferencing session
US11558212B2 (en) * 2021-03-04 2023-01-17 Microsoft Technology Licensing, Llc Automatically controlling participant indication request for a virtual meeting
US11764985B2 (en) * 2021-04-15 2023-09-19 International Business Machines Corporation Augmented intelligence based virtual meeting user experience improvement
US11956286B1 (en) 2022-11-25 2024-04-09 Microsoft Technology Licensing, Llc Dynamically controlled participation allocations for communication sessions

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110117886A1 (en) * 2009-11-18 2011-05-19 International Business Machines Corporation Method and system for controlling delivery of notifications in real-time communications based on communication channel state
US20120182384A1 (en) * 2011-01-17 2012-07-19 Anderson Eric C System and method for interactive video conferencing
US20160255126A1 (en) * 2014-03-01 2016-09-01 William Sarris Application and method for conducting group video conversations and meetings on mobile communication devices
KR102105641B1 (ko) * 2014-04-04 2020-04-29 한국전자통신연구원 분산형 텔레프레즌스 플랫폼에서 영상 회의를 지원하는 방법 및 시스템
US9961119B2 (en) * 2014-04-22 2018-05-01 Minerva Project, Inc. System and method for managing virtual conferencing breakout groups
US10447795B2 (en) * 2015-10-05 2019-10-15 Polycom, Inc. System and method for collaborative telepresence amongst non-homogeneous endpoints
US20180157388A1 (en) * 2016-12-02 2018-06-07 Google Inc. Emotion expression in virtual environment
US11363082B2 (en) * 2020-06-27 2022-06-14 Peter Garrett Video conference telepresence controller

Also Published As

Publication number Publication date
EP4275161A1 (en) 2023-11-15
WO2022150094A1 (en) 2022-07-14
US20220224554A1 (en) 2022-07-14

Similar Documents

Publication Publication Date Title
US11388208B2 (en) Virtual agent communication for electronic device
KR102608967B1 (ko) 메신저 어플리케이션과 연관된 대화방을 디스플레이하는 방법 및 장치
CN116830083A (zh) 用于虚拟会议中视觉中断符号的队列管理
US9344469B2 (en) Techniques for event based queuing, ordering and time slot computation of multi-modal meeting presentations
US7552177B2 (en) Method for determining availability of participation in instant messaging
JP6000191B2 (ja) 通知に応答するためのコンテキストベースのオプションの発生
CN109076083B (zh) 促进数字个人助理之间的交互
US10805247B1 (en) Method and apparatus for requesting private replies in messaging
US9224134B2 (en) Arranging a conversation among a plurality of participants
US11683356B2 (en) Intelligently identifying and promoting a meeting participant in an online meeting
EP3449612B1 (en) Context-aware digital personal assistant supporting multiple accounts
US20150200978A1 (en) Meeting Conflict Indicator
JP5893049B2 (ja) メッセージ通信システム、情報処理装置、メッセージ通信方法およびプログラム
US20190028410A1 (en) Configuring presence and notifications in persistent conversations
WO2015148589A1 (en) Cross-client subscription to groups
CN114338576A (zh) 任务参与者的添加方法、装置、电子设备以及存储介质
US11349960B2 (en) Integration of client system groups
US20160005134A1 (en) Courting and dating technology
US8893005B2 (en) Method, device, and system for providing indicia on a display
US20180091463A1 (en) Collaboration conversation notification

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination