CN1551632A - 向视频会议的消极参加者传递所制作内容的方法和系统 - Google Patents

向视频会议的消极参加者传递所制作内容的方法和系统 Download PDF

Info

Publication number
CN1551632A
CN1551632A CNA2004100447539A CN200410044753A CN1551632A CN 1551632 A CN1551632 A CN 1551632A CN A2004100447539 A CNA2004100447539 A CN A2004100447539A CN 200410044753 A CN200410044753 A CN 200410044753A CN 1551632 A CN1551632 A CN 1551632A
Authority
CN
China
Prior art keywords
medium
media
participant
conference
classification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2004100447539A
Other languages
English (en)
Other versions
CN1282365C (zh
Inventor
v
V·伊瓦辛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Publication of CN1551632A publication Critical patent/CN1551632A/zh
Application granted granted Critical
Publication of CN1282365C publication Critical patent/CN1282365C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40Support for services or applications
    • H04L65/403Arrangements for multi-party communication, e.g. for conferences
    • H04L65/4038Arrangements for multi-party communication, e.g. for conferences with floor control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066Session management
    • H04L65/1101Session protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems
    • H04N7/152Multipoint control units therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Telephonic Communication Services (AREA)

Abstract

一种支持积极和消极参加者的会议系统被公开。该会议系统包括,定义积极和消极参加者的客户组件,以及和在该客户组件里定义的每个积极和消极参加者都有连接的服务器组件。该服务器组件包括;用于管理每个积极和消极参加者与该服务器组件之间的连接的连接管理器,用于接收会议媒体并向积极和消极参加者分发会议媒体的媒体混合器,以及用于选择要被分发给消极参加者的会议媒体的虚拟制作器。被提供给所述消极参加者的会议媒体是基于一组积极参加者的活动和选择而动态地确定的。

Description

向视频会议的消极参加者传递所制作内容的方法和系统
                      相关申请的交叉引用
本申请相关于2002年7月10日提交的、题为“Multi-ParticipantConference System with Controllable Content Delivery Using a ClientMonitor Back-Channel(带有使用客户监控反向信道的可控内容传递的多参加者会议系统)”的美国专利申请No.10/192,080。因此该相关申请在此并入以供参考。
                            技术领域
本发明总地涉及多参加者会议系统,并且具体涉及在一个带有通过反向信道连接提供的、来自积极参加者的反馈的集成多参加者会议系统中,基于积极参加者的活动而对消极参加者进行实时内容传递。
                            背景技术
会议系统通常描述一组参加者可以合作的方式。会议系统的结构确立了信息交换的规则。在会议系统的结构中,通信的方法被定义,以及可访问的媒体类型也被标识。一些系统可能允许与远程的或移动的参加者进行通信,而另一些系统则把访问限于专用的地点或成员。例如,将参加者编组到逻辑的会晤空间中、为合作指配安全访问权限、特别指明特定类型的媒体通信等等特征都是不同的会议系统的元素。
不同的合作形式通常会要求不同的系统或配置,以对付通信的多种需要。例如,如果合作采取教育培训形式,则系统必须帮助一个演示者来管理内容并将讲稿材料传达给某位听众或者一组或多组的参加者。对于在分开地点中的参加者间所进行的一组或一专门小组的讨论或者合作,所述系统必须容纳来自这样的参加者的同时输入与输出,所述参加者在每一个地点的交换中有贡献任务。在一个基于电话的会议系统中,只有音频通信是可用的。利用一个基于视频的会议系统,则参加者要求更多的专门设备来贡献视觉成分,以用于面对面的合作和交流,以及用于与诸如文档、演示幻灯片、图像等其它视觉媒体相关的合作和交流。
一种合作模型被称为一对一合作。在一对一合作中,也称为合作规则的会议规则是简单的:参加者媒体被简单地交换。每位参加者听到其他人的音频,并看到其他人的视频。传统礼节和社会规范一般会将交换控制为:每位参加者在提供答复、回应或是对该交换的其它贡献之前,都会等待其他人完成一个通信。这种“全双工”的通信样式是本人亲身交换的相当准确的近似,且允许中断和自由表达。然而,一些会议系统由于系统要求或限制而强加了限制性的通信规则。这样的系统规则可能包括对多个线索的要求,以便用信号表明一个参加者何时完成信息传递(即“半双工”)、用信号表明对启动答复或新的传输的准许等等。在任一系统中,该一对一合作的一个独立的观察者可能只是跟随参加者之间的交换,很可能在任何给定的时间将关注集中在一个活动地讲话的参加者上。
另一种合作模型是一对多的合作。在一个一对多的合作中,“一”通常表示一位演讲者或演示者,而“多”则指正参与其中的“听众”或参加者。该一对多的合作主要是单向交换,它要求所有的听众成员能够听到和看到演讲者的活动(即该演讲者的媒体被传送给所有参加者)。对于听众成员,其他参加者的活动(即听众的音频和/或视频媒体)可能并不是所期望的,并且该活动可以对该一对多的合作的有效性产生不利影响。然而,演讲者可能感兴趣于听众对演示的反馈,并且希望能知道中断或者问题。此外,在一些一对多的合作模型中,演讲者可以控制在一次提问和回答的周期期间内什么时候可以发言以及谁可以发言。在那时,听众成员可能除了希望听到演讲者的回答之外还希望听到参加者提出问题。因而,与一对一合作相比,用于一对多合作的会议系统要求更加复杂的规则。一个一对多合作中的一个独立的观察者可能跟随控制中的演讲者,或者可能选择去观看听众参加者的反应或者任何贡献。
然而另外一种合作模型是分组讨论。在一个分组讨论中,合作的规则可能不被精细地定义,且可以类似于一个一对一合作进行操作,例如,有许多的一对一合作发生。媒体交换发生在所有的参加者之间,且已经被接受了的社会规范和习惯可以定义交换的顺序。在另一方面,专门小组讨论可能要求用于主持(moderation)和时间管理的详细的合作规则。一个专门小组讨论是一种特定类型的分组讨论,它可以被定义为组对多(group-to-many)的合作模型,专门小组讨论仅仅要求参加者的一个子集在所述合作中扮演贡献角色(即来自每个专门小组参加者的媒体被传送给所有的听众参加者)。其余的参加者可能是倾听/观看(观察)该专门小组成员的交换的听众成员。一个或者更多特定的参加者可能被指派给主持人的角色,以便在定义的时间限制内、根据预先定义的合作规则等等,被分派给任务去控制所述讨论和使所述合作的方向集中在主题上。该主持人可以对说话的权限、对分配给专门小组成员的时间、或者对诸如在提问和回答会话的指定时间内与听众成员的交换进行特殊控制。同样,这些分组合作模型的交换的一个独立的观察者很可能在所述“主题”显露在媒体交换的上下文内时跟随该“主题”。
在一个会议环境下通常会有许多媒体选择可用。不同格式的实时音频和视频信号是媒体的主要类型。文档、演示幻灯片、图像等等进一步扩大了媒体选项。会议系统通常被它们支持的媒体数量和类型所限制,且对特定的一组媒体类型的高级支持是一种使会议系统能区分自己的方式。
在一个会议期间可用的媒体数量可以比出席的参加者的数量更多一些。麦克风可以提供来自各会议地点和/或各位参加者的音频。为主体提供不同视角的多个摄像机可以提供捕获演讲者、其他参加者或其他组/地点的视频媒体。
现有技术的会议系统通常被配置和被操作以便于媒体交换和通信。会议中参加者可被配置成向系统提供媒体。在上述的每种合作模型中,“积极的(active)”参加者一般被使能来贡献媒体,以及参加到由其他参加者所贡献的所述媒体的上下文中。重要地是,每位积极的参加者具有对她/他正在观查和正在交换的媒体的控制。然而,会议的观察者一般不被配置来贡献媒体。一个“消极(passive)的”参加者,一个观察者,能够观看、收听、或监控会议系统所提供的媒体。一个消极的参加者对媒体交换或贡献不具有控制,而依靠会议系统来提供在合作期间所交换的“感兴趣媒体”的“综览”或子集。在某些会议环境里,一个特定的积极的参加者被指定为所述消极参加者的馈送者。被指定的积极参加者选择的任何媒体,以及将所述媒体配置为由该指定的积极参加者所观看、收听、或观察的任何方式,都会镜像给所述消极参加者。例如,如果所述指定的积极参加者在合作中是一个演示者,那么听众的反馈和核心演示媒体可以是所能提供给所述消极参加者的全部媒体,因为所述媒体是该演示参加者正在监控的唯一媒体。在其它会议系统中,第三方媒体制作器可以被利用来为所述消极参加者选择和配置合适的媒体的呈现。尽管第三方媒体制作器将在理想情况下提供一种“感兴趣”媒体的平衡的选择,但是“感兴趣”的选择被作为媒体制作器的第三方限制,并且兴趣的选择随着媒体和积极参加者与消极参加者的数量和多样性的增加而变得更加困难。举例而言,在一个涉及多地点的一对多或组对多的合作中,某一地点中的兴趣可能与其它地点中的兴趣有极大的不同。提供给所述消极参加者的媒体的选择和配置可能足以满足某一地点/组的需要,而对于另一个地点/组则是完全不合适的。因此,所需要的是这样一种会议系统,它提供自动的和智能的内容及内容传递特征,以满足数量范围从一个到多个且兴趣范围从一致到多样的消极参加者的需要。
                          发明内容
概括地说,本发明是通过提供一个多参加者视频会议系统来满足这些需要的,该多参加者视频会议系统拥有一个虚拟制作器模块,该虚拟制作器模块将对会议媒体的兴趣进行演绎和分级,且为该多参加者视频会议的一个消极参加者制作出所选择媒体的内容和呈现布局。本发明可以以许多方式执行,包括实施为一种过程、一种设备、一种系统、一种装置、一种方法或者一种计算机可读介质。本发明的一些实施方案描述如下。
在一个实施方案中,提供了一种支持积极和消极参加者的会议系统。该会议系统是积极参加者选择和配置用于该积极参加者的媒体的系统,且该会议系统选择和提供给一消极参加者的媒体。该会议系统包括一个定义积极和消极参加者的客户组件,以及一个与在该客户组件中所定义的每个积极和消极参加者相连接的服务器组件。该服务器组件包括:用于管理每个积极和消极参加者与所述服务器组件之间的连接的一个连接管理器,用于接收会议媒体并向积极和消极参加者分发会议媒体的一个媒体混合器,以及用于选择要分发给消极参加者的会议媒体的一个虚拟制作器。提供给消极参加者的会议媒体是基于一组积极参加者的活动和选择而动态地确定的。
在另一实施方案中,提供了一种支持积极和消极参加者的视频会议系统。该视频会议系统包括定义了积极和消极参加者的客户组件,以及与每个在该客户组件中定义的积极和消极参加者相连接的服务器组件。该服务器组件包括一个用于分析会议媒体和选择要提供给消极参加者的会议媒体的虚拟制作器。提供给该消极参加者的会议媒体是基于一组积极参加者的活动和选择而由该虚拟制作器动态地确定的。
在进一步的一个实施方案中,提供了一种用于确定一组多个媒体流以便传递给一个视频会议中的参加者的方法。该方法包括确定在该视频会议中所有媒体流的原始分级,以及分析所有媒体流的原始分级。该方法还过滤所有媒体流的原始分级,并从所述已被过滤的原始分级中选择一组多个媒体流。所选择的该组多个媒体流被传递给该视频会议的参加者。
在另一实施方案中,提供了一种为在一个多参加者视频会议中的消极参加者制作一个媒体呈现的方法。该多参加者视频会议具有积极和消极参加者,且该方法包括确定在该多参加者视频会议中所有媒体的原始媒体分级。该方法还提供用于过滤所述原始媒体分级,以及从所述已被过滤的原始媒体分级中选择要提供给消极参加者的媒体。所选择的媒体被提供给在该多参加者视频会议中的消极参加者。所述多参加者视频会议系统为消极参加者制作和提供媒体呈现。
在另一实施方案中,提供了一种计算机可读介质,其具有向一个多参加者视频会议中的消极参加者提供媒体呈现的程序指令。该计算机可读介质包括确定在该视频会议中所有媒体流的原始分级的程序指令,以及分析所有媒体流的所述原始分级的程序指令。同时也提供过滤所有媒体流的所述原始分级的程序指令,以及从该已被过滤的原始分级中选择一组多个媒体流的程序指令。程序指令也被提供来向在所述视频会议中的消极参加者传递所选择的该组多个媒体流。
与现有技术相比,本发明的优点有许多,并且将从结合以举例方式来说明本发明原理的附图的下文详细描述中变得显而易见。
                           附图说明
在此被引入并组成了本说明书的部分内容的附图阐明了本发明的典型实施方案,且与描述一起用来解释本发明的原理。
图1是具有一个客户监控反向信道的多参加者会议系统的示意图。
图2是根据本发明的一个实施方案的多参加者会议系统的系统示意图。
图3是根据本发明的一个实施方案的虚拟制作器模块的简化示意图。
图4是根据本发明的一个实施方案的媒体分级组件模块的简单图表。
图5A-5E说明了在一个或多个本发明的实施方案中实施的示范媒体布局。
图6是根据本发明的一个实施方案的媒体分析组件模块的图表。
图7是根据本发明的一个实施方案的媒体选择和布局组件模块的图表。
图8是根据本发明的一个实施方案的、被配置成提供所制作的内容的多输出的虚拟制作器模块的图表。
图9是根据本发明的一个实施方案的、阐述在一个多参加者视频会议系统中向消极参加者提供所制作的媒体内容时执行的方法操作的一个高级流程图。
                        具体实施方式
描述了一个用于在视频会议中分析、选择以及传递感兴趣内容给消极参加者的发明。在以下描述中,为了提供本发明的透彻理解,阐明了大量具体的细节。然而,本领域的技术人员应该理解的是,根据这里的公开内容,本发明在缺少一些或所有这些特定的细节时也是可以实现的。在其它实例中,为了不必要地混淆本发明,已公知的方法操作将不再详述。
本发明的实施方案提供了一种方法和系统,以便为视频会议中的消极参加者制作智能的、基于兴趣的媒体选择。正如在这里使用的,媒体包括在一个视频会议环境里所会遇到的任何合适类型的信息或数据,例如,POWERPOINT演示图像、视频/音频流、光栅/矢量图像、注释、文档等等。本发明的实施方案可以在上文所引作参考的申请号为No.10/192,080的美国专利申请所描述的视频会议系统中得到实现。
作为概述,提供了对能在其中实施本发明实施方案的视频会议系统的总体描述。图1是一个多参加者会议系统100的示意图,其具有客户监视器反向信道110,被图示为反向信道110a-110n。多参加者会议系统100包括会议参加者A-N,图示为参加者A 102a-参加者N 102n,而其中每个会议参加者102都拥有会议客户104(图示为会议客户104a-104n)以及客户监视器106(图示为客户监视器106a-106n)。会议信道108(图示为会议信道108a-108n)和反向信道110(图示为反向信道110a-110n)将每个会议参加者102与媒体集线服务器的一个多点控制单元(MCU)112连接起来。该MCU 112包括一个连接管理器114,其具有事件处理器116、会话管理器118以及媒体混合器120。
在图示的多参加者会议系统100中,会议客户104为参加者102提供本地功能性并且允许其进入会议系统。参加者102所贡献的媒体内容通过会议客户104、经由会议信道108而路由到MCU 112。另外,经由会议信道108,来自该MCU 112的媒体被会议客户104接收和播放。
在一个实施方案中,会议系统100增强了先存在的会议客户软件,诸如一个对等视频会议应用,该应用可以安装在一台被连接到该视频会议的个人计算机上。对等视频会议应用的一个实例是MICROSOFT的NETMEETING(微软的网络会议)应用。不断增加的功能性能够通过客户监视器106所提供的数据而被使能。在一个实施方案中,客户监视器106将图形用户界面(GUI)并入,其中对等应用的视频窗口是该图形用户界面的组件。
客户监视器106提供从会议客户104给MCU 112的、被捕获的输入。所捕获的输入是通过与会议信道108并行操作的单独的反向信道连接器110而被传送到MCU 112的。在一个实施方案中,反向信道110使该MCU 112能够基于提供给MCU 112的所捕获的输入,而动态地修改呈现给参加者102的GUI。例如,客户监视器106可以捕获事件,诸如参加者102的鼠标和键盘的活动、诸如被用来配置和显示呈现给会议客户104的视频和其它媒体信号的活动。在一个实施方案中,活动被捕获并经反向信道110被传送到MCU 112来解译。因此,反向信道110在用于控制功能性和内容的视频流中会考虑到活动区域、用户界面对象等等。因此,参加者102控制被给予一个选定的媒体布局中不同区域的视频,这既直接地通过经由会议信道108的积极的贡献和选择而实现,又间接地通过经由反向信道110的、对客户事件的MCU 112处理的反馈来实现。
MCU 112是会议系统100中的主要服务器,并且便于召开在被连接的参加者102a-102n之间的多参加者会议。所有其它组件在MCU 112里得到管理和维护。连接管理器114在MCU 112与参加者102a-102n之间的物理连接中给予协助。连接管理器114为每个参加者102a-102n担当对等端点,因而是用于给定参加者102的所有媒体进入和离开MCU 112之处。装配有反向信道110的参加者102a-102n通过事件处理器116与连接管理器114连接以解析事件。
事件处理器116监视每个参加者102a-102n的活动并经由124向媒体混合器120提供输入来配置媒体布局。每个事件都创建一个与活动时刻的视频、音频或者其它媒体数据相关的上下文标记。一种分析方法检验所述与一个给定媒体数据相关的所有上下文标记的组来提取一个“兴趣区域”。
会话管理器118定义了掌控每种类型的会议合作的规则并且相应地既控制着系统又控制着参加者的媒体交换。会话管理器118可以限制可用于参加者102a-102n、让他们操纵或控制的内容。会话管理器118也可以定义一组一个或多个参加者102的角色,以及提供适合他们角色的功能。作为实例,会话管理器118可以定义用于协助一个演讲者参加者102优先于听众参加者102进行会议控制的呈现规则。当一个听众参加者102有问题时,该规则可以指示:该演讲者参加者102必须向该系统发送信号以便约请带有问题的该听众参加者102,允许该听众参加者102的音频经过该系统,以及然后把控制返回给所述演讲者参加者102以待评论。在定义专门小组讨论规则中,会话管理器118可以定义一个较小的参加者102组来构成“主要的”参加者102,而其他参加者102只是以基本的观察模式出席。会话管理器118的功能包括基于所述合作模型而控制内容和活动。
媒体混合器120从每个有贡献的参加者102a-102n接收会议媒体,并且在适当时向会议中的每个参加者102a-102n传递合适的媒体。为了更加有效率的传递,一些媒体信号可能在合适时会被合并。媒体混合器120从大量源,包括事件处理器116以及会话管理器118接收指令,以此来控制给每个参加者102a-102n的媒体传递的布局和内容。
在如图1所示的一个视频会议系统100中实施的本发明实施方案增强了经由图示的视频会议系统100而被分发的内容,这是通过为一个多参加者视频会议提供一个自适应的内容传递系统而实现的,其中所述多参加者视频会议既容纳了积极参加者,又容纳了消极参加者。本发明的系统监视一组积极参加者所贡献的合作媒体、行为和相互作用,以及监视用于掌控该会议以便为通信确定“重要的”或最相关内容和布局的规则。该系统并入一个“虚拟制作器”来分析所述活动和输入,并且选择出可用的贡献出的媒体的子集以分发给消极地观看该会议的参加者(即,那些拥有有限能力来引导其会议体验的参加者,或者那些即使有足够的活动或输入能力却选择消极观看的参加者)。
本发明的实施方案包括一种反馈机制以提供“兴趣标记”,其进一步定义和指定会议媒体内容的重要性。媒体的重要性可被用来实时地改变所述媒体的传递、品质和呈现,从而强调了具有更大重要性或兴趣的媒体而同时减少了不必要的媒体处理的系统负担(例如,被要求来处理所选媒体的系统资源量)。
图2是依照本发明的一个实施方案的多参加者会议系统150的系统示意图。如上文所述,本发明实施方案可被实施于如图1所示的多参加者会议系统100中,或者实施于任何其它合适的视频会议系统中。基本上,所有参考图1所图示和描述的组件都包括在如图2所示的多参加者会议系统150中,其中的一些修改将会在下文中详细描述。为了使图示与说明清晰和简单,会议参加者152被图示为整体地包括所有参加者156,并且图中示为156a-156n。个体参加者156a-156n被指定为积极的(A)或消极的(P),并且每个参加者156a-156n应该被假设为既包括一个会议客户又包括一个客户监视器(图1被示为会议客户A-N104a-104n和客户监视器A-N 106a-106n)。客户连接信道158(图示为158a-158n)应该被理解为包括会议信道(如图1中所示的会议信道108a-108n)及反向信道(如图1中所示的反向信道110a-110n)中的一个,或者仅仅包括一个会议信道,这取决于一个特定参加者156的配置。在本发明一个实施方案中,一个积极参加者156拥有一个客户连接信道158,其包含一个会议信道和一个反向信道。一个消极参加者156拥有一个客户连接信道158,其包括一个会议信道以使能与多点控制单元(MCU)160的连接,以及也可以有(但不是需要有)一个反向信道。MCU 160已经被扩展成包括如下文所述的一个虚拟制作器模块162。
在本发明的一个实施方案中,虚拟制作器模块162分析输入并且选择该可用会议媒体的子集,以便分发给消极地观看该会议的参加者156。虚拟制作器模块162包括一个媒体分级(MR)模块164、一个媒体分析(MA)模块166以及一个媒体选择和规划(MSL)模块168。
制作器的传统角色是决定在一个媒体中的感兴趣的内容并将所选信号引导到合适的参加者。通常,直接附加到一个系统的一个专用媒体管理设备使能该制作器完成任务。一个专用媒体管理设备可访问所有的、对于该制作器的检查和选择可用的媒体。通过该专用媒体管理设备,一个制作器能够对分发系统“编程”从而向用户只传递合适的信号。在没有制作器可用的系统里,预编程的规则提供类似制作器的功能。预编程的规则可以包括例如显示具有最大声音频信号的参加者的视频,或者仅仅显示指定的演讲者的视频。
在本发明的实施方案中,媒体内容控制在一组积极参加者间分布。在以下的描述中,积极参加者被标识为积极参加者156(全体地),并且应该被认作为包括所有积极参加者‘参加者’1(P1)156a、P2 156b、P3 156c、P4 156d和任何积极参加者156n。类似地,消极参加者被标识为消极参加者156(全体地),并且应该被看作包括所有消极参加者‘参加者’5(P5)156e、P6 156f、P7 156g、P8 156h和任何消极参加者156n。如在下文更加详细描述的,通过给予媒体混合器120的混和指引、经由参加者的被定义的布局和媒体选择,而发生系统“制作”。该虚拟制作器模块162创建类似地操作的“虚拟制作器”。该虚拟制作器模块162通过混合来自一组积极参加者156的输入来创建“制作”。为该制作做贡献的所述一组积极参加者156被称为积极制作者参加者156。
积极参加者156从在一个会议期间可用的一组媒体布局中选择个人的媒体布局(或者提供它们)。媒体布局会在下文参考图5A-5E得到更加详细地描述。所选择的布局定义了每个积极参加者156指定要由MCU 160用会议媒体填充的区域。实际上,积极参加者156正通过选择媒体来“制作”该会议的个别局部试图(信道)以便混合到该布局中以及进行传递。MCU 160知道每个积极参加者156的媒体和布局选择,因为它持续地监视着改变该选择的那些事件。
消极参加者156放弃对所述多参加者视频会议系统150的媒体内容和布局的控制。消极参加者156观察该视频会议,并且依靠该多参加者视频会议系统150来以合适的布局传递合适的内容。在某一情况下,该多参加者视频会议系统150可以简单地将例如积极参加者P1 156a的制作的内容提供到所有消极参加者156。然而,P1 156a可能不希望其它参加者156知道他的“制作”选择(即,P1不是一个制作者参加者),P1156a可能不为消极参加者156观察该视频会议而选择最合适的媒体,而且P1 156a可能不代表在该视频会议中的所有积极参加者156。另外,这种简单化的解决方案并不包括可能限制来自消极参加者156的某些内容的系统规则或合作规则。
消极参加者156可能不具有与该多参加者视频会议系统150的显式的相互作用。在本发明的一个实施方案中,所述被提供给消极参加者156的媒体内容是由该多参加者视频会议系统150所制作的。该多参加者视频会议系统150是根据系统规则和合作规则、加权的参加者动作以及由多个积极制作者参加者156生成的累积事件标记来制作该内容的。积极制作者参加者156依照系统和合作规则来选择和配置媒体内容,提供反馈,以及,正如下文更加详细描述的,提供能标识特定媒体内容的某一重要性的兴趣标记。在本发明的实施方案中,所述虚拟制作器模块162代表消极参加者156动作,以智能地选择和配置所提供的媒体内容。
图3是依照本发明的一个实施方案的虚拟制作器模块162的简化示意图。虚拟制作器模块162收集和评价所有系统信息、相关参加者的活动以及会议媒体选择,并且在系统规则和合作规则的限制范围内,构建对所述会议的专用视图。对虚拟制作器模块162的特定输入会在下文中参考图4、6和7、结合虚拟制作器模块162的组件模块的功能来详细地给出描述,其中所述虚拟制作器模块162的组件模块包括一个媒体分级组件模块164、一个媒体分析组件模块166以及一个媒体选择和布局组件模块168。在一个实施方案中,虚拟制作器模块162的输出是去往媒体混合器120,从而指引将已被制作的内容传递给消极参加者156(参阅图2)。
图4是依照本发明的一个实施方案的虚拟制作器模块162(参阅图3)的媒体分级组件模块164的简要图表。已被制作的会议视图在系统规则和合作规则的限制范围内,由布局所定义的已分级媒体填充区域的布局所组成。布局中的媒体分级是所述媒体分级组件模块164的一种功能。一位积极参加者156(参阅图2)能够在在所述MCU 160(参阅图2)提供的布局里选择和配置媒体内容。在一个实施方案中,一位积极参加者156从由该MCU 160所提供的多个媒体配置模版中选择一种布局。所述媒体内容是选自由特定的积极参加者156可用的所有媒体内容组成的一个集合。所选择的媒体内容和布局在所有其他积极参加者156中可以是唯一的。
图5A-5E示出了在一个或多个本发明的实施方案中所实施的示范媒体布局。这里所用的布局定义了一组分割一个视图的区域(R1-Rn)。与另一区域重叠的一块区域可以或者“切”掉(隐藏)它所重叠的空间,或者它可以与该被重叠的区域透明地合并。每一个区域代表着一个占位符,用于为特定的合作或会议而包含在多参加者视频会议系统150(参阅图2)中可用的一些媒体内容。媒体的实例包括,但不限于,来自会议参加者的音频和视频馈送、会议地点或者远程的音频和/或视频馈送、文档、演示幻灯片、图像等等。例如,在一个媒体布局中,从每个参加者可得到的视频帧按照所述观看参加者独特的配置规则而被缩放,以便适合于一个或多个所述的Rn区域,使每个Rn区域含有一个视频帧。
在一个实施方案中,一个媒体布局里的Rn区域可根据重要性、功能和用途、相对大小或其它参数,来在它们自己间加权。在一个实施方案中,每位积极参加者156(参阅图2)向所选择的媒体布局的所述Rn区域指定一个相对重要性。在另一个实施方案中,一位积极参加者156选择一个媒体布局,但是每个Rn区域的相对重要性是由多参加者视频会议系统150(参阅图2)、系统规则等等所预先确定的。通常,一个区域被指定为主要的(P)区域,而另一个区域可能被指定为服务器用户界面(SUI)区域。所述段SUI被预留给服务器界面或配置界面。通常,每个区域的尺寸受控于服务器和会议参加者152(参阅图2)之间的商定的帧尺寸,和所述媒体内容的长宽比。
图5A-5E被提供以图示说明在本发明的实施方案中各种可用的示范媒体布局。在图5A中,主要区域R1基本上填充该媒体布局,而次重要的单个区域R2在更小些的“画中画”显示中被标识。在图5B中,所述主要区域R1是位于所述媒体布局左边的最大区域,它下方紧挨着的更小些区域里有一个SUI。指定给每个Rn(即,R1、R2、R3、R4、R5)的数字表示该Rn区域的相对分级,其中,1表示最重要的、最相关的、或最感兴趣的,而余下的Rn区域以递减的顺序被指定。图5C展示了另一种多尺寸的Rn配置,以及图5D展示了同尺寸的多个Rn区域。图5E图示了填充所述媒体布局的一单个Rn区域。在一个实例中,图5E可能会是用于一对一合作的最好的(或唯一的)媒体布局。
回到图4,媒体分级组件模块164吸收多个输入以输出在所述多参加者视频会议系统150(参阅图2)中所有可用的媒体的原始分级。进入媒体分级组件模块164的输入包括媒体列表186、参加者分级180、兴趣标记182以及触发事件184,从而产生所述原始媒体分级188输出。
媒体列表186是在所述多参加者视频会议系统中所有可用媒体的汇编,用于一个特定的合作交换,例如,用于一个特定的视频会议会话。作为实例,一个特定的视频会议会话可以具有来自第一演讲者的音频(A1)、来自第一演讲者的视频(V1)、来自第二演讲者的音频(A2)、来自第二演讲者的视频(V2)、第一文档(D1)、第一POWERPOINT演示(PPI)等等。媒体列表186仅仅是媒体分级组件模块164将处理的所有可用媒体的一个列表。
引入到合作交换中的内容和事件可以根据预定的使用情况、以及已被测量的反馈来加权。作为实例,在一个新演示幻灯片被显示时,由一个演示者所显示的该新演示幻灯片可能比该演讲者的视频图像具有更大的权重。特定的一组媒体的所述传递可以生成一个可测量的响应,该响应来自很大量的积极制作者参加者,或来自积极制作者参加者的可标识子集,诸如位于特定位置、区域、系统分区等等中的积极制作者参加者的子集。每个参加者的媒体布局也有助于在那些所选媒体中建立它们的分级。
在本发明的一个实施方案中,媒体分级组件模块164累积参加者选择、事件活动、媒体布局等等,以给每个会议媒体指配一个权重。然后该指配的原始权重可以被分析从而选择和配置要呈现给合作交换中的消极参加者156(参阅图2)的媒体。在一个实施方案中,媒体的分级是对每个积极制作者参加者156(参阅图2)可用的所有媒体中的可测量兴趣的清点。参加者分级输入180是由每个积极制作者参加者通过对媒体的选择和配置而表达出来的兴趣的水平。每个积极制作者参加者156所选择的媒体布局(参阅图5A-5E)对一个特定的积极制作者参加者156可用的所有媒体的重要性进行分级。作为实例,每个积极制作者参加者156可能已经在R1区域(参阅图5A-5E)中配置了来自第一演讲者的音频和来自第一演讲者的视频,这表示了该第一演讲者的音频和视频的显著重要性。每个积极制作者参加者156可利用的其它媒体是根据对该媒体的兴趣水平或该媒体的重要性水平而被分级的,这反映在对每个积极制作者参加者156可利用的媒体的选择和配置的同化作用里。
兴趣标记182进一步指明了在一个实施方案中一个积极制作者参加者156的任何特定媒体的事件、时刻、部分等等的相关性、显著性、重要性等等。兴趣标记182对特定时刻通常是非常敏感的,而且可被用来短时间或长时间地对该媒体分级。在本发明的一个实施方案中,积极制作者参加者156被使能来向特定的媒体指配兴趣标记。作为实例,位于一个媒体布局(参阅图5A-5E,及相关的讨论)的SUI区域里的图标、菜单或可选择的功能在一个视频会议中被用于指配兴趣标记。在另一个实例中,在一位积极制作者参加者156的媒体布局的一个媒体区域上点击右键,便能够为那个特定的媒体或相关的媒体标识出兴趣标记。在本发明的一个实施方案中兴趣标记182被捕获并输入到所述媒体分级组件模块164。
通常,对一个媒体中感兴趣点的确定先于兴趣标记的指配。这对于类似音频或视频的基于时间的内容尤其正确,因为一位积极制作者参加者156处理和考虑的是已经看到或听到的。在一个实施方案中,兴趣标记可能被配置成:为诸如音频和视频的动态媒体定义一个媒体时间的范围(即,兴趣包括媒体的前5、10或30秒,等等),而且也可以为更多的静态媒体标识特定的演示幻灯片、文档或文档页、节、段落等等。
在本发明的一个实施方案中,不同类型的兴趣标记可被配置来被处理、被累积并且被输入到所述媒体分级组件模块164。作为实例,一个表决标记以决定性的动作来用信号表明一个媒体。“是”、“赞成”、“否”、“反对”或其它标记都会输入到系统里。因为可对该媒体追踪该反馈,所以可以为该组积极制作者参加者156维持跨越媒体片断的一个累积结果以便评估兴趣。除了对媒体分级的贡献之外,该结果可以被实时处理来预言本质,或者实际结果可以被实时地公布给演讲者参加者156,和/或被实时地公布给其他参加者156以获得立即的反馈。另一种类型的兴趣标记是一种可被用来“突出”媒体以便后来重新查看的主题标记。突出主题是类似于书签地标识媒体中的内容区域。
触发事件184标识在一个特定的动作或事件发生时的、具有特定相关性或兴趣的特定的媒体。在本发明的一个实施方案中,触发事件包括新的演示幻灯片的显示、文档的介绍和新的演讲者、参加者的一个新组或新部分的增加、一次提问和回答会话等等。触发事件可以根据触发事件184输入的期望的实施和使用,而被定义用于特定的合作模型和会议。
媒体分级组件模块164的媒体分级188输出是在多参加者视频会议系统150(参阅图2)中对特定会话可用的所有可用媒体的原始累积分级。在本发明的一个实施方案中,该媒体分级188是所有可用媒体按照已测量的积累兴趣、相关性、重要性、显著性等等的顺序(递减的或递增的)排列而成的一份列表。在一个实施方案中,任何过滤器、合作或会议规则或者任意其它类型的限制都不能直接被应用来获得所述媒体分级188输出。在一个实施方案中,正是原始媒体分级188被提供给媒体分析组件模块,从而进行如下文参考图6所描述的分析和过滤。
图6是依照本发明的一个实施方案的虚拟制作器模块162的媒体分析组件模块166(参阅图2)的图表。该媒体分析组件模块166接收来自媒体分级组件模块164(参阅图4)的原始媒体分级188,并且分析可用媒体的分级,以及该被分级的媒体的过滤和抑制,在一个动态的环境里该被分级的媒体在兴趣、相关性、重要性、显著性等等方面常遭受快速和突然的波动。在本发明的一个实施方案中,向媒体分析组件模块166的输入包括原始媒体分级188、合作规则190以及系统规则192。一份已被分级的媒体的列表194(也被称为已被加权的媒体的列表)被输出。
虚拟制作模块162(参阅图2)的预测能力可以基于兴趣标记、其它媒体注释、历史趋势、已被标识的触发事件等等来标识合适的媒体在什么时候需要是容易地可用的。同样地,在不同时刻对特定媒体的重复标记能够更好地为那些被配置成标识有更大重要性的媒体的上下文分析系统服务。媒体分析组件模块166将这样的经过训练学到的行为应用于媒体分级188。
合作规则190和已固定的系统规则192(也称为配置选项)可能防止媒体分级被一个虚拟制作器162(参阅图2)使用。作为实例,合作规则可以指令一个已被标识的演讲者参加者、一个积极参加者156(参阅图2)、也可以是一个被指定的主要的兴趣媒体,即使来自一个特别聪明、好笑或在其它方面感兴趣的其他参加者156的音频媒体可能正在接收来自所述一组积极制作者参加者156的一贯更高的媒体分级188。在另一个实例中,系统规则192可指令不显示来自P3 156c(参阅图2)的视频,或者指令所有文档通过一个单独的文档阅读器而被提供,因而没有文档将被配置给所述消极参加者156的媒体布局(参阅图5A-5E)的一个Rn区域。所述媒体分析组件模块166支持这项功能性。
在一个实施方案中,媒体分析组件模块166提供了一个缓冲器,该缓冲器位于媒体分级164与虚拟制作器模块162(参阅图2)的媒体选择和布局168组件模块之间。作为实例,媒体分析组件模块166控制已被分级的媒体的列表194的变化定时,这些变化可能会导致快速、不停变化的媒体选择,从而可能会使参加者糊涂。只有当原始媒体分级188在可编程的时间量过去而没有任何改变之后,所述媒体分析组件模块166才可被编程以允许在已被分级的媒体的列表194中的改变。如果交换发生在两个或多个参加者之间,则“乒乓”效应因而会被媒体分析组件模块166抑制或消除。可以修改媒体布局、可以抑制媒体中的变化、可以修改音量或其它媒体配置或者可以实施其它这样的措施来对消极参加者156(参阅图2)最小化注意力分散情况或最小化对呈现引起的混乱。
在一个实施方案中,除了被输入到媒体分级组件模块164(参阅图4)之外,兴趣标记182以及当然还有其它诸如触发事件184(参阅图4)的事件还被提供给媒体分析组件模块166(未显示在图6中)。对兴趣标记的“群集”和事件活动的“趋势”的分析可以增强消极参加者156(参阅图2)的所述视频会议体验。兴趣区域指向已经发生(或正在发生)活动群集或活动趋势的媒体空间。活动的群集是由诸如某些短的时间间隔上的事件的功能所定义的。群集可以是基于事件的类型或事件之间的关系而被分类的。例如,一大组积极参加者156(参阅图2)生成诸如选择将一个特定的会议成员视为他们的主要媒体,或向该媒体指定兴趣标记的活动。所有活动都被发现发生在一小段时间间隔里。这样可以将群集分类,并且兴趣区域能被系统标识。一个群集兴趣标记可由系统指定以标注兴趣区域从而影响对媒体分级和选择的未来分析。群集兴趣标记由系统使用来影响媒体分级,或影响对按比例或权重改变到一个媒体分级的定时,该媒体分级大于单个兴趣标记或事件分级活动的媒体分级。
在某些情况下检测到与活动群集相反的活动趋势。如果在一段较长时间间隔上,例如,一组参加者156开始观看一个给定的参加者,而多于观看另一位参加者,那么标识一个活动趋势。跨越该给定参加者的媒体的一块兴趣区域可以被创建,以突出该组参加者156正在该媒体中查找的相对兴趣。一个趋势兴趣标记可以由系统指定来标注此兴趣区域,从而影响对媒体分级和选择的未来分析。群集兴趣标记的趋势也可被该系统标识出来。一个趋势兴趣标记可以被该系统用来影响一次媒体分级或影响对按比例或权重改变到一媒体分级的定时,该媒体分级大于其它兴趣标记或事件分级活动。
一个分析这些活动且标记兴趣区域的系统功能可以包括监视大多数正观看一个特定媒体的参加者的功能。在这样的时间,该系统可以在该媒体上创建它自己的兴趣标记,从而表示出该参加者的观看中的重要转移。同样地,一位演讲者参加者156,或其他参加者156,可能希望用信号表明一个重要的主题,并生成一个显式的、权重更大的兴趣标记。这些兴趣标记可能直接影响所述媒体分级处理,或可能依照系统规则192被用在所述媒体分析组件模块166中,因而修改所述已被分级的媒体列表194输出。
在本发明的一个实施方案中,媒体分析组件模块166通常应用合作规则190和系统规则192、执行缓冲,并可能执行任何的或所有的趋势兴趣标记输入,从而要求访问来自媒体混合器120(参阅图2)的一个媒体信号,和/或使用另一个制作器模块162a(参阅图8,及相关讨论)处理来确定一份已被分级媒体的列表194,从而,例如,解决媒体分级中的“纽带”等等。
媒体分析组件模块166的输出是一份已被分级的媒体的列表194。在一个实施方案中,一份已被分级的媒体的列表194是一个消极参加者156(参阅图2)可用的、已指定级别或权重的所有媒体的一份列表。如上文所述,该系统里的所有媒体并不一定都对一个消极参加者156可用。所述已被分级的媒体的列表194实质上是依照合作规则190、系统规则192、和在一个实施方案中的兴趣标记(未显示在图6中)而已经被缓冲、抑制或否则已被过滤的输入媒体分级188。在图6中,指定给该已被分级的媒体的列表194的级别或权重图示为“X”,“X”表示指定给一个消极参加者156可用的每个媒体的一个级别或权重,但是可以使用任何合适的手段来对每个可用媒体中的兴趣水平划分优先次序或者进行指示。该已被分级的媒体的列表然后被该媒体选择和布局组件模块168所使用,正如下文参考图7描述的。
图7是依照本发明的一个实施方案的媒体选择和布局组件模块168的一张图表。来自媒体分析组件模块166(参阅图6)的所述已被分级的媒体的列表194被输入到媒体选择和布局组件模块168中,而输出则从所述虚拟制作器模块162(参阅图2)被发送到媒体混合器120。在媒体的一次原始分级后(该原始分级之后跟随根据合作规则、系统规则及兴趣标记而进行的分级分析),必须进行对媒体和媒体布局的选择。所述选择将被发送到媒体混合器120,以构建要提供给所述消极参加者156(参阅图2)的已被制作的内容和视图。
在一个实施方案中,合作规则190和系统规则192(其作用方式与上文参考图6所描述的基本上相同)被输入到该媒体选择和布局组件模块168,以便除了过滤消极参加者156(参阅图2)可用的媒体布局之外,还进一步过滤该媒体内容。最初,一个简单的布局(即,一个仅仅包括用于媒体的几个区域的布局)可以被选择。在一个实施方案中,积极参加者156(参阅图2)所做的一个布局选择定义了可能被考虑提供给消极参加者156的布局选择的分级。基于在所述已被分级的媒体的列表194中就重要性而言的高级别媒体的计数以及所有媒体间的相对扩展,新的布局可被选择来容纳和呈现最有用的媒体组。频繁地或有规律地改变布局可以使用户注意力分散,并且在一个实施案例中,系统规则192当在该已被分级的媒体的列表194中发生改变时对其进行缓冲或抑制。另外,合作规则190和系统规则192可以定义一个特定的布局以备使用。在任一个实例中,一旦一个布局被选定,由所述虚拟制作器模块162(参阅图2)所确定的“最佳”媒体就会被填充到所述视图中。
应当理解,不被选择来呈现给消极参加者156(参阅图2)的媒体,以及不为积极参加者156(参阅图2)所选择的那些媒体都是用于系统性能修改的候选媒体。例如,在一个虚拟制作器模块162(参阅图2)中不可用或没有被利用的媒体可能对该会议并不重要,并且可以使相应的数据速率降低。这样将会向“感兴趣的”媒体提供更多的系统带宽。
这里所述的虚拟制作器代表消极参加者动作。通过收集和评估所有的系统信息、及积极参加者活动和会议媒体选择的相关组,该虚拟制作器为一组消极参加者构建一个关于该会议的专用视图。在本发明的一个实施方案中,虚拟制作器模块162(参阅图2)的一个实现方案能够被缩放,以便容纳任何数量的虚拟制作器。如上文所述,多参加者视频会议系统150(参阅图2)可以容纳多个已被定义的参加者组。已被定义的消极参加者组相对所传递的已制作内容可以在兴趣和需要方面有所不同。在一个实施方案中,通过向在图2中所示的系统添加更多的虚拟制作器模块162,或者通过在一个多参加者环境里向联网的对等体添加虚拟制作器模决162,则附加的虚拟制作器模块162可以被添加到该多参加者视频会议系统150。在另一个实施方案中,每个组件模块,即,在整个虚拟制作器模块162中的所述媒体分级164、媒体分析166以及媒体选择和布局168组件模块,的逻辑分区可以被定义以创建多个虚拟制作器来容纳已被定义的组、部分、会议地点、兴趣区域等等。例如,在某一个会议地点的一组参加者可以为来自他们地点的参加者更准确地“制作”出兴趣内容。为所标识的参加者组或者集合定义的虚拟制作器可能与为该会议中另一个地点所定义的虚拟制作器的操作不同。同样地,当来自另一地点的一个不同的演讲者开始他的演示时,组成一个给定虚拟制作器的参加者的集合在会议过程中可以发生改变。因此,该系统也可以为整个会议构建一个从所有“局部”虚拟制作器的组合制作来作成的“全局”虚拟制作器。
图8是依照本发明的一个实施方案被配置成提供所制作内容的多个输出的虚拟制作器模块162a的一张图表。在图8中,组件模块由下标“N”来标识从而表示每个组件模块的多个逻辑子部分。因此,媒体分级组件模块164a、媒体分析组件模块166a以及媒体选择和布局组件模块168a代表多个组件模块。每组组件模块,即每组具有一个媒体分级组件模块164a、一个媒体分析组件模块166a以及一个媒体选择和布局组件模块168a,如上文所述地操作,以便为已被定义的组、子部分、会议地点等等提供所制作的内容。提供给每个已被定义的组、子部分、会议地点等等的所制作的内容依照合适的组的系统规则、合作规则、兴趣标记等等来为那个组唯一地制作出来。如上文所述,在另一个实施方案中,多个虚拟制作器模块基本对等地工作,以便为一个已被定义的组提供该唯一制作的内容。
图9是高级流程图200,图示了依照本发明的一个实施方案的、在一个多参加者视频会议系统里向消极参加者提供所制作的媒体内容时执行的方法操作。该方法开始于操作202,且提供了既具有积极参加者又具有消极参加者的一个多参加者视频会议系统。在一个实施方案中,该多参加者视频会议系统是如上文参考图2所图示和描述的。
该方法继续进行操作204,其中一组积极参加者被定义。在本发明的一个实施方案中,所制作内容是基于在一个视频会议环境里的积极参加者表达的兴趣和活动而获得的。然而,一些参加者可能不希望,或者可能不被配置或不被允许来向用于消极听众内容制作去贡献媒体内容、布局、兴趣等等。一个制作者参加者是积极参加者的一个子集。积极制作者参加者所表达的媒体选择、布局和兴趣被输入到一个虚拟制作器模块,以便用于开发在该视频会议中要被传递给消极参加者的所制作的内容。
紧接着,在操作206中,每个积极制作者参加者所表达的对特定的会议媒体的兴趣水平被监视。在一个实施方案中,该多参加者视频会议系统包括积极参加者和多点控制单元之间的一个反向信道链路。每个积极参加者的一个客户监视器被用于监视媒体内容选择、媒体布局和通过例如兴趣标记所特别表达的兴趣。积极制作者参加者的被监视的参数被提供给虚拟制作器模块,以便用于为在一个会议中的消极参加者开发所制作的内容。
该方法继续进行操作208,其中,基于积极制作者参加者的活动和兴趣标记、触发事件等等的所有会议媒体的原始兴趣分级被确定下来。在一个实施方案中,在该会议中的所有媒体的所述原始兴趣分级被确定时并不考虑系统规则、合作规则、使用水平等等。如上文参考图4所述的,该原始分级是在该虚拟制作器模块的媒体分级组件模块中被确定的。
在操作210中,如上文参考图6所述的,根据系统规则和合作规则,该原始兴趣分级被分析、缓冲、过滤和抑制。在一个实施方案中,系统规则和合作规则限制消极参加者可用的所述媒体。进一步地,媒体兴趣中的快速和频繁的改变对消极参加者而言可能是令人注意力分散和令人迷惑的,而且这样的变化要求在选择最合适的内容和布局以便提供之前进行考虑、过滤、抑制等等。另外,趋势、特定的组、设置、内容、参加者等等都能影响一个消极参加者可用的最合适的媒体的分级。
该方法继续进行操作212,其中,媒体内容和布局根据合作规则和系统规则而选自提供给消极参加者的已被分级的媒体的列表。在一个实施方案中,该媒体选择和布局是由如上文参考图7所图示和描述的虚拟制作模块的媒体选择和布局组件模块来完成的。
所述媒体内容选择和布局被提供给媒体混合器,并且在操作214中,所制作的一份媒体内容和布局被提供给该多参加者视频会议的消极参加者。所制作的内容是动态的,因为自适应的内容传递系统既响应消极参加者的需要,也响应积极制作者参加者的兴趣变化。在一个实施方案中,所制作的内容被剪裁以向多个已被定义的消极参加者组或子部分提供唯一的所制作的内容,并且响应于在会议过程中内容和参加者两者的变化。随着在会议过程中所制作内容的正在进行的传递,当对消极参加者的传递不再需要时,该方法便完成了。
考虑上述实施方案,应该理解的是本发明可以使用各种不同的计算机实施的操作,包括存储在计算机系统中的数据。这些操作是那些要求对物理量进行人工操纵的操作。尽管不是一定的,但通常这些量采用电或磁信号的形式,这些信号能够被储存、传输、合并、比较以及进行其它操作。进一步地,所进行的操作经常明确地指出,诸如制作、标识、确定或比较。
本发明也可以具体化为计算机可读介质上的计算机可读代码。该计算机可读介质是指能储存数据而该数据随后能够由一个计算机系统读出的任何数据存储设备。该计算机可读介质也包括其中实现计算机代码的一束电磁载波。所述计算机可读介质的实例包括硬盘驱动器、网络附加存储器(NAS)、只读存储器、随机存取存储器、CD-ROM、CD-R、CD-RW、磁带以及其它光学的和非光学的数据存储设备。该计算机可读介质也可以分布在一个网络耦合的计算机系统中,这样该计算机可读代码以分布式的方式被储存和执行。
尽管前述的发明为了理解的清楚已经被详细地描述了,但很明显的是,在附加的权利要求范围内本发明可以进行一定的变化和修改。因此,本实施方案应该被认为是例证性的,而不是限制性的,并且本发明不限于这里所给定的细节,而是可以在附加的权利要求范围和等价范围内进行修改。

Claims (29)

1.一种支持积极和消极参加者的会议系统,其中,一个积极参加者选择和配置用于该积极参加者的媒体,并且该会议系统选择并提供媒体给消极参加者,该会议系统包括:
定义积极和消极参加者的客户组件;以及
和在该客户组件里定义的每个所述积极和消极参加者都有一个连接的服务器组件,该服务器组件包括:
一个连接管理器,用于管理所述积极和消极参加者中的每个参加者与该服务器组件之间的连接;
一个媒体混合器,用于接收会议媒体并向所述积极和消极参加者分发会议媒体;以及
一个虚拟制作器,用于选择出要被分发给所述消极参加者的会议媒体,
其中,被提供给该消极参加者的会议媒体是基于一组积极参加者的活动和选择而动态地确定的。
2.权利要求1的会议系统,还包括一个事件处理器,该事件处理器配合该连接管理器工作以监视参加者活动并向该媒体混合器提供有关参加者活动的信息。
3.权利要求1的会议系统,还包括一个会话管理器,该会话管理器是该服务器组件的一部分,并且被配置以定义合作和媒体交换的规则,其中,该合作和媒体交换的规则控制会议媒体对所述积极和消极参加者的可用性。
4.权利要求1的会议系统,其中,该虚拟制作器包括媒体分级模块、媒体分析模块以及媒体选择和布局模块。
5.权利要求4的会议系统,其中,该媒体分级模块接收到特定会议的所有会议媒体的一个列表、会议媒体的一个积极参加者分级、与会议媒体相关的兴趣标记以及与会议媒体相关的触发事件的指示,并且提供所有会议媒体的原始媒体分级。
6.权利要求4的会议系统,其中,该媒体分析模块接收到所有会议媒体的原始媒体分级,并且分析所有会议媒体以提供适合于提供给消极参加者的媒体的媒体分级,该媒体分析模块使用系统规则和合作规则来分析该原始媒体分级。
7.权利要求4的会议系统,其中,该媒体选择和布局模块接收到适合于提供给所述消极参加者的媒体的媒体分级,并选择要提供给该消极参加者的媒体内容和用于所选媒体内容的一个布局。
8.权利要求1的会议系统,还包括:
多个积极参加者;以及
多个消极参加者。
9.一种支持积极和消极参加者的视频会议系统,包括:
一个定义了积极和消极参加者的客户组件;以及
一个和在该客户组件里定义的每个积极和消极参加者都有一个连接的服务器组件,该服务器组件包括:
一个虚拟制作器,用于分析会议媒体并选择要被提供给消极参加者的会议媒体,
其中,向所述消极参加者提供的所述会议媒体是基于一组积极参加者的活动和选择而由该虚拟制作器动态地确定的。
10.权利要求9的视频会议系统,其中,该虚拟制作器包括一个媒体分级模块、一个媒体分析模块以及一个媒体选择和布局模块。
11.权利要求10的视频会议系统,其中,该媒体分级模块确定被提供用于该视频会议系统中的所有媒体的原始分级,该原始分级是根据所测量和表达的、对积极参加者提供用于该视频会议系统中的媒体的兴趣,而对被提供用于该视频会议系统中的所有媒体进行的排序。
12.权利要求10的视频会议系统,其中,该媒体分析模块通过应用合作规则和系统规则来缓冲被提供用于该视频会议系统中的所有媒体的原始分级。
13.权利要求10的视频会议系统,其中,该媒体分级和布局模块选择要被提供给消极参加者的媒体内容和呈现布局。
14.一种用于确定一组多个媒体流以传递给视频会议中的参加者的方法,包括:
确定在该视频会议中所有媒体流的原始分级;
分析所有媒体流的原始分级;
过滤所有媒体流的原始分级;
从所述已被过滤的原始分级中选择一组多个媒体流;以及
向在该视频会议中的参加者传递该已被选择的该组多个媒体流。
15.权利要求14的方法,还包括:
定义对于媒体内容选择、媒体布局选择以及所表达的媒体兴趣要被监视的、在该视频会议中的一组参加者;
为该视频会议定义一组系统规则;
为该视频会议格式定义一组合作规则;以及
根据所述系统规则和所述合作规则,为所述已选择的该组多个媒体流选择一个呈现布局。
16.权利要求15的方法,还包括:
根据兴趣区域来预测在该视频会议中的所有媒体流的内容重要性,该兴趣区域是根据监视该视频会议中被定义的该组参加者的媒体内容选择、媒体布局选择以及所表达出的媒体兴趣而确定的。
17.权利要求14的方法,其中,对所有媒体流的所述原始分级的过滤是与一组系统规则和一组合作规则一致的。
18.一种在既具有积极参加者又具有消极参加者的多参加者视频会议中为消极参加者制作一个媒体呈现的方法,该方法包括:
确定在该多参加者视频会议中的所有媒体的原始媒体分级;
过滤该原始媒体分级;
从所述已被过滤的原始媒体分级中选择要被提供给消极参加者的媒体;以及
向在该多参加者视频会议中的消极参加者提供该已被选择的媒体,
其中,该多参加者视频会议系统制作媒体呈现和将该提供给消极参加者。
19.权利要求18的方法,还包括:
监视被定义的一组积极参加者中的每一位,所述监视包括媒体选择、媒体布局以及被表达出的、对被标识的媒体内容的兴趣。
20.权利要求18的方法,还包括:
为要被提供给消极参加者的所述被选择媒体来选择一个媒体布局。
21.权利要求19的方法,其中,在该多参加者视频会议中对所有媒体的原始媒体分级是:通过累积被定义的该组积极参加者的媒体选择和媒体布局以及被表达出的、对被标识的媒体内容的兴趣,而对在该多参加者视频会议中的所有媒体进行的排序。
22.权利要求18的方法,其中,对该原始媒体分级的所述过滤是按照系统规则和合作规则的。
23.一种具有程序指令用于向在多参加者视频会议中的消极参加者提供一个媒体呈现的计算机可该介质,包括:
用于确定在该视频会议中的所有媒体流的原始分级的程序指令;
用于分析所有媒体流的该原始分级的程序指令;
用于过滤所有媒体流的该原始分级的程序指令;
用于从所述已被过滤的原始分级中选择一组多个媒体流的程序指令;以及
用于向该视频会议中的所述消极参加者传递已被选择的该组多个媒体流的程序指令。
24.权利要求23的计算机可读介质,进一步包括:
用于监视在该视频会议中的一组参加者的程序指令,所述监视包括媒体内容选择、媒体布局选择以及被表达出的媒体兴趣;
用于为该视频会议定义一组系统规则的程序指令;
用于为该视频会议格式定义一组合作规则的程序指令;以及
用于根据所述系统规则和所述合作规则,而为已被选择的该组多个媒体流选择一个呈现布局的程序指令。
25.权利要求24的计算机可读介质,进一步包括:
用于根据兴趣区域而预测在该视频会议中的所有媒体流的内容重要性的程序指令,该兴趣区域是根据监视在该视频会议中所被定义的该组参加者的媒体内容选择、媒体布局选择以及表达的媒体兴趣而确定的。
26.权利要求23的计算机可读介质,其中,对所有媒体流的原始分级的所述过滤是与一组系统规则和一组合作规则一致的。
27.一种在多参加者视频会议系统中调整系统效率和带宽利用率的方法,包括:
确定在该多参加者视频会议系统中被提供的所有媒体的媒体分级;
确定在由该多参加者视频会议系统所制作的一个内容中的媒体利用率;以及
调整一个或多个媒体传递参数,包括媒体文件大小、媒体质量、媒体传递帧速率、及媒体内容的传递,
其中,对一个或多个媒体传递参数的调整是与被确定的媒体分级和利用率一致的。
28.权利要求27的在多参加者视频会议系统中调整系统效率和带宽利用率的方法,其中,该已被确定的媒体分级是通过监视在该多参加者视频会议系统中的参加者而获得的,所述监视包括媒体内容选择、媒体布局选择以及表达出的、对可标识媒体内容的媒体兴趣。
29.权利要求28的在多参加者视频会议系统中调整系统效率和带宽利用率的方法,进一步包括:
根据所标识的兴趣区域而预测在一个多参加者视频会议中所有可用媒体的内容重要性,该被标识的兴趣区域是根据监视所述被监视的参加者的媒体内容选择、媒体布局选择以及所表达的媒体兴趣而确定的,
其中,调整一个或多个媒体传递参数还与被预测的媒体内容重要性相一致。
CNB2004100447539A 2003-05-16 2004-05-17 向视频会议的被动参加者传递所制作内容的方法和系统 Expired - Fee Related CN1282365C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/440545 2003-05-16
US10/440,545 US7454460B2 (en) 2003-05-16 2003-05-16 Method and system for delivering produced content to passive participants of a videoconference

Publications (2)

Publication Number Publication Date
CN1551632A true CN1551632A (zh) 2004-12-01
CN1282365C CN1282365C (zh) 2006-10-25

Family

ID=33418021

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004100447539A Expired - Fee Related CN1282365C (zh) 2003-05-16 2004-05-17 向视频会议的被动参加者传递所制作内容的方法和系统

Country Status (3)

Country Link
US (1) US7454460B2 (zh)
JP (1) JP2004343761A (zh)
CN (1) CN1282365C (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101984662A (zh) * 2010-12-02 2011-03-09 上海华平信息技术股份有限公司 可拆分的视频会议系统及方法
WO2012062163A1 (zh) * 2010-11-08 2012-05-18 中兴通讯股份有限公司 一种视频会议的动态调整媒体内容的方法和系统
CN104737097A (zh) * 2012-03-08 2015-06-24 谷歌公司 聚合当前的、依场境和/或依成员而相关的视频会议的列表
CN105100677A (zh) * 2014-05-21 2015-11-25 华为技术有限公司 用于视频会议呈现的方法、装置和系统
CN106416233A (zh) * 2014-06-27 2017-02-15 英特尔公司 用于使用兴趣度算法进行视听通信的技术
CN116264596A (zh) * 2021-12-14 2023-06-16 丰田自动车株式会社 终端装置、终端装置的动作方法以及系统

Families Citing this family (128)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040249889A1 (en) * 2003-06-03 2004-12-09 Drommond David E. Method and system for processing interactive communications
US20050062843A1 (en) * 2003-09-22 2005-03-24 Bowers Richard D. Client-side audio mixing for conferencing
US7852998B1 (en) * 2003-10-14 2010-12-14 Tele-Town Hall, Llc System and process for mass telephony conference call
US7944861B2 (en) * 2003-10-14 2011-05-17 Tele-Town Hall, Llc System and process for mass telephony conference call
US8385526B2 (en) * 2003-10-14 2013-02-26 Tele-Town Hall, LLC. System and process for mass telephony conference call
US8091029B1 (en) 2004-05-28 2012-01-03 Adobe Systems Incorporated Presenter-only meeting canvas for collaborative electronic meeting space
US7734802B1 (en) * 2004-05-28 2010-06-08 Adobe Systems Incorporated Dynamically adaptable collaborative electronic meeting space
JP4599135B2 (ja) * 2004-11-02 2010-12-15 キヤノン株式会社 情報処理装置及び情報処理方法
US7707262B1 (en) * 2004-12-28 2010-04-27 Aol Llc Negotiating content controls
US20060221869A1 (en) * 2005-03-29 2006-10-05 Teck-Kuen Chua System and method for audio multicast
US7752253B2 (en) * 2005-04-25 2010-07-06 Microsoft Corporation Collaborative invitation system and method
US7864209B2 (en) * 2005-04-28 2011-01-04 Apple Inc. Audio processing in a multi-participant conference
US8861701B2 (en) * 2005-04-28 2014-10-14 Apple Inc. Multi-participant conference adjustments
US7817180B2 (en) * 2005-04-28 2010-10-19 Apple Inc. Video processing in a multi-participant video conference
US7692682B2 (en) 2005-04-28 2010-04-06 Apple Inc. Video encoding in a video conference
US7949117B2 (en) 2005-04-28 2011-05-24 Apple Inc. Heterogeneous video conferencing
US7899170B2 (en) * 2005-04-28 2011-03-01 Apple Inc. Multi-participant conference setup
TW200701022A (en) * 2005-06-24 2007-01-01 Era Digital Media Co Interactive news gathering and media production control system
US7734692B1 (en) * 2005-07-22 2010-06-08 Oracle America, Inc. Network collaboration system with private voice chat
US7991916B2 (en) * 2005-09-01 2011-08-02 Microsoft Corporation Per-user application rendering in the presence of application sharing
US9614977B1 (en) * 2005-12-16 2017-04-04 At&T Intellectual Property Ii, L.P. Real-time media control for audio and multimedia conferencing services
US8595304B2 (en) 2005-12-21 2013-11-26 Blackberry Limited System and method for reviewing attachment content on a mobile device
US7930354B2 (en) * 2005-12-21 2011-04-19 Research In Motion Limited System and method for reviewing attachment content on a mobile device
EP1835689B1 (en) * 2006-03-13 2014-06-04 Alcatel Lucent Context enriched communication system and method
US8769019B2 (en) * 2006-05-04 2014-07-01 Citrix Systems, Inc. Methods and systems for managing shared state within a distributed system with varying consistency and consensus semantics
US20080016156A1 (en) * 2006-07-13 2008-01-17 Sean Miceli Large Scale Real-Time Presentation of a Network Conference Having a Plurality of Conference Participants
US8266535B2 (en) 2006-09-11 2012-09-11 Broadnet Teleservices, Llc Teleforum apparatus and method
US8259624B2 (en) * 2006-10-27 2012-09-04 Cisco Technology, Inc. Dynamic picture layout for video conferencing based on properties derived from received conferencing signals
JP2008178037A (ja) * 2007-01-22 2008-07-31 Sony Corp 情報処理装置、情報処理方法及び情報処理プログラム
US8334891B2 (en) * 2007-03-05 2012-12-18 Cisco Technology, Inc. Multipoint conference video switching
US8264521B2 (en) * 2007-04-30 2012-09-11 Cisco Technology, Inc. Media detection and packet distribution in a multipoint conference
US20080273078A1 (en) * 2007-05-01 2008-11-06 Scott Grasley Videoconferencing audio distribution
JP2008282191A (ja) * 2007-05-10 2008-11-20 Hitachi Ltd 計算機システム及び第2計算機
EP2241067B1 (en) * 2008-01-10 2016-09-21 Hewlett-Packard Development Company, L.P. Multiway peer-to-peer media streaming
US20090210789A1 (en) * 2008-02-14 2009-08-20 Microsoft Corporation Techniques to generate a visual composition for a multimedia conference event
US7923829B2 (en) * 2008-05-06 2011-04-12 Mediatek Inc. Bonding pad sharing method applied to multi-chip module and apparatus thereof
US8316089B2 (en) * 2008-05-06 2012-11-20 Microsoft Corporation Techniques to manage media content for a multimedia conference event
US20100153497A1 (en) * 2008-12-12 2010-06-17 Nortel Networks Limited Sharing expression information among conference participants
US8195768B2 (en) 2008-12-29 2012-06-05 Apple Inc. Remote slide presentation
US9342231B2 (en) * 2008-12-29 2016-05-17 Apple Inc. Remote control of a presentation
US8456510B2 (en) * 2009-03-04 2013-06-04 Lifesize Communications, Inc. Virtual distributed multipoint control unit
US20100251293A1 (en) * 2009-03-31 2010-09-30 Canon Kabushiki Kaisha Network streaming of a video media from a media server to a media client
US8510462B2 (en) * 2009-03-31 2013-08-13 Canon Kabushiki Kaisha Network streaming of a video media from a media server to a media client
US8745186B2 (en) * 2009-03-31 2014-06-03 Canon Kabushiki Kaisha Network streaming of a video media from a media server to a media client
US9025497B2 (en) 2009-07-10 2015-05-05 Qualcomm Incorporated Media forwarding for a group communication session in a wireless communications system
US9088630B2 (en) * 2009-07-13 2015-07-21 Qualcomm Incorporated Selectively mixing media during a group communication session within a wireless communications system
TWI389569B (zh) * 2009-07-21 2013-03-11 Acer Inc 視訊會議訊號處理系統
US9165073B2 (en) 2009-08-17 2015-10-20 Shoutpoint, Inc. Apparatus, system and method for a web-based interactive video platform
US20110153768A1 (en) * 2009-12-23 2011-06-23 International Business Machines Corporation E-meeting presentation relevance alerts
US8456509B2 (en) * 2010-01-08 2013-06-04 Lifesize Communications, Inc. Providing presentations in a videoconference
US8447023B2 (en) * 2010-02-01 2013-05-21 Polycom, Inc. Automatic audio priority designation during conference
US20110202603A1 (en) * 2010-02-12 2011-08-18 Nokia Corporation Method and apparatus for providing object based media mixing
US8471889B1 (en) * 2010-03-11 2013-06-25 Sprint Communications Company L.P. Adjusting an image for video conference display
US8433755B2 (en) 2010-04-07 2013-04-30 Apple Inc. Dynamic designation of a central distributor in a multi-participant conference
US9955209B2 (en) * 2010-04-14 2018-04-24 Alcatel-Lucent Usa Inc. Immersive viewer, a method of providing scenes on a display and an immersive viewing system
US8670018B2 (en) * 2010-05-27 2014-03-11 Microsoft Corporation Detecting reactions and providing feedback to an interaction
US8963987B2 (en) 2010-05-27 2015-02-24 Microsoft Corporation Non-linguistic signal detection and feedback
US8711736B2 (en) 2010-09-16 2014-04-29 Apple Inc. Audio processing in a multi-participant conference
JP2012084008A (ja) * 2010-10-13 2012-04-26 Sony Corp サーバ、サーバのカンファレンスルーム管理方法およびネットワークカンファレンスシステム
US9241130B2 (en) * 2011-03-21 2016-01-19 Qwest Communications International Inc. Streaming of telepresence video content
US8624955B2 (en) * 2011-06-02 2014-01-07 Microsoft Corporation Techniques to provide fixed video conference feeds of remote attendees with attendee information
WO2013057547A1 (en) * 2011-10-21 2013-04-25 Telefonaktiebolaget Lm Ericsson (Publ) Communication methods providing media content stream selection and related system
US10875525B2 (en) 2011-12-01 2020-12-29 Microsoft Technology Licensing Llc Ability enhancement
US8934652B2 (en) 2011-12-01 2015-01-13 Elwha Llc Visual presentation of speaker-related information
US9107012B2 (en) 2011-12-01 2015-08-11 Elwha Llc Vehicular threat detection based on audio signals
US20130144619A1 (en) * 2011-12-01 2013-06-06 Richard T. Lord Enhanced voice conferencing
US9159236B2 (en) 2011-12-01 2015-10-13 Elwha Llc Presentation of shared threat information in a transportation-related context
US9368028B2 (en) 2011-12-01 2016-06-14 Microsoft Technology Licensing, Llc Determining threats based on information from road-based devices in a transportation-related context
US9053096B2 (en) 2011-12-01 2015-06-09 Elwha Llc Language translation based on speaker-related information
US9064152B2 (en) 2011-12-01 2015-06-23 Elwha Llc Vehicular threat detection based on image analysis
US9245254B2 (en) 2011-12-01 2016-01-26 Elwha Llc Enhanced voice conferencing with history, language translation and identification
US8811638B2 (en) 2011-12-01 2014-08-19 Elwha Llc Audible assistance
CN103188236B (zh) * 2011-12-30 2015-12-16 华为技术有限公司 媒体传输质量的评估方法和装置
US9277013B2 (en) 2012-05-10 2016-03-01 Qualcomm Incorporated Storing local session data at a user equipment and selectively transmitting group session data to group session targets based on dynamic playback relevance information
US9444564B2 (en) 2012-05-10 2016-09-13 Qualcomm Incorporated Selectively directing media feeds to a set of target user equipments
US9813255B2 (en) * 2012-07-30 2017-11-07 Microsoft Technology Licensing, Llc Collaboration environments and views
US20140082495A1 (en) * 2012-09-18 2014-03-20 VS Media, Inc. Media systems and processes for providing or accessing multiple live performances simultaneously
US20140114664A1 (en) * 2012-10-20 2014-04-24 Microsoft Corporation Active Participant History in a Video Conferencing System
US10897369B2 (en) * 2012-10-22 2021-01-19 International Business Machines Corporation Guiding a presenter in a collaborative session on word choice
US9806894B2 (en) * 2012-10-26 2017-10-31 International Business Machines Corporation Virtual meetings
US9800422B2 (en) * 2012-10-26 2017-10-24 International Business Machines Corporation Virtual meetings
US8902274B2 (en) * 2012-12-04 2014-12-02 Cisco Technology, Inc. System and method for distributing meeting recordings in a network environment
WO2014100374A2 (en) * 2012-12-19 2014-06-26 Rabbit, Inc. Method and system for content sharing and discovery
US9619553B2 (en) * 2013-02-12 2017-04-11 International Business Machines Corporation Ranking of meeting topics
US9467486B2 (en) * 2013-03-15 2016-10-11 Samsung Electronics Co., Ltd. Capturing and analyzing user activity during a multi-user video chat session
EP2779636A3 (en) * 2013-03-15 2015-04-01 Samsung Electronics Co., Ltd Display apparatus, server and control method thereof
US20150067047A1 (en) * 2013-09-03 2015-03-05 Cisco Technology, Inc. Providing a meeting rules template for a meeting service in a network environment
CN103580881B (zh) * 2013-11-07 2017-06-20 华为技术有限公司 虚拟会议创建方法及装置
JP6404912B2 (ja) * 2014-05-01 2018-10-17 貴弘 市橋 ライブ放送システム
US10666696B2 (en) 2014-09-05 2020-05-26 Minerva Project, Inc. System and method for a virtual conference interactive timeline
CN105592286B (zh) * 2014-10-22 2019-03-01 阿里巴巴集团控股有限公司 即时通信界面信息处理方法及装置
KR102335207B1 (ko) * 2014-12-08 2021-12-03 삼성전자 주식회사 전자 장치 및 그의 소셜 미디어 컨텐츠 제공 방법
US10061467B2 (en) 2015-04-16 2018-08-28 Microsoft Technology Licensing, Llc Presenting a message in a communication session
RU2602667C1 (ru) * 2015-04-21 2016-11-20 Федеральное государственное казенное военное образовательное учреждение высшего образования "Академия Федеральной службы охраны Российской Федерации" (Академия ФСО России) Способ мультимедийного вывода
US9870755B2 (en) * 2015-05-22 2018-01-16 Google Llc Prioritized display of visual content in computer presentations
JP6601036B2 (ja) 2015-07-24 2019-11-06 富士通株式会社 ミーティング支援方法、ミーティング支援装置およびミーティング支援プログラム
US9641563B1 (en) 2015-11-10 2017-05-02 Ricoh Company, Ltd. Electronic meeting intelligence
US11120342B2 (en) 2015-11-10 2021-09-14 Ricoh Company, Ltd. Electronic meeting intelligence
JP6713537B2 (ja) * 2015-12-04 2020-06-24 スリング メディア, エルエルシー.Sling Media, Llc. 複数のメディアストリームの処理
US10116801B1 (en) 2015-12-23 2018-10-30 Shoutpoint, Inc. Conference call platform capable of generating engagement scores
US10860985B2 (en) 2016-10-11 2020-12-08 Ricoh Company, Ltd. Post-meeting processing using artificial intelligence
US10510051B2 (en) 2016-10-11 2019-12-17 Ricoh Company, Ltd. Real-time (intra-meeting) processing using artificial intelligence
US11307735B2 (en) 2016-10-11 2022-04-19 Ricoh Company, Ltd. Creating agendas for electronic meetings using artificial intelligence
US10572858B2 (en) * 2016-10-11 2020-02-25 Ricoh Company, Ltd. Managing electronic meetings using artificial intelligence and meeting rules templates
US10375130B2 (en) 2016-12-19 2019-08-06 Ricoh Company, Ltd. Approach for accessing third-party content collaboration services on interactive whiteboard appliances by an application using a wrapper application program interface
US10509964B2 (en) * 2017-01-11 2019-12-17 Microsoft Technology Licensing, Llc Toggle view functions for teleconferencing sessions
US10389974B2 (en) * 2017-01-16 2019-08-20 Microsoft Technology Licensing, Llc Switch view functions for teleconference sessions
US10541824B2 (en) * 2017-06-21 2020-01-21 Minerva Project, Inc. System and method for scalable, interactive virtual conferencing
US10708320B2 (en) * 2017-06-27 2020-07-07 Atlassian Pty Ltd Selective internal forwarding in conferences with distributed media servers
US11030585B2 (en) 2017-10-09 2021-06-08 Ricoh Company, Ltd. Person detection, person identification and meeting start for interactive whiteboard appliances
US10553208B2 (en) 2017-10-09 2020-02-04 Ricoh Company, Ltd. Speech-to-text conversion for interactive whiteboard appliances using multiple services
US10552546B2 (en) 2017-10-09 2020-02-04 Ricoh Company, Ltd. Speech-to-text conversion for interactive whiteboard appliances in multi-language electronic meetings
US11062271B2 (en) 2017-10-09 2021-07-13 Ricoh Company, Ltd. Interactive whiteboard appliances with learning capabilities
US10956875B2 (en) 2017-10-09 2021-03-23 Ricoh Company, Ltd. Attendance tracking, presentation files, meeting services and agenda extraction for interactive whiteboard appliances
US10757148B2 (en) 2018-03-02 2020-08-25 Ricoh Company, Ltd. Conducting electronic meetings over computer networks using interactive whiteboard appliances and mobile devices
US11263384B2 (en) 2019-03-15 2022-03-01 Ricoh Company, Ltd. Generating document edit requests for electronic documents managed by a third-party document management service using artificial intelligence
US11573993B2 (en) 2019-03-15 2023-02-07 Ricoh Company, Ltd. Generating a meeting review document that includes links to the one or more documents reviewed
US11720741B2 (en) 2019-03-15 2023-08-08 Ricoh Company, Ltd. Artificial intelligence assisted review of electronic documents
US11080466B2 (en) 2019-03-15 2021-08-03 Ricoh Company, Ltd. Updating existing content suggestion to include suggestions from recorded media using artificial intelligence
US11392754B2 (en) 2019-03-15 2022-07-19 Ricoh Company, Ltd. Artificial intelligence assisted review of physical documents
US11270060B2 (en) 2019-03-15 2022-03-08 Ricoh Company, Ltd. Generating suggested document edits from recorded media using artificial intelligence
US11514924B2 (en) * 2020-02-21 2022-11-29 International Business Machines Corporation Dynamic creation and insertion of content
US11689696B2 (en) 2021-03-30 2023-06-27 Snap Inc. Configuring participant video feeds within a virtual conferencing system
US11943072B2 (en) 2021-03-30 2024-03-26 Snap Inc. Providing a room preview within a virtual conferencing system
US11412180B1 (en) * 2021-04-30 2022-08-09 Zoom Video Communications, Inc. Generating composite presentation content in video conferences
US11405448B1 (en) 2021-08-23 2022-08-02 Verizon Patent And Licensing Inc. Systems and methods for adaptively improving the perceived quality of a video conference by passive users
US11979244B2 (en) 2021-09-30 2024-05-07 Snap Inc. Configuring 360-degree video within a virtual conferencing system
US20230208894A1 (en) * 2021-12-28 2023-06-29 Google Llc Integrating a video feed with shared documents during a conference call discussion

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5657246A (en) 1995-03-07 1997-08-12 Vtel Corporation Method and apparatus for a video conference user interface
US5724508A (en) 1995-03-09 1998-03-03 Insoft, Inc. Apparatus for collaborative computing
US5737011A (en) 1995-05-03 1998-04-07 Bell Communications Research, Inc. Infinitely expandable real-time video conferencing system
US5896128A (en) 1995-05-03 1999-04-20 Bell Communications Research, Inc. System and method for associating multimedia objects for use in a video conferencing system
US5657096A (en) 1995-05-03 1997-08-12 Lukacs; Michael Edward Real time video conferencing system and method with multilayer keying of multiple video images
US6343313B1 (en) 1996-03-26 2002-01-29 Pixion, Inc. Computer conferencing system with real-time multipoint, multi-speed, multi-stream scalability
EP0906695A4 (en) 1996-06-21 1999-06-16 Bell Communications Res SYSTEM AND METHOD FOR ASSOCIATING MULTIMEDIA OBJECTS
US5963547A (en) 1996-09-18 1999-10-05 Videoserver, Inc. Method and apparatus for centralized multipoint conferencing in a packet network
JPH10150647A (ja) 1996-11-19 1998-06-02 Fujitsu Ltd ビデオ会議システム
US6075571A (en) 1997-07-29 2000-06-13 Kuthyar; Ashok K. Composite image display device and service for video conferencing
WO1999016305A1 (en) * 1997-09-26 1999-04-08 Cb Worldwide, Inc. Pet training mat
US5999966A (en) 1997-10-07 1999-12-07 Mcdougall; Floyd Control network-directed video conferencing switching system and method
US6006253A (en) 1997-10-31 1999-12-21 Intel Corporation Method and apparatus to provide a backchannel for receiver terminals in a loosely-coupled conference
US6119147A (en) 1998-07-28 2000-09-12 Fuji Xerox Co., Ltd. Method and system for computer-mediated, multi-modal, asynchronous meetings in a virtual space
US6330022B1 (en) * 1998-11-05 2001-12-11 Lucent Technologies Inc. Digital processing apparatus and method to support video conferencing in variable contexts
US7007235B1 (en) * 1999-04-02 2006-02-28 Massachusetts Institute Of Technology Collaborative agent interaction control and synchronization system
US6507865B1 (en) * 1999-08-30 2003-01-14 Zaplet, Inc. Method and system for group content collaboration
US6300973B1 (en) * 2000-01-13 2001-10-09 Meir Feder Method and system for multimedia communication control
US6980526B2 (en) 2000-03-24 2005-12-27 Margalla Communications, Inc. Multiple subscriber videoconferencing system
US6473114B1 (en) * 2000-04-14 2002-10-29 Koninklijke Philips Electronics N.V. Method and system for indicating change of speaker in a videoconference application
CN1427969A (zh) * 2000-05-01 2003-07-02 网际运行公司 借助大量通信网络的大群体交互
US20060064716A1 (en) * 2000-07-24 2006-03-23 Vivcom, Inc. Techniques for navigating multiple video streams
US7007098B1 (en) * 2000-08-17 2006-02-28 Nortel Networks Limited Methods of controlling video signals in a video conference
US20020073151A1 (en) 2000-12-01 2002-06-13 Rogers Edwin H. Collaboration system
US6590603B2 (en) * 2001-10-31 2003-07-08 Forgent Networks, Inc. System and method for managing streaming data
WO2003049418A2 (en) * 2001-12-04 2003-06-12 Polycom, Inc. Method and an apparatus for mixing compressed video
US6922718B2 (en) * 2002-02-01 2005-07-26 Dell Products L.P. Method and system for participating locations in a multi-point video conference
US7362349B2 (en) * 2002-07-10 2008-04-22 Seiko Epson Corporation Multi-participant conference system with controllable content delivery using a client monitor back-channel

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012062163A1 (zh) * 2010-11-08 2012-05-18 中兴通讯股份有限公司 一种视频会议的动态调整媒体内容的方法和系统
CN101984662A (zh) * 2010-12-02 2011-03-09 上海华平信息技术股份有限公司 可拆分的视频会议系统及方法
CN104737097B (zh) * 2012-03-08 2017-12-26 谷歌公司 聚合当前的、依场境和/或依成员而相关的视频会议的列表
CN104737097A (zh) * 2012-03-08 2015-06-24 谷歌公司 聚合当前的、依场境和/或依成员而相关的视频会议的列表
US9959523B2 (en) 2012-03-08 2018-05-01 Google Llc Aggregating a list of current, contextually and/or member-wise relevant video conferences
CN105100677A (zh) * 2014-05-21 2015-11-25 华为技术有限公司 用于视频会议呈现的方法、装置和系统
CN106416233A (zh) * 2014-06-27 2017-02-15 英特尔公司 用于使用兴趣度算法进行视听通信的技术
US10440071B2 (en) 2014-06-27 2019-10-08 Intel Corporation Technologies for audiovisual communication using interestingness algorithms
CN106416233B (zh) * 2014-06-27 2020-04-10 英特尔公司 用于视听通信的视听服务器、方法、设备
US10972518B2 (en) 2014-06-27 2021-04-06 Intel Corporation Technologies for audiovisual communication using interestingness algorithms
US11374991B2 (en) 2014-06-27 2022-06-28 Intel Corporation Technologies for audiovisual communication using interestingness algorithms
US11863604B2 (en) 2014-06-27 2024-01-02 Intel Corporation Technologies for audiovisual communication using interestingness algorithms
CN116264596A (zh) * 2021-12-14 2023-06-16 丰田自动车株式会社 终端装置、终端装置的动作方法以及系统

Also Published As

Publication number Publication date
US20040230651A1 (en) 2004-11-18
CN1282365C (zh) 2006-10-25
US7454460B2 (en) 2008-11-18
JP2004343761A (ja) 2004-12-02

Similar Documents

Publication Publication Date Title
CN1282365C (zh) 向视频会议的被动参加者传递所制作内容的方法和系统
JP6734852B2 (ja) イベントを追跡し、仮想会議のフィードバックを提供するシステム及び方法
US10541824B2 (en) System and method for scalable, interactive virtual conferencing
EP0958701B1 (en) Communication method and terminal
Standaert et al. An empirical study of the effectiveness of telepresence as a business meeting mode
AU2011214952B2 (en) Public collaboration system
CN109661676A (zh) 计算机辅助的视频会议的议程
DE102011014232A1 (de) System and method for predicting meeting subjects logistics and resources
JP2003532220A (ja) 大規模グループ対話
KR20150020570A (ko) 다중 미디어 피드를 위한 조정 메커니즘을 이용하는 실시간 복합 방송 시스템 및 방법
KR20170023115A (ko) 통신들 및 관련 기능들의 채팅―기반 지원
CN1459062A (zh) 用于根据参与者的选择和环境来识别和建立通信的较佳模态或信道的系统和方法
US20120324355A1 (en) Synchronized reading in a web-based reading system
Møller Hartley The online journalist between ideals and audiences: Towards a (more) audience-driven and source-detached journalism?
DE112021005731T5 (de) Mechanismus zum intelligenten puffern von anfragen
CN117616748A (zh) 具有多种空间交互模式的视频会议系统
DE202017105869U1 (de) Kontextabhängige automatische Gruppierung
RU2580396C2 (ru) Способ проведения виртуальных совещаний, система для проведения виртуальных совещаний, интерфейс участника виртуального совещания
US20220360836A1 (en) User defined content summary channel
CN103686223B (zh) 一种根据用户反馈信息提供视频访问服务的方法和设备
Nansen et al. Digital ethnographic techniques in domestic spaces: Notes on methods and ethics
DE102022202645A1 (de) Systeme und verfahren zur bereitstellung elektronischer ereignisinformationen
KR101677805B1 (ko) 소셜 러닝을 통한 러닝 콘텐츠 수집 및 제공 방법, 이를 위한 사용자 단말 및 소셜 러닝 서버
JP6604679B1 (ja) 会議支援システム、会議支援プログラム、および会議支援方法
Zhao Opportunistic Interfaces for Promoting Community Awareness

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1071826

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1071826

Country of ref document: HK

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20061025

Termination date: 20160517