CN101627576A - 多点会议视频切换 - Google Patents
多点会议视频切换 Download PDFInfo
- Publication number
- CN101627576A CN101627576A CN200880007368A CN200880007368A CN101627576A CN 101627576 A CN101627576 A CN 101627576A CN 200880007368 A CN200880007368 A CN 200880007368A CN 200880007368 A CN200880007368 A CN 200880007368A CN 101627576 A CN101627576 A CN 101627576A
- Authority
- CN
- China
- Prior art keywords
- audio signal
- audio
- signal
- audio signals
- conference site
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005236 sound signal Effects 0.000 claims abstract description 186
- 230000000694 effects Effects 0.000 claims abstract description 71
- 238000000034 method Methods 0.000 claims abstract description 26
- 238000005259 measurement Methods 0.000 claims description 7
- 230000004044 response Effects 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 4
- 230000004069 differentiation Effects 0.000 claims 1
- 238000004891 communication Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 230000000712 assembly Effects 0.000 description 3
- 238000000429 assembly Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000007906 compression Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000012952 Resampling Methods 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 230000006837 decompression Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L12/00—Data switching networks
- H04L12/02—Details
- H04L12/16—Arrangements for providing special services to substations
- H04L12/18—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast
- H04L12/1813—Arrangements for providing special services to substations for broadcast or conference, e.g. multicast for computer conferences, e.g. chat rooms
- H04L12/1822—Conducting the conference, e.g. admission, detection, selection or grouping of participants, correlating users to one or more conference sessions, prioritising transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/60—Network streaming of media packets
- H04L65/75—Media network packet handling
- H04L65/752—Media network packet handling adapting media to network capabilities
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/56—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities
- H04M3/568—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants
- H04M3/569—Arrangements for connecting several subscribers to a common circuit, i.e. affording conference facilities audio processing specific to telephonic conferencing, e.g. spatial distribution, mixing of participants using the instant speaker's algorithm
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
- H04L65/40—Support for services or applications
- H04L65/403—Arrangements for multi-party communication, e.g. for conferences
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Engineering & Computer Science (AREA)
- Telephonic Communication Services (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
一种方法包括接收多个音频信号,其中音频信号各自包括多个分组,分组包含与会议参与者相关联的语音数据。这些音频信号中的一个或多个音频信号与视频信号相关联,并且这些音频信号中的至少一个音频信号与仅限语音会议参与者相关联。该方法还包括确定多个音频信号中的每一个音频信号的活动性度量,其中,活动性度量指示音频信号与当前正在讲话的会议参与者相关联的置信值。该方法还包括针对多个音频信号中的每一个音频信号,利用活动性度量对多个分组中的一个或多个分组进行编码,并且向会议桥发送利用活动性度量编码后的多个音频信号。
Description
相关申请
本申请要求2007年3月5日提交的美国临时申请No.60/892,964的权益。
技术领域
本发明一般涉及会议系统。
背景技术
在传统多点视频会议中,存在从各个终端向会议桥(conferencebridge)发送的一个视频流和一个音频流。通常,会议桥对来自各个终端的音频流进行解码来确定语音活动性(voice activity)。具有最高语音活动性的终端,或最大声的发言者被标记为活动参与者(activeparticipant)。这可以通过将语音活动性测量编码进音频流的分组中来得到辅助。根据可以在远程会议站点处显示的视频片段的数目,与活动参与者相关联的许多视频流可以被解码和被重新编码以用于在一个或多个远程站点显示。可替换地,视频片段可以被简单地重新路由到会议站点而不重新编码。
在某些会议系统中,最活动的音频流可以被混合以用于分发给远程会议站点。更先进的会议系统可以执行多重混合以防止在存在活动发言者或活动性的本地站点中的回波(echo)效应。因此,每一个具有活动发言者的会议站点可以接收唯一混合后的音频流,该混合后的音频流仅包括位于一个或多个远程会议站点的活动发言者的语音。
假定在单个多点会议中可以产生的无数个可能音频流,则对这些流进行编码和解码可能是计算上要求很高的任务。因此,某些多点会议系统可以利用活动性度量来给音频数据的分组或帧加标签(tag),使得会议桥容易快速判定哪些音频流是活动的,而不必对音频进行实际解码。其它多点会议系统可以分析分组有效载荷的关键部分来确定语音活动性,而没有计算上麻烦的对分组的活动性进行解码和测量的处理。
附图说明
图1A示出用于执行多点会议的示例通信系统;
图1B示出用于执行多点会议的示例站点;
图2示出用于辅助多点会议的示例会议桥;以及
图3是示出用于多点会议期间的视频切换的示例方法的流程图。
具体实施方式
概览
在一个实施例中,一种方法包括接收多个音频信号,这些音频信号各自包括多个分组,分组包含与会议参与者相关联的语音数据。音频信号中的一个或多个音频信号与视频信号相关联并且音频信号中的至少一个音频信号与仅限语音(voice-only)会议参与者相关联。该方法还包括确定多个音频信号中的每一个音频信号的活动性度量,其中,活动性度量指示音频信号与当前正在讲话的会议参与者相关联的置信值(confidence value)。该方法还包括针对多个音频信号中的每一个音频信号,利用活动性度量对多个分组中的一个或多个分组进行编码,并且向会议桥发送利用活动性度量编码后的多个音频信号。
在另一个实施例中,一种方法包括从多个会议站点中的一个或多个会议站点接收利用活动性度量编码后的多个音频信号。活动性度量指示音频信号与当前正在讲话的会议参与者相关联的置信值。此外,音频信号中的一个或多个音频信号与视频信号相关联,并且音频信号中的至少一个音频信号与仅限语音会议参与者相关联。该方法还包括基于各自的活动性度量来确定最活动的信号,并且向多个会议站点中的一个或多个会议站点发送多个最活动的音频信号。
描述
图1A是用于执行各个位置的参与者之间的多点会议的示例通信系统10。所示出的实施例包括可以支持远程位置的站点110a-110d之间的会议的通信网络100。还示出了会议桥120,会议桥120辅助参与会议的站点110之间的音频和/或视频信号通信。在图1B中提供了站点110的示例实施例。这里使用的“会议”可以包括使用任何音频和/或视频手段(包括通过语音和/或视频装置、文本聊天和即时消息传递来传送的信号、数据或消息)传送的、多个用户之间的任何通信会话。
通信网络100表示通信设备,包括用于对耦合到通信网络100的元件进行互连的硬件和任何合适的控制逻辑。一般,通信网络100可以是能够传送音频和/或视频电信信号、数据和/或消息的任何网络。因此,通信网络100可以包括以下网络的全部或部分:无线电接入网(RAN);公共电话交换网(PSTN);公共或私有数据网;局域网(LAN);城域网(MAN);广域网(WAN);诸如因特网之类的局部、区域或全球通信网或计算机网;有线或无线网络;企业内部网;或前述网络的任何组合。为了辅助所述通信能力,通信网络100可以包括:路由器、集线器、交换机、网关、呼叫控制器,和/或任何适当形式或布置的任何其它适当的组件。此外,通信网络100可以表示被配置为以数据的分组、信元、帧、段或其它部分的形式来传送信息的任何硬件和/或软件。尽管通信网络100被示为单个网络,但是通信网络100可以包括任何数目或任何配置的网络。此外,通信系统10可以包括任何数目或任何配置的通信网络100。
会议桥120用作多点会议期间的中间媒介(intermediary)。在操作中,会议桥120用作对站点110之间的媒体信号进行互连的管道。具体而言,会议桥120可以收集站点110处产生的音频和/或视频信号并且将所述信号分发给参与多点会议的其它站点110。会议桥120可以被配置为支持任何数目的在任何数目的会议上进行通信的站点。此外,会议桥120可操作用于将远程音频和/或视频信号指派给本地站点110处的特定会议装置。为了辅助所述功能,会议桥120可以包括在支持多点会议(包括视频会议)中所使用的任何桥接或交换装置。在各种实施例中,会议桥120可以包括硬件、软件和/或嵌入式逻辑,例如,一个或多个编解码器。在某些实施例中,会议桥120的各种组件和/或功能可以分布于整个通信系统10,例如,在站点110处。
图1B是站点110的简化图。在所示出的实施例中,站点110包括会议设备140,会议设备140辅助本地用户130和远程站点110处的参与者之间的会议。尽管图1B中所示出的站点110具有特定数目和配置的各种组件,但是站点110可以包括任何数目、任何组合或布置的这种装置。
用户130a-130c表示可以出席会议的一个或多个个人或个人群组。用户130可以使用任何适当的装置和/或组件来参加视频会议,例如,音频因特网协议(IP)电话、视频电话用具、基于个人计算机(PC)的视频电话和流式传输(streaming)客户端。在会议期间,用户130可以作为发言者或作为非发言者的参与者来参加会话。
会议设备140可以包括用于建立和支持视频会议的任何合适的元件。在所示出的实施例中,会议设备140包括监视器142、扩音器144、摄像机146、麦克风148、辅助音频输入端口(AAIP)150和会议管理器160。尽管未明确示出,但是会议设备140还可以包括用于远程位置之间的会议的一个或多个网络接口、存储器、处理器、编解码器或任何其它适当的硬件或软件。在操作中,会议设备140可以使用诸如会话发起协议(SIP)或国际电信联盟(ITU)建议H.323之类的任何适当的技术和/或协议来建立视频会议会话。此外,会议设备140可以支持其它支持诸如H.261、H.263和/或H.264之类的其它标准的视频系统,并且是可与这些其它视频系统互操作的。
监视器142a-142c可以包括辅助接收视频信号并且将与一个或多个远程会议参与者相关联的图像显示给本地站点110处的用户130的任何适当的硬件和/或软件。监视器142的示例可以包括笔记本PC、安装在墙上的监视器、安装在地面的监视器或自由直立式监视器。监视器142可操作用于使用诸如高清晰之类的提供真实图像的任何适当的技术来显示根据视频信号的图像。
扩音器144a-144c表示可操作用于将由远程会议站点110处的麦克风148所产生的音频信号变换成声音的机电装置。具体地,扩音器144可以在会议期间本地广播一个或多个正在发言的远程参与者的语音。根据一个实施例,站点处的每个监视器142有一个扩音器144。在某些实施例中,扩音器144可以与会议设备140的其它组件(例如,监视器142)相结合。此外,站点110可以包括更多或更少扩音器144。
摄像机146a-146c可以包括用于捕获并且产生一个或多个用户130和周围区域的图像的任何适当的硬件和/或软件。在操作中,每个摄像机146可以产生图像流并且将该流作为视频信号进行发送。由摄像机146产生的视频信号可以被压缩并且在远程站点110处被接收。远程站点110可以解压缩该视频信号以用于通过监视器142进行显示。尽管所示出的站点110的实施例包括产生三个视频信号的3个摄像机142,但是特定实施例可以包括产生任何数目的视频信号的更多或更少摄像机142。
麦克风148a-148d表示可操作用于将声音变换成电信号的任何声电换能器(transducer)或传感器。在操作中,每个麦克风148可以捕获本地站点110处的一个或多个本地用户130的语音并且将其变换成音频信号,以用于传送到远程站点110。在远程站点110被接收到后,该音频信号可以由扩音器144进行广播。尽管所示出的实施例指示出存在用于每个用户130的麦克风146,但是特定站点110可以具有比用户130更多或更少的麦克风。此外,在某些实施例中,麦克风148可以与会议设备140的任何其它组件(例如,摄像机146)相结合。
辅助音频输入端口(AAIP)150可以是可操作用于接收、产生和/或发送辅助音频信号的输入/输出信道。具体地,AAIP 150可以用作辅助麦克风148d或其它音频装置的输入端口。辅助麦克风148d的典型应用可以是用于手持或颈挂式(佩戴式)无线麦克风。AAIP 150也可以表示本地音频源的输入,该本地音频源例如是来自DVD播放器的视听表示或音频分量。在实施例中,AAIP 150可以用作使得仅限语音会议参与者能够远程呼入会议的拨号音频端口。因此,与桥或其它会议集线器不同地,仅限语音拨号参与者可以通过直接呼入站点110来参加会议会话。尽管AAIP 150被示为独立装置,但是AAIP 150可以与会议设备140的任何组件(例如,会议管理器160)集成。
会议管理器160可以传送通信网络100与站点110之间的信息和信号。一般,会议管理器160可以表示用于管理会议的任何适当的硬件和/或软件。会议管理器160的特定实施例可以包括一个或多个处理器、存储器、接口或编解码器。在操作中,会议管理器160可以通过会议桥120来在站点110之间发送和接收包含会议媒体的信号。关于站点110,会议管理器160可以向会议桥120传送4个音频信号和3个视频信号。类似地,会议管理器160也可从会议桥120接收至少4个音频信号和3个视频信号。4个所传送的音频信号可以是由3个麦克风146a-146c产生的并且可以是以下任何内容的混合:a)AAIP 150麦克风,b)来自像DVD播放器一样的播放装置的辅助音频输入,和c:仅限音频拨号信号;而3个视频信号可以是由摄像机144a-144c产生的。
在特定实施例中,会议管理器160可以利用使用Franhofer低延迟音频编解码器(AAC-LD)的、48KHz的高质量编解码器对音频信号进行编码。由AAIP 150产生的音频信号可以从8KHz采样率被重新采样并变到48KHz采样率。以这种方式,多个辅助音频输入可以被混合以产生单个辅助音频流。
如图1B中所示,会议管理器160包括处理器162和存储器164。处理器162可以执行与由会议管理器160提供的服务相关联的命令和指令。处理器162的示例包括专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)和任何其它适当的专用或通用处理器的组合。存储器164可以存储由会议管理器160使用的处理器指令和/或任何其它适当的信息。这样的信息可以包括信号处理指令、编码算法、信号混合指令和任何压缩/解压缩协议。
为了辅助多个用户130之间的会议,站点110可以划分成多个区112。在所示实施例中,站点110划分成:左区112a、中心区112b和右区112c。为了此说明书的目的,从面向监视器142的用户130的角度来定义左和右的空间约定。如所示的,每个区包括服务该区中的一个或多个用户130的各种会议设备组件。具体地,每个区112包括监视器142、扩音器144、摄像机146和麦克风148。服务每个区的会议设备可以与在本地站点110处产生并且在远程站点110处被接收到用于广播的特定信道相关联。如将更详细描述的,信道对应于要在站点110的特定区112中广播和/或显示的音频和/或视频信号。关于由AAIP 150产生的音频信号,辅助信道可以对应于要由辅助扩音器广播和/或要被混合并且通过特定区中的各个扩音器144广播的音频信号。因此,辅助信道可以由单个区112、多个区112的组合或不与区相关联的分离的辅助装置中的扩音器144广播。
如图1B中所示,摄像机146a-146c和麦克风148a-148c分别与区112a-112c相关联。因此,给定麦克风148可以产生包含位于相应区112中的一个或多个用户130的语音的音频信号,并且摄像机146可以产生包含相应区112中的(一个或多个)用户130的图像的视频信号。更具体而言,由麦克风148a-148c中的每一个产生的音频信号可以分别对应于由摄像机146a-146c产生的视频信号。因此,由站点110发送的每个信道可以包含与位于特定区112中的相同的(一个或多个)用户130相关联的音频信号和视频信号。
与摄像机146和麦克风148相似,监视器142a-142c和扩音器144a-144c分别与区112a-112c相关联。因此,监视器142可以显示位于特定区112中的远程用户130的图像,而扩音器144同时广播相同远程用户130的语音。在会议期间,监视器142和扩音器144可以分别显示和广播远程参与者的图像和语音,使得本地用户130看到并听到远程参与者,就像远程参与者直接在会议桌对面一样。为了提供上述空间一致性,在本地站点处广播相应信道的区可以与和该信道相关联的远程用户所位于的区相对。为了清楚,如所提到的,信道对应于要在特定区112中被广播和/或被显示的音频和/或视频信号。因此,左信道对应于要通过本地左区112a中的扩音器和/或监视器被广播的音频和/或视频信号。当位于会议站点110中时,本地用户130的空间方位左对于远程用户130的空间方位右,并且反之亦然。因此,在站点110之间的多点或点对点会议中,与左信道相关联的音频和视频信号可以由位于远程右区的会议设备产生。因此,由本地右区112c中的摄像机148c产生的视频信号可以由位于远程左区112a的监视器142a显示。该相对法可以保证所产生的音频和视频信号与所广播的音频和视频信号之间的空间一致性。因此,位于左区112a的用户130可以通过监视器142a观看远程用户,就像远程用户130直接位于会议桌对面一样。
为了维持空间一致性,可以利用空间标识符来对所发送的音频和视频分组进行编码。空间标识符可以指示源区112和/或目的地区112。因此,空间标识符可以辅助音频和视频信号的路由和分发。在某些实施例中,空间标识符可以是分组头的一部分,因此允许分组被路由,而不必对有效载荷进行解码。在某些实施例中,例如可以由麦克风148、摄像机146、AAIP 150和/或会议管理器160执行编码。
在会议期间,AAIP 150和/或会议管理器160也可以操作用于利用活动性度量来对与音频信号相关联的音频分组进行编码。活动性度量可以是可以用来确定活动信道的置信值或声学测量(acoustic measurements)。活动信道是对应于当前正在讲话的会议参与者(即,活动发言者)的音频和/或视频信号。活动性度量可以是基于特定语音的相对响度(即,分贝水平)来测量和/或计算的。在某些模式的操作中,特定信号的活动性度量可以是动态的。因此,在用户130停止发言或另一用户130开始发言后,可以相应地调整被编码在每个信号的各个音频分组中的活动性度量。与空间标识符的编码一样,活动性度量可以被包括在分组头的部分中。因此,可以不需要对音频信号的解码和/或对音频信号的解压缩来识别编码后活动性度量。
在某些实施例中,活动性度量可以虑及电子欺骗(spoofing)。这里使用的电子欺骗是指部分由于误认了来自相邻区112的声音活动性而引起的活动性度量的任何差错。一般,存在至少3种引起电子欺骗的活动性:1)由相邻讲话者产生的声音能量;2)麦克风之间的敏感度差异;和3)由站点处的混响(reverberation)引起的残余能量。关于由相邻讲话者产生的电子欺骗,由于区12可能不是实际的物理屏障,所以麦克风148可能从位于相邻区112的发言者捕获残余声音。如果给定麦克风148比一个或多个其它麦克风148更加敏感,则会发生相似的结果。作为示例,如果麦克风148a比麦克风148b稍微地更加敏感,则麦克风148a可能被邻近区112a和112b的边界的发言者欺骗。关于混响,主要考虑用户130结束发言之后在站点110中回荡(linger)的声音能量。例如,几乎在话语结束之后的同时,由于墙对声波的反弹,靠近墙的麦克风148的声音能量可能具有比站点中间处的麦克风更高的声音能量读出。
考虑到电子欺骗,可以部分地基于由多个麦克风148收集的声学数据来定义活动性度量。具体地,会议管理器160可以接收来自每个麦克风148的音频信号和来自AAIP 150的仅限语音音频信号,并且确定各个活动性度量。与仅基于来自每个麦克风148的单一测量来确定活动性度量相比较,使用来自多个麦克风的测量来定义各个活动性度量可以允许更精确的活动讲话者确定。更具体而言,活动性度量可以区分各个区中的声音活动性。作为示例,如果区112a中的用户130a当前正在发言,则麦克风148a-148c可以各自收集与用户130的语音相关联的声波。由于用户130a离麦克风148a最接近,所以分贝水平可能在麦克风148a处最高、在麦克风148b处较低、并且在麦克风148c处最低。如果各个麦克风148a-148c向其各自的音频信号单独指派活动性度量,则存在关于以下问题的不确定性:麦克风148c处的低分贝水平是否是由以柔和的语音发言的用户130c引起的,是不是因为麦克风148a更敏感,或者麦克风148c是否正在从混响或在其相应区的外部的发言者收集残余声波。因此,考虑到电子欺骗,可以采用一种或多种算法来确定麦克风148中的每一个麦克风的活动性度量。(一种或多种)算法权衡的因素包括:麦克风敏感度、麦克风之间的测量/读出延迟、静态背景噪声以及每个麦克风148处的相应分贝测量。尽管提供了具体因素,但是可以使用可以辅助对一个或多个活动讲话者的精确确定的任何因素。
现在返回图1A,在会议期间,会议桥120可以部分地基于编码到各种音频流中的活动性度量来向站点110a-110d分发音频和视频信号。具体地,会议桥120可以使用被加标签到从远程站点110接收到的各种音频信号的分组的活动性度量来确定最活动的信道(即,对应于正在发言的会议参与者的音频和/或视频信号)。因此,会议桥120不必对音频和/或视频数据进行解码来确定活动信道。如之前所述,信道可以对应于要在站点110的特定区112中广播的音频和/或视频信号。在最活动的信道被确定之后,会议桥120可以将与这些信道相关联的各个音频和视频信号路由到一个或多个远程站点110。将所路由的信道限制于最活动的信道可以减小服务远程站点110所需要的带宽。此外,避免对各个音频信道的解码可以减小整个音频延迟。
在图1A和图1B中所示的实施例中,会议桥120一般可以向每个站点110分发4个音频信道。这些信道可以具有各种组合并且可以源自各个站点110。例如,两个信道可以是来自AAIP 150的辅助信道,一个信道可以是来自中心区112b的麦克风148b,并且另一个信道可以是来自右麦克风148c。在某些情况下,各个信道可以源自不同站点110。在特定情况中,最活动的信道可以全是左信道并且源自每个站点110的右区112c。在这种情况下,各个左音频信号可以被混合并通过左扩音器144a广播。可替换地,与被选择用来显示在左监视器142a上的视频信号相关联的左音频信号可以专门通过左扩音器144a被播放,并且其它左信道音频信号可以通过辅助扬声器(未示出)被广播。在辅助信道是最活动的信道中的一个的情况中,辅助信道音频信号可以与通过扩音器144a-144c中的每一个广播的各个音频信号混合。在某些实施例中,辅助信道可以通过单独的辅助扩音器被广播。
如所提到的,音频信号可以被混合并且之后从单个扩音器144被广播。在某些实施例中,可以在路由之前,在会议桥120处执行对信号的混合。可替换地,可以由站点110处的会议管理器160执行混合。在具体实施例中,会议管理器160可以在向会议桥120发送信号之前混合音频信号。作为示例,如果多个仅限语音的参与者正通过AAIP 150参与会议,则会议管理器160可以混合多个辅助音频信号并且通过单个辅助信道来发送它们。与之相比,会议管理器160也可以在接收到从会议桥120所路由的信号之后混合音频信号。在这样的实施例中,与各个音频信号相关联的音频分组可以被编码以指示混合应当发生。作为示例,音频分组中的每一个分组可以包含用来指示音频信号与特定视频信号相关联的代码字段。此外,该代码字段也可以指示相关联的信道。因此,当会议管理器160接收与特定信道相关联的多个音频信号而没有接收用于各个音频信号的相应视频信号时,会议管理器160可以混合各个音频信号。会议管理器160之后可以将混合后的音频信号转发给适当的(一个或多个)扩音器144以用于广播。
在一个实施例中,会议桥可以向每个站点110发送N+1个音频信道和N个视频信道。附加的音频信道可以用作活动讲话者的过渡直到活动视频信号切换为止。作为示例,假定在站点110a-110d之间的视频会议期间的给定时间,基于活动性度量的4个最活动的信道是两个左信道、一个中心信道和一个右信道。由于左监视器仅可以显示来自单个左信道的视频信号,所以会议桥120可以选择与两个活动的左信道中最活动的左信道相关联的视频信号以用于传送。然而,会议桥120仍然可以传送与这4个最活动的信道中的每一个信道相关联的音频信号。因此,来自不那么活动的左信道的音频可以在各个站点处被广播,然而,本地用户可能无法观看发言者的图像。现在,如果之前较活动的信道突然变成比之前不那么活动的信道更不活动,则会议桥120可以切换成发送与之前不那么活动的左信道相关联的视频信号。因此,附加的左音频信道可以用作过渡,使得本地会议参与者不会在活动视频信号切换期间错过远程通信内容。
为了进一步示出会议桥120的能力,假设:在给定时间,当前正在发言的4个用户130全都位于他们各自的站点110a-110d的左区112a中。因此,所有活动讲话者都与左区112a相关联(因而是右信道)并且仅一个用户130可以在任何给定站点110处的右监视器142a上被显示。在具体实施例中,会议桥120可以选择具有最高持续活动性度量的右信道并且向除源站点以外的各个站点110发送与该信道相关联的音频和视频信号。接收所选择的右信道音频和视频信号的各个站点110可以分别通过右扩音器144c和右监视器142c广播和显示信号。在某些实施例中,其余的右信道音频信号也可以被路由到除了它们各自的源站点之外的各个站点110。这些音频信号中的每一个音频信号可以与和最活动信道相关联的音频信号混合,并且通过右扩音器142c被广播。
关于视频,会议桥120可以选择仅分发与对于特定区112最活动的音频信号相关联的视频信号。在具有相邻监视器142的站点110中,对于右视频信号突然从右视频显示器142a跳至中心视频显示器142b或左视频显示器142c,这在心理上是烦人的。因此,可以设置这样的策略:每一次只可以显示一个“右”视频信道。此外,避免发送所有右视频信道可以减少站点110处的信号处理以及延迟和抖动问题。关于左信道和中心信道,会议桥120可以继续将最活动的信号路由到各个会议站点110。
图2是示出根据具体实施例的会议桥220的简化框图。会议桥220可以提供与关于图1描述的会议桥120相关联的所有功能。如图2中所表示的,会议桥220可以接收来自会议站点的音频-视频输入信号210并且向一个或多个远程站点分发音频-视频输出信号212。与会议桥220相关联的功能可以由接口222、处理器224和存储器226来提供。尽管示出了特定配置和数目的组件,但是会议桥220可以包括可以提供所陈述的功能的任何组件。
接口222能够向诸如图1中的通信网络100之类的通信网络传送信息和信号或者从其接收信息和信号。接口222可以表示任何端口或连接,真实的或虚拟的,包括使得会议桥220可以通过通信网络与其它装置交换信息和信号的任何适当的硬件和/或软件。接口222的示例可以包括以太网驱动,T1或L1接口,综合业务数字网(ISDN)接口、诸如Wi-Fi之类的无线网络接口、网卡和/或防火墙。如所示的,接口222可操作用于从参与会议的一个或多个站点接收一个或多个音频-视频输入信号210,并且向参与该会议的一个或多个其它站点发送一个或多个音频-视频输出信号212。应当注意,这一个或多个音频-视频输入信号210可以基本上与音频-视频输出信号212相似。
处理器224通过处理从各个会议设备接收到的信息和信号来控制会议桥220的操作和管理。处理器224可以包括操作来控制和处理信号的任何适当的硬件、软件或两者。处理器224的示例包括但不限于:专用集成电路(ASIC)、现场可编程门阵列(FPGA)、数字信号处理器(DSP)和任何其它适当的专用或通用处理器。此外,处理器223可以运行代码来执行所述操作中的任何操作。
存储器226可以存储由会议桥220使用的数据、处理器指令和/或任何其它信息。在某些实施例中,存储器226可以存储站点标识符、路由指令和/或信号处理算法。存储器226也可以存储由处理器224运行以控制操作并且执行会议桥220的所述功能的软件。存储器226可以包括任何形式的易失性或非易失性存储器,包括但不限于:磁介质、光介质、随机存取存储器(RAM)、只读存储器(ROM)、可移除介质或任何其它适当的本地或远程存储组件。
图3是示出用于多点会议期间的视频切换的方法的流程图。所述处理在步骤300处开始,其中,产生多个音频信号和任何相关联的视频信号。音频信号可以由麦克风148产生并且相关联的视频信号可以由一个或多个摄像机146产生。此外,所述音频信号中的至少一个音频信号可以与仅限语音的参与者相关联并且没有相关联的视频信号。如所讨论的,仅限语音的参与者可以是拨号并且通过会议管理器160连接到会议的远程用户(即,不在站点110处)。
处理继续到步骤310,其中,例如由会议管理器160接收这多个音频信号。响应于接收这些音频信号,会议管理器160可以在步骤320处确定每一个音频信号的活动性度量。活动性度量可以对应于特定麦克风正在接收与活动讲话者相关联的声波的置信值。在某些实施例中,可以使用对与多个麦克风和/或AAIP 150相关联的声学数据进行比较的算法来计算活动性度量。
在确定活动性度量之后,可以在步骤330利用每个音频信号各自的活动性度量来对与每个音频信号相关联的一个或多个分组进行编码。此外,还可以利用提供与产生音频信号的麦克风相关联的信道的空间指示符来对音频分组进行编码。具体地,空间指示符可以提供:音频信号是左信道、中心信道或右信道。如果音频信号是由AAIP 150产生的,则空间指示符可以提供:该音频信号与辅助信道相关联。如所讨论的,信道可以对应于要广播音频和/或视频信号的站点110处的一个或多个区112。关于辅助信道,音频信号可以在任何单个区112、多个区112的组合和/或分离的辅助装置中被广播。
在步骤340,编码后的音频信号和任何相关联的视频信号可以发送给会议桥120。响应于从参与会议的各个站点接收音频信号,在步骤350,会议桥120可以确定最活动的音频信号。该确定可以根据各个音频信号中所编码的活动性度量来逐信道地进行。因此,会议桥120可以分别确定最活动的左信道、中心信道、右信道和辅助信道。可替换地,会议桥120可以确定总体上最活动的音频信号,而不论信道为何。
响应于确定最活动的音频信号,在步骤360,会议桥120可以向各个会议站点110发送最活动的音频信号和任何相关联的视频信号。具体地,会议桥120可以向参与会议的各个站点110(除了每个信号各自的发源站点110以外)发送所选择的音频和视频信号。
可以对在图3中描述的方法进行修改、增加或省略。在某些实施例中,该方法可以包括更多、更少、或其它步骤。此外,某些步骤可以由其它组件和装置来执行。例如,麦克风148或AAIP 150也可以操作用于执行步骤320和/或步骤330。此外,图2中所示的方法中所描述的步骤可以以任何合适的顺序被执行,而不偏离本发明的范围。
在实施例中,可以使用以ANSI C代码提供的以下算法来执行对一个或多个音频信号的活动性度量的确定:
尽管详细描述了某些实施例,但是,本领域技术人员可以确知大量改变、替换、变化、更改和修改,并且本发明意欲包含所有这样的落在所附权利要求的精神和范围以内的改变、替换、变化、更改和修改。
Claims (25)
1.一种方法,包括:
接收多个音频信号,其中:
所述音频信号包括多个分组,所述分组包含与会议参与者相关联的语音数据;并且
所述音频信号中的一个或多个音频信号与视频信号相关联;
确定所述多个音频信号中的每一个音频信号的活动性度量,其中,所述活动性度量指示出所述音频信号与当前正在讲话的会议参与者相关联的置信值;
针对所述多个音频信号中的每一个音频信号,利用所述活动性度量对所述多个分组中的一个或多个分组进行编码;以及
向会议桥发送利用所述活动性度量编码后的所述多个音频信号。
2.根据权利要求1所述的方法,还包括,针对与视频信号相关联的一个或多个音频信号中的每一个音频信号,向所述会议桥发送所述视频信号。
3.根据权利要求1所述的方法,其中,确定活动性度量包括比较与多个所述音频信号中的每一个音频信号相关联的声学测量。
4.根据权利要求1所述的方法,其中,所述音频信号中的至少一个音频信号与仅限语音会议参与者相关联。
5.根据权利要求4所述的方法,还包括:
确定多个音频信号是与仅限语音会议参与者相关联的;以及
响应于确定多个音频信号是与仅限语音会议参与者相关联的,混合所述多个音频信号。
6.根据权利要求4所述的方法,还包括:
与视频信号相关联的音频信号中的每一个音频信号还与会议站点处的多个区中的区相关联;以及
确定活动性度量包括确定区分所述多个区中每一个区中的声音活动性的活动性度量。
7.根据权利要求4所述的方法,其中:
与视频信号相关联的音频信号中的每一个音频信号还与会议站点处的多个区中的区相关联;以及
所述方法还包括利用空间标识符来对所述音频信号中的每一个音频信号进行编码,所述空间标识符指示出与所述多个音频信号中的每一个音频信号相关联的区。
8.根据权利要求4所述的方法,还包括接收在会议站点处要被广播的多个音频信号,其中:
所述要被广播的多个音频信号中的每一个音频信号与多个信道中的信道相关联;并且
所述多个信道中的每一个信道与会议站点处的区相关联。
9.根据权利要求8所述的方法,还包括:接收在会议站点处要被显示的多个视频信号,其中,所述多个视频信号中的每一个视频信号与所述要被广播的多个音频信号中的音频信号相关联。
10.根据权利要求9所述的方法,还包括:
确定所述要被广播的多个音频信号中的至少两个音频信号是与相同信道相关联的;以及
响应于确定所述要被广播的多个音频信号中的至少两个音频信号是与相同信道相关联的,混合与相同信道相关联的所述至少两个音频信号。
11.根据权利要求8所述的方法,还包括:
确定所述要被广播的多个音频信号中的至少一个音频信号是与辅助信道相关联的,其中,所述辅助信道与仅限语音会议参与者相关联;以及
对于每个信道,将与辅助信道相关联的所述至少一个音频信号和与所述信道相关联的要被广播的所述音频信号进行混合。
12.一种系统,包括:
接口,所述接口可操作用于接收多个音频信号,其中:
所述音频信号包括多个分组,所述分组包含与会议参与者相关联的语音数据;并且
所述音频信号中的一个或多个音频信号与视频信号相关联;以及
处理器,所述处理器可操作用于:
确定所述多个音频信号中的每一个音频信号的活动性度量,其中,所述活动性度量指示出所述音频信号与当前正在讲话的会议参与者相关联的置信值;
针对所述多个音频信号中的每一个音频信号,利用所述活动性度量对所述多个分组中的一个或多个分组进行编码;以及
向会议桥发送利用活动性度量编码后的所述多个音频信号。
13.根据权利要求12所述的系统,其中,针对与视频信号相关联的一个或多个音频信号中的每一个音频信号,所述处理器还可操作用于向所述会议桥发送所述视频信号。
14.根据权利要求12所述的系统,其中,可操作用于确定活动性度量的处理器包括可操作用于比较与多个所述音频信号中的每一个音频信号相关联的声学测量的处理器。
15.根据权利要求12所述的系统,其中,所述音频信号中的至少一个音频信号与仅限语音会议参与者相关联。
16.根据权利要求15所述的系统,其中,所述处理器还可操作用于:
确定多个音频信号是与仅限语音会议参与者相关联的;并且
响应于确定多个音频信号是与仅限语音会议参与者相关联的,混合所述多个音频信号。
17.根据权利要求15所述的系统,其中:
与视频信号相关联的音频信号中的每一个音频信号还与会议站点处的多个区中的区相关联;并且
可操作用于确定活动性度量的处理器包括可操作用于确定区分所述多个区中每一个区中的声音活动性的活动性度量的处理器。
18.根据权利要求15所述的系统,其中:
与视频信号相关联的音频信号中的每一个音频信号还与会议站点处的多个区中的区相关联;以及
所述处理器还可操作用于利用空间标识符对所述音频信号中的每一个音频信号进行编码,所述空间标识符指示出与所述多个音频信号中的每一个音频信号相关联的区。
19.根据权利要求15所述的系统,其中,所述处理器还可操作用于接收在会议站点处要被广播的多个音频信号,其中:
所述要被广播的多个音频信号中的每一个音频信号与多个信道中的信道相关联;并且
所述多个信道中的每一个信道与会议站点处的区相关联。
20.根据权利要求19所述的系统,其中,所述处理器还可操作用于接收在会议站点处要被显示的多个视频信号,其中,所述多个视频信号中的每一个视频信号与所述要被广播的多个音频信号中的音频信号相关联。
21.根据权利要求20所述的系统,其中,所述处理器还可操作用于
确定所述要被广播的多个音频信号中的至少两个音频信号是与相同信道相关联的;以及
响应于确定所述要被广播的多个音频信号中的至少两个音频信号是与相同信道相关联的,混合与相同信道相关联的所述至少两个音频信号。
22.一种逻辑,被编码进一个或多个有形介质以用于执行,并且当所述逻辑被执行时可操作用于:
从多个会议站点中的一个或多个会议站点接收利用活动性度量编码后的多个音频信号,其中:
所述活动性度量指示所述音频信号与当前正在讲话的会议参与者相关联的置信值;
所述音频信号中的一个或多个音频信号与视频信号相关联;并且
所述音频信号中的至少一个音频信号与仅限语音会议参与者相关联;
基于各自的活动性度量来确定最活动的信号;并且
向所述多个会议站点中的一个或多个会议站点发送多个最活动的音频信号。
23.根据权利要求22所述的逻辑,其中:
所述音频信号中的每一个音频信号与多个信道中的信道相关联;
所述多个信道中的每一个信道与会议站点处的区相关联;
可操作用于基于各自的编码后的活动性度量来确定所述最活动的信号的逻辑包括可操作用于针对所述多个信道中的每一个信道来确定最活动的信号的逻辑;以及
可操作用于向所述多个会议站点中的一个或多个会议站点发送多个所述最活动的音频信号的逻辑包括可操作用于向所述多个会议站点中的一个或多个会议站点发送针对所述多个信道的每一个信道的最活动的音频信号。
24.根据权利要求23所述的逻辑,其中,所述逻辑还可操作用于:
从所述多个会议站点中的一个或多个会议站点接收多个视频信号,其中,所述多个视频信号中的每一个视频信号与所接收到的音频信号相关联;以及
向所述多个会议站点中的一个或多个会议站点发送与针对所述多个信道中的每一个信道的所述最活动的音频信号相关联的视频信号。
25.根据权利要求23所述的逻辑,其中,所述逻辑还可操作用于:
从所述多个会议站点中的一个或多个会议站点接收多个视频信号,其中,所述多个视频信号中的每一个视频信号与所接收到的音频信号相关联;
向所述多个会议站点中的一个或多个会议站点发送与所述最活动的音频信号相关联的多个视频信号;以及
其中,可操作用于向所述多个会议站点中的一个或多个会议站点发送多个所述最活动的音频信号的逻辑包括可操作用于向第二会议站点发送N+1个音频信号的逻辑,其中,N是被发送给所述多个会议站点中的一个或多个会议站点的视频信号的数目。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US89296407P | 2007-03-05 | 2007-03-05 | |
US60/892,964 | 2007-03-05 | ||
US12/023,824 US8334891B2 (en) | 2007-03-05 | 2008-01-31 | Multipoint conference video switching |
US12/023,824 | 2008-01-31 | ||
PCT/US2008/055405 WO2008109387A1 (en) | 2007-03-05 | 2008-02-29 | Multipoint conference video switching |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101627576A true CN101627576A (zh) | 2010-01-13 |
CN101627576B CN101627576B (zh) | 2013-06-05 |
Family
ID=39738701
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2008800073683A Expired - Fee Related CN101627576B (zh) | 2007-03-05 | 2008-02-29 | 多点会议视频切换 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8334891B2 (zh) |
EP (1) | EP2119107B1 (zh) |
CN (1) | CN101627576B (zh) |
WO (1) | WO2008109387A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102316301A (zh) * | 2010-06-29 | 2012-01-11 | 华为终端有限公司 | 会议切换的方法、系统及设备 |
CN105120204A (zh) * | 2015-08-06 | 2015-12-02 | 苏州科达科技股份有限公司 | 兼容多协议的会议中分享双流音频的方法、装置及系统 |
Families Citing this family (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8264521B2 (en) | 2007-04-30 | 2012-09-11 | Cisco Technology, Inc. | Media detection and packet distribution in a multipoint conference |
US8553865B2 (en) * | 2007-07-27 | 2013-10-08 | Clear-Com Research, Inc. | Multi-point to multi-point intercom system |
JP4916428B2 (ja) * | 2007-12-20 | 2012-04-11 | パナソニック株式会社 | 接続装置、その接続方法、及びプログラム |
CN101926159A (zh) * | 2008-02-04 | 2010-12-22 | 日本电气株式会社 | 声音混合装置和方法以及多点会议服务器 |
US8311085B2 (en) | 2009-04-14 | 2012-11-13 | Clear-Com Llc | Digital intercom network over DC-powered microphone cable |
US8625776B2 (en) * | 2009-09-23 | 2014-01-07 | Polycom, Inc. | Detection and suppression of returned audio at near-end |
US9154730B2 (en) * | 2009-10-16 | 2015-10-06 | Hewlett-Packard Development Company, L.P. | System and method for determining the active talkers in a video conference |
US8553068B2 (en) | 2010-07-15 | 2013-10-08 | Cisco Technology, Inc. | Switched multipoint conference using layered codecs |
US10122771B2 (en) | 2011-12-21 | 2018-11-06 | Level 3 Communications, Llc | Routing of conference participant based on caller recognition |
US9716860B2 (en) | 2011-12-21 | 2017-07-25 | Level 3 Communications, Llc | Collaboration conference linking in a telecommunications network |
US9167011B2 (en) | 2011-12-21 | 2015-10-20 | Level 3 Communications, Llc | Load balancing in a central conferencing routing server |
US10349009B1 (en) * | 2012-10-18 | 2019-07-09 | Altia Systems, Inc. | Panoramic streaming of video with user selected audio |
US9769588B2 (en) * | 2012-11-20 | 2017-09-19 | Nokia Technologies Oy | Spatial audio enhancement apparatus |
US9639906B2 (en) | 2013-03-12 | 2017-05-02 | Hm Electronics, Inc. | System and method for wideband audio communication with a quick service restaurant drive-through intercom |
US9288435B2 (en) | 2013-03-27 | 2016-03-15 | Google Inc. | Speaker switching delay for video conferencing |
US20160104501A1 (en) * | 2014-10-10 | 2016-04-14 | Christine Weingold | Method and Apparatus for Facilitating Conversation in a Noisy Environment |
CN104767962B (zh) * | 2015-01-16 | 2019-02-15 | 京东方科技集团股份有限公司 | 多用途会议终端和多用途会议系统 |
US9641585B2 (en) * | 2015-06-08 | 2017-05-02 | Cisco Technology, Inc. | Automated video editing based on activity in video conference |
US9942513B1 (en) * | 2016-10-31 | 2018-04-10 | Cisco Technology, Inc. | Automated configuration of behavior of a telepresence system based on spatial detection of telepresence components |
US10291783B2 (en) * | 2016-12-30 | 2019-05-14 | Akamai Technologies, Inc. | Collecting and correlating microphone data from multiple co-located clients, and constructing 3D sound profile of a room |
US10812598B2 (en) | 2016-12-30 | 2020-10-20 | Akamai Technologies, Inc. | Unified, browser-based enterprise collaboration platform |
CN110536097A (zh) * | 2018-05-25 | 2019-12-03 | 中兴通讯股份有限公司 | 一种视频控制方法、视频会议终端和多点控制单元mcu |
US11937014B2 (en) * | 2022-03-17 | 2024-03-19 | Lenovo (Singapore) Pte. Ltd. | Permitting devices to change settings related to outbound audio/video streamed from another device as part of video conference |
Family Cites Families (74)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5007046A (en) | 1988-12-28 | 1991-04-09 | At&T Bell Laboratories | Computer controlled adaptive speakerphone |
EP0398492B1 (en) | 1989-05-15 | 1997-01-22 | International Business Machines Corporation | A flexible interface to authentication services in a distributed data processing system |
US5560008A (en) | 1989-05-15 | 1996-09-24 | International Business Machines Corporation | Remote authentication and authorization in a distributed data processing system |
US5058153A (en) | 1989-12-27 | 1991-10-15 | Carew Edward C | Noise mitigation and mode switching in communications terminals such as telephones |
JP2797146B2 (ja) * | 1990-10-09 | 1998-09-17 | 株式会社ゼクセル | 物体移動用電磁アクチュエータ |
US6594688B2 (en) | 1993-10-01 | 2003-07-15 | Collaboration Properties, Inc. | Dedicated echo canceler for a workstation |
US5436896A (en) | 1994-03-17 | 1995-07-25 | At&T Corp. | Conference bridge for packetized speech-signal networks |
US5920562A (en) | 1996-11-22 | 1999-07-06 | Sprint Communications Co. L.P. | Systems and methods for providing enhanced services for telecommunication call |
FR2722596A1 (fr) | 1994-07-13 | 1996-01-19 | France Telecom | Systeme de controle d'acces limites a des places horaires autorisees et renouvables au moyen d'un support de memorisation portable |
US5473363A (en) | 1994-07-26 | 1995-12-05 | Motorola, Inc. | System, method and multipoint control unit for multipoint multimedia conferencing |
KR100415872B1 (ko) | 1994-10-10 | 2004-04-30 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | 데이타베이스시스템및데이타베이스슈퍼시스템 |
CA2138302C (en) | 1994-12-15 | 1999-05-25 | Michael S. Fortinsky | Provision of secure access to external resources from a distributed computing environment |
DE19515681A1 (de) | 1995-04-28 | 1996-10-31 | Sel Alcatel Ag | Verfahren, System und Teilnehmereinrichtung zum manipulationssicheren Trennen von Nachrichtenströmen |
GB9515336D0 (en) | 1995-07-26 | 1995-09-20 | Int Computers Ltd | Multi-media services system |
US5844600A (en) | 1995-09-15 | 1998-12-01 | General Datacomm, Inc. | Methods, apparatus, and systems for transporting multimedia conference data streams through a transport network |
US5764887A (en) | 1995-12-11 | 1998-06-09 | International Business Machines Corporation | System and method for supporting distributed computing mechanisms in a local area network server environment |
US5668857A (en) | 1996-03-29 | 1997-09-16 | Netspeed, Inc. | Communication server apparatus and method |
US5928323A (en) | 1996-05-30 | 1999-07-27 | Sun Microsystems, Inc. | Apparatus and method for dynamically generating information with server-side software objects |
US5848098A (en) | 1996-07-09 | 1998-12-08 | Lucent Technologies, Inc. | Personal base station extension calling arrangement |
US6332153B1 (en) | 1996-07-31 | 2001-12-18 | Vocaltec Communications Ltd. | Apparatus and method for multi-station conferencing |
US5864665A (en) | 1996-08-20 | 1999-01-26 | International Business Machines Corporation | Auditing login activity in a distributed computing environment |
US7145898B1 (en) | 1996-11-18 | 2006-12-05 | Mci Communications Corporation | System, method and article of manufacture for selecting a gateway of a hybrid communication system architecture |
US6122631A (en) | 1997-03-28 | 2000-09-19 | International Business Machines Corporation | Dynamic server-managed access control for a distributed file system |
JP3848725B2 (ja) | 1997-04-04 | 2006-11-22 | 富士通株式会社 | 双方向通信システム |
CN101442741B (zh) | 1997-04-24 | 2011-04-13 | 株式会社Ntt都科摩 | 移动通信方法和移动通信系统 |
JP3529621B2 (ja) | 1997-05-12 | 2004-05-24 | 株式会社東芝 | ルータ装置、データグラム転送方法及び通信システム |
US6128649A (en) | 1997-06-02 | 2000-10-03 | Nortel Networks Limited | Dynamic selection of media streams for display |
US5983273A (en) | 1997-09-16 | 1999-11-09 | Webtv Networks, Inc. | Method and apparatus for providing physical security for a user account and providing access to the user's environment and preferences |
US6393481B1 (en) | 1997-10-06 | 2002-05-21 | Worldcom, Inc. | Method and apparatus for providing real-time call processing services in an intelligent network |
US5974566A (en) | 1997-10-07 | 1999-10-26 | International Business Machines Corporation | Method and apparatus for providing persistent fault-tolerant proxy login to a web-based distributed file service |
US6148068A (en) | 1997-10-20 | 2000-11-14 | Nortel Networks Limited | System for managing an audio conference |
JP3812123B2 (ja) | 1998-02-12 | 2006-08-23 | 富士ゼロックス株式会社 | 認証方法および装置 |
US6078809A (en) | 1998-02-27 | 2000-06-20 | Motorola, Inc. | Method and apparatus for performing a multi-party communication in a communication system |
US6418125B1 (en) | 1998-06-18 | 2002-07-09 | Cisco Technology, Inc. | Unified mixing, speaker selection, and jitter buffer management for multi-speaker packet audio systems |
US6453362B1 (en) | 1998-08-12 | 2002-09-17 | International Business Machines Corporation | Systems, methods and computer program products for invoking server applications using tickets registered in client-side remote object registries |
US6535604B1 (en) | 1998-09-04 | 2003-03-18 | Nortel Networks Limited | Voice-switching device and method for multiple receivers |
US6546425B1 (en) | 1998-10-09 | 2003-04-08 | Netmotion Wireless, Inc. | Method and apparatus for providing mobile and other intermittent connectivity in a computing environment |
US6986157B1 (en) | 1998-12-21 | 2006-01-10 | 3Com Corporation | Method and system for dynamic service registration in a data-over-cable system |
US6327276B1 (en) | 1998-12-22 | 2001-12-04 | Nortel Networks Limited | Conferencing over LAN/WAN using a hybrid client/server configuration |
US7006616B1 (en) | 1999-05-21 | 2006-02-28 | Terayon Communication Systems, Inc. | Teleconferencing bridge with EdgePoint mixing |
GB9915312D0 (en) | 1999-06-30 | 1999-09-01 | Nortel Networks Corp | Conference circuit for encoded digital audio |
US7079499B1 (en) | 1999-09-08 | 2006-07-18 | Nortel Networks Limited | Internet protocol mobility architecture framework |
US6401211B1 (en) | 1999-10-19 | 2002-06-04 | Microsoft Corporation | System and method of user logon in combination with user authentication for network access |
US6678733B1 (en) | 1999-10-26 | 2004-01-13 | At Home Corporation | Method and system for authorizing and authenticating users |
US6760759B1 (en) | 1999-11-24 | 2004-07-06 | Mtel Limited | System to support mobile visual communications |
US6300973B1 (en) | 2000-01-13 | 2001-10-09 | Meir Feder | Method and system for multimedia communication control |
US7054268B1 (en) | 2000-02-04 | 2006-05-30 | Nokia Mobile Phones, Inc. | Method and arrangement for transferring information in a packet radio service with application-based choice of release mode |
US6590604B1 (en) | 2000-04-07 | 2003-07-08 | Polycom, Inc. | Personal videoconferencing system having distributed processing architecture |
US6662211B1 (en) | 2000-04-07 | 2003-12-09 | Lucent Technologies Inc. | Method and system for providing conferencing services in a telecommunications system |
US6501739B1 (en) | 2000-05-25 | 2002-12-31 | Remoteability, Inc. | Participant-controlled conference calling system |
FR2810484B1 (fr) * | 2000-06-19 | 2002-09-06 | Cit Alcatel | Procede de gestion et agencement de conference pour systeme de communication comportant des terminaux d'usager communiquant sous protocole ip |
US6819652B1 (en) | 2000-06-21 | 2004-11-16 | Nortel Networks Limited | Method and apparatus for processing control messages in a communications system |
US7007098B1 (en) | 2000-08-17 | 2006-02-28 | Nortel Networks Limited | Methods of controlling video signals in a video conference |
US7103556B2 (en) | 2000-11-02 | 2006-09-05 | Jpmorgan Chase Bank, N.A. | System and method for aggregate portfolio client support |
US7039027B2 (en) | 2000-12-28 | 2006-05-02 | Symbol Technologies, Inc. | Automatic and seamless vertical roaming between wireless local area network (WLAN) and wireless wide area network (WWAN) while maintaining an active voice or streaming data connection: systems, methods and program products |
US7266091B2 (en) | 2001-02-28 | 2007-09-04 | The Trustees Of Columbia University In City Of New York | System and method for conferencing in inter/intranet telephony |
JP2004538724A (ja) | 2001-08-07 | 2004-12-24 | ポリコム・インコーポレイテッド | 高解像度のテレビ会議のシステム及び方法 |
FI114129B (fi) * | 2001-09-28 | 2004-08-13 | Nokia Corp | Konferenssipuhelujärjestely |
US8885523B2 (en) * | 2001-12-31 | 2014-11-11 | Polycom, Inc. | Speakerphone transmitting control information embedded in audio information through a conference bridge |
GB2384932B (en) | 2002-01-30 | 2004-02-25 | Motorola Inc | Video conferencing system and method of operation |
US7136398B1 (en) * | 2002-03-14 | 2006-11-14 | Cisco Technology, Inc. | Method and apparatus for adding functionality to an existing conference call |
US20030174657A1 (en) | 2002-03-18 | 2003-09-18 | Wenlong Qin | Method, system and computer program product for voice active packet switching for IP based audio conferencing |
US20030223562A1 (en) * | 2002-05-29 | 2003-12-04 | Chenglin Cui | Facilitating conference calls by dynamically determining information streams to be received by a mixing unit |
US7362349B2 (en) | 2002-07-10 | 2008-04-22 | Seiko Epson Corporation | Multi-participant conference system with controllable content delivery using a client monitor back-channel |
GB0301033D0 (en) | 2003-01-16 | 2003-02-19 | Sony Uk Ltd | Networks and methods and devices therefor |
US7454460B2 (en) | 2003-05-16 | 2008-11-18 | Seiko Epson Corporation | Method and system for delivering produced content to passive participants of a videoconference |
US8659636B2 (en) | 2003-10-08 | 2014-02-25 | Cisco Technology, Inc. | System and method for performing distributed video conferencing |
EP1678951B1 (en) | 2003-10-08 | 2018-04-11 | Cisco Technology, Inc. | System and method for performing distributed video conferencing |
US20050099492A1 (en) * | 2003-10-30 | 2005-05-12 | Ati Technologies Inc. | Activity controlled multimedia conferencing |
US7567270B2 (en) | 2004-04-22 | 2009-07-28 | Insors Integrated Communications | Audio data control |
US20060221869A1 (en) | 2005-03-29 | 2006-10-05 | Teck-Kuen Chua | System and method for audio multicast |
US7848265B2 (en) | 2006-09-21 | 2010-12-07 | Siemens Enterprise Communications, Inc. | Apparatus and method for automatic conference initiation |
US20080159507A1 (en) | 2006-12-27 | 2008-07-03 | Nokia Corporation | Distributed teleconference multichannel architecture, system, method, and computer program product |
US8264521B2 (en) | 2007-04-30 | 2012-09-11 | Cisco Technology, Inc. | Media detection and packet distribution in a multipoint conference |
-
2008
- 2008-01-31 US US12/023,824 patent/US8334891B2/en active Active
- 2008-02-29 EP EP08731048.8A patent/EP2119107B1/en active Active
- 2008-02-29 CN CN2008800073683A patent/CN101627576B/zh not_active Expired - Fee Related
- 2008-02-29 WO PCT/US2008/055405 patent/WO2008109387A1/en active Application Filing
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102316301A (zh) * | 2010-06-29 | 2012-01-11 | 华为终端有限公司 | 会议切换的方法、系统及设备 |
CN102316301B (zh) * | 2010-06-29 | 2014-05-07 | 华为终端有限公司 | 会议切换的方法、系统及设备 |
US8890928B2 (en) | 2010-06-29 | 2014-11-18 | Huawei Device Co., Ltd. | Method, system and device for conference switching |
CN105120204A (zh) * | 2015-08-06 | 2015-12-02 | 苏州科达科技股份有限公司 | 兼容多协议的会议中分享双流音频的方法、装置及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN101627576B (zh) | 2013-06-05 |
EP2119107A4 (en) | 2013-08-21 |
EP2119107A1 (en) | 2009-11-18 |
US20080218586A1 (en) | 2008-09-11 |
US8334891B2 (en) | 2012-12-18 |
WO2008109387A1 (en) | 2008-09-12 |
EP2119107B1 (en) | 2015-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101627576B (zh) | 多点会议视频切换 | |
EP2439945B1 (en) | Audio panning in a multi-participant video conference | |
US9509953B2 (en) | Media detection and packet distribution in a multipoint conference | |
ES2327288T3 (es) | Sistema, metodo y nodo para limitar el numero de flujos de audio en u teleconferencia. | |
US8379076B2 (en) | System and method for displaying a multipoint videoconference | |
CN1762146B (zh) | 会议音频重放 | |
US7539486B2 (en) | Wireless teleconferencing system | |
JP2006174480A (ja) | 遠隔会議を仲介するためのシステム及び方法 | |
WO2012055291A1 (zh) | 音频数据传输方法及系统 | |
JP2017034312A (ja) | 通信装置、通信システム、およびプログラム | |
EP2207311A1 (en) | Voice communication device | |
JP2009246528A (ja) | 画像付音声通信システム、画像付音声通信方法およびプログラム | |
JP2001036881A (ja) | 音声伝送システム及び音声再生装置 | |
JP2010093479A (ja) | 会議システムおよび会議端末装置 | |
KR20090010385A (ko) | 화상 통신 단말의 화상 통화 녹화 방법 및 장치 | |
US11764984B2 (en) | Teleconference method and teleconference system | |
JP6289178B2 (ja) | 通話会議システム | |
JP4522332B2 (ja) | 映像音声配信システムおよび方法およびプログラム | |
JP2005229464A (ja) | 音声ボリューム管理通話システムおよび方法 | |
KR20080046061A (ko) | VoIP(Voice over InternetProtocol) 기반의 화상회의장치 및 그 제어방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20130605 |
|
CF01 | Termination of patent right due to non-payment of annual fee |