CN105812713A - 多人视频会议服务的参与者扩展方法及mcu网关 - Google Patents

多人视频会议服务的参与者扩展方法及mcu网关 Download PDF

Info

Publication number
CN105812713A
CN105812713A CN201410854131.6A CN201410854131A CN105812713A CN 105812713 A CN105812713 A CN 105812713A CN 201410854131 A CN201410854131 A CN 201410854131A CN 105812713 A CN105812713 A CN 105812713A
Authority
CN
China
Prior art keywords
termination
speech
mcu
chosen
gateway
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410854131.6A
Other languages
English (en)
Inventor
李瑾载
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung SDS Co Ltd
Original Assignee
Samsung SDS Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung SDS Co Ltd filed Critical Samsung SDS Co Ltd
Publication of CN105812713A publication Critical patent/CN105812713A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/15—Conference systems
    • H04N7/152—Multipoint control units therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开一种多人视频会议服务的参与者扩展方法及MCU网关。本发明的一实施例的多人视频会议服务的参与者扩展方法包括以下步骤：与MCU(Multipoint Conference Unit)和多个终端装置连接的MCU网关，从多个终端装置中的每一个终端装置接收通过所述多个终端装置中具备的麦克风检测到的声音的信号电平信息；MCU网关以所接收的信号电平为基础将多个终端装置中的一个终端装置选定为发言终端装置；MCU网关向发言终端装置请求发送输入到发言终端装置的发言内容；以及MCU网关接收发言终端装置响应于传送请求而发送的发言内容，并向MCU传送所述发言内容。

Description

多人视频会议服务的参与者扩展方法及MCU网关
技术领域
本发明涉及一种多人视频会议服务的参与者扩展方法，更具体地涉及一种不增设MCU(MultipointConferenceUnit，多点会议单元)设备也能扩展视频与会者数的多人视频会议服务的参与者扩展方法。
背景技术
MCU(MultipointConferenceUnit，多点会议单元)是一种用于进行多人视频会议的装置。MCU执行从多个参与者同时接收视频流或音频流并将其混合(Mixing)成一个音频/视频来向与会者提供的功能。
在该情况下，MCU向要参与视频会议的参与者分配端口，并且从连接到该端口的参与者的终端装置接收视频信号或音频信号。不过，MCU中只有有限数量的端口，因此存在为了扩大与会者数需要增设高价的MCU的问题。
通常，一台MCU具有16个至60个端口，因此在有比端口数多的参与者的情况下，为了确保与其对应的端口，需要更多数量的MCU。
由此，需要提供一种不增设MCU也能使更多参与者参加会议的多人视频会议服务的参与者扩展方法。
专利文献：韩国公开专利公报第2010-0107697号
发明内容
本发明是为了解决上述的问题而提出的，本发明的目的在于提供一种不增设高价设备MCU也能使超过MCU所具备的端口数的用户参加视频会议的多人视频会议服务的参与者扩展方法。
本发明的另一目的在于，通过仅将在视频会议中正在发言的发言人的视频信号显示给其他与会者，从而防止不必要地使用网络资源。
本发明的另一目的在于，提供一种不与现有的MCU联动或没有MCU而能够以低费用针对大规模用户支持视频会议系统的视频会议系统。
本发明的技术问题并不限于以上提及的技术问题，本发明所属技术领域的技术人员能够从下面的记载理解没有提及的其他技术问题。
为了实现上述目的，本发明的一实施例的多人视频会议服务的参与者扩展方法包括以下步骤：与MCU(MultipointConferenceUnit，多点会议单元)和多个终端装置连接的MCU网关，从所述多个终端装置中的每一个终端装置接收通过所述多个终端装置中具备的麦克风检测到的声音的信号电平信息；所述MCU网关以所接收的信号电平为基础将所述多个终端装置中的一个终端装置选定为发言终端装置；所述MCU网关向所述发言终端装置请求发送输入到所述发言终端装置的发言内容；以及所述MCU网关接收所述发言终端装置响应于所述传送请求而发送的所述发言内容，并向所述MCU传送所述发言内容。
根据本发明的一实施例，将所述多个终端装置中的一个终端装置选定为发言终端装置的步骤可包括：将被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置。
根据本发明的一实施例，将被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置的步骤可包括：在所述被输入已设定的大小以上的声音信号电平的终端装置为多个的情况下，将被输入最大大小的声音信号电平的终端装置选定为发言终端装置。
根据本发明的一实施例，将所述多个终端装置中的一个终端装置选定为发言终端装置的步骤可包括：在已设定的大小以上的声音信号电平输入到所述终端装置已设定的时间以上的情况下，将所述终端装置选定为发言终端装置。
根据本发明的一实施例，可进一步包括以下步骤：接收输入到所述发言终端装置的声音信号电平信息；当输入到所述发言终端装置的声音信号电平不到已设定的大小时，解除选定为发言终端装置；以及向被解除的发言终端装置发送发言内容传送中断请求。
根据本发明的一实施例，可进一步包括以下步骤：当所述发言终端装置未被输入声音信号已设定的时间以上时，解除选定为发言终端装置；以及向被解除的发言终端装置发送视频信号及音频信号传送中断请求。
根据本发明的一实施例，可进一步包括以下步骤：从所述MCU接收混合的视频信号及音频信号；以及向通过网络连接的多个终端装置中的每一个终端装置传送所接收的所述视频信号及音频信号。
根据本发明的又一实施例的MCU网关包括：通信部，从多个终端装置接收通过所述终端装置所具备的麦克风检测到的声音的信号电平信息；发言人确定部，以所接收的所述信号电平信息为基础将所述多个终端装置中的一个终端装置选定为发言终端装置，并且通过所述通信部向所述发言终端装置请求发送发言内容；所述通信部接收所述发言终端装置响应于所述发言人确定部的请求而发送的发言内容，并向所述MCU传送所述发言内容。
根据本发明的一实施例，所述发言人确定部将被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置。
根据本发明的一实施例的所述发言人确定部可在所述被输入已设定的大小以上的声音信号电平的终端装置为多个的情况下，将被输入最大大小的声音信号电平的终端装置选定为发言终端装置。
根据本发明的一实施例，所述发言人确定部可将在已设定的时间以上的时间内被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置。
根据本发明的一实施例，所述发言人确定部可在输入到所述发言终端装置的声音信号电平不到已设定的大小时解除选定为所述发言终端装置，所述通信部向被解除选定为所述发言终端装置的终端装置发送发言内容传送中断请求。
根据本发明的一实施例，所述发言人确定部可在所述发言终端装置未被输入声音信号已设定的时间时解除选定为所述发言终端装置，所述通信部向被解除选定为所述发言终端装置的终端装置发送发言内容传送中断请求。
根据本发明的一实施例，所述通信部可从所述MCU接收经混合的视频信号及音频信号，并且向通过网络连接的多个终端装置中的每一个终端装置传送所接收的所述视频信号及音频信号。
根据本发明的又一实施例的计算机程序与计算机装置结合执行以下步骤：与MCU(MultipointConferenceUnit)和多个终端装置连接的MCU网关，从所述多个终端装置中的每一个终端装置接收通过所述多个终端装置中具备的麦克风检测到的声音的信号电平信息；所述MCU网关以所接收的所述信号电平为基础将所述多个终端装置中的一个终端装置选定为发言终端装置；所述MCU网关向所述发言终端装置请求发送输入到所述发言终端装置的发言内容；以及所述MCU网关接收所述发言终端装置响应于所述传送请求而发送的所述发言内容，并向所述MCU传送所述发言内容。
根据上述实施例，能够达到不增设高价设备MCU也能使MCU所具有的端口以上的用户参加视频会议的效果。
此外，通过从被赋予发言权的发言人接收视频信号并将其显示给其他参与者，能够达到可使不必要的网络资源最小化的效果。
此外，能够达到可提供即使不与现有的MCU联动也能使多个用户参与的视频会议系统的效果。
附图说明
图1是用于说明本发明的一实施例的视频会议系统100的图。
图2是本发明的一实施例的MCU网关300的方框图。
图3是用于说明本发明的一实施例的多人视频会议服务的参与者扩展方法的信号流图。
图4是用于说明本发明的一实施例的多人视频会议服务的参与者扩展方法中撤回选定为发言终端装置的过程的信号流图。
图5是用于说明根据本发明的一实施例向与会者提供发言内容的状态的图。
图6是用于说明本发明的一实施例的MCU网关300的操作的图。
图7是根据本发明的一实施例提供的视频会议画面的示意图。
图8是本发明的一实施例的多人视频会议服务的参与者扩展方法的顺序图。
图9是本发明的一实施例的MCU网关的硬件结构图。
具体实施方式
下面，参照附图对本发明的优选实施例进行详细说明。参照附图的同时参照详细地后述的实施例，将会明确本发明的优点及特征，以及实现这些的方法。但是，本发明并不限定于以下所公开的实施例，而是可以以彼此不同的多种方式实现，本实施例仅仅用于全面地公开本发明，并且为了给本发明所属技术领域的技术人员完整地告知本发明的范围而提供的，本发明仅由权利要求的范围定义。在说明书全文中相同的附图标记指相同的结构要素。
如果没有其他定义，则在本说明书中所使用的所有用语(包括技术用语及科技用语)能够以本发明所属技术领域的技术人员共同理解的含义使用。另外，在通常使用的词典中定义的用语只要没有被明确地特别定义，就不理想地或过度地解释。
此外，在本说明书中，单数形式只要在句子中未特别提及就可以包括复数形式。在说明书中使用的“包括(comprises)”和/或“包含(comprising)”并不排除所提及的结构要素、步骤、操作和/或元件之外的一个以上的其他结构要素、步骤、操作和/或元件的存在或附加。
图1是用于说明本发明的一实施例的视频会议系统100的图。
图1所示的视频会议系统100包括MCU200，接入到MCU200的多个终端装置210-1、210-2、...、210-n，MCU网关300，以及接入到MCU网关300的多个终端装置310-1、310-2、...、310-n。
MCU200从通过物理端口连接的多个终端装置210-1、210-2接收视频及音频信号并将其混合(Mixing)成一个音频及视频信号后再传送到各终端装置。
终端装置210-1、210-2、310-1、310-2、310-3可以是具备可与MCU网关300有线/无线连接的通信模块、用于接收参与者输入的发言内容的麦克风及摄像机的多种电子装置。例如，终端装置210-1、210-2、310-1、310-2、310-3可以是智能电话、可视电话、平板电脑、笔记本电脑、台式电脑、全息图显示器等多种装置中的任一个。
此外，MCU200与MCU网关300通过一个物理端口连接而接收向连接到MCU网关300的终端装置310-1、310-2、310-3中一个终端装置310-1、310-2、310-3输入的视频及音频信号中的至少一个。因此，参与视频会议的参与者可以接收与MCU200直接连接的参与者的视频及音频信号中的至少一个和关于与MCU网关300连接的参与者中一个参与者的视频及音频信号中的至少一个。
本发明的一实施例的MCU网关300与MCU200通过一个物理端口连接，并且通过有线或无线网络与多个终端装置310-1、310-2、310-3连接。
MCU网关300利用输入到终端装置310-1、310-2、310-3中具备的麦克风的声音信号的电平信息，来选定通过网络连接的多个终端装置310-1、310-2、310-3中的一个终端装置，并且从已选定的终端装置接收发言内容。这里，发言内容是指从被确定为发言人的参与者的终端装置输入的参与者的音频信号及其视频信号中的至少一个。即，所述发言内容可包括音频及视频，或仅仅包括音频，或仅仅包括视频。根据部分实施例，所述发言内容也可包括用于形成全息图视频的数据。
即，MCU网关300不是将输入到通过网络与MCU网关300连接的所有终端装置310-1、310-2、310-3的视频及音频信号传送到MCU200，而是将输入到由MCU网关300确定为发言人的一个终端装置的发言内容传送到MCU200。
此外，通过网络与MCU网关300连接的多个终端装置310-1、310-2、310-3用户也可通过MCU网关300接收与MCU200连接的其他终端装置210-1、210-2用户的发言内容。
如图1所示，MCU200和MCU网关300通过一个物理端口连接，多个终端装置310-1、310-2、310-3通过有线或无线网络与MCU网关300连接，最终能够达到一个MCU200端口可连接多个与会者的效果。
此外，MCU网关300从被确定为发言人的一个终端装置接收发言内容并传送到MCU200，因此即使不为从多个终端装置接收所有发言内容而确保较多的网络资源也能使多个用户参加会议。
图2是用于说明本发明的一实施例的MCU网关300的结构和操作的方框图。
图2所示的MCU网关300中仅仅示出与本实施例关联的结构要素。因此，在与本实施例关联的技术领域中具备普通知识的技术人员能够知道除图2所示的结构要素之外可包括其他常用的结构要素。此外，本发明的一实施例的MCU网关300通过一个端口与MCU200连接，并且通过有线/无线网络与多个终端装置连接。
图2所示的MCU网关300包括通信部310和发言人确定部330。
通信部310与一个以上的终端装置连接，并且从所述一个以上的终端装置接收输入到所述一个以上的终端装置中具备的麦克风的声音的信号电平信息。
由于通信部310不是接收通过麦克风输入的声音数据本身，而是仅接收声音大小信息，因此能够防止在连接有MCU网关300和多个终端装置的网络中接有不必要的负载。
发言人确定部330以通过通信部310接收的所述信号电平信息为基础将与通信部310连接的终端装置中的一个终端装置选定为发言终端装置。这里，发言终端装置是指所述发言终端装置的用户被赋予发言权而接收用户输入的发言内容的终端装置。
根据本发明的一实施例，发言人确定部330将被输入已设定的大小以上的信号电平的声音的终端装置选定为发言终端装置。
一旦被赋予发言权的用户开始发言，则用户的声音被输入到该终端装置，因此表示一定大小以上的声音电平的信号电平信息被通信部310接收。因此，发言人确定部330将被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置。
此后，发言人确定部330向被选定为发言终端装置的终端装置传送请求发送发言内容的信号。这里，发言内容可以是向发言终端装置输入的用户的音频信号或用户的视频信号中的一个。
即，MCU网关300只将从连接到MCU网关300的多个终端装置中被赋予发言权而被确定为发言人的终端装置接收的发言内容传递到MCU200，不从剩余的终端装置接收发言内容。
因此，MCU网关300通过一个端口与MCU200连接，从而能够达到使多个用户参加会议的效果。
此外，尽管与多个用户终端装置连接，但只从被确定为发言人的发言终端装置接收如视频信号及音频信号的发言内容，从而能够达到不需要很多网络资源的效果。
另一方面，从发言终端装置接收到发言内容的通信部310不对发言内容进行混合处理而将其传送到MCU200。此外，也可接收从MCU200传送的其他参与者的视频信号或音频信号并将其传送到连接至MCU网关300的其他终端装置。
图3是用于说明本发明的一实施例的视频会议系统100的信号流图。
通过网络与MCU网关300连接的多个终端装置310-1、310-2向MCU网关300传送从终端装置中具备的麦克风输入的声音的信号电平信息(S310)。当多个终端装置中的一个终端装置用户被赋予发言权而该用户开始发言时，声音信号电平会上升，反之会传送一般噪声的信号电平信息。
MCU网关300利用从终端装置310-1、310-2接收的声音信号电平信息来确定发言终端装置。根据本发明的一实施例，MCU网关300将被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置(S320)。
在上述实施例中，对在输入到终端装置的声音信号电平为已设定的大小以上的情况下将该终端装置选定为发言终端装置的方式进行了说明，但不局限于此，也可以实现为将多个终端装置中被输入最大的声音信号电平的终端装置选定为发言终端装置。
此后，MCU网关300向被选定为发言终端装置的终端装置310-1发送请求将输入到该终端装置310-1的发言内容传送到MCU网关300的信号(S330)。
接收到上述请求信号的终端装置310-1向MCU网关300传送被确定为发言人的用户的如音频信号或视频信号的发言内容(S340)。此外，接收到发言内容的MCU网关300再将该发言内容传送到MCU200。
如上所述，在通过网络与多个终端装置连接的状态下判断哪个终端装置为发言终端装置，并且只将输入到发言终端装置的参与者的音频信号及视频信号向MCU200传送，能够达到通过一个MCU200端口可使多个用户参加会议的效果。
此外，由于不需要为使MCU200中具备的端口以上的用户参加会议而增设高费用的MCU200，因此也能达到可减少服务器容量及费用的效果。
另一方面，就MCU网关300而言，不是从通过网络连接的所有终端装置接收音频信号及视频信号，而是先接收输入到终端装置中具备的麦克风的声音的信号电平信息，等到特定终端装置被确定为发言人后才从该终端装置接收发言内容，因此能够达到不需要很多网络资源的效果。
图4是用于说明根据本发明的一实施例撤回选定为发言终端装置的过程的图。
在本实施例中以终端装置1(310-1)被选定为发言终端装置而向MCU网关300传送作为发言人输入的音频信号及视频信号的发言内容的状态为例进行说明。
MCU网关300向MCU200传送从终端装置1(310-1)接收的(S410)发言内容(S420)。MCU200将从MCU网关300及其他终端装置接收的参与者的发言内容混合成一个视频及音频信号后(S430)，将其提供给通过物理端口连接的其他终端装置(S440)。此外，从MCU200接收到经混合的视频及音频信号的MCU网关300也通过有线/无线网络向连接的终端装置提供经混合的视频及音频信号(S450)。
另一方面，MCU网关300将发言内容提供给通过有线/无线连接的终端装置，并且检测是否发生发言权收回事件(S460)。
这里，发言权收回事件是指被选定为发言终端装置的终端装置的用户结束发言而不再输入发言内容的事件。在发生发言权收回事件的情况下，不再需要将该用户的音频信号及视频信号提供给其他与会者，因此MCU网关300向发生发言权收回事件的终端装置310-1传送发言内容中断请求信号(S470)。
另一方面，可以以多种方式检测发言终端装置中是否发生发言权收回事件。本发明的一实施例的MCU网关300可在从发言终端装置接收的声音的信号电平不到已设定的大小时检测为所述发言终端装置中发生发言权收回事件。
当被确定为发言人的终端装置的用户的发言结束而不再输入音频信号时，输入到该终端装置的声音的信号电平会变小。因此，MCU网关300可在从发言终端装置接收的声音信号电平不到已设定的大小时判断为该终端装置用户的发言都已结束并收回发言权。
但是，会有发言权被赋予给一参与者的状态下被选定为发言人的参与者在一定时间不发言的情况。即，尽管被选定为发言人的用户没有结束发言，但是由于暂时不发言而声音信号未输入到发言终端装置时，会发生发言权由MCU网关300收回的情况。为了防止这种情况，MCU网关300可在从发言终端装置输入的声音信号电平在已设定的值以下且在这种状态下经过已设定的时间之后收回发言权。
当如上所述限于在规定时间以上的时间内未输入声音信号的情况而收回发言权时，能够达到可防止尽管参与者未结束所有发言但发言权被收回的情况的效果。
另一方面，发言权被收回的发言终端装置310-1根据MCU网关300的请求(S470)中断发言内容的传送，并且传送输入到终端装置的声音信号电平信息。
图5是用于说明通过本发明的一实施例的多人视频会议服务的参与者扩展方法发言内容被提供给参与者的状态的图。
下面以MCU200中具备用于连接终端装置的三个物理端口且准备参加视频会议的参与者为五名的情况为例进行说明。
通常情况下，由于准备参加会议的参与者多于MCU200中具备的端口数，因此只能增设MCU。但是，根据本发明的一实施例，通过在MCU中具备的一个物理端口上连接MCU网关300并通过有线/无线连接MCU网关300和多个参与者，从而能够使多于MCU200中具备的端口数的参与者参加会议。
MCU200将从连接到MCU200的终端装置传送的参与者的音频信号及视频信号混合成一个信号并提供给各参与者。因此，连接到MCU200的参与者不仅能够确认自己的视频及音频，而且还能够确认与MCU连接的其他参与者的视频及音频。
根据本实施例的MCU200在接收到第一参与者210-1、第二参与者210-2及连接到MCU网关300的多个参与者中一个参与者的视频及音频信号后对其进行混合并提供给各个参与者。
例如，如果第一参与者被确定为发言人，则第一参与者的视频和音频可被提供给第二参与者210-2及连接到MCU网关300的用户310-1、310-2、310-3。
或者，可以是：被确定为发言人的参与者的视频以最大画面提供，未被确定为发言人但正在参与会议的参与者的视频以小的画面合在一起被提供给各参与者。
但是，就连接到MCU网关300的参与者而言，只有关于被确定为发言人的参与者的音频及视频才能被提供给其他参与者。此时，MCU网关300可从以无线/有线连接的终端装置接收关于输入到终端装置中具备的麦克风的声音的信号电平的信息，并且将被输入已设定的大小以上的声音信号电平的终端装置确定为发言终端装置。
MCU网关300向被确定为发言终端装置的终端装置发送发言内容传送请求，并且接收由此提供的发言内容并将被确定为参与者的视频及音频信号提供给其他参与者。
图5中示出连接到MCU网关300的第三参与者310-1的终端装置被确定为发言终端装置，从而第三参与者310-1的视频显示为最大，其他参与者210-1、210-2的视频以小的画面显示的会议画面。
根据本发明的一实施例，就连接到MCU网关300的用户中未被确定为发言人的参与者310-2、310-3而言，虽然能够接收其他参与者的视频及音频信号，但自己的视频及音频信号只要不被确定为发言人则不被提供给其他用户。
另一方面，在进行会议的过程中会发生连接到MCU网关300的用户同时发言的情况。即，已设定的大小以上的声音信号电平信息也有可能从两个以上的终端装置同时输入。
在该情况下，本发明的一实施例的MCU网关300可将输入有最大的信号电平信息的终端装置选定为发言终端装置，并且向该终端装置传送请求发送发言内容的信号。
此外，在本实施例中，尽管示出被确定为发言人的第三参与者310-1的照片和其他参与者210-1、210-2的视频同时被显示，但不局限于此，也可以实现为仅显示被确定为发言人的参与者的视频。
如上所述，能够达到当利用MCU网关300并提供被确定为发言人的参与者的视频及音频时，即使不增设MCU200也能使MCU200中具备的端口以上的参与者参加视频会议的效果。
图6是用于说明本发明的一实施例的MCU网关300的操作的图。
本发明的一实施例的MCU网关300也可以不与MCU200联动而中继连接到MCU网关300的终端装置之间的视频会议。
如图6所示，MCU网关300可与多种类型的终端装置610-1、610-2、610-3以有线/无线连接。
本发明的一实施例的MCU网关300可从以有线/无线连接的多个终端装置610-1、610-2、610-3中被确定为发言人的发言终端装置接收发言内容并将其提供给其他终端装置。
具体而言，MCU网关300从多个终端装置610-1、610-2、610-3接收输入到终端装置中具备的麦克风的声音的信号电平信息，并且将被输入已设定的大小以上的声音信号的终端装置选定为发言终端装置。
一旦发言终端装置被选定，MCU网关300可向该终端装置请求发送发言内容，并且接收该发言内容并提供给其他终端装置。
但是，也有可能存在因噪声等而一时输入已设定的大小以上的声音信号从而尽管不是发言人但被选定为发言终端装置的情况。因此，本发明的一实施例的MCU网关300也可将在已设定的时间以上的时间内被输入已设定的大小以上的声音信号的终端装置选定为发言终端装置。
如上所述，通过将以有线/无线连接的多个终端装置中的一个终端装置选定为发言终端装置并仅从该终端装置接收发言内容，能够达到即使在连接有MCU网关300和终端装置的网络的资源不充分的情况下也能使多个参与者参加视频会议的效果。
此外，不需要将从多个终端装置同时输入的视频信号及音频信号混合成一个信号而将从被确定为发言人的发言终端装置接收的视频信号及音频信号提供给其他终端装置，从而能够达到可以以低廉的费用实现MCU网关300的效果。
另一方面，本发明的一实施例的MCU网关300也可在发言人被变更的情况下检测到该变更并变更发言终端装置。
例如，在被确定为发言人的参与者结束所有发言的情况下，该终端装置将不再被输入声音信号。因此，本发明的一实施例的MCU网关300可在输入到发言终端装置的声音信号的电平不到已设定的大小时解除选定为发言终端装置。
但是，在这样的情况下，可能会发生在发言人未结束所有的发言而暂时中止发言的情况下也解除选定为发言终端装置的情况。
因此，本发明的一实施例的MCU网关300也可以限于已设定的时间以上的时间内被输入不到已设定的大小的声音信号的情况解除选定为发言终端装置。
如上所述，如果只接收被确定为发言人的发言内容并传送到其他终端装置，则能够达到不需要很多网络资源并可使多个参与者参加视频会议的效果。
图7是用于说明本发明的一实施例的视频会议画面的图。
在本实施例中可实现为在MCU网关300不与MCU200联动的情况下如图7所示只显示被确定为发言人的用户的视频。在该情况下，可在画面的一部分区域显示当前参加会议的参与者的名单。
在本实施例中示出为只显示被确定为发言人的用户的视频，但在连接有MCU网关300和多个终端装置的网络资源足够的情况下也可显示所有参与者的视频。
在该情况下，被确定为发言人的参与者的视频可显示成比其他参与者大，而没有被授予发言权的参与者的视频显示成小的画面。
图8是用于说明本发明的一实施例的多人视频会议服务的参与者扩展方法的流程图。
本实施例中以MCU网关300通过一个物理端口与MCU200连接且多个参与者终端装置以有线/无线与MCU网关300连接的情况为例进行说明。
MCU网关300从以有线/无线连接的多个终端装置接收输入到终端装置中具备的麦克风的声音信号的电平信息(S810)。声音信号的电平信息是指通过麦克风输入的音响信号的大小信息。
声音信号电平信息与声音信号数据相比数据量小，因此具有即使MCU网关300连接有多个终端装置的情况下也不需要很多网络资源的优点。
接收到声音的信号电平信息的MCU网关300以该声音的信号电平信息为基础选定发言终端装置(S820)。这里，发言终端装置是指被确定为发言人的参与者输入发言内容的终端装置。
具体而言，本发明的一实施例的MCU网关300可将被输入已设定的大小以上的声音信号的终端装置选定为发言终端装置。但是，为了防止尽管未被选定为发言人，但因噪声等一时被输入已设定的大小以上的声音信号而被选定为发言终端装置，也可将在已设定的时间以上的时间内被输入已设定的大小以上的声音信号的终端装置选定为发言终端装置(S830)。
如上所述，一旦选定发言终端装置，MCU网关300可向被选定为发言终端装置的终端装置发送请求传送发言内容的信号(S840)。
接收到发言内容的MCU网关300通过向其他终端装置传送该发言内容(S850)，可使与会者确认发言人的视频信号及音频信号。
如上所述，通过将被选定为发言人的参与者的终端装置选定为发言终端装置，并接收输入到该终端装置的发言内容并提供给其他终端装置，能够达到即使在连接有MCU网关300和终端装置的网络的资源不充分的情况下也能使多个参与者参加视频会议的效果。
此外，由于不需要将从多个用户输入的视频及音频信号混合成一个信号，MCU网关300自身不需要很多资源，从而能够达到可减少费用的效果。
图9是用于说明本发明的一实施例的MCU网关900的图。
本发明的又一实施例的MCU网关900可包括如图9所示的结构。
具体而言，MCU网关900可包括执行命令的处理器910、内存920、存储用于运行多人视频会议服务的参与者扩展方法的程序的存储装置930以及用于与连接到MCU网关900的装置进行数据收发的网络接口(NIC)940。
存储装置930可存储有执行以下步骤的程序：与MCU(MultipointConferenceUnit)和多个终端装置连接的MCU网关，从所述多个终端装置中的每一个终端装置接收通过所述多个终端装置中具备的麦克风检测到的声音的信号电平信息；所述MCU网关以所接收的所述信号电平为基础将所述多个终端装置中的一个终端装置选定为发言终端装置；所述MCU网关向所述发言终端装置请求发送输入到所述发言终端的发言内容；以及所述MCU网关接收所述发言终端装置响应于传送请求而传送的所述发言内容，并向MCU传送所述发言内容。上述程序可被加载到内存920后通过处理器910被执行。
另一方面，上述方法可被编程为可在计算机中执行的程序，并且可在利用计算机可读介质使所述程序运行的通用数字计算机中实现。此外，在上述方法中使用的数据的结构可通过各种方法存储到计算机可读存储介质。所述计算机可读存储介质包括如磁存储介质(例如，ROM、软盘、硬盘等)、光学读取介质(例如，CD-ROM、DVD等)的存储介质。
在与本实施例关联的技术领域中具有普通知识的技术人员可理解在不脱离上述记载的本质特性的范围内可以以变形的形式实现。因此，所公开的方法应以说明的观点考虑，而不是限定的观点。本发明的范围表示在权利要求书中而不是前述说明，并且应解释为在与其等同范围内的所有差异均被包括在本发明中。

Claims (14)

1.一种多人视频会议服务的参与者扩展方法，包括以下步骤：
多点会议单元网关从多个终端装置中的每一个终端装置接收通过所述多个终端装置中具备的麦克风检测到的所述多个终端装置中的每一个终端装置的声音信号电平信息，所述多点会议单元网关通过至少一个物理端口与多点会议单元连接，并且以有线或无线与多个终端装置连接；
所述多点会议单元网关以多个声音信号电平为基础将所述多个终端装置中的一个终端装置选定为发言终端装置；
所述多点会议单元网关向所述发言终端装置请求发送输入到所述发言终端装置的发言内容；以及
所述多点会议单元网关接收所述发言终端装置响应于所述请求而发送的所述发言内容，并通过所述至少一个物理端口向所述多点会议单元传送所述发言内容。
2.根据权利要求1所述的多人视频会议服务的参与者扩展方法，其中，选定为发言终端装置的步骤包括：
将被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置。
3.根据权利要求2所述的多人视频会议服务的参与者扩展方法，其中，选定为发言终端装置的步骤进一步包括：
在所述被输入已设定的大小以上的声音信号电平的终端装置为多个的情况下，将被输入最大大小的声音信号电平的终端装置选定为发言终端装置。
4.根据权利要求1所述的多人视频会议服务的参与者扩展方法，其中，选定为发言终端装置的步骤包括：
在已设定的大小以上的声音信号电平输入到所述终端装置已设定的时间以上的情况下，将所述终端装置选定为发言终端装置。
5.根据权利要求1所述的多人视频会议服务的参与者扩展方法，其中，进一步包括以下步骤：
接收输入到所述发言终端装置的声音信号电平信息；
当输入到所述发言终端装置的声音信号电平的大小不到已设定的大小时，解除选定为发言终端装置；以及
向被解除的发言终端装置发送发言内容传送中断请求。
6.根据权利要求1所述的多人视频会议服务的参与者扩展方法，其中，进一步包括以下步骤：
当所述发言终端装置未被输入声音信号已设定的时间以上时，解除选定为发言终端装置；以及
向被解除的发言终端装置发送视频信号及音频信号传送中断请求。
7.根据权利要求1所述的多人视频会议服务的参与者扩展方法，其中，进一步包括以下步骤：
通过所述至少一个物理端口从所述多点会议单元接收经混合的视频信号及音频信号；以及
向通过网络连接的多个终端装置中的每一个终端装置传送所接收的所述视频信号及音频信号的混合信号。
8.一种多点会议单元网关，被构成为通过网络与多个终端装置连接，并且通过至少一个物理端口与多点会议单元连接，从而设定所述多个终端装置与多点会议单元之间的会话，所述多点会议单元网关包括：
通信部，从所述多个终端装置接收通过终端装置所具备的麦克风输入到所述多个终端装置中的每一个终端装置的多个声音信号电平；以及
发言人确定部，以多个信号电平为基础将所述多个终端装置中的一个终端装置选定为发言终端装置，并且通过所述通信部向所述发言终端装置请求发送发言内容，
其中，所述通信部接收所述发言终端装置响应于所述发言人确定部的请求而发送的发言内容，并通过所述至少一个物理端口向所述多点会议单元传送所述发言内容。
9.根据权利要求8所述的多点会议单元网关，其中，
所述发言人确定部将被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置。
10.根据权利要求9所述的多点会议单元网关，其中，
所述发言人确定部在所述被输入已设定的大小以上的声音信号电平的终端装置为多个的情况下，将被输入最大大小的声音信号电平的终端装置选定为发言终端装置。
11.根据权利要求8所述的多点会议单元网关，其中，
所述发言人确定部将在已设定的时间以上的时间内被输入已设定的大小以上的声音信号电平的终端装置选定为发言终端装置。
12.根据权利要求8所述的多点会议单元网关，其中，
所述发言人确定部在输入到所述发言终端装置的声音信号电平的大小不到已设定的大小时解除选定为所述发言终端装置，
所述通信部向被解除选定为所述发言终端装置的终端装置发送发言内容传送中断请求。
13.根据权利要求8所述的多点会议单元网关，其中，
所述发言人确定部在所述发言终端装置未被输入声音信号已设定的时间以上时解除选定为所述发言终端装置，
所述通信部向被解除选定为所述发言终端装置的终端装置发送发言内容传送中断请求。
14.根据权利要求8所述的多点会议单元网关，其中，
所述通信部通过所述至少一个物理端口从所述多点会议单元接收经混合的视频信号及音频信号，并且向通过网络连接的所述多个终端装置中的每一个终端装置传送经混合的所述视频信号及音频信号。
CN201410854131.6A 2014-08-28 2014-12-31 多人视频会议服务的参与者扩展方法及mcu网关 Pending CN105812713A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0113318 2014-08-28
KR1020140113318A KR101685466B1 (ko) 2014-08-28 2014-08-28 다자간 영상 회의 서비스의 참여자 확장 방법

Publications (1)

Publication Number Publication Date
CN105812713A true CN105812713A (zh) 2016-07-27

Family

ID=55399925

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410854131.6A Pending CN105812713A (zh) 2014-08-28 2014-12-31 多人视频会议服务的参与者扩展方法及mcu网关

Country Status (4)

Country Link
US (1) US9462229B2 (zh)
KR (1) KR101685466B1 (zh)
CN (1) CN105812713A (zh)
WO (1) WO2016032051A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108833825A (zh) * 2018-06-26 2018-11-16 广州视源电子科技股份有限公司 视频会议发言人终端的确定方法、装置、设备和存储介质
CN111193896A (zh) * 2019-12-25 2020-05-22 视联动力信息技术股份有限公司 一种终端角色切换方法、装置、终端设备和存储介质
CN111212254A (zh) * 2019-12-25 2020-05-29 视联动力信息技术股份有限公司 一种终端切换方法、装置、终端设备和存储介质
CN111276152A (zh) * 2020-04-30 2020-06-12 腾讯科技（深圳）有限公司 一种音频处理方法、终端及服务器
CN113873195A (zh) * 2021-08-18 2021-12-31 荣耀终端有限公司 视频会议控制方法、装置和存储介质

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9812150B2 (en) 2013-08-28 2017-11-07 Accusonus, Inc. Methods and systems for improved signal decomposition
US10468036B2 (en) 2014-04-30 2019-11-05 Accusonus, Inc. Methods and systems for processing and mixing signals using signal decomposition
US20150264505A1 (en) 2014-03-13 2015-09-17 Accusonus S.A. Wireless exchange of data between devices in live events
KR101685466B1 (ko) * 2014-08-28 2016-12-12 삼성에스디에스 주식회사 다자간 영상 회의 서비스의 참여자 확장 방법
CN105847096B (zh) * 2016-05-12 2018-10-30 腾讯科技（深圳）有限公司 一种包含音频数据的通信方法、装置及系统
CN105915837B (zh) * 2016-05-30 2019-10-25 华为技术有限公司 一种视频切换方法、装置和系统
CN107302679A (zh) * 2017-06-13 2017-10-27 成都全云科技有限公司 一种视频会议访问接入系统
CN110430386B (zh) * 2019-07-26 2020-08-11 四川新东盛科技发展有限公司 一种基于云资源池技术的视频会议系统及其工作方法
US11451742B2 (en) * 2020-12-04 2022-09-20 Blackberry Limited Speech activity detection using dual sensory based learning
CN116866756A (zh) * 2023-08-10 2023-10-10 恩平市艺星电子有限公司 一种可节约无线频率资源的无线会议麦克风系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1257631A (zh) * 1997-03-27 2000-06-21 法国电讯公司 视频会议系统
US6457043B1 (en) * 1998-10-23 2002-09-24 Verizon Laboratories Inc. Speaker identifier for multi-party conference
CN101335869A (zh) * 2008-03-26 2008-12-31 北京航空航天大学 一种基于Soft-MCU策略的视频会议系统
CN101478642A (zh) * 2009-01-14 2009-07-08 镇江畅联通信科技有限公司 视频会议系统的多画面混图方法及装置
CN101951494A (zh) * 2010-10-14 2011-01-19 上海紫南信息技术有限公司 传统电话与视频会议显示图像融合的方法
CN102025970A (zh) * 2010-12-15 2011-04-20 广东威创视讯科技股份有限公司 自动调整视频会议显示模式的方法及系统
CN102404542B (zh) * 2010-09-09 2014-06-04 华为终端有限公司 多屏视频会议中对与会者图像显示进行调整的方法及装置

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100238470B1 (ko) * 1995-11-30 2000-01-15 윤종용 화상회의시스템의다수화자선택장치및방법
US6418125B1 (en) * 1998-06-18 2002-07-09 Cisco Technology, Inc. Unified mixing, speaker selection, and jitter buffer management for multi-speaker packet audio systems
US7353251B1 (en) * 1999-12-23 2008-04-01 Polycom, Inc. Automated call launching
US6574331B1 (en) * 2000-01-10 2003-06-03 Cisco Technology, Inc Method and apparatus for providing a call center in a network-base telephone system
US6704769B1 (en) * 2000-04-24 2004-03-09 Polycom, Inc. Media role management in a video conferencing network
US20020095498A1 (en) * 2000-06-05 2002-07-18 Accordion Networks Network architecture for multi-client units
JP2002300274A (ja) * 2001-03-30 2002-10-11 Fujitsu Ltd ゲートウェイ装置及び音声データ転送方法
US7289493B1 (en) * 2002-02-21 2007-10-30 Telecontinuity, Inc. System and method for providing location independent voice communications continuity through disasters
KR100498291B1 (ko) * 2003-01-17 2005-07-01 엘지전자 주식회사 휴대폰을 이용한 홈 네트워크 제어 장치 및 방법
JP4453294B2 (ja) * 2003-07-31 2010-04-21 ソニー株式会社 マイクロフォン・スピーカ一体構成型・通話装置
KR100649645B1 (ko) * 2004-03-26 2006-11-24 디지털아키텍트 주식회사 Ｖｏｉｐ 기반 멀티 캐스트 화상회의 시스템 및 화상회의방법
US7707262B1 (en) * 2004-12-28 2010-04-27 Aol Llc Negotiating content controls
US20070115928A1 (en) * 2005-11-08 2007-05-24 Benco David S Network support for enhanced VoIP caller ID
US20080172232A1 (en) * 2007-01-12 2008-07-17 Gurley Scott A Voice triggered emergency alert
JP5381712B2 (ja) 2007-08-28 2014-01-08 旭硝子株式会社 無アルカリガラスの製造方法
US8514265B2 (en) * 2008-10-02 2013-08-20 Lifesize Communications, Inc. Systems and methods for selecting videoconferencing endpoints for display in a composite video image
US8456510B2 (en) * 2009-03-04 2013-06-04 Lifesize Communications, Inc. Virtual distributed multipoint control unit
US8643695B2 (en) * 2009-03-04 2014-02-04 Lifesize Communications, Inc. Videoconferencing endpoint extension
KR101026033B1 (ko) 2009-03-26 2011-03-30 주식회사 케이티 Ｍｃｕ와 연동된 영상 서비스 제공 방법 및 시스템
US20120310395A1 (en) * 2010-02-12 2012-12-06 Phonak Ag Wireless sound transmission system and method using improved frequency hopping and power saving mode
US8824487B1 (en) * 2010-04-29 2014-09-02 Centurylink Intellectual Property Llc Multi-access gateway for direct to residence communication services
JP2012203122A (ja) * 2011-03-24 2012-10-22 Panasonic Corp 音声選択装置並びにそれを使用したメディア機器およびハンズフリー通話装置
CN102945029B (zh) * 2012-10-31 2014-12-10 鸿富锦精密工业（深圳）有限公司 智能网关、智能家居系统及家电设备的智能控制方法
US9210381B2 (en) * 2013-06-24 2015-12-08 Dialogic Corporation Resource-adaptive video encoder sharing in multipoint control unit
GB201406789D0 (en) * 2014-04-15 2014-05-28 Microsoft Corp Displaying video call data
KR101685466B1 (ko) * 2014-08-28 2016-12-12 삼성에스디에스 주식회사 다자간 영상 회의 서비스의 참여자 확장 방법
US9167098B1 (en) * 2014-09-29 2015-10-20 Edifire LLC Dynamic conference session re-routing in secure media-based conferencing

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1257631A (zh) * 1997-03-27 2000-06-21 法国电讯公司 视频会议系统
US6457043B1 (en) * 1998-10-23 2002-09-24 Verizon Laboratories Inc. Speaker identifier for multi-party conference
CN101335869A (zh) * 2008-03-26 2008-12-31 北京航空航天大学 一种基于Soft-MCU策略的视频会议系统
CN101478642A (zh) * 2009-01-14 2009-07-08 镇江畅联通信科技有限公司 视频会议系统的多画面混图方法及装置
CN102404542B (zh) * 2010-09-09 2014-06-04 华为终端有限公司 多屏视频会议中对与会者图像显示进行调整的方法及装置
CN101951494A (zh) * 2010-10-14 2011-01-19 上海紫南信息技术有限公司 传统电话与视频会议显示图像融合的方法
CN102025970A (zh) * 2010-12-15 2011-04-20 广东威创视讯科技股份有限公司 自动调整视频会议显示模式的方法及系统

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108833825A (zh) * 2018-06-26 2018-11-16 广州视源电子科技股份有限公司 视频会议发言人终端的确定方法、装置、设备和存储介质
CN111193896A (zh) * 2019-12-25 2020-05-22 视联动力信息技术股份有限公司 一种终端角色切换方法、装置、终端设备和存储介质
CN111212254A (zh) * 2019-12-25 2020-05-29 视联动力信息技术股份有限公司 一种终端切换方法、装置、终端设备和存储介质
CN111276152A (zh) * 2020-04-30 2020-06-12 腾讯科技（深圳）有限公司 一种音频处理方法、终端及服务器
CN113873195A (zh) * 2021-08-18 2021-12-31 荣耀终端有限公司 视频会议控制方法、装置和存储介质

Also Published As

Publication number Publication date
US20160065898A1 (en) 2016-03-03
WO2016032051A1 (ko) 2016-03-03
KR20160025875A (ko) 2016-03-09
KR101685466B1 (ko) 2016-12-12
US9462229B2 (en) 2016-10-04

Similar Documents

Publication Publication Date Title
CN105812713A (zh) 多人视频会议服务的参与者扩展方法及mcu网关
US10757050B2 (en) System and method for topic based segregation in instant messaging
US20050207357A1 (en) Multipoint conferencing system employing IP network and its configuration method
US9749588B2 (en) Facilitating multi-party conferences, including allocating resources needed for conference while establishing connections with participants
US8885298B2 (en) Conference roll call
CN101731009B (zh) 用于提供视频会议参与者的可视资源的方法和设备
CN101917586B (zh) 一种会议的加入方法和设备
EP2991325A1 (en) Remote conference realizing method and apparatus
US20200341625A1 (en) Automated conference modality setting application
WO2000060809A8 (en) Apparatus and method for establishing an audio conference in a networked environment
US9485596B2 (en) Utilizing a smartphone during a public address system session
US20150030150A1 (en) Systems, Methods, and Computer Programs for Transitioning from a Phone-Only Mode to a Web Conference Mode
US9438857B2 (en) Video conferencing system and multi-way video conference switching method
US11349886B2 (en) Control method of multimedia conference terminal and multimedia conference server
US20190089754A1 (en) System and method for providing audio conference between heterogenious networks
US7672996B2 (en) Methods and apparatuses for automatically reconnecting a participant to a conference
US20080101575A1 (en) Participant prioritization on telephone conference calls
CN103369292B (zh) 一种呼叫处理方法及网关
CN110971864B (zh) 一种云视讯会议中快速召开会议系统
CN111542034B (zh) 一种二元配置远程会议的协同管理方法和装置
WO2023181886A1 (ja) 会議支援装置、および会議支援方法
EP3984205B1 (en) Mixing and transmitting multiplex audiovisual information
US20230421620A1 (en) Method and system for handling a teleconference
CN103516919A (zh) 发送音频数据的方法、装置及终端
CN116112633A (zh) 一种视频会议方法、系统、服务器及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160727