CN110521202B - 能够利用多个视频会议用终端提供多屏视频会议的视频会议服务器及其方法 - Google Patents

Abstract

本发明隔开一种能够利用多个视频会议用终端提供多屏视频会议的视频会议服务器及其方法。本发明的视频会议服务器可以实现为将多个配备有一个或两个显示器的现有的视频会议终端(物理终端)逻辑捆绑而使其如同以一个视频会议点进行操作的“逻辑终端”进行操作。视频会议服务器可以通过向构成逻辑终端的多个物理终端提供的视频的分配使得逻辑终端支持多屏幕。

Description

能够利用多个视频会议用终端提供多屏视频会议的视频会议 服务器及其方法

技术领域

本发明涉及一种多点视频会议(Multi Point Videoconferencing)系统，尤其涉及一种即使没有现有的网真(Telepresence)装置，也能够利用多个视频会议用终端提供可显示用于多点视频会议的多个视频的多屏视频会议的视频会议服务器及其方法。

背景技术

视频会议系统通常分为使用诸如H.323和会话发起协议(SIP：SessionInitiation Protocol)等标准协议的基于标准的视频会议终端(或系统)，以及使用开发人员自己开发的专有协议的非标准视频会议终端。

虽然CISCO、POLYCOM、AVAYA、LIFESIZE等主流的视频会议设备公司提供上文提及的利用标准协议的视频会议解决方案，但是在仅利用标准技术制造产品的情况下难以实现多样的功能，因此提供非标准视频会议系统的公司也很多。

<用于基于标准终端的多视频会议的MCU>

视频会议系统包括仅连接两个视频会议终端(两个点)的1：1视频会议，以及同时连接多个视频会议终端(多个点)的多视频会议。加入视频会议的所有视频会议终端分别作为一个视频会议点(Point)，优选地按每个点分配至少一个会议参与者。

由于标准视频会议终端与对方连接一个会话，并且通常仅处理一个视频和音频，因此基本适用于1：1视频会议，若在标准终端也利用H.239和二进制发言权控制协议(BFCP：Binary Floor Control Protocol)，则还能够再处理一个用于文档会议的辅助视频。在此，BFCP作为用于在会议(Conference)系统中执行发言权控制(Floor Control)的二进制(Binary)形式的格式，是用于在处理协作软件(Collaboration Software)的终端之间的协作会话期间内处理发言权控制的标准。

为了解决标准视频会议系统中如上所述的技术限制并执行连接三个以上点的多视频会议，而并非1：1视频会议，额外需要一种称为多点会议单元(MCU：MultipointConferencing Unit)的装置。MCU通过混合(Mixing)从三个以上点提供的视频而逐个地制作用于各个点的视频，进而提供给标准终端，从而消除标准协议的限制。混合是成本消耗相对较高的作业。

结合到视频会议的所有视频会议终端将自身生成的视频和音频数据压缩而发送给对方，因此MCU为了将这些视频重新混合，将压缩后的视频再次解码(Decoding)而恢复为原来的视频数据，接下来执行根据预设的布局渲染(Rendering)多个视频来创建新视频的混合过程。MCU将完成混合的视频再次编码(Encoding)而分配到各个点。因此，MCU或者配备有MCU功能的服务器在视频会议系统中是相对非常高价的设备，但对于多视频会议来说是核心设备。

当混合视频时，在终端对一个视频进行处理，因此从技术上看，与以1:1进行会议时没有差异，但是在MCU所提供的视频中，由多个点提供的视频以画旁画(PBP：Picture byPicture)、画中画(PIP：Picture in Picture)等形态进行结合。此外，终端侧所需的带宽在与1:1视频会议相比时实际上也没有差异。

<非标准视频会议系统中的多视频会议>

在非标准视频会议系统中，不使用标准MCU而对视频进行处理，当需要与标准视频终端连接时则利用单独的网关(Gateway)。多点的终端经历注册一台服务器并加入特定会议房间的过程。也存在一部分非标准产品没有服务器而通过端对端(P2P：Peer to Peer)进行处理的情况。

在非标准视频会议系统中，不使用MCU或者执行MCU功能的装置的原因在于实现MCU功能需要高价的高性能服务器。代替执行混合视频，各个终端大多使用单纯地将自身生成的视频中继(Relay)到其他参与者(其他点的终端)的方法。中继方式与混合相比，优点在于使用服务器的系统资源较少，但是缺点在于视频中继所需的网络带宽却呈几何级数增长。

例如，在假设为五人(五个点)加入同一会议房间且在各个点一次观看所有其他参与者提供的画面的情形下进行计算，则需要将本人的视频传送到服务器并接收其他四人视频，因此需要25倍(5×5)的带宽。如果正有十个视频会议终端加入，则需要100倍(10×10)的带宽。随着视频会议参与者增加，所需的带宽呈几何级数增长。

<文档视频会议的令牌获取>

虽然现有的一般视频会议终端能够将主视频画面和文档视频画面同时分别输出到两个显示装置，但是在许多廉价的视频会议设备中仅支持单个显示器输出的情况很多。仅支持单个显示器的视频会议终端可能支持用于文档视频会议的H.239或BFCP，也可能不支持。

当在单个显示器显示根据H.239或BFCP协议的文档视频时，通常将画面分割而进行显示，并且还可以在终端本身提供将两个视频显示为多种形态的各种布局。并且，大多数终端还支持选择并放大主视频或文档视频的功能。

如上所述，视频会议终端可以传输一个视频，但是若利用H.239或BFCP技术能够追加传输文档视频。为了传输文档视频，演示者需要获取演示者令牌(Token)，然而加入视频会议的终端中只有一个终端(即，一个点)可以具有令牌。因此，能够将参与者主视频和文档视频同时传输至服务器的只有获取了演示者令牌的终端。

<网真>

另外，CISCO及POLYCOM等主流供应商都提供超高价的网真(Telepresence)技术的视频会议设备，该设备不仅支持三个或四个显示器输出，而且能够在没有演示者令牌的情况下传输与其所支持的输出显示器数量所对应的视频。在相关业界中，用于视频会议的多视频传输功能被认为是网真设备独有的功能。

网真设备不能与一般视频会议终端联动，必须有单独提供的高价的网关设备才能相互联动。即使这样联动，与一般视频会议设备之间通话的情形相比，视频质量也会大大下降。由于这样的原因，具有三个显示器输出的视频会议终端相对而言几乎未被普及，由于标准技术的限制而在扩展性方面受到限制。

<相关现有技术>

韩国公开专利第10-2016-0062787号(为了视频会议混合处理多个视频源的方法、利用此的视频会议终端装置、视频会议服务器及视频会议系统)

发明内容

技术问题

本发明的目的在于提供一种能够利用多个视频会议用终端提供用于多点视频会议的多屏视频会议的视频会议服务器及其方法。

如背景技术中所述地，现有的视频会议终端根据自身拥有的视频输出端子的数量确定能够连接的显示装置的数量。对于一般通用的视频会议终端而言，最多支持两个屏幕，被称为网真(Telepresence)的设备支持三个以上的多屏幕，但是价格昂贵。为了解决这一问题，本发明的目的在于将各个末端(End Point)拥有的多个视频会议终端构成为逻辑终端，进而使得多个视频会议终端如同拥有多屏幕的一个视频会议点一样进行操作，从而在没有现有的网真设备的情况下，也可以提供一种能够提供多屏视频会议的视频会议服务器及其方法。

并且，本发明的目的在于提供一种如下的多屏视频会议服务器及方法：如同超高价的网真设备发送多个视频一样，即使没有演示者令牌，也能够传送多个视频并实现三个以上的显示器输出。

技术方案

用于达成上述目的的根据本发明的视频会议服务器的多屏视频会议服务提供方法通过服务器的终端注册部、通话连接部、视频处理部执行，能够将多个物理终端捆绑为一个逻辑终端而以虚拟的视频会议点进行操作，并利用逻辑终端所包括的多个显示装置提供多屏视频会议服务。

本发明包括如下步骤：注册步骤，终端登录部将多个物理终端注册为一个逻辑终端，从而注册为所述多个物理终端作为一个视频会议点进行操作；

呼叫连接步骤，通话连接部连接多个视频会议点之间的视频会议，并且针对所述逻辑终端，与构成所述逻辑终端的多个物理终端独立连接；源视频接收步骤，所述通话连接部接收从所述多个视频会议点所提供的源视频，且针对所述逻辑终端，从所述多个物理终端中的每一个接收所述源视频；多屏视频提供步骤，所述通话连接部将通过所述源视频接收步骤接收的所有源视频中的从其他视频会议点提供的视频分配给所述逻辑终端的多个物理终端，从而使所述逻辑终端作为一个虚拟视频会议点进行操作。

根据实施例，上述呼叫连接步骤在主叫方或接收方为所述逻辑终端的情况下与一般点不同地进行处理。若呼叫连接的主叫方为属于所述逻辑终端的物理终端，则所述通话连接部与所述逻辑终端中的其余物理终端也生成单独的连接。并且，若所述呼叫连接的接收方为属于所述逻辑终端的物理终端，则所述通话连接部与所述逻辑终端中的其余物理终端也生成单独的连接。例如，呼叫连接可以使用H.323和会话发起协议(SIP：SessionInitiation Protocol)等协议。

根据实施例，所述提供多屏视频步骤包括如下步骤：视频处理部利用通过所述源视频接收步骤接收到的所有源视频混合将要分配至构成所述逻辑终端的多个物理终端中的每一个的视频。

例如，所述视频处理部在通过所述源视频接收步骤接收的所有的M个源视频中利用除了从所述逻辑终端接收的m2个视频之外的m3个视频混合为用于所述多个物理终端的m1个视频。其中，m1为所述逻辑终端所包括的显示装置的数量，m3如下所述的数学式。

m3＝M-m2

(在此，M为所有源视频的数量，m2为构成所述逻辑终端的物理终端的数量)。

在此，若所述多个视频会议点中的一个获得用于文档会议的演示者令牌，则相应物理终端提供两个源视频，因此所述M可以为所有源视频的数量加1的值。

根据另一实施例，在所述提供多屏视频步骤中，所述视频处理部也可以在将要提供至所述多个物理终端中的每一个的视频将所述逻辑终端自身的源视频一同混合。

根据又一实施例，所述提供多屏视频步骤也可以通过其他方法实现。例如，在所述提供多屏视频步骤中，所述通话连接部可以将通过所述源视频接收步骤接收的所有源视频中的从其他视频会议点提供的视频依次提供给所述逻辑终端。通过这样的处理，能够通过现有的中继方式等实现视频显示。

本发明的权利同样适用于为了执行上述方法而配备有所述终端注册部、通话连接部及视频处理部的视频会议服务器。

有益效果

本发明的视频会议服务器可以实现为将多个配备有有限数量(通常为一个或两个)的显示器的视频会议终端(物理终端)逻辑捆绑，从而如同作为一个视频会议点进行操作的逻辑终端一样地进行操作。视频会议服务器可以通过向构成逻辑终端的多个物理终端提供的视频的分配，从而处理为如同逻辑终端支持多屏幕。

在多点视频会议中，视频会议服务器根据逻辑终端配备的屏幕(即，显示装置)的数量分配其他的视频会议点的视频，因此从逻辑终端所包括的物理终端来看，相比以往，具有要显示的其他的视频会议点的数量减少的效果，因此在一个屏幕显示的视频的复杂度也降低。由于视频的复杂度降低，因此具有在例如在性能较低的物理终端或网速较低的网络改善视频质量的效果。

本发明的逻辑终端仅通过视频会议服务器的内部处理实现，并且物理终端之间没有直接连接，因此即使配备有互不相同的视频编码解码器或者系统性能互不相同或厂家互不相同的物理终端，在捆绑为一个逻辑终端进行处理时不存在问题。当然，由于通过逻辑终端提供多屏幕，因此无需为了支持多屏幕而升级个别视频会议终端的系统资源。

附图说明

图1是根据本发明的一实施例的视频会议系统的构成图。

图2是图1的三个点全部参与的多视频会议连接图。

图3是用于说明本发明的视频会议服务器的多屏视频会议服务提供方法的流程图。

具体实施方式

以下，参照附图对本发明进行更详细的说明。

参照图1，本发明的视频会议系统100中，服务器110与多个视频会议终端通过网络30连接，其不仅支持连接两个连接点(Point)的1:1视频会议，并且支持连接三个以上点的多点视频会议。图1所示的视频会议终端11、13、15、17、19示例性地图示了可连接的视频会议终端。

服务器110与视频会议终端11、13、15、17、19之间的连接网络30可以是IP网络(IPNetwork)，并且可以包括通过网关(Gateway)连接的异构网络或者与异构网络连接。例如，利用移动通信网络的无线电话也可以作为本发明的视频会议终端，在这种情况下，网络30包括能够通过网关(Gateway)连接而处理IP分组的移动通信网络。

服务器110整体地控制本发明的视频会议系统100，并且除了现有的一般视频会议处理用服务器功能之外，还包括终端注册部111、通话连接部113及视频处理部115。

终端注册部111执行下文所述的物理终端和逻辑终端的注册、设定及管理等，通话连接部113控制本发明的视频会议呼叫(Call)连接。视频处理部115在连接视频会议呼叫的情况下对在物理终端和/或逻辑终端之间提供的视频进行处理(混合、解码、编码等)，从而实现网真等多屏幕(Multi Screen)。下文将参照图3对终端注册部111、通话连接部113及视频处理部115的细部操作再次进行说明。

视频会议系统100所包括的所有视频会议终端11、13、15、17、19是能够连接一个显示装置或者为了文档会议而连接两个显示装置的视频会议终端，其支持关于视频会议的标准协议，但是并不是提供背景技术中说明的网真服务的终端。作为标准协议，包括H.323和会话发起协议(SIP：Session Initiation Protocol)等。

并且，各个视频会议终端11、13、15、17、19是配备有视频/音频编码解码器(Codec)的现有视频会议终端。当然，视频会议终端11、13、15、17、19中的支持文档会议的终端支持H.239和二进制发言权控制协议(BFCP：Binary Floor Control Protocol)。

连接于本发明的视频会议系统的视频会议终端可以构成“逻辑终端”。逻辑终端是多个视频会议终端的逻辑组合，可以由两个视频会议终端构成，也可以由三个以上视频会议终端构成，但是构成逻辑终端的多个视频会议终端之间没有直接连接。通常的视频会议终端分别作为一个视频会议点进行操作，但是对逻辑终端而言，多个视频会议终端作为一个视频会议点进行操作。在另一方面，逻辑终端配备有相当于将作为其构成成员的物理终端所拥有的所有显示装置全部相加的数量的显示装置。根据需要，逻辑终端可以将多个构成终端中的一个指定为代表终端。

以下，为了区分逻辑终端和现有的一般视频会议终端，将现有的一般视频会议终端称为“物理终端”。逻辑终端是由多个物理终端逻辑结合而成的。即使逻辑终端包括再多的物理终端，在视频会议内都被视为一个连接点。

例如，图1是两个逻辑终端130、150与一个物理终端19通过服务器110相互连接的三个连接点A、B、C的多视频会议系统。相当于第一点A的第一逻辑终端130由具有一个显示装置的第一物理终端11及第二物理终端13构成，相当于第二点B的第二逻辑终端150由具有两个显示装置的第三物理终端15和具有一个显示装置的第四物理终端17构成。

由于逻辑终端是被服务器110管理的逻辑构成，并且标准协议仅支持1：1连接，因此服务器110与逻辑终端的连接表示，构成逻辑终端的所有物理终端与服务器110根据标准协议而单独连接的情形。例如，根据SIP协议，图1是五个物理终端11、13、15、17、19(不管是否构成有逻辑终端)与服务器110生成五个SIP(Session)会话的情形。

本发明的视频会议系统的服务器110支持以下的连接。

(1)一个物理终端与一个逻辑终端连接的视频会议

例如，图1的第五物理终端19呼叫第一逻辑终端130的情况。服务器110同时或依次呼叫并连接构成第一逻辑终端130的第一物理终端11及第二物理终端13。

(2)单个逻辑终端呼叫一个物理终端的视频会议

例如，用户通过作为第一逻辑终端130中的代表终端的第一物理终端11呼叫第五物理终端19的情况。服务器110同时或依次呼叫并连接作为构成第一逻辑终端130的其他的物理终端的第二物理终端13和作为接收方的第五物理终端19。

(3)一个逻辑终端呼叫另一个逻辑终端的视频通话

例如，图1的第一逻辑终端130呼叫第二逻辑终端150的情况。在用户利用第一逻辑终端130的代表终端11呼叫第二逻辑终端150的情况下，服务器110同时或依次呼叫并连接构成第二逻辑终端150的两个物理终端15、17，并且呼叫并连接主叫方的作为除了代表终端11之外的其余终端的第二物理终端13。

(4)多点视频会议

如图1所示，本发明的视频会议系统支持逻辑终端由一个点连接的三个点以上的连接。可以连接一个逻辑终端与两个物理终端，可以连接两个以上逻辑终端与一个物理终端，也可以将两个以上的逻辑终端相连接。多点的连接可以通过现有的公知方法进行处理。但是不同点在于，如果新参与的点为逻辑终端，则必须与作为其构成成员的所有物理终端全部连接。

<多屏支持>

本发明的视频会议系统100可以利用逻辑终端体系提供诸如网真等多屏幕。虽然逻辑终端是虚拟终端，但是将其处理为配备有相当于作为其构成成员的多个物理终端整体能够提供的屏幕的数量。

服务器110通过匹配各个逻辑终端所包括的显示装置的数量(或者服务器要向各个逻辑终端提供的视频的数量)m1与连接视频会议的点所包括的所有物理终端的数量(源视频的数量)M的方法重构多视频会议的视频，从而针对逻辑终端将m3个视频重新编辑为m1个视频进行提供。在此，m3是逻辑终端为了视频会议而需要显示的源视频的数量，如以下的数学式1。

[数学式1]

m3＝M-m2

在此，m2是构成各个逻辑终端的物理终端的数量。

另外，各个物理终端可以设定或请求显示自己的视频(源视频)。在这种情况下，针对各个逻辑终端将m3个视频重新编辑为m1个视频而向构成逻辑终端的各个物理终端分配时，可以将该物理终端所提供的源视频一同混合而进行提供。

只要m3与m1不是相同的值，则服务器110就需要进行混合源图像的重新处理。但是，根据实施例，可以以预定的时间间隔依次提供m3个视频而不会针对逻辑终端将m3个视频重新编辑为m1个视频。例如，在m3＝3，m1＝1的情况下，也可以依次提供三个源视频，而不是将三个源视频通过混合等进行重新编辑。在这种情况下，还能够实现现有的标准视频会议终端曾经无法实现的中继方式的视频会议处理。

另外，不管是否构成有逻辑终端，加入本发明的视频会议的任何一个物理终端只要获得演示者令牌就可以提供两个源视频。例如，随着获取演示者令牌，第一物理终端11可以将文档会议用视频与主视频一同提供至服务器110。在这种情况下，M为连接于视频会议的点所包括的所有物理终端的数量再加1的值。

图2是图1的三个点全部参与的多视频会议连接图，假设第一逻辑终端130、第二逻辑终端150及第五物理终端19相互连接，进而连接成三个点的多视频会议。参照图2，该视频会议所包括的物理终端11、13、15、17、19的数量为五个(M＝5)。即，五个物理终端11、13、15、17、19所提供的五个源视频11a、13a、15a、17a、19a被提供给服务器110，因此服务器110根据各个点所配备的显示装置的数量m1对五个源视频进行编辑，并提供给各个点。

第一逻辑终端130将第一物理终端11和第二物理终端13组合配备有两个显示装置，因此m1＝2，m2＝2。在这次的三点多视频会议中，与第一逻辑终端130连接到视频会议的终端为，以物理终端为基准为第三物理终端15至第五物理终端19，即为三个(m3,3＝5-2)，因此要将三个物理终端所提供的三个源视频重新编辑为两个视频而进行显示。可以单独决定在哪个屏幕显示哪个源视频，并且在图2中，第一物理终端11显示第五物理终端19的源视频，第二物理终端13显示将第三物理终端15和第四物理终端17的源视频混合为一个的视频。

第二逻辑终端150中，第三物理终端15配备有两个显示装置，第四物理终端17配备有一个显示装置，从而包括三个显示装置，因此m1＝3，m2＝2。因此针对第二逻辑终端150，服务器110将三个显示装置所提供的源视频显示为三个视频。由于需要显示的源视频的数量与屏幕的数量一致，因此逐个再次显示即可。可以单独决定在哪个屏幕显示哪个源视频，在图2中构成为第三物理终端15将第一物理终端11及第二物理终端13的源视频分别显示，

第四物理终端17显示第五物理终端19所提供的源视频。

第五物理终端19也同样适用数学式1。在第五物理终端19中，m1＝2,m2＝1，因此服务器110将四个源视频(m3＝5-1)重新编辑为两个(m1)视频而提供给第五物理终端19。第五物理终端19要在两个显示装置显示第一逻辑终端130和第二逻辑终端150的所有四个物理终端11、13、15、17提供的源视频，因此构成为对四个源视频进行适当的编辑而显示为两个视频。

如果构成第二逻辑终端150的第三物理终端15获得了演示者令牌，则能够提供两个源视频。在这种情况下，第二逻辑终端150一共提供三个源视频，M为6。服务器110为了向第一逻辑终端130、第二逻辑终端150及第五物理终端19发送而要处理的源视频的数量也比上文所述的数量分别多一个。

以下，参照图3，对服务器110的多屏幕视频会议服务提供方法进行说明。为了便于说明，以图2中的第一逻辑终端130的第一物理终端11作为主叫方而将第二逻辑终端150作为接收方进行通话连接的过程为中心进行说明。首先，需要进行注册逻辑终端的过程。

<逻辑终端的注册步骤：S301>

服务器110的终端注册部111进行物理终端与逻辑终端的注册并进行管理。物理终端的注册应该优先于逻辑终端的注册或同时执行，并且各个终端的IP地址(IP Address)对于各个物理终端的注册都是必不可少的。

物理终端的注册过程可以通过现有的多种公知方法进行注册。例如，还可以利用通过SIP协议上的注册(Register)命令的位置注册过程进行物理终端的注册，此时可以包括物理终端的电话号码等。若物理终端的位置被注册，则服务器110可以确认该物理终端当前是否打开(Turn On)而正在进行操作。

逻辑终端的注册指定相应逻辑终端所包括的物理终端，并且注册连接到各个物理终端的显示装置的数量。根据实施例也可以设定逻辑终端所包括的显示装置之间的布置(或者相对位置)和根据源视频的数量(m3)的视频混合方式(包括中继方式)或者混合视频的布局(Layout)等。例如，终端注册部111接收将第一物理终端11和第二物理终端13构成为第一逻辑终端130的构成信息而进行注册及管理。逻辑终端的注册可以利用终端注册部111所提供的网页或者利用单独的访问终端。

<用于视频会议的发信呼叫-连接步骤：S303>

服务器110的通话连接部113在一个点接收到呼叫连接请求，从而开启各个视频会议点之间的视频会议呼叫设定。对SIP协议的情况而言，通话连接部113接收作为SIP信令消息的邀请(INVITE)。在图2的例中，第一逻辑终端130的第一物理终端11呼叫第二逻辑终端150的第三物理终端15，因此通话连接部113接收作为主叫方的第一物理终端11利用第三物理终端15的电话号码或者IP多种呼叫第三物理终端15的INVITE消息。

<询问发信者和/或收信者是否为逻辑终端：S305>

服务器110的通话连接部113向终端注册部111询问接收方电话号码是否为构成逻辑终端的物理终端中的一个电话号码(或IP地址)。同样，向终端注册部111询问主叫方电话号码是否为构成逻辑终端的物理终端中的一个电话号码(或IP地址)。据此，通话连接部113确认相应呼叫连接是否为与逻辑终端的连接。

根据实施例，通话连接部113额外地在接收方是构成逻辑终端的物理终端的情况下追加确认相应物理终端是否为该逻辑终端的代表终端，从而在并非为接收方代表终端的情况下，还可以不将接收方处理为逻辑终端。对于主叫方的情况而言，也通过确认相应主叫方是否为所属的逻辑终端中的代表终端，从而在并非为主叫方代表终端的情况下，还可以不将主叫方处理为逻辑终端。

<视频会议连接：S307、S309>

若接收方电话号码为逻辑终端，则通话连接部113与属于接收方逻辑终端的所有物理终端执行用于生成SIP会话的步骤。在图2的示例中，接收方为第二逻辑终端150，因此通话连接部113在与第三物理终端15和第四物理终端17之间生成SIP会话。此时，可以同时向第三物理终端15和第四物理终端17传递INVITE消息，也可以依次传递(S307)。

在图2的示例中，主叫方也是逻辑终端，因此通话连接部113与第一逻辑终端130的第二物理终端13也生成SIP会话。在图2的示例中，与第五物理终端19也可以生成SIP会话而使其键入视频会议(S309)。

接收到INVITE的接收方和/或主叫方的所有物理终端通过会话描述协议(SDP：Session Description Protocol)信息进行选择视频及音频编码解码器等的协商。如果成功完成协商，则建立实际会话而连接呼叫。

<从各个单个物理终端接收源视频的步骤：S311>

如上所述，由于逻辑终端的通话连接实际上是与构成逻辑终端的各个物理终端之间的连接，因此建立了多个会话。构成逻辑终端的物理终端也分别生成源视频而传送到服务器110。因此在图2的情况下，通话连接部113接收连接会话的五个物理终端11、13、15、17、19所提供的五个源视频11a、13a、15a、17a、19a。

<服务器的源视频的重新处理：S313>

服务器110的视频处理部115为了将从物理终端接收的源视频重新渲染(Rendering)为用于各个点的视频而对源视频进行解码、混合并重新编码。换句话而言，视频处理部115可以针对各个逻辑终端将m3个视频重新编辑为m1个视频。

视频处理部115按各个逻辑终端或物理终端而根据预设的布局或者根据各个终端侧所请求的布局来执行源视频的混合。

如上所述，在没有视频处理部115的视频处理的情况下，通话连接部113也可以按预设的时间间隔依次提供源视频，从而以中继形态进行显示。在这种情况下，可以不进行混合等过程而按原样传送，如果需要匹配相应终端的视频编码解码器，则变更视频格式或者进行转码(TransCoding)即充分。

<向各个物理终端传送编码后的视频数据：S315>

通话连接部113将视频处理部115为了各个物理终端11、13、15、17、19而处理的视频提供给正在参与视频会议的各个物理终端11、13、15、17、19。据此，正在参与视频会议的各个点可以接收利用如同基于多屏幕的网真的服务。

通过以上的方法处理本发明的视频会议系统100的视频会议用多屏幕。

<实施例>

当注册逻辑终端时，终端注册部111可以生成并注册用于相应逻辑终端的虚拟电话号码。在这种情况下，仅当在步骤S305中接收方电话号码为逻辑终端的虚拟电话号码时，才可以将接收方处理为逻辑终端。

以上，图示并说明了本发明的优选实施例，但本发明并不局限于上述特定的实施例，在不超出本发明的权利范围所请求保护的本发明的主旨的情况下，在本发明所属技术领域中具有普通知识水平的人员可进行多种变形实施，这些变形实施不能独立于本发明的技术思想或展望而被理解。

Claims (14)

1.一种视频会议服务器的多屏视频会议服务提供方法，其特征在于，包括如下步骤：

注册步骤，终端登录部将多个物理终端注册为一个逻辑终端，从而使所述多个物理终端作为一个视频会议点进行操作，所述一个逻辑终端是由所述多个物理终端逻辑结合而构成的；

呼叫连接步骤，通话连接部连接多个视频会议点之间的视频会议，并且针对所述一个逻辑终端，与构成所述一个逻辑终端的多个物理终端独立连接；

源视频接收步骤，所述通话连接部接收从所述多个视频会议点所提供的源视频，且针对所述一个逻辑终端，从构成所述一个逻辑终端的多个物理终端中的每一个接收所述源视频；

多屏视频提供步骤，所述通话连接部将通过所述源视频接收步骤接收的所有源视频中的从除了所述一个视频会议点以外的其他视频会议点提供的视频分配给构成所述一个逻辑终端的多个物理终端，从而使所述一个逻辑终端作为一个虚拟视频会议点进行操作。

2.根据权利要求1所述的视频会议服务器的多屏视频会议服务提供方法，其特征在于，

所述呼叫连接步骤包括如下步骤：

若呼叫连接的主叫方为属于所述一个逻辑终端的物理终端，则所述通话连接部与所述一个逻辑终端中的其余物理终端也生成单独的连接；或者

若所述呼叫连接的接收方为属于所述一个逻辑终端的物理终端，则所述通话连接部与所述一个逻辑终端中的其余物理终端也生成单独的连接。

3.根据权利要求1所述的视频会议服务器的多屏视频会议服务提供方法，其特征在于，

所述多屏视频提供步骤包括如下步骤：视频处理部利用通过所述源视频接收步骤接收到的所有源视频混合将要分配至构成所述一个逻辑终端的多个物理终端中的每一个的视频。

4.根据权利要求3所述的视频会议服务器的多屏视频会议服务提供方法，其特征在于，

所述视频处理部在通过所述源视频接收步骤接收的所有的M个源视频中利用除了从所述一个逻辑终端接收的m2个视频之外的m3个视频混合为用于构成所述一个逻辑终端的多个物理终端的m1个视频，

其中，m1为所述一个逻辑终端所包括的显示装置的数量，

并且，m3＝M-m2，

在此，M为所有源视频的数量，m2为构成所述一个逻辑终端的物理终端的数量。

5.根据权利要求4所述的视频会议服务器的多屏视频会议服务提供方法，其特征在于，

在所述多个视频会议点中的一个获得用于文档会议的演示者令牌的情况下，所述M为所有源视频的数量加1的值。

6.根据权利要求3所述的视频会议服务器的多屏视频会议服务提供方法，其特征在于，

在所述多屏视频提供步骤中，所述视频处理部在将要提供至构成所述一个逻辑终端的多个物理终端中的每一个的视频将所述一个逻辑终端自身的源视频一同混合。

7.根据权利要求1所述的视频会议服务器的多屏视频会议服务提供方法，其特征在于，

在所述多屏视频提供步骤中，所述通话连接部将通过所述源视频接收步骤接收的所有源视频中的从除了所述一个逻辑终端以外的其他视频会议点提供的视频依次提供给所述一个逻辑终端。

8.一种视频会议服务器，是能够提供多屏视频会议服务的视频会议服务器，其特征在于，包括：

终端注册部，将多个物理终端注册为一个逻辑终端，使得所述多个物理终端作为一个视频会议点进行操作，所述一个逻辑终端是由所述多个物理终端逻辑结合而构成的；

通话连接部，连接用于多个视频会议点之间的视频会议的呼叫，进而接收所述多个视频会议点提供的源视频，并且针对所述一个逻辑终端，与构成所述一个逻辑终端的多个物理终端独立连接，并从构成所述一个逻辑终端的多个物理终端中的每一个接收源视频；以及

视频处理部，利用所述通话连接部接收的源视频生成要向所述多个视频会议点提供的视频，

其中，所述通话连接部向构成所述一个逻辑终端的多个物理终端分配将要向所述一个逻辑终端提供的视频，从而使所述一个逻辑终端作为一个虚拟视频会议点进行操作。

9.根据权利要求8所述的视频会议服务器，其特征在于，

若所述呼叫连接的主叫方为属于所述一个逻辑终端的物理终端，则所述通话连接部与所述一个逻辑终端中的其余物理终端也生成单独的连接，

若所述呼叫连接的接收方为属于所述一个逻辑终端的物理终端，则所述通话连接部与所述一个逻辑终端中的其余物理终端也生成单独的连接。

10.根据权利要求8所述的视频会议服务器，其特征在于，

所述视频处理部利用从所述多个视频会议点接收的所有源视频混合将要分配至构成所述一个逻辑终端的多个物理终端中的每一个的视频。

11.根据权利要求10所述的视频会议服务器，其特征在于，

所述视频处理部在从所述多个视频会议点接收的所有的M个源视频中利用除了从所述一个逻辑终端接收的m2个视频之外的m3个视频混合为用于构成所述一个逻辑终端的多个物理终端的m1个视频，

其中，m1为所述一个逻辑终端所包括的显示装置的数量，

并且，m3＝M-m2，

在此，M为所有源视频的数量，m2为构成所述一个逻辑终端的物理终端的数量。

12.根据权利要求11所述的视频会议服务器，其特征在于，

在所述多个视频会议点中的一个获得用于文档会议的演示者令牌的情况下，所述M为所有源视频的数量加1的值。

13.根据权利要求10所述的视频会议服务器，其特征在于，

所述视频处理部在将要提供至构成所述一个逻辑终端的多个物理终端中的每一个的视频将所述一个逻辑终端自身的源视频一同混合。

14.根据权利要求8所述的视频会议服务器，其特征在于，

所述通话连接部将所有源视频中的从除了所述一个视频会议点以外的其他视频会议点提供的视频依次提供给所述一个逻辑终端。

Images