CN116320259A

CN116320259A - 媒体码流流速控制方法、装置、设备及存储介质

Info

Publication number: CN116320259A
Application number: CN202211102746.4A
Authority: CN
Inventors: 张强
Original assignee: Beijing Rongxun Technology Co ltd
Current assignee: Beijing Rongxun Technology Co ltd
Priority date: 2022-09-09
Filing date: 2022-09-09
Publication date: 2023-06-23

Abstract

本发明涉及视频会议技术领域，公开了一种媒体码流流速控制方法、装置、设备及存储介质，该方法包括：在视频会议终端验证成功时，接收视频会议终端的媒体码流；判断视频会议终端是否处于被观看状态；根据判断结果生成H323信令，并发送H323信令至视频会议终端，以使视频会议终端基于所H323信令调整媒体码流的流速。由于本发明通过视频会议终端是否被看生成H323信令，并通过H323信令对视频会议终端媒体码流的流速进行调整，相较于现有技术视频会议终端的媒体码流被观看时才会用到该媒体码流的方式，本发明上述媒体码流流速控制方法避免了媒体码流的浪费，减轻了带宽压力。

Description

媒体码流流速控制方法、装置、设备及存储介质

技术领域

本发明涉及视频会议技术领域，尤其涉及一种媒体码流流速控制方法、装置、设备及存储介质。

背景技术

目前，在视频会议过程中，对于单台多点控制单元(Multi Control Unit，MCU)接入容量的要求越来越高。所有接入的视频会议终端都会发送媒体码流给MCU，但是该媒体码流被其他终端观看时，MCU才会用到这份码流，导致媒体码流浪费，带宽压力增加。

上述内容仅用于辅助理解本发明的技术方案，并不代表承认上述内容是现有技术。

发明内容

本发明的主要目的在于提供了一种媒体码流流速控制方法、装置、设备及存储介质，旨在解决现有技术视频会议终端的媒体码流被观看时才会用到该媒体码流，导致媒体码流浪费，带宽压力增加的技术问题。

为实现上述目的，本发明提供了一种媒体码流流速控制方法，所述码流流控方法包括以下步骤：

在视频会议终端验证成功时，接收所述视频会议终端的媒体码流；

判断所述视频会议终端是否处于被观看状态；

根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令调整所述媒体码流的流速。

可选的，所述在视频会议终端验证成功时，接收所述视频会议终端的媒体码流的步骤，包括：

在视频会议终端验证成功时，生成H323通道建立信令；

基于所述H323通道建立信令建立与所述视频会议终端之间的逻辑通道；

通过所述逻辑通道接收所述视频会议终端的媒体码流。

可选的，所述根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令控制所述媒体码流的流速的步骤，包括：

在所述视频会议终端处于被看状态时，生成第一H323信令；

通过所述逻辑通道发送所述第一H323信令至所述视频会议终端，以使所述视频会议终端基于所述第一H323信令调整所述媒体码流的流速为预设正常传输速率。

在所述视频会议终端处于未被看状态时，生成第二H323信令；

通过所述逻辑通道发送所述第二H323信令至所述视频会议终端，以使所述视频会议终端基于所述第二H323信令调整所述媒体码流的流速为预设停止传输速率。

可选的，所述根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令控制所述媒体码流的流速的步骤之后，还包括：

判断所述视频会议终端是否为广播源端；

若为所述广播源端，则将调整后的媒体码流发送至验证成功的各视频会议终端。

可选的，所述判断所述视频会议终端是否为广播源端的步骤之后，还包括：

若不为所述广播源端，则将调整后的媒体码流发送至引用所述视频会议终端的目标终端。

在接收到会议中断指令时，生成H323通道关闭信令；

基于所述H323通道关闭信令关闭所述逻辑通道，以使所述视频会议终端断开连接。

此外，为实现上述目的，本发明还提出一种媒体码流流速控制装置，其特征在于，所述装置包括：

媒体模块，用于在视频会议终端验证成功时，接收所述视频会议终端的媒体码流；

业务处理模块，用于判断所述视频会议终端是否处于被观看状态；

信令模块，用于根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令调整所述媒体码流的流速。

此外，为实现上述目的，本发明还提出一种媒体码流流速控制设备，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的媒体码流流速控制程序，所述媒体码流流速控制程序配置为实现如上文所述的媒体码流流速控制方法的步骤。

此外，为实现上述目的，本发明还提出一种存储介质，所述存储介质上存储有媒体码流流速控制程序，所述媒体码流流速控制程序被处理器执行时实现如上文所述的媒体码流流速控制方法的步骤。

本发明通过在视频会议终端验证成功时，接收视频会议终端的媒体码流，然后判断视频会议终端是否处于被观看状态，最后根据判断结果生成H323信令，并发送H323信令至视频会议终端，以使视频会议终端基于所H323信令调整媒体码流的流速。由于本发明通过视频会议终端是否被看生成H323信令，并通过H323信令对视频会议终端媒体码流的流速进行调整，相较于现有技术视频会议终端的媒体码流被观看时才会用到该媒体码流的方式，本发明上述媒体码流流速控制方法避免了媒体码流的浪费，减轻了带宽压力。

附图说明

图1为本发明实施例方案涉及的硬件运行环境的媒体码流流速控制设备的结构示意图；

图2为本发明媒体码流流速控制方法第一实施例的流程示意图；

图3为本发明媒体码流流速控制方法第一实施例中MCU与各终端的结构示意图；

图4为本发明媒体码流流速控制方法第二实施例的流程示意图；

图5为本发明媒体码流流速控制方法第三实施例的流程示意图；

图6为本发明媒体码流流速控制装置第一实施例的结构框图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。

参照图1，图1为本发明实施例方案涉及的硬件运行环境的媒体码流流速控制设备结构示意图。

如图1所示，该媒体码流流速控制设备可以包括：处理器1001，例如中央处理器(Central Processing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(Wireless-Fidelity，Wi-Fi)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory，RAM)，也可以是稳定的非易失性存储器(Non-Volatile Memory，NVM)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

本领域技术人员可以理解，图1中示出的结构并不构成对媒体码流流速控制设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及媒体码流流速控制程序。

在图1所示的媒体码流流速控制设备中，网络接口1004主要用于与网络服务器进行数据通信；用户接口1003主要用于与用户进行数据交互；本发明媒体码流流速控制设备中的处理器1001、存储器1005可以设置在媒体码流流速控制设备中，所述媒体码流流速控制设备通过处理器1001调用存储器1005中存储的媒体码流流速控制程序，并执行本发明实施例提供的媒体码流流速控制方法。

本发明实施例提供了一种媒体码流流速控制方法，参照图2，图2为本发明媒体码流流速控制方法第一实施例的流程示意图。

本实施例中，所述媒体码流流速控制方法包括以下步骤：

步骤S10：在视频会议终端验证成功时，接收所述视频会议终端的媒体码流。

需要说明的是，本实施例方法的执行主体可以是具有数据处理、网络通信以及程序运行功能的计算服务设备，例如手机、平板电脑、个人电脑等，还可以是实现相同或相似功能的其他电子设备，如多点控制单元。以下以上述多点控制单元(简称MCU)对本实施例和下述各实施例进行说明。

为了便于理解，参考图3进行说明，但并不对本方案进行限定。图3为本发明媒体码流流速控制方法第一实施例中MCU与各终端的结构示意图，图中，MCU1即为本方案涉及的MCU，终端1～终端n为连接MCU的各视频会议终端，MCU可接收各视频会议终端的会议码流，并发送至对于的视频会议终端，实现视频会议。

可理解的是，本实施例以及下述各实施例均以单台视频会议终端为例，对于多台视频会议终端，具体实现方式与单台视频会议终端相同，本实施例对此不再赘述。

需要说明的是，媒体码流可为参与会议的视频会议终端发送的会议码流，该会议码流包括音频码流和视频入会终端。

进一步地，为了提高传输媒体码流的效率，本实施例中，所述步骤S10包括：

步骤S101：在视频会议终端验证成功时，生成H323通道建立信令。

需要说明的是，H323通道建立信令可为H323协议中用于打开逻辑通道的H2.45信令，该H323通道建立信令由H323协议中的H.245控制信令管理。

在具体实现中，MCU在上述视频会议终端验证成功时，便可基于H323信令与上述视频会议终端进行能力交互，生成上述H323通道建立信令，并发送至上述视频会议终端。

步骤S102：基于所述H323通道建立信令建立与所述视频会议终端之间的逻辑通道。

需要说明的是，上述逻辑通道可由IP地址和端口号组成的二元组构成。

在具体实现中，MCU可发送上述H323通道建立信令至上述视频会议终端，双方协商确认后便可建立上述逻辑通道，并通过上述逻辑通道传输媒体码流和后续的H323协议中的控制信令。

步骤S103：通过所述逻辑通道接收所述视频会议终端的媒体码流。

在具体实现中，MCU可通过上述逻辑通道接收上述视频会议终端的媒体码流，从而提高了媒体码流传输的效率。

步骤S20：判断所述视频会议终端是否处于被观看状态。

在具体实现中，MCU可检测上述视频会议终端发送的媒体码流是否被其他人会成功的终端所需求，也即其他入会成功的终端是否引用上述视频会议终端在画面上显示，若引用上述视频会议终端，则可判定该视频会议终端被看，否则，则可判定该视频会议终端未被看。

应理解的是，上述视频会议终端处于被观看状态可有如下场景，第一，若上述视频会议终端为广播源端，则上述视频会议终端将被所有入会成功的终端观看；第二，若上述视频会议终端为选看端，则上述视频会议终端将被广播源端观看；第三，多画面的情况下，每个入会的终端都可以设定自己的多画面，若上述视频会议终端为设定入多画面的终端，则上述视频会议终端处于被观看状态；第四，若上述视频会议终端的被其他需要媒体码流的业务需要，如上述视频会议终端被电视墙业务或者WEB监控业务观看，则上述视频会议终端处于被观看状态。

步骤S30：根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令调整所述媒体码流的流速。

需要说明的是，H323信令可为H323协议中的H.245控制信令，用于调整媒体码流的流速。

在具体实现中，MCU可根据上述视频会议终端是否被看生成相应的H323信令，以调整上述视频会议终端发送的媒体码流，例如，若上述视频会议终端被看，则可生成保持上述媒体码流为正常速率的H323信令，从而保持上述媒体码流正常传输，若上述视频会议终端未被看，则可生成调整上述媒体码流为0的H323信令，从而使得上述视频会议终端不发送媒体码流，进而提升了MCU的处理性能。

本实施例通过在视频会议终端验证成功时，接收视频会议终端的媒体码流，然后判断视频会议终端是否处于被观看状态，最后根据判断结果生成H323信令，并发送H323信令至视频会议终端，以使视频会议终端基于所H323信令调整媒体码流的流速。由于本实施例通过视频会议终端是否被看生成H323信令，并通过H323信令对视频会议终端媒体码流的流速进行调整，相较于现有技术视频会议终端的媒体码流被观看时才会用到该媒体码流的方式，本实施例上述媒体码流流速控制方法避免了媒体码流的浪费，减轻了带宽压力。

进一步地，为了保证视频会议的安全性，本实施例中，所述步骤S30之后，还包括：

步骤S31：在接收到会议中断指令时，生成H323通道关闭信令。

需要说明的是，会议中断指令为用于中断视频会议的指令，可由用户输入，也可由MCU自动触发，本实施例对此不加以限制。

可理解的是，H323通道关闭信令可为H323协议中用于关闭上述逻辑通道的H.245信令。

在具体实现中，用户在视频会议结束时，可输入上述会议中断指令，也可为MCU在检测到当前视频会议中存在异常时，触发上述会议中断指令，以生成上述H323通道关闭信令。

步骤S32：基于所述H323通道关闭信令关闭所述逻辑通道，以使所述视频会议终端断开连接。

在具体实现中，MCU可将上述H323通道关闭信令发送至所有入会成功的终端，或各已建立上述逻辑通道的终端，控制与各终端的上述逻辑通道关闭，从而使得上述视频会议终端或其他入会终端断开连接，保证视频会议的安全性，提升用户的视频会议体验。

参考图4，图4为本发明媒体码流流速控制方法第二实施例的流程示意图。

基于上述第一实施例，在本实施例中，所述步骤S30包括：

步骤S301：在所述视频会议终端处于被看状态时，生成第一H323信令。

需要说明的是，由于MCU同时接入了多个视频会议终端，在其他视频会议终端处于未被看时，上述视频会议终端可能处于被看，故而提出本实施例，以保持上述视频会议终端的媒体码流保持正常传输速率。

可理解的是，第一H323信令可为用于调整上述媒体码流的流速为正常速率的控制信令。

步骤S302：通过所述逻辑通道发送所述第一H323信令至所述视频会议终端，以使所述视频会议终端基于所述第一H323信令调整所述媒体码流的流速为预设正常传输速率。

需要说明的是，预设正常传输速率可为MCU在正常收发上述媒体码流的速率。

在具体实现中，MCU在判定上述视频会议终端处于被看状态时，可生成用于调整上述媒体码流为预设正常传输速率的第一H323信令，并通过上述逻辑通道发送上述第一H323信令至上述视频会议终端，上述视频会议终端可根据上述第一H323信令调整当前发送的媒体码流，若上述媒体码流的当前流速为上述预设正常传输速率，则基于上述第一H323信令保持上述媒体码流的当前流速，否则，则基于上述第一H323信令调整上述媒体码流的流速为上述预设正常传输速率。

进一步地，为了使得上述视频会议终端在未被观看时，不收发上述媒体码流，提高MCU的处理性能，本实施例中，所述步骤S30包括：

步骤S301'：在所述视频会议终端处于未被看状态时，生成第二H323信令。

可理解的是，第二H323信令可为用于控制上述视频会议终端不发送上述媒体码流的控制信令。

步骤S302'：通过所述逻辑通道发送所述第二H323信令至所述视频会议终端，以使所述视频会议终端基于所述第二H323信令调整所述媒体码流的流速为预设停止传输速率。

在具体实现中，MCU在判定上述视频会议终端处于未被看状态时，可生成上述用于控制上述视频会议终端不发送上述媒体码流的第二H323信令，并通过上述逻辑通道发送上述第二H323信令至上述视频会议终端，上述视频会议终端在接收到上述第二H323信令时，便可调整当前发送的媒体码流的流速为预设停止传输速率，如0，此时MCU便无法接收到上述视频会议终端的媒体码流。

应理解的是，若上述视频会议终端在未被看时重新被看，则可基于上述第一H323信令调整上述视频会议终端的媒体码流由预设停止传输速率变为预设正常传输速率，以正常收发上述媒体码流，使得观看上述视频会议终端的其他终端能够收到上述媒体码流。

需要说明的是，对于多个入会成功的视频会议终端，则可同时对多个视频会议终端的媒体码流进行调整，如，当多个入会成功的视频会议终端中的一个终端被观看，另一个终端未被观看，则可基于上述H323信令调整被公开终端的媒体码流为预设正常传输速率，调整未被观看终端的媒体码流为预设停止传输速率，从而避免了MCU同时接收所有入会终端的媒体码流，提升了MCU的处理性能。

参考图5，图5为本发明媒体码流流速控制方法第三实施例的流程示意图。

基于上述各实施例，在本实施例中，所述步骤S30之后，所述方法还包括：

步骤S40：判断所述视频会议终端是否为广播源端。

需要说明的是，为了避免观看上述视频会议终端的其他终端无法收到上述媒体码流，故而提出本实施例，以提高用户的视频会议体验。

需要说明的是，广播源端可为被所有其他已入会的终端观看的端。

在具体实现中，MCU可判断上述视频会议终端是否被用户指定为广播源端，或判断上述视频会议流是否被其他已入会的终端引用。

步骤S50：若为所述广播源端，则将调整后的媒体码流发送至验证成功的各视频会议终端

需要说明的是，验证成功的各视频会议指定可为上述已入会的各视频会议终端。

在具体实现中，MCU在判定上述视频会议终端为广播源端时，可将调整后的媒体码流发送至已入会的各视频会议终端，以使得已入会的各视频会议终端能够显示上述视频会议终端上的内容，从而提高了用户的视频会议体验。

进一步地，为了提高用户的视频会议体验，本实施例中，所述步骤S40之后，还包括：

步骤S50'：若不为所述广播源端，则将调整后的媒体码流发送至引用所述视频会议终端的目标终端。

需要说明的是，目标终端可为引用上述视频会议终端，以显示上述视频会议终端上的内容的终端。

在具体实现中，上述视频会议终端可为被观看状态，但不为广播源端，如上文所述的选看端、被设定如多画面的终端观看以及被其他需要上述媒体码流业务端观看等引用上述视频会议终端，MCU可将调整后的上述媒体码流发送至上述引用上述视频会议终端的媒体码流，以使得引用上述视频会议终端的终端能够显示上述媒体码流对应的内容，进一步提升用户的使用体验。

此外，本发明实施例还提出一种存储介质，所述存储介质上存储有媒体码流流速控制程序，所述媒体码流流速控制程序被处理器执行时实现如上文所述的媒体码流流速控制方法的步骤。

参照图6，图6为本发明媒体码流流速控制装置第一实施例的结构框图。

如图6所示，本发明实施例提出的媒体码流流速控制装置包括：

媒体模块501，用于在视频会议终端验证成功时，接收所述视频会议终端的媒体码流。

业务处理模块502，用于判断所述视频会议终端是否处于被观看状态。

信令模块503，用于根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令调整所述媒体码流的流速。

本发明媒体码流流速控制装置的其他实施例或具体实现方式可参照上述各方法实施例，此处不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如只读存储器/随机存取存储器、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims

1.一种媒体码流流速控制方法，其特征在于，所述码流流控方法包括以下步骤：

判断所述视频会议终端是否处于被观看状态；

2.如权利要求1所述的媒体码流流速控制方法，其特征在于，所述在视频会议终端验证成功时，接收所述视频会议终端的媒体码流的步骤，包括：

在视频会议终端验证成功时，生成H323通道建立信令；

通过所述逻辑通道接收所述视频会议终端的媒体码流。

3.如权利要求2所述的媒体码流流速控制方法，其特征在于，所述根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令控制所述媒体码流的流速的步骤，包括：

在所述视频会议终端处于被看状态时，生成第一H323信令；

4.如权利要求2所述的媒体码流流速控制方法，其特征在于，所述根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令控制所述媒体码流的流速的步骤，包括：

在所述视频会议终端处于未被看状态时，生成第二H323信令；

5.如权利要求1所述的媒体码流流速控制方法，其特征在于，所述根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令控制所述媒体码流的流速的步骤之后，还包括：

判断所述视频会议终端是否为广播源端；

6.如权利要求5所述的媒体码流流速控制方法，其特征在于，所述判断所述视频会议终端是否为广播源端的步骤之后，还包括：

7.如权利要求2所述的媒体码流流速控制方法，其特征在于，所述根据判断结果生成H323信令，并发送所述H323信令至所述视频会议终端，以使所述视频会议终端基于所述H323信令控制所述媒体码流的流速的步骤之后，还包括：

在接收到会议中断指令时，生成H323通道关闭信令；

8.一种媒体码流流速控制装置，其特征在于，所述装置包括：

9.一种媒体码流流速控制设备，其特征在于，所述设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的媒体码流流速控制程序，所述媒体码流流速控制程序配置为实现如权利要求1至7中任一项所述的媒体码流流速控制方法的步骤。

10.一种存储介质，其特征在于，所述存储介质上存储有媒体码流流速控制程序，所述媒体码流流速控制程序被处理器执行时实现如权利要求1至7任一项所述的媒体码流流速控制方法的步骤。