CN115695856B

CN115695856B - 视频组播码流快速切换设备、方法、电子设备及存储介质

Info

Publication number: CN115695856B
Application number: CN202211357009.9A
Authority: CN
Inventors: 杜键; 赵建立; 李伟; 李厚鹏
Original assignee: Beijing Digibird Technology Co ltd
Current assignee: Beijing Digibird Technology Co ltd
Priority date: 2022-11-01
Filing date: 2022-11-01
Publication date: 2023-05-09
Anticipated expiration: 2042-11-01
Also published as: CN115695856A

Abstract

本发明属于分布式音视频码流切换技术领域，具体涉及了一种视频组播码流快速切换设备、方法、电子设备及存储介质，旨在解决取流加组后，获取到的第一帧不一定是I帧，需要等到获取到I帧之后才能解码，导致视频无法快速切换的问题。本发明包括：管理单元进行指令的下发与管理；多层交换网络用于视频切换中的数据传输；视频发送节点，进行视频源深压缩并以组播方式发送；视频接收节点，将深压缩组播码流解码，并处理后发送至显示设备显示。本发明在使用深压缩码流传输视频时，在不减少I帧间隔的情况下，通过预判用户操作行为，提前完成视频加组取流，使用缓存最新的一个GOP策略，从而实现尽快的对最新帧的视频解码，进而实现了视频的快速切换。

Description

视频组播码流快速切换设备、方法、电子设备及存储介质

背景技术

在传统应用中，针对组播形式深压缩码的流视频传输，如拼接、矩阵、坐席的视频切换系统，视频接收节点通过加组的方式获取源的视频码流，然后对其解码，并显示到显示单元。

然而，采用基于组播的视频切换，因为在取得第一个I帧的时间不可预测，需要对第一个I帧进行等待，所以视频切换时间通常较长。进一步地，如果通过减小I帧间隔的时间来减少等待时间，则会导致视频接收节点的网络平均带宽和突发带宽变得很紧张，导致并发接收视频能力下降，得不偿失。

发明内容

为了解决现有技术中的上述问题，即取流加组后，获取到的第一帧不一定是I帧，需要等到获取到I帧之后才能解码，导致视频无法快速切换的问题，本发明提供了一种基于H.264、H.265视频组播码流的快速切换设备，所述视频快速切换设备包括：

管理单元，与多层交换网络连接，用于进行系统不同视频传输切换指令的下发与管理；

多层交换网络，包括不同速率的多个交换机，用于视频传输切换中的数据传输；

一个或一个以上的视频发送节点，用于将对应的视频源深压缩，并以组播方式发送至多层交换网络；

一个或一个以上的视频接收节点，用于将从多层交换网络接收的深压缩组播码流解码，对解码后的视频进行缩小、放大、裁剪中的一种或多种操作，并发送至显示单元。

在一些优选的实施例中，所述深压缩组播码流为设定时间间隔发送的I帧和P帧的混合码流；

所述I帧为深压缩组播码流的关键帧；

所述P帧为深压缩组播码流的预测帧。

在一些优选的实施例中，所述深压缩组播码流，其解码中若收到的第一个完整帧为I帧，则直接解码显示；若收到的第一个完整帧为P帧，则等待接收到下一个I帧时解码显示。

在一些优选的实施例中，所述管理单元，其视频快速切换界面包括信号源列表和显示单元列表；

所述信号源列表包括一个或一个以上的视频发送节点对应的信号源，记作信号源1、信号源2、……、信号源N；

所述显示单元列表包括一个或一个以上的视频接收节点对应的显示单元，记作显示单元1、显示单元2、……、显示单元N。

在一些优选的实施例中，所述视频快速切换设备还包括显示设备；

所述显示设备与所述显示单元列表中的显示单元一一对应。

在一些优选的实施例中，所述视频快速切换设备还包括视频源；

所述视频源与所述信号源列表中的信号源一一对应。

本发明的另一方面，提出了一种基于H.264、H.265视频组播码流的快速切换方法，所述视频切换加速方法包括：

步骤S10，用户在管理单元的视频快速切换界面选择所需视频源以及显示单元；显示单元对应的视频接收节点在用户选择所需视频源的同时进行组播加组，并缓存最新获取的视频源的一个GOP(由一个I帧+多个P帧构成的一组码流图像)；

步骤S20，管理单元下发视频取流指令至视频源对应的视频发送节点，以及下发视频切换指令至显示单元对应的视频接收节点；

步骤S30，视频接收节点进行深压缩组播码流的取流，并结合缓存的最新获取的视频源的GOP进行视频解码和显示，完成视频快速切换。

在一些优选的实施例中，所述视频解码，其方法为：

若收到的第一个完整帧为I帧，则直接解码显示；

若收到的第一个完整帧为P帧，则先解码缓存的GOP，后解码P帧。

本发明的第三方面，提出了一种电子设备，包括：

至少一个处理器；以及

与至少一个所述处理器通信连接的存储器；其中，

所述存储器存储有可被所述处理器执行的指令，所述指令用于被所述处理器执行以实现上述的基于H.264、H.265视频组播码流的快速切换方法。

本发明的第四方面，提出了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于被所述计算机执行以实现上述的基于H.264、H.265视频组播码流的快速切换方法。

本发明的有益效果：

(1)本发明基于H.264、H.265视频组播码流的快速切换设备，在一个分布式视频切换系统中，在使用深压缩码流传输视频时，在不用减少I帧间隔的情况下，通过预判了用户的操作行为，提前完成视频加组取流，使用缓存一个最新的GOP策略，尽快的完成视频解码，从而提高了视频的切换速度，给用户带来最佳的体验，同时也能保证视频的质量不受到额外的损失。

(2)本发明基于H.264、H.265视频组播码流的快速切换设备，在不使用缓存GOP的策略的情况下，通过减少I帧间隔时间，同样可以加快解码显示速度。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：

图1是本发明基于H.264、H.265视频组播码流的快速切换设备的组成示意图；

图2是本发明基于H.264、H.265视频组播码流的快速切换方法的流程示意图；

图3是本发明基于H.264、H.265视频组播码流的快速切换方法一种实施例的深压缩视频帧组成示意图；

图4是本发明基于H.264、H.265视频组播码流的快速切换方法一种实施例的管理单元视频切换界面；

图5是本发明基于H.264、H.265视频组播码流的快速切换方法一种实施例的深压缩视频帧中一组图像组成示意图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与有关发明相关的部分。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

本发明提供一种基于H.264、H.265视频组播码流的快速切换方法，针对视频接收节点的网络带宽及处理能力有限，不可能同时对所有的视频源进行取流解码，从而加快视频切换速度的问题，本发明方法尽可能的对即将被切换的视频源进行提前取流，通过对最新的一个GOP进行缓存，进而加快对最新帧的解码速度，从而加快视频切换流程，在使用组播传输方式的深压缩码流在分布式节点的系统中，本发明方法使得组播视频流可以快速切换显示。

本发明的一种基于H.264、H.265视频组播码流的快速切换设备，所述视频快速切换系统包括：

为了更清晰地对本发明基于H.264、H.265视频组播码流的快速切换设备进行说明，下面结合图1对本发明实施例中各模块展开详述。

本发明第一实施例的基于H.264、H.265视频组播码流的快速切换设备，各模块详细描述如下：

管理单元，与多层交换网络连接，用于进行系统不同视频传输切换指令的下发与管理。

管理单元的视频快速切换界面包括信号源列表和显示单元列表：

信号源列表包括一个或一个以上的视频发送节点对应的信号源，记作信号源1、信号源2、……、信号源N；

显示单元列表包括一个或一个以上的视频接收节点对应的显示单元，记作显示单元1、显示单元2、……、显示单元N。

多层交换网络，包括不同速率的多个交换机，用于视频传输切换中的数据传输。

一个或一个以上的视频发送节点，用于将对应的视频源深压缩，并以组播方式发送至多层交换网络。

深压缩组播码流为设定时间间隔发送的I帧和P帧的混合码流：I帧为深压缩组播码流的关键帧，P帧为深压缩组播码流的预测帧。

深压缩组播码流，其解码中若收到的第一个完整帧为I帧，则直接解码显示；若收到的第一个完整帧为P帧，则等待接收到下一个I帧时解码显示。

视频快速切换设备还包括显示设备，显示设备与显示单元列表中的显示单元一一对应。

视频快速切换设备还包括视频源，视频源与信号源列表中的信号源一一对应。

视频源可以为PC主机等，本发明在此不作详述。

本发明第二实施例的基于H.264、H.265视频组播码流的快速切换方法，如图2所示，所述视频切换加速方法包括：

步骤S10，用户在管理单元的视频快速切换界面选择所需视频源以及显示单元；显示单元对应的视频接收节点在用户选择所需视频源的同时进行组播加组，并缓存最新获取的视频源的一个GOP。

视频源发送出来的视频为深压缩组播码流，其特点为：一个信号源在发送深压缩组播视频流时，会固定按照一定的时间间隔发送I帧和P帧，视频接收节点在加组后就会收到视频帧数据，收到的第一个视频的完整帧可能是I帧也可能P帧，对于I可以直接解码显示，对于P帧则不能，需要等到收到下一个I帧之后才能解码显示。

如图3所示，为本发明H.264、H.265组播视频码流的视频快速切换方法一种实施例的深压缩视频帧组成示意图，可以看出深压缩视频帧包括了一系列I帧和P帧的组合序列，每个序列包括一个I帧和若干个P帧，P帧的数量可以根据需要设置，本发明在此不作限定。

步骤S20，管理单元下发视频取流指令至视频源对应的视频发送节点，以及下发视频切换指令至显示单元对应的视频接收节点。

如图4所示，为本发明H.264、H.265组播视频码流的视频快速切换方法一种实施例的管理单元视频切换界面，界面中包括了信号源列表和显示单元列表，其中信号源列表中包括N个信号源(信号源1、信号源2、……、信号源N)，相应地，也包括N个视频发送节点(视频发送节点1对应信号源1、视频发送节点2对应信号源2、……、视频发送节点N对应信号源N)，显示单元列表中包括N个显示单元(显示单元1、显示单元2、……、显示单元N)，相应地，也包括N个视频接收节点(视频接收节点1对应显示单元1、视频接收节点2对应显示单元2、……、视频接收节点N对应显示单元N)。

当用户选择某个信号源时，管理单元对所有的视频接收节点发送取流指令(取流对象是用户选择的信号源对应的组播地址)，视频接收节点在收到取流指令时，开始执行组播加组，进行视频流的取流。如果视频接收节点已经执行了取流指令，需要停止之前的取流，开始新的取流。

其中，视频解码方法为：

若收到的第一个完整帧为I帧，则直接解码显示；

如图5所示，为本发明H.264、H.265组播视频码流的视频快速切换方法一种实施例的深压缩视频帧中一组图像组成示意图，一组图像(一个GOP，在此示例中一个GOP是一I帧+3个P帧，在其他示例中，P帧的数量可以根据需要调整，本发明对此不作限定)包括了一个I帧和3个P帧，在一个GOP中仅有第一帧为I帧，I帧后续的多帧均为P帧。

解码器的限制：视频解码器如果需要正确的解码出P帧，需要先解码P帧的前一帧，为了保证P帧能够尽可能的被解码出来，在进行视频码流取流的时候缓存一个最新的GOP。这样在需要解码的时候先解码GOP，再解码P帧，能够保证最新的帧能够显示出来。

经过解码后的视频帧，就可以输出到电视器等显示设备了。

在这个过程中因为在用户选择视频源的时候，接收节点就已经开始组播加组，获取组播码流了，假设信号源的I帧间隔是500毫秒，用户在做视频切换时的操作时间是400毫秒，这样在最不理想的情况下(刚好在加组500毫秒后才获取到I帧)，视频切换需要100毫秒获取I帧+视频解码显示时间(一般是固定时间)。在理想情况下(在加组后400毫秒内就取得了I帧)，视频切换只需要视频解码显示时间了，这样大大加快了视频的切换速度，给用户提供最佳的体验。

在不使用上述缓存GOP的策略的情况下，也可以通过减少I帧间隔的方法提升视频切换速度，例如，原一个GOP中I帧之后包括10个P帧，可以调整为I帧之后包括5个P帧，这样I帧间隔变小，可以提升平均的视频解码速度，从而提升视频切换速度。

上述实施例中虽然将各个步骤按照上述先后次序的方式进行了描述，但是本领域技术人员可以理解，为了实现本实施例的效果，不同的步骤之间不必按照这样的次序执行，其可以同时(并行)执行或以颠倒的次序执行，这些简单的变化都在本发明的保护范围之内。

需要说明的是，上述实施例提供的基于H.264、H.265视频组播码流的快速切换设备及方法，仅以上述各功能模块的划分进行举例说明，在实际应用中，可以根据需要而将上述功能分配由不同的功能模块来完成，即将本发明实施例中的模块或者步骤再分解或者组合，例如，上述实施例的模块可以合并为一个模块，也可以进一步拆分成多个子模块，以完成以上描述的全部或者部分功能。对于本发明实施例中涉及的模块、步骤的名称，仅仅是为了区分各个模块或者步骤，不视为对本发明的不当限定。

本发明第三实施例的一种电子设备，包括：

至少一个处理器；以及

与至少一个所述处理器通信连接的存储器；其中，

本发明第四实施例的一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于被所述计算机执行以实现上述的基于H.264、H.265视频组播码流的快速切换方法。

所属技术领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的存储装置、处理装置的具体工作过程及有关说明，可以参考前述方法实施例中的对应过程，在此不再赘述。

本领域技术人员应该能够意识到，结合本文中所公开的实施例描述的各示例的模块、方法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，软件模块、方法步骤对应的程序可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。为了清楚地说明电子硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以电子硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

术语“第一”、“第二”等是用于区别类似的对象，而不是用于描述或表示特定的顺序或先后次序。

术语“包括”或者任何其它类似用语旨在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备/装置不仅包括那些要素，而且还包括没有明确列出的其它要素，或者还包括这些过程、方法、物品或者设备/装置所固有的要素。

至此，已经结合附图所示的优选实施方式描述了本发明的技术方案，但是，本领域技术人员容易理解的是，本发明的保护范围显然不局限于这些具体实施方式。在不偏离本发明的原理的前提下，本领域技术人员可以对相关技术特征做出等同的更改或替换，这些更改或替换之后的技术方案都将落入本发明的保护范围之内。

Claims

1.一种基于H.264、H.265视频组播码流的快速切换方法，其特征在于，所述视频快速切换方法包括：

步骤S10，用户在管理单元的视频快速切换界面选择所需视频源以及显示单元，当用户选择某个视频源时，管理单元对所有的视频接收节点发送取流指令，取流对象是用户选择的视频源对应的组播地址，视频接收节点在收到取流指令时，开始执行组播加组，进行视频流的取流，如果视频接收节点已经执行了取流指令，则停止之前的取流，并开始新的取流；显示单元对应的视频接收节点在用户选择所需视频源的同时进行组播加组，并缓存最新获取的视频源的一个GOP；

2.根据权利要求1所述的基于H.264、H.265视频组播码流的快速切换方法，其特征在于，所述视频解码，其方法为：

若收到的第一个完整帧为I帧，则直接解码显示；

3.一种基于H.264、H.265视频组播码流的快速切换设备，用于通过权利要求1-2任一项所述的方法进行视频组播码流的快速切换，其特征在于，所述视频快速切换设备包括：

4.根据权利要求3所述的基于H.264、H.265视频组播码流的快速切换设备，其特征在于，所述深压缩组播码流为设定时间间隔发送的I帧和P帧的混合码流；

所述I帧为深压缩组播码流的关键帧；

所述P帧为深压缩组播码流的预测帧。

5.根据权利要求3所述的基于H.264、H.265视频组播码流的快速切换设备，其特征在于，所述深压缩组播码流，其解码中若收到的第一个完整帧为I帧，则直接解码显示；若收到的第一个完整帧为P帧，则等待接收到下一个I帧时解码显示。

6.根据权利要求3所述的基于H.264、H.265视频组播码流的快速切换设备，其特征在于，所述管理单元，其视频快速切换界面包括信号源列表和显示单元列表；

所述显示单元列表包括一个或一个以上的视频接收节点对应的显示单元，记作显示单元1、显示单元2、……、显示单元M。

7.根据权利要求6所述的基于H.264、H.265视频组播码流的快速切换设备，其特征在于，所述视频快速切换设备还包括显示设备；

所述显示设备与所述显示单元列表中的显示单元一一对应。

8.根据权利要求6所述的基于H.264、H.265视频组播码流的快速切换设备，其特征在于，所述视频快速切换设备还包括视频源；

所述视频源与所述信号源列表中的信号源一一对应。

9.一种电子设备，其特征在于，包括：

至少一个处理器；以及

与至少一个所述处理器通信连接的存储器；其中，

所述存储器存储有可被所述处理器执行的指令，所述指令用于被所述处理器执行以实现权利要求1-2任一项所述的基于H.264、H.265视频组播码流的快速切换方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于被所述计算机执行以实现权利要求1-2任一项所述的基于H.264、H.265视频组播码流的快速切换方法。