CN114245231B - 一种多视频同步跳转方法、装置、设备及可读存储介质 - Google Patents

Abstract

本申请公开了一种多视频同步跳转方法、装置、设备及可读存储介质，方法包括：获取在同一播放窗口进行播放的多个视频；确定每个视频中待同步跳转的目标视频帧，以及每个目标视频帧对应的基准视频帧；根据每个基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。显然，在多个视频同步播放的场景下，当需要将多个视频同步跳转时，可以先确定每个目标视频帧对应的基准视频帧，然后可以基于每个基准视频帧对对应的目标视频帧进行解码，避免了在跳转时解码失败导致屏幕出现花屏现象，进而可以实现多个视频文件同步跳转。

Description

一种多视频同步跳转方法、装置、设备及可读存储介质

技术领域

本申请涉及视频播放技术领域，更具体地说，涉及一种多视频同步跳转方法、装置、设备及可读存储介质。

背景技术

播放进度控制是一个媒体播放器的基本功能，目前大多数视频媒体文件都是经过封装的，包含音频，视频，字幕等，封装后的单个媒体文件在跳转时可直接调用ffmpeg(一套可以用来记录、转换数字音频、视频，并能将其转化为流的开源计算机程序)接口实现。因为现有的播放器和跳转接口均是基于单个视频开发的，在多个视频在一个播放窗口同步播放的场景下，常规的播放器或者直接调用ffmpeg接口均不能实现多个视频同步跳转。

因此，如何实现多个视频同步跳转是一个值得研究的问题。

发明内容

有鉴于此，本申请提供了一种多视频同步跳转方法、装置、设备及可读存储介质，用于实现多个视频同步跳转。

为了实现上述目的，现提出的方案如下：

一种多视频同步跳转方法，包括：

获取在同一播放窗口进行播放的多个视频；

确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；

根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；

将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。

优选地，确定所述每个目标视频帧在视频中对应的基准视频帧，包括：

针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧。

优选地，所述根据每个所述基准视频帧对对应的目标视频帧进行解码，包括：

在各目标视频帧对应的基准视频帧中，选取时间戳最早的基准视频帧的时间戳，作为解码时间戳；

针对每个所述视频，从所述解码时间戳开始进行解码，每个所述目标视频帧的解码依赖于对应的所述相距最近的基准视频帧。

优选地，所述针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧，包括：

针对每个所述目标视频帧：

确定所述目标视频帧对应的基准时间戳，每个所述视频的每一视频帧数据中，记录有与其对应的相距最近的基准视频帧的基准时间戳；

确定所述基准时间戳对应的基准视频帧。

优选地，所述目标视频帧为I帧或P帧，所述基准视频帧为I帧。

一种多视频同步跳转装置，包括：

视频获取单元，用于获取在同一播放窗口进行播放的多个视频；

跳转确定单元，用于确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；

视频帧解码单元，用于根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；

同步跳转单元，用于将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。

优选地，所述跳转确定单元，包括：

最近视频帧确定单元，用于针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧。

优选地，所述视频帧解码单元，包括：

解码时间戳确定单元，用于在各目标视频帧对应的基准视频帧中，选取时间戳最早的基准视频帧的时间戳，作为解码时间戳；

视频帧解码执行单元，用于针对每个所述视频，从所述解码时间戳开始进行解码，每个所述目标视频帧的解码依赖于对应的所述相距最近的基准视频帧。

一种多视频同步跳转设备，包括存储器和处理器；

所述存储器，用于存储程序；

所述处理器，用于执行所述程序，实现上述多视频同步跳转方法的各个步骤。

一种可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时，实现上述多视频同步跳转方法的各个步骤。

从上述方案可以看出，本申请提供的多视频同步跳转方法包括：获取在同一播放窗口进行播放的多个视频；确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。显然，在多个视频同步播放的场景下，当需要将多个视频同步跳转时，可以先确定每个目标视频帧对应的基准视频帧，然后可以基于每个基准视频帧对对应的目标视频帧进行解码，每个目标视频帧都可以完成解码，避免了在跳转时解码失败导致屏幕出现花屏现象，进而可以实现多个视频文件同步跳转。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本申请实施例提供的一种多视频同步跳转方法的流程示意图；

图2为本申请实施例提供的一种多视频同步跳转选取解码时间戳的具体示例图；

图3为本申请实施例公开的一种多视频同步跳转装置的结构示意图；

图4为本申请实施例公开的一种多视频同步跳转设备的硬件结构框图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

接下来对本申请的多视频同步跳转方法进行详细的介绍，请参照图1，图1为本申请实施例中提供的一种多视频同步跳转方法的流程示意图，该方法包括：

步骤S100：获取在同一播放窗口进行播放的多个视频。

具体的，可以获取在多个视频同步播放的场景下多个视频，其中，多视频同步播放的场景可以包括：同步播放同一时间段内的多路监控视频，或同步播放多人视频会议的多个录制视频，以及多视频同步播放的其它场景。

步骤S110：确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧。

具体的，可以响应用户拖动视频进度条的操作，确定用户想要跳转的视频进度，每个视频进度可以对应一个时间戳，每个时间戳可以对应一个视频帧，从而可以确定该进度下每个视频的时间戳，以及该时间戳对应的目标视频帧。其中，目标视频帧可以是基准视频帧，此情况下该目标视频帧对应的基准视频帧是其自身，目标视频还可以是非基准视频帧，此情况下目标视频帧需要依赖对应的基准视频帧方可解码，此时可以确定目标视频帧对应的基准视频帧。

可以理解的是，在同一播放进度下，不同视频对应的目标视频帧的类型可以不同，即同一播放进度下，有些目标视频帧可以为基准视频帧，有些目标视频帧可以为非基准视频帧。

使用MPEG(Moving Picture Experts Group，动态图像专家组)的视频压缩技术压缩的视频，此类视频的画面组可以包括I帧、P帧以及B帧。

一种可选的方式下，本申请实施例获取的多个视频可以是裸流视频文件，裸流视频文件在录制时可以仅存在I帧和P帧。因此，上述介绍的目标视频帧可以I帧，也可以是P帧，基准视频帧可以是I帧。

其中，上述介绍的基准视频帧可以是I帧，I帧可以表示为关键帧，可以包含画面完整的数据，无需参考其它数据即可完成对本帧的解码；非基准视频帧可以是P帧，P帧可以表示为差别帧，其没有完整的数据，只有与前一帧画面的差异数据，可以表示与该帧之前的I帧或P帧的差别，解码时需要参考在其之前的I帧的数据方可完成。

进一步，裸流视频文件的时间戳可以不存在于裸流视频文件中，而是可以存放在管理时间戳信息的数据库中，数据库的信息可以在视频录制时进行储存。

步骤S120：根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧。

具体的，经过上述步骤后，可以确定每个目标视频帧对应的基准视频帧，因此，可以依据各个基准视频帧对对应的目标视频帧进行解码，解码完成后可以得到各个解码后的目标视频帧。

步骤S130：将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。

具体的，将各个视频同步跳转至对应的解码后的目标视频帧，使得播放器可以从解码后的各个目标视频帧开始，播放获取得到的多个视频，也即可以实现将多个视频同步跳转至用户想要的播放进度。

从上述方案可以看出，在多个视频同步播放的场景下，当需要将多个视频同步跳转时，可以先确定每个目标视频帧对应的基准视频帧，然后可以基于每个基准视频帧对对应的目标视频帧进行解码，避免了在跳转时解码失败导致屏幕出现花屏现象，进而可以实现多个视频文件同步跳转。

在本申请的一些实施例中，介绍了上述步骤S110，确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧的过程，接下来将对确定每个目标视频帧在视频中对应的基准视频帧的过程作进一步说明。

具体的，该过程可以包括以下步骤：

针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧。

由于，非基准视频帧的解码需要依赖在其之前的基准视频帧，因此，针对每个目标视频帧，可以按照视频播放顺序的反方向，确定与目标视频帧对应的基准视频帧。为了提高解码效率，可以确定与目标视频帧相距最近的基准视频帧。

从上述方案可以看出，为了提高解码效率，可以选取与目标视频帧相距最近的基准视频帧来为目标视频帧进行解码。

在本申请的一些实施例中，介绍了上述选取与目标视频帧相距最近的基准视频帧的过程，在此基础上，对上述介绍的步骤S120，根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧的过程作进一步说明。

具体的，该过程可以包括以下步骤：

S1、在各目标视频帧对应的基准视频帧中，选取时间戳最早的基准视频帧的时间戳，作为解码时间戳。

具体的，每个目标视频帧对应的基准时间戳都可以有各自的时间戳，因此可以在各基准视频帧中，选取时间戳最早的基准视频帧，该基准视频帧的时间戳作为解码时间戳。

S2、针对每个所述视频，从所述解码时间戳开始进行解码，每个所述目标视频帧的解码依赖于对应的所述相距最近的基准视频帧。

具体的，针对每个视频，都可以从上述步骤的解码时间戳开始进行解码。虽然从解码时间戳开始对各视频进行解码，但各视频均可以从目标视频帧开始播放，也即从解码时间戳对应的视频帧到目标视频帧的前一帧，这些视频帧可以仅解码，不播放。而目标视频帧可以依赖于解码时间戳对应的视频帧到目标视频帧中包含的基准视频帧进行解码。

从上述方案可以看出，针对多个视频，选取时间戳最早的基准视频帧对应的时间戳作为解码时间戳，可以保证每一个视频下的目标视频帧都有一个基准视频帧，进而可以保证每一个目标视频帧均可以完成解码，从而实现同步跳转至各目标视频帧进行播放的功能。

接下来，将结合具体示例来说明选取解码时间戳的过程，详情请参照图2。

具体的，同步跳转的视频数量可以依据实际情况来确定，此处以同步跳转四个视频为例。

图2中，0可以表示为P帧，1可以表示为I帧。其中列出了四个视频的部分视频帧的类型情况，播放顺序为从左到右对视频帧进行播放。

假设用户拖动进度条想要跳转到p点，那么，可以在每个视频中，按视频播放顺序的反方向，确定与p点的目标视频帧相距最近的基准视频帧。因此，视频1中p点的目标视频帧对应的基准视频帧为t7时间戳对应的视频帧，视频2中p点的目标视频帧对应的基准视频帧为t5时间戳对应的视频帧，视频3中p点的目标视频帧对应的基准视频帧为t8时间戳对应的视频帧，视频4中p点的目标视频帧对应的基准视频帧为目标视频帧自身，基准视频帧的时间戳为p点的时间戳。

在所有基准视频帧中，视频2的基准视频帧的时间戳为t5，是时间戳最早的基准视频帧，t5时间戳可以作为解码时间戳。

由于，每个视频中从t5时间戳到p点时间戳都有至少一个基准视频帧，因此，可以从t5时间戳开始，对各个视频进行解码，进而可以保证解码过程中每个目标视频帧都有一个可以解码依赖的基准视频帧，确保了每个目标视频帧都可以完成解码，实现同步跳转。

在本申请的一些实施例中，介绍了上述针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧的过程，接下来将对该过程作进一步说明。

具体的，针对每个目标视频帧，该过程可以包括以下步骤：

S1、确定所述目标视频帧对应的基准时间戳，每个所述视频的每一视频帧数据中，记录有与其对应的相距最近的基准视频帧的基准时间戳。

具体的，每个视频的每一视频帧数据中，可以记录有与其对应的相距最近的基准视频帧的基准时间戳。其中，若目标视频帧为非基准视频帧，则目标视频帧数据记录的时间戳，可以是与其对应的相距最近的基准视频帧的基准时间戳；若目标视频帧为基准视频帧，则目标视频帧数据记录的时间戳，可以是目标视频帧自身时间戳。

因此，可以确定目标视频帧对应的基准时间戳。

S2、确定所述基准时间戳对应的基准视频帧。

具体的，根据上述步骤确定的基准时间戳，可以快速确定对应的基准视频帧。

从上述方案可以看出，每一视频帧数据可以记录其对应的相距最近的基准视频帧的基准时间戳，当确定视频中的任意一帧为目标视频帧时，都可以根据目标视频帧数据中记录的基准时间戳来快速确定相距最近的基准视频帧，从而可以提高解码效率。

下面对本申请实施例提供的多视频同步跳转装置进行描述，下文描述的多视频同步跳转装置与上文描述的多视频同步跳转方法可相互对应参照。

首先，结合图3对多视频同步跳转装置进行介绍，如图3所示，该多视频同步跳转装置可以包括：

视频获取单元100，用于获取在同一播放窗口进行播放的多个视频；

跳转确定单元110，用于确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；

视频帧解码单元120，用于根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；

同步跳转单元130，用于将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。

可选的，所述跳转确定单元110，可以包括：

最近视频帧确定单元，用于针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧。

可选的，所述视频帧解码单元120，可以包括：

解码时间戳确定单元，用于在各目标视频帧对应的基准视频帧中，选取时间戳最早的基准视频帧的时间戳，作为解码时间戳；

视频帧解码执行单元，用于针对每个所述视频，从所述解码时间戳开始进行解码，每个所述目标视频帧的解码依赖于对应的所述相距最近的基准视频帧。

可选的，所述最近视频帧确定单元，可以包括：

针对每个所述目标视频帧：

最近基准时间戳确定单元，用于确定所述目标视频帧对应的基准时间戳，每个所述视频的每一视频帧数据中，记录有与其对应的相距最近的基准视频帧的基准时间戳；

最近基准视频帧确定单元，用于确定所述基准时间戳对应的基准视频帧。

本申请实施例提供的多视频同步跳转装置可应用于多视频同步跳转设备。图4示出了多视频同步跳转设备的硬件结构框图，参照图4，多视频同步跳转设备的硬件结构可以包括：至少一个处理器1，至少一个通信接口2，至少一个存储器3和至少一个通信总线4；

在本申请实施例中，处理器1、通信接口2、存储器3、通信总线4的数量为至少一个，且处理器1、通信接口2、存储器3通过通信总线4完成相互间的通信；

处理器1可能是一个中央处理器CPU，或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit)，或者是被配置成实施本发明实施例的一个或多个集成电路等；

存储器3可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatilememory)等，例如至少一个磁盘存储器；

其中，存储器存储有程序，处理器可调用存储器存储的程序，所述程序用于：

获取在同一播放窗口进行播放的多个视频；

确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；

根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；

将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。

可选的，所述程序的细化功能和扩展功能可参照上文描述。

本申请实施例还提供一种存储介质，该存储介质可存储有适于处理器执行的程序，所述程序用于：

获取在同一播放窗口进行播放的多个视频；

确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；

根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；

将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频。

可选的，所述程序的细化功能和扩展功能可参照上文描述。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下，在其它实施例中实现。因此，本申请将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种多视频同步跳转方法，其特征在于，包括：

获取在同一播放窗口进行播放的多个视频；

确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；

根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；

将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频；

其中，确定所述每个目标视频帧在视频中对应的基准视频帧，包括：

针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧；

所述根据每个所述基准视频帧对对应的目标视频帧进行解码，包括：

在各目标视频帧对应的基准视频帧中，选取时间戳最早的基准视频帧的时间戳，作为解码时间戳；

针对每个所述视频，从所述解码时间戳开始进行解码，每个所述目标视频帧的解码依赖于对应的所述距离最近的基准视频帧。

2.根据权利要求1所述的方法，其特征在于，所述针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧，包括：

针对每个所述目标视频帧：

确定所述目标视频帧对应的基准时间戳，每个所述视频的每一视频帧数据中，记录有与其对应的相距最近的基准视频帧的基准时间戳；

确定所述基准时间戳对应的基准视频帧。

3.根据权利要求1所述的方法，其特征在于，所述目标视频帧为I帧或P帧，所述基准视频帧为I帧。

4.一种多视频同步跳转装置，其特征在于，包括：

视频获取单元，用于获取在同一播放窗口进行播放的多个视频；

跳转确定单元，用于确定每个所述视频中待同步跳转的目标视频帧，以及每个目标视频帧在视频中对应的基准视频帧；

视频帧解码单元，用于根据每个所述基准视频帧对对应的目标视频帧进行解码，得到解码后的目标视频帧；

同步跳转单元，用于将各个视频同步跳转至对应的解码后的目标视频帧，以供从解码后的各目标视频帧开始，播放所述多个视频；

其中，所述跳转确定单元，包括：

最近视频帧确定单元，用于针对每个所述目标视频帧，按视频播放顺序的反方向，确定与所述目标视频帧相距最近的基准视频帧；

所述视频解码单元，包括：

解码时间戳确定单元，用于在各目标视频帧对应的基准视频帧中，选取时间戳最早的基准视频帧的时间戳，作为解码时间戳；

视频帧解码执行单元，用于针对每个所述视频，从所述解码时间戳开始进行解码，每个所述目标视频帧的解码依赖于对应的所述相距最近的基准视频帧。

5.一种多视频同步跳转设备，其特征在于，包括存储器和处理器；

所述存储器，用于存储程序；

所述处理器，用于执行所述程序，实现如权利要求1-3任一项的多视频同步跳转方法的各个步骤。

6.一种可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现如权利要求1-3任一项的多视频同步跳转方法的各个步骤。

Images