CN106851044B - 一种视频同步回放方法及装置 - Google Patents

Abstract

本发明公开了一种视频同步回放方法及装置，所述视频同步回放方法包括：实时获取并保存参与回放的多路视频流的时间戳；确定所述多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流；在下一次获取并保存所述多路视频流的时间戳之前，播放当前最优先路视频流，并根据所述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，以使得所述非最优先路视频流与所述最优先路视频流同步回放。所述视频同步回放装置包括：时间戳获取单元，最优先路确定单元，播放控制单元。通过本发明方案，让来自不同厂家设备的多路视频流也能够进行同步回放，适用度更为广泛，并且不会发生视频信息的丢失。

Description

一种视频同步回放方法及装置

技术领域

本发明涉及监控技术领域，具体涉及一种视频同步回放方法及装置。

背景技术

传统的视频同步回放的方法为，通过厂家的SDK内部对多路回放码流进行实时控制，根据每一帧的数据帧的信息进行回放码流的先后顺序排列，以实现视频的同步回放。这种传统的视频同步回放的方法虽然性能较为优越，实现效果较理想，但是，当用户使用不同的厂家设备时，这些设备之间就不能使用传统的视频同步回放的方法进行同步回放了。因而，传统的视频同步回放的方法有很大的局限性。

发明内容

本发明实施例提供了一种视频同步回放方法及装置，旨在提高对来自多类型设备的视频流的回放操作进行同步控制的效率。

本发明实施例的第一方面，提供一种视频同步回放方法，所述视频同步回放方法包括：

实时获取并保存参与回放的多路视频流的时间戳；

确定所述多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流；

在下一次获取并保存所述多路视频流的时间戳之前，播放当前最优先路视频流，并根据所述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，以使得所述非最优先路视频流与所述最优先路视频流同步回放。

本发明实施例的第二方面，提供一种视频同步回放装置，所述视频同步回放装置包括：

时间戳获取单元，用于实时获取并保存参与回放的多路视频流的时间戳；

最优先路确定单元，用于确定所述时间戳获取单元获取的多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流；

播放控制单元，用于在下一次获取并保存所述多路视频流的时间戳之前，播放所述最优先路确定单元确定的当前最优先路视频流，并根据所述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，以使得所述非最优先路视频流与所述最优先路视频流同步回放。

由上可见，在本发明实施例中，先实时获取并保存参与回放的多路视频流的时间戳，然后确定所述多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流，在下一次获取并保存所述多路视频流的时间戳之前，播放当前最优先路视频流，并根据所述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，以使得所述非最优先路视频流与所述最优先路视频流同步回放。本发明方案能够在需要进行回放的多路视频流来自于不同厂家设备时，仍然能够对其进行同步操作，适用度更为广泛，并且不会发生视频信息的丢失。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的视频同步回放方法的实现流程图；

图2为本发明实施例提供的另一视频同步回放方法的实现流程图；

图3为本发明实施例提供的视频同步回放装置的结构框图；

图4为本发明实施例提供的另一视频同步回放装置的结构框图。

具体实施方式

为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而非全部实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

以下结合具体实施例对本发明的实现进行详细描述：

实施例一

图1示出了本发明实施例提供的视频同步回放方法的实现流程，详述如下：

在步骤S101中，实时获取并保存参与回放的多路视频流的时间戳。

在本发明实施例中，首先启动驱动，实时获取当前正在参与回放的多路视频流的时间戳，并保存每一路视频流的时间戳。其中，上述多路视频流可能来自于多个不同的设备中，因而可以将视频流队列放在一个窗口类中，上述窗口类向外提供加入视频流进行同步回放的接口，通过对各个设备提供的软件开发工具包(SDK，Software Development Kit)接口调度来获取当前参与回放的多路视频流的最新播放的数据帧的时间戳，并将上述各路视频流的时间戳保存在窗口类的成员变量数组中。当然，也可以用其他方式获取并保存参与回放的多路视频流的时间戳，此处不作限定。

在步骤S102中，确定上述多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流。

在本发明实施例中，将在步骤S101中获取到的多路视频流的时间戳所标记的时间最先的一路视频流为当前最优先路视频流。通常监控视频的时间戳被标记为日期与时间码，例如2016年12月5日11时8分6秒，当然，其中的格式是可以更改的；时间戳也可以是以一个字符序列来表示自格林威治时间1970年1月1日0时0分0秒(北京时间1970年1月1日8时0分0秒)起至现在的总秒数，其也能唯一标记某一刻的时间，因而此处对时间戳的表达方式不作限制。由于时间戳必然唯一的标记了某一时刻的时间，因而在对多路视频进行同步回放操作时，将时间戳标记的时间最先的一路视频流作为当前最优先路视频流。例如，当前正在参与回放的视频流有两路，获取到其中一路A正播放到2016年12月5日11时8分6秒，另一路B正播放到2016年12月5日11时26分7秒，则其中A路的时间戳所标记的时间先于B路，即A路为时间戳所标记的时间最先的一路视频流。可以认为，多路视频流中时间戳所标记的时间最先的一路视频流即为当前进行视频回放时，播放的最慢的一路视频流。

在步骤S103中，在下一次获取并保存上述多路视频流的时间戳之前，播放当前最优先路视频流，并根据上述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，以使得上述非最优先路视频流与上述最优先路视频流同步回放。

在本发明实施例中，在下一次执行步骤S101之前，正常播放本次确定的当前最优先路视频流，并根据当前最优先路视频流的时间戳，对其它非最优先路视频流进行相应的播放控制例如是正常播放或是暂停播放，以使得上述非最优先路视频流与上述最优先路视频流同步回放。其中，可以采用调度各个非最优先路视频流对应的厂家设备的SDK接口来实现对非最优先路视频流进行播放控制的效果。

由上可见，在本实施例中，根据各路视频流的时间戳所标记的时间确定当前最优先路视频流，并根据当前最优先路视频流对其他各非最优先路视频流进行相应播放控制，以达到其它非最优先路的视频流能够与当前最优先路同步播放的效果。使得多路视频流即使来自于不同的厂商设备，也能在回放时快速地进行同步。

实施例二

图2示出了本发明实施例提供的另一种视频同步回放方法的实现流程，详述如下：

在步骤S201中，周期性获取参与回放的多路视频流的时间戳。

在步骤S202中，根据获取到的上述多路视频流的时间戳，对已保存的各路视频流的时间戳数据进行更新。

在本发明实施例中，首先周期性地获取参与回放的多路视频流的时间戳，然后根据最新获取到的多路视频流的时间戳，对已保存的各路视频流的时间戳数据进行更新。可以是在一个有回放流队列的窗口类中，添加一个定时器或者一个线程，其中，作为驱动，上述线程需要作循环处理；在定时器消息中或者线程的处理函数中，通过对各个不同厂家设备的SDK接口进行调度，获取当前参与回放的多路视频流最新播放的数据帧的时间戳，并保存在上述窗口类的成员变量数组中，实现对保存的多路视频流的时间戳数据的动态周期性更新。

在步骤S203中，对最新保存的多路视频流的时间戳按照时间先后顺序排序。

在步骤S204中，根据上述多路视频流的时间戳的排序结果，选择其中时间戳所标记的时间最先的一路视频流为上述当前最优先路视频流。

在本发明实施例中，在每一次更新了多路视频流的时间戳数据后，都会对最新保存的多路视频流的时间戳按照时间先后顺序进行排序，显然，由于多路视频流的时间戳数据是动态周期性更新的，因而每一次排序后的结果也并不相同，最终得到的当前最优先路视频流也不会是固定的一路，而是能够根据视频同步回放时的实时播放进度作出调整，从本次获取的多路视频流的时间戳中，选择其中时间戳标记的时间最先的一路视频为当前最优先路视频流。

在步骤S205中，分别将各个非最优先路视频流的时间戳与当前最优先路视频流的时间戳进行比较。

在步骤S206中，若上述非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔大于或等于预设的时间间隔阈值，则暂停播放上述非最优先路视频流。

在步骤S207中，若上述非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔小于预设的时间间隔阈值，则播放上述非最优先路视频流。

在本发明实施例中，为了实现对非最优先路与当前最优先路的同步回放，使同步播放时不同的视频流之间的时间差保持在控制范围内，可以分别将各个非最优先路视频流的时间戳与当前最优先路进行比较。当非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔大于或等于预设的时间间隔阈值时，则认为这一非最优先路比最优先路视频流播放的快太多，需要调度该视频流对应的SDK接口对其进行暂停播放控制，以使得最优先路视频流能够“追上”该非最优先路视频流，实现同步。当该非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔小于预设的时间间隔阈值时，则认为该非最优先路视频流仍在控制范围内，调度该视频流对应的SDK接口正常播放该非最优先路视频流。由于本发明实施例中将时间戳标记的时间点最先的视频流作为当前最优先路视频流，因而对其他非最优先路视频流的控制播放只会出现暂停播放及正常播放两种状态，不会发生丢弃视频流的数据帧的情况，避免了包含有重要信息的数据帧因需要同步而被丢弃。

可选地，为了适应各种不同的回放情况，在上述步骤S205之前，上述视频同步回放方法还包括：

根据当前视频流的回放速度倍数设定上述时间间隔阈值。

其中，用户在选择多路视频流进行回放操作时，可以选择回放的速度倍数。特别是在监控视频中，大部分时间播放的都是一些无特殊意义的事件，因而用户在进行监控视频的回放时，经常会在一些无特殊事件发生的时候选择高速回放，在出现感兴趣的画面时才恢复正常速度播放，所以在不同的回放速度倍数下，采取单一的时间间隔阈值是不准确的。可以根据当前视频流的回放速度倍数设定上述时间间隔阈值，例如一倍速度时，时间间隔阈值设置为1秒；两倍速度时，时间间隔阈值设置为2秒，以此类推。当然，用户可以自行设置不同的回放速度倍数对应的时间间隔阈值，此处不作限定。

可选地，为了使多路视频流达到绝对同步的状态，上述视频同步回放方法还包括：

在获取了N次多路视频流的时间戳后，对时间间隔阈值进行缩小操作，直至时间间隔阈值缩小到0秒，其中N为大于或等于2的自然数。

其中，在N次获取多路视频流的时间戳的过程中，可以保证上述多路视频流的时间差已经保持在了控制范围内，但用户可能会希望最终实现对路视频流的绝对同步回放，因而可以逐步的缩小时间间隔阈值，其中N为大于或等于2的自然数。例如，当前回放速度倍数为一倍，时间间隔阈值为1秒，则可以在N次后，将时间间隔阈值缩小为0.5秒，再次过了N次后，将时间间隔阈值缩小为0秒，即，使得其它所有的非最优先路视频流都与当前最优先路视频流达到绝对同步。上述缩小时间间隔阈值的操作可以由用户控制，也可以是由视频同步回放装置对时间间隔阈值作等额递减实现，此处不作限定。

由上可见，通过本发明实施例，可以动态的获取多路视频流的时间戳信息，实现对多路视频流的动态同步操作，快速达到多路视频流的同步，并且在此过程中，不会发生视频流的数据帧的丢失，保持了视频信息的完整性。

实施例三

图3示出了本发明实施例提供的视频同步回放装置的具体结构框图，为了便于说明，仅示出了与本发明实施例相关的部分。该视频同步回放装置3包括：时间戳获取单元31，最优先路确定单元32，播放控制单元33。

时间戳获取单元31，用于实时获取并保存参与回放的多路视频流的时间戳；

最优先路确定单元32，用于确定上述时间戳获取单元31获取的多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流；

播放控制单元33，用于在下一次获取并保存上述多路视频流的时间戳之前，播放上述最优先路确定单元32确定的当前最优先路视频流，并根据上述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，以使得上述非最优先路视频流与上述最优先路视频流同步回放。

由上可见，在本实施例中，视频同步回放装置可以根据各路视频流的时间戳所标记的时间确定当前最优先路视频流，并根据当前最优先路视频流对其他各非最优先路视频流进行相应播放控制，以达到其它非最优先路的视频流能够与当前最优先路同步播放的效果。使得多路视频流即使来自于不同的厂商设备，也能快速的进行多路视频同步回放。

实施例四

图4示出了本发明实施例提供的视频同步回放装置的具体结构框图，为了便于说明，仅示出了与本发明实施例相关的部分。该视频同步回放装置4包括：周期性时间戳获取子单元41，时间戳更新子单元42，时间戳排序子单元43，视频流确定子单元44，时间戳比较子单元45，第一播放控制子单元46，第二播放控制子单元47。

周期性时间戳获取子单元41，用于周期性获取上述参与回放的多路视频流的时间戳；

时间戳更新子单元42，用于根据上述周期性时间戳获取子单元获取到的上述多路视频流的时间戳，对已保存的各路视频流的时间戳数据进行更新。

时间戳排序子单元43，用于对上述时间戳获取单元最新保存的多路视频流的时间戳按照时间先后顺序排序；

视频流确定子单元44，用于根据上述时间戳排序子单元得到的多路视频流的时间戳的排序结果，选择其中时间戳所标记的时间最先的一路视频流为上述当前最优先路视频流。

时间戳比较子单元45，用于分别将各个非最优先路视频流的时间戳与上述最优先路确定单元确定的当前最优先路视频流的时间戳进行比较；

第一播放控制子单元46，用于当上述时间戳比较子单元比较得到非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔大于或等于预设的时间间隔阈值时，暂停播放上述非最优先路视频流；

第二播放控制子单元47，用于当上述时间戳比较子单元比较得到非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔小于预设的时间间隔阈值时，播放上述非最优先路视频流。

可选地，上述视频同步回放装置4还包括：

时间间隔阈值设置单元，用于根据当前视频流的回放速度倍数设定上述时间间隔阈值。

可选地，上述视频同步回放装置4还包括：

时间间隔阈值更改单元，用于在获取了N次多路视频流的时间戳后，对时间间隔阈值进行缩小操作，直至时间间隔阈值缩小到0秒，其中N为大于或等于2的自然数。

由上可见，本发明实施例的视频同步回放装置可以动态的获取多路视频流的时间戳信息，实现对多路视频流的动态同步操作，快速达到多路视频流的同步，并且在此过程中，不会发生视频流的数据帧的丢失，保持了视频信息的完整性。

需要说明的是，在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

对于前述的各方法实施例，为了简便描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其它顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定都是本发明所必须的。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其它实施例的相关描述。

以上为对本发明所提供的一种较佳实施例，对于本领域的一般技术人员，依据本发明实施例的思想，在具体实施方式及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种视频同步回放方法，其特征在于，所述视频同步回放方法包括：

实时获取并保存参与回放的多路视频流的时间戳；

确定所述多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流；

在下一次获取并保存所述多路视频流的时间戳之前，播放当前最优先路视频流，并根据所述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，所述播放控制包括正常播放及暂停播放，以使得所述非最优先路视频流与所述最优先路视频流同步回放；

所述实时获取并保存参与回放的多路视频流的时间戳，包括：

将视频流队列放在一个窗口类中，所述窗口类向外提供加入视频流进行同步回放的接口；

通过对各个设备提供的软件开发工具包接口调度获取当前参与回放的多路视频流的最新播放的数据帧的时间戳，所述设备为提供参与回放的视频流的设备；

将上述各路视频流的时间戳保存在窗口类的成员变量数组中；

所述实时获取并保存参与回放的多路视频流的时间戳，包括：

周期性获取所述参与回放的多路视频流的时间戳；

根据获取到的所述多路视频流的时间戳，对已保存的各路视频流的时间戳数据进行更新，具体包括：在一个有回放流队列的窗口类中，添加一个定时器或者一个线程，在定时器消息中或者线程的处理函数中，通过对各个不同厂家设备的SDK接口进行调度，获取当前参与回放的多路视频流最新播放的数据帧的时间戳，并保存在上述窗口类的成员变量数组中，实现对保存的多路视频流的时间戳数据的动态周期性更新。

2.如权利要求1所述的视频同步回放方法，其特征在于，所述确定所述多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流，包括：

对最新保存的多路视频流的时间戳按照时间先后顺序排序；

根据所述多路视频流的时间戳的排序结果，选择其中时间戳所标记的时间最先的一路视频流为所述当前最优先路视频流。

3.如权利要求1所述的视频同步回放方法，其特征在于，所述根据所述当前最优先路视频流，对非最优先路视频流进行相应播放控制，包括：

分别将各个非最优先路视频流的时间戳与当前最优先路视频流的时间戳进行比较；

若所述非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔大于或等于预设的时间间隔阈值，则暂停播放所述非最优先路视频流；

若所述非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔小于预设的时间间隔阈值，则播放所述非最优先路视频流。

4.如权利要求3所述的视频同步回放方法，其特征在于，所述根据所述当前最优先路视频流，对非最优先路视频流进行相应播放控制，之前还包括：

根据当前视频流的回放速度倍数设定所述时间间隔阈值。

5.一种视频同步回放装置，其特征在于，所述视频同步回放装置包括：

时间戳获取单元，用于实时获取并保存参与回放的多路视频流的时间戳；

最优先路确定单元，用于确定所述时间戳获取单元获取的多路视频流中时间戳所标记的时间最先的一路视频流为当前最优先路视频流；

播放控制单元，用于在下一次获取并保存所述多路视频流的时间戳之前，播放所述最优先路确定单元确定的当前最优先路视频流，并根据所述当前最优先路视频流的时间戳，对非最优先路视频流进行相应播放控制，所述播放控制包括正常播放及暂停播放，以使得所述非最优先路视频流与所述最优先路视频流同步回放；

其中，所述时间戳获取单元，具体用于将视频流队列放在一个窗口类中，所述窗口类向外提供加入视频流进行同步回放的接口；通过对各个设备提供的软件开发工具包接口调度获取当前参与回放的多路视频流的最新播放的数据帧的时间戳，所述设备为提供参与回放的视频流的设备；将上述各路视频流的时间戳保存在窗口类的成员变量数组中；

所述时间戳获取单元包括：

周期性时间戳获取子单元，用于周期性获取所述参与回放的多路视频流的时间戳；

时间戳更新子单元，用于根据所述周期性时间戳获取子单元获取到的所述多路视频流的时间戳，对已保存的各路视频流的时间戳数据进行更新，具体包括：在一个有回放流队列的窗口类中，添加一个定时器或者一个线程，在定时器消息中或者线程的处理函数中，通过对各个不同厂家设备的SDK接口进行调度，获取当前参与回放的多路视频流最新播放的数据帧的时间戳，并保存在上述窗口类的成员变量数组中，实现对保存的多路视频流的时间戳数据的动态周期性更新。

6.如权利要求5所述的视频同步回放装置，其特征在于，所述最优先路确定单元，包括：

时间戳排序子单元，用于对所述时间戳获取单元最新保存的多路视频流的时间戳按照时间先后顺序排序；

视频流确定子单元，用于根据所述时间戳排序子单元得到的多路视频流的时间戳的排序结果，选择其中时间戳所标记的时间最先的一路视频流为所述当前最优先路视频流。

7.如权利要求5所述的视频同步回放装置，其特征在于，所述播放控制单元，包括：

时间戳比较子单元，用于分别将各个非最优先路视频流的时间戳与所述最优先路确定单元确定的当前最优先路视频流的时间戳进行比较；

第一播放控制子单元，用于当所述时间戳比较子单元比较得到非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔大于或等于预设的时间间隔阈值时，暂停播放所述非最优先路视频流；

第二播放控制子单元，用于当所述时间戳比较子单元比较得到非最优先路视频流的时间戳与当前最优先路视频流的时间戳的时间间隔小于预设的时间间隔阈值时，播放所述非最优先路视频流。

8.如权利要求7所述的视频同步回放装置，其特征在于，所述视频同步回放装置还包括：

时间间隔阈值设定单元，用于根据当前视频流的回放速度倍数设定所述时间间隔阈值。

Images