CN103999470A - 合并多个记录视频时间线的系统 - Google Patents

Abstract

一种视频记录和回放网络，其包括视频源、多个记录器、本地服务器和客户端装置。所述多个记录器记录来自所述视频源的视频。所述本地服务器产生播放列表，其包括一起覆盖期望时间范围的一个或多个有序视频片段。所述播放列表将所述多个记录器之一与每个视频片段关联。所述客户端装置通过依次流式传输来自所述相关记录器的每个视频片段而根据所述播放列表回放视频。

Description

合并多个记录视频时间线的系统

发明背景

本发明大致涉及视频回放且更具体地涉及用于合并来自多种记录视频源的时间线的系统和方法。

视频捕捉通常需要视频源(诸如数字视频摄像机)和至少一个记录器，其对来自源的实时视频采样，使用一个或多个视频编解码器按指定帧频和分辨率将这个视频编码并且存储所得的视频素材。视频监控和安保领域的标准惯例是用多个记录器记录来自一个摄像机的视频。例如，银行里的安保摄像机通常馈送短期和长期记录器。短期编码器可编码高帧频视频，但在删除前仅存储视频几天。相比之下，长期记录器可按低帧频编码视频，但是无限期地存储视频。一些安保系统还利用多个备用记录器作为硬件故障或受损情况下的冗余。一些这类记录器还可与源视频摄像机位于相同场所中，而其它可位于远程设施上。许多安保系统利用来自多个厂商的记录器。每个记录器可能利用与来自其它厂商的记录器不兼容的专门格式、编解码器或协议。

在观看捕捉的视频时可能期望高分辨率和高帧频。在来自单个源的视频被多个记录器编码时，在目标时间段内的最高质量视频素材可能跨几个记录器散布。例如，短期记录器可能具有针对目标时段的最近部分可获得的高帧频视频素材，但是没有针对目标时段的较早部分可获得的素材。相比之下，长期记录器可能具有针对整个目标时段可获得的素材，但是只是较低帧频的。类似地，硬件故障可能在来自第一记录器的高质量视频素材中产生空白，其可能充满来自第二记录器的较低质量素材。在目标时间段内的最高质量可获得视频素材因此可能在多个记录器上找到，并且可能存储为多个不兼容的厂商专属格式。

发明概要

本发明涉及一种用视频记录和回放网络合并多个记录视频时间线的系统和方法，所述视频记录和回放网络包括视频源、多个记录器、本地服务器和客户端装置。多个记录器记录来自视频源的视频。本地服务器产生播放列表，其包括一个或多个有序视频片段，其一起覆盖期望的时间范围。播放列表将多个记录器之一与每个视频片段关联。客户端装置通过依次流式传输来自相关记录器的每个视频片段而根据播放列表回放视频。

附图简述

图1是视频记录和回放网络的方框图。

图2是由图1的视频记录和回放系统所产生的播放列表的方框图。

图3是由图1的视频记录和回放网络中的客户端装置的方框图。

图4是使用图1和图2的视频记录和回放网络的方法的流程图。

具体实施方式

图1是视频记录和回放网络10的方框图，其包括源12、记录器14a、14b和14c、本地服务器16和客户端装置18。源12是视频源，诸如数字摄像机。记录器14a、14b和14c表示多个记录器，其记录并且存储来自源12的归档实时视频。虽然示出三个记录器，但是可使用许多记录器。不同的记录器14a、14b和14c可按不同分辨率和帧频记录视频并且可在删除前保留所存储视频达不同时间长度。记录器14a、14b和14c可为不同品牌、运行互相不兼容的厂商专属软件和使用多种不兼容编解码器进行视频编码的记录器。举例来说，记录器14a可为长期存储记录器，其以厂商A的格式存储低帧频视频达数个月，而记录器14b可为短期存储记录器，其以厂商B的格式存储高帧频视频仅几日。本地服务器16是与客户端装置18和多个记录器14a、14b和14c数字通信的处理服务器。本地服务器16拥有库17(记录器列表或数据库)，其包括记录器14a、14b和14c且可能包括接收来自除源12以外的其它源的视频的其它记录器(未示出)。库17识别由每个所列记录器记录的源，以及对每个记录器特定的厂商专属信息，诸如所述记录器所使用的协议或编解码器。库17还可指示每个所列记录器的位置。

客户端装置18是用户侧装置，其具有允许用户请求特定视频的输入构件和于显示所请求视频的输出构件。下文参考图3更详细描绘和描述客户端装置18。客户端装置18接受来自用户的视频请求vr并且将这些视频请求传输至本地服务器16。虽然图1中仅示出一个客户端装置18，但是本地服务器16可并行服务多个客户端。每个视频请求vr通过源(例如，源12或外部摄像机5)和时间(例如，2012年11月1日下午6点与2012年11月2日早上6点之间)识别视频的特定范围。本地服务器16参考库17以组建接收来自指定源的视频的记录器列表(例如，针对源12的记录器14a、14b和14c)并且就所请求视频时间查询每个这种记录器。在所描绘的实施方案中，本地服务器16查询记录器14a、14b和14c，其用指示指定视频的任意部分是否可获得的视频状态消息sm和指定视频范围的可获得部分的帧频和分辨率响应这个查询。在视频记录和回放网络10的一些实施方案中，视频状态消息sm还指示响应记录器14a、14b或14c上的现有负载，诸如来自网络流量或CPU使用的负载。

本地服务器16处理视频状态信息sm以产生播放列表p1(有序视频片段vs的列表)，其一起组成视频请求vr中所请求的整个视频范围或尽可能接近整个所请求视频范围。基于状态信息sm选择每个视频片段vs以提供可获得的最高质量视频。如下文参考图2和图3描述，播放列表p1被传输至客户端装置18并且由其处理。

图2是播放列表p1的方框图，其包括上文参考图1描述的多个视频片段，包括视频片段vs1、vs2和vsN。虽然图2中示出三个视频片段vs，但是播放列表p1可包括许多视频片段，其一起构成视频请求vr中所请求的视频范围。本地服务器16通过根据来自库17的视频状态信息sm和参考信息评估可从每个记录器获得的视频的质量而组建播放列表p1。特定而言，本地服务器16选择所查询记录器上可获得的具有最高分辨率和帧频的视频。其次，与来自许多单独记录器的大量较短片段相比，本地服务器16可能偏好可从一些记录器获得的长、连续视频片段。本地服务器16还可能偏好位于较近位置或具有较低记录器负载的记录器以使置于视频记录和回放网络10上的负担最小化。每个视频片段vs包括视频片段的开始和停止时间的指示、在开始和停止时间之间应从其中流式传输视频的记录器的记录器ID和足以使客户端装置18能流式传输来自所选记录器的视频的一组配置选项。这些配置选项包括客户端装置18与所选记录器14a、14b或14c通信所需的厂商专属信息(诸如记录器所使用的编解码器或协议组)，以及同步多个视频片段vs所需的回放信息(诸如回放帧频或分辨率)。如下文参考图2描述，客户端装置18依次从指定记录器14a、14b或14c流式传输播放列表p1上的视频片段。通过播放来自播放列表p1的视频片段，视频记录和回放系统10针对指定视频范围自动为用户提供可从多个记录器14a、14b和14c获得的最高质量视频。

图3是客户端装置18的放大方框图。客户端装置18包括装置管理器20、会话驱动器22a、22b和22c、显示器24和输入管理器26。会话驱动器22a、22b和22c是分别流式传输来自记录器14a、14b和14c的视频的硬件或软件驱动器。会话驱动器22a、22b和22c说明对应于上文参考图1描述的多个记录器的多个驱动器。装置管理器20是基于配置选项针对每个视频区段从播放列表p1选择合适会话驱动器22a、22b或22c并且将所述配置选项传递至所述会话驱动器，使所选会话驱动器能请求并且播放合适的视频片段的处理器。显示器24是呈现由会话驱动器22a、22b和22c读取的视频的监视器或屏幕。输入管理器26包括处理器和输入装置，诸如键盘和1或鼠标。

输入管理器26收集来自用户的视频请求vr并且将视频请求vr传输至本地服务器16。本地服务器16如上文参考图1描述用播放列表p1响应。客户端装置18随后跟踪第一视频片段vs1的开始和停止时间(见图2)并且将视频片段vs1的配置信息和记录器ID传递至装置管理器20。装置管理器20基于视频片段vs1的记录器ID选择会话驱动器(即，会话驱动器22a、22b或22c)并且将配置选项和回放开始1停止时间传递至所选会话驱动器(例如，记录器14b的会话驱动器22b)，其检索并且在显示器24上呈现视频。

客户端装置18跟踪vs1的停止时间的接近。在视频片段vs1结束前不久，客户端装置18识别播放列表p1上的下一个视频片段vs2并且将vs2的配置选项和记录器ID发送至装置管理器20。装置管理器20在前一个视频片段vs1结束之前将这个配置数据转发至合适的会话驱动器22a、22b或22c，使得视频可从播放列表p1无缝流式传输。这个过程重复经过每个视频片段vs直到最后一个视频片段vsN，此后视频回放终止。

图4是用视频记录和回放系统10回放视频的方法100的流程图。首先，库17被手动或电子组建(步骤S1)。如上所述，库17是记录器、与每个记录器相关的源和与每个记录器相关的任意厂商专属信息的数据库或列表。库17可由用户作为视频记录和回放系统10的配置或设置过程的一部分组建(或更新)。或者，库17可由本地服务器18响应于定期状态检查而自动组建。一旦库17已被组建，本地服务器16即可接收来自客户端装置18的输入管理器26的视频请求vr。(步骤S2)。如上文参考图1讨论，视频请求vr指定源和定时器时段。本地服务器16随后就视频状态信息vs查询与所请求源相关的记录器，其指示由每个所选记录器拥有的视频(若有)的质量。(步骤S3)。本地服务器16随后根据视频状态信息vs从可获得的最高质量视频构建播放列表p1。(步骤S4)。如上所述，在组建播放列表p1时还可考虑次要因素，诸如可从每个记录器获得的连续视频的长度、至每个记录器的距离和每个记录器上现有负载。播放列表p1随后被传输至客户端装置18。

客户端装置18从播放列表p1选择第一视频片段vs1(步骤S5)并且将这个视频片段的记录器ID和相应配置选项传递至装置管理器20。(步骤S6)。装置管理器20基于记录器ID选择会话驱动器22a、22b或22c并且将配置选项传递至所选记录器。(步骤S7)。所选会话驱动器22a、22b或22c随后使用由装置管理器20提供的配置选项将所指示视频流式传输至监视器24以确定回放帧频、调节分辨率和选择回放开始和停止时间。(步骤S8)。

客户端装置18探测视频片段vs1何时接近结束(步骤S9)并且将来自播放列表p1的下一个视频片段vs2传递至装置管理器20，使得监视器24显示将vs1和vs2无缝一体化的连续流视频。客户端装置18回放视频片段vs1、vs2和vsN直到播放列表p1上无仍需播放的视频片段。(步骤S10)，此时视频回放结束。

本发明提供用于自动组建和无缝结合来自记录器阵列的视频以形成所请求连续视频时间线的系统和方法。这个系统自动选择可从任意记录器获得的最高质量视频，同时使视频记录和回放网络10内的网络和处理器负载最小化。此外，本发明使来自多个厂商的记录器能并入单个一体化视频回放系统中。

虽然已参考示例性实施方案描述本发明，但是本领域技术人员应了解可进行不同变化且等效物可替代其元件而不脱离本发明的范围。此外，可进行许多修改以使特定情况或材料适于本发明的教导而不脱离其基本范围。因此，本发明不旨在受限于所公开的特定实施方案，而是本发明将包括在随附权利要求内的所有实施方案。

Claims (21)

1.一种视频记录和回放网络，其包括：

视频源；

多个记录器，其记录来自所述视频源的视频；

本地服务器，其产生包括一起覆盖期望时间范围的一个或多个有序视频片段的播放列表，所述播放列表将所述多个记录器之一与每个视频片段关联；

客户端装置，其通过依次流式传输来自所述相关记录器的每个视频片段而根据所述播放列表回放视频。

2.根据权利要求1所述的视频记录和回放网络，其中所述本地服务器通过在所述期望时间范围内每次选择可从任意所述多个记录器获得的最高质量视频而产生所述播放列表。

3.根据权利要求2所述的视频记录和回放网络，其中所述所选视频是具有最高分辨率的视频。

4.根据权利要求2所述的视频记录和回放网络，其中所述所选视频是具有最高帧频的视频。

5.根据权利要求2所述的视频记录和回放网络，其中所述本地服务器其次选择视频以使记录器负载最小化。

6.根据权利要求2所述的视频记录和回放网络，其中所述本地服务器其次使每个视频片段的长度最大化。

7.根据权利要求1所述的视频记录和回放网络，其中所述播放列表提供针对每个视频片段的开始和停止时间和配置信息。

8.根据权利要求7所述的视频记录和回放网络，其中每个视频片段的所述配置信息包括针对与所述视频片段相关的所述多个记录器之一的编解码器信息或厂商专属信息。

9.根据权利要求8所述的视频记录和回放网络，其中所述多个记录器以多个互相不兼容的格式记录视频。

10.一种用于合并多个记录视频时间线的系统，所述系统包括：

多个记录器，其记录来自共同视频源的视频；

本地服务器，其组建被选择来提供来自可从所述多个记录器获得的视频的所述最高视频质量的一个或多个有序视频片段的播放列表，每个视频片段具有开始时间和停止时间，并且指定在所述开始时间与所述停止时间之间从其中流式传输视频的所述多个记录器之一；和

客户端装置，其流式传输来自所述播放列表的视频，所述客户端装置包括：

多个会话驱动器，每个能够处理来自一个或多个所述记录器的视频；和

装置管理器，其针对所述播放列表上的每个视频片段选择所述多个会话驱动器之一。

11.根据权利要求10所述的系统，其中每个所述会话驱动器与所述多个记录器的至少一个相关。

12.根据权利要求10所述的系统，其中所述本地服务器包括将每个记录器与特定视频源关联的记录器库。

13.根据权利要求12所述的系统，其中所述库还将每个记录器与位置关联，且其中所述本地服务器在组建所述播放列表时偏好处于较近位置上的记录器。

14.根据权利要求10所述的系统，其中所述播放列表包括与每个视频片段相关且由所述多个会话驱动器使用的配置选项。

15.根据权利要求14所述的系统，其中所述配置选项包括专属于所述指定记录器的回放帧频和厂商专属信息。

16.一种运行软件视频处理方法的视频处理服务器，所述软件视频处理方法包括：

接收来自客户端装置的数字播放列表请求，所述数字播放列表请求指定视频源和时间范围；

查询多个视频记录器的每个的视频状态，其指示来自所述指定视频源和时间范围的视频素材从每个记录器的可获得性；和

基于所述视频状态组建被配置来由所述客户端装置流式传输和回放的有序数字播放列表，所述有序数字播放列表经由所述多个记录器识别来自所述指定视频源的一个或多个视频片段，所述一个或多个视频片段一起覆盖所述指定时间范围。

17.根据权利要求16所述的方法，其中所述有序数字播放列表通过每次选择可从任意所述多个数字视频记录器获得的所述最高质量视频而组建。

18.根据权利要求16所述的方法，其中所述视频状态是数字消息，其指示所述数字视频记录器是否具有针对所述指定时间范围可获得的视频，和(若有)所述可获得视频的帧频和分辨率。

19.根据权利要求16所述的方法，其中所述播放列表包括针对每个视频片段的开始和停止时间和配置设置。

20.一种运行软件视频回放方法的视频客户端装置，所述软件视频回放方法包括：

将数字播放列表请求传输至视频服务器，所述播放列表请求指定视频源和时间范围；

接收来自所述视频服务器的有序数字播放列表，所述有序数字播放列表识别各具有开始时间、停止时间和指定记录器的一个或多个视频片段，使得所述视频片段一起提供来自所述指定视频源的所述指定时间范围；

从其指定记录器依次流式传输每个视频片段；和

当其被流式传输时，在客户端侧监视器上呈现每个视频片段。

21.根据权利要求20所述的方法，其中流式传输每个视频片段包括：

基于所述相关记录器选择会话驱动器；

为所述会话驱动器提供针对所述视频片段的所述开始和停止时间和配置设置；和

使用所述配置设置检索和处理来自所述相关记录器的从所述开始时间至所述停止时间的视频。