CN107566794B - 一种视频数据的处理方法、系统及终端设备 - Google Patents

Abstract

本发明适用于视频传输技术领域，公开了一种视频数据的处理方法、系统及终端设备。所述处理方法包括：将采集的视频数据送至编码器进行视频编码，根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳，根据预设视频传输协议，将所述时间戳加入所述视频数据。本发明将编码时间作为时间戳的来源，可以提高时间戳的准确性和稳定性，避免了视频传输中断情况的发生，有利于视频接收端的同步与解码。

Description

一种视频数据的处理方法、系统及终端设备

技术领域

本发明属于视频传输技术领域，尤其涉及一种视频数据的处理方法、系统及终端设备。

背景技术

视频监控已经成为现代城市管理、监测、控制的重要技术手段，为智慧城市、智能交通、企业生产中的应用与发展提供持续市场动力。摄像设备进行视频监控并将视频流传输给视频接收端，例如监控平台。视频流的断开，意味着信息丢失，保证提供持续稳定的视频流是摄像设备的最核心功能。

目前，视频流中的时间数据采用系统时间来获取，系统时间是由摄像设备的嵌入式系统生成的。然而由于嵌入式系统易受晶振性能、温度和压强等因素影响，使得系统时间出现偏差，导致传输到视频接收端的视频流中的时间数据出现异常，影响视频接收端的解码器解码，从而造成视频流的中断。中断时间依赖于视频接收端超时重新请求视频流的时间。视频流的中断会影响流的连续性，导致重要视频数据的丢失。

可见，现有技术中存在易造成摄像设备与视频接收端之间视频流传输的中断，导致重要视频数据丢失的问题。

发明内容

有鉴于此，本发明实施例提供了一种视频数据的处理方法、系统及终端设备，以解决现有技术中存在的易造成摄像设备与视频接收端之间视频流传输的中断，导致重要视频数据丢失的问题。

本发明实施例的第一方面提供了一种视频数据的处理方法，包括：

将采集的视频数据送至编码器进行视频编码。

根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳。

根据预设视频传输协议，将所述时间戳加入所述视频数据。

本发明实施例的第二方面提供了一种视频数据的处理系统，包括：

视频编码模块，用于将采集的视频数据送至编码器进行视频编码。

时间戳获取模块，用于根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳。

视频数据合成模块，用于根据预设视频传输协议，将所述时间戳加入所述视频数据。

本发明实施例的第三方面提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述视频数据的处理方法的步骤。

本发明实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上所述视频数据的处理方法的步骤。

本发明实施例与现有技术相比存在的有益效果是：通过将采集的视频数据送至编码器进行视频编码，然后根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳，并将所述时间戳加入所述视频数据。本发明实施例将编码时间作为时间戳的来源，可以提高时间戳的准确性和稳定性，避免了视频传输中断情况的发生，有利于视频接收端的同步与解码。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明一个实施例提供的视频数据的处理方法的流程示意图；

图2是本发明一个实施例提供的图1中步骤S102的具体流程示意图；

图3是本发明一个实施例提供的图2中步骤S203的流程示意图；

图4是本发明一个实施例提供的视频数据的处理系统的结构示意图；

图5是本发明一个实施例提供的图4中时间戳获取模块的结构示意图；

图6是本发明一个实施例提供的终端设备的示意图。

具体实施方式

以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本发明实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中，省略对众所周知的系统、装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。

本发明的说明书和权利要求书及上述附图中的术语“包括”以及它们任何变形，意图在于覆盖不排他的包含。例如包含一系列步骤或单元的过程、方法或系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。此外，术语“第一”、“第二”和“第三”等是用于区别不同对象，而非用于描述特定顺序。

为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。

实施例1：

图1示出了本发明一实施例所提供的视频数据的处理方法的实现流程图，为了便于说明，仅示出了与本发明实施例相关的部分，详述如下：

如图1所示，本发明实施例所提供的一种视频数据的处理方法，包括：

步骤S101，将采集的视频数据送至编码器进行视频编码。

本实施例中，编码器可以为压缩编码器，用于对视频数据进行压缩和编码。

步骤S102，根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳。

本实施例中，编码器对每一帧的视频数据能够提供一个准确的编码时间，将编码时间作为时间戳的来源，可以提高时间戳的准确性和稳定性。

步骤S103，根据预设视频传输协议，将所述时间戳加入所述视频数据。

在具体应用中，预设视频传输协议包括RTP数据传输协议（Real-time TransportProtocol，实时传输协议），和RTSP数据传输协议（Real Time Streaming Protocol，实时流传输协议）。

RTP数据传输协议，用于实时传输数据。该协议提供的信息包括：时间戳（用于同步）、序列号（用于丢包和重排序检测）、以及负载格式（用于说明数据的编码格式）。

本实施例中，将时间戳加入视频数据一起传输，可以为每一帧的视频数据提供时间参照，避免接收顺序错误或者误码的情况发生。

如图2所示，在本发明的一个实施例中，图1所对应的实施例中的步骤S102具体包括：

步骤S201，获取视频传输的起始时间。

在一个实施例中，步骤S201之前还包括：当接收到视频传输指令时，开始视频传输。

在具体应用中，接收到视频传输指令后，返回回复数据。

本实施例中，摄像设备向视频接收端传输视频数据，视频传输指令为视频接收端发出的，摄像设备接收到视频接收端发送的视频传输指令时，开始向视频接收端传输视频数据，此时间点即为视频传输的起始时间。

步骤S202，将所述起始时间作为第一帧视频数据对应的时间戳。

在一个实施例中，第一帧视频数据对应的时间戳还可以为预设值。

RTSP数据传输协议建议回复数据中携带的时间信息需反映在第一帧视频数据对应的时间戳中。本实施例中，将所述起始时间作为第一帧视频数据对应的时间戳，有利于视频接收端的同步与解码。

步骤S203，根据预设算法，生成之后每一帧视频数据对应的时间戳。

本实施例中，视频数据的帧与帧之间的时间戳为递增的关系，其增量值反映了采样信息与帧率信息，是视频接收端还原视频的重要依据。增量值的平衡，可反映在解码效果的流畅性上。

如图3所示，在本发明的一个实施例中，图2所对应的实施例中的步骤S203中的预设算法，具体包括：

步骤S301，获取当前帧视频数据的编码时间与前一帧视频数据的编码时间之间的时间差。

步骤S302，当前帧视频数据对应的时间戳等于前一帧视频数据对应的时间戳加上所述时间差。

本实施例中，预设算法具体可以表示为：

第一帧视频数据对应的时间戳=起始时间；

第二帧视频数据对应的时间戳=起始时间+第二帧视频数据的编码时间-第一帧视频数据的编码时间；

第三帧视频数据对应的时间戳=起始时间+第三帧视频数据的编码时间-第一帧视频数据的编码时间；

依照此顺序计算，第n帧视频数据对应的时间戳=起始时间+第n帧视频数据的编码时间-第一帧视频数据的编码时间。

可见，帧与帧之间的时间戳之差等于编码时间之差。

在本发明的一个实施例中，图2所对应的实施例中的步骤S203中的预设算法，具体包括：

当前帧视频数据对应的时间戳等于其编码时间加上前一帧视频数据对应的时间戳。

本实施例中，预设算法具体可以表示为：

第一帧视频数据对应的时间戳=起始时间；

第二帧视频数据对应的时间戳=起始时间+第二帧视频数据的编码时间；

第三帧视频数据对应的时间戳=起始时间+第三帧视频数据的编码时间；

依照此顺序计算，第n帧视频数据对应的时间戳=起始时间+第n帧视频数据的编码时间。

可见，帧与帧之间的时间戳之差等于编码时间之差。

上述两个实施例均采用编码时间的间隔表示时间戳的增量值。由于编码器的结构稳定，编码时间稳定递增，因此视频传输时不受嵌入式系统对时的影响，不会因系统对时而断开，视频接收端也不会受到影响。

本发明实施例的流程执行主体可以是摄像设备，摄像设备向视频接收端传输视频数据，其过程具体为：摄像设备接收到视频接收端发送的视频传输指令后，向视频接收端依次发送回复数据、带有时间戳的第一帧视频数据、带有时间戳的第二帧视频数据……带有时间戳的第n帧视频数据。

经过实验验证，本发明实施例提供的视频数据的处理方法中的时间戳的增量值平稳性高，且在视频传输中无码流断开的情况发生。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

实施例2：

如图4所示，本发明的一个实施例提供的视频数据的处理系统100，用于执行图1所对应的实施例中的方法步骤，其包括：

视频编码模块110，用于将采集的视频数据送至编码器进行视频编码。

时间戳获取模块120，用于根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳。

视频数据合成模块130，用于根据预设视频传输协议，将所述时间戳加入所述视频数据。

如图5所示，在本发明的一个实施例中，图4所对应的实施例中的时间戳获取模块120还包括用于执行图2所对应的实施例中的方法步骤的结构，其包括：

起始时间获取单元121，用于获取视频传输的起始时间。

第一时间戳获取单元122，用于将所述起始时间作为第一帧视频数据对应的时间戳。

时间戳获取单元123，用于根据预设算法，生成之后每一帧视频数据对应的时间戳。

在一个实施例中，所述预设算法包括：

获取当前帧视频数据的编码时间与前一帧视频数据的编码时间之间的时间差。

当前帧视频数据对应的时间戳等于前一帧视频数据对应的时间戳加上所述时间差。

在一个实施例中，所述预设算法包括：

当前帧视频数据对应的时间戳等于其编码时间加上前一帧视频数据对应的时间戳。

在一个实施例中，视频数据的处理系统100还包括其他功能模块/单元，用于实现实施例1中各实施例中的方法步骤。

实施例3：

图6是本发明一实施例提供的终端设备的示意图。如图6所示，该实施例的终端设备6包括：处理器60、存储器61以及存储在所述存储器61中并可在所述处理器60上运行的计算机程序62。所述处理器60执行所述计算机程序62时实现如实施例1中所述的各实施例中的步骤，例如图1所示的步骤101至103。或者，所述处理器60执行所述计算机程序62时实现如实施例2中所述的各系统实施例中的各模块/单元的功能，例如图4所示模块110至130的功能。

所述终端设备6可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备可包括，但不仅限于，处理器60、存储器61。本领域技术人员可以理解，图6仅仅是终端设备6的示例，并不构成对终端设备6的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述终端设备6还可以包括输入输出设备、网络接入设备、总线等。

所称处理器60可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器 (Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列 (Field-Programmable Gate Array，FPGA) 或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。

所述存储器61可以是所述终端设备6的内部存储单元，例如终端设备6的硬盘或内存。所述存储器61也可以是所述终端设备6的外部存储设备，例如所述终端设备6上配备的插接式硬盘，智能存储卡（Smart Media Card, SMC），安全数字（Secure Digital, SD）卡，闪存卡（Flash Card）等。进一步地，所述存储器61还可以既包括所述终端设备6的内部存储单元也包括外部存储设备。所述存储器61用于存储所述计算机程序以及所述终端设备6所需的其他程序和数据。所述存储器61还可以用于暂时地存储已经输出或者将要输出的数据。

实施例4：

本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序被处理器执行时实现如实施例1中所述的各实施例中的步骤，例如图1所示的步骤S101至步骤S103。或者，所述计算机程序被处理器执行时实现如实施例2中所述的各系统实施例中的各模块/单元的功能，例如图4所示的模块110至130的功能。

所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。

本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。

本发明实施例系统中的模块或单元可以根据实际需要进行合并、划分和删减。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

在本发明所提供的实施例中，应该理解到，所揭露的装置/终端设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/终端设备实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。

以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。

Claims (5)

1.一种视频数据的处理方法，其特征在于，包括：

将采集的视频数据送至编码器进行视频编码；

根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳；具体包括：根据编码器提供的视频编码时的编码时间及视频数据的帧与帧之间的时间戳的递增关系，得到每一帧视频数据对应的时间戳；

根据预设视频传输协议，将所述时间戳加入所述视频数据；所述根据视频编码时的编码时间，得到每一帧视频数据对应的时间戳，包括：

获取视频传输的起始时间；

将所述起始时间作为第一帧视频数据对应的时间戳；

根据预设算法，生成之后每一帧视频数据对应的时间戳；

所述预设算法包括：

获取当前帧视频数据的编码时间与前一帧视频数据的编码时间之间的时间差；

当前帧视频数据对应的时间戳等于前一帧视频数据对应的时间戳加上所述时间差。

2.如权利要求1所述的视频数据的处理方法，其特征在于，所述获取视频传输的起始时间之前，包括：

当接收到视频传输指令时，开始视频传输。

3.一种视频数据的处理系统，其特征在于，包括：

视频编码模块，用于将采集的视频数据送至编码器进行视频编码；

时间戳获取模块，用于根据编码器提供的视频编码时的编码时间及视频数据的帧与帧之间的时间戳的递增关系，得到每一帧视频数据对应的时间戳；

视频数据合成模块，用于根据预设视频传输协议，将所述时间戳加入所述视频数据；

所述时间戳获取模块包括：

起始时间获取单元，用于获取视频传输的起始时间；

第一时间戳获取单元，用于将所述起始时间作为第一帧视频数据对应的时间戳；

时间戳获取单元，用于根据预设算法，生成之后每一帧视频数据对应的时间戳；

所述预设算法包括：

获取当前帧视频数据的编码时间与前一帧视频数据的编码时间之间的时间差；

当前帧视频数据对应的时间戳等于前一帧视频数据对应的时间戳加上所述时间差。

4.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至2任一项所述方法的步骤。

5.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至2任一项所述方法的步骤。

Images