CN107635149A - 视频处理方法及装置 - Google Patents

Abstract

本发明实施例提供一种视频处理方法及装置。所述方法包括：首先，视频处理设备获取视频流数据，并将OSD信息写入到所述视频流数据的基本码流的私有数据段中；接着，所述视频播放设备确认是否需要在播放的视频中显示OSD信息，在需要显示时，从所述私有数据段中获取OSD信息；最后，所述视频播放设备将所述OSD信息显示在播放的帧图像上。上述方案将OSD信息保存到私有数据段中实现了OSD信息与视频流数据绑定，保存到私有数据段中不会改变数据码流的结构，再通过确认信息来确定是否需要显示OSD信息，可以实现OSD信息根据需求进行自由显示的目的。

Description

视频处理方法及装置

技术领域

本发明涉及视频图像处理技术领域，尤其涉及一种在视频图像中添加OSD信息的视频处理方法及装置。

背景技术

OSD(On Screen Display，在屏显示)是指应用在CRT/LCD显示器上，在显示屏幕中产生一些特殊的字形或图形，让使用者得到一些讯息的技术。比如，OSD信息可以是监控画面上显示的被监控地点的位置信息。然而，现有技术中无法对所述OSD信息进行可选择的自由播放，影响用户体验。

发明内容

本发明的实施例描述一种视频处理方法及装置。

第一方面，本发明的实施例提供一种视频处理方法，该方法应用于视频处理系统，所述系统包括视频处理设备及视频播放设备，所述方法包括：首先，视频处理设备获取视频流数据，并将OSD信息写入到所述视频流数据的基本码流的私有数据段中；接着，所述视频播放设备确认是否需要在播放的视频中显示OSD信息，在需要显示时，从所述私有数据段中获取OSD信息；最后，所述视频播放设备将所述OSD信息显示在播放的帧图像上。上述方案将OSD信息保存到私有数据段中实现了OSD信息与视频流数据绑定，保存到私有数据段中不会改变数据码流的结构，再通过确认信息来确定是否需要显示OSD信息，可以实现OSD信息根据需求进行自由显示的目的。

可选地，所述视频处理设备对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中，包括：将所述OSD数据封装成一OSD结构体；将所述OSD结构体写入到所述视频流数据的基本码流的私有数据段中。

可选地，所述视频播放设备从所述视频流数据的基本码流的私有数据段中获取所述OSD信息，包括：

所述视频播放设备对所述私有数据段中的OSD结构体进行验证；

当所述OSD结构体通过验证时，对所述OSD结构体进行解析生成OSD信息。

可选地，所述视频处理设备对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中，还包括：

所述视频处理设备比较所述OSD结构体的前缀是否与所述基本码流中视频帧的前缀相同；

在相同时，所述视频处理设备在所述OSD结构体的前缀中插入特定字符串，以使所述OSD结构体的前缀与所述基本码流中视频帧的前缀不同。

可选地，所述视频播放设备对所述OSD结构体进行解析生成OSD信息，包括：

去掉所述OSD结构体的前缀中插入特定字符串，对去掉特定字符串的所述OSD结构体进行解析生成OSD信息。

可选地，所述视频播放设备将所述OSD信息叠加在所述视频流数据的帧图像后进行播放，包括：

根据所述OSD信息生成OSD图像；

将所述OSD图像叠加在所述视频流数据的帧图像后进行播放。

第二方面，本发明的实施例提供一种视频处理方法，应用于视频处理设备，所述方法包括：获取视频流数据；对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中。该方法将OSD信息写入到私有数据段中，可以防止OSD信息丢失。

可选地，所述将OSD信息写入所述视频流数据的基本码流的私有数据段中，包括：

所述视频处理设备将所述OSD数据封装成一OSD结构体；

所述视频处理设备将所述OSD结构体写入到所述视频流数据的基本码流的私有数据段中。

第三方面，本发明的实施例还提供一种视频处理方法，应用于视频播放设备，所述方法包括：获取在基本码流的私有数据段中存储有OSD信息视频流数据；确认是否需要在播放所述视频流数据时显示所述OSD信息；在需要显示所述OSD信息时，从所述视频流数据的基本码流的私有数据段中获取所述OSD信息；将所述OSD信息叠加在所述视频流数据的帧图像后进行播放。该方法可以实现OSD信息根据需求进行自由显示的目的。

第四方面，本发明的实施例提供一种视频处理装置，应用于视频处理设备，所述装置包括：获取模块，用于获取视频流数据；处理模块，用于对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中。

第五方面，本发明的实施例提供一种视频处理装置，应用于视频播放设备，所述装置包括：第一获取模块，用于获取基本码流的私有数据段中存储有OSD信息的视频流数据；确认模块，用于确认是否需要在播放所述视频流数据时显示所述OSD信息；第二获取模块，用于在需要显示所述OSD信息时，从所述视频流数据的基本码流的私有数据段中获取所述OSD信息；播放模块，用于将所述OSD信息叠加在所述视频流数据的帧图像后进行播放。

本发明实施例提供的视频处理方法及装置。通过将OSD信息存储到视频流数据的基本码流的私有数据段中，在进行播放时，根据播放需求选择性的从所述私有数据段中读取所述OSD信息，可实现对OSD信息进行自由显示，极大的提升了用户体验。

本发明的其他特征和优点将在随后的说明书阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明实施例了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本发明实施例提供的视频处理系统的结构框图。

图2为本发明实施例提供应用于图1所示视频处理系统的视频处理方法的流程图。

图3为本发明实施例提供的基本码流的结构示意图。

图4为本发明实施例提供的应用于图1中视频处理设备的视频处理方法的流程图。

图5为本发明实施例提供应用于图1中视频播放设备的视频处理方法的流程图。

图6是本发明实施例提供的一种视频处理装置的结构框图。

图7为本发明实施例提供的另一种视频处理装置的结构框图。

具体实施方式

下面将结合本发明实施例中附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

目前，常见的有三种实现OSD信息显示的方式。第一方式是前端图像采集装置(比如IP摄像头)在进行编码时，将OSD信息覆盖在视频上，形成视频的一部分。第二种方式是转码服务器在进行视频转码时先将视频流解码成视频图片，然后再将OSD信息叠加在视频图片上，最后再编码成视频流。第三种方式是将OSD信息以字符串的形式发送到显示终端上进行叠加显示。

上述三种方法均存在缺点，其中，第一种方式和第二种方式均是将OSD信息直接叠加在视频上，这样保存的视频无论在哪个播放器上播放都会有OSD信息，在某些用户不想看到OSD信息的场景，无法使用播放器对OSD信息进行隐藏，会直接影响用户的用户体验。第三种方式没有将OSD信息与视频流保存在一起，前端设备(比如，摄像头)没有保存OSD信息，在需要回放的时候没有对应的OSD信息，在用户回放视频的场景下，用户无法观看到OSD信息。

为了克服上述现有技术中存在的缺陷，发明人通过研究提供下面实施例给出解决方案。

请参照图1，图1是本发明较佳实施例提供的视频处理系统10的结构框图。所述视频处理系统10包括：视频处理设备100及视频播放设备200。以下面以视频监控领域为例，所述视频处理设备100可以是前端图像采集装置(比如，IP摄像头)，也可以是与前端图像采集装置连接的转码服务器。所述视频播放设备200为具有视频解码能力的播放设备。

请参照图2，图2是本发明较佳实施例提供的应用于图1中视频处理系统10的视频处理方法的流程图，所述视频处理方法包括以下步骤。

步骤S210，视频处理设备100获取视频流数据。

在本实施例中，在所述视频处理设备100是前端图像采集装置时，所述视频处理设备100通过采集现场图像的方式获得视频流数据；在所述视频处理设备100是转码服务器时，所述视频处理设备100通过前端图像采集装置获得视频流数据。

步骤S220，对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中。

所述视频流数据的基本码流(Elementary stream，简称ES流)如图3所示。其中ES流包括序头、扩展数据段(0)、私有数据段(0)、图像组及序列结束码；每个图像组又包括组头、扩展数据段(1)、私有数据段(1)及视频帧；每个视频帧又包括图像头、扩展数据段(2)、私有数据段(2)及图像编码。在本实施例中所描述的私有数据段可以是私有数据段(0)、私有数据段(1)以及私有数据段(2)的其中一个或者两个以上的组合，也即，所述OSD信息可以写入其中任何一个私有数据段也可以均写入其中两个或两个以上的私有数据段中。

在本实施例中，将OSD信息写入所述视频流数据的基本码流的私有数据段中的步骤具体描述如下。

首先，将所述OSD数据封装成一OSD结构体。

在具体实现时，可以将需要显示的OSD信息(比如，监控位置信息，XX大厦A区)封装成结构体。

在本实施例中，所述结构体的代码可以如下：

然后，将所述OSD结构体写入到所述视频流数据的基本码流的私有数据段中。

在本实施例中，在将OSD结构体写入私有数据段时，需要查找私有数据段在所述基本码流中的位置。

在本实施例中，查找私有数据段的代码可以如下。

在上述代码中，“0x000001B2”表示私有数据段的开始码，“0000 0000 0000 00000000 0001”表示私有数据段的结束码。通过上述代码即可实现在基本码流对私有数据段进行查找。可以理解的是，私有数据段的容量大小可以根据需要插入数据的大小进行调整，同时在私有数据段的容量、开始码及结束码被定义后，在所述视频处理系统10中的各设备均是知道私有数据段的这些属性的，以便在后续需要显示OSD信息时能够从基本码流中查找得到私有数据段。

在本实施例中，步骤S220可以通过以下三种方式将所述OSD信息写入私有数据段中。

第一种实施方式，前端图像采集装置将OSD信息写入私有数据段中。第二种实施方式，转码服务器将OSD信息写入私有数据段中。第三种实施方式，前端图像采集装置将OSD信息写入私有数据段中，转码服务器也将OSD信息写入私有数据段中，比如，前端图像采集装置写入的OSD信息可以是“XX大厦A区”，而转码服务器写入的OSD信息可以是“XX市XX区”，在进行OSD显示时就会显示XX市XX区XX大厦A区。在采用第三种实施方式时，前端图像采集装置和转码服务器均可以对自身加入的OSD信息创建结构体，也可以是，转码服务器在前端图像采集装置已创建的结构体中进行数据修改，将转码服务器需要加入的OSD信息添加进已创建的结构体中。

步骤S230，视频播放设备200确认是否需要在播放所述视频流数据时显示所述OSD信息。

在本实施中，视频播放设备200可根据用户的实际操作确认是否需要在播放所述视频流数据时显示所述OSD信息。所述用户的操作可以是针对所述视频播放设备200的直接手动操作或者通过遥控设备对所述视频播放设备200的遥控操作。

步骤S240，所述视频播放设备200在需要显示所述OSD信息时，从所述视频流数据的基本码流的私有数据段中获取所述OSD信息。

在本实施例中，在读取OSD信息时也需要查找私有数据段的位置，具体查找过程以在步骤S220中描述过，再此就不再赘述。

所述步骤S240可以包括以下子步骤：

对所述私有数据段中的OSD结构体进行验证；

当所述OSD结构体通过验证时，对所述OSD结构体进行解析生成OSD信息。

为了确保OSD信息未被篡改或者损坏，需要对所述OSD结构体进行验证，并在验证通过后解析生成OSD信息。

步骤S250，所述视频播放设备200将所述OSD信息叠加在所述视频流数据的帧图像后进行播放。

在本实施例中，可以先根据所述OSD信息生成OSD图像。再将所述OSD图像叠加在所述视频流的帧图像后进行播放。

由于视频帧的起始码前缀为0x000001，基于H.264协议，为了避免识别错误，需要OSD结构体中不能有此前缀，为此，在本实施例中，写入OSD信息的步骤S220还可以包括以下具体步骤：

所述视频处理设备100比较所述OSD结构体的前缀是否与所述基本码流中视频帧的前缀相同；

在相同时，所述视频处理设备100在所述OSD结构体的前缀中插入特定字符串(比如，0x30)，以使所述OSD结构体的前缀与所述基本码流中视频帧的前缀不同。

与之对应的，获取所述OSD信息的步骤S240还可以包括以下步骤：

去掉所述OSD结构体的前缀中插入特定字符串，对去掉特定字符串的所述OSD结构体进行解析生成OSD信息。

在解析过程中去掉特定字符串以便对OSD信息进行正确的解码。

本实施例提供的上述视频处理方法，OSD信息存储到视频流数据的基本码流的私有数据段中，在进行播放时，根据播放需求选择性的从所述私有数据段中读取所述OSD信息，可实现对OSD信息进行自由显示，解决的现有技术中第一种方式与第二种方式将OSD信息直接叠加在视频上，无法使用播放器对OSD信息进行选择性显示的技术问题。将OSD信息以结构体的方式存储在私有数据段中，转码服务器只需将OSD结构体写入私有数据段中，解决了现有技术中第三种方式OSD信息未与视频流一起保存，回放时无法观看到OSD信息的技术问题。同时本方案不需要把视频帧解码成图片还可以解决第三种方式中转码服务器性能消耗大的技术问题。

本发明实施例还提供一种视频处理方法，与上面实施例不同的是，本视频处理方法是从视频处理设备100侧描述视频处理设备100在视频处理过程中具体执行的步骤。可以理解的是，接下来要描述的视频处理方法中涉及的步骤在上面实施例中已经描述过，具体各个步骤的详尽内容可参照上面的实施例描述，下面仅对视频处理设备100侧执行步骤进行简要说明。请参照图4，在视频处理设备100中执行的视频处理方法可以包括以下步骤。

步骤S410，获取视频流数据。

步骤S420，对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中。

在本实施例中，所述将OSD信息写入所述视频流数据的基本码流的私有数据段中，包括：

所述视频处理设备100将所述OSD数据封装成一OSD结构体；

所述视频处理设备100将所述OSD结构体写入到所述视频流数据的基本码流的私有数据段中。

本发明实施例还提供一种视频处理方法，与上面实施例不同的是，本视频处理方法是从视频播放设备200侧描述视频播放设备200在视频处理过程中具体执行的步骤。可以理解的是，接下来要描述的视频处理方法中涉及的步骤在上面实施例中已经描述过，具体各个步骤的详尽内容可参照上面的实施例描述，下面仅对视频播放设备200侧执行步骤进行简要说明。请参照图5，在视频播放设备200执行的视频处理方法可以包括以下步骤。

步骤S510，获取基本码流的私有数据段中存储有OSD信息的视频流数据。

步骤S520，确认是否需要在播放所述视频流数据时显示所述OSD信息。

步骤S530，在需要显示所述OSD信息时，从所述视频流数据的基本码流的私有数据段中获取所述OSD信息。

在本实施例中，所述OSD信息以结构体的形式存储在所述私有数据段中，步骤S530包括：

所述视频播放设备200对所述私有数据段中的OSD结构体进行验证；

当所述OSD结构体通过验证时，对所述OSD结构体进行解析生成OSD信息。

步骤S540，将所述OSD信息叠加在所述视频流数据的帧图像后进行播放。

在本实施例中，步骤S540包括：

根据所述OSD信息生成OSD图像。

将所述OSD图像叠加在所述视频流数据的帧图像后进行播放。

本发明实施例还提供一种视频处理装置110，所述视频处理装置110应用于视频处理设备100，用于对应实现图4所示的方法。请参照图6，所述视频处理装置110包括获取模块111及处理模块112。

获取模块111，用于获取视频流数据。

处理模块112，用于对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中。

本发明实施例还提供一种视频处理装置210，所述视频处理装置210应用于视频播放设备200，用于对应实现图5所示的方法。请参照图7，所述视频处理装置210包括第一获取模块211、确认模块212、第二获取模块213及播放模块214。

第一获取模块211，用于获取基本码流的私有数据段中存储有OSD信息的视频流数据。

确认模块212，用于确认是否需要在播放所述视频流数据时显示所述OSD信息；

第二获取模块213，用于在需要显示所述OSD信息时，从所述视频流数据的基本码流的私有数据段中获取所述OSD信息；

播放模块214，用于将所述OSD信息叠加在所述视频流数据的帧图像后进行播放。

本发明实施例提供的视频处理方法及装置。所述方法包括：首先，视频处理设备获取视频流数据，并将OSD信息写入到所述视频流数据的基本码流的私有数据段中；接着，所述视频播放设备确认是否需要在播放的视频中显示OSD信息，在需要显示时，从所述私有数据段中获取OSD信息；最后，所述视频播放设备将所述OSD信息显示在播放的帧图像上。上述方案将OSD信息保存到私有数据段中实现了OSD信息与视频流数据绑定，保存到私有数据段中不会改变数据码流的结构，再通过确认信息来确定是否需要显示OSD信息，可以实现OSD信息根据需求进行自由显示的目的。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种视频处理方法，应用于视频处理系统，其特征在于，所述视频处理系统包括视频处理设备及视频播放设备，所述方法包括：

所述视频处理设备获取视频流数据；

所述视频处理设备对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中；

所述视频播放设备确认是否需要在播放所述视频流数据时显示所述OSD信息；

所述视频播放设备在需要显示所述OSD信息时，从所述视频流数据的基本码流的私有数据段中获取所述OSD信息；

所述视频播放设备将所述OSD信息叠加在所述视频流数据的帧图像后进行播放。

2.如权利要求1所述的方法，其特征在于，所述视频处理设备对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中，包括：

将所述OSD数据封装成一OSD结构体；

将所述OSD结构体写入到所述视频流数据的基本码流的私有数据段中。

3.如权利要求2所述的方法，其特征在于，所述视频播放设备从所述视频流数据的基本码流的私有数据段中获取所述OSD信息，包括：

所述视频播放设备对所述私有数据段中的OSD结构体进行验证；

当所述OSD结构体通过验证时，对所述OSD结构体进行解析生成OSD信息。

4.如权利要求2所述的方法，其特征在于，所述视频处理设备对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中，还包括：

所述视频处理设备比较所述OSD结构体的前缀是否与所述基本码流中视频帧的前缀相同；

在相同时，所述视频处理设备在所述OSD结构体的前缀中插入特定字符串，以使所述OSD结构体的前缀与所述基本码流中视频帧的前缀不同。

5.如权利要求4所述的方法，其特征在于，所述视频播放设备对所述OSD结构体进行解析生成OSD信息，包括：

去掉所述OSD结构体的前缀中插入特定字符串，对去掉特定字符串的所述OSD结构体进行解析生成OSD信息。

6.如权利要求1-5中任意一项所述的方法，其特征在于，所述视频播放设备将所述OSD信息叠加在所述视频流数据的帧图像后进行播放，包括：

根据所述OSD信息生成OSD图像；

将所述OSD图像叠加在所述视频流数据的帧图像后进行播放。

7.一种视频处理方法，应用于视频处理设备，其特征在于，所述方法包括：

获取视频流数据；

对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中。

8.如权利要求7所述的方法，其特征在于，所述将OSD信息写入所述视频流数据的基本码流的私有数据段中，包括：

所述视频处理设备将所述OSD数据封装成一OSD结构体；

所述视频处理设备将所述OSD结构体写入到所述视频流数据的基本码流的私有数据段中。

9.一种视频处理装置，应用于视频处理设备，其特征在于，所述装置包括：

获取模块，用于获取视频流数据；

处理模块，用于对所述视频流数据进行处理，将OSD信息写入所述视频流数据的基本码流的私有数据段中。

10.一种视频处理装置，应用于视频播放设备，其特征在于，所述装置包括：

第一获取模块，用于获取视频流数据，其中，所述视频流数据的基本码流的私有数据段中存储有OSD信息；

确认模块，用于确认是否需要在播放所述视频流数据时显示所述OSD信息；

第二获取模块，用于在需要显示所述OSD信息时，从所述视频流数据的基本码流的私有数据段中获取所述OSD信息；

播放模块，用于将所述OSD信息叠加在所述视频流数据的帧图像后进行播放。