CN116193201A - 一种视频数据处理方法 - Google Patents

Abstract

本申请提供一种视频数据处理方法，涉及数据处理技术领域。该方法通过将待解码的视频压缩数据传输至显卡设备，使得显卡设备对视频压缩数据进行解压生成第一颜色空间的视频数据；获取来自显卡设备的第一指示信息；向显卡设备发送针对第一指示信息的转换请求，转换请求用于使得显卡设备根据第一指示信息获取第一颜色空间的视频数据；获取来自显卡设备的第二指示信息；向显卡设备发送针对第二指示信息的处理请求，处理请求用于使得显卡设备根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。从而，避免了数据在处理器和显卡设备之间的拷贝，降低了视频处理对处理器的占用率，提高了视频处理效率，提高了视频显示效果。

Description

一种视频数据处理方法

技术领域

本发明涉及数据处理技术领域，具体而言，涉及一种视频数据处理方法。

背景技术

终端设备播放视频之前，首先需要对视频进行解码。解码是指受传者将接受到的符号或代码还原为信息的过程，与编码过程相对应。

在现有技术中，对于安卓X86架构下的硬件解码支持的并不完善，例如将YUV像素格式转为Surface可以支持显示的RGB像素格式时，即颜色空间的处理变换还需要调用CPU来实现。另外，在处理过程中视频解码服务首先需要将压缩数据(可以包括：h264、h265、vp8、vp9等)从CPU拷贝到GPU完成压缩数据到YUV视频帧的转换，继而将解码后的YUV视频帧发送到CPU中做YUV视频帧到RGB视频帧的颜色空间转换，最后将RGB视频帧拷贝到GPU做画面叠加合成得到RGB帧画面(即视频原始数据)。即在上述过程中，存在多次数据来回拷贝的过程，这对内存、带宽以及CPU占用都存在一定的压力。

发明内容

本发明的目的在于，针对上述现有技术中的不足，提供一种视频数据处理方法，以解决现有技术中处理视频数据时对内存、带宽以及CPU占用都存在一定的压力等问题。

为实现上述目的，本申请实施例采用的技术方案如下：

第一方面，本申请实施例提供一种视频数据处理方法，应用于终端设备的处理器，所述方法包括：

将待解码的视频压缩数据传输至所述显卡设备，使得所述显卡设备对所述视频压缩数据进行解压生成第一颜色空间的视频数据，并存储所述第一颜色空间的视频数据；

获取来自所述显卡设备的第一指示信息，所述第一指示信息用于指示第一颜色空间的视频数据的存储位置；

向所述显卡设备发送针对所述第一指示信息的转换请求，所述转换请求用于使得所述显卡设备根据所述第一指示信息获取所述第一颜色空间的视频数据，并将所述第一颜色空间的视频数据转换为第二颜色空间的视频数据，并存储所述第二颜色空间的视频数据；

获取来自所述显卡设备的第二指示信息，所述第二指示信息用于指示所述第二颜色空间的视频数据的存储位置；

向所述显卡设备发送针对所述第二指示信息的处理请求，所述处理请求用于使得所述显卡设备根据所述第二指示信息获取所述第二颜色空间的视频数据，根据所述第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

可选地，在所述将待解码的视频压缩数据传输至所述显卡设备之前，所述方法还包括：

根据所述视频压缩数据，确定目标解码器以及解码参数；

所述将待解码的视频压缩数据传输至所述显卡设备，包括：

采用所述目标解码器，将所述视频压缩数据和所述解码参数传输至所述显卡设备，以使得所述显卡设备根据所述解码参数对所述视频压缩数据进行解压生成所述第一颜色空间的视频数据。

可选地，所述采用所述目标解码器，将所述视频压缩数据和所述解码参数传输至所述显卡设备，包括：

采用所述目标解码器调用所述显卡设备对应的编解码程序接口将所述视频压缩数据以及所述解码参数传输至所述显卡设备的硬件解码库，以使得所述显卡设备的硬解码程序通过调用所述硬件解码库获取所述视频压缩数据以及所述解码参数。

可选地，所述获取来自所述显卡设备的第一指示信息，包括：

采用所述目标解码器调用所述显卡设备对应的编解码程序接口，以获取所述第一指示信息；

所述向所述显卡设备发送针对所述第一指示信息的转换请求，包括：

采用所述目标解码器将所述第一指示信息的转换请求存储至所述显卡设备对应的驱动库，以使得所述显卡设备从所述驱动库中获取所述第一指示信息的转换请求。

可选地，所述获取来自所述显卡设备的第二指示信息，包括：

采用所述目标解码器通过所述驱动库获取所述第二指示信息；

所述向所述显卡设备发送针对所述第二指示信息的处理请求，包括：

采用所述目标解码器通过所述驱动库将所述第二指示信息的处理请求传输至预设合成器；

采用所述预设合成器将所述第二指示信息的转换请求存储至所述驱动库，以使得所述显卡设备从所述驱动库中获取所述第二指示信息的处理请求。

第二方面，本申请实施例提供一种视频数据处理方法，应用于终端设备的显卡设备，所述方法包括：

获取处理器发送的待解码的视频压缩数据；

对所述视频压缩数据进行解压生成第一颜色空间的视频数据；

对所述第一颜色空间的视频数据进行存储，生成第一指示信息，以使得所述处理器获取所述第一指示信息；

获取所述处理器发送的针对所述第一指示信息的转换请求；

根据所述第一指示信息获取所述第一颜色空间的视频数据，并将所述第一颜色空间的视频数据转换为第二颜色空间的视频数据；

存储所述第二颜色空间的视频数据，生成第二指示信息，以使得所述处理器获取所述第二指示信息；

获取所述处理器发送的针对所述第二指示信息的处理请求；

根据所述第二指示信息获取所述第二颜色空间的视频数据，根据所述第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

可选地，所述方法还包括：

获取所述处理器采用目标解码器发送的所述视频压缩数据和解码参数，其中，所述目标解码器和所述解码参数为所述处理器根据所述视频压缩数据确定的；

所述对所述视频压缩数据进行解压生成所述第一颜色空间的视频数据，包括：

根据所述解码参数对所述视频压缩数据进行解压生成所述第一颜色空间的视频数据。

可选地，所述获取所述处理器采用目标解码器发送的所述视频压缩数据和解码参数，包括：

采用所述显卡设备的硬解码程序通过调用所述显卡设备的硬件解码库获取所述视频压缩数据以及所述解码参数，其中，所述视频压缩数据以及所述解码参数为所述处理器预先采用所述目标解码器调用所述显卡设备对应的编解码程序接口存储至所述硬件解码库中。

可选地，所述获取所述处理器发送的针对所述第一指示信息的转换请求，包括：

从所述显卡设备的驱动库中获取所述处理器发送的针对所述第一指示信息的转换请求，其中，所述第一指示信息的转换请求为所述处理器预先采用所述目标解码器存储至所述驱动库中。

可选地，所述获取所述处理器发送的针对所述第二指示信息的处理请求，包括：

从所述显卡设备的驱动库中获取所述处理器发送的针对所述第二指示信息的处理请求，其中，所述第二指示信息的处理请求为所述处理器预先采用所述目标解码器通过所述驱动库将所述第二指示信息的处理请求传输至预设合成器；并采用所述预设合成器存储至所述驱动库中。

相对于现有技术而言，本申请具有以下有益效果：

本申请提供一种视频数据处理方法，该方法通过将待解码的视频压缩数据传输至显卡设备，使得显卡设备对视频压缩数据进行解压生成第一颜色空间的视频数据，并存储第一颜色空间的视频数据；获取来自显卡设备的第一指示信息，第一指示信息用于指示第一颜色空间的视频数据的存储位置；向显卡设备发送针对第一指示信息的转换请求，转换请求用于使得显卡设备根据第一指示信息获取第一颜色空间的视频数据，并将第一颜色空间的视频数据转换为第二颜色空间的视频数据，并存储第二颜色空间的视频数据；获取来自显卡设备的第二指示信息，第二指示信息用于指示第二颜色空间的视频数据的存储位置；向显卡设备发送针对第二指示信息的处理请求，处理请求用于使得显卡设备根据第二指示信息获取第二颜色空间的视频数据，根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。从而，避免了数据在处理器和显卡设备之间的拷贝，降低了视频编解码时对处理器的占用率，提高了视频数据处理效率，实现了视频画面的流畅播放，提高了视频显示效果。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本申请实施例提供的一种应用于处理器的视频数据处理方法的流程示意图；

图2为本申请实施例提供的一种视频压缩数据传输方法的流程示意图；

图3为本申请实施例提供的一种针对第一指示信息的交互方法的流程示意图；

图4为本申请实施例提供的一种针对第二指示信息的交互方法的流程示意图；

图5为本申请实施例提供的一种应用于显卡设备的视频数据处理方法的流程示意图；

图6为本申请实施例提供的另一种应用于显卡设备的视频数据处理方法的流程示意图；

图7为本申请实施例提供的一种视频数据处理装置的示意图；

图8为本申请实施例提供的另一种视频数据处理装置的示意图；

图9为本申请实施例提供的一种终端设备的示意图。

图标：701-传输模块、702-第一获取模块、703-第一发送模块、704-第二获取模块、705-第二发送模块、801-第三获取模块、802-解压模块、803-第一生成模块、804-第四获取模块、805-转换模块、806-第二生成模块、807-第五获取模块、808-合成模块、901-处理器、902-显卡设备。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。

因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

应注意到：类似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

此外，若出现术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

需要说明的是，在不冲突的情况下，本发明的实施例中的特征可以相互结合。

为提高视频数据处理效率，减少视频数据处理对内存、带宽以及CPU占用的影响。本申请提供了一种视频数据处理方法。

如下通过具体示例对本申请提供的一种应用于处理器的视频数据处理方法进行解释说明。图1为本申请实施例提供的一种应用于处理器的视频数据处理方法的流程示意图，该方法的执行主体可以是终端设备的处理器，该处理器可以为具有计算处理功能的设备，如CPU(Central Processing Unit，中央处理器)。如图1所示，该方法包括：

S101、将待解码的视频压缩数据传输至显卡设备。

使得显卡设备对视频压缩数据进行解压生成第一颜色空间的视频数据，并存储第一颜色空间的视频数据。示例地，第一颜色空间的视频数据可以为YUV视频数据，其中，Y表示亮度，也就是灰度值；U表示色度；V表示浓度。

示例地，以终端设备上安装的安卓X86系统为例，安卓X86系统的视频应用发出解码请求，并将视频压缩数据包发送至处理器。该视频压缩数据包为将待解码的视频压缩数据。

S102、获取来自显卡设备的第一指示信息。

第一指示信息用于指示第一颜色空间的视频数据的存储位置。

示例地，第一指示信息可以为第一颜色空间的视频数据的指针(handler)。

在对视频数据进行处理时，第一颜色空间的视频数据始终存放在显卡设备中，处理器只获取第一指示信息，并根据第一指示信息指示显卡设备进行后续的视频数据处理。不需要在处理器和显卡设备之间传输视频数据，减小了数据传输对带宽、内存的影响，提高了数据处理效率。

S103、向显卡设备发送针对第一指示信息的转换请求。

转换请求用于使得显卡设备根据第一指示信息获取第一颜色空间的视频数据，并将第一颜色空间的视频数据转换为第二颜色空间的视频数据，并存储第二颜色空间的视频数据。示例地，第二颜色空间的视频数据可以为RGB视频数据，其中，R代表红色、G代表绿色、B代表蓝色。

其中，针对第一指示信息的转换请求中携带有第一指示信息。向显卡设备发送针对第一指示信息的转换请求，相当于指示显卡设备针对第一指示信息对应的视频数据进行转换。而显卡设备中存储有第一指示信息对应的第一颜色空间的视频数据。即，通过第一指示信息完成了视频数据转换，不需要在处理器和显卡设备之间传输视频数据。

S104、获取来自显卡设备的第二指示信息。

第二指示信息用于指示第二颜色空间的视频数据的存储位置。

示例地，第二指示信息可以为第二颜色空间的视频数据的指针(handler)。

在对视频数据进行处理时，第二颜色空间的视频数据始终存放在显卡设备中，处理器只获取第二指示信息，并根据第二指示信息指示显卡设备进行后续的视频数据处理。不需要在处理器和显卡设备之间传输视频数据，减小了数据传输对带宽、内存的影响，提高了数据处理效率。

S105、向显卡设备发送针对第二指示信息的处理请求。

处理请求用于使得显卡设备根据第二指示信息获取第二颜色空间的视频数据，根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

其中，针对第二指示信息的转换请求中携带有第二指示信息。向显卡设备发送针对第二指示信息的处理请求，相当于指示显卡设备针对第二指示信息对应的视频数据进行处理。而显卡设备中存储有第二指示信息对应的第二颜色空间的视频数据。即，通过第二指示信息完成了视频数据处理，不需要在处理器和显卡设备之间传输视频数据。

从而，将视频数据的解压、转换、合成都在显卡设备中完成，通过传输指示信息代替了传输视频数据，以指示显卡设备完成视频数据处理，避免了数据在处理器和显卡设备之间的拷贝，从而可以更好地利用显卡设备的性能，大大降低了视频编解码时对处理器的占用率，实现了视频画面的流畅播放。同时，还避免了对视频分辨率的限制，提高了视频显示效果。

综上，在本实施例中，通过将待解码的视频压缩数据传输至显卡设备，使得显卡设备对视频压缩数据进行解压生成第一颜色空间的视频数据，并存储第一颜色空间的视频数据；获取来自显卡设备的第一指示信息，第一指示信息用于指示第一颜色空间的视频数据的存储位置；向显卡设备发送针对第一指示信息的转换请求，转换请求用于使得显卡设备根据第一指示信息获取第一颜色空间的视频数据，并将第一颜色空间的视频数据转换为第二颜色空间的视频数据，并存储第二颜色空间的视频数据；获取来自显卡设备的第二指示信息，第二指示信息用于指示第二颜色空间的视频数据的存储位置；向显卡设备发送针对第二指示信息的处理请求，处理请求用于使得显卡设备根据第二指示信息获取第二颜色空间的视频数据，根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。从而，避免了数据在处理器和显卡设备之间的拷贝，降低了视频编解码时对处理器的占用率，提高了视频数据处理效率，实现了视频画面的流畅播放，提高了视频显示效果。

在上述图1对应的实施例的基础上，本申请实施例还提供了一种视频压缩数据传输方法。图2为本申请实施例提供的一种视频压缩数据传输方法的流程示意图。如图2所示，在S101中的将待解码的视频压缩数据传输至显卡设备之前，方法还包括：

S201、根据视频压缩数据，确定目标解码器以及解码参数。

根据视频压缩数据的格式以及终端设备的预设解码要求，确定视频压缩数据对应的目标解码器以及解码参数。

示例地，解码器可以为：h264解码器、h265解码器、vp8解码器、vp9解码器等。

进而，在S101中的将待解码的视频压缩数据传输至显卡设备，包括：

S202、采用目标解码器，将视频压缩数据和解码参数传输至显卡设备。

以使得显卡设备根据解码参数对视频压缩数据进行解压生成第一颜色空间的视频数据。

先将视频压缩数据和解码参数作为输入，传递至目标解码器。目标解码器再将视频压缩数据和解码参数传输至显卡设备。

综上，在本实施例中，根据视频压缩数据，确定目标解码器以及解码参数；采用目标解码器，将视频压缩数据和解码参数传输至显卡设备，以使得显卡设备根据解码参数对视频压缩数据进行解压生成第一颜色空间的视频数据。从而，确定了视频数据对应的解码器，提高了视频数据处理效率。

在上述图2对应的实施例的基础上，本申请实施例在S202中的采用目标解码器，将视频压缩数据和解码参数传输至显卡设备，包括：

采用目标解码器调用显卡设备对应的编解码程序接口将视频压缩数据以及解码参数传输至显卡设备的硬件解码库。

以使得显卡设备的硬解码程序通过调用硬件解码库获取视频压缩数据以及解码参数。

示例地，编解码程序接口可以为FFmpeg接口，硬件解码库可以为libva库，硬解码程序可以为VAAPI程序。即，采用目标解码器调用显卡设备对应的FFmpeg接口将视频压缩数据以及解码参数传输至显卡设备的libva库。以使得显卡设备的VAAPI程序通过调用libva库获取视频压缩数据以及解码参数。从而，快速地传输了视频压缩数据以及解码参数。

示例地，FFmpeg是一个常用的编解码库，支持视频解码VAAPI硬件加速，因此选择FFmpeg作为视频解码程序的具体实现。在视频数据处理时，需要将FFmpeg对接到安卓X86环境里，包括编译FFmpeg库，实现基于FFmpeg的codec2插件库，即FFmpeg视频解码器插件库，改造安卓多媒体框架以支持加载FFmpeg的codec2插件库。

示例地，为了使用VAAPI进行视频解码硬件加速，还需要将Linux的1ibva库对接到安卓环境里，1ibva库提供VAAPI的通用接口并根据显卡设备加载显卡设备提供的VAAPI库。在FFmpeg视频数据处理实际运行时，除了初始化自身的解码器上下文，还需要初始化视频解码硬件加速支持(即VAAPID的上下文，在初始化上下文过程中，FFmpeg使用1ibva库加载所述的显卡设备的VAAPI实现库，完成硬件加速接口及环境的初始化。

示例地，FFmpeg中会使用avcodec子集，这个子集中会使用libva的库，libva库的使用是通过动态加载的方式。由于每一个硬件平台都不同，例如：inter、AMD，可以在inter平台上加载i915/iHD库，在amd平台上加载mesa3D库。

从而，将1ibva库、FFmpeg库以及不同显卡设备的VAAPI实现对接到Android环境中，提供Android环境中，对FFmpeg库开启VAAPI功能，提供Android环境中对VAAPI的支持，减少使用处理器进行视频解码带来的性能损失，提高了安卓视频数据解码的效率。

综上，在本实施例中，采用目标解码器调用显卡设备对应的编解码程序接口将视频压缩数据以及解码参数传输至显卡设备的硬件解码库，以使得显卡设备的硬解码程序通过调用硬件解码库获取视频压缩数据以及解码参数。从而，通过调用显卡设备对应的编解码程序接口快速地传输了视频压缩数据以及解码参数，提高了安卓视频数据解码的效率。

在上述图2对应的实施例的基础上，本申请实施例还提供了一种针对第一指示信息的交互方法。图3为本申请实施例提供的一种针对第一指示信息的交互方法的流程示意图。如图3所示，在S102中的获取来自显卡设备的第一指示信息，包括：

S301、采用目标解码器调用显卡设备对应的编解码程序接口，以获取第一指示信息。

示例地，编解码程序接口可以为VAAPI程序。采用目标解码器调用显卡设备对应的VAAPI程序接口，以从显卡设备中获取第一指示信息。

进而，在S103中的向显卡设备发送针对第一指示信息的转换请求，包括：

S302、采用目标解码器将第一指示信息的转换请求存储至显卡设备对应的驱动库。

以使得显卡设备从驱动库中获取第一指示信息的转换请求。

示例地，显卡设备对应的驱动库可以为OpenGL库。即，采用目标解码器将第一指示信息的转换请求存储至显卡设备对应的OpenGL库，以使得显卡设备从OpenGL库中获取第一指示信息的转换请求。

示例地，通过OpenGL-shader方式调用OpenGL库中的OpenGL/mesa驱动，实现将第一指示信息的转换请求传递至显卡设备。

综上，在本实施例中，采用目标解码器调用显卡设备对应的编解码程序接口，以获取第一指示信息；采用目标解码器将第一指示信息的转换请求存储至显卡设备对应的驱动库，以使得显卡设备从驱动库中获取第一指示信息的转换请求。从而，通过调用编解码程序接口以及驱动库，提高了数据处理效率。

在上述图2对应的实施例的基础上，本申请实施例还提供了一种针对第二指示信息的交互方法。图4为本申请实施例提供的一种针对第二指示信息的交互方法的流程示意图。如图4所示，在S104中的获取来自显卡设备的第二指示信息，包括：

S401、采用目标解码器通过驱动库获取第二指示信息。

示例地，驱动库可以为OpenGL库。即，采用目标解码器通过OpenGL库获取第二指示信息。

示例地，目标解码器通过调用OpenGL库中的OpenGL/mesa驱动从显卡设备获取第二指示信息。

进而，在S105中的向显卡设备发送针对第二指示信息的处理请求，包括：

S402、采用目标解码器通过驱动库将第二指示信息的处理请求传输至预设合成器。

示例地，目标解码器通过codec2方式将第二指示信息的处理请求传输至安卓多媒体框架(mediacodec)，安卓多媒体框架通过缓存队列(bufferqueue)的方式将第二指示信息的处理请求传输至预设合成器(composer)。

S403、采用预设合成器将第二指示信息的转换请求存储至驱动库。

以使得显卡设备从驱动库中获取第二指示信息的处理请求。

示例地，采用预设合成器将第二指示信息的转换请求存储至OpenGL库，以使得显卡设备从OpenGL库中获取第二指示信息的处理请求。

综上，在本实施例中，采用目标解码器通过驱动库获取第二指示信息；采用目标解码器通过驱动库将第二指示信息的处理请求传输至预设合成器；采用预设合成器将第二指示信息的转换请求存储至驱动库，以使得显卡设备从驱动库中获取第二指示信息的处理请求。从而，提高了视频数据合成效率。

如下通过具体示例对本申请提供的一种应用于显卡设备的视频数据处理方法进行解释说明。图5为本申请实施例提供的一种应用于显卡设备的视频数据处理方法的流程示意图，该方法的执行主体可以是终端设备的显卡设备，该显卡设备可以为具有计算处理功能的设备，如包括GPU(Graphics Processing Unit，图形处理器)的设备。如图5所示，该方法包括：

S501、获取处理器发送的待解码的视频压缩数据。

S502、对视频压缩数据进行解压生成第一颜色空间的视频数据。

示例地，第一颜色空间的视频数据可以为YUV视频数据。

S503、对第一颜色空间的视频数据进行存储，生成第一指示信息。

以使得处理器获取第一指示信息。

示例地，显卡设备中预设有存储位置和指示信息之间的映射关系。对第一颜色空间的视频数据进行存储，得到第一颜色空间的视频数据的存储位置，根据第一颜色空间的视频数据的存储位置，以及存储位置和指示信息之间的映射关系，生成第一指示信息。

S504、获取处理器发送的针对第一指示信息的转换请求。

示例地，第一指示信息的转换请求用于指示将第一颜色空间的视频数据转换为第二颜色空间的视频数据。

S505、根据第一指示信息获取第一颜色空间的视频数据，并将第一颜色空间的视频数据转换为第二颜色空间的视频数据。

根据第一指示信息的转换请求中的第一指示信息，以及存储位置和指示信息之间的映射关系，获取第一颜色空间的视频数据。并将第一颜色空间的视频数据转换为第二颜色空间的视频数据。

S506、存储第二颜色空间的视频数据，生成第二指示信息。

以使得处理器获取第二指示信息。

示例地，对第二颜色空间的视频数据进行存储，得到第二颜色空间的视频数据的存储位置，根据第二颜色空间的视频数据的存储位置，以及存储位置和指示信息之间的映射关系，生成第一指示信息。

S507、获取处理器发送的针对第二指示信息的处理请求。

示例地，第二指示信息的处理请求用于指示将第二颜色空间的视频数据进行数据合成。

S508、根据第二指示信息获取第二颜色空间的视频数据，根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

根据第二指示信息的转换请求中的第二指示信息，以及存储位置和指示信息之间的映射关系，获取第二颜色空间的视频数据。并根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

从而，将视频数据的解压、转换、合成都在显卡设备中完成，通过传输指示信息代替了传输视频数据，以指示显卡设备完成视频数据处理，避免了数据在处理器和显卡设备之间的拷贝，从而可以更好地利用显卡设备的性能，实现了视频画面的流畅播放。同时，还避免了对视频分辨率的限制，提高了视频显示效果。

综上，在本实施例中，获取处理器发送的待解码的视频压缩数据；对视频压缩数据进行解压生成第一颜色空间的视频数据；对第一颜色空间的视频数据进行存储，生成第一指示信息，以使得处理器获取第一指示信息；获取处理器发送的针对第一指示信息的转换请求；根据第一指示信息获取第一颜色空间的视频数据，并将第一颜色空间的视频数据转换为第二颜色空间的视频数据；存储第二颜色空间的视频数据，生成第二指示信息，以使得处理器获取第二指示信息；获取处理器发送的针对第二指示信息的处理请求；根据第二指示信息获取第二颜色空间的视频数据，根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。从而，避免了数据在处理器和显卡设备之间的拷贝，实现了视频画面的流畅播放，提高了视频显示效果。

在上述图5对应的实施例的基础上，本申请实施例还提供了另一种应用于显卡设备的视频数据处理方法。图6为本申请实施例提供的另一种应用于显卡设备的视频数据处理方法的流程示意图。如图6所示，该方法还包括：

S601、获取处理器采用目标解码器发送的视频压缩数据和解码参数。

其中，目标解码器和解码参数为处理器根据视频压缩数据确定的。

在S502中的对视频压缩数据进行解压生成第一颜色空间的视频数据，包括：

S602、根据解码参数对视频压缩数据进行解压生成第一颜色空间的视频数据。

综上，在本实施例中，获取处理器采用目标解码器发送的视频压缩数据和解码参数，其中，目标解码器和解码参数为处理器根据视频压缩数据确定的；根据解码参数对视频压缩数据进行解压生成第一颜色空间的视频数据。从而，提高了视频数据的解压效率。

在上述图6对应的实施例的基础上，本申请实施例在S601中的获取处理器采用目标解码器发送的视频压缩数据和解码参数，包括：

采用显卡设备的硬解码程序接口通过调用显卡设备的硬件解码库获取视频压缩数据以及解码参数。

其中，视频压缩数据以及解码参数为处理器预先采用目标解码器调用显卡设备对应的编解码程序接口存储至硬件解码库中。

示例地，处理器预先采用目标解码器调用显卡设备对应的FFmpeg接口将视频压缩数据以及解码参数存储至libva库中。显卡设备可以采用显卡设备的VAAPI程序通过调用显卡设备的libva库，从libva库中获取视频压缩数据以及解码参数。

综上，在本实施例中，采用显卡设备的硬解码程序通过调用显卡设备的硬件解码库获取视频压缩数据以及解码参数，其中，视频压缩数据以及解码参数为处理器预先采用目标解码器调用显卡设备对应的编解码程序接口存储至硬件解码库中。从而，加速获取了视频压缩数据以及解码参数，提高了视频处理效率。

在上述图6对应的实施例的基础上，本申请实施例在S504中的获取处理器发送的针对第一指示信息的转换请求，包括：

从显卡设备的驱动库中获取处理器发送的针对第一指示信息的转换请求。

其中，第一指示信息的转换请求为处理器预先采用目标解码器存储至驱动库中。

示例地，处理器预先采用目标解码器将第一指示信息的转换请求存储至OpenGL库中，显卡设备可以从显卡设备的OpenGL库中获取处理器发送的针对第一指示信息的转换请求。

综上，在本实施例中，从显卡设备的驱动库中获取处理器发送的针对第一指示信息的转换请求，其中，第一指示信息的转换请求为处理器预先采用目标解码器存储至驱动库中。从而，提高了视频数据转换效率。

在上述图6对应的实施例的基础上，本申请实施例在S507中的获取处理器发送的针对第二指示信息的处理请求，包括：

从显卡设备的驱动库中获取处理器发送的针对第二指示信息的处理请求。

其中，第二指示信息的处理请求为处理器预先采用目标解码器通过驱动库将第二指示信息的处理请求传输至预设合成器；并采用预设合成器存储至驱动库中。

示例地，处理器预先采用目标解码器通过OpenGL库将第二指示信息的处理请求传输至预设合成器；并采用预设合成器将第二指示信息的处理请求存储至OpenGL库中。显卡设备可以从OpenGL库中获取处理器发送的针对第二指示信息的处理请求。

综上，在本实施例中，从显卡设备的驱动库中获取处理器发送的针对第二指示信息的处理请求，其中，第二指示信息的处理请求为处理器预先采用目标解码器通过驱动库将第二指示信息的处理请求传输至预设合成器；并采用预设合成器存储至驱动库中。从而，提高了视频数据合成效率。

下述对用以执行的本申请所提供的视频数据处理装置、设备及存储介质等进行说明，其具体的实现过程以及技术效果参见上述，下述不再赘述。

图7为本申请实施例提供的一种视频数据处理装置的示意图。如图7所示，该装置应用于终端设备的处理器，包括：

传输模块701，用于将待解码的视频压缩数据传输至显卡设备，使得显卡设备对视频压缩数据进行解压生成第一颜色空间的视频数据，并存储第一颜色空间的视频数据。

第一获取模块702，用于获取来自显卡设备的第一指示信息，第一指示信息用于指示第一颜色空间的视频数据的存储位置。

第一发送模块703，用于向显卡设备发送针对第一指示信息的转换请求，转换请求用于使得显卡设备根据第一指示信息获取第一颜色空间的视频数据，并将第一颜色空间的视频数据转换为第二颜色空间的视频数据，并存储第二颜色空间的视频数据。

第二获取模块704，用于获取来自显卡设备的第二指示信息，第二指示信息用于指示第二颜色空间的视频数据的存储位置。

第二发送模块705，用于向显卡设备发送针对第二指示信息的处理请求，处理请求用于使得显卡设备根据第二指示信息获取第二颜色空间的视频数据，根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

进一步地，传输模块701，具体用于根据视频压缩数据，确定目标解码器以及解码参数；采用目标解码器，将视频压缩数据和解码参数传输至显卡设备，以使得显卡设备根据解码参数对视频压缩数据进行解压生成第一颜色空间的视频数据。

进一步地，传输模块701，具体还用于采用目标解码器调用显卡设备对应的编解码程序接口将视频压缩数据以及解码参数传输至显卡设备的硬件解码库，以使得显卡设备的硬解码程序通过调用硬件解码库获取视频压缩数据以及解码参数。

进一步地，第一获取模块702，具体用于采用目标解码器调用显卡设备对应的编解码程序接口，以获取第一指示信息。

进一步地，第一发送模块703，具体用于采用目标解码器将第一指示信息的转换请求存储至显卡设备对应的驱动库，以使得显卡设备从驱动库中获取第一指示信息的转换请求。

进一步地，第二获取模块704，具体用于采用目标解码器通过驱动库获取第二指示信息。

进一步地，第二发送模块705，具体用于采用目标解码器通过驱动库将第二指示信息的处理请求传输至预设合成器；采用预设合成器将第二指示信息的转换请求存储至驱动库，以使得显卡设备从驱动库中获取第二指示信息的处理请求。

图8为本申请实施例提供的另一种视频数据处理装置的示意图。如图8所示，该装置应用于终端设备的显卡设备，包括：

第三获取模块801，用于获取处理器发送的待解码的视频压缩数据。

解压模块802，用于对视频压缩数据进行解压生成第一颜色空间的视频数据。

第一生成模块803，用于对第一颜色空间的视频数据进行存储，生成第一指示信息，以使得处理器获取第一指示信息。

第四获取模块804，用于获取处理器发送的针对第一指示信息的转换请求。

转换模块805，用于根据第一指示信息获取第一颜色空间的视频数据，并将第一颜色空间的视频数据转换为第二颜色空间的视频数据。

第二生成模块806，用于存储第二颜色空间的视频数据，生成第二指示信息，以使得处理器获取第二指示信息。

第五获取模块807，用于获取处理器发送的针对第二指示信息的处理请求。

合成模块808，用于根据第二指示信息获取第二颜色空间的视频数据，根据第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

进一步地，第三获取模块801，还用于获取处理器采用目标解码器发送的视频压缩数据和解码参数，其中，目标解码器和解码参数为处理器根据视频压缩数据确定的。

进一步地，解压模块802，具体用于根据解码参数对视频压缩数据进行解压生成第一颜色空间的视频数据。

进一步地，第三获取模块801，具体用于采用显卡设备的硬解码程序通过调用显卡设备的硬件解码库获取视频压缩数据以及解码参数，其中，视频压缩数据以及解码参数为处理器预先采用目标解码器调用显卡设备对应的编解码程序接口存储至硬件解码库中。

进一步地，第四获取模块804，具体用于从显卡设备的驱动库中获取处理器发送的针对第一指示信息的转换请求，其中，第一指示信息的转换请求为处理器预先采用目标解码器存储至驱动库中。

进一步地，第五获取模块807，具体用于从显卡设备的驱动库中获取处理器发送的针对第二指示信息的处理请求，其中，第二指示信息的处理请求为处理器预先采用目标解码器通过驱动库将第二指示信息的处理请求传输至预设合成器；并采用预设合成器存储至驱动库中。

图9为本申请实施例提供的一种终端设备的示意图，该终端设备包括：处理器901、显卡设备902。

处理器901与显卡设备902连接。

处理器901包括第一处理模块、第一存储介质，第一处理模块和第一存储介质通过总线连接。第一存储介质用于存储程序，第一处理模块调用第一存储介质存储的程序，以执行上述应用于处理器的方法实施例。具体实现方式和技术效果类似，这里不再赘述。

显卡设备902包括第二处理模块、第二存储介质，第二处理模块和第二存储介质通过总线连接。第二存储介质用于存储程序，第二处理模块调用第二存储介质存储的程序，以执行上述应用于显卡设备的方法实施例。具体实现方式和技术效果类似，这里不再赘述。

可选地，本发明还提供一种存储介质，包括程序，该程序在被处理器执行时用于执行上述方法实施例。在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其他的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其他的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

上述以软件功能单元的形式实现的集成的单元，可以存储在一个存储介质中。上述软件功能单元存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)或处理器(英文：processor)执行本发明各个实施例所述方法的部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取存储器(英文：Random Access Memory，简称：RAM)、磁碟或者光盘等各种可以存储程序代码的介质。

Claims (10)

1.一种视频数据处理方法，其特征在于，应用于终端设备的处理器，所述方法包括：

将待解码的视频压缩数据传输至显卡设备，使得所述显卡设备对所述视频压缩数据进行解压生成第一颜色空间的视频数据，并存储所述第一颜色空间的视频数据；

获取来自所述显卡设备的第一指示信息，所述第一指示信息用于指示第一颜色空间的视频数据的存储位置；

向所述显卡设备发送针对所述第一指示信息的转换请求，所述转换请求用于使得所述显卡设备根据所述第一指示信息获取所述第一颜色空间的视频数据，并将所述第一颜色空间的视频数据转换为第二颜色空间的视频数据，并存储所述第二颜色空间的视频数据；

获取来自所述显卡设备的第二指示信息，所述第二指示信息用于指示所述第二颜色空间的视频数据的存储位置；

向所述显卡设备发送针对所述第二指示信息的处理请求，所述处理请求用于使得所述显卡设备根据所述第二指示信息获取所述第二颜色空间的视频数据，根据所述第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

2.根据权利要求1所述的方法，其特征在于，在所述将待解码的视频压缩数据传输至所述显卡设备之前，所述方法还包括：

根据所述视频压缩数据，确定目标解码器以及解码参数；

所述将待解码的视频压缩数据传输至所述显卡设备，包括：

采用所述目标解码器，将所述视频压缩数据和所述解码参数传输至所述显卡设备，以使得所述显卡设备根据所述解码参数对所述视频压缩数据进行解压生成所述第一颜色空间的视频数据。

3.根据权利要求2所述的方法，其特征在于，所述采用所述目标解码器，将所述视频压缩数据和所述解码参数传输至所述显卡设备，包括：

采用所述目标解码器调用所述显卡设备对应的编解码程序接口将所述视频压缩数据以及所述解码参数传输至所述显卡设备的硬件解码库，以使得所述显卡设备的硬解码程序通过调用所述硬件解码库获取所述视频压缩数据以及所述解码参数。

4.根据权利要求2所述的方法，其特征在于，所述获取来自所述显卡设备的第一指示信息，包括：

采用所述目标解码器调用所述显卡设备对应的编解码程序接口，以获取所述第一指示信息；

所述向所述显卡设备发送针对所述第一指示信息的转换请求，包括：

采用所述目标解码器将所述第一指示信息的转换请求存储至所述显卡设备对应的驱动库，以使得所述显卡设备从所述驱动库中获取所述第一指示信息的转换请求。

5.根据权利要求2所述的方法，其特征在于，所述获取来自所述显卡设备的第二指示信息，包括：

采用所述目标解码器通过驱动库获取所述第二指示信息；

所述向所述显卡设备发送针对所述第二指示信息的处理请求，包括：

采用所述目标解码器通过所述驱动库将所述第二指示信息的处理请求传输至预设合成器；

采用所述预设合成器将所述第二指示信息的转换请求存储至所述驱动库，以使得所述显卡设备从所述驱动库中获取所述第二指示信息的处理请求。

6.一种视频数据处理方法，其特征在于，应用于终端设备的显卡设备，所述方法包括：

获取处理器发送的待解码的视频压缩数据；

对所述视频压缩数据进行解压生成第一颜色空间的视频数据；

对所述第一颜色空间的视频数据进行存储，生成第一指示信息，以使得所述处理器获取所述第一指示信息；

获取所述处理器发送的针对所述第一指示信息的转换请求；

根据所述第一指示信息获取所述第一颜色空间的视频数据，并将所述第一颜色空间的视频数据转换为第二颜色空间的视频数据；

存储所述第二颜色空间的视频数据，生成第二指示信息，以使得所述处理器获取所述第二指示信息；

获取所述处理器发送的针对所述第二指示信息的处理请求；

根据所述第二指示信息获取所述第二颜色空间的视频数据，根据所述第二颜色空间的视频数据进行数据合成，得到待播放视频数据。

7.根据权利要求6所述的方法，其特征在于，所述方法还包括：

获取所述处理器采用目标解码器发送的所述视频压缩数据和解码参数，其中，所述目标解码器和所述解码参数为所述处理器根据所述视频压缩数据确定的；

所述对所述视频压缩数据进行解压生成所述第一颜色空间的视频数据，包括：

根据所述解码参数对所述视频压缩数据进行解压生成所述第一颜色空间的视频数据。

8.根据权利要求7所述的方法，其特征在于，所述获取所述处理器采用目标解码器发送的所述视频压缩数据和解码参数，包括：

采用所述显卡设备的硬解码程序通过调用所述显卡设备的硬件解码库获取所述视频压缩数据以及所述解码参数，其中，所述视频压缩数据以及所述解码参数为所述处理器预先采用所述目标解码器调用所述显卡设备对应的编解码程序接口存储至所述硬件解码库中。

9.根据权利要求7所述的方法，其特征在于，所述获取所述处理器发送的针对所述第一指示信息的转换请求，包括：

从所述显卡设备的驱动库中获取所述处理器发送的针对所述第一指示信息的转换请求，其中，所述第一指示信息的转换请求为所述处理器预先采用所述目标解码器存储至所述驱动库中。

10.根据权利要求7所述的方法，其特征在于，所述获取所述处理器发送的针对所述第二指示信息的处理请求，包括：

从所述显卡设备的驱动库中获取所述处理器发送的针对所述第二指示信息的处理请求，其中，所述第二指示信息的处理请求为所述处理器预先采用所述目标解码器通过所述驱动库将所述第二指示信息的处理请求传输至预设合成器；并采用所述预设合成器存储至所述驱动库中。

Images