CN105472457A - 基于视频启动播放方法及视频启动装置 - Google Patents

Abstract

本发明公开了一种视频启动播放方法，所述视频启动播放方法包括以下步骤：创建视频样本管道；获取视频数据，并对所述视频数据进行解析后提取出参数信息；根据所述参数信息从所述视频样本管道中选择对应的目的管道；将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。本发明还公开了一种视频启动装置。本发明提供的视频启动播放方法和视频启动装置，可以缩短基于Gstreamer播放器的视频启动播放时间，降低视频的内存空间大小以及降低计算的复杂度，从而提高用户的视觉感受。

Description

基于视频启动播放方法及视频启动装置

技术领域

本发明涉及视频处理技术领域，尤其涉及一种基于视频启动播放方法及视频启动装置。

背景技术

Gstreamer播放器通常利用pipeline(管道)进行视频文件的播放，而pipeline由source(源)模块，demux(解复用)模块，decoder(解码)模块以及render(输出)模块组成。视频文件播放的流程顺序是首先由source模块利用typefind查找demux模块，然后demux模块利用typefind查找decoder模块，最终decoder模块利用typefind查找render模块，因而需要不断地利用typefind查找相应的模块，并在建立完管道后才能进行视频的播放。这样，利用pipeline来播放视频文件时，并没有在视频播放之前建立pipeline管道，而是不断的遍历所有的source源模块、demux模块、audio流和video流的decoder模块。由于每一种模块的类型都比较多，例如demux模块的类型有20多个，decoder模块的类型有40多个，因而在视频播放过程中，若要选择创建某种模块，则需要遍历该模块的所有类型，因此，视频播放的流程遍历时间以及解码时间过长，此外系统CPU的消耗过高，会引起播放启动过慢，从而导致需要花费更长的时间来启动视频的播放。

发明内容

本发明的主要目的在于提供一种基于视频启动播放方法及视频启动装置，旨在缩短Gstreamer播放器的视频启动播放时间，降低视频的内存空间大小以及降低计算的复杂度，从而提高用户的视觉感受。

为实现上述目的，本发明提供的一种视频启动播放方法，所述视频启动播放方法包括以下步骤：

创建视频样本管道；

获取视频数据，并对所述视频数据进行解析后提取出参数信息；

根据所述参数信息从所述视频样本管道中选择对应的目的管道；

将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。

优选地，所述将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放的步骤之前还包括：

利用所述目的管道对所述视频数据进行调整。

优选地，所述利用所述目的管道对所述视频数据进行调整的步骤包括：

提取经解析处理后的视频数据的参考帧；

获取所述参考帧中的初始数据；

获取经所述目的管道传输的终端数据；

根据所述初始数据和终端数据，计算得到调整数据；

根据所述调整数据对所述视频数据进行调整。

优选地，所述视频数据包括图像数据和音频数据。

优选地，所述将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放的步骤进一步包括：

将调整后的所述图像数据以及初始音频数据发送至客户端，以启动视频的播放。

此外，为实现上述目的，本发明还提出一种视频启动装置，所述视频启动装置包括：

创建模块，用于创建视频样本管道；

解析处理模块，用于获取视频数据，并对所述视频数据进行解析后提取出参数信息；

选择模块，用于根据所述参数信息从所述视频样本管道中选择对应的目的管道；

发送模块，用于将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。

优选地，所述视频启动装置还包括：

调整模块，用于利用所述目的管道对所述视频数据进行调整。

优选地，所述调整模块包括：

提取单元，用于提取经解析处理后的视频数据的参考帧；

第一获取单元，用于获取所述参考帧中的初始数据；

第二获取单元，用于获取经所述目的管道传输的终端数据；

计算单元，用于根据所述初始数据和终端数据，计算得到调整数据；

调整单元，用于根据所述调整数据对所述视频数据进行调整。

优选地，所述视频数据包括图像数据和音频数据。

优选地，所述发送模块进一步用于：

将调整后的所述图像数据以及初始音频数据发送至客户端，以启动视频的播放。

本发明提供的基于视频启动播放方法和视频启动装置，通过创建视频样本管道，获取视频数据，并对所述视频数据进行解析后提取出参数信息，根据所述参数信息从所述视频样本管道中选择对应的目的管道，将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。相比于传统视频播放，不仅缩短了Gstreamer播放器的视频启动播放时间，降低了视频的内存空间大小和计算复杂度，而且当视频数据经过decoder模块后，并不是利用传统render输出模块将视频数据直接输出播放，而是将video的源数据输入到video输出模块中，利用图像处理模块对video的数据进行相应的处理后，再传送至客户端进行输出显示，从而为用户提供了更好的画面效果。

附图说明

图1为本发明视频启动播放方法第一实施例的流程示意图；

图2为本发明视频启动播放方法中创建的视频样本管道中目的管道一实施例的连接示意图；

图3为本发明视频启动播放方法第二实施例的流程示意图；

图4为本发明视频启动播放方法与传统的Gstreamer播放器启动耗时比较示意图；

图5为图3中步骤S105一实施例的流程示意图；

图6为本发明视频启动装置第一实施例的功能模块示意图；

图7为本发明视频启动装置第二实施例的功能模块示意图；

图8为图7中调整模块一实施例的细化功能模块示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明提供一种视频启动播放方法，参照图1，在一实施例中，所述基于视频启动播放方法包括以下步骤：

步骤S101，创建视频样本管道；

本实施例中，本发明提供一种基于Gstreamer播放器的视频启动播放方法，其中GStreamer是GNOME桌面环境下用来构建流媒体应用的开源多媒体框架，其目标是要简化音/视频应用程序的开发，目前已经能够被用来处理像MP3、Ogg、MPEG1、MPEG2、AVI、Quicktime等多种格式的多媒体数据。利用常见的视频，从中提取中相应的视频参数，并根据不同的视频参数创建不同的视频样本管道。本发明实施例中，所述视频样本管道由source模块、demux模块以及decoder模块组成。常见source模块类型包括HTTP(HyperTextTransferProtocol，超文本传输协议)、File本地文件的视频文件、TCP(TransmissionControlProtocol传输控制协议)、UDP(UserDatagramProtocol，用户数据报协议)以及RTSP(RealTimeStreamingProtocol，实时流传输协议等)等。常见demux模块插件的类型包括ts_demux、mp4_demux、flv_demux、mkv_demux、avi_demux、mpeg_demux以及wmv_demux等。常见音频audio的decoder模块的插件类型包括aac_decoder、mp3_decoder、wma_decoder、ac3_decoder、pcm_decoder、adpcm_decoder、mpeg_decoder、wma2_decoder、wma3_decoder以及vorbis_decoder等。常见视频video的decoder模块插件类型为h264_decoder、mp4v_decoder、h263_decoder、divx3_decoder、divx4_decoder、divx_decoder、avs_decoder、mjpeg_decoder、vc1_decoder、flv_decoder、vp6_decoder，vp8_decoder、theora_decoder、wmv3_decoder等。不同模块的类型越多则创建的相应样本管道的数量也越多。样本管道创建是将不同的模块进行不同组合连接的过程。例如，若source模块的类型为N个，demux模块的类型为M个，decoder模块为S个，则创建的样本管道数为N×M×S个。应当理解的是，本实施例中，所述视频数据为具备图像和声音的文件，而所述视频video为具备图像的文件，所述音频audio为具备声音的文件。

步骤S102，获取视频数据，并对所述视频数据进行解析后提取出参数信息；

本实施例中，所述视频样本管道中的source模块获取原始的视频数据，并对所述原始的视频数据进行解析，待解析完成后提取出相关的参数信息。例如，若解析的原始视频数据信息为1.ts，它是从http网页上下载的，它的音频是mp4，它的视频(也就是显示图片)是h264格式，那么解析后提取出的相关参数信息为：source模块类型是http，demux模块类型是ts_demux，音频的decoder模块类型是mp4_decoder，视频的decoder是h264_decoder。

步骤S103，根据所述参数信息从所述视频样本管道中选择对应的目的管道；

本实施例中，所述视频样本管道中的管道选择模块，根据提取出的参数信息，从N×M×S个创建的样本管道中选择目的管道来进行视频数据的传输。如图2所示，该视频样本管道为本实施例的目的管道，所述目的管道包括source模块、demux模块以及decoder模块，其中source模块Httpsrc的类型为http，demux模块的类型为mp4_demux，audio的decoder模块类型为aac_audio，video的decoder模块类型为h264_decoder。此外，sink表示接收视频数据，而src表示输出视频数据。

步骤S104，将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。

本实施例中，所述视频样本管道中的decoder模块将所述视频数据发送至客户端，以启动视频的播放。

本发明提供的视频启动播放方法，通过创建视频样本管道，获取视频数据，并对所述视频数据进行解析后提取出参数信息，根据所述参数信息从所述视频样本管道中选择对应的目的管道，将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。相比于传统视频播放，不仅缩短了基于Gstreamer播放器的视频启动播放时间，降低了视频的内存空间大小和计算复杂度，而且当视频数据经过decoder模块后，并不是利用传统render输出模块将视频数据直接输出播放，而是将video的源数据输入到video输出模块中，利用图像处理模块对video的数据进行相应的处理后，再传送至客户端进行输出显示，从而为用户提供了更好的画面效果。

在一实施例中，如图3所示，在上述图1的实施例的基础上，本实施例中，所述步骤S104之前还包括：

步骤S105，利用所述目的管道对所述视频数据进行调整。

本实施例中，参见图4，所述视频样本管道中的调整模块对所述视频数据中的图像进行调整处理，这样，当原始的视频数据经过decoder模块后，并不是利用传统render输出模块将视频数据直接输出播放，而是将video的源数据输入到video输出模块中，利用图像处理模块对video的数据进行相应的处理后，再传送至客户端进行输出显示，从而为用户提供了更好的画面效果。从图3，可以得出采用本发明提供的基于视频启动播放方法，可以显著提高视频启动时间。

应当理解的是，若视频数据为常见的视频，则利用本发明提供的视频样本管道将视频数据传输至decoder的video输出模块，并对其进行调整优化处理后再输出到客户端进行播放；若视频为非常见的视频，则依据传统视频管道进行播放。

在一实施例中，如图5所示，在上述图3的实施例的基础上，本实施例中，所述步骤S105包括：

步骤S1051，提取经解析处理后的视频数据的参考帧；

本实施例中，将demux模块解析后的帧作为参考帧，并提取参考帧中的视频数据。

步骤S1052，获取所述参考帧中的初始数据。

本实施例中，参考帧中的视频的初始数据为Y1、U1、V1，其中“Y”表示明亮度，也就是灰阶值；而“U”和“V”表示的则是色度，其作用是描述影图像色彩及饱和度，用于指定像素的颜色。

步骤S1053，获取经所述目的管道传输的终端数据；

本实施例中，所述视频样本管道中的调整模块获取经所述目的管道的video输出模块传输的终端数据。本优选实施例中，所述调整模块仅对video输出模块传输的终端数据进行处理，当然，在其他实施例中，也可以同时对audio输出模块传输的终端数据进行处理，具体可根据实际需求合理设置。

步骤S1054，根据所述初始数据和终端数据，计算得到调整数据；具体将所述初始数据和终端数据代入如下公式：

$\left\{\begin{array}{c}Y3=(1\±\mathrm{\λ})Y1\\ U3=(1\±\mathrm{\λ})U1\\ V3=(1\±\mathrm{\λ})V1,\mathrm{\λ}=Y2/Y1,\end{array}\right.$ 计算得到调整数据，其中Y1为初始数据中图像的明亮度值，U1和V1为初始数据中图像中的两个色度值，Y3为终端数据中图像的明亮度值，U3和V3为终端数据中图像中的两个色度值；

本实施例中，在视频图像的显示过程中，Y分量为明亮度，最能体现其变化的分量。当Y2值大于Y1值，则±取负号；若Y2值小于Y1值，则±取正号。这样，可以使得最终的调整数据更接近于参考帧的视频数据，从而提供更好的画面效果。

步骤S1055，根据所述调整数据对所述视频数据进行调整。

本实施例中，根据计算得到的所述调整数据Y3、U3、V3对应调整将发送至客户端的视频数据。

在一实施例中，在上述图1或图3的实施例的基础上，本实施例中，所述视频数据包括图像数据和音频数据，所述步骤S104进一步包括：

将调整后的所述图像数据以及初始音频数据发送至客户端，以启动视频的播放。

本实施例中，所述audio的decoder模块将初始音频数据发送至客户端，而所述以及视频样本管道中的调整模块将video的decoder模块传输的终端数据进行调整后发送至客户端，从而使得调整后的视频数据在客户端进行播放，进而提高用户体验。

本发明还提供一种视频启动装置1，参照图6，在一实施例中，所述视频启动装置1包括：

创建模块101，用于创建视频样本管道；

本实施例中，本发明提供一种基于Gstreamer播放器的视频启动装置1，其中GStreamer是GNOME桌面环境下用来构建流媒体应用的开源多媒体框架，其目标是要简化音/视频应用程序的开发，目前已经能够被用来处理像MP3、Ogg、MPEG1、MPEG2、AVI、Quicktime等多种格式的多媒体数据。利用常见的视频，从中提取中相应的视频参数，并根据不同的视频参数创建不同的视频样本管道。本发明实施例中，所述视频样本管道由source模块、demux模块以及decoder模块组成。常见source模块类型包括HTTP(HyperTextTransferProtocol，超文本传输协议)、File本地文件的视频文件、TCP(TransmissionControlProtocol传输控制协议)、UDP(UserDatagramProtocol，用户数据报协议)以及RTSP(RealTimeStreamingProtocol，实时流传输协议等)等。常见demux模块插件的类型包括ts_demux、mp4_demux、flv_demux、mkv_demux、avi_demux、mpeg_demux以及wmv_demux等。常见音频audio的decoder模块的插件类型包括aac_decoder、mp3_decoder、wma_decoder、ac3_decoder、pcm_decoder、adpcm_decoder、mpeg_decoder、wma2_decoder、wma3_decoder以及vorbis_decoder等。常见视频video的decoder模块插件类型为h264_decoder、mp4v_decoder、h263_decoder、divx3_decoder、divx4_decoder、divx_decoder、avs_decoder、mjpeg_decoder、vc1_decoder、flv_decoder、vp6_decoder，vp8_decoder、theora_decoder、wmv3_decoder等。不同模块的类型越多则创建的相应样本管道的数量也越多。样本管道创建是将不同的模块进行不同组合连接的过程。例如，若source模块的类型为N个，demux模块的类型为M个，decoder模块为S个，则创建的样本管道数为N×M×S个。应当理解的是，本实施例中，所述视频数据为具备图像和声音的文件，而所述视频video为具备图像的文件，所述音频audio为具备声音的文件。

解析处理模块102，用于获取视频数据，并对所述视频数据进行解析后提取出参数信息；

本实施例中，所述视频样本管道中的source模块获取原始的视频数据，并对所述原始的视频数据进行解析，待解析完成后提取出相关的参数信息。例如，若解析的原始视频数据信息为1.ts，它是从http网页上下载的，它的音频是mp4，它的视频(也就是显示图片)是h264格式，那么解析后提取出的相关参数信息为：source模块类型是http，demux模块类型是ts_demux，音频的decoder模块类型是mp4_decoder，视频的decoder是h264_decoder。

选择模块103，用于根据所述参数信息从所述视频样本管道中选择对应的目的管道；

本实施例中，所述视频样本管道中的管道选择模块，根据提取出的参数信息，从N×M×S个创建的样本管道中选择目的管道来进行视频数据的传输。如图2所示，该视频样本管道为本实施例的目的管道，所述目的管道包括source模块、demux模块以及decoder模块，其中source模块Httpsrc表示source模块的类型为http，demux模块的类型为mp4_demux，audio的decoder模块类型为aac_audio，video的decoder模块类型为h264_decoder。此外，sink表示接收视频数据，而src表示输出视频数据。

发送模块104，用于将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。

本实施例中，所述视频样本管道中的decoder模块将所述视频数据发送至客户端，以启动视频的播放。

本发明提供的视频启动装置，通过创建视频样本管道，获取视频数据，并对所述视频数据进行解析后提取出参数信息，根据所述参数信息从所述视频样本管道中选择对应的目的管道，将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。相比于传统视频播放，不仅缩短了Gstreamer播放器的视频启动播放时间，降低了视频的内存空间大小和计算复杂度，而且当视频数据经过decoder模块后，并不是利用传统render输出模块将视频数据直接输出播放，而是将video的源数据输入到video输出模块中，利用图像处理模块对video的数据进行相应的处理后，再传送至客户端进行输出显示，从而为用户提供了更好的画面效果。

在一实施例中，如图7所示，在上述图6的实施例的基础上，本实施例中，所述视频启动装置1还包括：

调整模块105，用于利用所述目的管道对所述视频数据进行调整。

本实施例中，参见图4，所述视频样本管道中的调整模块对所述视频数据中的图像进行调整处理，这样，当原始的视频数据经过decoder模块后，并不是利用传统render输出模块将视频数据直接输出播放，而是将video的源数据输入到video输出模块中，利用图像处理模块对video的数据进行相应的处理后，再传送至客户端进行输出显示，从而为用户提供了更好的画面效果。从图3，可以得出采用本发明提供的基于视频启动播放方法，可以显著提高视频启动时间。

应当理解的是，若视频数据为常见的视频，则利用本发明提供的视频样本管道将视频数据传输至decoder的video输出模块，并对其进行调整优化处理后再输出到客户端进行播放；若视频为非常见的视频，则依据传统视频管道进行播放。

在一实施例中，如图8所示，在上述图7的实施例的基础上，本实施例中，所述调整模块105包括：

提取单元1051，用于提取经解析处理后的视频数据的参考帧；

本实施例中，将demux模块解析后的帧作为参考帧，并提取参考帧中的视频数据。

第一获取单元1052，用于获取所述参考帧中的初始数据。

本实施例中，参考帧中的视频的初始数据为Y1、U1、V1，其中“Y”表示明亮度，也就是灰阶值；而“U”和“V”表示的则是色度，其作用是描述影图像色彩及饱和度，用于指定像素的颜色。

第二获取单元1053，用于获取经所述目的管道传输的终端数据；

本实施例中，所述视频样本管道中的调整模块获取经所述目的管道的video输出模块传输的终端数据。本优选实施例中，所述调整模块仅对video输出模块传输的终端数据进行处理，当然，在其他实施例中，也可以同时对audio输出模块传输的终端数据进行处理，具体可根据实际需求合理设置。

计算单元1054，用于根据所述初始数据和终端数据，计算得到调整数据；具体将所述初始数据和终端数据代入公式：

$\left\{\begin{array}{c}Y3=(1\±\mathrm{\λ})Y1\\ U3=(1\±\mathrm{\λ})U1\\ V3=(1\±\mathrm{\λ})V1,\mathrm{\λ}=Y2/Y1,\end{array}\right.$ 计算得到调整数据，其中Y1为初始数据中图像的明亮度值，U1和V1为初始数据中图像中的两个色度值，Y3为终端数据中图像的明亮度值，U3和V3为终端数据中图像中的两个色度值；

本实施例中，在视频图像的显示过程中，Y分量为明亮度，最能体现其变化的分量。当Y2值大于Y1值，则±取负号；若Y2值小于Y1值，则±取正号。这样，可以使得最终的调整数据更接近于参考帧的视频数据，从而提供更好的画面效果。

调整单元1055，用于根据所述调整数据对所述视频数据进行调整。

本实施例中，根据计算得到的所述调整数据Y3、U3、V3对应调整将发送至客户端的视频数据。

在一实施例中，在上述图6或图7的实施例的基础上，所述发送模块104进一步用于：

将调整后的所述图像数据以及初始音频数据发送至客户端，以启动视频的播放。

本实施例中，所述audio的decoder模块将初始音频数据发送至客户端，而所述以及视频样本管道中的调整模块将video的decoder模块传输的终端数据进行调整后发送至客户端，从而使得调整后的视频数据在客户端进行播放，进而提高用户体验。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种视频启动播放方法，其特征在于，所述基于视频启动播放方法包括以下步骤：

创建视频样本管道；

获取视频数据，并对所述视频数据进行解析后提取出参数信息；

根据所述参数信息从所述视频样本管道中选择对应的目的管道；

将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。

2.如权利要求1所述的基于视频启动播放方法，其特征在于，所述将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放的步骤之前还包括：

利用所述目的管道对所述视频数据进行调整。

3.如权利要求2所述的基于视频启动播放方法，其特征在于，所述利用所述目的管道对所述视频数据进行调整的步骤包括：

提取经解析处理后的视频数据的参考帧；

获取所述参考帧中的初始数据；

获取经所述目的管道传输的终端数据；

根据所述初始数据和终端数据，计算得到调整数据；

根据所述调整数据对所述视频数据进行调整。

4.如权利要求3所述的基于视频启动播放方法，其特征在于，所述视频数据包括图像数据和音频数据。

5.如权利要求4所述的基于视频启动播放方法，其特征在于，所述将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放的步骤进一步包括：

将调整后的所述图像数据以及初始音频数据发送至客户端，以启动视频的播放。

6.一种视频启动装置，其特征在于，所述视频启动装置包括：

创建模块，用于创建视频样本管道；

解析处理模块，用于获取视频数据，并对所述视频数据进行解析后提取出参数信息；

选择模块，用于根据所述参数信息从所述视频样本管道中选择对应的目的管道；

发送模块，用于将经所述目的管道传送的所述视频数据发至客户端，以启动视频的播放。

7.如权利要求6所述的视频启动装置，其特征在于，所述视频启动装置还包括：

调整模块，用于利用所述目的管道对所述视频数据进行调整。

8.如权利要求7所述的视频启动装置，其特征在于，所述调整模块包括：

提取单元，用于提取经解析处理后的视频数据的参考帧；

第一获取单元，用于获取所述参考帧中的初始数据；

第二获取单元，用于获取经所述目的管道传输的终端数据；

计算单元，用于根据所述初始数据和终端数据，计算得到调整数据；

调整单元，用于根据所述调整数据对所述视频数据进行调整。

9.如权利要求8所述的视频启动装置，其特征在于，所述视频数据包括图像数据和音频数据。

10.如权利要求9所述的视频启动装置，其特征在于，所述发送模块进一步用于：

将调整后的所述图像数据以及初始音频数据发送至客户端，以启动视频的播放。