CN101778282B - 一种不同媒体文件并发播放方法 - Google Patents

Abstract

本发明提出了一种不同媒体文件并发播放方法，包括步骤：播放第一视频的同时实时捕获用户行为，根据用户行为触发第二视频播放；对第二视频图像数据进行分离、解码及渲染，形成能够与第一视频图像合成的视频图像数据，并将视频图像数据存放在GPU中；GPU将存放在其中的第一视频图像数据与第二视频图像数据进行图像合成，并将合成后的图像输出到显示器上；捕获用户控制动作，根据所述动作播放第一视频、第二视频或两视频同时播放。本发明解决了播放视频过程中同时播放不同媒体文件的问题，不需要事先合成两个需同时播放的视频数据，且两个视频播放过程中可以分别控制其中任一视频的播放过程，其中，同时播放时采用硬件加速保证播放的流畅性。

Description

一种不同媒体文件并发播放方法

技术领域

本发明涉及不同媒体文件并发播放技术领域，尤其是涉及一种不同媒体文件并发播放方法。

背景技术

随着多媒体技术、网络技术的发展，视频信息日益成为主流信息形式。如何在人们观看视频过程中将其他的视频(例如视频广告)同时恰当地加入播放过程，成为当前视频广告技术，尤其是网络视频广告技术非常关注的产品形式与技术问题。

随着视频在互联网上的广为流传，在视频中增加广告已成为视频提供商的主要盈利方式。早期的是在视频中添加字幕，现在逐渐发展到在视频中增加广告视频。因此广告视频成为市场规模巨大、增长迅猛的运营产品形式。而通常的广告视频分为两种：

一种是在广告视频完成之前，需要进行广告视频数据和载体视频数据的编码整合、合成，使广告视频和用户观看的载体视频在播放过程中作为一个文件进行展现，用户不能按需选择是否观看广告的内容。这种方式使得视频服务商的运营成本急剧增加。这是由于视频的格式有多种，例如rm格式、rmvb格式、mpeg格式、avi格式等等。广告视频如果要整合、合成到载体视频中，对于不同的媒体格式还要经过媒体编码转换的程序。

另一种是强行占据用户播放视频过程的某段时间，在这段时间里，用户必须观看广告内容。这种方式都不能实现用户互动的信息交流方式。同时，与载体种方式相同的，需要将广告数据与视频进行编码整合、编码转换，付出了大量的成本。

同时，上述两种方式的用户体验感差，容易引起用户的反感。

发明内容

(一)解决的技术问题

本发明的目的是提供一种不同媒体文件并发播放方法，以解决不同媒体在同一窗口同时播放，且分别控制的问题。

(二)技术方案

一种不同媒体文件并发播放方法，包括以下步骤：

S1：播放第一视频的同时实时捕获用户行为，根据所述用户行为触发第二视频播放，所述用户行为包括：暂停播放第一视频或第一视频播放过程的特定时刻触发；

S2：对第二视频图像数据进行分离、解码及渲染，形成能够与第一视频图像合成的视频图像数据，并将所述视频图像数据存放在GPU中；

S3：GPU将存放在其中的所述第一视频图像数据与所述第二视频图像数据进行图像合成，并将合成后的图像输出到显示器上；

S4：捕获用户控制动作，根据用户控制动作，判断是否播放第二视频，若是，则播放第二视频，否则第二视频退出显示，第一视频画面放大显示；在播放第二视频时，继续捕获用户控制动作，根据所述动作判断是否播放第一视频，若是，则两视频同时播放；当点击第一视频显示画面或第二视频播放完成后，第二视频退出显示，第一视频画面放大显示且恢复播放状态，所述用户控制动作包括：鼠标点击动作或快捷键动作。

其中，所述步骤S2还包括：解析第二视频文件格式，根据格式匹配不同的分离器和解码器对第二视频数据进行分离、解码及渲染。

其中，所述步骤S2和S3之间还包括：设置第二视频显示时的透明化处理参数和Z轴位置参数。

其中，在所述第二视频显示时第一视频显示画面缩放并暂停播放。

其中，在所述两视频同时播放时调用硬件加速模块以承担第一视频和第二视频播放进程中图像合成运算的负荷。

其中，所述第二视频主要包括：广告视频。

一种不同媒体文件并发播放系统，包括：

第二视频触发模块，用于播放第一视频的同时实时捕获用户行为，根据所述用户行为触发第二视频播放，所述用户行为包括：暂停播放第一视频或第一视频播放过程的特定时刻触发；

第二视频图像数据处理模块，用于对第二视频图像数据进行分离、解码及渲染，形成能够与第一视频图像合成的视频图像数据，并将所述视频图像数据存放在GPU中；

视频图像合成模块，用于GPU将存放在其中的所述第一视频图像数据与所述第二视频图像数据进行图像合成，并将合成后的图像输出到显示器上；

视频播放模块，用于捕获用户控制动作，根据所述动作播放所述第一视频、第二视频或两视频同时播放，所述用户控制动作包括：鼠标点击动作或快捷键动作。

其中，所述系统还包括：

第二视频解析模块，用于解析第二视频文件格式，根据格式匹配不同的分离器和解码器对第二视频数据进行分离、解码及渲染。

其中，所述系统还包括：

第二视频显示参数设置模块，用于设置第二视频显示时的透明化处理参数和Z轴位置参数。

(三)有益效果

本发明的不同媒体文件并发播放方法具有如下有益效果：

1、解决了播放视频过程中同时播放另一不同媒体文件的实现问题，不需要事先合成两个需同时播放的视频数据，用户在两个视频播放过程中可以根据自己的需要控制其中任一视频的播放过程；

2、硬件加速模块的调用又恰当地解决了CPU处理大量图像时的负荷过载问题，使得不同媒体文件可以在独立控制方式下同时在同一窗口中播放展现，切实改进了视频广告的实现方法，大大提高了展现效果。

附图说明

图1是本发明提出的不同媒体文件并发播放方法流程图。

具体实施方式

本发明提出的一种不同媒体文件并发播放方法，流程如图1所示。

步骤S1中播放第一视频的同时实时捕获用户行为，如点击鼠标暂停播放第一视频或设置特定时刻在第一视频播放过程中触发，根据上述用户行为触发第二视频播放。

步骤S2中对第二视频图像数据进行分离、解码及渲染，形成能够与第一视频图像合成的视频图像数据，并将所述视频图像数据存放在显卡的GPU(Graphic Processing Unit)中；在对第二视频图像数据进行分离、解码及渲染时不受第二视频格式的限制，可以在解析第二视频文件后请求上播放器控制系统提供匹配的分离器和解码器，以对不同格式的第二视频文件进行分离、解码及渲染。在此之后，可对第二视频图像的显示参数进行设置，主要包括透明化处理参数和Z轴位置参数，分别决定第二视频图像显示时的透明度和Z轴位置。其中Z轴位置是相对第一视频而言的，即当第二视频显示时第一视频显示画面缩放并且暂停播放，从Z轴位置来看，第一视频在第二视频的后方。上述两参数保证第二视频图像与用第一视频图像同时显示时达到较好的效果。

步骤S3中GPU将存放在其中的所述第一视频图像数据与所述第二视频图像数据进行图像合成，并将合成后的图像输出到显示器上， 图像合成时调用Direct show框架由CPU将叠在一起的图片交给显示卡的硬件加速直接显示出来，从而降低由CPU完成两个视频图像编码转换、合成造成的高负荷，保证了并发播放过程的流畅输出到显示器上。显示的透明效果和位置由上述的透明化处理参数和Z轴位置参数决定。

步骤S4中捕获用户控制动作，根据所述动作播放所述第一视频、第二视频或两视频同时播放，其中用户控制动作包括：鼠标点击动作(鼠标点击播放第一视频或播放第二视频)或快捷键动作(按下快捷键播放第一视频或播放第二视频)。在步骤S3之后，播放器显示窗口上同时显示了第一视频和第二视频，等待用户的控制动作来决定播放哪一个视频或是同时播放，具体过程如下：

根据用户控制动作，判断是否播放第二视频，若是，则播放第二视频，否则第二视频退出显示，第一视频画面放大显示；

在播放第二视频时，继续捕获用户控制动作，根据所述动作判断是否播放第一视频，若是，则两视频同时播放；

当点击第一视频显示画面或第二视频播放完成后，第二视频退出显示，第一视频画面放大显示且恢复播放状态(播放或暂停)。

在播放过程中还可以控制两个视频的开始、暂停、结束以及显示窗口的大小。

在两个视频同时播放时，为减轻CPU处理压力，保证成功播放和流畅播放，调用硬件加速模块以承担双媒体文件播放进程中图像合成运算的负荷。其中的“图像合成运算”是在需要同一窗口完成两个不同视频图像显示时，通过调用Microsoft DirectX的框架完成的。其步骤简述如下：

1、由播放器控制模块将取到的视频祯图象交给CPU进行预处理，当两种视频图象合成时，就由两个播放核心取两个不同的视频祯图象交给CPU

2、CPU接受图象数据后，依据控制模块的参数，具体给定两个图象的显示位置和大小，包括透明度等，这样就形成了一张由两张图叠在一起的图象

3、调用Direct show框架，完成CPU交来的图象显示。

4、这个过程中，如果直接将不同的图象数据交给CPU处理，会因计算量的巨大而影响显示效果，而调用GPU来完成图象合成就可以保证显示的浏畅性。

关于DirectX的应用是本领域技术人员所熟知的，例如在视频中加载字幕，通行的一种做法就是将字幕文件数据直接交给CPU，并同时调用DirectX成型的封装好的图象合成框架就可以完成字幕的加载。本发明所述的图象合成方法正是基于对这种字幕处理方法的刨析与分解完成的。

其中，第二视频主要包括广告视频，在触发广告视频播放后，广告视频以广告提示条的形式显示在播放器窗口上，用户点击该提示条便开始播放广告。

本发明提出的一种不同媒体文件并发播放系统，包括：第二视频触发模块，用于播放第一视频的同时实时捕获用户行为，根据所述用户行为触发第二视频播放，所述用户行为包括：暂停播放第一视频或第一视频播放过程的特定时刻触发；第二视频图像数据处理模块，用于对第二视频图像数据进行分离、解码及渲染，形成能够与第一视频图像合成的视频图像数据，并将所述视频图像数据存放在GPU中；视频图像合成模块，用于GPU将存放在其中的所述第一视频图像数据与所述第二视频图像数据进行图像合成，并将合成后的图像输出到显示器上；视频播放模块，用于捕获用户控制动作，根据所述动作播放所述第一视频、第二视频或两视频同时播放，所述用户控制动作包括：鼠标点击动作或快捷键动作。

其中，所述系统还包括：第二视频解析模块，用于解析第二视频 文件格式，根据格式匹配不同的分离器和解码器对第二视频数据进行分离、解码及渲染。

其中，所述系统还包括：第二视频显示参数设置模块，用于设置第二视频显示时的透明化处理参数和Z轴位置参数。

以上实施方式仅用于说明本发明，而并非对本发明的限制，有关技术领域的普通技术人员，在不脱离本发明的精神和范围的情况下，还可以做出各种变化和变型，因此所有等同的技术方案也属于本发明的范畴，本发明的专利保护范围应由权利要求限定。

Claims (9)

1.一种不同媒体文件并发播放方法，其特征在于，包括以下步骤：

S1：播放第一视频的同时实时捕获用户行为，根据所述用户行为触发第二视频播放，所述用户行为包括：暂停播放第一视频或第一视频播放过程的特定时刻触发；

S2：对第二视频图像数据进行分离、解码及渲染，形成能够与第一视频图像合成的视频图像数据，并将所述视频图像数据存放在GPU中；

S3：GPU将存放在其中的所述第一视频图像数据与所述第二视频图像数据进行图像合成，并将合成后的图像输出到显示器上；

S4：捕获用户控制动作，根据用户控制动作，判断是否播放第二视频，若是，则播放第二视频，否则第二视频退出显示，第一视频画面放大显示；在播放第二视频时，继续捕获用户控制动作，根据所述动作判断是否播放第一视频，若是，则两视频同时播放；当点击第一视频显示画面或第二视频播放完成后，第二视频退出显示，第一视频画面放大显示且恢复播放状态，所述用户控制动作包括：鼠标点击动作或快捷键动作。

2.如权利要求1所述的不同媒体文件并发播放方法，其特征在于，所述步骤S2还包括：解析第二视频文件格式，根据格式匹配不同的分离器和解码器对第二视频数据进行分离、解码及渲染。

3.如权利要求1所述的不同媒体文件并发播放方法，其特征在于，所述步骤S2和S3之间还包括：设置第二视频显示时的透明化处理参数和Z轴位置参数。

4.如权利要求3所述的不同媒体文件并发播放方法，其特征在于，在所述第二视频显示时第一视频显示画面缩放并暂停播放。

5.如权利要求1所述的不同媒体文件并发播放方法，其特征在于，在所述两视频同时播放时调用硬件加速模块以承担第一视频和第二视频播放进程中图像合成运算的负荷。

6.如权利要求1-5任一所述的不同媒体文件并发播放方法，其特征在于，所述第二视频主要包括：广告视频。

7.一种不同媒体文件并发播放系统，其特征在于，包括：

第二视频触发模块，用于播放第一视频的同时实时捕获用户行为，根据所述用户行为触发第二视频播放，所述用户行为包括：暂停播放第一视频或第一视频播放过程的特定时刻触发；

第二视频图像数据处理模块，用于对第二视频图像数据进行分离、解码及渲染，形成能够与第一视频图像合成的视频图像数据，并将所述视频图像数据存放在GPU中；

视频图像合成模块，用于GPU将存放在其中的所述第一视频图像数据与所述第二视频图像数据进行图像合成，并将合成后的图像输出到显示器上；

视频播放模块，用于捕获用户控制动作，根据所述动作播放所述第一视频、第二视频或两视频同时播放，所述用户控制动作包括：鼠标点击动作或快捷键动作。

8.如权利要求7所述的不同媒体文件并发播放系统，其特征在于，所述系统还包括：

第二视频解析模块，用于解析第二视频文件格式，根据格式匹配不同的分离器和解码器对第二视频数据进行分离、解码及渲染。

9.如权利要求7所述的不同媒体文件并发播放系统，其特征在于，所述系统还包括：

第二视频显示参数设置模块，用于设置第二视频显示时的透明化处理参数和Z轴位置参数。

Images