CN109871465A - 一种时间轴计算方法、装置、电子设备及存储介质 - Google Patents

Abstract

本公开公开了一种时间轴计算方法、装置、电子设备及存储介质。其中，该方法包括：获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件；在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材；播放视频文件，并对视频文件所包含的全部图像帧进行截图；根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。本公开实施例解决了现有技术采用人工方式计算视频文件中图片和文字的时间轴，耗时耗力，很难保证时间轴的准确性的问题，可以对现有的时间轴计算方案进行优化，可以自动计算视频文件中的视频素材的时间轴，提高时间轴计算的准确性。

Description

一种时间轴计算方法、装置、电子设备及存储介质

技术领域

本公开实施例涉及视频处理技术，尤其涉及一种时间轴计算方法、装置、电子设备及存储介质。

背景技术

视频文件中包括图片和文字等视频素材。时间轴是图片和文字等视频素材在视频文件中出现的时间位置。例如，一张橙子的图片在视频文件中出现的时间位置为第9秒，即在视频文件中，该图片的时间轴为9秒。

现有技术中，通常由技术人员基于肉眼识别视频文件中图片和文字，计算视频文件中图片和文字的时间轴。

现有技术的缺陷在于，采用人工方式计算视频文件中图片和文字的时间轴，耗时耗力，而且当视频文件数量很多时，人工方式很难保证时间轴的准确性。

发明内容

本公开提供一种时间轴计算方法、装置、电子设备及存储介质，以实现对现有的时间轴计算方案进行优化，实现自动计算视频素材的时间轴，提高时间轴计算的准确性。

第一方面，本公开实施例提供了一种时间轴计算方法，包括：

获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件；

在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材；

播放视频文件，并对视频文件所包含的全部图像帧进行截图；

根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。

上述方案中，可选的是，在播放视频文件之前，还包括：

根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理。

上述方案中，可选的是，视频素材包括图片，和/或文字。

上述方案中，可选的是，根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理，包括：

如果确定当前处理的目标视频素材为图片形式的待计算视频素材，则根据目标视频素材的图片参数和标识信息，生成第一替换图片，并用第一替换图片替换目标视频素材；其中，第一替换图片的图片背景为白色，第一替换图片的图片内容为根据标识信息生成的第一数字信息；

如果确定当前处理的目标视频素材为图片形式的非待计算视频素材，则根据目标视频素材的图片参数，生成第二替换图片，并用第二替换图片替换目标视频素材；其中，第二替换图片为透明图片；

如果确定当前处理的目标视频素材为文字形式的待计算视频素材，则根据目标视频素材的标识信息，生成第二数字信息，并将目标视频素材替换为第二数字信息；

如果确定当前处理的目标视频素材为文字形式的非待计算视频素材，则将目标视频素材替换为空字符串。

上述方案中，可选的是，根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息，包括：

根据光学字符识别算法，对全部图像帧中的数字信息进行识别；

根据数字信息识别结果，以及待计算视频素材与数字信息的映射关系，确定与待计算视频素材匹配的图像帧；

根据图像帧在视频文件中的播放次序，以及视频文件的帧率，计算待计算视频素材在视频文件中的时间轴信息。

上述方案中，可选的是，在根据数字信息识别结果，以及待计算视频素材与数字信息的映射关系，确定与待计算视频素材匹配的图像帧之前，还包括：

滤除不符合预设数字信息格式的数字识别结果。

上述方案中，可选的是，播放视频文件，并对视频文件所包含的全部图像帧进行截图，包括：

通过无头浏览器播放视频文件；

根据播放顺序对视频文件所包含的全部图像帧进行截图。

第二方面，本公开实施例还提供了一种时间轴计算装置，包括：

请求获取模块，用于获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件；

素材获取模块，用于在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材；

截图模块，用于播放视频文件，并对视频文件所包含的全部图像帧进行截图；

信息计算模块，用于根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。

上述方案中，可选的是，还包括：

素材转换模块，用于根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理。

上述方案中，可选的是，视频素材包括图片，和/或文字。

上述方案中，可选的是，素材转换模块包括：

第一替换单元，用于如果确定当前处理的目标视频素材为图片形式的待计算视频素材，则根据目标视频素材的图片参数和标识信息，生成第一替换图片，并用第一替换图片替换目标视频素材；其中，第一替换图片的图片背景为白色，第一替换图片的图片内容为根据标识信息生成的第一数字信息；

第二替换单元，用于如果确定当前处理的目标视频素材为图片形式的非待计算视频素材，则根据目标视频素材的图片参数，生成第二替换图片，并用第二替换图片替换目标视频素材；其中，第二替换图片为透明图片；

第三替换单元，用于如果确定当前处理的目标视频素材为文字形式的待计算视频素材，则根据目标视频素材的标识信息，生成第二数字信息，并将目标视频素材替换为第二数字信息；

第四替换单元，用于如果确定当前处理的目标视频素材为文字形式的非待计算视频素材，则将目标视频素材替换为空字符串。

上述方案中，可选的是，信息计算模块包括：

信息识别单元，用于根据光学字符识别算法，对全部图像帧中的数字信息进行识别；

图像帧确定单元，用于根据数字信息识别结果，以及待计算视频素材与数字信息的映射关系，确定与待计算视频素材匹配的图像帧；

时间轴计算单元，用于根据图像帧在视频文件中的播放次序，以及视频文件的帧率，计算待计算视频素材在视频文件中的时间轴信息。

上述方案中，可选的是，还包括：

结果滤除单元，用于滤除不符合预设数字信息格式的数字识别结果。

上述方案中，可选的是，截图模块包括：

视频播放单元，用于通过无头浏览器播放视频文件；

截图单元，用于根据播放顺序对视频文件所包含的全部图像帧进行截图。

第三方面，本公开实施例还提供了一种电子设备，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序；

当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现如本公开实施例所述的时间轴计算方法。

第四方面，本公开实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如本公开实施例所述的时间轴计算方法。

本公开实施例通过确定与时间轴计算请求匹配的视频文件，并在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材，然后播放视频文件，并对视频文件所包含的全部图像帧进行截图，并根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息，解决了现有技术采用人工方式计算视频文件中图片和文字的时间轴，耗时耗力，很难保证时间轴的准确性的问题，可以对现有的时间轴计算方案进行优化，可以自动计算视频文件中的视频素材的时间轴，提高时间轴计算的准确性。

附图说明

图1为本公开实施例提供的一种时间轴计算方法的流程图；

图2为本公开实施例提供的一种时间轴计算方法的流程图；

图3为本公开实施例提供的一种时间轴计算方法的流程图；

图4为本公开实施例提供的一种时间轴计算装置的结构示意图；

图5为本公开实施例提供的一种电子设备的结构示意图。

具体实施方式

下面结合附图和实施例对本公开作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本公开，而非对本公开的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本公开相关的部分而非全部结构。

图1为本公开实施例提供的一种时间轴计算方法的流程图。本实施例可适用于进行时间轴计算的情况，该方法可以由时间轴计算装置来执行，该装置可以采用软件和/或硬件的方式实现，该装置可以配置于电子设备，例如，终端设备或服务器中。如图1所示，该方法可以包括如下步骤：

步骤101、获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件。

其中，视频泛指将一系列静态影像以电信号的方式加以捕捉、纪录、处理、储存、传送与重现的各种技术。连续的图像变化每秒超过24帧画面以上时，根据视觉暂留原理，人眼无法辨别单幅的静态画面，看上去是平滑连续的视觉效果，这样连续的画面叫做视频。

视频文件中包括图片和文字等视频素材。时间轴是图片和文字等视频素材在视频文件中出现的时间位置。例如，一张橙子的图片在视频文件中出现的时间位置为第9秒，即在视频文件中，该图片的时间轴为9秒。时间轴计算请求用于请求对视频文件中的图片或文字等视频素材的时间轴进行计算。

视频文件由多帧图像帧构成。视频文件的帧率是用于测量显示帧数的量度。所谓的测量单位为每秒显示帧数(frames per second，fps)。例如，视频文件的帧率为24fps，即每秒显示24帧图像帧。根据图片和文字等视频素材出现的图像帧在视频文件中的播放次序，以及视频文件的帧率，可以计算出视频素材在视频文件中的时间轴信息。例如，包括某个视频素材的图像帧在视频文件中的播放次序为240，即该视频素材出现在视频文件中的第240帧图像帧。视频文件的帧率为24fps，每秒显示24帧图像帧。用次序240除以视频文件的帧率24fps，得到该视频素材出现的图像帧在视频文件中的显示的时间位置为10秒，即该视频素材在视频文件中出现的时间位置为10秒。待计算视频素材在视频文件中的时间轴信息为10秒。由此，把计算图片和文字等视频素材的时间轴的问题，转化为确定图片和文字等视频素材出现在视频文件中的第几帧图像帧的问题。确定包含待计算视频素材的图像帧在视频文件中的播放次序后，即可计算得到视频素材的时间轴。

可选的，视频文件为网页中的动画文件。用户在网页中制作动画，生成的动画文件可以在网页中播放。用户通过发送时间轴计算请求，请求对网页中的动画文件中的图片或文字等视频素材的时间轴进行计算。获取时间轴计算请求后，确定与时间轴计算请求匹配的网页中的动画文件。

步骤102、在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材。

其中，视频素材可以包括图片和文字。待计算视频素材是需要计算时间轴的视频素材。确定与时间轴计算请求匹配的视频文件后，在视频文件所关联的全部视频素材中，获取需要计算时间轴的视频素材，即需要标注时间轴信息的待计算视频素材。

在一个具体实例中，可以将视频文件所关联的全部视频素材提供给用户，然后获取用户根据全部视频素材反馈的需要计算时间轴的视频素材，将上述视频素材确定为待计算视频素材。例如，用户可以在视频文件所关联的全部视频素材中，选择多张图片，以及多段文字作为待计算视频素材。

在另一个具体实例中，用户发送的时间轴计算请求包括用户指定的待计算视频素材的相关信息。根据时间轴计算请求，可以在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材。

步骤103、播放视频文件，并对视频文件所包含的全部图像帧进行截图。

其中，视频文件中的一帧图像即为一帧图像帧。播放视频文件，并对视频文件所包含的全部图像帧进行截图。具体的，在播放视频文件的同时，按照时间顺序依次对视频文件中的每一帧图像帧进行截图操作，获取视频文件所包含的全部图像帧对应的截图图像。

可选的，可以通过无头浏览器播放视频文件。例如，无头浏览器puppeteer。无头浏览器是一种没有界面的浏览器。它有浏览器该有的一切功能，除了界面。可以通过命令进行浏览器内的各种操作。日常使用浏览器的步骤为：启动浏览器，打开一个网页，进行交互。在无头浏览器中，可以通过程序或脚本来执行以上过程，从而模拟出真实的浏览器使用场景。可以通过程序或脚本来使用无头浏览器播放视频文件。

在一个具体实例中，可以直接播放视频文件，并对视频文件所包含的全部图像帧进行截图。

在另一个具体实例中，可以在播放视频文件之前，根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理。全部视频素材中除待计算视频素材之外的视频素材为非待计算视频素材，即不需要计算时间轴的视频素材。

具体的，转换处理过程包括：如果确定当前处理的目标视频素材为图片形式的待计算视频素材，则根据目标视频素材的图片参数和标识信息，生成第一替换图片，并用第一替换图片替换目标视频素材。其中，第一替换图片的图片背景为白色。第一替换图片的图片内容为根据标识信息生成的第一数字信息。如果确定当前处理的目标视频素材为图片形式的非待计算视频素材，则根据目标视频素材的图片参数，生成第二替换图片，并用第二替换图片替换所述目标视频素材。其中，第二替换图片为透明图片。如果确定当前处理的目标视频素材为文字形式的待计算视频素材，则根据目标视频素材的标识信息，生成第二数字信息，并将目标视频素材替换为第二数字信息。如果确定当前处理的目标视频素材为文字形式的非待计算视频素材，则将目标视频素材替换为空字符串。

由此，通过用含有特殊数字的白色背景图片代替图片形式的待计算视频素材，用特殊数字的字符串代替文字形式的待计算视频素材，用透明图片代替图片形式的非待计算视频素材，用空字符串代替文字形式的非待计算视频素材，将视频素材中与待计算视频素材无关的颜色，全部调整为白色，从而实现将视频文件中非待计算视频素材全部隐藏，处理后的视频文件中只存在与待计算视频素材对应的数字。可选的，第一数字信息和第二数字信息中的数字的字体大小相同，数字的字体颜色皆为黑色。处理后的视频文件中可以只存在黑色和白色两种颜色。

步骤104、根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。

其中，根据预设识别算法对全部图像帧的图像内容进行识别，确定待计算视频素材出现在视频文件中的第几个图像帧，即确定包含待计算视频素材的图像帧在视频文件中的播放次序。

在一个具体实例中，直接播放视频文件，并对视频文件所包含的全部图像帧进行截图后，通过预设识别算法对全部图像帧的图像内容进行识别。具体的，如果待计算视频素材为图片，则根据图像识别算法对全部图像帧对应的截图图像进行图像识别，识别全部图像帧的图像内容，确定包含待计算视频素材的图像帧。如果待计算视频素材为文字，则根据光学字符识别算法对全部图像帧对应的截图图像进行文字识别，识别全部图像帧的图像内容，确定包含待计算视频素材的图像帧。

光学字符识别(Optical Character Recognitio，OCR)是指通过图像处理和模式识别技术对光学的字符进行识别，主要由图像处理、版面划分、文字识别和文字编辑4个部分组成。

在另一个具体实例中，在播放视频文件之前，根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理，将视频文件中非待计算视频素材全部隐藏，处理后的视频文件中只存在与待计算视频素材对应的数字。在根据预设识别算法对全部图像帧的图像内容进行识别时，只需要识别数字字符即可。具体的，根据光学字符识别算法，对全部图像帧中的数字信息进行识别，然后根据数字信息识别结果，以及待计算视频素材与数字信息的映射关系，确定包含待计算视频素材的图像帧，即与待计算视频素材匹配的图像帧。

确定与待计算视频素材匹配的图像帧后，根据包含待计算视频素材的图像帧在视频文件中的播放次序，计算待计算视频素材在视频文件中的时间轴信息。具体的，根据包含待计算视频素材的图像帧在视频文件中的播放次序，以及视频文件的帧率，可以计算出视频素材在视频文件中的时间轴信息。例如，包括某个视频素材的图像帧在视频文件中的播放次序为240，即该视频素材出现在视频文件中的第240帧图像帧。视频文件的帧率为24fps，每秒显示24帧图像帧。用包含待计算视频素材的图像帧在视频文件中的播放次序240除以视频文件的帧率24fps，得到该视频素材出现的图像帧在视频文件中的显示的时间位置为10秒，即该视频素材在视频文件中出现的时间位置为10秒。待计算视频素材在视频文件中的时间轴信息为10秒。

本实施例的技术方案，通过确定与时间轴计算请求匹配的视频文件，并在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材，然后播放视频文件，并对视频文件所包含的全部图像帧进行截图，并根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息，解决了现有技术采用人工方式计算视频文件中图片和文字的时间轴，耗时耗力，很难保证时间轴的准确性的问题，可以对现有的时间轴计算方案进行优化，可以自动计算视频文件中的视频素材的时间轴，提高时间轴计算的准确性。

图2为本公开实施例提供的一种时间轴计算方法的流程图。本实施例可以与上述一个或者多个实施例中各个可选方案结合，在本实施例中，在播放视频文件之前，可以还包括：根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理。

如图2所示，该方法可以包括如下步骤：

步骤201、获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件。

步骤202、在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材。

可选的，视频素材包括图片，和/或文字。

步骤203、根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理。

其中，如果确定当前处理的目标视频素材为图片形式的待计算视频素材，则根据目标视频素材的图片参数和标识信息，生成第一替换图片，并用第一替换图片替换目标视频素材。其中，第一替换图片的图片背景为白色，第一替换图片的图片内容为根据标识信息生成的第一数字信息。

图片参数可以包括图片宽度和图片高度。标识信息可以为视频素材的数字标识。例如，在视频文件中关联的全部视频素材一共有500个。将数字1至500，分别分配给每一个视频素材。每一个视频素材都有唯一对应的数字标识。如果确定当前处理的目标视频素材为图片形式的待计算视频素材，则根据目标视频素材的图片宽度、图片高度、以及数字标识，生成第一替换图片。第一替换图片是图片宽度、图片高度与目标视频素材的图片宽度、图片高度相同，且图片背景为白色的图片。第一替换图片的图片内容为根据标识信息生成的第一数字信息。可以将第一数字信息的格式设置为一个固定格式。例如，00{id}00。id为标识信息。目标视频素材的标识信息为58，则第一数字信息为005800。第一替换图片的图片内容为005800。标识信息前后添加指定字符“00”的作用是可以大大提高光学字符识别的准确性。由此，用含有特殊数字的白色背景图片代替图片形式的待计算视频素材，建立待计算视频素材与数字信息的映射关系。

如果确定当前处理的目标视频素材为图片形式的非待计算视频素材，则根据目标视频素材的图片参数，生成第二替换图片，并用第二替换图片替换目标视频素材。其中，第二替换图片为透明图片。

第二替换图片是图片宽度、图片高度与目标视频素材的图片宽度、图片高度相同的透明图片。由此，用透明图片代替图片形式的非待计算视频素材。

如果确定当前处理的目标视频素材为文字形式的待计算视频素材，则根据目标视频素材的标识信息，生成第二数字信息，并将目标视频素材替换为第二数字信息。

标识信息可以为视频素材的数字标识。每一个视频素材都有唯一对应的数字标识。可以将第二数字信息的格式设置为一个固定格式。例如，99{id}99。id为标识信息。目标视频素材的标识信息为251，则第二数字信息为0025100。标识信息前后添加指定字符“99”的作用是可以大大提高光学字符识别的准确性。由此，用特殊数字的字符串代替文字形式的待计算视频素材，建立待计算视频素材与数字信息的映射关系。

可选的，第一数字信息和第二数字信息中的数字的字体大小相同，数字的字体颜色皆为黑色。由此，处理后的视频文件中可以只存在黑色和白色两种颜色。

如果确定当前处理的目标视频素材为文字形式的非待计算视频素材，则将目标视频素材替换为空字符串。

步骤204、播放视频文件，并对视频文件所包含的全部图像帧进行截图。

步骤205、根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。

可选的，根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息，可以包括：根据光学字符识别算法，对全部图像帧中的数字信息进行识别；根据数字信息识别结果，以及待计算视频素材与数字信息的映射关系，确定与待计算视频素材匹配的图像帧；根据图像帧在视频文件中的播放次序，以及视频文件的帧率，计算待计算视频素材在视频文件中的时间轴信息。

其中，根据光学字符识别算法对全部图像帧对应的截图图像进行数字字符识别，获取每一帧图像帧对应的数字信息识别结果，确定每一帧图像帧所包含的数字信息。待计算视频素材与数字信息的映射关系是指待计算视频素材与在进行转换处理时，根据待计算视频素材的标识信息确定的数字信息之间的映射关系。根据待计算视频素材与数字信息的映射关系，确定与待计算视频素材对应的数字信息。在全部图像帧所包含的数字信息中，查询与待计算视频素材对应的数字信息。如果查询到与待计算视频素材对应的数字信息，则包含该数字信息的图像帧即为与待计算视频素材匹配的图像帧。根据图像帧在视频文件中的播放次序，以及视频文件的帧率，计算待计算视频素材在视频文件中的时间轴信息。

例如，在进行转换处理时，根据待计算视频素材的标识信息确定的数字信息为005800。根据光学字符识别算法对全部图像帧对应的截图图像进行数字字符识别，确定每一帧图像帧所包含的数字信息。在全部图像帧所包含的数字信息中，查询与待计算视频素材对应的数字信息005800。查询到与待计算视频素材对应的数字信息。包含该数字信息的图像帧在视频文件中的播放次序为240，即待计算视频素材出现在视频文件中的第240帧图像帧。视频文件的帧率为24fps，每秒显示24帧图像帧。用包含待计算视频素材的图像帧在视频文件中的播放次序240除以视频文件的帧率24fps，得到待计算视频素材出现的图像帧在视频文件中的显示的时间位置为10秒，即待计算视频素材在视频文件中出现的时间位置为10秒。待计算视频素材在视频文件中的时间轴信息为10秒。

可选的，在根据数字信息识别结果，以及待计算视频素材与数字信息的映射关系，确定与待计算视频素材匹配的图像帧之前，可以还包括：滤除不符合预设数字信息格式的数字识别结果。

其中，预设数字信息格式为第一数字信息的格式，以及第二数字信息的格式。在根据光学字符识别算法对全部图像帧对应的截图图像进行数字字符识别后，统计数字信息识别结果。数字信息识别结果中可能含有识别错误的结果。为了提高准确性，可以过滤掉既不符合第一数字信息的格式，也不符合第二数字信息的格式的数字信息识别结果。

例如，第一数字信息的格式设置为一个固定格式。例如，00{id}00。第二数字信息的格式设置为一个固定格式。例如，99{id}99。过滤掉既未带特定前缀后缀“00”，也未带特定前缀后缀“99”的数字信息识别结果。

本实施例的技术方案，通过在播放视频文件之前，根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理，可以对待计算视频素材和非待计算视频素材做分类处理，可以将视频文件中非待计算视频素材全部隐藏，实现处理后的视频文件中只存在与待计算视频素材对应的标记信息，然后根据标记信息，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息，提高识别的准确性，提高时间轴计算的准确性。

图3为本公开实施例提供的一种时间轴计算方法的流程图。本实施例可以与上述一个或者多个实施例中各个可选方案结合，在本实施例中，播放视频文件，并对视频文件所包含的全部图像帧进行截图，可以包括：通过无头浏览器播放视频文件；根据播放顺序对视频文件所包含的全部图像帧进行截图。

如图3所示，该方法可以包括如下步骤：

步骤301、获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件。

步骤302、在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材。

步骤303、通过无头浏览器播放视频文件。

其中，可以通过程序或脚本来使用无头浏览器播放视频文件。

步骤304、根据播放顺序对视频文件所包含的全部图像帧进行截图。

其中，在使用无头浏览器播放视频文件的同时，按照时间顺序依次对视频文件中的每一帧图像帧进行截图操作，获取视频文件所包含的全部图像帧对应的截图图像。

可选的，建立至少两个截图进程，并将与视频文件对应的全部图像帧分配给至少两个截图进程。然后通过至少两个截图进程，在视频文件中，并行的对所分配的图像帧进行截图。

其中，截图进程是用于对图像进行截图的进程。建立至少两个截图进程，并将与视频文件对应的全部图像帧分配给至少两个截图进程。即每一帧图像帧都有匹配的截图进程，对其进行截图操作。

具体的，每一帧图像帧有唯一的帧定位信息。在制作视频文件时，设置每一帧图像帧对应的预设图像接口。可以通过预设图像接口，将视频文件的播放进度跳转至指定的一帧图像帧。帧定位信息是图像帧的预设图像接口的接口信息。因此，将与视频文件对应的全部图像帧的帧定位信息分配给至少两个截图进程。截图进程可以在视频文件播放时，根据所分配的帧定位信息调用预设图像接口，将视频文件的播放进度跳转至与该帧定位信息匹配的视频位置处，对视频位置处的一帧图像帧进行截图。

在一个具体实例中，根据视频文件所包含的图像帧帧数，建立与视频文件所包含的图像帧帧数相一致的截图进程，然后分别为每个截图进程分配视频文件中的一帧图像帧的帧定位信息。例如，视频文件所包含的图像帧帧数为200帧，建立200个截图进程，分别为每个截图进程分配视频文件中的一帧图像帧的帧定位信息。即每一帧图像帧都有唯一对应的截图进程，对其进行截图操作。

通过每一个截图进程并行执行下述操作：播放视频文件；调用预设图像接口，将视频文件的播放进度跳转至与所分配的帧定位信息匹配的视频位置处；对视频文件的视频位置处的一帧图像帧进行截图。由此，可以通过与视频文件对应的每一个截图进程并行执行截图操作，完成对该视频文件所包含的全部图像帧的截图任务。

步骤305、根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。

本实施例的技术方案，通过无头浏览器播放视频文件，然后根据播放顺序对视频文件所包含的全部图像帧进行截图，可以使用无头浏览器播放视频文件，完成对视频文件所包含的全部图像帧的截图任务。

图4为本公开实施例提供的一种时间轴计算装置的结构示意图。本实施例可适用于进行时间轴计算的情况。该装置可以采用软件和/或硬件的方式实现，该装置可以配置于电子设备。如图4所示，该装置可以包括：请求获取模块401、素材获取模块402、截图模块403和信息计算模块404。

其中，请求获取模块401，用于获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件；素材获取模块402，用于在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材；截图模块403，用于播放视频文件，并对视频文件所包含的全部图像帧进行截图；信息计算模块404，用于根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。

本实施例的技术方案，通过确定与时间轴计算请求匹配的视频文件，并在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材，然后播放视频文件，并对视频文件所包含的全部图像帧进行截图，并根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息，解决了现有技术采用人工方式计算视频文件中图片和文字的时间轴，耗时耗力，很难保证时间轴的准确性的问题，可以对现有的时间轴计算方案进行优化，可以自动计算视频文件中的视频素材的时间轴，提高时间轴计算的准确性。

可选的，在上述技术方案的基础上，可以还包括：素材转换模块，用于根据待计算视频素材，对与视频文件关联的全部视频素材进行转换处理。

可选的，在上述技术方案的基础上，视频素材可以包括图片，和/或文字。

可选的，在上述技术方案的基础上，素材转换模块可以包括：第一替换单元，用于如果确定当前处理的目标视频素材为图片形式的待计算视频素材，则根据目标视频素材的图片参数和标识信息，生成第一替换图片，并用第一替换图片替换目标视频素材；其中，第一替换图片的图片背景为白色，第一替换图片的图片内容为根据标识信息生成的第一数字信息；第二替换单元，用于如果确定当前处理的目标视频素材为图片形式的非待计算视频素材，则根据目标视频素材的图片参数，生成第二替换图片，并用第二替换图片替换目标视频素材；其中，第二替换图片为透明图片；第三替换单元，用于如果确定当前处理的目标视频素材为文字形式的待计算视频素材，则根据目标视频素材的标识信息，生成第二数字信息，并将目标视频素材替换为第二数字信息；第四替换单元，用于如果确定当前处理的目标视频素材为文字形式的非待计算视频素材，则将目标视频素材替换为空字符串。

可选的，在上述技术方案的基础上，信息计算模块404可以包括：信息识别单元，用于根据光学字符识别算法，对全部图像帧中的数字信息进行识别；图像帧确定单元，用于根据数字信息识别结果，以及待计算视频素材与数字信息的映射关系，确定与待计算视频素材匹配的图像帧；时间轴计算单元，用于根据图像帧在视频文件中的播放次序，以及视频文件的帧率，计算待计算视频素材在视频文件中的时间轴信息。

可选的，在上述技术方案的基础上，可以还包括：结果滤除单元，用于滤除不符合预设数字信息格式的数字识别结果。

可选的，在上述技术方案的基础上，截图模块403可以包括：视频播放单元，用于通过无头浏览器播放视频文件；截图单元，用于根据播放顺序对视频文件所包含的全部图像帧进行截图。

本公开实施例所提供的时间轴计算装置可执行本公开实施例所提供的时间轴计算方法，具备执行方法相应的功能模块和有益效果。

下面参考图5，其示出了适于用来实现本公开实施例的电子设备(例如终端设备或服务器)500的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图5示出的电子设备仅仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。

如图5所示，电子设备500可以包括处理装置(例如中央处理器、图形处理器等)501，其可以根据存储在只读存储器(ROM)502中的程序或者从存储装置508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM 503中，还存储有电子设备500操作所需的各种程序和数据。处理装置501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。

通常，以下装置可以连接至I/O接口505：包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置506；包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置507；包括例如磁带、硬盘等的存储装置508；以及通信装置509。通信装置509可以允许电子设备500与其他设备进行无线或有线通信以交换数据。虽然图5示出了具有各种装置的电子设备500，但是应理解的是，并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。

特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信装置509从网络上被下载和安装，或者从存储装置508被安装，或者从ROM 502被安装。在该计算机程序被处理装置501执行时，执行本公开实施例的方法中限定的上述功能。

需要说明的是，本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中，计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：电线、光缆、RF(射频)等等，或者上述的任意合适的组合。

上述计算机可读介质可以是上述电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。

上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被该电子设备执行时，使得该电子设备：获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件；在视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材；播放视频文件，并对视频文件所包含的全部图像帧进行截图；根据预设识别算法，对全部图像帧的图像内容进行识别，根据识别结果计算待计算视频素材在视频文件中的时间轴信息。

可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码，上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

附图中的流程图和框图，图示了按照本公开各种实施例的方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本公开实施例中所涉及到的模块、单元可以通过软件的方式实现，也可以通过硬件的方式来实现。其中，模块、单元的名称在某种情况下并不构成对该模块或单元本身的限定，例如，请求获取模块还可以被描述为“获取时间轴计算请求，并确定与时间轴计算请求匹配的视频文件的模块”，信息识别单元还可以被描述为“根据光学字符识别算法，对全部图像帧中的数字信息进行识别的单元”。

以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本公开中所涉及的公开范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离上述公开构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种时间轴计算方法，其特征在于，包括：

获取时间轴计算请求，并确定与所述时间轴计算请求匹配的视频文件；

在所述视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材；

播放所述视频文件，并对所述视频文件所包含的全部图像帧进行截图；

根据预设识别算法，对所述全部图像帧的图像内容进行识别，根据识别结果计算所述待计算视频素材在所述视频文件中的时间轴信息。

2.根据权利要求1所述的方法，其特征在于，在播放所述视频文件之前，还包括：

根据所述待计算视频素材，对与所述视频文件关联的全部视频素材进行转换处理。

3.根据权利要求1所述的方法，其特征在于，所述视频素材包括图片，和/或文字。

4.根据权利要求2所述的方法，其特征在于，根据所述待计算视频素材，对与所述视频文件关联的全部视频素材进行转换处理，包括：

如果确定当前处理的目标视频素材为图片形式的待计算视频素材，则根据所述目标视频素材的图片参数和标识信息，生成第一替换图片，并用所述第一替换图片替换所述目标视频素材；其中，所述第一替换图片的图片背景为白色，所述第一替换图片的图片内容为根据所述标识信息生成的第一数字信息；

如果确定当前处理的目标视频素材为图片形式的非待计算视频素材，则根据所述目标视频素材的图片参数，生成第二替换图片，并用所述第二替换图片替换所述目标视频素材；其中，所述第二替换图片为透明图片；

如果确定当前处理的目标视频素材为文字形式的待计算视频素材，则根据所述目标视频素材的标识信息，生成第二数字信息，并将所述目标视频素材替换为所述第二数字信息；

如果确定当前处理的目标视频素材为文字形式的非待计算视频素材，则将所述目标视频素材替换为空字符串。

5.根据权利要求4所述的方法，其特征在于，根据预设识别算法，对所述全部图像帧的图像内容进行识别，根据识别结果计算所述待计算视频素材在所述视频文件中的时间轴信息，包括：

根据光学字符识别算法，对所述全部图像帧中的数字信息进行识别；

根据数字信息识别结果，以及所述待计算视频素材与数字信息的映射关系，确定与所述待计算视频素材匹配的图像帧；

根据所述图像帧在所述视频文件中的次序，以及所述视频文件的帧率，计算所述待计算视频素材在所述视频文件中的时间轴信息。

6.根据权利要求5所述的方法，其特征在于，在根据数字信息识别结果，以及所述待计算视频素材与数字信息的映射关系，确定与所述待计算视频素材匹配的图像帧之前，还包括：

滤除不符合预设数字信息格式的数字识别结果。

7.根据权利要求1所述的方法，其特征在于，播放所述视频文件，并对所述视频文件所包含的全部图像帧进行截图，包括：

通过无头浏览器播放所述视频文件；

根据播放顺序对所述视频文件所包含的全部图像帧进行截图。

8.一种时间轴计算装置，其特征在于，包括：

请求获取模块，用于获取时间轴计算请求，并确定与所述时间轴计算请求匹配的视频文件；

素材获取模块，用于在所述视频文件所关联的全部视频素材中，获取需要标注时间轴信息的待计算视频素材；

截图模块，用于播放所述视频文件，并对所述视频文件所包含的全部图像帧进行截图；

信息计算模块，用于根据预设识别算法，对所述全部图像帧的图像内容进行识别，根据识别结果计算所述待计算视频素材在所述视频文件中的时间轴信息。

9.一种电子设备，其特征在于，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序；

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的时间轴计算方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1-7中任一所述的时间轴计算方法。