CN111629233A

CN111629233A - 音视频转码方法及装置

Info

Publication number: CN111629233A
Application number: CN202010472541.XA
Authority: CN
Inventors: 马子朋; 潘梦云; 单衍景
Original assignee: Beijing Chinasys Technologies Co ltd
Current assignee: Beijing Chinasys Technologies Co ltd
Priority date: 2020-05-29
Filing date: 2020-05-29
Publication date: 2020-09-04
Anticipated expiration: 2040-05-29
Also published as: CN111629233B

Abstract

本发明提供一种音视频转码方法及装置，该方法包括：启动任务管理线程和任务调节线程；任务管理线程：判断是否有新音视频转码任务加入，若有，加入任务，基于当前任务数量和当前流转码任务数量判断是否成功添加，若成功，确定使用CPU或GPU启动任务；任务调节线程：判断当前任务调节线程中是否有任务，若有，在达到任务调整时间时根据当前资源的使用情况确定调节参数；启动转码任务，检测任务是否完成，若完成，设置状态为可回收状态；若未完成，检测任务是否为文件转码任务，若不是，任务正常执行，若是，任务的每帧转码前根据调节参数控制任务的执行速度。该方案既能够有效保证流转码的画面效果又能够充分利用设备性能完成文件转码任务。

Description

音视频转码方法及装置

技术领域

本发明涉及音视频转码技术领域，特别涉及一种音视频转码方法及装置。

背景技术

近年来，随着人民法院信息化建设的不断深入，音视频融合共享的需求越来越多，同时各级法院也在纷纷上马建立执行指挥中心，在客观上要求各个系统间的音视频信号能够互联互通。而在这些应用系统中，存在着各种各样的音视频源，这些音视频源可能来自不同的应用，有些来自数字法庭，有些来自视频监控，还有些来自视频会议；即使是相同的应用，也可能来自不同的厂家，这就导致音视频的规格，编码格式等各不相同，由于这些原因导致在法院不同厂家的音视频流格式不统一，不能统一管理播放的问题。

发明内容

本发明实施例提供了一种音视频转码方法及装置，解决了现有技术中音视频流格式不统一，不能统一管理播放的技术问题。

本发明实施例提供了一种音视频转码方法，应用于法院的音视频转码场景下，该方法包括：

启动音视频转码服务，所述音视频转码服务执行任务管理线程启动和任务调节线程启动；

对于任务管理线程启动：判断是否有新音视频转码任务加入，如果有，将新音视频转码任务加入任务管理线程中，在新音视频转码任务加入后，基于当前任务数量和当前流转码任务数量判断新音视频转码任务是否成功添加，如果成功添加，根据CPU和GPU的使用率确定使用CPU或GPU启动新音视频转码任务；

对于任务调节线程启动：判断当前任务调节线程中是否有音视频转码任务，如果没有，任务调节线程循环执行，如果有，获取当前资源的使用情况，判断是否达到任务调整时间，若达到，根据当前资源的使用情况确定调节参数；

启动音视频转码任务，检测音视频转码任务是否完成，如果完成，设置音视频转码任务状态为可回收状态；如果未完成，检测音视频转码任务是否为文件转码任务，如果不是，音视频转码任务正常执行，如果是，音视频转码任务的每帧转码前根据调节参数控制音视频转码任务的执行速度。

本发明实施例还提供了一种音视频转码装置，应用于法院的音视频转码场景下，该装置包括：

音视频转码服务启动模块，用于启动音视频转码服务，所述音视频转码服务执行任务管理线程启动和任务调节线程启动；

音视频转码任务启动模块，用于启动音视频转码任务，检测音视频转码任务是否完成，如果完成，设置音视频转码任务状态为可回收状态；如果未完成，检测音视频转码任务是否为文件转码任务，如果不是，音视频转码任务正常执行，如果是，音视频转码任务的每帧转码前根据调节参数控制音视频转码任务的执行速度。

本发明实施例还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述所述方法。

本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述所述方法的计算机程序。

在本发明实施例中，根据设备的性能资源(比如GPU\CPU)，在保证流转码效果的基础上，动态的进行任务调度管理，调整文件转码任务的速度，充分的使用设备的计算性能。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种音视频转码方法流程图；

图2是本发明实施例提供的一种音视频转码装置结构框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本发明实施例中，提供了一种音视频转码方法，该方法应用于法院的音视频转码场景下，如图1所示，该方法包括：

启动音视频转码任务(即任务线程)，检测音视频转码任务是否完成，如果完成，设置音视频转码任务状态为可回收状态；如果未完成，检测音视频转码任务是否为文件转码任务，如果不是，音视频转码任务正常执行，如果是，音视频转码任务的每帧转码前根据调节参数控制音视频转码任务的执行速度。

由图1所示的流程可知，在本发明实施例中，对于任务管理线程启动，还包括：

如果没有新音视频转码任务加入，判断任务管理线程中是否有原有音视频转码任务需要回收，若有，则回收原有音视频转码任务(即关闭可回收任务，从音视频转码任务中删除可回收的任务)，若没有，则判断是否有新音视频转码任务加入。

由图1所示的流程可知，在本发明实施例中，基于当前任务数量和当前流转码任务数量判断新音视频转码任务是否成功添加，包括：

判断当前任务数量是否达到最大任务数量，如果达到，新音视频转码任务添加失败，如果没有达到，判断新音视频转码任务是否为流转码任务，如果是流转码任务，则判断当前流转码任务数量是否达到流转码任务最大数量，如果达到，新音视频转码任务添加失败，如果没有达到，检测CPU和GPU的使用率。

根据目前法院业务的特点，文件转码任务较多，对实时性要求不高，设备可以根据最大任务限制，7*24小时运行，完成文件转码任务。

在本发明实施例中，现在通常的硬件设备都是一个异构平台，既有逻辑计算能力较强的CPU处理器，也有在音视频处理上表现优异的GPU处理器。在一台设备上同时使用CPU设备和GPU设备来完成任务能够最大限度的充分利用设备性能资源。在同一台设备上同时使用CPU和GPU进行音视频转码，对于任务的调用和设备性能的充分使用变的尤为重要。

由图1所示的流程可知，根据CPU和GPU的使用率确定使用CPU或GPU启动新音视频转码任务，包括：

如果GPU的使用率低于CPU的使用率，使用GPU启动新音视频转码任务；

如果GPU的使用率高于CPU的使用率，使用CPU启动新音视频转码任务。

在本发明实施例中，设定任务调整时间的原因是：根据CPU、GPU处理器使用率动态波动的特点，在完成一次文件转码速度调节后，等待一定的时间，再对处理器的使用率进行测量，这样可以防止频繁的进行任务调节。

在本发明实施例中，每个转码任务为单独线程，流转码任务按一倍速进行转码，文件转码任务可以调节转码速度。

由图1所示的流程可知，所述当前资源的使用情况包括CPU、GPU、内存、网络和I/O操作的使用情况；

根据当前资源的使用情况确定调节参数，包括：

如果当前资源的使用情况超出限制阈值，按照指定步长减慢文件转码任务；如果当前资源的使用情况低于限制阈值，按照指定步长加快文件转码任务。

具体的，此处阈值控制可以分两种，对于CPU和GPU如果发现其中一个低于最高阈值，就会去减慢任务速度，两个都低于最低阈值才会加快任务速度。

对于内存、网络、和IO操作，只检测最高阈值限制，不会检测最低阈值。如果某一项高于最高阈值现在，就会减慢任务速度。

具体的，通常需要转码的数据源有两种类型，网络数据流和文件数据流。对于网络数据流一般是按照一倍速的速度进行流发送，转码的速度需要一倍速的转码速度。对于文件数据流，根据当前任务量，可以动态调节转码的速度。如果当前没有其他任务，设备的性能使用率较低，可以以几倍速甚至十几倍速的速度完成音视频文件的转码。如果当前还有较多的其他任务，设备的性能使用率较高，可以降低音视频文件流的转码速度，以低于一倍速甚至以十几分之一，几十分之一的速度进行转码。从而既可以保证网络流的效果，又可以充分的利用设备性能。

将CPU和GPU的使用率稳定在一个合理的区间内，既能充分的利用设备处理器资源尽快的完成转码任务，同时也不会导致处理器的使用率过高导致软件的故障率增加。

基于同一发明构思，本发明实施例中还提供了一种音视频转码装置，如下面的实施例所述。由于音视频转码装置解决问题的原理与音视频转码方法相似，因此音视频转码装置的实施可以参见音视频转码方法的实施，重复之处不再赘述。以下所使用的，术语“单元”或者“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现，但是硬件，或者软件和硬件的组合的实现也是可能并被构想的。

图2是本发明实施例的音视频转码装置结构框图，如图2所示，该装置应用于法院的音视频转码场景下，包括：

该音视频转码可以是一个服务器可以同时支持流转码和文件转码两种转码任务。该服务器是个异构平台，可以同时存在CPU和GPU处理器。

在本发明实施例中，音视频转码服务启动模块还用于：

如果没有新音视频转码任务加入，判断任务管理线程中是否有原有音视频转码任务需要回收，若有，则回收原有音视频转码任务，若没有，则判断是否有新音视频转码任务加入。

在本发明实施例中，音视频转码服务启动模块具体用于：

按照如下方式基于当前任务数量和当前流转码任务数量判断新音视频转码任务是否成功添加：

在本发明实施例中，音视频转码服务启动模块具体用于：

按照如下方式根据CPU和GPU的使用率确定使用CPU或GPU启动新音视频转码任务：

在本发明实施例中，所述当前资源的使用情况包括CPU、GPU、内存、网络和I/O操作的使用情况；

音视频转码服务启动模块具体用于：

按照如下方式根据当前资源的使用情况确定调节参数：

综上所述，本发明提出的音视频转码方法及装置基于文件转码任务和流转码任务的特性，根据网络、内存、I/O、CPU使用率、GPU使用率各性能指标，动态的进行任务调度管理，调整文件转码任务的速度，其既能够有效保证流转码的画面效果又能够充分利用剩余的设备性能完成更多的文件转码任务。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims

1.一种音视频转码方法，其特征在于，应用于法院的音视频转码场景下，包括：

2.如权利要求1所述的音视频转码方法，其特征在于，对于任务管理线程启动，还包括：

3.如权利要求1所述的音视频转码方法，其特征在于，基于当前任务数量和当前流转码任务数量判断新音视频转码任务是否成功添加，包括：

4.如权利要求1所述的音视频转码方法，其特征在于，根据CPU和GPU的使用率确定使用CPU或GPU启动新音视频转码任务，包括：

5.如权利要求1所述的音视频转码方法，其特征在于，所述当前资源的使用情况包括CPU、GPU、内存、网络和I/O操作的使用情况；

根据当前资源的使用情况确定调节参数，包括：

6.一种音视频转码装置，其特征在于，应用于法院的音视频转码场景下，包括：

7.如权利要求6所述的音视频转码装置，其特征在于，音视频转码服务启动模块具体用于：

8.如权利要求6所述的音视频转码装置，其特征在于，音视频转码服务启动模块具体用于：

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5任一项所述方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至5任一项所述方法的计算机程序。