CN110049350A - 视频转码处理方法、装置、计算机设备和存储介质 - Google Patents

视频转码处理方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN110049350A
CN110049350A CN201910298028.0A CN201910298028A CN110049350A CN 110049350 A CN110049350 A CN 110049350A CN 201910298028 A CN201910298028 A CN 201910298028A CN 110049350 A CN110049350 A CN 110049350A
Authority
CN
China
Prior art keywords
video
transcoded
transcoding
frequency band
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910298028.0A
Other languages
English (en)
Other versions
CN110049350B (zh
Inventor
徐定伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OneConnect Smart Technology Co Ltd
Original Assignee
OneConnect Smart Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OneConnect Smart Technology Co Ltd filed Critical OneConnect Smart Technology Co Ltd
Priority to CN201910298028.0A priority Critical patent/CN110049350B/zh
Publication of CN110049350A publication Critical patent/CN110049350A/zh
Application granted granted Critical
Publication of CN110049350B publication Critical patent/CN110049350B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234345Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334Recording operations

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本申请涉及一种视频转码处理方法、装置、计算机设备和存储介质。所述方法涉及运营过程优化技术,包括:确定待转码视频段的待处理数量,并获取待转码视频段;当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;查询业务源对应预设的预分配集群节点;将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。采用本方法能够在确保资源利用率的同时提高视频转码处理效率。

Description

视频转码处理方法、装置、计算机设备和存储介质
技术领域
本申请涉及计算机技术领域,特别是涉及一种视频转码处理方法、装置、计算机设备和存储介质。
背景技术
随着多媒体技术的不断发展,视频的格式也越来越多样,如MPEG、AVI、MOV、ASF、RMVB和FLV等,不同格式的视频有不同应用场景。在不同格式的视频进行应用转换时,需要对视频进行转码处理。如金融行业中的双录视频,由于各网点不同会有不同的视频格式,需要对其进行视频转码处理。
目前对于视频的转码处理手段中,在由单一的转码服务器进行处理时,无法确保转码效率;而由集群服务器进行处理时,又容易出现分配不均的情况,造成服务器资源的浪费。
发明内容
基于此,有必要针对上述技术问题,提供一种能够在确保资源利用率的同时提高视频转码处理效率的视频转码处理方法、装置、计算机设备和存储介质。
一种视频转码处理方法,所述方法包括:
确定待转码视频段的待处理数量,并获取待转码视频段;
当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;
查询业务源对应预设的预分配集群节点;
将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
在其中一个实施例中,获取待转码视频段包括:
查询当前转码平均效率;
根据待处理数量、当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量;
按照视频段抓取频率,从预设的视频段数据库中,获取与视频段抓取数量对应数目的待转码视频段。
在其中一个实施例中,确定待转码视频段的业务源包括:
获取待转码视频段的视频标识信息;
查询预设的业务源表单;
从业务源表单中查询视频标识信息对应的业务源。
在其中一个实施例中,将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理包括:
从预分配集群节点下的转码服务器中随机抽取目标转码服务器;
查询目标转码服务器对应的转码线程池;
当转码线程池中的转码线程数大于0时,将待转码视频段分配至目标转码服务器中,由目标转码服务器对待转码视频段进行转码处理;
否则,返回从预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤。
在其中一个实施例中,在将待转码视频段分配至预分配集群节点下的转码服务器中之前,还包括:
确定转码服务器处于转码工作状态的服务器数量;
根据待处理数量和服务器数量计算得到服务器压力值;
根据服务器压力值,对预分配集群节点下的转码服务器的工作状态进行对应调整。
在其中一个实施例中,根据服务器压力值,对预分配集群节点下的转码服务器的工作状态进行对应调整包括:
查询预设的压力阈值区间;
当服务器压力值不处于压力阈值区间时,切换对应数目的转码服务器的工作状态。
在其中一个实施例中,还包括:
当待处理数量大于待转码数目阈值时,将待转码视频段随机分配至各转码服务器中,由转码服务器对待转码视频段进行转码处理。
一种视频转码处理装置,所述装置包括:
视频段获取模块,用于确定待转码视频段的待处理数量,并获取待转码视频段;
业务源确定模块,用于当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;
节点查询模块,用于查询业务源对应预设的预分配集群节点;
转码处理模块,用于将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
确定待转码视频段的待处理数量,并获取待转码视频段;
当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;
查询业务源对应预设的预分配集群节点;
将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
确定待转码视频段的待处理数量,并获取待转码视频段;
当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;
查询业务源对应预设的预分配集群节点;
将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
上述视频转码处理方法、装置、计算机设备和存储介质,在待转码视频段的待处理数量不超过预设的待转码数目阈值时,根据待转码视频段的业务源将其分配至对应预分配集群节点下的转码服务器中进行转码处理。在视频转码处理过程中,待转码视频段的待处理数量不超过预设的待转码数目阈值时,由待转码视频段的业务源对应预分配集群节点下的转码服务器进行集中转码处理,充分利用了转码服务器资源,且通过业务源对应预分配集群节点下的转码服务器针对性进行转码处理,有效提高了视频转码的处理效率。
附图说明
图1为一个实施例中视频转码处理方法的应用场景图;
图2为一个实施例中视频转码处理方法的流程示意图;
图3为一个实施例中转码服务器配置的流程示意图;
图4为另一个实施例中视频转码处理方法的流程示意图;
图5为一个实施例中视频转码处理装置的结构框图;
图6为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的视频转码处理方法,可以应用于如图1所示的应用环境中。其中,录制终端102和转码处理器106均通过网络与服务器104通过网络进行通信。录制终端102进行视频录制,录制得到的视频流直接发送至服务器104进行转码处理,或将其存储至存储器中。服务器104直接接收录制终端102发送的待转码视频段,或从存储器中提取待转码视频段,在待转码视频段的待处理数量不超过预设的待转码数目阈值时,服务器104根据待转码视频段的业务源将其分配至对应预分配集群节点下的转码处理器106中进行转码处理。其中,录制终端102可以但不限于是各种个人计算机、摄像机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备等可进行视频录制的电子设备,服务器104和转码处理器106可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种视频转码处理方法,以该方法应用于图1中的服务器104为例进行说明,包括以下步骤:
步骤S201:确定待转码视频段的待处理数量,并获取待转码视频段。
一般的,多个录制终端102会同时进行视频录制,各视频流会有不同时长,需要进行转码处理的视频流数据量动态变化。例如,对于金融行业中的双录视频,各个业务窗口均有设置录制终端102,而不同窗口处理的不同业务,双录视频的时长大小并不一。进行转码处理的转码服务器一般也设置有多台,此时,服务器104可以根据实际需求获取待转码视频段分配至转码服务器进行转码处理,以提高转码服务器的资源利用率和转码处理效率。
具体地,确定待转码视频段的待处理数量,例如可以根据待转码视频数据库确定待转码视频段的待处理数量,或者根据录制终端102的数量确定待处理数量。对于不同待处理数量的待转码视频段,可以设置不同的视频转码处理策略,以平衡转码服务器的资源率和转码处理效率。在具体应用时,可以从预设的转码视频数据库中获取待转码视频,或直接接收录制终端102录制得到的待转码视频。在一个实施方式中,可以基于Quartz定时任务框架建立待转码视频段的转码处理任务,其中,Quartz是一个完全由java编写的开源作业调度框架,其具有强大的调度功能,能够支持丰富多样的调度方法,可以满足各种常规及特殊需求。具体的,可以由建立的ICP_DR_JOB表对转码处理任务进行管理,该转码处理任务可以定时执行。在执行时,将转码处理任务插入该ICP_DR_JOB表中,并将其转台设置为待执行,以实现对待转码视频段的转率处理。
步骤S203:当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源。
对于不同待处理数量的待转码视频段设置不同的视频转码处理策略,在待处理数量较大时,可以直接按照随机分配原则将各待转码视频段分配至所有的转码服务器中;而在待处理数量不大时,可以先将待转码视频段进行预分配集群节点确定,再将其分配至对应的预分配集群节点下的转码服务器中进行转码处理,以提高各转码服务器的转码处理效率。
具体地,得到待转码视频段后,将待转码视频段的待处理数量与预设的待转码数目阈值进行比较。其中,待转码数目阈值可以根据实际需求进行设定,例如可以为转码服务器总数的倍数,如转码服务器总数的3倍或5倍等。当待处理数量小于等于预设的待转码数目阈值时,表明当前待转码视频段的待处理数量较小,可以由待转码视频段的业务源对应的预分配集群节点下的转码服务器进行针对性转码处理。其中,业务源可以为待转码视频段的对应来源,例如可以按照业务服务地区进行业务地来源划分,如广州、深圳、上海等业务服务地区作为业务源,不同业务源对应设有不同数量的转码服务器。
步骤S205:查询业务源对应预设的预分配集群节点。
确定待转码视频段的业务源后,查询该业务源对应预设的预分配集群节点,预分配集群节点下可以设置有多个能够同步进行视频转码处理的转码服务器。不同的业务源可以设置不同体量的预分配集群节点,例如对于业务量大的业务源,可以设置多个预分配集群节点。相同业务源的待转码视频段由该业务源对应预分配集群节点下的转码服务器进行转码处理,可以有效提高转码处理效率。
步骤S207:将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
确定预分配集群节点后,将待转码视频段分配至该预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。预分配集群节点下设置有多个转码服务器,多个转码服务器可以进行同步视频转码处理,以此可以同时针对处理多个相同业务源的待转码视频段,充分利用该预分配集群节点下各转码服务器的服务器资源,有效提高视频转码处理效率。
上述视频转码处理方法中,在待转码视频段的待处理数量不超过预设的待转码数目阈值时,根据待转码视频段的业务源将其分配至对应预分配集群节点下的转码服务器中进行转码处理。在视频转码处理过程中,待转码视频段的待处理数量不超过预设的待转码数目阈值时,由待转码视频段的业务源对应预分配集群节点下的转码服务器进行集中转码处理,充分利用了转码服务器资源,且通过业务源对应预分配集群节点下的转码服务器针对性进行转码处理,有效提高了视频转码的处理效率。
在一个实施例中,获取待转码视频段包括:查询当前转码平均效率;根据待处理数量、当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量;按照视频段抓取频率,从预设的视频段数据库中,获取与视频段抓取数量对应数目的待转码视频段。
在获取待转码视频段进行视频转码处理时,可以根据预设的视频段抓取频率结合待转码视频段的待处理数量和当前转码平均效率确定视频段抓取数量,并按照该视频段抓取数量获取对应数目的待转码视频段进行视频转码处理。
具体地,查询当前转码平均效率,当前转码平均效率可以为所有转码服务器的转码处理效率计算得到,其反应了转码服务器系统的转码处理吞吐能力。根据待处理数量、当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量,其中,待处理数量为所需转码处理的待转码视频段总量;视频段抓取频率为服务器104获取待转码视频段的抓取频率,其可以根据实际需求进行设定,如可以为一小时抓取一次;视频段抓取数量为服务器104每次抓取待转码视频段时的抓取数量。例如,对于基于Quartz定时任务框架建立待转码视频段的转码处理任务,视频段抓取频率可以为一小时一次,视频段抓取数量可以为15单,即15段待转码视频段。
进一步地,待处理数量和当前转码平均效率的比值应等于视频段抓取频率与视频段抓取数的乘积,如此可以确保待转码视频段能够得到快速转码处理。确定视频段抓取数量后,按照视频段抓取频率从预设的视频段数据库中抓取对应数量的待转码视频段进行视频转码处理。其中,视频段数据库可以存储所有需要进行视频转码处理的待转码视频段,具体地可以接收来自各录制终端102录制的视频流数据。
在一个实施例中,确定待转码视频段的业务源包括:获取待转码视频段的视频标识信息;查询预设的业务源表单;从业务源表单中查询视频标识信息对应的业务源。
本实施例中,待转码视频段的业务源根据待转码视频段的视频标识信息确定。具体地,在确定待转码视频段的业务源时,获取待转码视频段的视频标识信息,视频标识信息可以为用于唯一区分待转码视频段的编码标识信息。查询预设的业务源表单,该业务源表单记录有各种视频标识信息对应的业务源。按照待转码视频段的视频标识信息,从业务源表单中查询视频标识信息对应的业务源,从而确定该待转码视频段的业务源。业务源可以为待转码视频段的对应来源,不同业务源对应设置不同的预分配集群节点,预分配集群节点下设有多个转码服务器,可以对待转码视频段进行转码处理。
在一个实施例中,将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理包括:从预分配集群节点下的转码服务器中随机抽取目标转码服务器;查询目标转码服务器对应的转码线程池;当转码线程池中的转码线程数大于0时,将待转码视频段分配至目标转码服务器中,由目标转码服务器对待转码视频段进行转码处理;否则,返回从预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤。
本实施例中,可以通过线程池机制将待转码视频段分配至预分配集群节点下的转码服务器中,以确保各转码服务器能够及时对待转码视频段进行转码处理,确保转码处理效率。
具体地,从预分配集群节点下的转码服务器中随机抽取目标转码服务器,在查询得到业务源对应的预分配集群节点后,从该预分配集群节点下的转码服务器中随机抽取一转码服务器,将其作为分配待转码视频段得目标转码服务器。确定目标转码服务器后,查询该目标转码服务器对应的转码线程池,其中,转码线程池用于管理对应转码服务器的各转码线程,转码服务器通过各转码线程对待转码视频段进行转码处理。转码线程池的大小,即转码线程池中转码线程数可以根据对应转码服务器的性能和资源进行设置。检测转码线程池中的转码线程数,当转码线程数大于0时,即表明该目标转码服务器可以进行转码处理,则将待转码视频段分配至目标转码服务器中,由目标转码服务器对待转码视频段进行转码处理。当转码线程池中的转码线程数为0时,返回从预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤,即返回重新确定目标转码服务器,从而确保待转码视频段能够及时得到转码处理。
在具体实现时,转码服务器可以通过FFmpeg转码工具来进行视频转码处理。其中,转码线程池的大小可以设置为服务器CPU*2,此时,可以使转码服务器的转码效率达到最高。当检测到转码服务器对应的转码线程池中转码线程数为0,即该转码服务器已达到最高转码效率时,进行重新分配,可以将待转码视频段转分配至其他转码服务器,以确保各转码服务器可以处于最高转码效率的工作状态,提高了转码处理效率,也确保了转码服务器的资源能够得到充分利用。
在一个实施例中,如图3所示,在将待转码视频段分配至预分配集群节点下的转码服务器中之前,还包括转码服务器配置的步骤,具体包括:
步骤S301:确定转码服务器处于转码工作状态的服务器数量。
本实施例中,在将待转码视频段分配至转码服务器之前,可以根据各转码服务器当前的转码处理压力进行配置,以增加或减少处于工作状态的转码服务器数量。一般的,预分配集群节点下设有多个转码服务器,但并不一定所有转码服务器均处于转码工作状态,可以保留部分转码服务器作为备用服务器,在有转码服务器发生故障时可以及时进行替换,也可以根据待转码视频段的待处理数量进行动态调整从而在确保转码处理效率的同时,提高转码服务器的资源利用率。
具体地,确定转码服务器处于转码工作状态的服务器数量。在应用时可以逐一确定预分配集群节点下各转码服务器的工作状态,从而确定处于转码工作状态的服务器数量。
步骤S303:根据待处理数量和服务器数量计算得到服务器压力值。
得到服务器数量后,结合待处理数量计算得到服务器压力值,服务器压力值反映了分配集群节点下转码服务器的当前转码处理负荷程度。当服务器压力值过高时,表明待转码视频段的待处理数量远大于处于转码工作状态的服务器数量,需要增加转码工作状态的转码服务器进行转码处理,以保证视频转码处理效率。具体地,服务器压力值可以由待处理数量和服务器数量的商计算得到。
步骤S305:根据服务器压力值,对预分配集群节点下的转码服务器的工作状态进行对应调整。
得到服务器压力值后,按照该服务器压力值对预分配集群节点下的转码服务器的工作状态进行对应调整。例如,当服务器压力值过低时,表明待转码视频段的待处理数量较小,当前处于转码工作状态的转码服务器的资源利用率较低,此时可以通过减少处于转码工作状态的转码服务器的服务器数量,从而在确保视频转码处理效率的前提下,提高转码服务器的资源利用率。
本实施例中,在将待转码视频段分配至转码服务器之前,根据各转码服务器当前的转码处理压力对转码服务器进行动态配置,可以在确保转码处理效率的同时,提高转码服务器的资源利用率。
在一个实施例中,根据服务器压力值,对预分配集群节点下的转码服务器的工作状态进行对应调整包括:查询预设的压力阈值区间;当服务器压力值不处于压力阈值区间时,切换对应数目的转码服务器的工作状态。
本实施例中,当服务器压力值不处于预设的正常压力值范围内时,对应调整转码服务器的工作状态。具体地,查询预设的压力阈值区间,压力阈值区间根据实际需求进行设定,不同的业务源,不同的预分配集群节点可以设置不同的压力阈值区间。判断服务器压力值是否处于该压力阈值区间,若否,则切换对应数目的转码服务器的工作状态,即增加或减少处于工作状态的转码服务器数量,以实现对服务器压力值的调整。
在一个实施例中,还包括:当待处理数量大于待转码数目阈值时,将待转码视频段随机分配至各转码服务器中,由转码服务器对待转码视频段进行转码处理。
本实施例中,在待转码视频段的待处理数量较大时,为了实现快速转码处理,可以直接基于Quartz的随机分配原则,向所有预分配集群节点的所有转码服务器进行待转码视频段的随机分配,如可以通过各转码服务器的编号进行随机分配,由于数据量较大,可以实现各转码服务器的平均分配,从而实现了集群内所有机器同时做转码的高效运作方式。
具体地,当待处理数量大于待转码数目阈值时,将待转码视频段随机分配至各转码服务器中,如可以随机抽取一转码服务器的编号,将其作为目标转码服务器,并将该待转码视频段分配至该目标转码服务器中,由其对待转码视频段进行转码处理。
在一个实施例中,如图4所示,提供了一种视频转码处理方法,包括:
步骤S401:确定待转码视频段的待处理数量,并查询当前转码平均效率;
步骤S402:根据待处理数量、当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量;
步骤S403:按照视频段抓取频率,从预设的视频段数据库中,获取与视频段抓取数量对应数目的待转码视频段。
本实施例中,在获取待转码视频段进行视频转码处理时,可以根据预设的视频段抓取频率结合待转码视频段的待处理数量和当前转码平均效率确定视频段抓取数量,并按照该视频段抓取数量获取对应数目的待转码视频段进行视频转码处理。
步骤S404:当待处理数量小于等于预设的待转码数目阈值时,获取待转码视频段的视频标识信息;
步骤S405:查询预设的业务源表单;
步骤S406:从业务源表单中查询视频标识信息对应的业务源;
步骤S407:查询业务源对应预设的预分配集群节点。
本实施例中,对于不同待处理数量的待转码视频段设置不同的视频转码处理策略。具体地,当待处理数量小于等于预设的待转码数目阈值时,先将待转码视频段进行预分配集群节点确定,再将其分配至对应的预分配集群节点下的转码服务器中进行转码处理,以提高各转码服务器的转码处理效率。
步骤S408:从预分配集群节点下的转码服务器中随机抽取目标转码服务器;
步骤S409:查询目标转码服务器对应的转码线程池;
步骤S410:当转码线程池中的转码线程数大于0时,将待转码视频段分配至目标转码服务器中,由目标转码服务器对待转码视频段进行转码处理;否则,返回从预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤。
本实施例中,通过线程池机制将待转码视频段分配至预分配集群节点下的转码服务器中,以确保各转码服务器能够及时对待转码视频段进行转码处理,确保转码处理效率。
在将待转码视频段分配至预分配集群节点下的转码服务器中之前,还包括转码服务器配置的步骤,具体包括:确定转码服务器处于转码工作状态的服务器数量;根据待处理数量和服务器数量计算得到服务器压力值;查询预设的压力阈值区间;当服务器压力值不处于压力阈值区间时,切换对应数目的转码服务器的工作状态。通过在将待转码视频段分配至转码服务器之前,根据各转码服务器当前的转码处理压力对转码服务器进行动态配置,可以在确保转码处理效率的同时,提高转码服务器的资源利用率。
步骤S411:当待处理数量大于待转码数目阈值时,将待转码视频段随机分配至各转码服务器中,由转码服务器对待转码视频段进行转码处理。
本实施例中,在待转码视频段的待处理数量较大时,为了实现快速转码处理,可以直接基于Quartz的随机分配原则,向所有预分配集群节点的所有转码服务器进行待转码视频段的随机分配,如可以通过各转码服务器的编号进行随机分配,由于数据量较大,可以实现各转码服务器的平均分配,从而实现了集群内所有机器同时做转码的高效运作方式。
应该理解的是,虽然图2-4的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-4中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图5所示,提供了一种视频转码处理装置,包括:视频段获取模块501、业务源确定模块503、节点查询模块505和转码处理模块507,其中:
视频段获取模块501,用于确定待转码视频段的待处理数量,并获取待转码视频段;
业务源确定模块503,用于当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;
节点查询模块505,用于查询业务源对应预设的预分配集群节点;
转码处理模块507,用于将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
在一个实施例中,视频段获取模块501包括效率查询单元、抓取数量单元和视频段获取单元,其中:效率查询单元,用于查询当前转码平均效率;抓取数量单元,用于根据待处理数量、当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量;视频段获取单元,用于按照视频段抓取频率,从预设的视频段数据库中,获取与视频段抓取数量对应数目的待转码视频段。
在一个实施例中,业务源确定模块503包括标识获取单元、表单查询单元和业务源确定单元,其中:标识获取单元,用于获取待转码视频段的视频标识信息;表单查询单元,用于查询预设的业务源表单;业务源确定单元,用于从业务源表单中查询视频标识信息对应的业务源。
在一个实施例中,转码处理模块507包括目标服务器单元、线程池单元、转码处理单元和再分配单元,其中:目标服务器单元,用于从预分配集群节点下的转码服务器中随机抽取目标转码服务器;线程池单元,用于查询目标转码服务器对应的转码线程池;转码处理单元,用于当转码线程池中的转码线程数大于0时,将待转码视频段分配至目标转码服务器中,由目标转码服务器对待转码视频段进行转码处理;再分配单元,用于否则,返回从预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤。
在一个实施例中,还包括服务器数量模块、服务器压力模块和服务器调整模块,其中:服务器数量模块,用于确定转码服务器处于转码工作状态的服务器数量;服务器压力模块,用于根据待处理数量和服务器数量计算得到服务器压力值;服务器调整模块,用于根据服务器压力值,对预分配集群节点下的转码服务器的工作状态进行对应调整。
在一个实施例中,服务器调整模块包括阈值区间单元和工作状态切换单元,其中:阈值区间单元,用于查询预设的压力阈值区间;工作状态切换单元,用于当服务器压力值不处于压力阈值区间时,切换对应数目的转码服务器的工作状态。
在一个实施例中,还包括随机分配模块,用于当待处理数量大于待转码数目阈值时,将待转码视频段随机分配至各转码服务器中,由转码服务器对待转码视频段进行转码处理。
关于视频转码处理装置的具体限定可以参见上文中对于视频转码处理方法的限定,在此不再赘述。上述视频转码处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种视频转码处理方法。
本领域技术人员可以理解,图6中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,该存储器存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
确定待转码视频段的待处理数量,并获取待转码视频段;
当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;
查询业务源对应预设的预分配集群节点;
将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:查询当前转码平均效率;根据待处理数量、当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量;按照视频段抓取频率,从预设的视频段数据库中,获取与视频段抓取数量对应数目的待转码视频段。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:获取待转码视频段的视频标识信息;查询预设的业务源表单;从业务源表单中查询视频标识信息对应的业务源。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:从预分配集群节点下的转码服务器中随机抽取目标转码服务器;查询目标转码服务器对应的转码线程池;当转码线程池中的转码线程数大于0时,将待转码视频段分配至目标转码服务器中,由目标转码服务器对待转码视频段进行转码处理;否则,返回从预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:确定转码服务器处于转码工作状态的服务器数量;根据待处理数量和服务器数量计算得到服务器压力值;根据服务器压力值,对预分配集群节点下的转码服务器的工作状态进行对应调整。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:查询预设的压力阈值区间;当服务器压力值不处于压力阈值区间时,切换对应数目的转码服务器的工作状态。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:当待处理数量大于待转码数目阈值时,将待转码视频段随机分配至各转码服务器中,由转码服务器对待转码视频段进行转码处理。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
确定待转码视频段的待处理数量,并获取待转码视频段;
当待处理数量小于等于预设的待转码数目阈值时,确定待转码视频段的业务源;
查询业务源对应预设的预分配集群节点;
将待转码视频段分配至预分配集群节点下的转码服务器中,由转码服务器对待转码视频段进行转码处理。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:查询当前转码平均效率;根据待处理数量、当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量;按照视频段抓取频率,从预设的视频段数据库中,获取与视频段抓取数量对应数目的待转码视频段。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:获取待转码视频段的视频标识信息;查询预设的业务源表单;从业务源表单中查询视频标识信息对应的业务源。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:从预分配集群节点下的转码服务器中随机抽取目标转码服务器;查询目标转码服务器对应的转码线程池;当转码线程池中的转码线程数大于0时,将待转码视频段分配至目标转码服务器中,由目标转码服务器对待转码视频段进行转码处理;否则,返回从预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:确定转码服务器处于转码工作状态的服务器数量;根据待处理数量和服务器数量计算得到服务器压力值;根据服务器压力值,对预分配集群节点下的转码服务器的工作状态进行对应调整。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:查询预设的压力阈值区间;当服务器压力值不处于压力阈值区间时,切换对应数目的转码服务器的工作状态。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:当待处理数量大于待转码数目阈值时,将待转码视频段随机分配至各转码服务器中,由转码服务器对待转码视频段进行转码处理。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种视频转码处理方法,所述方法包括:
确定待转码视频段的待处理数量,并获取所述待转码视频段;
当所述待处理数量小于等于预设的待转码数目阈值时,确定所述待转码视频段的业务源;
查询所述业务源对应预设的预分配集群节点;
将所述待转码视频段分配至所述预分配集群节点下的转码服务器中,由所述转码服务器对所述待转码视频段进行转码处理。
2.根据权利要求1所述的方法,其特征在于,获取所述待转码视频段包括:
查询当前转码平均效率;
根据所述待处理数量、所述当前转码平均效率和预设的视频段抓取频率确定视频段抓取数量;
按照所述视频段抓取频率,从预设的视频段数据库中,获取与所述视频段抓取数量对应数目的所述待转码视频段。
3.根据权利要求1所述的方法,其特征在于,所述确定所述待转码视频段的业务源包括:
获取所述待转码视频段的视频标识信息;
查询预设的业务源表单;
从所述业务源表单中查询所述视频标识信息对应的业务源。
4.根据权利要求1所述的方法,其特征在于,所述将所述待转码视频段分配至所述预分配集群节点下的转码服务器中,由所述转码服务器对所述待转码视频段进行转码处理包括:
从所述预分配集群节点下的转码服务器中随机抽取目标转码服务器;
查询所述目标转码服务器对应的转码线程池;
当所述转码线程池中的转码线程数大于0时,将所述待转码视频段分配至所述目标转码服务器中,由所述目标转码服务器对所述待转码视频段进行转码处理;
否则,返回所述从所述预分配集群节点下的转码服务器中随机抽取目标转码服务器的步骤。
5.根据权利要求1所述的方法,其特征在于,在所述将所述待转码视频段分配至所述预分配集群节点下的转码服务器中之前,还包括:
确定所述转码服务器处于转码工作状态的服务器数量;
根据所述待处理数量和所述服务器数量计算得到服务器压力值;
根据所述服务器压力值,对所述预分配集群节点下的转码服务器的工作状态进行对应调整。
6.根据权利要求5所述的方法,其特征在于,所述根据所述服务器压力值,对所述预分配集群节点下的转码服务器的工作状态进行对应调整包括:
查询预设的压力阈值区间;
当所述服务器压力值不处于所述压力阈值区间时,切换对应数目的所述转码服务器的工作状态。
7.根据权利要求1至6任意一项所述的方法,其特征在于,还包括:
当所述待处理数量大于所述待转码数目阈值时,将所述待转码视频段随机分配至各所述转码服务器中,由所述转码服务器对所述待转码视频段进行转码处理。
8.一种视频转码处理装置,其特征在于,所述装置包括:
视频段获取模块,用于确定待转码视频段的待处理数量,并获取所述待转码视频段;
业务源确定模块,用于当所述待处理数量小于等于预设的待转码数目阈值时,确定所述待转码视频段的业务源;
节点查询模块,用于查询所述业务源对应预设的预分配集群节点;
转码处理模块,用于将所述待转码视频段分配至所述预分配集群节点下的转码服务器中,由所述转码服务器对所述待转码视频段进行转码处理。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
CN201910298028.0A 2019-04-15 2019-04-15 视频转码处理方法、装置、计算机设备和存储介质 Active CN110049350B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910298028.0A CN110049350B (zh) 2019-04-15 2019-04-15 视频转码处理方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910298028.0A CN110049350B (zh) 2019-04-15 2019-04-15 视频转码处理方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN110049350A true CN110049350A (zh) 2019-07-23
CN110049350B CN110049350B (zh) 2022-10-11

Family

ID=67277003

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910298028.0A Active CN110049350B (zh) 2019-04-15 2019-04-15 视频转码处理方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN110049350B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111163335A (zh) * 2019-12-31 2020-05-15 深圳市瑞讯云技术有限公司 一种分布式服务器的视频处理方法及装置
CN111629233A (zh) * 2020-05-29 2020-09-04 北京华夏电通科技有限公司 音视频转码方法及装置

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110137973A1 (en) * 2009-12-07 2011-06-09 Yottaa Inc System and method for website performance optimization and internet traffic processing
CN102572530A (zh) * 2011-12-30 2012-07-11 中兴通讯股份有限公司 流媒体业务频道调整方法及系统
CN102782653A (zh) * 2010-02-05 2012-11-14 日本电气株式会社 负载控制设备
CN105373429A (zh) * 2014-08-20 2016-03-02 腾讯科技(深圳)有限公司 任务调度方法、装置及系统
CN106027596A (zh) * 2016-04-27 2016-10-12 乐视控股(北京)有限公司 一种任务分发方法和装置
CN107295110A (zh) * 2017-08-16 2017-10-24 网宿科技股份有限公司 计算任务的处理方法、边缘节点、业务服务器及系统
TWI608360B (zh) * 2016-09-02 2017-12-11 群暉科技股份有限公司 任務執行方法及任務調度系統
CN107957903A (zh) * 2017-11-13 2018-04-24 中国平安财产保险股份有限公司 异步任务调度方法、服务器及存储介质
CN109343941A (zh) * 2018-08-14 2019-02-15 阿里巴巴集团控股有限公司 任务处理方法、装置、电子设备及计算机可读存储介质

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110137973A1 (en) * 2009-12-07 2011-06-09 Yottaa Inc System and method for website performance optimization and internet traffic processing
CN102782653A (zh) * 2010-02-05 2012-11-14 日本电气株式会社 负载控制设备
US20130104131A1 (en) * 2010-02-05 2013-04-25 Nec Corporation Load control device
CN102572530A (zh) * 2011-12-30 2012-07-11 中兴通讯股份有限公司 流媒体业务频道调整方法及系统
CN105373429A (zh) * 2014-08-20 2016-03-02 腾讯科技(深圳)有限公司 任务调度方法、装置及系统
CN106027596A (zh) * 2016-04-27 2016-10-12 乐视控股(北京)有限公司 一种任务分发方法和装置
TWI608360B (zh) * 2016-09-02 2017-12-11 群暉科技股份有限公司 任務執行方法及任務調度系統
CN107295110A (zh) * 2017-08-16 2017-10-24 网宿科技股份有限公司 计算任务的处理方法、边缘节点、业务服务器及系统
CN107957903A (zh) * 2017-11-13 2018-04-24 中国平安财产保险股份有限公司 异步任务调度方法、服务器及存储介质
CN109343941A (zh) * 2018-08-14 2019-02-15 阿里巴巴集团控股有限公司 任务处理方法、装置、电子设备及计算机可读存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111163335A (zh) * 2019-12-31 2020-05-15 深圳市瑞讯云技术有限公司 一种分布式服务器的视频处理方法及装置
CN111629233A (zh) * 2020-05-29 2020-09-04 北京华夏电通科技有限公司 音视频转码方法及装置
CN111629233B (zh) * 2020-05-29 2022-03-25 北京华夏电通科技股份有限公司 音视频转码方法及装置

Also Published As

Publication number Publication date
CN110049350B (zh) 2022-10-11

Similar Documents

Publication Publication Date Title
US11146502B2 (en) Method and apparatus for allocating resource
CN110351357B (zh) 服务器限流方法、装置、计算机设备以及存储介质
US9176805B2 (en) Memory dump optimization in a system
CN107426274B (zh) 基于时序的业务应用及监控分析调度的方法和系统
WO2017097124A1 (zh) 基于分库分表的任务传输方法、装置及系统
CN109784703A (zh) 业务数据处理方法、装置、计算机设备和存储介质
CN110049350A (zh) 视频转码处理方法、装置、计算机设备和存储介质
CN111338779B (zh) 资源分配方法、装置、计算机设备和存储介质
CN105224244A (zh) 一种文件存储的方法和装置
CN110995616A (zh) 一种大流量服务器的管理方法、设备及可读介质
CN110149377A (zh) 一种视频服务节点资源分配方法、系统、装置及存储介质
CN109040191A (zh) 文件下载方法、装置、计算机设备和存储介质
CN115150473A (zh) 一种资源调度方法、装置及存储介质
CN109492856A (zh) 业务请求处理方法、装置、计算机设备以及存储介质
CN100442709C (zh) 一种网络管理系统中的设备操作方法
US20100058020A1 (en) Mobile phone and method for managing memory of the mobile phone
CN105450679A (zh) 进行数据云存储的方法及系统
CN108664322A (zh) 数据处理方法及系统
CN104052778A (zh) 分布式的话单统计方法、装置以及系统
CN115292280A (zh) 一种跨区域的数据调度方法、装置、设备及存储介质
CN105278873B (zh) 一种磁盘块的分配方法及装置
CN104679666A (zh) 一种嵌入式系统内存的管理方法及管理系统
CN111245794A (zh) 数据传输方法和装置
CN112579305A (zh) 任务处理方法及装置、非易失性存储介质和设备
CN108491167A (zh) 一种工业过程工况数据快速随机分布存储方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant