CN108874535A - 一种任务调节方法、计算机可读存储介质及终端设备 - Google Patents

一种任务调节方法、计算机可读存储介质及终端设备 Download PDF

Info

Publication number
CN108874535A
CN108874535A CN201810457083.5A CN201810457083A CN108874535A CN 108874535 A CN108874535 A CN 108874535A CN 201810457083 A CN201810457083 A CN 201810457083A CN 108874535 A CN108874535 A CN 108874535A
Authority
CN
China
Prior art keywords
utilization rate
task
goal systems
para
benchmark
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810457083.5A
Other languages
English (en)
Other versions
CN108874535B (zh
Inventor
卢汤师
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Life Insurance Company of China Ltd
Original Assignee
Ping An Life Insurance Company of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Life Insurance Company of China Ltd filed Critical Ping An Life Insurance Company of China Ltd
Priority to CN201810457083.5A priority Critical patent/CN108874535B/zh
Publication of CN108874535A publication Critical patent/CN108874535A/zh
Application granted granted Critical
Publication of CN108874535B publication Critical patent/CN108874535B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/505Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/50Indexing scheme relating to G06F9/50
    • G06F2209/501Performance criteria
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00Indexing scheme relating to G06F9/00
    • G06F2209/50Indexing scheme relating to G06F9/50
    • G06F2209/5022Workload threshold

Abstract

本发明属于计算机技术领域,尤其涉及一种任务调节方法、计算机可读存储介质及终端设备。所述方法分别获取目标系统中的各种硬件资源的利用率;根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率;判断所述目标系统的整体利用率是否大于预设的第一阈值;若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率;从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务;暂停所述第一调节任务在所述目标系统中的运行。当资源消耗过大时,通过对任务运行情况进行调节,可以有效减少对系统资源的消耗,保证了整个系统的正常运行。

Description

一种任务调节方法、计算机可读存储介质及终端设备
技术领域
本发明属于计算机技术领域,尤其涉及一种任务调节方法、计算机可读存储介质及终端设备。
背景技术
在业务系统中,常常会有多个任务同时运行,以充分利用系统的硬件资源,但是,随着系统中同时运行的任务数的不断累加,可能会超出系统的承载能力,一旦系统达到瓶颈点后爆发,可能导致部分系统甚至整个系统无法使用,如果是多个系统共处于一个主机,甚至可能导致主机下的所有系统无法服务,造成巨大的经济损失。
发明内容
有鉴于此,本发明实施例提供了一种任务调节方法、计算机可读存储介质及终端设备,以解决系统中同时运行的任务数超出系统的承载能力时可能导致系统无法使用的问题。
本发明实施例的第一方面提供了一种任务调节方法,可以包括:
分别获取目标系统中的各种硬件资源的利用率;
根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率;
判断所述目标系统的整体利用率是否大于预设的第一阈值;
若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,所述基准利用率为各个任务单独在所述目标系统中运行时所述目标系统的整体利用率;
从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务;
暂停所述第一调节任务在所述目标系统中的运行。
本发明实施例的第二方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机可读指令,所述计算机可读指令被处理器执行时实现如下步骤:
分别获取目标系统中的各种硬件资源的利用率;
根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率;
判断所述目标系统的整体利用率是否大于预设的第一阈值;
若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,所述基准利用率为各个任务单独在所述目标系统中运行时所述目标系统的整体利用率;
从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务;
暂停所述第一调节任务在所述目标系统中的运行。
本发明实施例的第三方面提供了一种任务调节终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令,所述处理器执行所述计算机可读指令时实现如下步骤:
分别获取目标系统中的各种硬件资源的利用率;
根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率;
判断所述目标系统的整体利用率是否大于预设的第一阈值;
若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,所述基准利用率为各个任务单独在所述目标系统中运行时所述目标系统的整体利用率;
从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务;
暂停所述第一调节任务在所述目标系统中的运行。
本发明实施例与现有技术相比存在的有益效果是:本发明实施例首先分别获取目标系统中的各种硬件资源的利用率,并根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率,然后判断所述目标系统的整体利用率是否大于预设的第一阈值,若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,接着从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务,并暂停所述第一调节任务在所述目标系统中的运行。本发明实施例对目标系统的资源使用情况提供了一套完备的度量体系,从而可以精确的度量目标系统的资源使用情况,当资源消耗过大时,通过对任务运行情况进行调节,可以有效减少对系统资源的消耗,保证了整个系统的正常运行。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。
图1为本发明实施例中一种任务调节方法的一个实施例流程图;
图2为硬件资源的权重系数的设置过程的示意流程图;
图3为基准利用率的设置过程的示意流程图;
图4为本发明实施例中一种任务调节装置的一个实施例结构图;
图5为本发明实施例中一种任务调节终端设备的示意框图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,下面所描述的实施例仅仅是本发明一部分实施例,而非全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
请参阅图1,本发明实施例中一种任务调节方法的一个实施例可以包括:
步骤S101、分别获取目标系统中的各种硬件资源的利用率。
所述目标系统可以为支持SQL脚本运行的数据库系统,所述各种硬件资源的利用率可以包括CPU利用率、内存利用率、IO资源利用率等等。
其中,CPU利用率可以通过以下过程进行获取:
在第一采样时刻,提取CPU运行状态数据,在第二采样时刻,提取CPU运行状态数据,第二采样时刻与所述第一采样时刻间隔预设的时长(例如0.1秒、0.2秒、0.5秒等等),根据在第一采样时刻的CPU运行状态数据和在第二采样时刻的CPU运行状态数据计算CPU利用率。
具体地,提取出以下CPU运行状态数据:
User:处于用户态的运行时间,不包含nice值为负的进程;
nice:nice值为负的进程所占用的CPU时间,nice值是系统中表示静态优先级的数值,每个进程都有自己的静态优先级,优先级高的进程得以优先运行;
system:处于核心态的运行时间;
idle:除IO等待时间以外的其他等待时间;
iowait:IO等待时间;
Irq:服务中断时间;
softirq:软中断时间;
stealstolen:在虚拟环境运行时花费在其他操作系统的时间;
guest:操作系统虚拟CPU花费的时间;
guest_nice:操作系统虚拟CPU花费在nice进程上的时间。
先后采样两个足够短的时间间隔的CPU运行状态数据,分别记作t1、t2,其中t1、t2的结构均为(user、nice、system、idle、iowait、irq、softirq、stealstolen、guest、guest_nice)的10元组;把第一次的所有10元组数据求和,得到totalCPUTime1;把第二次的所有10元组数据求和,得到totalCPUTime2;获得第一次的idle数据,记为idle1;获得第二次的idle数据,记为idle2;则CPU利用率λCPU可以通过下式计算:
内存利用率可以通过以下过程进行获取:
统计内存空间总量以及内存空间可使用的余量,根据内存空间总量以及内存空间可使用的余量计算内存利用率,即:
其中,MemTotal为内存空间总量,MemFree为内存空间可使用的余量,λMemory为内存利用率
IO资源利用率可以通过以下过程进行获取:
统计IO读写的总次数以及IO读写的理论次数,将两者的比值作为IO资源利用率,即:
其中,NumIO为IO读写的总次数,MaxNumIO为IO读写的理论次数,λIO为内存利用率。
步骤S102、根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率。
具体地,可以根据下式计算所述目标系统的整体利用率:
其中,p为硬件资源的序号,1≤p≤P,P为所述目标系统中的硬件资源的种类总数,ParaSysp为所述目标系统中的第p种硬件资源的利用率,例如,ParaSys1可以为CPU利用率,ParaSys2可以为内存利用率,ParaSys3可以为IO资源利用率,Weightp为所述目标系统中的第p种硬件资源的权重系数,IndexTotal为所述目标系统的整体利用率。
优选地,如图2所示,所述权重系数的设置过程可以包括:
步骤S201、获取所述目标系统在预设的统计时间段内的历史运行记录。
可以根据实际情况对所述统计时间段的取值进行设置,例如,可以将其设置为1天、1周、1个月或者其它取值。
步骤S202、将所述统计时间段划分为T个子时间段。
T为大于1的整数,可以根据实际情况对其取值进行设置,例如,可以将其设置为5、10、20或者其它取值。
步骤S203、根据所述历史运行记录分别统计各种硬件资源的利用率在各个子时间段内超过所述第一阈值的次数。
可以根据实际情况对所述第一阈值的取值进行设置,例如,可以将其设置为20、30、50或者其它取值。
步骤S204、计算所述权重系数。
具体地,可以根据下式计算所述权重系数:
其中,t为所述统计时间段内的子时间段按照时间先后顺序依次排列的序号,1≤t≤T,AlertNump,t为在第t个子时间段内第p种硬件资源的利用率超过所述第一阈值的次数,k为预设的基准系数,k′为预设的增量系数,可以根据实际情况将k和k′设置为任意正数,特殊地,可以设置
步骤S103、判断所述目标系统的整体利用率是否大于预设的第一阈值。
可以根据实际情况对所述第一阈值的取值进行设置,例如,可以将其设置为80%、85%、90%或者其它取值。
若所述目标系统的整体利用率大于所述第一阈值,则执行步骤S104及其后续步骤,若所述目标系统的整体利用率小于或等于所述第一阈值,则执行步骤S107及其后续步骤。
步骤S104、获取正在所述目标系统中运行的各个任务的基准利用率。
所述任务可以为在所述目标系统中运行的SQL脚本任务,所述基准利用率为各个任务单独在所述目标系统中运行时所述目标系统的整体利用率。即为了保证参数的准确性,避免多个SQL脚本任务之间的互相干扰,在本实施例中,预先对各个SQL脚本任务的运行情况进行分别收集。
优选地,如图3所示,所述基准利用率的设置过程可以包括:
步骤S301、分别在所述目标系统中单独运行各个任务,在任务运行过程中对各种硬件资源的利用率分别进行N次采样,并记录采样结果。
N为大于1的整数,可以根据实际情况对其取值进行设置,例如,可以将其设置为100、200、500或者其它取值。
优选地,可以将所述采样结果记录如下:
ParaSets,p={Paras,p,1,Paras,p,2,......,Paras,p,n,......,Paras,p,N}
其中,s为任务的序号,1≤s≤S,S为任务的总数,ParaSets,p为第s个任务对第p种硬件资源的利用率采样值集合,n为采样值的序号,1≤n≤N,Paras,p,n为第s个任务对第p种硬件资源的利用率的第n个采集值;
步骤S302、将所述采样值集合中满足预设条件的采样值确定为优选采样值。
优选地,可以将所述采样值集合中满足下式的采样值确定为优选采样值:
步骤S303、构造优选采样值集合。
优选地,可以根据下式构造优选采样值集合:
ParaSet′s,p={Para′s,p,1,Para′s,p,2,......,Para′s,p,n′,......,Para′s,p,N′}
其中,ParaSet′s,p为第s个任务对第p种硬件资源的利用率的优选采样值集合,n′为优选采样值的序号,1≤n≤N′,N′为优选采样值的个数,Para′s,p,n′为第s个任务对第p种硬件资源的利用率的第n个优选采集值;
步骤S304、计算所述基准利用率。
优选地,可以根据下式计算所述基准利用率:
其中,Indexs为第s个任务的基准利用率。
步骤S105、从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务。
具体地,可以将满足下述条件的m的取值确定为选取的任务数:
其中,AlertThreshH为所述第一阈值。
步骤S106、暂停所述第一调节任务在所述目标系统中的运行。
在本实施例中,可以设置两个SQL脚本任务集合,分别为运行SQL脚本任务集合RunSQLSet和暂停SQL脚本任务集合SuspSQLSet,其中,运行SQL脚本任务集合中包括各个正在运行的SQL脚本任务,暂停SQL脚本任务集合中包括各个被暂停运行的SQL脚本任务。当IndexTotal超过所述第一阈值时,暂停掉所述第一调节任务在所述目标系统中的运行,并将其从运行SQL脚本任务集合移入到暂停SQL脚本任务集合。
步骤S107、判断所述目标系统的整体利用率是否小于预设的第二阈值。
所述第二阈值小于所述第一阈值,可以根据实际情况对所述第二阈值的取值进行设置,例如,可以将其设置为60%、65%、70%或者其它取值。
若所述目标系统的整体利用率小于所述第二阈值,则执行步骤S108及其后续步骤,若所述目标系统的整体利用率大于或等于所述第二阈值,则执行步骤S111。
步骤S108、获取在所述目标系统中被暂停的各个任务的基准利用率。
步骤S108的过程与步骤S104的过程类似,具体可参加步骤S104中的详细描述,本实施例在此不再赘述。
步骤S109、从在所述目标系统中被暂停的各个任务中选取基准利用率最低的m′个任务作为第二调节任务。
具体地,可以将满足下述条件的m′的取值确定为选取的任务数:
其中,AlertThreshL为所述第二阈值。
步骤S110、恢复所述第二调节任务在所述目标系统中的运行。
当IndexTotal低于所述第二阈值时,恢复所述第二调节任务在所述目标系统中的运行,并将其从暂停SQL脚本任务集合移入到运行SQL脚本任务集合,通过运行SQL脚本任务集合和暂停SQL脚本任务集合之间不断地相互转换,保持整个目标系统的资源消耗保持在一个较为稳定的水平,从而避免系统运行达到瓶颈点后爆发,可能导致系统业务无法处理,甚至整个系统无法使用的情况发生。
步骤S111、确定所述目标系统运行正常。
当IndexTotal处于所述第一阈值和所述第二阈值之间,则说明所述目标系统运行正常,其资源消耗保持在一个较为稳定的水平,此时,无需对其进行额外的调节。
综上所述,本发明实施例首先分别获取目标系统中的各种硬件资源的利用率,并根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率,然后判断所述目标系统的整体利用率是否大于预设的第一阈值,若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,接着从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务,并暂停所述第一调节任务在所述目标系统中的运行。本发明实施例对目标系统的资源使用情况提供了一套完备的度量体系,从而可以精确的度量目标系统的资源使用情况,当资源消耗过大时,通过对任务运行情况进行调节,可以有效减少对系统资源的消耗,保证了整个系统的正常运行。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
对应于上文实施例所述的一种任务调节方法,图4示出了本发明实施例提供的一种任务调节装置的一个实施例结构图。
本实施例中,一种任务调节装置可以包括:
利用率获取模块401,用于分别获取目标系统中的各种硬件资源的利用率;
整体利用率计算模块402,用于根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率;
第一判定模块403,用于判断所述目标系统的整体利用率是否大于预设的第一阈值;
第一基准利用率获取模块404,用于若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,所述基准利用率为各个任务单独在所述目标系统中运行时所述目标系统的整体利用率;
第一任务选取模块405,用于从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务;
暂停运行模块406,用于暂停所述第一调节任务在所述目标系统中的运行。
进一步地,所述整体利用率计算模块可以包括:
整体利用率计算单元,用于根据下式计算所述目标系统的整体利用率:
其中,p为硬件资源的序号,1≤p≤P,P为所述目标系统中的硬件资源的种类总数,ParaSysp为所述目标系统中的第p种硬件资源的利用率,Weightp为所述目标系统中的第p种硬件资源的权重系数,IndexTotal为所述目标系统的整体利用率。
进一步地,所述任务调节装置还可以包括:
历史运行记录获取模块,用于获取所述目标系统在预设的统计时间段内的历史运行记录;
子时间段划分模块,用于将所述统计时间段划分为T个子时间段,T为大于1的整数;
统计模块,用于根据所述历史运行记录分别统计各种硬件资源的利用率在各个子时间段内超过所述第一阈值的次数;
权重系数计算模块,用于根据下式计算所述权重系数:
其中,t为所述统计时间段内的子时间段按照时间先后顺序依次排列的序号,1≤t≤T,AlertNump,t为在第t个子时间段内第p种硬件资源的利用率超过所述第一阈值的次数,k为预设的基准系数,k′为预设的增量系数。
进一步地,所述任务调节装置还可以包括:
采样结果记录模块,用于分别在所述目标系统中单独运行各个任务,在任务运行过程中对各种硬件资源的利用率分别进行N次采样,并将采样结果记录如下:
ParaSets,p={Paras,p,1,Paras,p,2,......,Paras,p,n,......,Paras,p,N}
其中,s为任务的序号,1≤s≤S,S为任务的总数,ParaSets,p为第s个任务对第p种硬件资源的利用率采样值集合,n为采样值的序号,1≤n≤N,Paras,p,n为第s个任务对第p种硬件资源的利用率的第n个采集值;
优选采样值确定模块,用于将所述采样值集合中满足下式的采样值确定为优选采样值:
优选采样值集合构造模块,用于根据下式构造优选采样值集合:
ParaSet′s,p={Para′s,p,1,Para′s,p,2,......,Para′s,p,n′,......,Para′s,p,N′}
其中,ParaSet′s,p为第s个任务对第p种硬件资源的利用率的优选采样值集合,n′为优选采样值的序号,1≤n≤N′,N′为优选采样值的个数,Para′s,p,n′为第s个任务对第p种硬件资源的利用率的第n个优选采集值;
基准利用率计算模块,用于根据下式计算所述基准利用率:
其中,Indexs为第s个任务的基准利用率。
进一步地,所述任务调节装置还可以包括:
第二判断模块,用于判断所述目标系统的整体利用率是否小于预设的第二阈值,所述第二阈值小于所述第一阈值;
第二基准利用率获取模块,用于若所述目标系统的整体利用率小于所述第二阈值,则获取在所述目标系统中被暂停的各个任务的基准利用率;
第二任务选取模块,用于从在所述目标系统中被暂停的各个任务中选取基准利用率最低的m′个任务作为第二调节任务;
恢复运行模块,用于恢复所述第二调节任务在所述目标系统中的运行。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的装置,模块和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
图5示出了本发明实施例提供的一种任务调节终端设备的示意框图,为了便于说明,仅示出了与本发明实施例相关的部分。
在本实施例中,所述任务调节终端设备5可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。该任务调节终端设备5可包括:处理器50、存储器51以及存储在所述存储器51中并可在所述处理器50上运行的计算机可读指令52,例如执行上述的任务调节方法的计算机可读指令。所述处理器50执行所述计算机可读指令52时实现上述各个任务调节方法实施例中的步骤,例如图1所示的步骤S101至S106。或者,所述处理器50执行所述计算机可读指令52时实现上述各装置实施例中各模块/单元的功能,例如图4所示模块401至406的功能。
示例性的,所述计算机可读指令52可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器51中,并由所述处理器50执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机可读指令段,该指令段用于描述所述计算机可读指令52在所述任务调节终端设备5中的执行过程。
所述处理器50可以是中央处理单元(Central Processing Unit,CPU),还可以是其它通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器51可以是所述任务调节终端设备5的内部存储单元,例如任务调节终端设备5的硬盘或内存。所述存储器51也可以是所述任务调节终端设备5的外部存储设备,例如所述任务调节终端设备5上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器51还可以既包括所述任务调节终端设备5的内部存储单元也包括外部存储设备。所述存储器51用于存储所述计算机可读指令以及所述任务调节终端设备5所需的其它指令和数据。所述存储器51还可以用于暂时地存储已经输出或者将要输出的数据。
在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干计算机可读指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储计算机可读指令的介质。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种任务调节方法,其特征在于,包括:
分别获取目标系统中的各种硬件资源的利用率;
根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率;
判断所述目标系统的整体利用率是否大于预设的第一阈值;
若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,所述基准利用率为各个任务单独在所述目标系统中运行时所述目标系统的整体利用率;
从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务;
暂停所述第一调节任务在所述目标系统中的运行。
2.根据权利要求1所述的任务调节方法,其特征在于,所述根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率包括:
根据下式计算所述目标系统的整体利用率:
其中,p为硬件资源的序号,1≤p≤P,P为所述目标系统中的硬件资源的种类总数,ParaSysp为所述目标系统中的第p种硬件资源的利用率,Weightp为所述目标系统中的第p种硬件资源的权重系数,IndexTotal为所述目标系统的整体利用率。
3.根据权利要求2所述的任务调节方法,其特征在于,所述权重系数的设置过程包括:
获取所述目标系统在预设的统计时间段内的历史运行记录;
将所述统计时间段划分为T个子时间段,T为大于1的整数;
根据所述历史运行记录分别统计各种硬件资源的利用率在各个子时间段内超过所述第一阈值的次数;
根据下式计算所述权重系数:
其中,t为所述统计时间段内的子时间段按照时间先后顺序依次排列的序号,1≤t≤T,AlertNump,t为在第t个子时间段内第p种硬件资源的利用率超过所述第一阈值的次数,k为预设的基准系数,k′为预设的增量系数。
4.根据权利要求3所述的任务调节方法,其特征在于,所述基准利用率的设置过程包括:
分别在所述目标系统中单独运行各个任务,在任务运行过程中对各种硬件资源的利用率分别进行N次采样,并将采样结果记录如下:
ParaSets,p={Paras,p,1,Paras,p,2,......,Paras,p,n,......,Paras,p,N}
其中,s为任务的序号,1≤s≤S,S为任务的总数,ParaSets,p为第s个任务对第p种硬件资源的利用率采样值集合,n为采样值的序号,1≤n≤N,Paras,p,n为第s个任务对第p种硬件资源的利用率的第n个采集值;
将所述采样值集合中满足下式的采样值确定为优选采样值:
根据下式构造优选采样值集合:
ParaSet′s,p={Para′s,p,1,Para′s,p,2,......,Para′s,p,n′,......,Para′s,p,N′}
其中,ParaSet′s,p为第s个任务对第p种硬件资源的利用率的优选采样值集合,n′为优选采样值的序号,1≤n≤N′,N′为优选采样值的个数,Para′s,p,n′为第s个任务对第p种硬件资源的利用率的第n个优选采集值;
根据下式计算所述基准利用率:
其中,Indexs为第s个任务的基准利用率。
5.根据权利要求1至4中任一项所述的任务调节方法,其特征在于,还包括:
判断所述目标系统的整体利用率是否小于预设的第二阈值,所述第二阈值小于所述第一阈值;
若所述目标系统的整体利用率小于所述第二阈值,则获取在所述目标系统中被暂停的各个任务的基准利用率;
从在所述目标系统中被暂停的各个任务中选取基准利用率最低的m′个任务作为第二调节任务;
恢复所述第二调节任务在所述目标系统中的运行。
6.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机可读指令,其特征在于,所述计算机可读指令被处理器执行时实现如权利要求1至5中任一项所述的任务调节方法的步骤。
7.一种任务调节终端设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机可读指令,其特征在于,所述处理器执行所述计算机可读指令时实现如下步骤:
分别获取目标系统中的各种硬件资源的利用率;
根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率;
判断所述目标系统的整体利用率是否大于预设的第一阈值;
若所述目标系统的整体利用率大于所述第一阈值,则获取正在所述目标系统中运行的各个任务的基准利用率,所述基准利用率为各个任务单独在所述目标系统中运行时所述目标系统的整体利用率;
从正在所述目标系统中运行的各个任务中选取基准利用率最高的m个任务作为第一调节任务;
暂停所述第一调节任务在所述目标系统中的运行。
8.根据权利要求7所述的任务调节终端设备,其特征在于,所述根据所述目标系统中的各种硬件资源的利用率计算所述目标系统的整体利用率包括:
根据下式计算所述目标系统的整体利用率:
其中,p为硬件资源的序号,1≤p≤P,P为所述目标系统中的硬件资源的种类总数,ParaSysp为所述目标系统中的第p种硬件资源的利用率,Weightp为所述目标系统中的第p种硬件资源的权重系数,IndexTotal为所述目标系统的整体利用率。
9.根据权利要求8所述的任务调节终端设备,其特征在于,所述权重系数的设置过程包括:
获取所述目标系统在预设的统计时间段内的历史运行记录;
将所述统计时间段划分为T个子时间段,T为大于1的整数;
根据所述历史运行记录分别统计各种硬件资源的利用率在各个子时间段内超过所述第一阈值的次数;
根据下式计算所述权重系数:
其中,t为所述统计时间段内的子时间段按照时间先后顺序依次排列的序号,1≤t≤T,AlertNump,t为在第t个子时间段内第p种硬件资源的利用率超过所述第一阈值的次数,k为预设的基准系数,k′为预设的增量系数。
10.根据权利要求9所述的任务调节终端设备,其特征在于,所述基准利用率的设置过程包括:
分别在所述目标系统中单独运行各个任务,在任务运行过程中对各种硬件资源的利用率分别进行N次采样,并将采样结果记录如下:
ParaSets,p={Paras,p,1,Paras,p,2,......,Paras,p,n,......,Paras,p,N}
其中,s为任务的序号,1≤s≤S,S为任务的总数,ParaSets,p为第s个任务对第p种硬件资源的利用率采样值集合,n为采样值的序号,1≤n≤N,Paras,p,n为第s个任务对第p种硬件资源的利用率的第n个采集值;
将所述采样值集合中满足下式的采样值确定为优选采样值:
根据下式构造优选采样值集合:
ParaSet′s,p={Para′s,p,1,Para′s,p,2,......,Para′s,p,n′,......,Para′s,p,N′}
其中,ParaSet′s,p为第s个任务对第p种硬件资源的利用率的优选采样值集合,n′为优选采样值的序号,1≤n≤N′,N′为优选采样值的个数,Para′s,p,n′为第s个任务对第p种硬件资源的利用率的第n个优选采集值;
根据下式计算所述基准利用率:
其中,Indexs为第s个任务的基准利用率。
CN201810457083.5A 2018-05-14 2018-05-14 一种任务调节方法、计算机可读存储介质及终端设备 Active CN108874535B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810457083.5A CN108874535B (zh) 2018-05-14 2018-05-14 一种任务调节方法、计算机可读存储介质及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810457083.5A CN108874535B (zh) 2018-05-14 2018-05-14 一种任务调节方法、计算机可读存储介质及终端设备

Publications (2)

Publication Number Publication Date
CN108874535A true CN108874535A (zh) 2018-11-23
CN108874535B CN108874535B (zh) 2022-06-10

Family

ID=64333740

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810457083.5A Active CN108874535B (zh) 2018-05-14 2018-05-14 一种任务调节方法、计算机可读存储介质及终端设备

Country Status (1)

Country Link
CN (1) CN108874535B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109753405A (zh) * 2018-12-05 2019-05-14 东软集团股份有限公司 应用资源消耗的检测方法、装置、存储介质和电子设备
CN109800148A (zh) * 2018-12-14 2019-05-24 平安普惠企业管理有限公司 一种页面调试方法、装置、可读存储介质及终端设备
CN110032438A (zh) * 2019-04-24 2019-07-19 北京高途云集教育科技有限公司 延时任务执行方法、装置及电子设备
CN110362410A (zh) * 2019-07-24 2019-10-22 江苏满运软件科技有限公司 基于离线应用的资源控制方法、系统、设备及存储介质
CN111190728A (zh) * 2019-12-13 2020-05-22 北京山石网科信息技术有限公司 资源调整方法及装置
CN112203322A (zh) * 2020-09-30 2021-01-08 中国联合网络通信集团有限公司 一种信道资源利用率的统计方法和装置
CN115756823A (zh) * 2022-10-20 2023-03-07 广州汽车集团股份有限公司 服务发布方法、装置、车辆及存储介质

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101056264A (zh) * 2007-04-25 2007-10-17 华为技术有限公司 流量控制的方法和业务处理系统
CN102195886A (zh) * 2011-05-30 2011-09-21 兰雨晴 一种云平台上的服务调度方法
CN102222034A (zh) * 2011-07-15 2011-10-19 浙江大学 基于程序轮廓分析的虚拟化平台性能评测方法
CN102307224A (zh) * 2011-05-17 2012-01-04 华为软件技术有限公司 云计算系统中业务隔离的实现方法及装置、云服务器
US20120137295A1 (en) * 2010-11-30 2012-05-31 Alcatel-Lucent Canada Inc. Method for displaying cpu utilization in a multi-processing system
CN103327093A (zh) * 2013-06-17 2013-09-25 苏州市职业大学 云计算系统的控制方法
CN105138408A (zh) * 2015-09-28 2015-12-09 浪潮(北京)电子信息产业有限公司 一种基于OpenStack的虚拟机迁移方法和装置
CN106095529A (zh) * 2016-06-08 2016-11-09 西安电子科技大学 一种c‑ran架构下的载波迁移方法
CN107346264A (zh) * 2016-05-05 2017-11-14 北京金山云网络技术有限公司 一种虚拟机负载均衡调度的方法、装置和服务器设备
CN107423114A (zh) * 2017-07-17 2017-12-01 中国科学院软件研究所 一种基于服务分类的虚拟机动态迁移方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101056264A (zh) * 2007-04-25 2007-10-17 华为技术有限公司 流量控制的方法和业务处理系统
US20120137295A1 (en) * 2010-11-30 2012-05-31 Alcatel-Lucent Canada Inc. Method for displaying cpu utilization in a multi-processing system
CN102307224A (zh) * 2011-05-17 2012-01-04 华为软件技术有限公司 云计算系统中业务隔离的实现方法及装置、云服务器
CN102195886A (zh) * 2011-05-30 2011-09-21 兰雨晴 一种云平台上的服务调度方法
CN102222034A (zh) * 2011-07-15 2011-10-19 浙江大学 基于程序轮廓分析的虚拟化平台性能评测方法
CN103327093A (zh) * 2013-06-17 2013-09-25 苏州市职业大学 云计算系统的控制方法
CN105138408A (zh) * 2015-09-28 2015-12-09 浪潮(北京)电子信息产业有限公司 一种基于OpenStack的虚拟机迁移方法和装置
CN107346264A (zh) * 2016-05-05 2017-11-14 北京金山云网络技术有限公司 一种虚拟机负载均衡调度的方法、装置和服务器设备
CN106095529A (zh) * 2016-06-08 2016-11-09 西安电子科技大学 一种c‑ran架构下的载波迁移方法
CN107423114A (zh) * 2017-07-17 2017-12-01 中国科学院软件研究所 一种基于服务分类的虚拟机动态迁移方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ANTON CERVIN等: "Feedback scheduling of control", 《PROCEEDINGS OF THE 39TH IEEE CONFERENCE ON DECISION AND CONTROL》 *
周墨颂等: "基于计算资源运行时剩余能力评估优化云平台", 《计算机研究与发展》 *
王瑞: "基于SDN的数据中心节能方法研究", 《中国优秀博硕士学位论文全文数据库(硕士) 信息科技辑》 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109753405A (zh) * 2018-12-05 2019-05-14 东软集团股份有限公司 应用资源消耗的检测方法、装置、存储介质和电子设备
CN109753405B (zh) * 2018-12-05 2022-05-31 东软集团股份有限公司 应用资源消耗的检测方法、装置、存储介质和电子设备
CN109800148A (zh) * 2018-12-14 2019-05-24 平安普惠企业管理有限公司 一种页面调试方法、装置、可读存储介质及终端设备
CN110032438A (zh) * 2019-04-24 2019-07-19 北京高途云集教育科技有限公司 延时任务执行方法、装置及电子设备
CN110032438B (zh) * 2019-04-24 2021-11-26 北京高途云集教育科技有限公司 延时任务执行方法、装置及电子设备
CN110362410A (zh) * 2019-07-24 2019-10-22 江苏满运软件科技有限公司 基于离线应用的资源控制方法、系统、设备及存储介质
CN111190728A (zh) * 2019-12-13 2020-05-22 北京山石网科信息技术有限公司 资源调整方法及装置
CN111190728B (zh) * 2019-12-13 2023-08-25 北京山石网科信息技术有限公司 资源调整方法及装置
CN112203322A (zh) * 2020-09-30 2021-01-08 中国联合网络通信集团有限公司 一种信道资源利用率的统计方法和装置
CN112203322B (zh) * 2020-09-30 2023-06-30 中国联合网络通信集团有限公司 一种信道资源利用率的统计方法和装置
CN115756823A (zh) * 2022-10-20 2023-03-07 广州汽车集团股份有限公司 服务发布方法、装置、车辆及存储介质
CN115756823B (zh) * 2022-10-20 2024-04-16 广州汽车集团股份有限公司 服务发布方法、装置、车辆及存储介质

Also Published As

Publication number Publication date
CN108874535B (zh) 2022-06-10

Similar Documents

Publication Publication Date Title
CN108874535A (zh) 一种任务调节方法、计算机可读存储介质及终端设备
Zhang et al. Slaq: quality-driven scheduling for distributed machine learning
US8578023B2 (en) Computer resource utilization modeling for multiple workloads
CN107231264A (zh) 用于管理云服务器的容量的方法和装置
CN108446176A (zh) 一种任务分配方法、计算机可读存储介质及终端设备
CN104182278B (zh) 一种判定计算机硬件资源繁忙程度的方法和装置
CN107579926A (zh) 基于令牌桶算法的Ceph云存储系统的QoS设置方法
CN108038040A (zh) 计算机集群性能指标检测方法、电子设备及存储介质
US20170149690A1 (en) Resource Aware Classification System
CN107515663A (zh) 调整中央处理器内核运行频率的方法和装置
CN108446795A (zh) 电力系统负荷波动分析方法、装置及可读存储介质
CN112052145A (zh) 性能告警阈值的确定方法、装置、电子设备和介质
CN108491122A (zh) 一种点击事件响应方法、计算机可读存储介质及终端设备
Jun et al. Cloud computing based solution to decision making
Agrawal et al. Adaptive real‐time anomaly detection in cloud infrastructures
CN103729252A (zh) 一种虚拟机调度的方法及调度监控器
CN115202847A (zh) 任务的调度方法和装置
CN109636212B (zh) 作业实际运行时间的预测方法
CN107704317A (zh) 智能设备及其应用管理方法和具有存储功能的装置
CN110619407B (zh) 对象销量的预测方法及系统、电子设备和存储介质
CN109800085A (zh) 资源配置的检测方法、装置、存储介质和电子设备
CN113506023A (zh) 工作行为数据分析方法、装置、设备及存储介质
CN110287158A (zh) 监测分布式文件系统io时延的方法、装置及存储介质
CN110502495A (zh) 一种应用服务器的日志收集方法及装置
CN115391047A (zh) 资源调度方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant