CN103106116A - 一种基于滑动窗口的动态资源管理方法 - Google Patents

一种基于滑动窗口的动态资源管理方法 Download PDF

Info

Publication number
CN103106116A
CN103106116A CN2012105926498A CN201210592649A CN103106116A CN 103106116 A CN103106116 A CN 103106116A CN 2012105926498 A CN2012105926498 A CN 2012105926498A CN 201210592649 A CN201210592649 A CN 201210592649A CN 103106116 A CN103106116 A CN 103106116A
Authority
CN
China
Prior art keywords
task
resource
vip
base
outstanding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012105926498A
Other languages
English (en)
Other versions
CN103106116B (zh
Inventor
刘欣然
沈时军
张鸿
朱春鸽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Computer Network and Information Security Management Center
Original Assignee
National Computer Network and Information Security Management Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Computer Network and Information Security Management Center filed Critical National Computer Network and Information Security Management Center
Priority to CN201210592649.8A priority Critical patent/CN103106116B/zh
Publication of CN103106116A publication Critical patent/CN103106116A/zh
Application granted granted Critical
Publication of CN103106116B publication Critical patent/CN103106116B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明提供一种基于滑动窗口的动态资源管理方法,定义系统中可用资源ri的集合Φ包括普通资源池Φbase和优秀资源池Φvip,分别存放普通资源和优秀资源;优先级为k的任务tj的集合为Ψk,根据任务的优先级定义任务tj为重要任务或者普通任务;定义滑动窗口大小ω表示优秀资源池
Figure DDA00002681313200011
包含的优秀资源在整个资源中所占比例,ω∈(0,1);i=1,2,…n,j=1,2,…m,n和m为自然数;周期性进行任务调度,每一个任务调度周期结束时,根据标志位Fvip和Fbase的值判断普通资源池Φbase和优秀资源池Φvip包含的资源情况,对滑动窗口大小ω进行调整,根据滑动窗口大小ω对普通资源池Φbase和优秀资源池Φvip包含的资源进行调节,通过滑动窗口大小的动态刷新调整,对普通资源池和优秀资源池包含的资源进行调节,调整资源与任务的供需关系。

Description

一种基于滑动窗口的动态资源管理方法
技术领域
本发明涉及云计算或者分布式计算领域,具体涉及一种基于滑动窗口的动态资源管理方法。 
背景技术
资源动态管理算法是云计算、分布式计算领域的重要研究课题。在服务分级环境中,为了保证重要任务的服务质量,需要在系统中预留出一定的优秀资源。常见的资源管理方法分为两类:静态资源管理(SRM)与动态资源管理(DRM)。 
传统的静态资源管理算法通常为重要任务预留固定大小的优秀资源,其缺点是:算法不能适应突发性的任务变化,在重要任务较少时造成资源浪费,在重要任务较多时导致服务降级。 
传统的动态资源管理算法可以根据当前重要任务的数量调整预留资源池的大小,但它一方面可能造成重要任务抢占全部资源、不能兼顾所有任务的情况,另一方面在重要任务突发性激增时,仍会导致算法瞬间不能适应的情况。 
发明内容
本发明涉及一种基于滑动窗口的动态资源管理方法,定义系统中可用资源ri的集合Φ包括普通资源池Φbase和优秀资源池Φvip,分别存放普通资源和优秀资源;优先级为k的任务tj的集合为Ψk,根据所述任务的优先级定义所述任务tj为重要任务或者普通任务;定义滑动窗口大小ω表示所述优秀资源池
Figure BDA00002681313000011
包含的优秀资源在整个资源中所占比例,ω∈(0,1);i=1,2,…n,j=1,2,…m,n和m为自然数; 
周期性进行任务调度,每一个任务调度周期结束时,根据标志位Fvip和Fbase的值判断所述普通资源池Φbase和优秀资源池Φvip包含的资源情况,对所述滑动窗口大小ω进行调整,根据所述滑动窗口大小ω对所述普通资源池Φbase和优秀资源池Φvip包含的资源进行调节; 
所述任务调度的过程包括: 
步骤S1,初始化标志位Fvip=true,Fbase=tue; 
步骤S2,选取一个非空的任务队列Ψk,选取队首的任务tj,判断所述任务tj为重要任务时,执行步骤S3,判断所述任务tj为普通任务时,执行步骤S4; 
步骤S3,优秀资源池Φvip中包含至少一个符合所述任务tj的资源ri时,从所述优秀资源池Φvip中随机选取资源ri执行任务tj,所述优秀资源池Φvip中不包含任何一个符合所述任务tj的资源ri时,设置Fvip=false,将所述任务tj当成普通任务执行步骤S4; 
步骤S4,所述普通资源池Φbase中包含至少一个符合任务tj的资源ri时,从所述普通资源池Φbase中随机选取资源ri执行任务tj,所述普通资源池Φbase中不包含任何一个符合所述任务tj的资源ri时,设置Fbase=false; 
步骤S5,判断本任务调度周期时间没有结束并且存在非空的任务队列时,执行步骤S2,否则,结束本任务调度周期。 
本发明提供的第一优选实施例中:所述系统中所述资源ri的集合Φ是动态变化的,根据所述资源的性能指标区分所述普通资源和优秀资源,将所述普通资源和优秀资源分别存放进普通资源池Φbase和优秀资源池Φvip,初始时,Φbase=Φ,Φvip为空,资源ri的优秀程度是根据资源评价函数V(ri)得到的,V(ri)值越大代表资源ri越优秀;所述资源评价函数V(ri)记录过去一段时间内下发到所述任务ri的任务的执行成功率与平均执行时间,与所述任务执行成功率成正比,与所述任务平均执行时间成反比; 
系统中所述需调度的任务tj的集合Ψ={tj|j=1,2,…m}是动态变化的,所述任务tj可以分为z个优先级,优先级k的集合Z={1,2,…,z0,z0+1,…,z},优先级大于z0的任务定义为重要任务,优先级小于等于z0的任务定义为普通任务,其中,z0和z根据不同应用场景中服务等级的不同进行设定; 
P(tj)表示所述任务tj的优先级,优先级为k的所述任务tj的集合Ψk中按照下发时间对任务tj进行FIFO(First Input First Output,先入先出队列)排序并组成队列。 
本发明提供的第二优选实施例中:所述骤S2中根据队列选择函数选取所述非空的任务队列Ψk,所述优先级为k的任务队列Ψk被选择调度的概率为
Figure BDA00002681313000021
优先级越高的所述任务队列被选择进行调度的概率越大;对所述任务tj进行排序并组成所述任务队列后,选取所述任务队列队首的所述任务tj进行调度。 
本发明提供的第三优选实施例中:所述步骤S3和步骤S4中,判断所述优秀资源池Φvip或者普通资源池Φbase中是否包含至少一个符合所述任务tj的所述资源ri进行不同操作的方法为: 
从所述优秀资源池Φvip或者普通资源池Φbase中选取至多n0个符合所述任务tj的资源ri组成备选资源池Φ(tj),从所述备选资源池Φ(tj)中随机选取资源ri,将所述任务tj下发到所述资源ri上执行,如果所述备选资源池Φ(tj)为空,则判断所述优秀资源池Φvip或者普通资源池Φbase中不包含任何一个符合所述任务tj的资源ri; 
其中n0为根据应用场景设定的常数。 
本发明提供的第四优选实施例中:设置临时队列Ψ0; 
步骤S1中初始化所述临时队列Ψ0={}; 
步骤S4中,如果所述普通资源池Φbase中不包含任何一个所述符合任务tj的资源ri,设置Fbase=false的同时将任务tj放入临时队列Ψ0中; 
在一个所述任务调度周期结束时,将所述临时队列Ψ0中的任务放回到各所述任务队列中。 
本发明提供的第五优选实施例中:所述滑动窗口大小ω的初始值为根据应用场景设定的常数ω0;根据标志位Fvip和Fbase的值对所述滑动窗口大小ω进行调整的方法为: 
如果Fvip=false,则设置ω=min(ωmax,ω+ω'); 
如果Fvip=true并且Fbase=false时,则设置ω=max(ωmin,ω-ω'); 
其它情况下,ω不变; 
其中ωmax、ωmin和ω'分别表示所述滑动窗口的最大值、最小值和调整步长,为根据应用场景设定的常数。 
本发明提供的第六优选实施例中:在一个所述任务调度周期结束对所述滑动窗口大小ω进行调节后,根据所述滑动窗口大小ω对所述普通资源池Φbase和优秀资源池Φvip包含的资源进行调节的方法为: 
令a=|Φbase|表示普通资源数,b=|Φvip|表示优秀资源数,从所述优秀资源池Φvip中选择资源评价函数V(ri)评价最差的λb个资源,从所述普通资源池Φbase中选择资源评价函数V(ri)评价最优的(a+b)ω-b+λb个资源,将所述λb个资源和(a+b)ω-b+λb个资源互换; 
其中λ为根据应用场景设定表示资源交换率的常数,λ∈(0,1)。 
本发明提供的一种基于滑动窗口的动态资源管理方法的有益效果包括: 
1、本发明提供的一种基于滑动窗口的动态资源管理方法,将资源分为优秀资源和普通资源,任务分为重要任务和普通任务,通过滑动窗口大小的动态刷新调整,对普通资源池和优 秀资源池包含的资源进行调节,调整资源与任务的供需关系。 
2、若重要任务在优秀资源池中找不到资源,将继续在普通资源池中寻找资源,重要任务较高的调度概率保证了它比普通任务更快地被调度,在重要任务突发性激增、导致算法瞬间不能适应时,仍可以保证重要任务的调度。 
3、在重要任务增加时扩大窗口大小以保证重要任务调度,在重要任务减少时缩小窗口以减少资源浪费,通过普通资源池Φbase与优秀资源池Φvip的动态资源交换,保证了优秀资源池的资源质量,重点提升优先级较高的任务的执行成功率与执行效率。 
4、滑动窗口只在范围最小值到最大值的范围内变化,重要任务不会抢占所有资源,对于一个优先级为k的任务队列,它在每一个任务调度周期内总是有一定的概率被选择调度。 
附图说明
如图1所示为本发明提供的一种基于滑动窗口的动态资源管理方法的任务调度方法流程图; 
如图2所示为本发明提供的一种基于滑动窗口的动态资源管理方法的实施例的任务调度方法流程图; 
如图3所示为本发明提供的一种基于滑动窗口的动态资源管理方法的实施例的滑动窗口调节的方法流程图。 
具体实施方式
下面结合附图对本发明的具体实施方式作示例说明。 
本发明提供一种基于滑动窗口的动态资源管理方法,定义系统中可用资源ri(i=1,2,…n,n为自然数)的集合Φ包括普通资源池Φbase和优秀资源池Φvip,分别存放普通资源和优秀资源;优先级为k的任务tj(j=1,2,…m,m为自然数)的集合为Ψk,根据任务的优先级定义任务tj为重要任务或者普通任务;定义滑动窗口大小ω表示优秀资源池
Figure BDA00002681313000041
包含的优秀资源在整个资源中所占比例,ω∈(0,1)。周期性进行任务调度,每一个任务调度周期结束时,根据标志位Fvip和Fbase的值判断普通资源池Φbase和优秀资源池Φvip包含的资源情况,对滑动窗口大小ω进行调整,根据该滑动窗口大小ω对普通资源池Φbase和优秀资源池Φvip包含的资源进行调节。该任务调度的流程图如图1所示,由图1可知,任务调度的过程包括: 
步骤S1,初始化标志位Fvip=true,Fbase=true。 
步骤S2,选取一个非空的任务队列Ψk,选取队首的任务tj,判断任务tj为重要任务时, 执行步骤S3,判断任务tj为普通任务时,执行步骤S4。 
步骤S3,优秀资源池Φvip中包含至少一个符合任务tj的资源ri时,从优秀资源池Φvip中随机选取资源ri执行任务tj,优秀资源池Φvip中不包含任何一个符合任务tj的资源ri时,将任务tj设为普通任务,设置Fvip=false,执行步骤S4。 
步骤S4,普通资源池Φbase中包含至少一个符合任务tj的资源ri时,从普通资源池Φbase中随机选取资源ri执行任务tj,普通资源池Φbase中不包含任何一个符合任务tj的资源ri时,设置Fbase=false。 
步骤S5,判断本任务调度周期时间没有结束并且存在非空的任务队列时,执行步骤S2,否则,结束本任务调度周期。 
实施例一: 
本发明提供的一种基于滑动窗口的动态资源管理方法实施例一中,系统中可用资源ri的集合Φ是动态变化的,根据资源的性能指标区分普通资源和优秀资源,将普通资源和优秀资源分别存放进普通资源池Φbase和优秀资源池Φvip,初始时,Φbase=Φ,Φvip为空。资源ri的优秀程度根据资源评价函数V(ri)得到,V(ri)值越大代表资源ri越优秀。V(ri)将记录过去一段时间内下发到ri的任务的执行成功率与平均执行时间,并与任务执行成功率成正比,与任务平均执行时间成反比。 
系统中需调度的任务tj的集合Ψ={tj|j=1,2,…m}是动态变化的,任务tj可以分为z个优先级,优先级k的集合Z={1,2,…,z0,z0+1,…,z},优先级大于z0的任务定义为重要任务,优先级小于等于z0的任务定义为普通任务,其中,z0和z可以根据应用场景不同中服务等级等的不同进行设定。P(tj)表示任务tj的优先级,则优先级为k的任务集合记为Ψk={tj|P(tj)=k,k∈Z}。优先级为k的任务tj的集合Ψk中按照任务下发时间对任务tj(j=1,2,…m,m为自然数)进行FIFO排序并组成队列。 
如图2所示为本发明提供的一种基于滑动窗口的动态资源管理方法的实施例的任务调度方法流程图,由图2可知,步骤S2中根据队列选择函数选取非空的任务队列Ψk。对于优先级为k的任务队列Ψk,它被选择调度的概率为因此优先级越高的任务队列被选择进行调度的概率越大。选定一个任务队列Ψk后,选取Ψk队首的任务tj进行调度。 
步骤S3和步骤S4中,判断优秀资源池Φvip或者普通资源池Φbase中是否包含至少一个符 合任务tj的资源ri进行不同操作的方法为: 
从优秀资源池Φvip或者普通资源池Φbase中选取至多n0个符合任务tj的资源ri组成备选资源池Φ(tj),从Φ(tj)中随机选取资源ri,将任务tj下发到资源ri上执行,如果Φ(tj)为空,则判断该优秀资源池Φvip或者普通资源池Φbase中不包含任何一个符合任务tj的资源ri,进行后续操作。其中n0为根据应用场景设定的常数。可以参考资源的负载等情况从备选资源池Φ(tj)中随机选取资源。 
优选的,可以设置一个临时队列Ψ0,步骤S1中初始化该临时队列Ψ0={},步骤S4中,如果普通资源池Φbase中不包含任何一个符合任务tj的资源ri,即备选资源池Φ(tj)为空时,设置Fbase=false的同时将任务tj放入临时队列Ψ0中。即当优秀资源池Φvip和普通资源池Φbase中的资源均未对某一个任务进行执行时,将该任务放入临时队列Ψ0中,可以避免该任务在一个任务调度周期内被重复调用。在一个任务调度周期结束时,将临时队列Ψ0中的任务放回到各任务队列中。 
在每一个任务调度周期结束时,根据标志位Fvip和Fbase的值判断普通资源池Φbase和优秀资源池Φvip包含的资源情况,对滑动窗口大小ω进行调整,如图3所示为本发明提供的一种基于滑动窗口的动态资源管理方法的实施例的滑动窗口调节的方法流程图,由图3可知: 
滑动窗口大小ω的初始值为根据应用场景设定的常数ω0,具体的,如果Fvip=false,则设置ω=min(ωmax,ω+ω');若Fvip=true并且Fbase=false时,则设置ω=max(ωmin,ω-ω');否则ω不变。ωmax、ωmin和ω'分别表示滑动窗口的最大值、最小值和调整步长,为可根据应用场景设定的常数。 
在一个任务调度周期还没有结束时,会依次对各个任务进行调度,即在一个任务调度周期结束时,调度的任务中有任何一个重要任务优秀资源池Φvip里没有符合条件的资源执行时,说明优秀资源所占比例偏小,将滑动窗口大小ω调大一个调整步长;调度的任务中所有重要任务优秀资源池Φvip里都有符合条件的资源执行,有任何一个普通任务普通资源池Φbase里没有符合条件的资源执行时,说明普通资源所占比例偏小,将滑动窗口大小ω调大一个调整步长。由于重要任务必须要先执行,因此滑动窗口大小ω的调节优先考虑重要任务的处理情况,所以在有任何一个重要任务优秀资源池Φvip里没有符合条件的资源执行时,无论是否存在有普通任务普通资源池Φbase里没有符合条件的资源执行,都会将滑动窗口大小ω调大,增加优秀资源,优先执行重要任务。并且滑动窗口大小ω的调节必须在滑动窗口的最小值ωmin到最 大值ωmax的范围内。 
在一个任务调度周期结束对滑动窗口大小ω进行调节后,根据该滑动窗口大小ω对普通资源池Φbase和优秀资源池Φvip包含的资源进行调节的方法为: 
令a=|Φbase|表示普通资源数,b=|Φvip|表示优秀资源数,则滑动窗口大小ω为
Figure BDA00002681313000071
从优秀资源池Φvip中选择资源评价函数V(ri)评价最差的λb个资源,从普通资源池Φbase中选择资源评价函数V(ri)评价最优的(a+b)ω-b+λb个资源,将该λb个资源和(a+b)ω-b+λb个资源两部分资源互换。其中λ为可根据应用场景设定表示资源交换率的常数,λ∈(0,1)。如果任务调度周期结束滑动窗口大小ω不变,那么优秀资源池Φvip和普通资源池Φbase交换的相等数量的优秀资源池Φvip中资源评价函数V(ri)评价最差和普通资源池Φbase中资源评价函数V(ri)评价最优的的λb个资源;如果任务调度周期结束滑动窗口大小ω调大,则从普通资源池Φbase中选择的(a+b)ω-b+λb个资源的数量大于从优秀资源池Φvip中选择的λb个资源的数量,如果任务调度周期结束滑动窗口大小ω调小,则从普通资源池Φbase中选择的(a+b)ω-b+λb个资源的数量小于从优秀资源池Φvip中选择的λb个资源的数量,并且(a+b)ω-b+λb与λb的数量差为资源总数a+b和滑动窗口的调整步长ω'的乘积。 
实施例二: 
本发明提供一种基于滑动窗口的动态资源管理方法的实施例二中,用到的资源的数据结构伪码为: 
Figure BDA00002681313000072
Figure BDA00002681313000081
一种基于滑动窗口的动态资源管理方法,包含如下步骤: 
初始化普通资源池pool_base存放所有资源; 
初始化优秀资源池pool_vip为空; 
初始化任务优先级为1~z级,优先级大于z0的任务为重要任务,其余为普通任务,本实施例中z=9,z0=5; 
初始化z个任务队列task_queue(1)、task_queue(2)、…、task_queue(z),分别存放不同优先级的任务; 
初始化备选资源池的最大资源数为n0=5; 
初始化滑动窗口初始大小ω0=0.2; 
初始化滑动窗口调整步长ω'=0.01; 
初始化滑动窗口最大值、最小值分别为ωmax=0.5、ωmin=0.1; 
初始化资源交换率λ=0.2; 
当收到一个任务task时,根据任务优先级task.k将其插入队列task_queue(k),在本实施例中,插入算法采用FIFO,即按照任务的提交时间task.recvtime排序。 
在每一个任务调度周期,一个任务调度周期可以按照执行的任务的数量或者执行任务的时间进行设定,本实施例中给出的是一个任务调度周期为60秒,依次进行如下步骤10、步骤20、步骤80: 
在步骤10,初始化标志位flag_vip=true,flag_base=true,初始化临时队列queue_tmp; 
在步骤20,循环进行以下步骤30~70,若发现所有任务队列为空或所有资源池为空,则休眠一段时间,本实施例中的休眠时间为100秒; 
在步骤30,根据队列选择函数选取一个非空的任务队列task_queue(k),本实施例中,采用一个指数函数,队列被选择的概率随队列优先级指数递增; 
在步骤40,从task_queue(k)选取队首的任务task,并进行如下调度: 
在步骤50,若task.deadline已过期,则放弃该任务的调度; 
在步骤60,若task为重要任务,即task.k>z0,则从pool_vip中选取至多n0个符合task条件的资源组成备选资源池pool_candidate,并从pool_candidate中随机选取一个资源resource,将task下发到资源resource上执行;若pool_candidate为空,设置flag_vip=false,并将task当成普通任务按以下步骤10执行; 
在步骤70,若task为普通任务,即task.k≤z0,则从pool_base中选取至多n0个符合task 条件的资源组成备选资源池pool_candidate,并从pool_candidate中随机选取一个资源resource,将task下发到资源resource上执行;若pool_candidate为空,设置flag_base=false,并将task放入queue_tmp; 
在步骤80,依次将queue_tmp中的任务插入各任务队列; 
在每一个任务调度周期结束后,进行滑动窗口大小ω调整,依次进行如下步骤90、步骤100: 
在步骤90,确定新的ω。若fag_vip=false,则设置ω=min(ωmax,ω+ω');若flag_vip=true并且flag_base=false,则设置ω=max(ωmin,ω-ω');否则ω不变; 
在步骤100,计算普通资源池的资源数目a,优秀资源池的资源数目b,然后从pool_vip中选择resource.v最小的λb个资源,从pool_base中选择resource.v最大的(a+b)ω-b+λb个资源,对以上两部分资源互换; 
每隔10分钟,重新计算pool_base及pool_vip中资源的v值。 
最后应当说明的是:以上实施例仅用以说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细的说明,所属领域的普通技术人员应当理解:依然可以对本发明的具体实施方式进行修改或者等同替换,而未脱离本发明精神和范围的任何修改或者等同替换,其均应涵盖在本发明的权利要求范围当中。 

Claims (7)

1.一种基于滑动窗口的动态资源管理方法,其特征在于,定义系统中可用资源ri的集合Φ包括普通资源池Φbase和优秀资源池Φvip,分别存放普通资源和优秀资源;优先级为k的任务tj的集合为Ψk,根据所述任务的优先级定义所述任务tj为重要任务或者普通任务;定义滑动窗口大小ω表示所述优秀资源池包含的优秀资源在整个资源中所占比例,ω∈(0,1);i=1,2,…n,j=1,2,…m,n和m为自然数;
周期性进行任务调度,每一个任务调度周期结束时,根据标志位Fvip和Fbase的值判断所述普通资源池Φbase和优秀资源池Φvip包含的资源情况,对所述滑动窗口大小ω进行调整,根据所述滑动窗口大小ω对所述普通资源池Φbase和优秀资源池Φvip包含的资源进行调节;
所述任务调度的过程包括:
步骤S1,初始化标志位Fvip=true,Fbase=true;
步骤S2,选取一个非空的任务队列Ψk,选取队首的任务tj,判断所述任务tj为重要任务时,执行步骤S3,判断所述任务tj为普通任务时,执行步骤S4;
步骤S3,优秀资源池Φvip中包含至少一个符合所述任务tj的资源ri时,从所述优秀资源池Φvip中随机选取资源ri执行任务tj,所述优秀资源池Φvip中不包含任何一个符合所述任务tj的资源ri时,设置Fvip=false,将所述任务tj当成普通任务执行步骤S4;
步骤S4,所述普通资源池Φbase中包含至少一个符合任务tj的资源ri时,从所述普通资源池Φbase中随机选取资源ri执行任务tj,所述普通资源池Φbase中不包含任何一个符合所述任务tj的资源ri时,设置Fbase=false;
步骤S5,判断本任务调度周期时间没有结束并且存在非空的任务队列时,执行步骤S2,否则,结束本任务调度周期。
2.如权利要求1所述的方法,其特征在于,所述系统中所述资源ri的集合Φ是动态变化的,根据所述资源的性能指标区分所述普通资源和优秀资源,将所述普通资源和优秀资源分别存放进普通资源池Φbase和优秀资源池Φvip,初始时,Φbase=Φ,Φvip为空,资源ri的优秀程度是根据资源评价函数V(ri)得到的,V(ri)值越大代表资源ri越优秀;所述资源评价函数V(ri)记录过去一段时间内下发到所述任务ri的任务的执行成功率与平均执行时间,与所述任务执行成功率成正比,与所述任务平均执行时间成反比;
系统中所述需调度的任务tj的集合Ψ={tj|j=1,2,…m}是动态变化的,所述任务tj可以分为z个优先级,优先级k的集合Z={1,2,…,z0,z0+1,…,z},优先级大于z0的任务定义为重要任务,优先级小于等于z0的任务定义为普通任务,其中,z0和z根据不同应用场景中服务等级的不同进行设定;
P(tj)表示所述任务tj的优先级,优先级为k的所述任务tj的集合Ψk中按照任务下发时间对任务tj进行FIFO排序并组成队列。
3.如权利要求1所述的方法,其特征在于,所述骤S2中根据队列选择函数选取所述非空的任务队列Ψk,所述优先级为k的任务队列Ψk被选择调度的概率为
Figure FDA00002681312900021
优先级越高的所述任务队列被选择进行调度的概率越大;对所述任务tj进行排序并组成所述任务队列后,选取所述任务队列队首的所述任务tj进行调度。
4.如权利要求1所述的方法,其特征在于,所述步骤S3和步骤S4中,判断所述优秀资源池Φvip或者普通资源池Φbase中是否包含至少一个符合所述任务tj的所述资源ri进行不同操作的方法为:
从所述优秀资源池Φvip或者普通资源池Φbase中选取至多n0个符合所述任务tj的资源ri组成备选资源池Φ(tj),从所述备选资源池Φ(tj)中随机选取资源ri,将所述任务tj下发到所述资源ri上执行,如果所述备选资源池Φ(tj)为空,则判断所述优秀资源池Φvip或者普通资源池Φbase中不包含任何一个符合所述任务tj的资源ri
其中n0为根据应用场景设定的常数。
5.如权利要求1所述的方法,其特征在于,设置临时队列Ψ0
步骤S1中初始化所述临时队列Ψ0={};
步骤S4中,如果所述普通资源池Φbase中不包含任何一个所述符合任务tj的资源ri,设置Fbase=false的同时将任务tj放入临时队列Ψ0中;
在一个所述任务调度周期结束时,将所述临时队列Ψ0中的任务放回到各所述任务队列中。
6.如权利要求1所述的方法,其特征在于,所述滑动窗口大小ω的初始值为根据应用场景设定的常数ω0;根据标志位Fvip和Fbase的值对所述滑动窗口大小ω进行调整的方法为:
如果Fvip=false,则设置ω=min(ωmax,ω+ω');
如果Fvip=true并且Fbase=false时,则设置ω=max(ωmin,ω-ω');
其它情况下,ω不变;
其中ωmax、ωmin和ω'分别表示所述滑动窗口的最大值、最小值和调整步长,为根据应用场景设定的常数。
7.如权利要求6所述的方法,其特征在于,在一个所述任务调度周期结束对所述滑动窗口大小ω进行调节后,根据所述滑动窗口大小ω对所述普通资源池Φbase和优秀资源池Φvip包含的资源进行调节的方法为:
令a=|Φbase|表示普通资源数,b=|Φvip|表示优秀资源数,从所述优秀资源池Φvip中选择资源评价函数V(ri)评价最差的λb个资源,从所述普通资源池Φbase中选择资源评价函数V(ri)评价最优的(a+b)ω-b+λb个资源,将所述λb个资源和(a+b)ω-b+λb个资源互换;
其中λ为根据应用场景设定表示资源交换率的常数,λ∈(0,1)。
CN201210592649.8A 2012-12-31 2012-12-31 一种基于滑动窗口的动态资源管理方法 Expired - Fee Related CN103106116B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210592649.8A CN103106116B (zh) 2012-12-31 2012-12-31 一种基于滑动窗口的动态资源管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210592649.8A CN103106116B (zh) 2012-12-31 2012-12-31 一种基于滑动窗口的动态资源管理方法

Publications (2)

Publication Number Publication Date
CN103106116A true CN103106116A (zh) 2013-05-15
CN103106116B CN103106116B (zh) 2017-02-22

Family

ID=48313998

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210592649.8A Expired - Fee Related CN103106116B (zh) 2012-12-31 2012-12-31 一种基于滑动窗口的动态资源管理方法

Country Status (1)

Country Link
CN (1) CN103106116B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104360902A (zh) * 2014-11-13 2015-02-18 武汉理工大学 一种基于滑动窗口的多优先级元数据任务调度方法
CN107423120A (zh) * 2017-04-13 2017-12-01 阿里巴巴集团控股有限公司 任务调度方法及装置
CN110069749A (zh) * 2019-04-11 2019-07-30 交通运输部规划研究院 货车空载重量估计方法、装置及终端
CN112667368A (zh) * 2019-10-16 2021-04-16 北京京东乾石科技有限公司 一种任务数据处理方法和装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107291566B (zh) * 2017-06-15 2020-06-05 北京京东尚科信息技术有限公司 延迟任务执行的方法和装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5838968A (en) * 1996-03-01 1998-11-17 Chromatic Research, Inc. System and method for dynamic resource management across tasks in real-time operating systems
CN101370247A (zh) * 2007-08-14 2009-02-18 大唐移动通信设备有限公司 一种hs-scch信道分配方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5838968A (en) * 1996-03-01 1998-11-17 Chromatic Research, Inc. System and method for dynamic resource management across tasks in real-time operating systems
CN101370247A (zh) * 2007-08-14 2009-02-18 大唐移动通信设备有限公司 一种hs-scch信道分配方法及装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104360902A (zh) * 2014-11-13 2015-02-18 武汉理工大学 一种基于滑动窗口的多优先级元数据任务调度方法
CN107423120A (zh) * 2017-04-13 2017-12-01 阿里巴巴集团控股有限公司 任务调度方法及装置
CN107423120B (zh) * 2017-04-13 2020-06-30 阿里巴巴集团控股有限公司 任务调度方法及装置
CN110069749A (zh) * 2019-04-11 2019-07-30 交通运输部规划研究院 货车空载重量估计方法、装置及终端
CN110069749B (zh) * 2019-04-11 2021-04-09 交通运输部规划研究院 货车空载重量估计方法、装置及终端
CN112667368A (zh) * 2019-10-16 2021-04-16 北京京东乾石科技有限公司 一种任务数据处理方法和装置

Also Published As

Publication number Publication date
CN103106116B (zh) 2017-02-22

Similar Documents

Publication Publication Date Title
CN103106116A (zh) 一种基于滑动窗口的动态资源管理方法
Huang et al. An optimistic job scheduling strategy based on QoS for cloud computing
US20160210174A1 (en) Hybrid Scheduler and Power Manager
KR20210056430A (ko) 커밋먼트-인식 스케줄러
CN108154317B (zh) 多云环境下基于实例自适应分配整合的工作流组调度方法
CN108108225B (zh) 一种面向云计算平台的任务调度方法
CN109144699A (zh) 分布式任务调度方法、装置及系统
CN104268018B (zh) 一种Hadoop集群中的作业调度方法和作业调度器
CN112905326B (zh) 任务处理方法及装置
EP1522924A2 (en) Improved EDF scheduling method
CN104572106A (zh) 一种基于小内存处理大规模数据的并行程序开发方法
CN104079502B (zh) 一种多用户多队列调度方法
US20130061233A1 (en) Efficient method for the scheduling of work loads in a multi-core computing environment
EP0989770A1 (en) Packet transfer control apparatus and scheduling method therefor
WO2022257631A1 (zh) 面向移动边缘计算的分布式专用保护业务调度方法
CN111861412A (zh) 面向完成时间优化的科学工作流调度方法及系统
Dutta et al. A smart job scheduling system for cloud computing service providers and users: modeling and simulation
CN103294548A (zh) 一种基于分布式文件系统的io请求调度方法和系统
CN109324880A (zh) 一种适用于实时系统周期任务模型的低功耗调度方法
US20200379804A1 (en) Multi-level scheduling
Guirguis et al. Adaptive scheduling of web transactions
CN114938372A (zh) 一种基于联邦学习的微网群请求动态迁移调度方法及装置
US8640131B2 (en) Demand-based processor cycle allocation subsequent to equal group-based processor cycle distribution
CN112925616A (zh) 任务分配方法、装置、存储介质及电子设备
CN102546423A (zh) 队列调度方法、装置及网络设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170222