CN109918187B - 任务调度方法、装置、设备和存储介质 - Google Patents
任务调度方法、装置、设备和存储介质 Download PDFInfo
- Publication number
- CN109918187B CN109918187B CN201910184148.8A CN201910184148A CN109918187B CN 109918187 B CN109918187 B CN 109918187B CN 201910184148 A CN201910184148 A CN 201910184148A CN 109918187 B CN109918187 B CN 109918187B
- Authority
- CN
- China
- Prior art keywords
- task
- backup
- host
- time
- backup server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Hardware Redundancy (AREA)
Abstract
本发明公开了一种任务调度方法、装置、设备和存储介质。该方法包括:监测到第一主机获取第一任务时,控制任务备份服务器备份第一任务作为备份任务;确定第一任务的执行时间,并由第一主机处理第一任务;监测到第一主机对第一任务的处理时长达到执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理备份任务。本发明实施例提供了一种任务调度方法,以实现分布式集群中任务的高效调度,提高分布式集群的处理性能。
Description
技术领域
本发明实施例涉及计算机应用技术领域,尤其涉及一种任务调度方法、装置、设备和存储介质。
背景技术
任务调度是系统的重要组成部分,任务调度直接影响着系统的性能,系统常通过任务调度实现对业务数据的处理。分布式系统中,通常包括多个分布式主机和一个任务调度中心,由任务调度中心为各分布式主机分配任务,实现任务调度,但是由于任务调度中心与各分布式主机之间的通讯延迟,不能实现对任务的实时调度,导致系统处理性能较低。
发明内容
本发明提供一种任务调度方法、装置、设备和存储介质,以实现分布式集群中任务高效调度,提高系统处理性能。
第一方面,本发明实施例提供了一种任务调度方法,该方法包括:
监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务;
确定所述第一任务的执行时间,并由第一主机处理所述第一任务;
监测到第一主机对所述第一任务的处理时长达到所述执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务。
第二方面,本发明实施例还提供了一种任务调度装置,该装置包括:
备份模块,用于监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务;
处理模块,用于确定所述第一任务的执行时间,并由第一主机处理所述第一任务;
异常处理模块,用于监测到第一主机对所述第一任务的处理时长达到所述执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务。
第三方面,本发明实施例还提供了一种设备,所述设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明实施例中任一所述的任务调度方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行实现如本发明实施例中任一所述的任务调度方法。
本发明实施例通过监测到第一主机获取到第一任务时,控制任务备份服务器备份第一任务,确定第一任务的执行时间,并由第一主机处理第一任务,监测到第一主机对第一任务的处理时长到达执行时间时,如果第一任务未处理完成,控制第二主机访问任务备份服务器获取备份任务并处理。使得分布式主机分别处理任务,提高分布式集群的任务的高效调度,可提高分布式集群的处理性能。
附图说明
图1是本发明实施例一提供的一种任务调度方法的步骤流程图;
图2是本发明实施例一提供的一种分布式集群的架构示意图;
图3是本发明实施例二提供的一种任务调度方法的步骤流程图;
图4是本发明实施例二提供的一种任务调度方法的功能模块示意图;
图5是本发明实施例三提供的一种任务调度装置的结构示意图;
图6是本发明实施例四提供的一种设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一提供的一种任务调度方法的步骤流程图,本实施例可适用于分布式集群任务高效调度的情况,该方法可以由任务调度装置来执行,该装置可以通过软件和/或硬件的方式实现,并一般可以集成在分布式主机中。本发明实施例提供的任务调度方法,应用于分布式集群,其中,分布式集群包括至少一个第一主机、至少一个第二主机和至少一个任务备份服务器。
图2是本发明实施例一提供的一种分布式集群的架构示意图;参见图2,分布式集群中包括第一主机10、第二主机11和任务备份服务器12,第一主机10和第二主机11可以是服务器和终端设备等,第一主机10用于执行本地的任务,第二主机11用于当第一主机10执行任务失败时执行失败任务,任务备份服务器用于备份第一主机10中正在执行的任务。另外,第一主机10和第二主机11在使用本发明提出的任务调度方法时,在本质上并无不同,只是使用任务调度方法时所处的角度不同,例如任一主机相对于本身使用任务调度方法为第一主机,当其他主机使用任务调度方法时,该主机此时可以是其他主机的第二主机。
参见图1,该方法具体包括如下步骤:
步骤101、监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务。
其中,第一主机可以是用于执行本地的任务的主机,可以包括服务器和智能终端等,第一任务可以是在第一主机中待执行的任务,可以由第一主机产生或者由其他主机发送给第一主机,第一任务可以是一个任务,也可以是多个任务的集合,任务备份服务器可以是用于备份第一主机中正在执行的任务的服务器,备份任务可以是第一主机中正在执行的任务,备份任务与第一主机中正在处理的任务数量相对应,例如,第一主机正在处理4个任务,那么任务备份服务器中对应第一主机的备份任务可以是4个。
具体的,可以对第一主机进行监测,当监测到第一主机生成或者获取到待执行的任务时,由第一主机将该任务发送给任务备份服务器,任务备份服务器将接收到的任务存储,将存储后的任务作为备份任务。
步骤102、确定所述第一任务的执行时间,并由第一主机处理所述第一任务。
其中,执行时间可以是执行第一任务所需要的时间,可以通过解析第一任务的信息获取或者根据经验进行设定。
具体的,可以由第一主机确定第一任务执行所需要的时间,例如,根据经验将第一任务的执行时间设定为5秒,然后由第一主机根据CPU(Central Processing Unit,中央处理器)的数量或者性能不同可以同时处理不同数量的第一任务,第一主机处理第一任务可以时每当获取到第一任务时立即处理或者是等待第一任务的任务数量达到要求,同时处理这一批的第一任务。
步骤103、监测到第一主机对所述第一任务的处理时长达到所述执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务。
其中,处理时长可以是第一主机已经处理第一任务的时间长度,可以通过设定计时器或者计时线程确定,例如在第一主机开始执行第一任务的同时设定一个计时器用于确定第一主机处理第一任务的时间长度;第一任务未处理完成可以指第一主机在执行时间内未得到第一任务的执行结果或者未获得回传参数;第二主机可以是分布式集群中用于在第一主机执行第一任务失败时的备用主机,在分布式集群中,第一主机和第二主机可以互为备份主机,例如,一个主机A在执行本地的任务时,可以是第一主机,当作为其他主机的备份主机时,可以是第二主机,进一步的,第二主机可以是一台分布式集群主机也可以是多台分布式集群主机。
具体的,可以在第一主机开始执行第一任务的同时设置一个计时器Timer,对第一主机的Timer进行监测,当监测到Timer的时间大于执行时间时,也就是监测到第一主机已经处理第一任务的时间长度达到执行时间,如果第一主机没有获取到第一任务的处理结果或者没有接收到第一任务的回传参数,也就是第一任务未处理完成时,可以控制第二主机访问任务备份服务器,获取任务备份服务器的备份任务,并由第二主机执行备份任务,其中,控制第二主机访问任务备份服务器的方式可以包括控制第二主机访问任务备份服务器或者根据设定时间,第二主机对任务备份服务器发起轮询,第二主机主动访问任务备份服务器。
本发明实施例的技术方案,通过监测到第一主机获取到第一任务时,将第一任务在任务备份服务器中进行备份,由第一主机确定第一任务的执行时间并执行第一任务,当第一任务的处理时长达到执行时间,若第一任务未处理完成,控制第二主机访问任务备份服务器获取备份任务并处理该备份任务,实现任务的本地调度,无需额外网络开销,可提高分布式集群的处理性能。
进一步的,在监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务时,还包括:
控制所述任务备份服务器锁定所述第二主机对备份任务的操作权限。
其中,锁定可以是指第二主机无法对任务备份服务器中的备份任务进行操作,例如第二主机无法进行对备份任务读取和更新操作等,操作权限可以是指第二主机对备份任务的操作权限,例如增删改查等操作的权限。
具体的,任务备份服务器可以对备份任务设置操作权限,锁定第二主机对备份任务的操作权限,禁止第二主机获取到备份任务,例如可以设置一个访问表,访问表存储主机唯一编号对应的主机可以具有对备份任务的访问权限,还可以为备份任务设置一个时间锁,时间锁对应的锁定时间内任何主机无法对备份任务进行操作。通过锁定第二主机对备份任务的操作权限,使得第一主机正常完成第一任务处理时,避免第二主机处理备份任务,防止造成分布式集群的处理性能得浪费。
实施例二
图2是本发明实施例一提供的一种分布式集群的架构示意图,本实施例以上述实施例为基础进行具体化,本发明实施例的方法具体包括如下步骤:
步骤201、监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务。
步骤202、确定所述第一任务的超时时间,获取任务备份服务器的第一当前时间,并根据所述超时时间和第一当前时间确定所述备份任务的解锁时间。
其中,超时时间可以是用于表征任务服务器用于等待第一任务执行的最长时间,超时时间可以通过第一任务的执行时间和第一主机到任务备份服务器的通讯时间确定,第一当前时间可以是任务备份服务器接收到的第一主机发送的第一任务时的时间,可以根据任务备份服务器的系统时间确定,解锁时间可以是解除第二主机对备份任务操作权限锁定的时间,可以一个时间点或时间段,例如,7:10解除第二主机对备份任务的操作权限锁定,或者10分钟后接触第二主机对备份任务的操作权限锁定。
具体的,可以由任务备份服务器获取第一任务的执行时间和第一主机到任务备份服务器的通讯时间,可以根据执行时间和通讯时间确定第一任务的超时时间,可以将通讯时间和执行时间的和作为超时时间,可以理解的是,通过通讯时间和执行时间确定超时时间的方式并不限于上述例子,还可以包括各自计算方式,例如,将通讯时间的2倍与执行时间之和作为超时时间,可以获取任务备份服务器的当前的系统时间作为当前时间,可以根据超时时间和当前时间确定解除第二主机对备份任务锁定的解锁时间。
步骤203、根据所述解锁时间锁定所述第二主机对所述备份任务的操作权限。
其中,锁定可以是指任务备份服务器禁止第二主机获取备份任务,可以通过文件访问权限锁定或者禁止第二主机访问任务备份服务器实现,操作权限可以是指任务备份服务器中第二主机对备份任务的读取和更新等操作的权限。
具体的,任务备份服务器可以根据获取到的解锁时间为第二主机设置一个访问备份任务的限制条件,也就是在解锁时间的限制时间范围内禁止第二主机访问备份任务,可以实现锁定第二主机对备份任务的操作权限。
步骤204、确定所述第一任务的执行时间,并由第一主机处理所述第一任务。
步骤205、监测到第一主机对所述第一任务的处理时长达到所述执行时间时,如果未获取到所述第一任务的任务完成参数,则确定所述第一任务未处理完成,否则,确定所述第一任务处理完成。
其中,完成参数可以时第一主机在达到处理时长时获取到处理完成第一任务的参数,可以包括第一任务的处理结果或者一个反馈参数。
具体的,第一主机在开始执行第一任务时可以建立一个计时器Timeir,可以将计时器Timeir的计时设置为执行时间,当Timeir到达执行时间时,第一主机可以调用任务参数获取方法,获取第一任务处理结果或者反馈参数,如果没有获取到任务参数,那么可以确定第一任务没有处理完成,如果获取到任务参数,那么可以确定第一任务处理完成。
步骤206、若所述第一任务未处理完成。
具体的,第一主机可以判断第一任务是否处理完成,如果处理完成,可以任务备份服务器可以删除第一任务对应的备份任务,第一主机可以返回执行步骤201继续监测是否获取到第一任务的步骤,进一步的,如果第一任务处理完成,任务备份服务器可以删除第一任务对应的备份任务,如果第一任务没有处理完成,那么可以继续执行步骤207。
步骤207、监测到第二主机访问所述任务备份服务器时,获取所述任务备份服务器中第二当前时间,判断第二当前时间是否大于所述备份任务对应的解锁时间。
其中,第二当前时间可以是第二主机访问任务备份服务器的时间,可以通过获取第二主机访问任务备份服务器时的任务备份服务器的系统时间得到。
具体的,任务备份服务器可以监测第二主机的访问,当监测到第二主机对任务备份服务器进行访问时,可以获取任务备份服务器的系统时间作为第二当前时间,可以对获取到的第二当前时间与备份任务的对应解锁时间进行对比,判断当前时间是否超出解锁时间的时间限制范围,例如,解锁时间为7:10,而第二当前时间为7:14,则第二当前时间大于解锁时间,否则为小于解锁时间。
步骤208、如果是,则授予所述第二主机对备份任务的操作权限,控制第二主机获取备份任务并处理所述备份任务,如果否,则继续等待第二主机访问所述任务备份服务器。
具体的,如果第二当前时间大于解锁时间,那么可以给第二主机添加访问备份任务的操作权限,例如,可以将第二主机的唯一标识号添加进备份任务对应权限表中,使得第二主机可以访问备份任务,可以对备份任务进行操作,如果第二当前时间不大于解锁时间,那么任务备份服务器返回执行等待第二主机访问的步骤207。
步骤209、更新所述第二主机对所述备份任务的操作权限。
其中,操作权限可以是第二主机对备份任务进行操作的权限。
具体的,第二主机获取到备份任务并处理时,可以更新任务备份服务器中备份任务对应的操作权限,例如,可以将第二主机的唯一标号添加进允许第二主机访问信息表中实现更新第二主机对备份任务的操作权限。示例性的,可以将备份任务的锁定时间根据第二主机进行更新,例如第二主机处理备份任务需要10分钟,那么可以将备份任务对应的解锁时间更新为10分钟后,实现更新第二主机对所述备份任务的操作权限。
示例性的,图4是本发明实施例二提供的一种任务调度方法的功能模块示意图,以通过设置本地定时触发回传参数作为第一任务处理完成条件为例,参见图4,分布式集群包括一个第一主机22、两个第二主机23和一个任务备份服务器21,第一主机22可以获取到第一任务时,可以设置本地定时触发的回传参数p,将回传参数的触发时间dtime设为第一任务的执行时间,可以设置回传参数p的回传调用方法f,可以设置回传调用方法f的最大执行时长mtime,其中最大执行时长mtime可以与第一主机22与任务备份服务器的21的通讯时间相关,可以将第一任务发送到任务备份服务器21进行备份生成备份任务,根据dtime和mtime可以计算出备份任务的超时时间,第一主机22处理第一任务,如果到达触发时间,可以调用回传调用方法f,将回传参数p传入,完成第一任务的处理,任务备份服务器可以删除第一任务对应的备份任务。两台第二主机23可以定时轮询任务备份服务器,如果发现超时的备份任务,两台第二主机23进行争抢获取备份任务的处理权,将备份任务恢复到第二主机本地23,第二主机23实现对备份任务的处理。
本发明实施例的技术方案,通过监测第一主机获取到第一任务,控制任务备份服务器备份第一任务,在备份任务服务器中为备份任务根据第一任务的超时时间确定解锁时间,根据解锁时间锁定第二主机对备份任务的操作权限,第一主机确定第一任务的执行时间并处理第一任务,监测到第一主机对第一任务处理时长达到执行时间时,判断第一任务是否处理完成,如果未处理完成,则监测到第二主机访问任务备份服务器时,判断当前第二时间是否大于解锁时间,如果大于,则第二主机获取到备份任务并处理,在第二主机获取到备份任务时更新备份任务的操作权限。实现第一主机任务的本地调度,无需任务中心调度任务,确保任务调度的低延迟,通过锁定时间对备份任务进行锁定,确保分布式主机处理任务的高可靠性,提高分布式集群处理性能。
实施例三
图5式本发明实施例三提供的一种任务调度装置的结构示意图。本发明实施例所提供的任务调度装置可执行本发明任意实施例所提供的任务调度方法,具备执行方法相应的功能模块和有益效果。参见图4,本发明实施例提供的任务调度装置包括:备份模块301、处理模块302和异常处理模块303。
其中,备份模块301,用于监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务。
处理模块302,用于确定所述第一任务的执行时间,并由第一主机处理所述第一任务;
异常处理模块303,用于监测到第一主机对所述第一任务的处理时长达到所述执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务。
本发明实施例的技术方案,通过备份模块监测到第一主机获取到第一任务时,控制任务备份服务器备份第一任务,处理模块确定第一任务的执行时间,并由第一主机处理第一任务,异常处理模块,监测到第一主机对第一任务的处理时长达到执行时间,如果第一任务未处理完成,控制第二主机访问任务备份服务器获取备份任务并处理。使得主机高效处理分布式集群任务,提高分布式集群的处理性能。
进一步的,该装置还包括:
权限锁定模块,用于控制所述任务备份服务器锁定所述第二主机对备份任务的操作权限。
进一步的,权限锁定模块,包括:
解锁时间确定单元,用于确定所述第一任务的超时时间,获取任务备份服务器的第一当前时间,并根据所述超时时间和第一当前时间确定所述备份任务的解锁时间。
权限锁定单元,用于根据所述解锁时间锁定所述第二主机对所述备份任务的操作权限。
进一步的,异常处理模块,包括:
任务完成确定单元,用于如果未获取到所述第一任务的任务完成参数,则确定所述第一任务未处理完成,否则,确定所述第一任务处理完成。
进一步的,异常处理模块,还包括:
权限更新单元,用于更新所述第二主机对所述备份任务的操作权限。
进一步的,异常处理模块,包括:
解锁时间判断单元,用于监测到第二主机访问所述任务备份服务器时,获取所述任务备份服务器中第二当前时间,判断第二当前时间是否大于所述备份任务对应的解锁时间。
任务获取单元,用于如果是,则授予所述第二主机对备份任务的操作权限,控制第二主机获取备份任务,如果否,则继续等待第二主机访问所述任务备份服务器。
实施例四
图6是本发明实施例四提供的一种设备的结构示意图,如图6所示,该设备包括处理器70、存储器71、输入装置72和输出装置73;设备中处理器70的数量可以是一个或多个,图6中以一个处理器70为例;设备中的处理器70、存储器71、输入装置72和输出装置73可以通过总线或其他方式连接,图6中以通过总线连接为例。
存储器71作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的任务调度方法对应的程序指令/模块(例如,任务调度装置中的备份模块301、处理模块302和异常处理模块303)。处理器70通过运行存储在存储器71中的软件程序、指令以及模块,从而执行设备的各种功能应用以及数据处理,即实现上述的任务调度方法。
存储器71可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据终端的使用所创建的数据等。此外,存储器71可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器71可进一步包括相对于处理器70远程设置的存储器,这些远程存储器可以通过网络连接至设备/终端/服务器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置72可用于接收输入的数字或字符信息,以及产生与设备的用户设置以及功能控制有关的键信号输入。输出装置73可包括显示屏等显示设备。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行一种任务调度方法,该方法包括:
监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务;
确定所述第一任务的执行时间,并由第一主机处理所述第一任务;
监测到第一主机对所述第一任务的处理时长达到所述执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的任务调度方法中的相关操作。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(RandomAccess Memory,RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
值得注意的是,上述任务调度装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (7)
1.一种任务调度方法,其特征在于,应用于分布式集群,其中,所述分布式集群包括至少一个第一主机、至少一个第二主机和至少一个任务备份服务器,所述方法包括:
监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务,控制所述任务备份服务器锁定所述第二主机对备份任务的操作权限,其中,各所述第二主机按照设定时间对所述任务备份服务器发起轮询,各所述第二主机主动访问所述任务备份服务器;
确定所述第一任务的执行时间,并由第一主机处理所述第一任务;
监测到第一主机对所述第一任务的处理时长达到所述执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务;
控制所述第二主机访问任务备份服务器获取备份任务并处理所述备份任务,包括:监测到第二主机访问所述任务备份服务器时,获取所述任务备份服务器中第二当前时间,判断第二当前时间是否大于所述备份任务对应的解锁时间;
如果是,则授予所述第二主机对备份任务的操作权限,控制第二主机获取备份任务并处理所述备份任务,如果否,则继续等待第二主机访问所述任务备份服务器。
2.根据权利要求1所述的方法,其特征在于,所述控制所述任务备份服务器锁定所述第二主机对备份任务的操作权限,包括:
确定所述第一任务的超时时间,获取任务备份服务器的第一当前时间,并根据所述超时时间和第一当前时间确定所述备份任务的解锁时间;
根据所述解锁时间锁定所述第二主机对所述备份任务的操作权限。
3.根据权利要求1所述的方法,其特征在于,所述监测到第一主机对所述第一任务的处理时长达到所述执行时间之后,还包括:
如果未获取到所述第一任务的任务完成参数,则确定所述第一任务未处理完成,否则,确定所述第一任务处理完成。
4.根据权利要求1所述的方法,其特征在于,在控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务之后,还包括:
更新所述第二主机对所述备份任务的操作权限。
5.一种任务调度装置,其特征在于,应用于分布式集群,其中,所述分布式集群包括至少一个第一主机、至少一个第二主机和至少一个任务备份服务器,所述装置包括:
备份模块,用于监测到第一主机获取第一任务时,控制任务备份服务器备份所述第一任务作为备份任务;
处理模块,用于确定所述第一任务的执行时间,并由第一主机处理所述第一任务;
权限锁定模块,用于控制所述任务备份服务器锁定所述第二主机对备份任务的操作权限,其中,各所述第二主机按照设定时间对所述任务备份服务器发起轮询,各所述第二主机主动访问所述任务备份服务器;异常处理模块,用于监测到第一主机对所述第一任务的处理时长达到所述执行时间时,若所述第一任务未处理完成,则控制第二主机访问任务备份服务器获取备份任务并处理所述备份任务;
异常处理模块,包括:解锁时间判断单元,用于监测到第二主机访问所述任务备份服务器时,获取所述任务备份服务器中第二当前时间,判断第二当前时间是否大于所述备份任务对应的解锁时间;任务获取单元,用于如果是,则授予所述第二主机对备份任务的操作权限,控制第二主机获取备份任务,如果否,则继续等待第二主机访问所述任务备份服务器。
6.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-4任一所述的任务调度方法。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行实现如权利要求1-4中任一所述的任务调度方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910184148.8A CN109918187B (zh) | 2019-03-12 | 2019-03-12 | 任务调度方法、装置、设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910184148.8A CN109918187B (zh) | 2019-03-12 | 2019-03-12 | 任务调度方法、装置、设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109918187A CN109918187A (zh) | 2019-06-21 |
CN109918187B true CN109918187B (zh) | 2021-10-08 |
Family
ID=66964409
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910184148.8A Active CN109918187B (zh) | 2019-03-12 | 2019-03-12 | 任务调度方法、装置、设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109918187B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110532083A (zh) * | 2019-09-04 | 2019-12-03 | 深圳市思迪信息技术股份有限公司 | 定时任务调度方法及装置 |
CN110717484B (zh) * | 2019-10-11 | 2021-07-27 | 支付宝(杭州)信息技术有限公司 | 一种图像处理方法和系统 |
CN110912911B (zh) * | 2019-11-29 | 2022-01-25 | 宁波奥克斯电气股份有限公司 | 一种空调设备权限控制方法、用户设备及控制系统 |
CN111625391B (zh) * | 2020-05-29 | 2023-06-13 | 北京思特奇信息技术股份有限公司 | 一种任务处理方法、系统和电子设备 |
CN113821313B (zh) * | 2020-12-28 | 2024-08-16 | 京东科技控股股份有限公司 | 一种任务调度方法、装置及电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101986272A (zh) * | 2010-11-05 | 2011-03-16 | 北京大学 | 一种云计算环境下的任务调度方法 |
CN103916449A (zh) * | 2013-01-09 | 2014-07-09 | 技嘉科技股份有限公司 | 一种远程备份系统及其远程备份方法 |
CN104461747A (zh) * | 2014-12-31 | 2015-03-25 | 合一网络技术(北京)有限公司 | 一种分布式任务调度系统 |
CN106034137A (zh) * | 2015-03-09 | 2016-10-19 | 阿里巴巴集团控股有限公司 | 用于分布式系统的智能调度方法及分布式服务系统 |
CN106412011A (zh) * | 2016-08-30 | 2017-02-15 | 广州鼎甲计算机科技有限公司 | 一种多节点间无共享存储的高可用集群系统和实现 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8010833B2 (en) * | 2009-01-20 | 2011-08-30 | International Business Machines Corporation | Software application cluster layout pattern |
CN103761148B (zh) * | 2014-01-26 | 2017-04-05 | 北京京东尚科信息技术有限公司 | 集群定时调度任务的控制方法 |
CN105630580A (zh) * | 2014-11-07 | 2016-06-01 | 远光软件股份有限公司 | 基于调度平台的数据汇总方法及数据汇总装置 |
CN107203420A (zh) * | 2016-03-18 | 2017-09-26 | 北京京东尚科信息技术有限公司 | 任务调度实例的主从切换方法和装置 |
CN106406993B (zh) * | 2016-09-06 | 2019-11-15 | 努比亚技术有限公司 | 一种定时任务管理方法和系统 |
CN106569886B (zh) * | 2016-10-26 | 2020-10-16 | 曙光信息产业(北京)有限公司 | 策略调度方法和策略调度系统 |
CN108897876A (zh) * | 2018-06-29 | 2018-11-27 | 中科鼎富(北京)科技发展有限公司 | 一种数据接入方法及装置 |
-
2019
- 2019-03-12 CN CN201910184148.8A patent/CN109918187B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101986272A (zh) * | 2010-11-05 | 2011-03-16 | 北京大学 | 一种云计算环境下的任务调度方法 |
CN103916449A (zh) * | 2013-01-09 | 2014-07-09 | 技嘉科技股份有限公司 | 一种远程备份系统及其远程备份方法 |
CN104461747A (zh) * | 2014-12-31 | 2015-03-25 | 合一网络技术(北京)有限公司 | 一种分布式任务调度系统 |
CN106034137A (zh) * | 2015-03-09 | 2016-10-19 | 阿里巴巴集团控股有限公司 | 用于分布式系统的智能调度方法及分布式服务系统 |
CN106412011A (zh) * | 2016-08-30 | 2017-02-15 | 广州鼎甲计算机科技有限公司 | 一种多节点间无共享存储的高可用集群系统和实现 |
Also Published As
Publication number | Publication date |
---|---|
CN109918187A (zh) | 2019-06-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109918187B (zh) | 任务调度方法、装置、设备和存储介质 | |
CN107748695B (zh) | 定时任务处理方法、装置、存储介质和计算机设备 | |
US7269723B2 (en) | Reducing the boot time of a client device in a client device/data center environment | |
EP0647901A2 (en) | Control of access to a networked system | |
CN108462687B (zh) | 防刷登录的方法、装置、终端设备及存储介质 | |
CN106034120B (zh) | 一种多进程访问可信应用的方法和系统 | |
CN103826215A (zh) | 一种在终端设备上进行Root权限管理的方法和装置 | |
EP3544225A1 (en) | Methods and apparatus to manage timing in a blockchain network | |
WO2019134402A1 (zh) | 设备操作方法、集群系统、电子设备及可读存储介质 | |
CN110289965B (zh) | 一种应用程序服务的管理方法及装置 | |
CN113656157A (zh) | 一种分布式任务调度方法、装置、存储介质及电子设备 | |
CN111541762B (zh) | 数据处理的方法、管理服务器、设备及存储介质 | |
CN106254312B (zh) | 一种通过虚拟机异构实现服务器防攻击的方法及装置 | |
CN112148480A (zh) | 基于多线程的任务处理方法、装置、设备及存储介质 | |
CN110505246B (zh) | 客户端网络通讯检测方法、装置及存储介质 | |
CN108494749B (zh) | Ip地址禁用的方法、装置、设备及计算机可读存储介质 | |
CN108536541B (zh) | 流程引擎对象处理方法及装置 | |
CN117193974A (zh) | 基于多进程/线程的配置请求处理方法及装置 | |
CN115665265A (zh) | 请求处理方法、装置、设备、存储介质及系统 | |
CN115576626A (zh) | 一种usb设备安全挂载和卸载的方法、设备和存储介质 | |
CN112379952B (zh) | 一种跨进程回调的实现方法 | |
CN106897325B (zh) | 一种数据加载方法和装置 | |
CN108459901A (zh) | 一种进程锁的处理方法、装置及系统 | |
CN114172903A (zh) | slurm调度系统的节点扩容方法、装置、设备和介质 | |
JP2005071171A (ja) | バッチジョブ実行制御方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |