CN113590287B - 任务处理方法、装置、设备、存储介质及调度系统 - Google Patents
任务处理方法、装置、设备、存储介质及调度系统 Download PDFInfo
- Publication number
- CN113590287B CN113590287B CN202110860588.8A CN202110860588A CN113590287B CN 113590287 B CN113590287 B CN 113590287B CN 202110860588 A CN202110860588 A CN 202110860588A CN 113590287 B CN113590287 B CN 113590287B
- Authority
- CN
- China
- Prior art keywords
- task
- scheduling device
- state
- dispatching equipment
- main dispatching
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 23
- 238000000034 method Methods 0.000 claims description 23
- 238000012545 processing Methods 0.000 claims description 17
- 238000011144 upstream manufacturing Methods 0.000 abstract description 7
- 238000005516 engineering process Methods 0.000 abstract description 2
- 238000004590 computer program Methods 0.000 description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000005012 migration Effects 0.000 description 1
- 238000013508 migration Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
- G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本公开提供了任务处理方法、装置、设备、存储介质及调度系统,涉及计算机技术领域,具体涉及任务调度领域。具体实现方案为:确定当前时间和主调度设备的任务完成时间;其中,主调度设备的任务完成时间是在检测到主调度设备完成任务列表中的任一任务的情况下更新的;若当前时间和任务完成时间的时间间隔大于第一阈值,则确定主调度设备的状态为无效,并执行任务列表中在主调度设备的任务完成时间之后的任务。根据本公开的技术,能够避免由于主调度设备宕机,造成上游任务的持续失败,无法执行下游任务的问题。
Description
技术领域
本公开涉及计算机技术领域,尤其涉及任务调度领域。
背景技术
目前,在大数据的计算、分析和处理时,一般由多个任务单元组成,每个任务单元完成特定的数据处理逻辑。多个任务单元之间往往有着强依赖关系,上游任务执行并成功,下游任务才可以执行。而为了保证数据处理结果的准确性,就必须要求这些任务按照上下游依赖关系有序、高效的执行。在调度系统运行的过程中,调度系统会因为各种不可抗力原因(如断电,网络问题,容器迁移,自身程序bug等)而宕机,从而造成上游任务的持续失败,无法执行下游任务,影响实际业务,造成不可挽回的损失。
发明内容
本公开提供了一种任务处理方法、装置、设备、存储介质及调度系统。
根据本公开的一方面,提供了一种任务处理方法,包括:
确定当前时间和主调度设备的任务完成时间;其中,主调度设备的任务完成时间是在检测到主调度设备完成任务列表中的任一任务的情况下更新的;
若当前时间和任务完成时间的时间间隔大于预设阈值第一阈值,则确定主调度设备的状态为无效,并执行任务列表中在主调度设备的任务完成时间之后的任务。
根据本公开的另一方面,提供了一种任务处理装置,包括:
确定模块,用于确定当前时间和主调度设备的任务完成时间;其中,所述主调度设备的任务完成时间是在检测到所述主调度设备完成所述任务列表中的任一任务的情况下更新的;
第一控制模块,用于若所述当前时间和所述任务完成时间的时间间隔大于第一阈值,则确定所述主调度设备的状态为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务。
根据本公开的另一方面,提供了一种调度系统,包括:主调度设备及至少一个备用调度设备;其中,所述备用调度设备执行本公开实施例中任意一种任务处理方法。
根据本公开的另一方面,提供了一种电子设备,包括:
至少一个处理器;以及
与至少一个处理器通信连接的存储器;其中,
存储器存储有可被至少一个处理器执行的指令,指令被至少一个处理器执行,以使至少一个处理器能够执行本公开实施例中任意一种任务处理方法。
根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,计算机指令用于使计算机执行本公开实施例中任意一种任务处理方法。
根据本公开的另一方面,提供了一种计算机程序产品,包括计算机程序,计算机程序在被处理器执行时实现本公开实施例中任意一种任务处理方法。
上述申请中的一个实施例具有如下优点或有益效果:由于当前时间和主调度设备的任务完成时间的时间间隔大于预设第一阈值,说明主调度设备在超过第一阈值的时长内未执行任务列表中的任务,则确定主调度设备无效并执行任务列表中在任务完成时间之后的任务,避免了由于主调度设备宕机,造成上游任务的持续失败,无法执行下游任务的问题,降低了调度失败的风险,从而保证了任务的正常执行,提升调度过程的整体鲁棒性,进而减少了由于主调度设备宕机导致的业务损失。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1是根据本公开一实施例的任务处理方法的流程图;
图2是根据本公开一实施例中现有技术与任务处理方法的对比图;
图3是根据本公开一实施例的任务处理方法的具体流程图;
图4是根据本公开一实施例的任务处理装置的框图;
图5是根据本公开另一实施例的任务处理装置的框图;
图6是根据本公开一实施例的调度系统的框图;
图7是用来实现本公开实施例的任务处理方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
图1是根据本申请一实施例的任务处理方法的流程图。如图1所示,该方法可以包括:
S101、确定当前时间和主调度设备的任务完成时间;其中,主调度设备的任务完成时间是在检测到主调度设备完成任务列表中的任一任务的情况下更新的;
S102、若当前时间和任务完成时间的时间间隔大于第一阈值,则确定主调度设备的状态为无效,并执行任务列表中主调度设备的任务完成时间之后的任务。
在步骤S101中,示例性地,调度系统中包括一个主调度设备和多个备用调度设备,其中,任务处理方法应用在备用调度设备中。在本实施例中,主调度设备需要按照预定的时间执行任务列表中对应的任务,例如,五分钟执行一次任务。而任务列表中的任务可以是相同的,也可以是不同的。在主调度设备每执行完一次任务之后,会将此次任务的任务完成时间记录在数据库中,例如,数据库可以为MySQL数据库(关系型数据库管理系统),还可以为其他数据库,在此不作限定。可以理解的是,主调度设备的任务完成时间为主调度设备最近一次完成任务列表中的任务的时间。数据库中可以记录主调度设备完成每个任务的时间,其中最新的时间即上述主调度设备的任务完成时间。数据库中也可以只记录最近一次的主调度设备完成任务的时间即上述任务完成时间。当数据库中记录每个任务的完成时间时,需要定时对任务的完成时间以及已经执行过的任务数据进行清理,从而降低数据库的存储压力,保证任务数据的处理速度。
在步骤S102中,示例性地,当备用调度设备获取到的当前时间和最近一次的主调度设备的任务完成时间的时间差大于第一阈值时,则说明主调度设备从最近一次的主调度设备的任务完成时间到当前时间此段时间区间中主调度设备的状态持续处于无效状态。在本实施例中,第一阈值可以设定为任务列表中相邻任务间的时间间隔,例如,若规定每隔五分钟执行一次任务列表中的任务,第一阈值可以设置为五分钟。
示例性地,由于最近一次的主调度设备的任务完成时间到当前时间此段时间区间中主调度设备的状态持续处于无效状态,则主调度设备的任务完成时间后的任务均未执行,所以需要对未执行的任务进行补运行。
示例性地,在任务列表中的第i个任务的起始时刻确定主调度设备的状态处于无效状态,则执行任务列表中的第i-1任务和第i个任务。第i个任务为当前时间对应的任务,任务列表中预先设置了每个时间对应需要执行的任务。若每隔五分钟执行一次任务,那么从第i个任务的起始时刻至第i+1个任务的起始时刻(五分钟)之内需执行的任务为第i个任务。而第i-1个任务为上一个五分钟所需要执行的任务。
如图2所示,在现有技术中,若主调度设备宕机,无法按时执行对应的任务,则工作人员会在预设的时间间隔后收到空数据报警指示,则工作人员需要对任务进行手动执行。而采用本公开所提供的方法,则能够在检测到主调度设备宕机后,根据备用调度设备自动执行对应的任务。
例如,当任务列表中7:00需要执行第一个任务,7:05需要执行第二个任务,7:10需要执行第三个任务。若当前时间为7:10,最近一次的主调度设备的任务完成时间为7:03,上述两者时间差为7分钟,时间差大于5分钟,则说明主调度设备未执行7:05对应的第二个任务。则备用调度设备需要执行7:05对应的第二个任务和7:10对应的第三个任务。
本公开的技术方案中,由于当前时间和主调度设备的任务完成时间的时间差大于预设第一阈值,说明主调度设备在任务完成时间至当前时间此段时间内的状态处于无效,则执行主调度设备在任务完成时间之后的任务,避免了由于主调度设备宕机,造成上游任务的持续失败,无法执行下游任务的问题,降低了调度失败的风险,从而保证了任务的正常执行,提升调度过程的整体鲁棒性,进而减少了由于主调度设备宕机导致的业务损失。
在一种实施方式中,确定主调度设备的状态为无效,执行任务列表中在主调度设备的任务完成时间之后的任务,包括:
若当前主调度设备的状态指示参数指示主调度设备的状态为有效,则将状态指示参数切换为指示主调度设备的状态为无效,执行任务列表中主调度设备的任务完成时间之后的任务。
其中,状态指示参数用于指示当前执行任务列表中的任务所采用的数据类型;在数据类型为主调度设备所采用的第一数据类型的情况下,状态指示参数指示主调度设备的状态为有效。而备用调度设备通过使用第二数据类型执行任务,使状态指示参数更新为主调度设备的状态为无效。在本实施例中,第一数据类型可以为质子,第二数据类型可以为crontab。可见,根据执行任务采用的数据类型能够更加简单的判断主调度的状态,从而有助于对主调度设备和备用调度设备间的切换。
具体地,在当前主调度设备的状态指示参数指示所述主调度设备的状态为无效的情况下,说明主调度设备停止执行所述任务列表中的任务,由备用设备继续执行任务列表中主调度设备的任务完成时间之后的任务。可见,基于主调度设备的状态结合当前时间和主调度设备的任务完成时间,保证了在主调度设备宕机时,能够及时从主调度设备切换至备用调度设备执行任务。
示例性地,主调度设备执行的数据类型属于A类型,备用调度设备执行的数据类型属于B类型。7:00时获取了A类型的数据,主调度设备执行了第一个任务,记录下了第一个任务对应的任务完成时间7:03,则在7:10时可以根据完成第一个任务对应的数据类型,确定主调度设备的状态指示参数指示主调度设备的状态为有效。而当前时间和主调度设备的任务完成时间的时间间隔大于预设第一阈值时,则说明主调度设备宕机,需要备用调度设备执行任务,则可以读取B类型的数据,及时获取到适用于备用调度设备的数据,从而保证备用调度设备能够正常执行任务
在一种实施方式中,确定主调度设备的状态为无效,执行任务列表中在主调度设备的任务完成时间之后的任务,还包括:
若主调度设备的状态指示参数指示主调度设备的状态为无效,则保持主调度设备的状态指示参数指示主调度设备的状态为无效。
示例性地,当第i个任务是由备用调度设备执行时,则当前主调度设备的状态指示参数指示主调度设备的状态为无效,若当前时间和主调度设备的任务完成时间的时间间隔大于预设第一阈值,则说明主调度设备的状态从主调度设备的任务完成时间到当前时间内,主调度设备未执行过任务,即主调度设备的状态依然为无效,那么继续用备用调度设备执行任务列表中在主调度设备的任务完成时间之后的任务(即当前时间对应的任务)。可见,在备用调度设备每一次执行任务时,均对主调度设备的状态进行检测,从而可以及时切换至主调度设备执行任务,从而实现主调度设备与备用调度设备之间的相互控制。
在一种实施方式中,任务处理方法,还包括:
若当前时间和任务完成时间的时间间隔不大于预设第一阈值,则确定主调度设备的状态为有效。
具体地,若当前时间和任务完成时间的时间间隔不大于预设第一阈值,则说明主调度设备在任务完成时间至当前时间的此段时间内执行了任务,从而能够有效的确定主调度设备的状态。
在一种实施方式中,确定主调度设备的状态为有效,包括:
在当前主调度设备的状态指示参数指示主调度设备的状态为无效的情况下,将状态指示参数更新为指示主调度设备的状态为有效。
示例性地,若当前时间和主调度设备的任务完成时间不大于预设第一阈值,则说明主调度设备的状态从主调度设备的任务完成时间到当前时间内,主调度设备已经执行了任务,即主调度设备已经恢复。在备用调度设备执行上一任务的情况下,当前主调度设备的状态指示参数指示主调度设备的状态为无效。则需要将状态指示参数切换为指示主调度设备的状态为有效(即读取主调度设备执行任务所需要的数据),通过主调度设备执行主调度设备的任务完成时间之后的任务。可见,在备用调度设备每一次执行任务时,均对主调度设备的状态进行检测,从而可以及时切换至主调度设备执行任务,从而实现主调度设备与备用调度设备之间的相互控制。
进一步地,确定主调度设备的状态为有效,包括:
在当前主调度设备的状态指示参数指示主调度设备的状态为有效的情况下,将状态指示参数保持不变。
示例性地,当前时间和任务完成时间的时间间隔不大于预设第一阈值,若状态,则说明主调度设备有效。且状态指示参数指示主调度设备的状态为有效,则说明第i-1个任务是通过主调度设备完成的,则无需备用调度设备执行任务。限制了备用调度设备的工作条件,避免设备资源的浪费。
在一种实施方式中,任务处理方法,还包括:
若当前时间和任务完成时间的时间间隔大于预设第二阈值,则发送报警信息;其中,预设第二阈值大于预设第一阈值。
示例性地,若每间隔五分钟执行一个任务,则将预设第一阈值设置为五分钟,第二阈值设置为第一阈值的二倍,从而可以准确的确定主调度设备与备用调度设备的状态。这样,当十分钟之后还没有执行任务,则说明主调度设备与备用调度设备均损坏,则向用户发送报警信息,以提醒用户及时对设备进行维护。在本实施例中,主调度设备与备用调度设备的状态变化也需要发送信息至用户。
为了方便理解,根据以下示例进行说明:
如图3所示,任务列表为每五分钟向业务方推送一次数据黑名单。主调度设备执行的第一数据类型属于A类型(可以为质子),备用调度设备执行的第二数据类型属于B类型,备用调度设备可以使用linux系统,基于crontab命令从标准输入设备读取指令,并将其存放于“crontab”文件中,以供之后读取和执行。当获取任务列表中需要执行的任务后,主调度设备读取当前任务对应的A类型数据,从而运行当前任务(flink_ip-gap_list.py),并在任务完成后在任务列表中记录主调度设备的任务完成时间。
当备用调度设备判断出状态指示参数指示主调度设备有效,且当前时间和主调度设备的任务完成时间的时间差大于五分钟,则说明主调度设备虽然可以接收到任务,但无法执行对应的任务,即主调度设备宕机,需要备用调度设备执行主调度设备的任务完成时间之后的任务(即五分钟前对应的任务A和当前时间对应的任务B)。
当备用调度设备判断出状态指示参数指示主调度设备有效,且当前时间和主调度设备的任务完成时间的时间差不大于五分钟,继续由主调度设备执行任务。
当备用调度设备判断出状态指示参数指示主调度设备的状态为无效,且当前时间和主调度设备的任务完成时间的时间差不大于五分钟,则说明主调度系统已恢复,将状态指示参数更新为指示主调度设备的状态为有效,保证主调度备能够执行接下来的任务。
当备用调度设备检测到状态指示参数指示主调度设备的状态为无效,且当前时间和主调度设备的任务完成时间的时间差大于五分钟,则说明主调度系统未恢复,状态指示参数不变,继续又备用调度设备执行任务。
图4是根据本申请一实施例的任务处理装置的框图。如图4所示,该装置可以包括:
确定模块401,用于确定当前时间和主调度设备的任务完成时间;其中,主调度设备的任务完成时间是在检测到主调度设备完成任务列表中的任一任务的情况下更新的;
第一控制模块402,用于若当前时间和任务完成时间的时间间隔大于第一阈值,则确定主调度设备的状态为无效,并执行任务列表中在主调度设备的任务完成时间之后的任务。
在一种实施方式中,第一控制模块,还用于在主调度设备的状态指示参数指示主调度设备的状态为有效的情况下,将状态指示参数更新为指示主调度设备的状态为无效,并执行任务列表中在主调度设备的任务完成时间之后的任务。
在一种实施方式中,第一控制模块402,还用于若主调度设备的状态指示参数指示主调度设备的状态为无效,则保持主调度设备的状态指示参数指示主调度设备的状态为无效。
在一种实施方式中,如图5所示,该装置,还包括:
第二控制模块503,用于若当前时间和任务完成时间的时间间隔不大于第一阈值,则确定主调度设备的状态为有效。
在一种实施方式中,第二控制模块503,还用于在当前主调度设备的状态指示参数指示主调度设备的状态为无效的情况下,将状态指示参数更新为指示主调度设备的状态为有效。
在一种实施方式中,如图5所示,该装置,还包括:
报警模块504,用于若当前时间和任务完成时间的时间间隔大于第二阈值,则发送报警信息;其中,第二阈值大于第一阈值。
本公开的任务处理装置的技术方案中,由于当前时间和主调度设备的任务完成时间的时间间隔大于预设第一阈值,说明主调度设备在超过第一阈值的时长内未执行任务列表中的任务,则确定主调度设备无效并执行任务列表中在任务完成时间之后的任务,避免了由于主调度设备宕机,造成上游任务的持续失败,无法执行下游任务的问题,降低了调度失败的风险,从而保证了任务的正常执行,提升调度过程的整体鲁棒性,进而减少了由于主调度设备宕机导致的业务损失。
本公开的技术方案中,所涉及的用户个人信息的获取,存储和应用等,均符合相关法律法规的规定,且不违背公序良俗。
根据本公开的实施例,本公开还提供了一种调度系统种可读存储介质和一种计算机程序产品。
图6是根据本申请一实施例的调度系统的框图。如图6所示,该系统包括:主调度设备601及至少一个备用调度设备602;其中,所述备用调度设备602执行本公开实施例中任意一种任务处理方法。
本公开的调度系统的技术方案中,由于采用任务处理方法,使得备用调度设备能够检测到主调动设备的状态,从而实现主调动设备和备用调度设备的相互控制,进而保证了任务的正常执行,提升调度过程的整体鲁棒性,进而减少了由于主调度设备宕机导致的业务损失。
图7示出了可以用来实施本公开的实施例的示例电子设备700的示意性框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图7所示,设备700包括计算单元701,其可以根据存储在只读存储器(ROM)702中的计算机程序或者从存储单元708加载到随机访问存储器(RAM)703中的计算机程序,来执行各种适当的动作和处理。在RAM 703中,还可存储设备700操作所需的各种程序和数据。计算单元701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
设备700中的多个部件连接至I/O接口705,包括:输入单元706,例如键盘、鼠标等;输出单元707,例如各种类型的显示器、扬声器等;存储单元708,例如磁盘、光盘等;以及通信单元709,例如网卡、调制解调器、无线通信收发机等。通信单元709允许设备700通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元701可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元701的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元701执行上文所描述的各个方法和处理,例如任务处理方法。例如,在一些实施例中,任务处理可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元708。在一些实施例中,计算机程序的部分或者全部可以经由ROM 702和/或通信单元709而被载入和/或安装到设备700上。当计算机程序加载到RAM 703并由计算单元701执行时,可以执行上文描述的任务处理方法的一个或多个步骤。备选地,在其他实施例中,计算单元701可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行任务处理方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,也可以为分布式系统的服务器,或者是结合了区块链的服务器。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本公开保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本公开保护范围之内。
Claims (16)
1.一种任务处理方法,应用于备用调度设备,包括:
确定当前时间和主调度设备的任务完成时间;其中,所述主调度设备的任务完成时间是在检测到所述主调度设备完成任务列表中的任一任务的情况下更新的;
若判断所述主调度设备的状态为有效,且所述当前时间和所述任务完成时间的时间间隔大于第一阈值,则将所述主调度设备的状态更新为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务;
若判断所述主调度设备的状态为无效,且所述当前时间和所述主调度设备的任务完成时间的时间间隔不大于所述第一阈值,则将所述主调度设备的状态更新为有效,且所述任务完成时间之后的任务由所述主调度设备执行;
若判断所述主调度设备的状态为无效,且所述当前时间和所述主调度设备的任务完成时间的时间间隔大于所述第一阈值,则保持所述主调度设备的状态为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务。
2.根据权利要求1所述的方法,其中,所述将所述主调度设备的状态更新为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务,包括:
在主调度设备的状态指示参数指示所述主调度设备的状态为有效的情况下,将所述状态指示参数更新为指示所述主调度设备的状态为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务。
3.根据权利要求2所述的方法,其中,所述将所述主调度设备的状态更新为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务,还包括:
若主调度设备的状态指示参数指示所述主调度设备的状态为无效,则保持所述主调度设备的状态指示参数指示所述主调度设备的状态为无效。
4.根据权利要求1-3中任一项所述的方法,还包括:
若所述当前时间和所述任务完成时间的时间间隔不大于第一阈值,则确定所述主调度设备的状态为有效。
5.根据权利要求4所述的方法,其中,确定所述主调度设备的状态为有效,包括:
在当前主调度设备的状态指示参数指示所述主调度设备的状态为无效的情况下,将所述状态指示参数更新为指示所述主调度设备的状态为有效。
6.根据权利要求2-3、5中任一项所述的方法,还包括:所述状态指示参数用于指示当前执行所述任务列表中的任务所采用的数据类型;在所述数据类型为所述主调度设备所采用的第一数据类型的情况下,所述状态指示参数指示所述主调度设备的状态为有效。
7.根据权利要求1-3、5中任一项所述的方法,还包括:
若所述当前时间和所述任务完成时间的时间间隔大于第二阈值,则发送报警信息;其中,所述第二阈值大于所述第一阈值。
8.一种任务处理装置,应用于备用调度设备,包括:
确定模块,用于确定当前时间和主调度设备的任务完成时间;其中,所述主调度设备的任务完成时间是在检测到所述主调度设备完成任务列表中的任一任务的情况下更新的;
第一控制模块,用于若判断所述主调度设备的状态为有效,且所述当前时间和所述任务完成时间的时间间隔大于第一阈值,则将所述主调度设备的状态更新为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务;
若判断所述主调度设备的状态为无效,且所述当前时间和所述主调度设备的任务完成时间的时间间隔不大于所述第一阈值,则将所述主调度设备的状态更新为有效,且所述任务完成时间之后的任务由所述主调度设备执行;
若判断所述主调度设备的状态为无效,且所述当前时间和所述主调度设备的任务完成时间的时间间隔大于所述第一阈值,则保持所述主调度设备的状态为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务。
9.根据权利要求8所述的装置,其中,所述第一控制模块,具体用于在主调度设备的状态指示参数指示所述主调度设备的状态为有效的情况下,将所述状态指示参数更新为指示所述主调度设备的状态为无效,并执行所述任务列表中在所述主调度设备的任务完成时间之后的任务。
10.根据权利要求9所述的装置,其中,所述第一控制模块,还用于若主调度设备的状态指示参数指示所述主调度设备的状态为无效,则保持所述主调度设备的状态指示参数指示所述主调度设备的状态为无效。
11.根据权利要求8-10中任一项所述的装置,还包括:
第二控制模块,用于若所述当前时间和所述任务完成时间的时间间隔不大于第一阈值,则确定所述主调度设备的状态为有效。
12.根据权利要求11所述的装置,其中,所述第二控制模块,还用于在当前主调度设备的状态指示参数指示所述主调度设备的状态为无效的情况下,将所述状态指示参数更新为指示所述主调度设备的状态为有效。
13.根据权利要求8-10、12中任一项所述的装置,还包括:
报警模块,用于若所述当前时间和所述任务完成时间的时间间隔大于第二阈值,则发送报警信息;其中,所述第二阈值大于所述第一阈值。
14.一种调度系统,包括:主调度设备及至少一个备用调度设备;其中,所述备用调度设备执行根据权利要求1-7中任一项所述的方法。
15.一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7中任一项所述的方法。
16.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使所述计算机执行根据权利要求1-7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110860588.8A CN113590287B (zh) | 2021-07-28 | 2021-07-28 | 任务处理方法、装置、设备、存储介质及调度系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110860588.8A CN113590287B (zh) | 2021-07-28 | 2021-07-28 | 任务处理方法、装置、设备、存储介质及调度系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113590287A CN113590287A (zh) | 2021-11-02 |
CN113590287B true CN113590287B (zh) | 2024-03-01 |
Family
ID=78251382
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110860588.8A Active CN113590287B (zh) | 2021-07-28 | 2021-07-28 | 任务处理方法、装置、设备、存储介质及调度系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113590287B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115269160B (zh) * | 2022-09-29 | 2023-01-06 | 广州市保伦电子有限公司 | 一种定时任务执行方法、装置及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109144696A (zh) * | 2018-08-30 | 2019-01-04 | 百度在线网络技术(北京)有限公司 | 一种任务调度方法、装置、电子设备及存储介质 |
CN110895488A (zh) * | 2018-09-12 | 2020-03-20 | 北京奇虎科技有限公司 | 任务调度方法及装置 |
CN111181765A (zh) * | 2019-12-03 | 2020-05-19 | 中国建设银行股份有限公司 | 一种任务处理方法和装置 |
CN113064744A (zh) * | 2021-05-06 | 2021-07-02 | 腾讯科技(深圳)有限公司 | 任务处理方法、装置、计算机可读介质及电子设备 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10691502B2 (en) * | 2016-06-03 | 2020-06-23 | International Business Machines Corporation | Task queuing and dispatching mechanisms in a computational device |
US11150944B2 (en) * | 2017-08-18 | 2021-10-19 | International Business Machines Corporation | Balancing mechanisms in ordered lists of dispatch queues in a computational device |
-
2021
- 2021-07-28 CN CN202110860588.8A patent/CN113590287B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109144696A (zh) * | 2018-08-30 | 2019-01-04 | 百度在线网络技术(北京)有限公司 | 一种任务调度方法、装置、电子设备及存储介质 |
CN110895488A (zh) * | 2018-09-12 | 2020-03-20 | 北京奇虎科技有限公司 | 任务调度方法及装置 |
CN111181765A (zh) * | 2019-12-03 | 2020-05-19 | 中国建设银行股份有限公司 | 一种任务处理方法和装置 |
CN113064744A (zh) * | 2021-05-06 | 2021-07-02 | 腾讯科技(深圳)有限公司 | 任务处理方法、装置、计算机可读介质及电子设备 |
Non-Patent Citations (1)
Title |
---|
一种基于多处理机的容错实时任务调度算法;张拥军, 张怡, 彭宇行, 陈福接;计算机研究与发展(第04期);41-45 * |
Also Published As
Publication number | Publication date |
---|---|
CN113590287A (zh) | 2021-11-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112653758A (zh) | 边缘节点的更新方法、装置、设备、介质和程序产品 | |
CN112965848A (zh) | 用于微服务的熔断降级方法、装置、设备和介质 | |
CN110751458A (zh) | 一种业务审批方法、装置和系统 | |
CN113590287B (zh) | 任务处理方法、装置、设备、存储介质及调度系统 | |
CN115904656A (zh) | 应用于芯片中的状态控制方法、装置、设备及存储介质 | |
CN114978883A (zh) | 网络唤醒的管理方法、装置、电子设备及存储介质 | |
CN113553216B (zh) | 数据恢复方法、装置、电子设备及存储介质 | |
CN113468021B (zh) | 监控性能数据的方法、装置、设备以及存储介质 | |
CN113656239A (zh) | 针对中间件的监控方法、装置及计算机程序产品 | |
CN117687778A (zh) | Redis集群切换方法、装置、电子设备及存储介质 | |
CN112817992A (zh) | 执行更改任务的方法、装置、电子设备以及可读存储介质 | |
CN116594563A (zh) | 分布式存储扩容方法、装置、电子设备和存储介质 | |
CN115509821A (zh) | 一种系统异常处理方法、装置、设备及存储介质 | |
CN115890684A (zh) | 一种机器人调度方法、装置、设备及介质 | |
CN115269318A (zh) | 一种数据处理方法、装置、电子设备及存储介质 | |
CN114816536A (zh) | 一种分支预测处理方法、装置、设备及存储介质 | |
CN114721876A (zh) | 一种数据备份方法、装置、介质 | |
CN113139891A (zh) | 图像处理方法、装置、电子设备和存储介质 | |
CN113419921A (zh) | 一种任务监控方法、装置、设备以及存储介质 | |
CN111694705A (zh) | 监控方法、装置、设备及计算机可读存储介质 | |
CN116302370A (zh) | 一种返回码异常告警的生成方法、装置、设备及介质 | |
CN117290179A (zh) | 一种事件超时状态的确定方法、装置、设备和存储介质 | |
CN118642807A (zh) | 界面操作处理方法、装置、电子设备及存储介质 | |
CN117234601A (zh) | 系统的启动方法、装置、电子设备及存储介质 | |
CN113220230A (zh) | 数据导出方法及其装置、电子设备以及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |