CN107870948A - 任务调度方法和装置 - Google Patents

任务调度方法和装置 Download PDF

Info

Publication number
CN107870948A
CN107870948A CN201610859838.5A CN201610859838A CN107870948A CN 107870948 A CN107870948 A CN 107870948A CN 201610859838 A CN201610859838 A CN 201610859838A CN 107870948 A CN107870948 A CN 107870948A
Authority
CN
China
Prior art keywords
task
restart
type
current
default
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610859838.5A
Other languages
English (en)
Inventor
黄望
黄涛
杨勇
刘斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201610859838.5A priority Critical patent/CN107870948A/zh
Publication of CN107870948A publication Critical patent/CN107870948A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0709—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in a distributed system consisting of a plurality of standalone computer nodes, e.g. clusters, client-server systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0793—Remedial or corrective actions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2455—Query execution
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses

Abstract

本发明涉及一种任务调度方法和装置，该方法包括：监听正在执行的当前任务的执行状态；当所述当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及所述下一个任务对应的任务类型，所述依赖关系指多个任务类型的任务之间的依赖关系；根据所述下一个任务对应的任务类型确定出所述下一个任务对应的执行节点；将所述下一个任务下发至确定出的所述执行节点中，以使所述下一个任务在确定出的所述执行节点中执行。本发明实现了对多种任务类型的任务之间的关联调度，提高了任务调度的准确性。

Description

任务调度方法和装置
技术领域
本发明涉及计算机技术领域，特别是涉及一种任务调度方法和装置。
背景技术
任务调度，即指将任务合理分配到对应的执行节点上进行执行的过程。通常，为了完成一个数据处理过程，需要对多种不同的任务类型(比如，数据库任务类型、ETL(Extract-Transform-Load，数据提取、转换和加载)任务类型等)的任务进行依次调度。
传统方法中，对不同任务类型的任务进行调度时，相互之间的调度操作是独立的。当需要先后调度不同任务类型的任务时，通常是对不同任务类型的任务分别进行定时操作，即制定好各自对应的调度时间，当预设的调度时间到达时，则调度该任务。
然而，在实际运用中，如果上一个任务类型的任务执行时发生报错，但下一个任务类型的任务会由于预设的调度时间到达了而开始执行调度，从而导致下一个任务类型的任务也可能执行不成功，同样出现报错。这样一来，造成任务调度非常的不准确。
发明内容
基于此，有必要提供一种能够提高任务调度准确性的任务调度方法和装置。
一种任务调度方法，所述方法包括以下步骤：
监听正在执行的当前任务的执行状态；
当所述当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及所述下一个任务对应的任务类型，所述依赖关系指多个任务类型的任务之间的依赖关系；
根据所述下一个任务对应的任务类型确定出所述下一个任务对应的执行节点；
将所述下一个任务下发至确定出的所述执行节点中，以使所述下一个任务在确定出的所述执行节点中执行。
在其中一个实施例中，所述方法还包括：
当监听到所述当前任务对应的异常报错信息时，则解析所述异常报错信息，判断所述异常报错信息中是否包含预设的重启关键词；
当所述异常报错信息中包含预设的重启关键词时，则重启所述当前任务。
在其中一个实施例中，在所述重启所述当前任务的步骤之前，还包括：
获取所述当前任务对应的已重启次数；
获取所述当前任务对应的预设重启次数阈值；
当所述已重启次数未达到所述预设重启次数阈值时，则执行所述重启所述当前任务的步骤。
在其中一个实施例中，其特征在于，在所述将所述下一个任务下发至确定出的所述执行节点中的步骤之前，还包括：
向所述下一个任务对应的源服务器和目标服务器发送通信状态探测包；
当在预设时长内接收到所述源服务器和所述目标服务器返回的对所述通信状态探测包做出的应答信息时，则再执行所述将所述下一个任务下发至确定出的所述执行节点中的步骤。
在其中一个实施例中，所述多个任务类型包括数据库任务类型、ETL任务类型、操作系统SHELL任务类型和BAT任务类型中的至少两种。
一种任务调度装置，所述装置包括：
状态监听模块，用于监听正在执行的当前任务的执行状态；
获取模块，用于当所述当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及所述下一个任务对应的任务类型，所述依赖关系指多个任务类型的任务之间的依赖关系；
执行节点确定模块，用于根据所述下一个任务对应的任务类型确定出所述下一个任务对应的执行节点；
任务下发模块，用于将所述下一个任务下发至确定出的所述执行节点中，以使所述下一个任务在确定出的所述执行节点中执行。
在其中一个实施例中，所述装置还包括：
判断模块，用于当所述状态监听模块监听到所述当前任务对应的异常报错信息时，则解析所述异常报错信息，判断所述异常报错信息中是否包含预设的重启关键词；
任务重启处理模块，用于当所述异常报错信息中包含预设的重启关键词时，则重启所述当前任务。
在其中一个实施例中，所述任务重启处理模块还用于获取所述当前任务对应的已重启次数；获取所述当前任务对应的预设重启次数阈值；当所述已重启次数未达到所述预设重启次数阈值时，则执行所述重启所述当前任务的步骤。
在其中一个实施例中，所述装置还包括：
通信状态探测模块，用于向所述下一个任务对应的源服务器和目标服务器发送通信状态探测包，当在预设时长内接收到所述源服务器和所述目标服务器返回的对所述通信状态探测包做出的应答信息时，则再通知所述任务下发模块执行所述将所述下一个任务下发至确定出的所述执行节点中的步骤。
在其中一个实施例中，所述多个任务类型包括数据库任务类型、ETL任务类型、操作系统SHELL任务类型和BAT任务类型中的至少两种。
上述任务调度方法和装置，通过监听正在执行的当前任务的执行状态；当所述当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及所述下一个任务对应的任务类型，所述依赖关系指多个任务类型的任务之间的依赖关系；根据所述下一个任务对应的任务类型确定出所述下一个任务对应的执行节点；将所述下一个任务下发至确定出的所述执行节点中，以使所述下一个任务在确定出的所述执行节点中执行。实现了对多种任务类型的任务之间的关联调度，避免了不同任务类型之间的独立调度所造成的调度不准确，即提高了任务调度的准确性。
附图说明
图1为一个实施例中任务调度方法的流程示意图；
图2为一个实施例中任务重启方法的流程示意图；
图3为一个实施例中通信状态探测方法的流程示意图；
图4为一个实施例中任务调度装置的结构示意图；
图5为另一个实施例中任务调度装置的结构示意图；
图6为又一个实施例中任务调度装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，提供了一种任务调度方法，该方法包括以下步骤：
步骤102，监听正在执行的当前任务的执行状态。
本实施例中，任务调度装置在进行任务调度时，会监听正在执行的当前任务的执行状态。其中，任务的执行状态包括未执行、执行中、已执行以及报错状态等。
步骤104，当当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及下一个任务对应的任务类型，依赖关系指多个任务类型的任务之间的依赖关系。
具体地，任务调度装置中预先设置了任务之间的依赖关系。其中，依赖关系是指多个任务类型的任务之间的依赖关系，即将多个任务类型的任务在同一个通道中进行关联调度。
进一步，依赖关系包括任务之间执行的先后顺序关系以及各个任务所对应的任务类型。还可以包括相邻两个任务之间执行的关联关系，比如，上一个任务的执行结果是下一个任务的入参等。
当监听到当前任务的执行状态为已执行时，任务调度装置会根据预设的任务之间的依赖关系，获取下一个任务及下一个任务对应的任务类型。
进一步，任务类型是根据执行任务的工具进行划分的。比如，ETL任务类型的任务，则在ETL工具上执行该任务。数据库任务类型的任务，则在数据库中执行该任务。
其中，任务类型包括数据库任务类型、ETL(Extract-Transform-Load，数据提取、转换和加载)任务类型、BAT(Batch，也称为批处理脚本)任务类型以及操作系统SHELL(即SHELL脚本，可用于配置任务计划)等任务类型。更进一步，数据库任务类型包括Oracle任务类型、MySQL任务类型等。
可以理解，依赖关系中所包含的多个任务类型包括上述列举的任务类型中的至少两种。
步骤106，根据下一个任务对应的任务类型确定出下一个任务对应的执行节点。
具体地，任务调度装置中预先设置了任务类型和执行节点之间的对应关系。可以理解，不同的任务类型所对应的任务执行工具不同，则不同的任务类型对应不同的执行节点。
进一步，根据上述对应关系，确定出下一个任务对应的任务类型所对应的执行节点，进而确定与所获取的下一个任务对应的执行节点。比如，任务类型有A、B、C，类型A对应的执行节点为节点1，类型B对应的执行节点为节点2，类型C对应的执行节点为节点3。那么，下一个任务为任务n，所对应的任务类型为B，则根据任务类型与执行节点之间的对应关系，可以确定出任务类型B对应的执行节点为节点2，进而可以确定出任务n对应的执行节点为节点2。
进一步，一个任务类型可以对应一个或多个执行节点。
当一个任务类型对应多个执行节点时，则检测其所对应的各个执行节点的资源负载情况，从中选取负载最小的执行节点作为确定出的下一个任务对应的执行节点。
步骤108，将下一个任务下发至确定出的执行节点中，以使下一个任务在确定出的执行节点中执行。
任务调度装置将所获取的下一个任务下发至上述确定出的执行节点。被下发的下一个任务就会在所确定出的执行节点中执行对应的逻辑程序，以完成对应的数据处理。
本实施例中，通过建立多种任务类型的任务之间的依赖关系，当监听到当前任务执行完毕后，根据该依赖关系，获取下一任务及对应的任务类型，并根据任务类型确定出下一个任务对应的执行节点，并将下一个任务下发至对应的执行节点，以使下一个任务在确定出的执行节点中执行。实现了对多种任务类型的任务之间的关联调度，避免了不同任务类型之间的独立调度所造成的调度不准确。进而，也避免了因调度不准确造成的资源浪费。
如图2所示，在一个实施例中，该方法还包括任务重启步骤，具体包括以下步骤：
步骤202，当监听到当前任务对应的异常报错信息时，则解析异常报错信息，判断异常报错信息中是否包含预设的重启关键词。
本实施例中，任务调度装置中预先设置了重启关键词。可以理解，预设的重启关键词为一个或多个。更进一步，预设的重启关键词可以为单字，也可以为多字词语。
任务调度装置会对当前任务的执行状态进行监听，当监听到当前任务执行时发生异常报错信息时，则解析异常报错信息。进一步，将异常报错信息与预设的重启关键词进行比对，以判断异常报错信息中是否包含预设的重启关键词。
步骤204，当异常报错信息中包含预设的重启关键词时，则重启当前任务。
当异常报错信息中包含预设的重启关键词时，则自动重启当前任务。即通过预设重启关键词，对异常报错信息的解析，并将解析后的异常报错信息和预设重启关键词进行比对判断，根据比对结果来进行自动的重启任务。而不需要像传统方法一样，由人工来人为的对报错的任务来确定是否重启以及手动的进行复杂的重启操作。加快了任务重启的效率，进而提高了任务执行的效率。
此外，通过异常报错信息与预设关键词的比对判断，对任务进行重启操作，实际上，对任务进行自动重启操作之后，由于重启的作用，重启的任务就可能执行成功，而不会出现上次执行时出现的异常报错情况，从而进一步提高了任务执行的效率。
在一个实施例中，在重启当前任务的步骤之前，还包括：获取当前任务对应的已重启次数和对应的预设重启次数阈值，当已重启次数未达到预设重启次数阈值时，则执行重启当前任务的步骤。
本实施例中，任务调度装置中预先设置了重启次数阈值。其中，可以是针对所有的任务设置统一的重启次数阈值。也可以是以任务类型为单位设置对应的重启次数阈值，即各个任务类型对应各自的重启次数阈值。还可以是，以任务为单位，针对每个任务单独设置对应的重启次数阈值。本实施例对此不做限定。
当异常报错信息中包含预设的重启关键词时，任务调度装置会进一步检测获取当前任务对应的已重启次数，即获取已经重启当前任务的次数。
进一步，获取当前任务所对应的预设重启次数阈值。将所获取的已重启次数和预设重启次数阈值进行比对，当已重启次数未达到预设重启次数阈值时，则对当前任务进行自动重启操作。当已重启次数达到了预设的重启次数阈值时，则不自动重启当前任务。
本实施例中，在对任务进行重启之前，通过已重启次数和预设重启次数阈值进行比对，来确定是否进行任务重启。避免过多的无意义的重启操作造成的资源浪费。
如图3所示，在一个实施例中，在将下一个任务下发至确定出的执行节点中执行的步骤之前，还包括通信状态探测步骤，具体包括以下步骤：
步骤302，向下一个任务对应的源服务器和目标服务器发送通信状态探测包。
本实施例中，任务有对应的源服务器和目标服务器。其中，源服务器是指任务获取源数据的服务器，目标服务器是指任务将对源数据进行对应处理后所要发送到的服务器。
任务调度装置在将所获取的下一个任务下发至确定出的执行节点之前，会向下一个任务对应的源服务器和目标服务器发送通信状态探测包，以探测源服务器和目标服务器是否能够对外进行正常通信。比如，当源服务器或目标服务器宕机或者处于网络繁忙状态时，则不能够对外进行正常通信。
其中，通信状态探测包指用于探测源服务器和目标服务器的对外通信状态是否正常的简单数据包。进一步，可以根据预设时间间隔来发送该通信状态探测包。
步骤304，当在预设时长内接收到源服务器和目标服务器返回的与该通信状态探测包对应的应答信息时，则再执行将下一个任务下发至确定出的执行节点中的步骤。
具体地，从发送该通信状态探测包时开始计时，检测在预设时长内是否接收到源服务器和目标服务器返回的对该通信状态探测包做出的应答信息。
当在预设时长内接收到源服务器和目标服务器返回的对该通信状态探测包做出的应答信息时，则表明源服务器和目标服务器能够对外进行正常通信，则将下一个任务下发至确定出的执行节点中，以执行该任务。
可以理解，当在预设时长内未能接收到源服务器和目标服务器中的任意一个返回的对该通信状态探测包做出的应答信息时，则不执行将下一个任务下发至确定出的执行节点中的步骤。进一步，可以继续向源服务器和目标服务器发送通信状态探测包，直到在预设时长内收到对所发送的通信状态探测包做出的应答信息，此时，则再执行将下一个任务下发至确定出的执行节点中的步骤，即自动恢复任务调度操作。
本实施例中，在将下一个任务下发至确定出的执行节点中之前，通过通信状态探测包来探测源服务器和目标服务器的对外通信状态，正常时，再将下一个任务下发至确定出的执行节点中。可以避免当源服务器和目标服务器由于宕机或者网络通信状况较差的情况下导致的任务调度不成功，从而避免了该种情况下造成的任务调度不成功所带来的资源浪费。此外，可以继续以预设时间间隔向对源服务器和目标服务器发送通信状态探测包，当在预设时长内收到对应的应答信息(即相当于当探测到通信状态恢复正常)时，自动的恢复任务调度处理，从而保证了任务调度的及时性。
如图4所示，在一个实施例中，提供了一种任务调度装置，该装置包括状态监听模块402、获取模块404、执行节点确定模块406以及任务下发模块408，其中：
状态监听模块402，用于监听正在执行的当前任务的执行状态。
获取模块404，用于当当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及下一个任务对应的任务类型，依赖关系指多个任务类型的任务之间的依赖关系。
执行节点确定模块406，用于根据下一个任务对应的任务类型确定出下一个任务对应的执行节点。
任务下发模块408，用于将下一个任务下发至确定出的执行节点中，以使下一个任务在确定出的执行节点中执行。
如图5所示，在一个实施例中，该装置还包括：
判断模块410，用于当状态监听模块402监听到当前任务对应的异常报错信息时，则解析异常报错信息，判断异常报错信息中是否包含预设的重启关键词；
任务重启处理模块412，用于当异常报错信息中包含预设的重启关键词时，则重启当前任务。
在一个实施例中，任务重启处理模块412还用于获取当前任务对应的已重启次数；获取当前任务对应的预设重启次数阈值；当已重启次数未达到预设重启次数阈值时，则执行重启当前任务的步骤。
如图6所示，在一个实施例中，该装置还包括：
通信状态探测模块407，用于向下一个任务对应的源服务器和目标服务器发送通信状态探测包，当在预设时长内接收到源服务器和目标服务器返回的对通信状态探测包做出的应答信息时，则再通知任务下发模块408执行将下一个任务下发至确定出的执行节点中的步骤。
在一个实施例中，多个任务类型包括数据库任务类型、ETL任务类型、操作系统SHELL任务类型和BAT任务类型中的至少两种。
上述任务调度装置，通过监听正在执行的当前任务的执行状态；当所述当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及所述下一个任务对应的任务类型，所述依赖关系指多个任务类型的任务之间的依赖关系；根据所述下一个任务对应的任务类型确定出所述下一个任务对应的执行节点；将所述下一个任务下发至确定出的所述执行节点中，以使所述下一个任务在确定出的所述执行节点中执行。实现了对多种任务类型的任务之间的关联调度，避免了不同任务类型之间的独立调度所造成的调度不准确，即提高了任务调度的准确性。
以上所述实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种任务调度方法，所述方法包括以下步骤：
监听正在执行的当前任务的执行状态；
当所述当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及所述下一个任务对应的任务类型，所述依赖关系指多个任务类型的任务之间的依赖关系；
根据所述下一个任务对应的任务类型确定出所述下一个任务对应的执行节点；
将所述下一个任务下发至确定出的所述执行节点中，以使所述下一个任务在确定出的所述执行节点中执行。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当监听到所述当前任务对应的异常报错信息时，则解析所述异常报错信息，判断所述异常报错信息中是否包含预设的重启关键词；
当所述异常报错信息中包含预设的重启关键词时，则重启所述当前任务。
3.根据权利要求2所述的方法，其特征在于，在所述重启所述当前任务的步骤之前，还包括：
获取所述当前任务对应的已重启次数；
获取所述当前任务对应的预设重启次数阈值；
当所述已重启次数未达到所述预设重启次数阈值时，则执行所述重启所述当前任务的步骤。
4.根据权利要求1至3中任一项所述的方法，其特征在于，在所述将所述下一个任务下发至确定出的所述执行节点中的步骤之前，还包括：
向所述下一个任务对应的源服务器和目标服务器发送通信状态探测包；
当在预设时长内接收到所述源服务器和所述目标服务器返回的对所述通信状态探测包做出的应答信息时，则再执行所述将所述下一个任务下发至确定出的所述执行节点中的步骤。
5.根据权利要求1至3中任一项所述的方法，其特征在于，所述多个任务类型包括数据库任务类型、ETL任务类型、操作系统SHELL任务类型和BAT任务类型中的至少两种。
6.一种任务调度装置，其特征在于，所述装置包括：
状态监听模块，用于监听正在执行的当前任务的执行状态；
获取模块，用于当所述当前任务的执行状态为已执行时，则根据预设的任务之间的依赖关系，获取下一个任务及所述下一个任务对应的任务类型，所述依赖关系指多个任务类型的任务之间的依赖关系；
执行节点确定模块，用于根据所述下一个任务对应的任务类型确定出所述下一个任务对应的执行节点；
任务下发模块，用于将所述下一个任务下发至确定出的所述执行节点中，以使所述下一个任务在确定出的所述执行节点中执行。
7.根据权利要求6所述的装置，其特征在于，所述装置还包括：
判断模块，用于当所述状态监听模块监听到所述当前任务对应的异常报错信息时，则解析所述异常报错信息，判断所述异常报错信息中是否包含预设的重启关键词；
任务重启处理模块，用于当所述异常报错信息中包含预设的重启关键词时，则重启所述当前任务。
8.根据权利要求7所述的装置，其特征在于，所述任务重启处理模块还用于获取所述当前任务对应的已重启次数；获取所述当前任务对应的预设重启次数阈值；当所述已重启次数未达到所述预设重启次数阈值时，则执行所述重启所述当前任务的步骤。
9.根据权利要求6至8中任一项所述的装置，其特征在于，所述装置还包括：
通信状态探测模块，用于向所述下一个任务对应的源服务器和目标服务器发送通信状态探测包，当在预设时长内接收到所述源服务器和所述目标服务器返回的对所述通信状态探测包做出的应答信息时，则再通知所述任务下发模块执行所述将所述下一个任务下发至确定出的所述执行节点中的步骤。
10.根据权利要求6至8中任一项所述的装置，其特征在于，所述多个任务类型包括数据库任务类型、ETL任务类型、操作系统SHELL任务类型和BAT任务类型中的至少两种。
CN201610859838.5A 2016-09-28 2016-09-28 任务调度方法和装置 Pending CN107870948A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610859838.5A CN107870948A (zh) 2016-09-28 2016-09-28 任务调度方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610859838.5A CN107870948A (zh) 2016-09-28 2016-09-28 任务调度方法和装置

Publications (1)

Publication Number Publication Date
CN107870948A true CN107870948A (zh) 2018-04-03

Family

ID=61761110

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610859838.5A Pending CN107870948A (zh) 2016-09-28 2016-09-28 任务调度方法和装置

Country Status (1)

Country Link
CN (1) CN107870948A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108681598A (zh) * 2018-05-21 2018-10-19 平安科技（深圳）有限公司 任务自动重跑方法、系统、计算机设备和存储介质
CN108805723A (zh) * 2018-05-24 2018-11-13 中国平安人寿保险股份有限公司 基于赔付率系统的数据生成方法、设备、存储介质及装置
CN109491841A (zh) * 2018-11-21 2019-03-19 南京安讯科技有限责任公司 一种提高Spark on yarn实时任务可靠性的方法
CN110287052A (zh) * 2019-06-25 2019-09-27 深圳前海微众银行股份有限公司 一种异常任务的根因任务确定方法及装置
CN110489261A (zh) * 2019-07-31 2019-11-22 上海艾融软件股份有限公司 任务处理告警方法、装置及电子设备、存储介质
CN111027196A (zh) * 2019-12-03 2020-04-17 南方电网科学研究院有限责任公司 一种电力设备的仿真分析任务处理方法、装置及存储介质
CN111026540A (zh) * 2018-10-10 2020-04-17 上海寒武纪信息科技有限公司 任务处理方法、任务调度器和任务处理装置
CN111160810A (zh) * 2020-01-09 2020-05-15 中国地质大学（武汉） 基于工作流的高性能分布式空间分析任务调度方法及系统
CN112114956A (zh) * 2020-09-29 2020-12-22 中国银行股份有限公司 一种任务调度方法、装置和系统
CN112749034A (zh) * 2019-10-31 2021-05-04 北京沃东天骏信息技术有限公司 一种数据异常处理方法、装置、存储介质及电子设备
CN113342490A (zh) * 2021-05-31 2021-09-03 北京顶象技术有限公司 一种建模任务调度的执行方法和装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060107091A (ko) * 2005-04-07 2006-10-13 에스케이 텔레콤주식회사 태스크 기반의 ｊｘｔａ 단말 피어 구조
CN103324565A (zh) * 2012-05-30 2013-09-25 北京神州泰岳软件股份有限公司 日志监控方法
CN103701932A (zh) * 2014-01-09 2014-04-02 北京交通大学 一种物联网中数据传输的方法
CN104239148A (zh) * 2013-06-06 2014-12-24 腾讯科技（深圳）有限公司 一种分布式任务调度方法及装置
CN104461502A (zh) * 2014-11-03 2015-03-25 广州汇讯营销咨询有限公司 基于Hadoop的任务管理方法和系统
CN105653365A (zh) * 2016-02-22 2016-06-08 青岛海尔智能家电科技有限公司 任务处理方法及装置
CN105808328A (zh) * 2014-12-31 2016-07-27 杭州华为数字技术有限公司 任务调度的方法、装置和系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060107091A (ko) * 2005-04-07 2006-10-13 에스케이 텔레콤주식회사 태스크 기반의 ｊｘｔａ 단말 피어 구조
CN103324565A (zh) * 2012-05-30 2013-09-25 北京神州泰岳软件股份有限公司 日志监控方法
CN104239148A (zh) * 2013-06-06 2014-12-24 腾讯科技（深圳）有限公司 一种分布式任务调度方法及装置
CN103701932A (zh) * 2014-01-09 2014-04-02 北京交通大学 一种物联网中数据传输的方法
CN104461502A (zh) * 2014-11-03 2015-03-25 广州汇讯营销咨询有限公司 基于Hadoop的任务管理方法和系统
CN105808328A (zh) * 2014-12-31 2016-07-27 杭州华为数字技术有限公司 任务调度的方法、装置和系统
CN105653365A (zh) * 2016-02-22 2016-06-08 青岛海尔智能家电科技有限公司 任务处理方法及装置

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108681598A (zh) * 2018-05-21 2018-10-19 平安科技（深圳）有限公司 任务自动重跑方法、系统、计算机设备和存储介质
CN108681598B (zh) * 2018-05-21 2023-06-02 平安科技（深圳）有限公司 任务自动重跑方法、系统、计算机设备和存储介质
CN108805723A (zh) * 2018-05-24 2018-11-13 中国平安人寿保险股份有限公司 基于赔付率系统的数据生成方法、设备、存储介质及装置
CN111026540A (zh) * 2018-10-10 2020-04-17 上海寒武纪信息科技有限公司 任务处理方法、任务调度器和任务处理装置
CN111026540B (zh) * 2018-10-10 2022-12-02 上海寒武纪信息科技有限公司 任务处理方法、任务调度器和任务处理装置
CN109491841A (zh) * 2018-11-21 2019-03-19 南京安讯科技有限责任公司 一种提高Spark on yarn实时任务可靠性的方法
CN110287052A (zh) * 2019-06-25 2019-09-27 深圳前海微众银行股份有限公司 一种异常任务的根因任务确定方法及装置
CN110287052B (zh) * 2019-06-25 2022-01-28 深圳前海微众银行股份有限公司 一种异常任务的根因任务确定方法及装置
CN110489261A (zh) * 2019-07-31 2019-11-22 上海艾融软件股份有限公司 任务处理告警方法、装置及电子设备、存储介质
CN112749034A (zh) * 2019-10-31 2021-05-04 北京沃东天骏信息技术有限公司 一种数据异常处理方法、装置、存储介质及电子设备
CN111027196A (zh) * 2019-12-03 2020-04-17 南方电网科学研究院有限责任公司 一种电力设备的仿真分析任务处理方法、装置及存储介质
CN111027196B (zh) * 2019-12-03 2023-04-28 南方电网科学研究院有限责任公司 一种电力设备的仿真分析任务处理方法、装置及存储介质
CN111160810A (zh) * 2020-01-09 2020-05-15 中国地质大学（武汉） 基于工作流的高性能分布式空间分析任务调度方法及系统
CN112114956A (zh) * 2020-09-29 2020-12-22 中国银行股份有限公司 一种任务调度方法、装置和系统
CN113342490A (zh) * 2021-05-31 2021-09-03 北京顶象技术有限公司 一种建模任务调度的执行方法和装置

Similar Documents

Publication Publication Date Title
CN107870948A (zh) 任务调度方法和装置
CN106802826B (zh) 一种基于线程池的业务处理方法及装置
CN106354645B (zh) 基于后台系统服务或接口的测试方法和测试平台
CN104657212A (zh) 一种任务调度的方法及系统
CN105550113A (zh) Web测试方法与测试机
CN108089915B (zh) 基于消息队列的业务控件化处理的方法及系统
CN106612204B (zh) 业务校验方法及装置
CN110275992B (zh) 应急处理方法、装置、服务器及计算机可读存储介质
CN106293920A (zh) 任务调度方法及装置
CN114357495B (zh) 基于区块链的预言机链下聚合方法、装置、设备和介质
CN107015902B (zh) 一种测试方法和设备
CN114064208A (zh) 检测应用服务状态的方法、装置、电子设备及存储介质
CN110489317A (zh) 基于工作流的云系统任务运行故障诊断方法与系统
CN114691398A (zh) 一种基于规则的故障分析方法、装置、设备和存储介质
CN112506802B (zh) 测试数据的管理方法及系统
CN106412088A (zh) 一种数据同步方法及终端
CN109359034A (zh) 一种业务系统测试方法、计算机可读存储介质及终端设备
CN110990289B (zh) 一种自动提交bug的方法、装置、电子设备及存储介质
CN112328372A (zh) 一种kubernetes节点自愈方法和系统
CN111338767B (zh) PostgreSQL主从数据库自动切换系统及方法
CN107729184B (zh) 一种系统组件服务自愈方法
CN116723085A (zh) 服务冲突的处理方法、装置、存储介质及电子装置
EP2988476A1 (en) Method and apparatus for processing operation on endpoint peripheral
CN113495750B (zh) 一种设备的升级检测方法、装置及服务器
CN105224411B (zh) 一种避免cpu被耗尽导致看门狗重启的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180403