CN111679899B - 任务调度方法、装置、平台设备及存储介质 - Google Patents

任务调度方法、装置、平台设备及存储介质 Download PDF

Info

Publication number
CN111679899B
CN111679899B CN202010517437.8A CN202010517437A CN111679899B CN 111679899 B CN111679899 B CN 111679899B CN 202010517437 A CN202010517437 A CN 202010517437A CN 111679899 B CN111679899 B CN 111679899B
Authority
CN
China
Prior art keywords
task
current
parent
scheduling
father
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010517437.8A
Other languages
English (en)
Other versions
CN111679899A (zh
Inventor
张小军
刘磊
李�灿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Weiyiyun Hangzhou Holding Co ltd
Original Assignee
Weiyiyun Hangzhou Holding Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Weiyiyun Hangzhou Holding Co ltd filed Critical Weiyiyun Hangzhou Holding Co ltd
Priority to CN202010517437.8A priority Critical patent/CN111679899B/zh
Publication of CN111679899A publication Critical patent/CN111679899A/zh
Application granted granted Critical
Publication of CN111679899B publication Critical patent/CN111679899B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/54—Indexing scheme relating to G06F9/54
    • G06F2209/548—Queue
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明实施例公开了一种任务调度方法、装置、平台设备及存储介质，该方法包括：如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为所述当前任务建立一个新父任务；在检测到所述当前任务的调度周期开始且对应新父任务执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。解决了任务被跨平台或跨系统调度之后，子任务与其父任务之间的依赖性随之消失的问题。

Description

任务调度方法、装置、平台设备及存储介质
技术领域
本发明实施例涉及计算机领域，尤其涉及一种任务调度方法、装置、平台设备及存储介质。
背景技术
在日志审计、性能数据监控、网络监控、传感器网络、航空航天、气象测控、金融服务等领域，会持续生成大量的待处理数据流。在处理这些数据流的平台和数据出现问题时，通常需要通过任务调度将数据流分流至其他集群和平台，但现有技术在通过任务调度将数据流分流至其他集群和平台之后，会改变数据流的处理时序，而数据流处理时序的改变会影响数据流的处理结果和处理结果的追溯。
综上，现有技术的任务调度方法存在任务被跨平台或跨系统调度之后，任务之间的依赖性随之消失的问题。
发明内容
本发明实施例提供了一种任务调度方法、装置、平台设备及存储介质，解决了任务被跨平台或跨系统调度之后，子任务与其父任务之间的依赖性随之消失的问题。
第一方面，本发明实施例提供了一种任务调度方法，应用于存在任务调度关系的多个调度平台中的任一调度平台，包括如下的步骤：
如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为所述当前任务建立一个新父任务；
在检测到所述当前任务的调度周期开始且对应新父任务执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。
进一步，还包括如下的步骤：
如果当前任务与对应关系表中的父任务属于同一调度系统和同一调度周期，则将该父任务标识为该任务的父任务；
在所述当前任务的调度周期开始时，将所述当前任务发送至消息队列，以等待对应进程执行所述任务。
进一步，所述为所述当前任务建立一个新父任务，包括如下的步骤：
获取所述当前任务对应的关系表中的父任务的标识信息；
根据所述父任务的标识信息获取所述父任务的任务信息；
根据所述父任务的任务信息构建一个中间任务，并将该中间任务标识为新父任务，以建立该中间任务与所述当前任务的父子关系。
进一步，所述父任务的任务信息包括调度周期对象标识、任务标识、数据源和执行成功的sql查询结果。
进一步，所述数据源包括数据库连接实例。
进一步，所述在检测到所述当前任务的调度周期开始且对应新父任务执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务，包括如下的步骤：
在检测到所述当前任务的调度周期开始时，查询对应新父任务的前置条件；
如果所述前置条件显示所述新父任务已被执行完毕，则将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。
进一步，如果所述当前任务为自依赖任务，在所述前置条件显示所述新父任务已被成功执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。
第二方面，本发明实施例还提供了一种任务调度装置，配置于存在任务调度关系的多个调度平台中的任一调度平台，包括：
父任务模块，用于如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为所述当前任务建立一个新父任务；
发送模块，用于在检测到所述当前任务的调度周期开始且对应新父任务执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。
第三方面，本发明实施例还提供了一种平台设备，所述平台设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如任意实施例所述的任务调度方法。
第四方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行如任意实施例所述的任务调度方法。
本发明实施例提供的任务调度方法的技术方案，包括：如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为当前任务建立一个新父任务；在检测到当前任务的调度周期开始且对应新父任务执行完毕时，将新父任务的实例任务和当前任务发送至消息队列，以由相应进程在执行当前任务之前执行实例任务。通过建立新父任务的方式为依赖关系已消失的当前任务与父任务之间重新建立依赖性，避免了任务被跨系统或跨平台调度之后，因其与父任务之间的依赖性消失而导致执行结果的准确性降低的情况出现，提高了各个平台的工作稳定性和准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图做一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的任务调度方法的流程图；
图2是本发明实施例一提供的又一任务调度方法的流程图；
图3是本发明实施例二提供的任务调度装置的结构框图；
图4是本发明实施例三提供的平台设备的结构框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，以下将参照本发明实施例中的附图，通过实施方式清楚、完整地描述本发明的技术方案，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例一
图1是本发明实施例一提供的任务调度方法的流程图。本实施例的技术方案适用于存在任务调度关系的多个调度平台中的任一调度平台对所接收的任务的执行情况。该方法可以由本发明实施例提供的任务调度装置来执行，该装置可以采用软件和/或硬件的方式实现，并配置在调度平台的处理器中应用。该方法具体包括如下步骤：
S101、如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为当前任务建立一个新父任务。
其中，本实施例的每个调度平台包括多个调度系统，每个调度系统又包括多个调度集群，任务被跨调度系统或跨调度平台调度之后，与其父任务之间的依赖关系也会消失。但每个调度平台和调度系统在工作过程中均有可能进行任务调度。任务调度的基本单位为调度周期对象，每个调度周期对象包括多个任务。
其中，调度周期对象的元数据存储于数据表中，包括标识信息(dad_id)、时间信息表(schedule)、开始时间(start date)、状态信息和最大并发数量等。其中，状态信息包括状态暂停/关闭。在获取到调度周期对象的标识信息之后，即可根据获取的标识信息从数据表中读取对应调度周期对象的所有任务(参见图2)，每个任务包括任务标识、任务的责任人、任务类型、任务的执行脚本参数和任务所属的调度集群、调度系统和调度平台。
其中，任务的类型可以是mysq、hive、oracle、shell、pgserver、数据上报、稽核、datax等。
获取到调度周期对象的所有任务之后，需要确认或建立每个任务与其父任务之间的依赖性。具体可选为：将调度周期对象的任务依次作为当前任务，从当前任务的关系表中获取当前任务的父任务，并确定当前任务与其父任务是否属于同一调度系统和同一调度周期，如果是，那么二者之间的依赖关系没有发生变化，父任务肯定会先于当前任务被平台执行完，而且平台也可以根据父任务的执行结果来执行当前任务；如果否，则表示二者之间依赖关系可能会受到影响，此时平台无法保证二者会被顺序执行，而且在当前任务的执行对父任务具有依赖性时，平台无法基于父任务的执行结果执行当前任务。为此，本实施例基于该父任务的任务信息为当前任务建立一个新父任务，从而使得平台能够在执行当前任务之前，先执行新父任务，在父任务执行完后再执行当前任务，即在当前任务与其父任务不具有依赖关系时，通过建立新父任务的方式建立当前任务与其原父任务之间的依赖性。
其中，新父任务的建立方法包括：获取当前任务对应的关系表中的父任务的标识信息；根据该父任务的标识信息从任务表中获取该父任务的任务信息；根据该父任务的任务信息构建一个中间任务，并将该中间任务标识为新父任务，以建立该中间任务与当前任务的父子关系，其中，任务信息包括任务类型。
其中，每个任务的关系表中均存储有其父任务的标识信息，根据父任务的标识信息即可从任务表中获取父任务的任务信息，任务信息包括父任务的标识信息、任务类型、任务执行脚本、任务责任人、数据库连接实例，以及查询任务是否执行成功的sql等。数据库连接实例可以通过查询调度系统数据库实例配置表获取，数据库实例配置表包括数据库连接的host、db、passwd、user等信息。
可以理解的是，在根据对应关系表中的父任务的任务信息构建中间任务时，所构建的中间任务的任务类型与该父任务的任务类型相同，即新父任务的任务类型与对应关系表中的父任务的任务类型相同。
S102、在检测到当前任务的调度周期开始且对应新父任务执行完毕时，将新父任务的实例任务和当前任务发送至消息队列，以由相应进程在执行当前任务之前执行实例任务。
对于任一任务，如果其与关系表中的父任务属于同一调度系统和同一调度周期，则表示当前任务不是由其他调度系统或其他调度平台调度过来的，因此其与父任务之间的依赖关系没有发生变化，那么在对应调度周期开始时，直接将该任务直接发送至消息队列，然后等待平台执行即可。
对于任一任务，如果其与关系表中的父任务不属于同一调度系统和/或同一调度周期，则实时检测当前任务和新父任务对应的调度周期是否到达，如果对应的调度周期到达，则检查该新父任务的前置条件，如果前置条件显示该新父任务执行完毕时，则生成该新父任务的实例任务，并将当前任务和所生成的实例任务提交至消息队列，以由相应进程在执行当前任务之前先消费执行该实例任务。
在一些实施例中，当前任务为自依赖任务，即当前任务的执行结果需要父任务的执行结果，那么在检测到对应调度周期到达时，检测相应新父任务的前置条件，如果前置条件显示该新父任务已被成功地执行，则生成该新父任务的实例任务，并将当前任务和所生成的实例任务提交至消息队列，以由相应进程在先消费执行该实例任务，然后基于该实例任务的执行结果执行当前任务。
本发明实施例提供的任务调度方法的技术方案，包括：如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为当前任务建立一个新父任务；在检测到当前任务的调度周期开始且对应新父任务执行完毕时，将新父任务的实例任务和当前任务发送至消息队列，以由相应进程在执行当前任务之前执行实例任务。通过建立新父任务的方式为依赖关系已消失的当前任务与父任务之间重新建立依赖性，避免了任务被跨系统或跨平台调度之后，因其与父任务之间的依赖性消失而导致执行结果的准确性降低的情况出现，提高了各个平台的工作稳定性和准确性。
实施例二
图3是本发明实施例提供的任务调度装置的结构框图。该装置用于执行上述任意实施例所提供的任务调度方法，该装置可选为软件或硬件实现。该装置包括：
父任务模块11，用于如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为当前任务建立一个新父任务；
发送模块12，用于在检测到当前任务的调度周期开始且对应新父任务执行完毕时，将当前任务和所述新父任务的实例任务发送至消息队列，以由相应进程在执行当前任务之前执行实例任务。
可选地，父任务模块11还用于如果当前任务与对应关系表中的父任务属于同一调度系统和同一调度周期，则将该父任务标识为该任务的父任务；在当前任务的调度周期开始时，将当前任务发送至消息队列，以等待对应进程执行任务。
可选地，父任务模块11具体用于获取当前任务对应的关系表中的父任务的标识信息；根据父任务的标识信息获取父任务的任务信息；根据父任务的任务信息构建一个中间任务，并将该中间任务标识为新父任务，以建立该中间任务与当前任务的父子关系。
可选地，发送模块12用于确定在检测到当前任务的调度周期开始时，查询对应新父任务的前置条件；如果前置条件显示新父任务已被执行完毕，则将新父任务的实例任务和当前任务发送至消息队列，以由相应进程在执行当前任务之前执行实例任务。
可选地，发送模块12用于如果当前任务为自依赖任务，在前置条件显示新父任务已被成功执行完毕时，将新父任务的实例任务和当前任务发送至消息队列，以由相应进程执行实例任务，并基于实例任务的执行结果执行当前任务。
本发明实施例提供的任务调度装置的技术方案，通过父任务模块在当前任务与对应关系表中的父任务不属于同一调度系统和/或同一调度周期时，基于该父任务的任务信息为当前任务建立一个新父任务；通过发送模块在检测到当前任务的调度周期开始且对应新父任务执行完毕时，将新父任务的实例任务和当前任务发送至消息队列，以由相应进程在执行当前任务之前执行实例任务。通过建立新父任务的方式为依赖关系已消失的当前任务与父任务之间重新建立依赖性，避免了任务被跨系统或跨平台调度之后，因其与父任务之间的依赖性消失而导致执行结果的准确性降低的情况出现，提高了各个平台的工作稳定性和准确性。
本发明实施例所提供的任务调度装置的技术方案可执行本发明任意实施例所提供的任务调度方法，具备执行方法相应的功能模块和有益效果。
实施例三
图4为本发明实施例三提供的平台设备的结构示意图，如图4所示，该设备包括处理器201、存储器202、输入装置203以及输出装置204；设备中处理器201的数量可以是一个或多个，图4中以一个处理器201为例；设备中的处理器201、存储器202、输入装置203以及输出装置204可以通过总线或其他方式连接，图4中以通过总线连接为例。
存储器202作为一种计算机可读存储介质，可用于存储软件程序、计算机可执行程序以及模块，如本发明实施例中的任务调度方法对应的程序指令/模块(例如，父任务模块11和发送模块12)。处理器201通过运行存储在存储器202中的软件程序、指令以及模块，从而执行设备的各种功能应用以及数据处理，即实现上述的任务调度方法。
存储器202可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序；存储数据区可存储根据终端的使用所创建的数据等。此外，存储器202可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中，存储器202可进一步包括相对于处理器201远程设置的存储器，这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置203可用于接收输入的数字或字符信息，以及产生与设备的用户设置以及功能控制有关的键信号输入。
输出装置204可包括显示屏等显示设备，例如，用户终端的显示屏。
实施例四
本发明实施例四还提供了一种包含计算机可执行指令的存储介质，所述计算机可执行指令在由计算机处理器执行时用于执行一种任务调度方法，该方法包括：
如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为所述当前任务建立一个新父任务；
在所述当前任务的调度周期开始时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。
当然，本发明实施例所提供的一种包含计算机可执行指令的存储介质，其计算机可执行指令不限于如上所述的方法操作，还可以执行本发明任意实施例所提供的任务调度方法中的相关操作。
通过以上关于实施方式的描述，所属领域的技术人员可以清楚地了解到，本发明可借助软件及必需的通用硬件来实现，当然也可以通过硬件实现，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如计算机的软盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(RandomAccess Memory，简称RAM)、闪存(FLASH)、硬盘或光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的任务调度方法。
值得注意的是，上述任务调度装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (9)

1.一种任务调度方法，其特征在于，应用于存在任务调度关系的多个调度平台中的任一调度平台，包括如下的步骤：
如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为所述当前任务建立一个新父任务；
在检测到所述当前任务的调度周期开始且对应新父任务执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务；
所述为所述当前任务建立一个新父任务，包括如下的步骤：
获取所述当前任务对应的关系表中的父任务的标识信息；
根据所述父任务的标识信息获取所述父任务的任务信息；
根据所述父任务的任务信息构建一个中间任务，并将该中间任务标识为新父任务，以建立该中间任务与所述当前任务的父子关系。
2.根据权利要求1所述的方法，其特征在于，还包括如下的步骤：
如果当前任务与对应关系表中的父任务属于同一调度系统和同一调度周期，则将该父任务标识为该任务的父任务；
在所述当前任务的调度周期开始时，将所述当前任务发送至消息队列，以等待对应进程执行所述任务。
3.根据权利要求1所述的方法，其特征在于，所述父任务的任务信息包括调度周期对象标识、任务标识、数据源和执行成功的sql查询结果。
4.根据权利要求3所述的方法，其特征在于，所述数据源包括数据库连接实例。
5.根据权利要求1-4任一所述的方法，其特征在于，所述在检测到所述当前任务的调度周期开始且对应新父任务执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务，包括如下的步骤：
在检测到所述当前任务的调度周期开始时，查询对应新父任务的前置条件；
如果所述前置条件显示所述新父任务已被执行完毕，则将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。
6.根据权利要求5所述的方法，其特征在于，如果所述当前任务为自依赖任务，在所述前置条件显示所述新父任务已被成功执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程执行所述实例任务，并基于所述实例任务的执行结果执行所述当前任务。
7.一种任务调度装置，其特征在于，配置于存在任务调度关系的多个调度平台中的任一调度平台，包括：
父任务模块，用于如果当前任务与对应关系表中的父任务不属于同一调度系统和同一调度周期，则基于该父任务的任务信息为所述当前任务建立一个新父任务；
新父任务建立模块，用于获取当前任务对应的关系表中的父任务的标识信息；根据父任务的标识信息获取父任务的任务信息；根据父任务的任务信息构建一个中间任务，并将该中间任务标识为新父任务，以建立该中间任务与当前任务的父子关系；
发送模块，用于在检测到所述当前任务的调度周期开始且对应新父任务执行完毕时，将所述新父任务的实例任务和所述当前任务发送至消息队列，以由相应进程在执行当前任务之前执行所述实例任务。
8.一种平台设备，其特征在于，所述平台设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-6中任一所述的任务调度方法。
9.一种包含计算机可执行指令的存储介质，其特征在于，所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-6中任一所述的任务调度方法。
CN202010517437.8A 2020-06-09 2020-06-09 任务调度方法、装置、平台设备及存储介质 Active CN111679899B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010517437.8A CN111679899B (zh) 2020-06-09 2020-06-09 任务调度方法、装置、平台设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010517437.8A CN111679899B (zh) 2020-06-09 2020-06-09 任务调度方法、装置、平台设备及存储介质

Publications (2)

Publication Number Publication Date
CN111679899A CN111679899A (zh) 2020-09-18
CN111679899B true CN111679899B (zh) 2023-05-23

Family

ID=72435641

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010517437.8A Active CN111679899B (zh) 2020-06-09 2020-06-09 任务调度方法、装置、平台设备及存储介质

Country Status (1)

Country Link
CN (1) CN111679899B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117290113B (zh) * 2023-11-22 2024-02-13 太平金融科技服务（上海）有限公司 一种任务处理方法、装置、系统和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107870807A (zh) * 2016-09-26 2018-04-03 平安科技（深圳）有限公司 一种跨平台的任务调度方法和装置
CN108710532A (zh) * 2018-05-21 2018-10-26 平安科技（深圳）有限公司 跨调度平台的依赖实现方法、装置、设备和存储介质
CN109408204A (zh) * 2017-08-15 2019-03-01 阿里巴巴集团控股有限公司 一种分布式任务系统的任务调度方法及装置
CN109582396A (zh) * 2017-09-25 2019-04-05 北京国双科技有限公司 一种任务状态处理方法、装置、系统及存储介质
CN110928653A (zh) * 2019-10-24 2020-03-27 浙江大搜车软件技术有限公司 跨集群任务的执行方法、装置、计算机设备和存储介质
CN110968371A (zh) * 2020-02-28 2020-04-07 北京搜狐新媒体信息技术有限公司 一种数据仓库中工作流的配置方法及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9417918B2 (en) * 2013-11-20 2016-08-16 International Business Machines Corporation Computing session workload scheduling and management of parent-child tasks
US10768980B2 (en) * 2018-05-29 2020-09-08 American Express Travel Related Services Company, Inc. Automated execution of a batch job workflows

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107870807A (zh) * 2016-09-26 2018-04-03 平安科技（深圳）有限公司 一种跨平台的任务调度方法和装置
CN109408204A (zh) * 2017-08-15 2019-03-01 阿里巴巴集团控股有限公司 一种分布式任务系统的任务调度方法及装置
CN109582396A (zh) * 2017-09-25 2019-04-05 北京国双科技有限公司 一种任务状态处理方法、装置、系统及存储介质
CN108710532A (zh) * 2018-05-21 2018-10-26 平安科技（深圳）有限公司 跨调度平台的依赖实现方法、装置、设备和存储介质
CN110928653A (zh) * 2019-10-24 2020-03-27 浙江大搜车软件技术有限公司 跨集群任务的执行方法、装置、计算机设备和存储介质
CN110968371A (zh) * 2020-02-28 2020-04-07 北京搜狐新媒体信息技术有限公司 一种数据仓库中工作流的配置方法及系统

Also Published As

Publication number Publication date
CN111679899A (zh) 2020-09-18

Similar Documents

Publication Publication Date Title
US10116534B2 (en) Systems and methods for WebSphere MQ performance metrics analysis
US11150896B2 (en) Automated generation of service definitions for message queue application clients
CN111400011B (zh) 一种实时任务调度方法、系统、设备及可读存储介质
CN112286806B (zh) 自动化测试方法、装置、存储介质及电子设备
CN113760677A (zh) 异常链路分析方法、装置、设备及存储介质
CN111784318A (zh) 数据处理方法、装置、电子设备及存储介质
CN110781180A (zh) 一种数据筛选方法和数据筛选装置
CN107577527B (zh) 任务生成、调度方法及装置
CN111679899B (zh) 任务调度方法、装置、平台设备及存储介质
CN111210340A (zh) 一种自动任务处理方法、装置、服务器及存储介质
CN110941632A (zh) 一种数据库审计方法、装置及设备
CN116069838A (zh) 一种数据处理方法、装置、计算机设备及存储介质
CN115617480A (zh) 一种任务调度方法、装置、系统及存储介质
CN110750362A (zh) 生物信息的分析方法、装置和存储介质
CN114090268B (zh) 容器管理方法及容器管理系统
CN115344370A (zh) 任务调度方法、装置、设备及存储介质
CN114564249A (zh) 推荐调度引擎、推荐调度方法及计算机可读存储介质
CN114706839A (zh) 日志数据处理方法、装置、电子设备和存储介质
CN111400003A (zh) 任务处理方法及其装置
CN112596974A (zh) 一种全链路监控方法、装置、设备和存储介质
CN111290868A (zh) 任务处理方法、装置和系统以及流程引擎
CN110837399A (zh) 一种管理流式计算应用程序的方法、装置及计算设备
CN112732415B (zh) 基于资源交换代理系统的事务处理方法、装置和设备
CN115269161B (zh) 一种异常流程逆向回滚方法和系统
CN116109112B (zh) 基于聚合接口的业务数据处理方法、装置、介质和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant