CN111736967B - 多分支流程管控装置、流程模板生成方法及存储介质 - Google Patents
多分支流程管控装置、流程模板生成方法及存储介质 Download PDFInfo
- Publication number
- CN111736967B CN111736967B CN202010458653.XA CN202010458653A CN111736967B CN 111736967 B CN111736967 B CN 111736967B CN 202010458653 A CN202010458653 A CN 202010458653A CN 111736967 B CN111736967 B CN 111736967B
- Authority
- CN
- China
- Prior art keywords
- task
- flow
- information
- job
- priority
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
- G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/48—Indexing scheme relating to G06F9/48
- G06F2209/484—Precedence
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
- Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
- Y02P90/02—Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请公开了一种多分支流程管控装置,包括:流程模板生成器,其被配置为根据流程要求编写并存储流程模板;流程控制器,其被配置为读取并解析流程模板,得到流程所包含的一个或多个任务的任务信息;根据任务执行结果,判定流程完成情况;任务调度器,其被配置为根据任务信息执行任务调度,并将每个任务的执行结果反馈给流程控制器。本申请还公开了一种流程模板生成方法和存储介质,通过确定任务信息及其所包含的不同粒度的job信息和step信息生成流程模板。本申请将业务流程转换成任务的形式,通过job和step不同粒度将业务串联和定制化调度,使流程能够动态扩展,实现多分支流程管控,提高了流程管理效率。
Description
技术领域
本发明涉及计算机任务管理,具体涉及一种多分支流程管控装置、流程模板生成方法及存储介质。
背景技术
随着互联网技术的发展,基于物理资源云环境下资源管理调度流程也越来越繁多,涉及到资源申请、扩容申请、主备切换、资源动态调度、故障诊断、资源释放等全生命周期运维场景,往往涉及的数据库类型、版本多、业务调度复杂。
现有的任务管理方法中多采用人工方式进行流程管理,对于新流程的加入,通常需要重新进行执行调度的安排,导致运维效率不高,人员成本也在不断增加。因此一旦运维需求发生变化,难以通过快速高效的进行流程上的应急处理来面对面对流程上的变化。
发明内容
发明目的:本申请的目的在于提供一种多分支流程管控装置、流程模板生成方法及存储介质,解决现有流程管控方法运维效率低、成本高、应急能力差的缺陷。
技术方案:本申请一方面提供了一种多分支流程管控装置,包括:
流程模板生成器,其被配置为根据流程要求编写并存储流程模板;
流程控制器,其被配置为读取并解析流程模板,得到流程所包含的一个或多个任务的任务信息;根据任务执行结果,判定流程完成情况;
任务调度器,其被配置为根据任务信息执行任务调度,并将每个任务的执行结果反馈给流程控制器。
进一步地,流程模板生成器中存储有编辑流程模板所需的规则信息,包括:任务的定义、job的定义、step的定义、运行关系的定义及优先级参数的定义;
任务包括一个或多个job;job包括一个或多个step。
进一步地,运行关系包括并行和串行。
进一步地,优先级参数采用阿拉伯数字进行定义,通过阿拉伯数字的大小表征优先级的高低,数字越大对应的优先级越高。
进一步地,规则信息还包括step的编排顺序的定义,编排顺序用于在同一job包括多个优先级相同的step时,作为多个优先级相同的step的执行顺序依据。
进一步地,流程模板包括:任务信息、job信息和step信息;
任务信息包括各个任务之间的运行关系、优先级顺序及任务运行周期;
job信息包括每个任务包括的job,以及每个任务下各job之间的运行关系及优先级顺序;
step信息包括每个job包括的step,以及每个job下个step之间的运行关系、优先级顺序及编排顺序。
进一步地,根据任务运行周期的不同,可将任务分为短周期任务、长周期任务和不定周期任务;
短周期任务的执行结果通过同步传输的方式反馈给流程控制器;
长周期任务的执行结果通过异步回调的方式反馈给流程控制器;
不定周期任务的执行结果通过同步传输或异步回调的方式反馈给流程控制器。
进一步地,还包括:监听器和执行回调存储器,用于为异步回调提供硬件基础。
监听器与流程控制器相连,回调存储器与任务调度器相连;
回调存储器用于接收并存储任务调度器反馈的执行结果;
监听器用于读取回调存储器中的执行结果并将其回传给流程控制器。
本申请另一方面提供了一种流程模板生成方法,包括:
根据流程需求确定流程包括的一个或多个任务及各任务对应的任务信息,任务信息包括:各个任务之间的运行关系、优先级顺序及任务运行周期;
确定每个任务包括的一个或多个job及各job对应的job信息,job信息包括各job之间的运行关系及优先级顺序;
确定每个job包括的一个或多个step及各step对应的step信息,step信息包括各step之间的运行关系、优先级顺序及编排顺序;
根据任务信息、job信息和step信息生成流程模板。
本申请还提供了一种计算机可读存储介质,存储介质包括可执行指令,其被执行时可实现上述流程模板生成方法。
有益效果:与现有技术相比,本申请的流程管控装置针对流程业务需求,在流程上进行配置,通过流程模板实现流程预编排管理;针对复杂的流程,屏蔽底层管控细节,让使用者专注于业务流程模板的顶层编写;流程增加或变更时可只需扩展或修改流程模板,集中化管理,流水线调度,提高工作效率和应急能力。另外,本申请提供的流程模板生成方法,将业务流程转换成任务的形式,通过job和step不同粒度将业务串联和定制化调度,使流程模板能够动态扩展,为多分支流程管控提供基础。
附图说明
图1为本申请的多分支流程管控装置的结构框图;
图2为本申请实施例中任务A结果同步传输的结构示意图;
图3为本申请实施例中任务B结果异步回调的结构示意图;
图4为本申请实施例中任务C结果同步与异步兼备的结构示意图;
图5为本申请实施例中多任务调度流程图;
图6为本申请的流程模板生成方法。
具体实施方式
下面结合附图和实施例对本发明做进一步描述:
本申请一方面提供了一种多分支流程管控装置,如图1所示,包括流程模板生成器1、流程控制器2和任务调度器3。
流程模板生成器1被配置为根据流程要求编写并存储流程模板。具体地,流程模板生成器1中存储有编辑流程模板所需的规则信息,包括:任务的定义、job的定义、step的定义以、运行关系的定义、优先级参数的定义和step的编排顺序的定义。
每个任务包括一个或多个job;每个job包括一个或多个step。运行关系包括并行和串行。对于任务(job/step)而言,并行是指各任务(job/step)之间的运行没有关联关系,同一时间可同时执行多个任务(job/step);串行是指一次执行一个任务(job/step),按顺序执行。
优先级参数采用阿拉伯数字进行定义,通过阿拉伯数字的大小表征优先级的高低。在本实施例中,通过Pi(i∈N,N为正整数)来表示优先级,i取值越大,Pi表征的优先级越高。对于同一任务中的每个job,对于串行job因串行的运行关系具有不同的优先级,按照优先级的高低进行执行;对于并行job中优先级相同的,可同时执行。
对于同一job中的step按照优先级从高到低的顺序进行执行,对于优先级相同的step,编排顺序用作为多个优先级相同的step的执行顺序依据,编排顺序靠前的优先执行。
在本申请的实施例中,流程模板包括:任务信息、job信息和step信息。
任务信息包括各个任务之间的运行关系、优先级顺序及任务运行周期;根据任务运行周期的不同,可将任务分为短周期任务、长周期任务和不定周期任务。在本实施例中可通过设定周期阈值T来定义任务类型,执行周期超出T的任务为长周期任务;执行周期不超过T的任务为短周期任务;难以确定周期是否超出T的任务为不定周期任务。
job信息包括每个任务包括的job,以及每个任务下各job之间的运行关系及优先级顺序。
step信息包括每个job包括的step,以及每个job下个step之间的运行关系、优先级顺序及编排顺序。
利用流程模板生成器1生成流程模板时:
首先根据流程需求确定流程包括的一个或多个任务及各任务对应的任务信息;
其次,确定每个任务包括的一个或多个job及各job对应的job信息;
然后,确定每个job包括的一个或多个step及各step对应的step信息;
最后,基于流程模板生成器中给出的规则信息编写流程模板。
流程控制器2被配置为读取并解析流程模板,得到流程所包含的一个或多个任务的任务信息,并将各任务的任务信息发送至任务调度器;
根据任务调度器反馈的任务执行结果,判定流程完成情况;
任务调度器3被配置为根据任务信息,及其中包含的job信息和step信息执行任务调度,并将每个任务的执行结果反馈给流程控制器。
在本实施例中,如图2所示,任务A的执行结果通过同步传输的方式反馈给流程控制器2,即流程控制器向任务调度器发送任务信息后,在线等待任务调度器回传任务执行结果。对于短周期任务,其执行结果可通过同步传输的方式反馈给流程控制器。
在本申请的另一实施例中,如图3、图4所示,多分支流程管控装置还包括监听器4和回调存储器5,监听器4与流程控制器2相连,回调存储器5与任务调度器3相连;回调存储器5接收并存储任务调度器反馈的执行结果;监听器4读取回调存储器中的执行结果并将其回传给流程控制器。监听器和回调存储器的设置使执行结果的异步回调成为可能,为执行结果的反馈提供多种可选方式。
如图3所示,任务B的执行结果通过异步回调的方式反馈至流程控制器2,具体为,任务调取器将任务B的执行结果存储至回调存储器5中,监听器4实时读取回调存储区5中的结果,并将结果发送至流程控制器。对于长周期任务和不定周期任务,考虑到流程控制器的等待时间,可选用异步回调的方式。
对于三种周期的任务,为提高装置的应急能力和适用范围,可同时为同一任务提供两种结果回调方式。如图4所示,对于一不定周期任务C,其执行结果可通过同步传输和异步回调两种方式反馈给流程控制器:可在任务开始后预定时间t内令流程控制器2进行同步等待,若在时间t内,任务C完成,则直接将执行结果通过同步传输的方式反馈给流程控制器2;若在时间t内,任务C没有执行完成,则将反馈方式切换为异步回调,流程控制器2不再同步等待,通过监听器4和回调存储器5对任务C的执行结果进行异步回调。
任务A、B、C的执行流程如图5所示,在任务的层面,三者为并行的关系,同时执行。在任务各自的执行过程中,按照内部job以及job内step的优先级及编排顺序进行执行。对于得到的执行结果,任务A通过同步传输的方式反馈结果;任务B通过异步回调的方式反馈结果;任务C可通过同步传输或异步回调的方式反馈结果。
在本申请的其他实施例中,可根据需要扩展的任务,通过流程模板编辑器进行任务扩展,无需重新进行编辑,有助于提高效率。
本申请另一方面提供了一种流程模板生成方法,如图6所示,包括:
S601根据流程需求确定流程包括的一个或多个任务及各任务对应的任务信息,任务信息包括:各个任务之间的运行关系、优先级顺序及任务运行周期;
S602确定每个任务包括的一个或多个job及各job对应的job信息,job信息包括各job之间的运行关系及优先级顺序;
S603确定每个job包括的一个或多个step及各step对应的step信息,step信息包括各step之间的运行关系、优先级顺序及编排顺序;
S604根据任务信息、job信息和step信息生成流程模板。
本申请还提供了一种计算机可读存储介质,存储介质包括可执行指令,其被执行时可实现上述流程模板生成方法。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
Claims (6)
1.一种多分支流程管控装置,其特征在于,包括:
流程模板生成器,其被配置为根据流程要求编写并存储流程模板;
流程控制器,其被配置为
读取并解析所述流程模板,得到流程所包含的一个或多个任务的任务信息;
根据任务执行结果,判定流程完成情况;
任务调度器,其被配置为根据所述任务信息执行任务调度,并将每个任务的执行结果反馈给所述流程控制器;
所述流程模板生成器中存储有编辑流程模板所需的规则信息,包括:任务的定义、job的定义、step的定义、运行关系的定义及优先级参数的定义;所述任务包括一个或多个job;所述job包括一个或多个step;所述规则信息还包括step的编排顺序的定义,所述编排顺序用于在同一job包括多个优先级相同的step时,作为所述多个优先级相同的step的执行顺序依据;
所述流程模板包括:任务信息、job信息和step信息;
所述任务信息包括各个任务之间的运行关系、优先级顺序及任务运行周期;
所述job信息包括每个任务包括的job,以及每个任务下各job之间的运行关系及优先级顺序;
所述step信息包括每个job包括的step,以及每个job下个step之间的运行关系、优先级顺序及编排顺序;
根据任务运行周期的不同,可将任务分为短周期任务、长周期任务和不定周期任务;
所述短周期任务的执行结果通过同步传输的方式反馈给所述流程控制器;
所述长周期任务的执行结果通过异步回调的方式反馈给所述流程控制器;
所述不定周期任务的执行结果通过同步传输或异步回调的方式反馈给所述流程控制器。
2.根据权利要求1所述的装置,其特征在于,所述运行关系包括并行和串行。
3.根据权利要求1所述的装置,其特征在于,所述优先级参数采用阿拉伯数字进行定义,通过阿拉伯数字的大小表征优先级的高低。
4.根据权利要求1~3任一项所述的装置,其特征在于,还包括:监听器和执行回调存储器;
所述监听器与所述流程控制器相连,所述回调存储器与所述任务调度器相连;
所述回调存储器用于接收并存储任务调度器反馈的执行结果;
所述监听器用于读取回调存储器中的执行结果并将其回传给所述流程控制器。
5.一种流程模板生成方法,其特征在于,包括:
根据流程需求确定流程包括的一个或多个任务及各任务对应的任务信息,所述任务信息包括:各个任务之间的运行关系、优先级顺序及任务运行周期;
确定每个任务包括的一个或多个job及各job对应的job信息,所述job信息包括各job之间的运行关系及优先级顺序;
确定每个job包括的一个或多个step及各step对应的step信息,所述step信息包括各step之间的运行关系、优先级顺序及编排顺序;
根据所述任务信息、所述job信息和所述step信息生成流程模板。
6.一种计算机可读存储介质,其特征在于,所述存储介质包括可执行指令,其被执行时可实现权利要求5所述的流程模板生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010458653.XA CN111736967B (zh) | 2020-05-27 | 2020-05-27 | 多分支流程管控装置、流程模板生成方法及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010458653.XA CN111736967B (zh) | 2020-05-27 | 2020-05-27 | 多分支流程管控装置、流程模板生成方法及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111736967A CN111736967A (zh) | 2020-10-02 |
CN111736967B true CN111736967B (zh) | 2022-09-09 |
Family
ID=72647818
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010458653.XA Active CN111736967B (zh) | 2020-05-27 | 2020-05-27 | 多分支流程管控装置、流程模板生成方法及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111736967B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113807987A (zh) * | 2021-07-29 | 2021-12-17 | 卡斯柯信号有限公司 | 一种基于ctc仿真实训流程的参数动态计算方法及装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107423122A (zh) * | 2017-07-25 | 2017-12-01 | 苏州博纳讯动软件有限公司 | 一种复杂运维作业编排与调度系统及其方法 |
CN110472876A (zh) * | 2019-08-19 | 2019-11-19 | 北京首都在线科技股份有限公司 | 一种任务调度方法、装置及计算机可读存储介质 |
-
2020
- 2020-05-27 CN CN202010458653.XA patent/CN111736967B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107423122A (zh) * | 2017-07-25 | 2017-12-01 | 苏州博纳讯动软件有限公司 | 一种复杂运维作业编排与调度系统及其方法 |
CN110472876A (zh) * | 2019-08-19 | 2019-11-19 | 北京首都在线科技股份有限公司 | 一种任务调度方法、装置及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111736967A (zh) | 2020-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2020211205A1 (zh) | 一种数据处理方法及相关产品 | |
CN110162471B (zh) | 一种基于容器云的压力测试方法及系统 | |
US20200342322A1 (en) | Method and device for training data, storage medium, and electronic device | |
CN110471754B (zh) | 作业调度中的数据展示方法、装置、设备及存储介质 | |
CN110716802B (zh) | 一种跨集群的任务调度系统及方法 | |
CN109615138B (zh) | 一种作业流程调优方法及装置 | |
CN105094972A (zh) | 数据库操作任务的处理方法和装置 | |
CN103345442A (zh) | 装备自动化测试业务集成系统 | |
CN113312161A (zh) | 一种应用调度方法、平台及存储介质 | |
US7185322B2 (en) | Method and apparatus for parallel action processing | |
CN109144511B (zh) | 数值模拟图形用户界面自动生成方法及系统 | |
CN107122232A (zh) | 一种多媒体任务处理装置及方法 | |
JP2021520560A (ja) | 半導体後端工場をスケジューリングするための方法 | |
CN111736967B (zh) | 多分支流程管控装置、流程模板生成方法及存储介质 | |
CN107315652B (zh) | 一种数据备份方法及云hdfs系统 | |
US10430237B2 (en) | Resource scheduling method and related apparatus | |
CN113052322A (zh) | 机器学习的建模方法、装置、存储介质和处理器 | |
CN116974994A (zh) | 一种基于集群的高效能文件协作系统 | |
CN106843822B (zh) | 一种执行代码生成方法及设备 | |
CN110750362A (zh) | 生物信息的分析方法、装置和存储介质 | |
CN115185825A (zh) | 接口测试的调度方法及装置 | |
US20210256014A1 (en) | System for data engineering and data science process management | |
CN114022105A (zh) | 数据处理方法、装置、电子设备和可读存储介质 | |
CN105653552B (zh) | 一种结构化文档处理方法、装置及设备 | |
CN114647686A (zh) | 数据处理方法、装置、设备、介质及产品 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |