CN111324426A - Oracle数据库任务作业管理调度系统及方法 - Google Patents
Oracle数据库任务作业管理调度系统及方法 Download PDFInfo
- Publication number
- CN111324426A CN111324426A CN201811544029.0A CN201811544029A CN111324426A CN 111324426 A CN111324426 A CN 111324426A CN 201811544029 A CN201811544029 A CN 201811544029A CN 111324426 A CN111324426 A CN 111324426A
- Authority
- CN
- China
- Prior art keywords
- task
- job
- service module
- job task
- scheduling
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 230000002159 abnormal effect Effects 0.000 claims description 50
- 230000008569 process Effects 0.000 claims description 22
- 238000012545 processing Methods 0.000 claims description 22
- 238000004891 communication Methods 0.000 claims description 10
- 238000003860 storage Methods 0.000 claims description 8
- 230000005856 abnormality Effects 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 6
- 238000004519 manufacturing process Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000012423 maintenance Methods 0.000 description 3
- 238000004140 cleaning Methods 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000007474 system interaction Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
- G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供了一种ORACLE数据库任务作业管理调度系统及方法,调度系统包括:任务调度管理中心,任务调度管理中心包括启动注册服务模块、状态更新服务模块、异常处理服务模块以及结束注销服务模块。完全基于ORACLE数据库,不依赖于Windows或Linux操作系统,不需要使用操作系统的Shell脚本命令,不使用第三方软件或插件,不需要对现有的任务调度进行大规模的调整,可实现统一对作业任务的整个生命周期进行管理,不仅管理作业任务的启动、结束,还特别对执行状态、作业异常进行管理,能够实时有效、准确的跟踪和监控业务全流程性能。
Description
技术领域
本发明实施例涉及业务支撑技术领域,更具体地,涉及ORACLE数据库任务作业管理调度系统及方法。
背景技术
数据库定时作业任务管理调度是指为了实现特定生产维护的需要,在计划时间点或某一触发状态下,通常在无人监督和直接操作的情况下,执行指定的存储过程或脚本的工作。ORACLE数据库通过任务调度,在指定时间内,通过特定的函数或存储过程,实现数据的自动清洗、加工、优化,以达到自动生成报表、自动挖掘数据、自动优化数据库性能的目的。
ORACLE环境中的许多任务都需要任务作业调度功能,例行的数据库维护和应用程序逻辑也要求定期调度并运行作业,企业到企业(B2B)应用程序同样要求对其业务作业进行调度。数据库管理员(Database Administrator,DBA)需要在指定时间窗口中调度定期维护作业。使用此调度程序,DBA和应用程序开发者可以控制在数据库环境中执行各种任务作业的时间和位置。这些任务作业可能既耗时又复杂;可以使用调度程序来管理和计划这些任务。可以根据时间或者在发生指定事件时启动调度程序作业,而且调度程序还可以在作业状态更改时(例如,从RUNNING变为COMPLETE)引发事件。还可以使用为达到组合目标而链接在一起的一系列已命名的程序作为调度程序来管理和计划任务。
目前ORACLE数据库定时任务作业管理调度,可以通过两种方式进行实现:1)操作系统级调度(包括Windows和Linux系统):针对Windows系统,可以使用任务计划来实现,通过系统的任务计划功能,按任务向导添加任务计划;针对Linux系统,可以使用crontab命令完成任务的调度,crontab命令用于设置周期性被执行的指令,crontab命令从标准输入设备读取指令,并将其存放于crontab配置文件中,以供之后读取和执行,其本质原理是将数据库命令转化系统shell脚本,并使用系统的定时执行工具执行。2)使用DBMS_JOB包或DBMS_SCHEDULER实现任务作业管理调度,DBMS_JOB是一个基于ORACLE数据库的PL/SQL工具包,DBMS_SCHEDULER是ORACLE数据库自带的作业调度工具,二者都可以用来执行ORACLE数据库的任务调度。
但是现有技术的方法1)提供的任务作业管理调度方法安全性较差,存在操作系统的执行权限,在大量远程数据库操作时难以实现;性能较差,在有大量的表级操作时,效率不高;易用性较差,如果用系统级定时,会增加很多编程工作,成本增加了,还很容易出错。而且,作业任务的生命周期一般包括启动、执行、异常处理和结束四个阶段,但是方法1)和方法2)中均只关注于作业任务的启动,其本质只是作业任务的触发器,仅仅管理作业任务的启动环节,缺少执行日志的管理,缺少异常情况的处理,并且复杂的任务调度并不适合。缺少对作业任务整个生命周期的管理。
发明内容
为克服上述问题或者至少部分地解决上述问题,本发明实施例提供了一种ORACLE数据库任务作业管理调度系统及方法。
第一方面,本发明实施例提供了一种ORACLE数据库任务作业管理调度系统,其特征在于,包括:任务调度管理中心,所述任务调度管理中心包括启动注册服务模块、状态更新服务模块、异常处理服务模块以及结束注销服务模块;
所述启动注册服务模块用于在作业任务启动时接收所述作业任务发送的任务注册请求,根据所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配状态标识;
所述状态更新服务模块用于在所述作业任务执行过程中接收所述作业任务发送的状态更新请求以及当前状态信息,并根据所述状态更新请求以及所述当前状态信息,更新所述状态标识;
所述异常处理服务模块用于当所述作业任务存在异常时接收所述作业任务发送的任务异常请求,并根据所述任务异常请求,对所述作业任务存在的异常进行处理;
所述结束注销服务模块用于在所述作业任务结束时接收所述作业任务发送的任务结束请求,并基于所述任务结束请求,结束所述作业任务。
第二方面,本发明实施例提供了基于第一方面提供的一种ORACLE数据库任务作业管理调度系统实现的调度方法,包括:
在作业任务启动时,调用所述启动注册服务模块,所述启动注册服务模块根据接收到的所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配状态标识;
在所述作业任务执行过程中,调用所述状态更新服务模块,所述状态更新服务模块根据接收到的所述状态更新请求以及所述当前状态信息,更新所述状态标识;
当所述作业任务存在异常时,调用异常处理服务模块,所述异常处理服务模块根据接收到的所述任务异常请求,对所述作业任务存在的异常进行处理;
在所述作业任务结束时,调用所述结束注销服务模块,所述结束注销服务模块基于接收到的所述任务结束请求,结束所述作业任务。
第三方面,本发明实施例提供了一种电子设备,包括:
至少一个处理器、至少一个存储器、通信接口和总线;其中,
所述处理器、存储器、通信接口通过所述总线完成相互间的通信;
所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述程序指令,以执行第一方面提供的调度方法。
第四方面,本发明实施例提供了一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行第一方面提供的调度方法。
本发明实施例提供的一种ORACLE数据库任务作业管理调度系统及方法,调度系统包括:任务调度管理中心,任务调度管理中心包括启动注册服务模块、状态更新服务模块、异常处理服务模块以及结束注销服务模块。完全基于ORACLE数据库,不依赖于Windows或Linux操作系统,不需要使用操作系统的Shell脚本命令,不使用第三方软件或插件,不需要对现有的任务调度进行大规模的调整,可实现统一对作业任务的整个生命周期进行管理,不仅管理作业任务的启动、结束,还特别对执行状态、作业异常进行管理,能够实时有效、准确的跟踪和监控业务全流程性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种ORACLE数据库任务作业管理调度系统的结构示意图;
图2为本发明实施例提供的一种ORACLE数据库任务作业管理调度系统的结构示意图;
图3为本发明实施例提供的一种ORACLE数据库任务作业管理调度系统的结构示意图;
图4为本发明实施例提供的一种ORACLE数据库任务作业管理调度系统的结构示意图;
图5为本发明实施例提供的一种ORACLE数据库任务作业管理调度方法的流程示意图;
图6为本发明实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
在本发明实施例的描述中,需要说明的是,术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明实施例和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明实施例的限制。此外,术语“第一”、“第二”、“第三”仅用于描述目的,而不能理解为指示或暗示相对重要性。
在本发明实施例的描述中,需要说明的是,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本发明实施例中的具体含义。
本发明实施例涉及业务支撑领域,尤其涉及ORACLE数据库定时作业调度管理与数据自动化处理相结合的交叉领域,本发明实施例提供的ORACLE数据库任务作业管理调度系统,是一种基于监督模式的ORACLE数据库定时任务作业管理调度系统,可以广泛应用于各类数据库任务调度与管理。
如图1所示,本发明实施例提供了一种ORACLE数据库任务作业管理调度系统,包括:任务调度管理中心1,所述任务调度管理中心1包括启动注册服务模块11、状态更新服务模块12、异常处理服务模块13以及结束注销服务模块14。
启动注册服务模块11用于在作业任务启动时接收所述作业任务发送的任务注册请求,根据所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配状态标识;
状态更新服务模块12用于在所述作业任务执行过程中接收所述作业任务发送的状态更新请求以及当前状态信息,并根据所述状态更新请求以及所述当前状态信息,更新所述状态标识;
异常处理服务模块13用于当所述作业任务存在异常时接收所述作业任务发送的任务异常请求,并根据所述任务异常请求,对所述作业任务存在的异常进行处理;
结束注销服务模块14用于在所述作业任务结束时接收所述作业任务发送的任务结束请求,并基于所述任务结束请求,结束所述作业任务。
具体地,作业任务的生命周期一般包括启动、执行、异常和结束四个阶段,本发明实施例中提供的ORACLE数据库任务作业管理调度系统以上述作业任务为例进行调度,如图2所示。任务调度管理中心1负责任务调度的整体管理,启动注册服务模块11用于在作业任务启动时注册;状态更新服务模块12用于监控作业任务的执行;异常处理服务模块13用于在作业任务存在异常时,接管作业任务的执行,保留异常信息日志,方便跟踪调测;结束注销服务模块14用于在作业任务结束时,负责注销作业任务的执行。
作业任务2可通过定时或触发启动,在作业任务2处于启动阶段21时,作业任务2向启动注册服务模块11发送任务注册请求,其中任务注册请求实际上是一种请求参数,具体可包括作业任务的基本信息,例如作业任务2的名称、作业任务2的ID等。启动注册服务模块11接收作业任务2发送的任务注册请求后,根据任务注册请求对作业任务2进行注册,并确定作业任务2的对象标识符(Object Identifier,OID)和调度时段,为作业任务分配状态标识。状态标识用于表征作业任务的当前状态,每一状态对应一状态标识。例如此时作业任务2处于启动阶段,则为作业任务2分配的状态标识为启动状态标识,用以表征作业任务2的当前状态为启动状态。启动状态标识具体可以表示为STARTED。
这里需要说明的是,作业任务2的对象标识符是用于标识作业任务2的,用以区别作业任务2与其他的作业任务。调度时段是指作业任务2需要占用ORACLE数据库任务作业管理调度系统的时长,一般情况下,需要ORACLE数据库任务作业管理调度系统对作业任务2的整个生命周期进行管理调度,所以调度时长可以理解为作业任务2的生命周期。作业任务2向启动注册服务模块11发送任务注册请求,这可以通过作业任务2调用启动注册服务模块11来完成。
在作业任务2持续执行过程22中,作业任务2向状态更新服务模块12发送状态更新请求以及作业任务2的当前状态信息,状态更新服务模块12接收状态更新请求以及作业任务2的当前状态信息,并根据接收到的状态更新请求以及当前状态信息,将作业任务2的状态标识更新为当前状态信息对应的状态标识。这里的状态更新服务模块12的作用是更新作业任务的状态信息,具体通过作业任务2发送的状态更新请求将为作业任务分配的状态标识更新为当前状态信息对应的状态标识。当前状态信息可包括:执行、异常和结束等,对应的状态标识可分别表示为:RUNNING、RASING_EXCEPT以及COMPLETE。作业任务2向状态更新服务模块12发送状态更新请求以及作业任务2的当前状态信息,具体可以通过作业任务2调用状态更新服务模块12实现。
需要说明的是,对作业任务2的状态更新可实时进行,也可以在作业任务2执行过程中的重要数据处理关键点进行。
当作业任务2存在异常23时,作业任务2向异常处理服务模块13发送任务异常请求,异常处理服务模块13接收任务异常请求,并根据任务异常请求,对作业任务存在的异常进行处理。作业任务2向异常处理服务模块13发送任务异常请求,具体可以通过作业任务2调用异常处理服务模块13来完成。
需要说明的是,由于作业任务在执行过程中,因各种原因导致作业任务执行失败,触发作业任务异常。其中异常的触发有多种因素,但整体可划分为两种类型的异常,一种为内部异常,一种为用户自定义异常。内部异常是作业任务在执行期间返回到程序块的ORACLE错误或由程序代码的某操作引起的错误,如除数为零或内存溢出的情况。用户自定义异常是由开发者显示定义,在程序块中传递信息以控制对于应用的错误处理。
在作业任务2结束24时,作业任务2向结束注销服务模块14发送任务结束请求,结束注销服务模块14接收作业任务发送的任务结束请求,并基于任务结束请求,结束作业任务。作业任务2向结束注销服务模块14发送任务结束请求,具体可以通过作业任务2调用结束注销服务模块14来完成。
作业任务结束是指作业任务对数据进行清洗、加工,完成用户需要进行的作业操作。
本发明实施例提供的ORACLE数据库任务作业管理调度系统包括:任务调度管理中心,任务调度管理中心包括启动注册服务模块、状态更新服务模块、异常处理服务模块以及结束注销服务模块。完全基于ORACLE数据库,不依赖于Windows或Linux操作系统,不需要使用操作系统的Shell脚本命令,不使用第三方软件或插件,不需要对现有的任务调度进行大规模的调整,可实现统一对作业任务的整个生命周期进行管理,不仅管理作业任务的启动、结束,还特别对执行状态、作业异常进行管理,能够实时有效、准确的跟踪和监控业务全流程性能。
在上述实施例的基础上,本发明实施例中采用ORACLE数据库保存任务调度信息,功能稳定可靠,同操作系统级任务调度相比,作业任务管理效率高,对已有的ORACLE数据库的存储过程代码易于扩展。
在上述实施例的基础上,本发明实施例中提供的ORACLE数据库任务作业管理调度系统中,所述任务调度管理中心还包括:查询服务模块;
所述查询服务模块用于在所述作业任务启动后接收所述作业任务发送的前置条件查询请求,并基于所述前置条件查询请求,确定所述作业任务的前置条件;
所述查询服务模块还用于将所述前置条件返回至所述作业任务,若所述作业任务启动后所述前置条件成立,则所述作业任务继续执行,否则确定所述作业任务存在异常。
具体地,由于在实际生产中,作业任务调度比较复杂,常常需要将复杂的数据处理进行分阶段、分范围拆分,数据库任务的执行依赖于前一任务调度,无法处理复杂的生产环境,易操作性差。因此本发明实施例中提供的ORACLE数据库任务作业管理调度系统中引入查询服务模块。如图3所示,查询服务模块15的作用是确定作业任务得以执行的条件是否满足,即作业任务的前置条件是否成立,成立则作业任务继续执行,不成立则说明作业任务存在异常。相应地,作业任务2还包括预检验阶段25,在作业任务2的启动阶段21和持续执行过程22之间,预检验阶段25对应与任务调度管理中心中的查询服务模块15。例如作业任务2的前置条件是作业任务A结束,但实际在作业任务2启动后作业任务A并没有结束,则说明作业任务2的前置条件不成立,即说明作业任务2存在异常。又例如:复杂的作业任务为了并行处理数据,缩短数据清洗、加工时间,往往对作业任务进行拆分,充分发挥数据库的性能。作业任务2的前一任务即为一复杂的作业任务,具体可拆分为B、C作业任务,只有B、C作业任务全部完成,才可以进行作业任务2的数据处理,B、C单独完成或都未完成不够进行作业任务2的数据处理,在此情况下可以将作业任务2确定为用户自定义异常。
在作业任务2启动后,作业任务2向查询服务模块15发送前置条件查询请求,查询服务模块15接收前置条件查询请求,并基于前置条件查询请求,确定作业任务2的前置条件;查询服务模块15将确定的前置条件返回至作业任务2,若作业任务2启动后前置条件成立,则作业任务2继续执行,否则确定作业任务存在异常。作业任务2向查询服务模块15发送前置条件查询请求,具体可以通过作业任务2调用查询服务模块15来完成。前置条件查询请求具体可包括:作业任务2的名称或者作业任务2的ID等。
确定作业任务2存在异常后,则作业任务2向异常处理服务模块13发送任务异常请求,异常处理服务模块13接收任务异常请求,并根据任务异常请求,对作业任务存在的异常进行处理。
本发明实施例中提供的ORACLE数据库任务作业管理调度系统,引入查询服务模块,通过作业任务之间的依赖关系确定作业任务是否存在异常以及能否继续执行,进而解决复杂作业任务管理问题。在复杂的分步骤执行的任务列中,使用监督机制确保任务按照设计逻辑执行。
在上述实施例的基础上,本发明实施例中提供的ORACLE数据库任务作业管理调度系统中,所述任务调度管理中心还包括:Redo服务模块;
所述Redo服务模块用于当所述作业任务存在异常时根据所述任务异常请求,确定所述作业任务的再次执行时间。
具体地,在实际生产过程中,作业任务的处理往往依赖源数据,因为系统交互成本、效率、技术原因,系统间的源数据通常通过接口进行传递,这种情况很常见,接口的增加影响了系统的确定性,普通的定时任务不能够快速的处理数据,例如:接口数据每天同步一次,但往往时间不固定,如果定时任务过早,作业任务就会错过数据内容的处理,如果定时任务过晚,就不能及时处理处理接口数据,导致数据内容的延时,效率较低。任务重复执行间隔时间无法管控,在任务调度出错时必须人工干预恢复。
为此,如图4所示,本发明实施例中引入Redo服务模块16,当作业任务存在异常时,作业任务2向Redo服务模块发送任务异常请求,Redo服务模块16根据任务异常请求,确定作业任务2的再次执行时间。Redo服务模块16可以根据用户设置在指定时间内对作业任务2进行重启,向作业任务2发送Redo服务重启请求。
本发明实施例中提供的ORACLE数据库任务作业管理调度系统,通过Redo服务模块确定作业任务异常重启时间,减少了人工干预,在系统发生异常时或数据未准备完毕时,可以自动进行重启或自动延迟执行,提高了生产效率。
由于现有的任务作业管理调度方法缺少日志管理,任务队列中出现错误,无法定位到具体的语句,调试周期长,体验较差,因此在上述实施例的基础上,本发明实施例中提供的ORACLE数据库任务作业管理调度系统,所述任务调度管理中心还包括:日志记录模块;
所述日志记录模块用于汇总记录所述作业任务的启动时刻、结束时刻、执行持续时长以及在所述调度时段内的状态信息。
具体地,本发明实施例中日志记录模块实现日志记录功能,记录作业任务的执行数据,包括启动时间、结束时间、执行持续时长等信息;负责协调记录作业任务调度时段内的状态记录,通过引入日志记录模块,解决了作业任务无日志问题,实现统一对任务生命周期中各阶段日志进行记录,进而实现快速诊断和故障定位。
本发明实施例中通过执行监督功能,保存记录系统执行的情况,特别是在出现异常错误时,能够定位到具体的错误命令,解决了任务执行过程中调试难,错误不易发现的问题。
在上述实施例的基础上,本发明实施例中提供的ORACLE数据库任务作业管理调度系统中,所述启动注册服务模块具体用于:
接收所述作业任务发送的任务注册请求,根据所述任务注册请求对所述作业任务进行注册;
根据所述任务注册请求获取所述调度时段、所述作业任务的名称以及ID,并基于所述作业任务的名称以及ID确定所述作业任务的对象标识符。
具体地,本发明实施例中,首先接收作业任务发送的任务注册请求,然后根据任务注册请求对作业任务进行注册。另一方面,根据任务注册请求获取调度时段、作业任务的名称以及ID,并基于作业任务的名称以及ID确定作业任务的对象标识符。
在上述实施例的基础上,如图5所示,本发明实施例中提供了一种基于上述实施例中所述的ORACLE数据库任务作业管理调度系统实现的调度方法,包括:
S51,在作业任务启动时,调用所述启动注册服务模块,所述启动注册服务模块根据接收到的所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配启动状态标识;
S52,在所述作业任务执行过程中,调用所述状态更新服务模块,所述状态更新服务模块根据接收到的所述状态更新请求以及所述当前状态信息,将所述启动状态标识更新为所述当前状态信息对应的状态标识;
S53,当所述作业任务存在异常时,调用异常处理服务模块,所述异常处理服务模块根据接收到的所述任务异常请求,对所述作业任务存在的异常进行处理;
S54,在所述作业任务结束时,调用所述结束注销服务模块,所述结束注销服务模块基于接收到的所述任务结束请求,结束所述作业任务。
具体地,本发明实施例中提供的调度方法,各步骤实现的处理流程与上述系统类实施例中各模块的处理流程是一一对应的。本发明实施例中在此不再赘述。
本发明实施例的执行主体为任务调度管理中心,执行动作的触发主体为作业任务,通过作业任务在不同阶段调用任务调度管理中心中的不同模块实现任务调度管理中心对作业任务的调度管理。
相应地,作业任务在不同阶段调用任务调度管理中心中的不同模块时,需要在发送请求时,在各请求中均加入调用者账号名称。
本发明实施例中提供的ORACLE数据库任务作业管理调度方法,通过调用ORACLE数据库任务作业管理调度系统中的各模块实现,完全基于ORACLE数据库,不依赖于Windows或Linux操作系统,不需要使用操作系统的Shell脚本命令,不使用第三方软件或插件,不需要对现有的任务调度进行大规模的调整,可实现统一对作业任务的整个生命周期进行管理,不仅管理作业任务的启动、结束,还特别对执行状态、作业异常进行管理,能够实时有效、准确的跟踪和监控业务全流程性能。
在上述实施例的基础上,本发明实施例中提供的调度方法中,所述ORACLE数据库任务作业管理调度系统中的所述任务调度管理中心还包括:查询服务模块;相应地,所述调度方法还包括:
在所述作业任务启动后,调用所述查询服务模块,所述查询服务模块接收所述作业任务发送的前置条件查询请求,并基于接收到的所述前置条件查询请求,确定所述作业任务的前置条件;
所述查询服务模块将所述前置条件返回至所述作业任务,若所述作业任务启动后所述前置条件成立,则所述作业任务继续执行,否则所述作业任务调用所述异常处理服务模块。
在上述实施例的基础上,本发明实施例中提供的调度方法中,所述ORACLE数据库任务作业管理调度系统中的所述任务调度管理中心还包括:Redo服务模块;相应地,所述调度方法还包括:
当所述作业任务存在异常时,根据所述任务异常请求,确定所述作业任务的再次执行时间。
在上述实施例的基础上,本发明实施例中提供的调度方法还包括:
汇总记录所述作业任务的启动时刻、结束时刻、执行持续时长以及在所述调度时段内的状态信息。
在上述实施例的基础上,如图6所示,为本发明实施例提供的电子设备的结构示意图,电子设备包括:处理器(processor)601、存储器(memory)602、通信接口(Communications Interface)603和总线604;其中,
所述处理器601、存储器602、通信接口603通过总线604完成相互间的通信。所述存储器602存储有可被所述处理器601执行的程序指令,处理器601用于调用存储器602中的程序指令,以执行上述各方法实施例所提供的方法,例如包括:S51,在作业任务启动时,调用所述启动注册服务模块,所述启动注册服务模块根据接收到的所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配启动状态标识;S52,在所述作业任务执行过程中,调用所述状态更新服务模块,所述状态更新服务模块根据接收到的所述状态更新请求以及所述当前状态信息,将所述启动状态标识更新为所述当前状态信息对应的状态标识;S53,当所述作业任务存在异常时,调用异常处理服务模块,所述异常处理服务模块根据接收到的所述任务异常请求,对所述作业任务存在的异常进行处理;S54,在所述作业任务结束时,调用所述结束注销服务模块,所述结束注销服务模块基于接收到的所述任务结束请求,结束所述作业任务。
存储器602中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
在上述实施例的基础上,本发明实施例提供了一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行上述各方法实施例所提供的方法,例如包括:S51,在作业任务启动时,调用所述启动注册服务模块,所述启动注册服务模块根据接收到的所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配启动状态标识;S52,在所述作业任务执行过程中,调用所述状态更新服务模块,所述状态更新服务模块根据接收到的所述状态更新请求以及所述当前状态信息,将所述启动状态标识更新为所述当前状态信息对应的状态标识;S53,当所述作业任务存在异常时,调用异常处理服务模块,所述异常处理服务模块根据接收到的所述任务异常请求,对所述作业任务存在的异常进行处理;S54,在所述作业任务结束时,调用所述结束注销服务模块,所述结束注销服务模块基于接收到的所述任务结束请求,结束所述作业任务。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种ORACLE数据库任务作业管理调度系统,其特征在于,包括:任务调度管理中心,所述任务调度管理中心包括启动注册服务模块、状态更新服务模块、异常处理服务模块以及结束注销服务模块;
所述启动注册服务模块用于在作业任务启动时接收所述作业任务发送的任务注册请求,根据所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配状态标识;
所述状态更新服务模块用于在所述作业任务执行过程中接收所述作业任务发送的状态更新请求以及当前状态信息,并根据所述状态更新请求以及所述当前状态信息,更新所述状态标识;
所述异常处理服务模块用于当所述作业任务存在异常时接收所述作业任务发送的任务异常请求,并根据所述任务异常请求,对所述作业任务存在的异常进行处理;
所述结束注销服务模块用于在所述作业任务结束时接收所述作业任务发送的任务结束请求,并基于所述任务结束请求,结束所述作业任务。
2.根据权利要求1所述的ORACLE数据库任务作业管理调度系统,其特征在于,所述任务调度管理中心还包括:查询服务模块;
所述查询服务模块用于在所述作业任务启动后接收所述作业任务发送的前置条件查询请求,并基于所述前置条件查询请求,确定所述作业任务的前置条件;
所述查询服务模块还用于将所述前置条件返回至所述作业任务,若所述作业任务启动后所述前置条件成立,则所述作业任务继续执行,否则确定所述作业任务存在异常。
3.根据权利要求1所述的ORACLE数据库任务作业管理调度系统,其特征在于,所述任务调度管理中心还包括:Redo服务模块;
所述Redo服务模块用于当所述作业任务存在异常时根据所述任务异常请求,确定所述作业任务的再次执行时间。
4.根据权利要求1所述的ORACLE数据库任务作业管理调度系统,其特征在于,所述任务调度管理中心还包括:日志记录模块;
所述日志记录模块用于汇总记录所述作业任务的启动时刻、结束时刻、执行持续时长以及在所述调度时段内的状态信息。
5.根据权利要求1-4中任一项所述的ORACLE数据库任务作业管理调度系统,其特征在于,所述启动注册服务模块具体用于:
接收所述作业任务发送的任务注册请求,根据所述任务注册请求对所述作业任务进行注册;
根据所述任务注册请求获取所述调度时段、所述作业任务的名称以及ID,并基于所述作业任务的名称以及ID确定所述作业任务的对象标识符。
6.一种基于权利要求1所述的ORACLE数据库任务作业管理调度系统实现的调度方法,其特征在于,包括:
在作业任务启动时,调用所述启动注册服务模块,所述启动注册服务模块根据接收到的所述任务注册请求对所述作业任务进行注册,并确定所述作业任务的对象标识符和调度时段,为所述作业任务分配状态标识;
在所述作业任务执行过程中,调用所述状态更新服务模块,所述状态更新服务模块根据接收到的所述状态更新请求以及所述当前状态信息,更新所述状态标识;
当所述作业任务存在异常时,调用异常处理服务模块,所述异常处理服务模块根据接收到的所述任务异常请求,对所述作业任务存在的异常进行处理;
在所述作业任务结束时,调用所述结束注销服务模块,所述结束注销服务模块基于接收到的所述任务结束请求,结束所述作业任务。
7.根据权利要求6所述的调度方法,其特征在于,所述ORACLE数据库任务作业管理调度系统中的所述任务调度管理中心还包括:查询服务模块;相应地,所述调度方法还包括:
在所述作业任务启动后,调用所述查询服务模块,所述查询服务模块接收所述作业任务发送的前置条件查询请求,并基于接收到的所述前置条件查询请求,确定所述作业任务的前置条件;
所述查询服务模块将所述前置条件返回至所述作业任务,若所述作业任务启动后所述前置条件成立,则所述作业任务继续执行,否则所述作业任务调用所述异常处理服务模块。
8.根据权利要求6所述的调度方法,其特征在于,所述ORACLE数据库任务作业管理调度系统中的所述任务调度管理中心还包括:Redo服务模块;相应地,所述调度方法还包括:
当所述作业任务存在异常时,根据所述任务异常请求,确定所述作业任务的再次执行时间。
9.一种电子设备,其特征在于,包括:
至少一个处理器、至少一个存储器、通信接口和总线;其中,
所述处理器、存储器、通信接口通过所述总线完成相互间的通信;
所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述程序指令,以执行如权利要求6-8中任一项所述的调度方法。
10.一种非暂态计算机可读存储介质,其特征在于,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行如权利要求6-8中任一项所述的调度方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811544029.0A CN111324426A (zh) | 2018-12-17 | 2018-12-17 | Oracle数据库任务作业管理调度系统及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811544029.0A CN111324426A (zh) | 2018-12-17 | 2018-12-17 | Oracle数据库任务作业管理调度系统及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111324426A true CN111324426A (zh) | 2020-06-23 |
Family
ID=71166688
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811544029.0A Pending CN111324426A (zh) | 2018-12-17 | 2018-12-17 | Oracle数据库任务作业管理调度系统及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111324426A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112668997A (zh) * | 2020-12-22 | 2021-04-16 | 中国农业银行股份有限公司 | 一种作业提交及监控系统 |
CN113194096A (zh) * | 2021-04-30 | 2021-07-30 | 焦点科技股份有限公司 | 一种基于分布式架构的任务调度实时追踪方法及系统 |
CN113656424A (zh) * | 2021-08-20 | 2021-11-16 | 山东浪潮通软信息科技有限公司 | 数据表冗余存储的关联数据处理方法、系统、设备及介质 |
CN115061736A (zh) * | 2022-05-19 | 2022-09-16 | 北京控制工程研究所 | 一种基于服务注册机制的动态任务管理方法及系统 |
CN115062025A (zh) * | 2022-06-29 | 2022-09-16 | 广州高专资讯科技有限公司 | 一种业务报表的发送方法、装置、设备及存储介质 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103324539A (zh) * | 2013-06-24 | 2013-09-25 | 浪潮电子信息产业股份有限公司 | 一种作业调度管理系统及方法 |
CN103544060A (zh) * | 2013-10-25 | 2014-01-29 | 珠海许继芝电网自动化有限公司 | 一种基于webservice的服务调度系统及方法 |
CN103838621A (zh) * | 2012-11-27 | 2014-06-04 | 中国电信股份有限公司 | 用于调度例行作业的方法和系统、调度节点 |
CN105354083A (zh) * | 2015-09-30 | 2016-02-24 | 北京京东尚科信息技术有限公司 | 一种检查调度任务前置条件的方法及装置 |
US20160335124A1 (en) * | 2015-05-14 | 2016-11-17 | Atlassian Pty Ltd | Systems and Methods for Task Scheduling |
CN106156939A (zh) * | 2015-04-27 | 2016-11-23 | 上海宝信软件股份有限公司 | 基于作业流的分布式调度系统及应用方法 |
CN106874090A (zh) * | 2017-01-23 | 2017-06-20 | 北京思特奇信息技术股份有限公司 | 基于云系统的作业调度方法和系统 |
CN107818112A (zh) * | 2016-09-13 | 2018-03-20 | 腾讯科技(深圳)有限公司 | 一种大数据分析作业系统及任务提交方法 |
CN108804096A (zh) * | 2017-05-05 | 2018-11-13 | 中思博安科技(北京)有限公司 | 一种基于智能合约的任务调度执行方法和装置 |
-
2018
- 2018-12-17 CN CN201811544029.0A patent/CN111324426A/zh active Pending
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103838621A (zh) * | 2012-11-27 | 2014-06-04 | 中国电信股份有限公司 | 用于调度例行作业的方法和系统、调度节点 |
CN103324539A (zh) * | 2013-06-24 | 2013-09-25 | 浪潮电子信息产业股份有限公司 | 一种作业调度管理系统及方法 |
CN103544060A (zh) * | 2013-10-25 | 2014-01-29 | 珠海许继芝电网自动化有限公司 | 一种基于webservice的服务调度系统及方法 |
CN106156939A (zh) * | 2015-04-27 | 2016-11-23 | 上海宝信软件股份有限公司 | 基于作业流的分布式调度系统及应用方法 |
US20160335124A1 (en) * | 2015-05-14 | 2016-11-17 | Atlassian Pty Ltd | Systems and Methods for Task Scheduling |
CN105354083A (zh) * | 2015-09-30 | 2016-02-24 | 北京京东尚科信息技术有限公司 | 一种检查调度任务前置条件的方法及装置 |
CN107818112A (zh) * | 2016-09-13 | 2018-03-20 | 腾讯科技(深圳)有限公司 | 一种大数据分析作业系统及任务提交方法 |
CN106874090A (zh) * | 2017-01-23 | 2017-06-20 | 北京思特奇信息技术股份有限公司 | 基于云系统的作业调度方法和系统 |
CN108804096A (zh) * | 2017-05-05 | 2018-11-13 | 中思博安科技(北京)有限公司 | 一种基于智能合约的任务调度执行方法和装置 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112668997A (zh) * | 2020-12-22 | 2021-04-16 | 中国农业银行股份有限公司 | 一种作业提交及监控系统 |
CN112668997B (zh) * | 2020-12-22 | 2024-07-12 | 中国农业银行股份有限公司 | 一种作业提交及监控系统 |
CN113194096A (zh) * | 2021-04-30 | 2021-07-30 | 焦点科技股份有限公司 | 一种基于分布式架构的任务调度实时追踪方法及系统 |
CN113194096B (zh) * | 2021-04-30 | 2022-03-08 | 焦点科技股份有限公司 | 一种基于分布式架构的任务调度实时追踪方法及系统 |
CN113656424A (zh) * | 2021-08-20 | 2021-11-16 | 山东浪潮通软信息科技有限公司 | 数据表冗余存储的关联数据处理方法、系统、设备及介质 |
CN113656424B (zh) * | 2021-08-20 | 2024-11-01 | 浪潮通用软件有限公司 | 数据表冗余存储的关联数据处理方法、系统、设备及介质 |
CN115061736A (zh) * | 2022-05-19 | 2022-09-16 | 北京控制工程研究所 | 一种基于服务注册机制的动态任务管理方法及系统 |
CN115062025A (zh) * | 2022-06-29 | 2022-09-16 | 广州高专资讯科技有限公司 | 一种业务报表的发送方法、装置、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111324426A (zh) | Oracle数据库任务作业管理调度系统及方法 | |
US8938421B2 (en) | Method and a system for synchronizing data | |
CN107832230B (zh) | 基于数据调优的测试方法、设备以及系统 | |
CN111736969B (zh) | 分布式作业调度方法及装置 | |
CN110647387B (zh) | 一种教育云大数据任务调度方法与系统 | |
CN110109741B (zh) | 循环任务的管理方法、装置、电子设备及存储介质 | |
CN104503880A (zh) | 一种MySQL数据库监控选项脚本的实现方法及装置 | |
US20120215583A1 (en) | System and method for managing real-time batch workflows | |
CN107784400B (zh) | 一种业务模型的执行方法和装置 | |
CN102663543A (zh) | 一种用于企业数据统一平台的调度系统 | |
CN111026602A (zh) | 一种云平台的健康巡检调度管理方法、装置及电子设备 | |
CN109144701A (zh) | 一种任务流管理方法、装置、设备及系统 | |
CN109787858A (zh) | 一种批量发布服务的方法及终端 | |
CN110780981B (zh) | 一种hadoop大数据平台的任务调度管理系统及方法 | |
CN112817710A (zh) | 定时任务处理方法、系统、计算机设备及计算机存储介质 | |
CN112130849B (zh) | 代码自动生成方法及装置 | |
CN111435356B (zh) | 数据特征提取方法、装置、计算机设备以及存储介质 | |
CN111522680A (zh) | 一种自动修复异常任务节点的方法、装置及设备 | |
CN114791900A (zh) | 基于Operator的Redis运维方法、装置、系统及存储介质 | |
CN114443433A (zh) | 一种云计算平台实现分布式自动处理告警的方法及系统 | |
CN109542598B (zh) | 定时任务管理方法及装置 | |
CA3102814A1 (en) | System and method for data ingestion and workflow generation | |
CN111552545A (zh) | 任务的执行处理方法、装置、电子设备及存储介质 | |
CN112749156A (zh) | 数据处理方法、数据库管理系统和数据处理设备 | |
CN104199930A (zh) | 数据采集及处理的系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |