CN114996081A - 批量作业进度监控方法、装置、电子设备及存储介质 - Google Patents
批量作业进度监控方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN114996081A CN114996081A CN202210474214.7A CN202210474214A CN114996081A CN 114996081 A CN114996081 A CN 114996081A CN 202210474214 A CN202210474214 A CN 202210474214A CN 114996081 A CN114996081 A CN 114996081A
- Authority
- CN
- China
- Prior art keywords
- batch
- batch job
- progress
- job
- monitoring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3017—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is implementing multitasking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Quality & Reliability (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Physics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供一种批量作业进度监控方法、装置、电子设备及存储介质,该方法包括:获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成批量作业监控需求对应的批量作业计划,将批量作业计划存储在数据库中;监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,由目标服务器根据各第一批量作业的执行进度,对数据库中的批量作业计划中的第二批量作业的执行进度进行更新;将更新后的批量作业计划同步至客户端,由客户端对更新后的批量作业计划中各第二批量作业的执行进度进行显示。本发明实现快速准确地对多种TWS环境下的作业进度进行监控。
Description
技术领域
本发明涉及计算机系统技术领域,尤其涉及一种批量作业进度监控方法、装置、电子设备及存储介质。
背景技术
由于企业级目标服务器IBM大型主机具有高稳定性,高效处理能力和高安全性的优势,当前各大银行的核心银行系统都是部署在具有管理套装操作系统的IBM平台上,如z/OS操作系统。其中,IBM推出的TWS(Tivoli Workload Scheduler,批量集中调度工具)具有安全性、高可用性、稳定性的特点。在现有的银行功能测试环境中主要包含T1、T2、T3、T4、T5、321这6个测试环境,每个测试环境的核心批量至少包含5套批量,每套批量对应1个TWS工具运行批量流程,每套批量拥有约18万个批量作业。
通常,企业级服务系统中至少布置23个TWS工具,若通过人工登陆终端对每一TWS环境下的批量作业进行一一监控,则需要在多个TWS实例中切换查询,不仅难以同时对多套TWS环境的作业进度进行监控,而且需要花费大量时间对每一TWS环境下的批量作业进行逐个检查,存在监控延迟、监控效率低和监控难度大等问题。
发明内容
本发明提供一种批量作业进度监控方法、装置、电子设备及存储介质,用以解决现有技术中人工对TWS环境下的批量作业进行监控,存在监控延迟、监控效率低和监控难度大的缺陷,实现快速准确地对网页端作业进度进行监控。
本发明提供一种批量作业进度监控方法,包括:
获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;
监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;
将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
根据本发明提供的一种批量作业进度监控方法,所述监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,包括:
基于作业控制语言JCL,定时采集所述ZOS中各逻辑分区内各TWS环境下的各第一批量作业的执行进度,并将各TWS环境下的各第一批量作业的执行进度写入目标文件中;
从所述目标文件中,筛选出执行时间在所述当前周期内的目标批量作业,将各目标批量作业的执行进度发送至所述目标服务器。
根据本发明提供的一种批量作业进度监控方法,所述将各目标批量作业的执行进度发送至所述目标服务器,包括:
根据各目标批量作业的执行进度,生成各目标批量作业的执行信息文件;
对所有目标批量作业的执行信息文件进行汇总,得到汇总文件;
将所述汇总文件发送至所述目标服务器的目标目录下。
根据本发明提供的一种批量作业进度监控方法,所述目标服务器用于:
获取所述ZOS中存储的各第一批量作业的属性参数;
根据所述属性参数,将各第一批量作业与各第二批量作业进行匹配;
根据各第一批量作业的执行进度,对所述数据库中与各第一批量作业相匹配的第二批量作业的执行进度进行更新。
根据本发明提供的一种批量作业进度监控方法,所述生成所述批量作业监控需求对应的批量作业计划,包括:
从所述批量作业监控需求中解析出各第二批量作业的标识;
根据各第二批量作业的标识,生成所述批量作业计划。
根据本发明提供的一种批量作业进度监控方法,所述显示信息包括所述更新后的批量作业计划对应的日期、所述更新后的批量作业计划中各TWS环境下的批量作业完成程度、批量作业总数量、批量作业完成数量,以及各批量作业的标识和执行进度。
根据本发明提供的一种批量作业进度监控方法,还包括:
监控所述目标服务器的运行状态和所述ZOS的运行状态;
基于所述客户端,显示所述目标服务器的运行状态和所述ZOS的运行状态;
在所述目标服务器的运行状态和/或所述ZOS的运行状态出现异常的情况下,生成提示信息,并基于所述客户端显示所述提示信息。
本发明还提供一种批量作业进度监控装置,包括:
生成模块,用于:获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;
监控模块,用于:监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;
显示模块,用于:将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述批量作业进度监控方法。
本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述批量作业进度监控方法。
本发明还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述批量作业进度监控方法。
本发明提供的批量作业进度监控方法、装置、电子设备及存储介质,通过监控器实时采集各批量集中调度工具TWS环境下的批量作业监控需求,生成相应的批量作业计划;同时在ZOS中监控各TWS环境下运行的各第一批量作业的执行进度,并根据各第一批量作业的执行进度,对批量作业计划中的第二批量作业的执行进度进行实时更新后显示在客户端,以供用户实时便捷地查看批量作业进度,不仅可以实现同时对多个TWS环境中的多批量作业的执行进度进行实时准确地监控,可扩展性强,而且可以避免人工监控带来的监控延迟和监控效率低的问题,有效提高批量作业监控的效率和降低人力成本。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的批量作业进度监控方法的流程示意图之一;
图2是本发明提供的批量作业进度监控方法的流程示意图之二;
图3是本发明提供的批量作业进度监控方法的流程示意图之三;
图4是本发明提供的批量作业进度监控方法的流程示意图之四;
图5是本发明提供的批量作业进度监控方法的流程示意图之五;
图6是本发明提供的批量作业进度监控方法的流程示意图之六;
图7是本发明提供的批量作业进度监控装置的结构示意图之一;
图8是本发明提供的批量作业进度监控装置的结构示意图之二;
图9是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
现有技术中通过人工方式监控批量作业的执行流程和执行进度,需要在多个TWS实例中切换查询,存在效率低下、人工延迟风险等问题,且难以总体把控所有TWS环境下的批量作业的运行进度。
针对上述问题,本实施例通过在线上对批量作业的进度进行实时监控,以在网页端实时监控各套TWS运行的批量作业的进度情况,可以减少人工运维成本,可以快速、便捷地监控大量TWS环境下运行的批量作业的进度,从而及时发现和处理批量作业的运行问题,有效提高监控效率,把握批量作业的整体运行情况。
下面结合图1描述本申请的批量作业进度监控方法,该方法包括如下步骤:
步骤101,获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;
需要说明的是本实施例中的批量作业进度监控方法可以应用于银行系统等其他企业级系统,本实施例对此不做具体地限定。
本实施例中的执行主体可以是内置于或独立于ZOS设置的监控器;该监控器可以是单一服务器、服务器集群或者云服务器等,本实施例对此不做具体地限定。
其中,可以将一天或半天划分为一个周期,具体根据实际需求对周期进行划分。
管理套装操作系统(简称为ZOS)是IBM为其大型机z/Series系列专门推出的64位操作系统,是IBM目前最新的大型主机操作系统。
IBM大型机,简称大机或主机,其为IBM公司生产发布的有专用操作系统和应用软件的大型计算机。
批量处理是数据加工应用的重要形式和内容,批量集中调度工具(简称TWS)是IBM为其大型机z/Series开发的主机平台作业调度工具。
批量作业计划为根据待监控批量作业制定的监控计划。
需要说明的是,批量作业计划可以根据实际测试环境的变化动态调整。
如图2所示,监控器内置EXCEL的VBA(Visual Basic for Applications,宏语言)工具,可以采用EXCEL的VBA工具实时抓取当前周期各企业总部发送的各TWS环境下的批量监控通知,并采用EXCEL的VBA工具对各TWS环境下的批量监控通知进行分析,从批量监控通知中解析和筛选出各TWS环境下的当前周期的批量作业监控需求。其中,EXCEL中预先配置有批量作业的属性信息。
并根据当前周期的批量作业监控需求实时生成相应的批量作业计划。
其中,批量作业计划,可以是根据批量作业监控需求中各批量作业的属性信息生成的;属性信息包括名称或标识等,本实施例对此不做具体地限定。
在获取到批量作业计划后,可以将批量作业计划实时存储在数据库中。
其中,可以是将批量作业计划以数据表的形式进行存储或以文件的形式进行存储等,本实施例对此不做具体地限定。
数据库的类型包括但不限于结构化查询语言SQL数据库或关系数据库Oracle等。
步骤102,监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;
其中,目标服务器为可实时接收各TWS环境下运行的各第一批量作业的执行进度,且可对接收到的数据进行分析处理的服务器。
第一批量作业为各TWS环境下运行的批量作业;第二批量作业为批量作业计划中的待监控批量作业。
第一批量作业和第二批量作业中均包含多个作业。第一批量作业可以与第二批量作业相同或不同。
可选地,采用JCL(job control language,作业控制语言)和/或程序设计语言REXX实时抓取各TWS环境下的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器。
其中,各第一批量作业的执行进度可进行动态调整收集,以动态改变客户端中数据展示的方式。
第一批量作业的执行进度的发送方式,包括在监测到第一批量作业的执行进度后实时发送,也可以是对第一批量作业的执行进度进行汇总后定时发送,本实施例对此不做具体地限定。
其中,目标服务器在读取到各第一批量作业的执行进度之后,可以是先对各第一批量作业的执行进度进行分析处理后,再对数据库中的批量作业计划中的第二批量作业的执行进度进行更新;也可以是直接根据各第一批量作业的执行进度对数据库中的批量作业计划中的第二批量作业的执行进度进行更新,本实施例对此不做具体地限定。
其中,分析处理包括但不限于格式转换和数据过滤。
步骤103,将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
其中,客户端的WEB(World Wide Web,全球广域网)页面预先建立数据处理配置信息。
可选地,在对数据库中批量作业计划中的第二批量作业的执行进度进行更新后,可以将更新后的批量作业计划同步至客户端。以供客户端对批量作业的进度进行实时监控。
此外,在第二批量作业的执行进度发生异常时,也可以异常信息展示在客户端,以及时发现批量运行进度的异常,提早解决异常原因,增强系统运维质量。
其中,客户端可以采用数据读取语句,如“tableAll”语句,从数据库中读取更新后的批量作业计划。在读取到数据库中更新后的批量作业计划后,可以各种前端技术,如JQUERY、CHART.JS和BOOTSTRAP等前端技术,对批量作业计划中各第二批量作业的执行进度展示状态。
其中,展示方式包括图表和/或文字。
本实施例通过监控器实时采集各批量集中调度工具TWS环境下的批量作业监控需求,生成相应的批量作业计划;同时在ZOS中监控各TWS环境下运行的各第一批量作业的执行进度,并根据各第一批量作业的执行进度,对批量作业计划中的第二批量作业的执行进度进行实时更新后显示在客户端,以供用户实时便捷地查看批量作业进度,不仅可以实现同时对多个TWS环境中的多批量作业的执行进度进行实时准确地监控,可扩展性强,而且可以避免人工监控带来的监控延迟和监控效率低的问题,有效提高批量作业监控的效率和降低人力成本。
在上述实施例的基础上,本实施例中所述监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,包括:基于作业控制语言JCL,定时采集所述ZOS中各逻辑分区内各TWS环境下的各第一批量作业的执行进度,并将各TWS环境下的各第一批量作业的执行进度写入目标文件中;从所述目标文件中,筛选出执行时间在所述当前周期内的目标批量作业,将各目标批量作业的执行进度发送至所述目标服务器。
其中,作业控制语言JCL是指用来实现对用户作业的组织和管理的各种控制命令或控制语句的有序集合。
如图3所示,由于TWS对象定义在ZOS的不同逻辑分区(简称,LPAR)上,每个LPAR需要提交一个JCL(Job Control Language,作业控制语言)实现本地LAPR上的TWS环境下的批量作业的作业信息的定时采集、筛选并发送功能。每定时休眠一段时间后,再重新执行采集、筛选和发送的流程,从而实现不同LPAR上的不同TWS环境下的批量作业的作业信息的周期性采集、筛选和发送功能。如可以采用“JKSLEEP2”语句实现REXX程序中的定时休眠功能。
可选地,首先通过调用REXX接口程序采集各TWS环境中不同任务调度器(简称AP)中各第一批量作业的执行进度,并将各TWS环境下的各第一批量作业的执行进度写入目标文件中。
其中,第一批量作业的执行进度中可以包含所有作业的执行进度,也可以是第一批量作业中关键步骤作业的执行进度。
然后,由于目标文件中可能包含历史周期的第一批量作业的执行进度,也可能包含当前周期的第一批量作业的执行进度;为了更精准地监测当前周期批量作业的进度,可以通过调用REXX程序对目标文件进行筛选处理,以将执行时间在当前周期的目标批量作业的执行进度筛选出来。
然后,可以是直接将当前周期的目标批量作业的执行进度发送至目标服务器;也可以是对当前周期的目标批量作业的执行进度进行汇总后,再发送至目标服务器,本实施例对此不做具体地限定。
本实施例通过定期休眠的方式对各TWS环境下的各第一批量作业的执行进度进行采集,筛选和发送,可实现对多种TWS环境下的当前周期多种第一批量作业的执行进度进行并行和实时采集,进而实现总体监控各TWS环境下批量作业的流程进度。
在上述实施例的基础上,本实施例中所述将各目标批量作业的执行进度发送至所述目标服务器,包括:根据各目标批量作业的执行进度,生成各目标批量作业的执行信息文件;对所有目标批量作业的执行信息文件进行汇总,得到汇总文件;将所述汇总文件发送至所述目标服务器的目标目录下。
可选地,在获取到各目标批量作业的执行进度后,可以先调用REXX程序生成各目标批量作业的执行信息文件;
然后,将所有目标批量作业的执行信息文件汇集成一个汇总文件,并将汇总文件定期发送到目标服务器的目标目录下,以供服务器定时扫描该目标目录,即可实时获取汇总文件中所有目标批量作业的执行进度。例如,采用“TWSP.CPU1.JOBLIB.JIANKONG(HEXINLJ)”语句将所有目标批量作业的执行信息文件汇集成一个汇总文件。
本实施例通过根据VBA获取的批量作业监控需求配置当前周期的批量作业计划,并从分散在不同ZOS平台上的TWS环境下运行的批量作业的作业信息汇总到一块,再通过独立的目标服务器对汇总文件数据加工和处理,以对批量作业计划中各批量作业的执行进度进行统一更新和展示,从而达到总体监控各TWS环境下批量流程进度的效果,有效提升对批量流程的总体运维监控能力。
在上述各实施例的基础上,本实例中所述目标服务器用于:获取所述ZOS中存储的各第一批量作业的属性参数;根据所述属性参数,将各第一批量作业与各第二批量作业进行匹配;根据各第一批量作业的执行进度,对所述数据库中与各第一批量作业相匹配的第二批量作业的执行进度进行更新。
其中,ZOS中预先配置有第一批量作业的属性参数,且可以动态的与各数据进行交互,根据实际配置的属性参数对数据进行处理。
可选地,为了避免ZOS和批量计划中的同一批量作业的相关信息表述不一致,使得数据更新出错,进而导致监控结果不准确的情况,需要先将ZOS和批量计划中的批量作业的相关信息进行统一表述,然后,再根据同一表述结果,对数据库进行更新。
如图4所示,读取ZOS中存储的各第一批量作业的属性参数,下文简称为ZOS参数。其中,属性参数中包含但不限于各批量作业的名称、标识和文字描述等。
例如,采用“LoadBankNoParam(@"\param\bankNO.txt")”语句获取ZOS端的属性参数。
同时,读取ZOS发送的各第一批量作业的执行进度。例如,采用“loadZosFtpData()”语句读取各第一批量作业的执行进度。
然后,可以直接根据各第一批量作业的属性参数和第二批量作业的属性参数进行对比,以获取数据库中与各第一批量作业相匹配的第二批量作业;也可以是根据第一批量作业的属性参数的定义规范,对第二批量作业的属性参数的格式进行转换后,再与第一批量作业进行匹配,得到数据库中与各第一批量作业相匹配的第二批量作业,本实施例对此不做具体地限定。
如图5所示,再根据各第一批量作业的执行进度,对数据库中与各第一批量作业相匹配的第二批量作业的执行进度进行更新,并将更新后的批量作业计划的执行状态显示在客户端。
例如,采用主函数“mainReflesh()”语句对数据库中与各第一批量作业相匹配的第二批量作业的执行进度进行更新。
其中,显示执行状态的方式,可以是在读取到更新后的批量作业计划的执行状态后,即对执行状态进行显示;
或者通过“showInformation(getParm())”语句读取目标服务器端的配置参数,根据目标服务器端的配置参数确定目标服务器对数据进行处理的周期,根据处理周期,周期性地将更新后的批量作业计划的执行状态发送至客户端,本实施例对此不做具体地限定。
本实施例中目标服务器通过实时获取ZOS中存储的各第一批量作业的属性参数,以根据各第一批量作业的属性参数,对ZOS和批量计划中的批量作业的相关信息进行统一表述,以对批量作业计划中的各第二批量作业的执行进度进行准确更新,提高监控结果的准确性。
在上述各实施例的基础上,本实施例中所述生成所述批量作业监控需求对应的批量作业计划,包括:从所述批量作业监控需求中解析出各第二批量作业的标识;根据各第二批量作业的标识,生成所述批量作业计划。
其中,每一批次的批量作业均具有唯一的标识。每一标识可标识批量作业的作业流程和监控需求等,本实施例对此不做具体地限定。
可选地,批量作业监控需求中携带有各第二批量作业的标识。通过对批量作业监控需求进行解析,即可获取各第二批量作业的标识,然后将各第二批量作业的标识汇总到文件中,即可得到批量作业计划。
本实施例通过对批量作业监控需求中各第二批量作业的标识进行汇总,即可快速准确地生成批量作业计划。
在上述各实施例的基础上,本实施例中所述显示信息包括所述更新后的批量作业计划对应的日期、所述更新后的批量作业计划中各TWS环境下的批量作业完成程度、批量作业总数量、批量作业完成数量,以及各批量作业的标识和执行进度。
其中,批量作业完成程度包括完成状态,如已完成或未完成,以及完成百分比等。
批量作业完成程度可以是以图表和/或文字的形式进行展示。例如,采用“ShowPLData("T1",this.GridView1)”语句对T1环境下的批量作业完成程度进行图表展示。
批量作业总数量为各TWS环境下所有批量作业的总数量;
批量作业完成数量为各TWS环境下执行进度为完成的批量作业的数量;
其中,客户端前端页面包括多个信息展示栏,如批量日期、批量总览和批量状态等,本实施例对此不作具体地限定。
其中,批量日期用于展示更新后的批量作业计划对应的日期,具体表示为“2022-03-12”;
批量总览用于展示各TWS环境下批量作业总数量和批量作业完成数量,具体表现形式为“批量总览:T1总数:1,完成数量:1;T4总数:12,完成数量:9;T5总数:53,完成数量:52”。
批量状态用于展示各TWS环境下的批量作业完成程度,以及各批量作业的标识和执行进度。
本实例通过监测各个TWS环境下的批量作业进度,并在客户端网页端以多种形式展示各个TWS环境下的批量作业进度,使得用户可以更加简单便捷、形象地监控各个TWS环境下的批量作业进度,以总体把控各个TWS环境的作业进度,提高用户体验感。
在上述各实施例的基础上,本实施例中还包括:监控所述目标服务器的运行状态和所述ZOS的运行状态;基于所述客户端,显示所述目标服务器的运行状态和所述ZOS的运行状态;在所述目标服务器的运行状态和/或所述ZOS的运行状态出现异常的情况下,生成提示信息,并基于所述客户端显示所述提示信息。
其中,运行状态正常运行状态和异常运行状态。
可选地,监控器还可以实时监控目标服务器和ZOS的运行状态;并在客户端实时显示目标服务器和所述ZOS的运行状态,便于客户实时查看。其中,可采用“judgeServerStatus()”语句,监控目标服务器的运行状态;可采用“monitorIbmFtp()”语句,监控ZOS的运行状态。
另外,在监控到目标服务器和/或所述ZOS的运行状态出现异常的情况下,可以生成提示信息,以提示用户目标服务器和/或ZOS的运行状态出现异常,便于用户对目标服务器和ZOS进行及时维护,确保对各批量作业的顺利监控。
图6为本发明实施例的整体流程示意图,主要步骤包括:首先在网页端启动程序调用后台VBA程序,根据当前周期批量作业监控需求生成批量作业计划后存入数据库,同时在主机端ZOS中定时扫描各TWS环境下运行的批量作业,收集特定的批量作业的作业信息并发送,经过目标服务器进行转换和筛选处理后,更新数据库中的批量作业计划;在客户端的WEB页面展示更新后的批量作业计划的批量运行进度状态。
具体分为三部分,第一部分是利用VBA抓取当前周期批量作业监控需求,分析生成批量作业计划;第二部分是在主机端利用JCL和REXX抓取各TWS环境下运行的批量作业的执行状态,并发送到目标服务器;第三部分是利用C#语言在目标服务器端处理数据,最后在客户端利用JQUERY、CHART.JS、BOOTSTRAP等前端技术展示批量作业计划中的批量作业执行状态。
由于测试环境核心银行系统批量的数量多、作业多,执行过程中难以总体监控各个环境下的批量作业进度;针对该问题,本实施例实现采集并汇集分散的TWS下的批量作业的作业信息,经过分析、筛选后统一展现批量作业进度,可以有效减少人工操作,快速便捷的查看所有环境批量的运行进度。
下面对本发明提供的批量作业进度监控装置进行描述,下文描述的批量作业进度监控装置与上文描述的批量作业进度监控方法可相互对应参照。
如图7所示,本实施例提供一种批量作业进度监控装置,该装置包括:生成模块701、监控模块702和显示模块703,其中:
生成模块701用于:获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;
可选地,根据当前周期的批量作业监控需求实时生成相应的批量作业计划。
其中,批量作业计划,可以是根据批量作业监控需求中各批量作业的属性信息生成的;属性信息包括名称或标识等,本实施例对此不做具体地限定。
在获取到批量作业计划后,可以将批量作业计划实时存储在数据库中。
其中,可以是将批量作业计划以数据表的形式进行存储或以文件的形式进行存储等,本实施例对此不做具体地限定。
监控模块702用于:监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;
可选地,可以采用JCL和/或程序设计语言REXX实时抓取各TWS环境下的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器。
其中,目标服务器在读取到各第一批量作业的执行进度之后,可以是先对各第一批量作业的执行进度进行分析处理后,再对数据库中的批量作业计划中的第二批量作业的执行进度进行更新;也可以是直接根据各第一批量作业的执行进度对数据库中的批量作业计划中的第二批量作业的执行进度进行更新,本实施例对此不做具体地限定。
显示模块703用于:将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
可选地,在对数据库中批量作业计划中的第二批量作业的执行进度进行更新后,可以将更新后的批量作业计划同步至客户端。以供客户端对批量作业的进度进行实时监控。
此外,在第二批量作业的执行进度发生异常时,也可以异常信息展示在客户端,以及时发现批量运行进度的异常,提早解决异常原因,增强系统运维质量。
本实施例通过监控器实时采集各批量集中调度工具TWS环境下的批量作业监控需求,生成相应的批量作业计划;同时在ZOS中监控各TWS环境下运行的各第一批量作业的执行进度,并根据各第一批量作业的执行进度,对批量作业计划中的第二批量作业的执行进度进行实时更新后显示在客户端,以供用户实时便捷地查看批量作业进度,不仅可以实现同时对多个TWS环境中的多批量作业的执行进度进行实时准确地监控,可扩展性强,而且可以避免人工监控带来的监控延迟和监控效率低的问题,有效提高批量作业监控的效率和降低人力成本。
在上述实施例的基础上,本实施例中监控模块,具体用于:基于作业控制语言JCL,定时采集所述ZOS中各逻辑分区内各TWS环境下的各第一批量作业的执行进度,并将各TWS环境下的各第一批量作业的执行进度写入目标文件中;从所述目标文件中,筛选出执行时间在所述当前周期内的目标批量作业,将各目标批量作业的执行进度发送至所述目标服务器。
在上述实施例的基础上,本实施例中监控模块,还用于:根据各目标批量作业的执行进度,生成各目标批量作业的执行信息文件;对所有目标批量作业的执行信息文件进行汇总,得到汇总文件;将所述汇总文件发送至所述目标服务器的目标目录下。
在上述各实施例的基础上,本实施例中所述目标服务器用于:获取所述ZOS中存储的各第一批量作业的属性参数;根据所述属性参数,将各第一批量作业与各第二批量作业进行匹配;根据各第一批量作业的执行进度,对所述数据库中与各第一批量作业相匹配的第二批量作业的执行进度进行更新。
在上述各实施例的基础上,本实施例中生成模块,具体用于:从所述批量作业监控需求中解析出各第二批量作业的标识;根据各第二批量作业的标识,生成所述批量作业计划。
在上述各实施例的基础上,本实施例中所述显示信息包括所述更新后的批量作业计划对应的日期、所述更新后的批量作业计划中各TWS环境下的批量作业完成程度、批量作业总数量、批量作业完成数量,以及各批量作业的标识和执行进度。
在上述各实施例的基础上,本实施例中生成模块,监控模块还用于:监控所述目标服务器的运行状态和所述ZOS的运行状态;基于所述客户端,显示所述目标服务器的运行状态和所述ZOS的运行状态;在所述目标服务器的运行状态和/或所述ZOS的运行状态出现异常的情况下,生成提示信息,并基于所述客户端显示所述提示信息。
如图8所示,批量作业进度监控装置还包括目标服务器801、主机端ZOS 802、数据库803和客户端804;
其中,主机端ZOS 802与目标服务器801通信,目标服务器801与数据库803通信,数据库803与客户端804通信;
主机端ZOS 802用于提供各TWS环境下的第一批量作业的执行进度;目标服务器801用于对第一批量作业的执行进度进行处理后更新数据库803中的批量作业计划;客户端804用于显示数据库803更新后的批量作业计划的批量作业进度。
图9示例了一种电子设备的实体结构示意图,如图9所示,该电子设备可以包括:处理器(processor)901、通信接口(CommunicationsInterface)902、存储器(memory)8903和通信总线904,其中,处理器901,通信接口902,存储器903通过通信总线904完成相互间的通信。处理器901可以调用存储器903中的逻辑指令,以执行批量作业进度监控方法,该方法包括:获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
此外,上述的存储器903中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,目标服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random AccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,计算机程序可存储在非暂态计算机可读存储介质上,所述计算机程序被处理器执行时,计算机能够执行上述各方法所提供的批量作业进度监控方法,该方法包括:获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各方法提供的批量作业进度监控方法,该方法包括:获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,目标服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种批量作业进度监控方法,其特征在于,包括:
获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;
监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;
将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
2.根据权利要求1所述的批量作业进度监控方法,其特征在于,所述监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,包括:
基于作业控制语言JCL,定时采集所述ZOS中各逻辑分区内各TWS环境下的各第一批量作业的执行进度,并将各TWS环境下的各第一批量作业的执行进度写入目标文件中;
从所述目标文件中,筛选出执行时间在所述当前周期内的目标批量作业,将各目标批量作业的执行进度发送至所述目标服务器。
3.根据权利要求2所述的批量作业进度监控方法,其特征在于,所述将各目标批量作业的执行进度发送至所述目标服务器,包括:
根据各目标批量作业的执行进度,生成各目标批量作业的执行信息文件;
对所有目标批量作业的执行信息文件进行汇总,得到汇总文件;
将所述汇总文件发送至所述目标服务器的目标目录下。
4.根据权利要求1-3任一所述的批量作业进度监控方法,其特征在于,所述目标服务器用于:
获取所述ZOS中存储的各第一批量作业的属性参数;
根据所述属性参数,将各第一批量作业与各第二批量作业进行匹配;
根据各第一批量作业的执行进度,对所述数据库中与各第一批量作业相匹配的第二批量作业的执行进度进行更新。
5.根据权利要求1-3任一所述的批量作业进度监控方法,其特征在于,所述生成所述批量作业监控需求对应的批量作业计划,包括:
从所述批量作业监控需求中解析出各第二批量作业的标识;
根据各第二批量作业的标识,生成所述批量作业计划。
6.根据权利要求1-3任一所述的批量作业进度监控方法,其特征在于,所述显示信息包括所述更新后的批量作业计划对应的日期、所述更新后的批量作业计划中各TWS环境下的批量作业完成程度、批量作业总数量、批量作业完成数量,以及各批量作业的标识和执行进度。
7.根据权利要求1-3任一所述的批量作业进度监控方法,其特征在于,还包括:
监控所述目标服务器的运行状态和所述ZOS的运行状态;
基于所述客户端,显示所述目标服务器的运行状态和所述ZOS的运行状态;
在所述目标服务器的运行状态和/或所述ZOS的运行状态出现异常的情况下,生成提示信息,并基于所述客户端显示所述提示信息。
8.一种批量作业进度监控装置,其特征在于,包括:
生成模块,用于:获取当前周期管理套装操作系统ZOS中各批量集中调度工具TWS环境下的批量作业监控需求,并生成所述批量作业监控需求对应的批量作业计划,将所述批量作业计划存储在数据库中;
监控模块,用于:监控各TWS环境下运行的各第一批量作业的执行进度,并将各第一批量作业的执行进度发送至目标服务器,以供所述目标服务器根据各第一批量作业的执行进度,对所述数据库中的批量作业计划中的第二批量作业的执行进度进行更新;
显示模块,用于:将所述数据库中更新后的批量作业计划同步至客户端,以供所述客户端根据所述更新后的批量作业计划中各第二批量作业的执行进度,获取所述更新后的批量作业计划的显示信息,并对所述显示信息进行显示。
9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任一项所述批量作业进度监控方法。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述批量作业进度监控方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210474214.7A CN114996081A (zh) | 2022-04-29 | 2022-04-29 | 批量作业进度监控方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210474214.7A CN114996081A (zh) | 2022-04-29 | 2022-04-29 | 批量作业进度监控方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114996081A true CN114996081A (zh) | 2022-09-02 |
Family
ID=83026091
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210474214.7A Pending CN114996081A (zh) | 2022-04-29 | 2022-04-29 | 批量作业进度监控方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114996081A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116126646A (zh) * | 2023-04-13 | 2023-05-16 | 紫金诚征信有限公司 | 一种确定批量数据执行进度的方法及装置 |
-
2022
- 2022-04-29 CN CN202210474214.7A patent/CN114996081A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116126646A (zh) * | 2023-04-13 | 2023-05-16 | 紫金诚征信有限公司 | 一种确定批量数据执行进度的方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109634728B (zh) | 作业调度方法、装置、终端设备及可读存储介质 | |
US8938421B2 (en) | Method and a system for synchronizing data | |
CN111125444A (zh) | 大数据任务调度管理方法、装置、设备及存储介质 | |
CN107239675A (zh) | 基于云平台的生物信息分析系统 | |
US11706084B2 (en) | Self-monitoring | |
CN111984390A (zh) | 任务调度方法、装置、设备及存储介质 | |
CN112286806A (zh) | 自动化测试方法、装置、存储介质及电子设备 | |
CN111026602A (zh) | 一种云平台的健康巡检调度管理方法、装置及电子设备 | |
CN110895488B (zh) | 任务调度方法及装置 | |
JP5989194B1 (ja) | テスト管理システムおよびプログラム | |
CN113760677A (zh) | 异常链路分析方法、装置、设备及存储介质 | |
CN112256783A (zh) | 数据导出方法、装置、电子设备及存储介质 | |
CN114996081A (zh) | 批量作业进度监控方法、装置、电子设备及存储介质 | |
CN112559525B (zh) | 数据检查系统、方法、装置和服务器 | |
CN114416849A (zh) | 数据处理方法、装置、电子设备及存储介质 | |
CN107193749B (zh) | 测试方法、装置及设备 | |
CN110046319B (zh) | 社交媒体信息采集方法、装置、系统、设备及存储介质 | |
US11720476B2 (en) | Automated end-to-end testing platform with dynamic container configuration | |
CN112115118B (zh) | 数据库压测的优化方法及装置、存储介质、电子设备 | |
CN111143177B (zh) | Ibm主机的rmf iii数据的收集方法、系统、装置及存储介质 | |
CN110247802B (zh) | 针对云服务单机环境的资源配置方法及装置 | |
CN114510317A (zh) | 虚拟机管理方法、装置、设备及存储介质 | |
CN112668285A (zh) | 结合rpa和ai的资金日报的生成方法、装置及电子设备 | |
CN111913758A (zh) | 组件监控任务的自动化添加方法、装置及系统 | |
CN111340382A (zh) | 银行系统中文件调度方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |