CN116521326A - 批量作业处理方法、装置、电子设备和存储介质 - Google Patents
批量作业处理方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN116521326A CN116521326A CN202210067424.4A CN202210067424A CN116521326A CN 116521326 A CN116521326 A CN 116521326A CN 202210067424 A CN202210067424 A CN 202210067424A CN 116521326 A CN116521326 A CN 116521326A
- Authority
- CN
- China
- Prior art keywords
- job
- target
- running state
- processing
- file
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 57
- 238000012545 processing Methods 0.000 claims abstract description 88
- 238000012544 monitoring process Methods 0.000 claims description 29
- 238000000034 method Methods 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 14
- 238000012958 reprocessing Methods 0.000 claims description 5
- 238000004891 communication Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000012423 maintenance Methods 0.000 description 3
- 238000011144 upstream manufacturing Methods 0.000 description 3
- 230000006837 decompression Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000013479 data entry Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3017—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is implementing multitasking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Mathematical Physics (AREA)
- Retry When Errors Occur (AREA)
Abstract
本发明提供一种批量作业处理方法、装置、电子设备和存储介质,监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;基于所述目标作业的作业类型对所述目标作业进行对应处理。本发明提供的批量作业处理方法、装置、电子设备和存储介质,基于作业类型对目标作业进行对应处理,实现了失败作业的自动处理,从而提高了失败作业的处理效率。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种批量作业处理方法、装置、电子设备和存储介质。
背景技术
批量作业运行过程中,会出现因为服务器资源争用、网络通讯瞬间异常或阻塞导致等非程序缺陷原因导致的批量作业执行失败的情况,所以,需要对失败作业进行处理。
相关技术中,在有失败作业时,通常将失败作业告警信息发送给运维人员,由运维人员联系开发人员对问题进行分析定位,定位到问题后,开发人员制定批量异常处理方案,进而基于批量异常处理方案对失败作业进行处理。
但上述相关技术中,需要人工介入批量异常处理流程中,问题处理和解决时间长,从而降低了失败作业的处理效率。
发明内容
针对现有技术存在的问题,本发明提供一种批量作业处理方法、装置、电子设备和存储介质。
本发明提供一种批量作业处理方法,包括:
监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
基于所述目标作业的作业类型对所述目标作业进行对应处理。
根据本发明提供的一种批量作业处理方法,在所述监控每个作业的运行状态配置信息之前,所述方法还包括:
配置作业运行状态表;
其中,所述作业运行状态表中存储有每个作业的运行状态配置信息。
根据本发明提供的一种批量作业处理方法,在所述监控每个作业的运行状态配置信息之前,所述方法还包括:
配置文件加载控制信息表;其中,所述文件加载控制信息表中存储有每个作业的作业名称、以及每个所述作业对应的中间文件的文件名称。
根据本发明提供的一种批量作业处理方法,所述基于所述目标作业的作业类型对所述目标作业进行对应处理,包括:
在策略列表中获取所述目标作业的作业类型对应的目标处理策略;其中,所述策略列表中存储有作业类型和处理策略的对应关系;
基于所述目标处理策略对所述目标作业进行对应处理。
根据本发明提供的一种批量作业处理方法,所述基于所述目标处理策略对所述目标作业进行对应处理,包括:
在所述目标作业的作业类型为文件加载类型时,在所述文件加载控制信息表中获取所述目标作业对应的每个中间文件的文件名称;
基于所述目标作业对应的每个中间文件的文件名称删除所述目标作业中的中间文件,得到初始数据文件;其中,所述中间文件为对所述初始数据文件进行解压或转码后的文件;
将所述初始数据文件添加至文件接收目录中,并将所述作业运行状态表中所述目标作业的运行状态修改为初始状态。
根据本发明提供的一种批量作业处理方法,所述基于所述目标策略对所述目标作业进行对应处理,包括:
在所述目标作业的作业类型为数据加工处理类型时,将所述作业运行状态表中所述目标作业的运行状态修改为初始状态;
对所述目标作业进行重新加工处理。
根据本发明提供的一种批量作业处理方法,在所述监控每个作业的运行状态配置信息之前,所述方法还包括:
配置运行状态监控的执行频率;
所述监控每个作业的运行状态配置信息,包括:
基于所述执行频率监控每个作业的运行状态配置信息。
本发明还提供一种批量作业处理装置,包括:
监控单元,用于监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
获取单元,用于在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
处理单元,用于基于所述目标作业的作业类型对所述目标作业进行对应处理。
本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述批量作业处理方法的步骤。
本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述批量作业处理方法的步骤。
本发明还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述批量作业处理方法的步骤。
本发明提供的一种批量作业处理方法、装置、电子设备和存储介质,监控每个作业的运行状态配置信息,在确定有运行状态为失败的目标作业时,获取目标作业的作业类型,基于作业类型对目标作业进行对应处理,实现了失败作业的自动处理,从而提高了失败作业的处理效率。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的批量作业处理方法的流程示意图之一;
图2是本发明提供的批量作业处理方法的流程示意图之二;
图3是本发明提供的批量作业处理方法的流程示意图之三;
图4是本发明提供的批量作业处理方法的流程示意图之四;
图5是本发明提供的批量作业处理方法的流程示意图之五;
图6是本发明提供的批量作业处理方法的流程示意图之六;
图7是本发明提供的批量作业处理装置的结构示意图;
图8是本发明提供的电子设备的实体结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
下面结合图1-图6描述本发明的批量作业处理方法。
图1是本发明提供的批量作业处理方法的流程示意图之一,如图1所示,该批量作业处理方法包括以下步骤:
步骤101、监控每个作业的运行状态配置信息。
其中,所述运行状态配置信息包括作业的运行状态和作业类型;作业的运行状态包括初始状态、运行状态、失败状态和成功状态;作业类型至少包括文件加载类型和数据加工处理类型等。
示例地,定时轮询每个作业的运行状态,查看是否有运行状态为失败的作业。
步骤102、在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型。
示例地,在确定有运行状态为失败的作业时,将该作业确定为目标作业,然后在运行状态配置信息中获取目标作业的作业类型。
步骤103、基于所述目标作业的作业类型对所述目标作业进行对应处理。
示例地,在获取到目标作业的作业类型时,基于目标作业的作业类型对目标作业进行对应处理;例如,在目标作业的作业类型为文件加载类型时,则基于文件加载类型对应的处理策略对目标作业进行处理;在目标作业的作业类型为数据加工处理类型时,则基于数据加工处理类型对应的处理策略对目标作业进行处理。
本发明提供的一种批量作业处理方法,监控每个作业的运行状态配置信息,在确定有运行状态为失败的目标作业时,获取目标作业的作业类型,基于作业类型对目标作业进行对应处理,实现了失败作业的自动处理,从而提高了失败作业的处理效率;同时减少了人工分析和处理批量问题耗费的人力资源成本,提升了自动化运维的能力。
可选地,图2是本发明提供的批量作业处理方法的流程示意图之二,如图2所示,在图1的步骤101之前,该批量作业处理方法还包括以下步骤:
步骤104、配置作业运行状态表。
其中,所述作业运行状态表中存储有每个作业的运行状态配置信息。
示例地,开发人员可以创建一个作业运行状态表,在作业运行状态表中设置好每一个配置项,批量作业程序将每个作业的配置项添加在作业运行状态表中,以实现作业运行状态表的配置;例如,配置项包括作业名称、作业类型、作业运行日期和作业运行状态,则批量作业程序需要获取每个作业的作业名称、作业类型、作业接收日期和作业运行状态,然后针对每个作业,将作业的作业名称添加在作业名称配置栏中,将作业类型添加在作业类型配置栏中,将作业运行日期添加在运行日期配置栏中,将作业运行状态添加运行状态配置栏中;其中,作业运行状态包括初始状态、运行状态、成功状态和失败状态,以便能够监控和定时轮询作业运行状态表中运行失败的作业;另外,在作业的运行状态发生变化时,还可以及时更新作业运行状态表中的运行状态。
需要说明的是,在监控每个作业的运行状态配置信息之前,开发人员还需要确定可以重复执行的作业和不可以重复执行的作业,并且将不可以重复执行的作业通过预设方法优化为可重复执行的作业;另外,批量作业程序在接收到上游发送的初始数据文件时,将接收到的初始数据文件按照预设目录规则保存在相应目录下,便于在相应目录中读取初始数据文件;例如,预设目录规则为将不同批量日期的数据分目录保存,则在接收到每个初始数据文件时,将批量日期相同的初始数据文件保存在一个目录,将批量日期不同的初始数据文件保存在其他对应目录。
本发明提供的批量作业处理方法,预先配置好作业运行状态表,便于批量作业程序基于作业运行状态表自动监测失败作业。
可选地,图3是本发明提供的批量作业处理方法的流程示意图之三,如图3所示,在图1的步骤101之前,该批量作业处理方法还包括以下步骤:
步骤105、配置文件加载控制信息表。
其中,所述文件加载控制信息表中存储有每个作业的作业名称、以及每个所述作业对应的中间文件的文件名称。
示例地,开发人员还可以创建一个文件加载控制信息表,在文件加载控制信息表中配置每个作业的作业名称,每个作业对应的中间文件的文件名称;另外,还可以在文件加载控制信息表中记录每个中间文件的接收日期和每个中间文件的状态信息等;例如,中间文件可以为解压文件和转码文件,在文件加载控制信息表中可以记录解压文件的解压成功状态和转码文件的转码成功状态等。
需要说明的是,在实际应用中,可以通过批量作业配置模块对作业运行状态表和文件加载控制信息表进行配置;批量作业配置模块是必须的前提条件和基本流程,需要根据批量作业的实际情况进行相应的准确配置。
需要说明的是,在配置好作业运行状态表和文件加载控制信息表之后,后续可以根据批量功能变化的实际情况对作业运行状态表和文件加载控制信息表进行配置更新,本发明对此不作限定。
本发明提供的批量作业处理方法,预先配置好文件加载控制信息表,便于批量作业程序基于文件加载控制信息表对目标作业进行处理。
可选地,图4是本发明提供的批量作业处理方法的流程示意图之四,如图4所示,图1中的步骤103具体可通过以下步骤实现:
步骤1031、在策略列表中获取所述目标作业的作业类型对应的目标处理策略。
其中,所述策略列表中存储有作业类型和处理策略的对应关系。
示例地,在获取到目标作业的作业类型时,可以在策略列表中查找目标作业的作业类型对应的目标处理策略。
对于文件加载失败的作业,首先需要删除中间文件(已经解压转码后的文本),然后将备份的上游下发的初始接收文件复制到文件接收目录;对于数据加工处理类作业,直接修改作业的运行状态为初始状态,批量作业程序在检测到目标作业的运行状态为初始状态时,会重新执行失败的目标作业。
步骤1032、基于所述目标处理策略对所述目标作业进行对应处理。
示例地,在获取到目标作业的作业类型对应的目标处理策略时,按照该目标处理策略对目标作业进行处理。
本发明提供的批量作业处理方法,基于策略列表自动查找目标作业对应的处理策略,无需将失败作业发送给开发人员,提高了失败作业的处理效率,且处理流程简单。
可选地,图5是本发明提供的批量作业处理方法的流程示意图之五,如图5所示,图4中的步骤1032具体可通过以下步骤实现:
步骤10321、在所述目标作业的作业类型为文件加载类型时,在所述文件加载控制信息表中获取所述目标作业对应的每个中间文件的文件名称。
步骤10322、基于所述目标作业对应的每个中间文件的文件名称删除所述目标作业中的中间文件,得到初始数据文件。
其中,所述中间文件为对所述初始数据文件进行解压或转码后的文件。
步骤10323、将所述初始数据文件添加至文件接收目录中,并将所述作业运行状态表中所述目标作业的运行状态修改为初始状态。
示例地,在目标作业的作业类型为文件加载类型时,首先需要获取目标作业对应的目标文件,将目标文件中的中间文件删除,也就是将解压转码后的文件删除,剩余的文件就为上游发送的初始数据文件,最后将初始数据文件复制到文件接收目录中,并将作业运行状态表重目标作业的运行状态修改为初始状态,这样就会触发批量作业程序对目标作业进行重新加工处理,具体重新加工处理为对初始数据文件进行解压、转码和导入数据库等。
本发明提供的批量作业处理方法,能够对文件加载类型的失败作业进行自动处理,提高了文件加载类型的失败作业的处理效率。
可选地,如图5所示,图4中的步骤1032具体还可通过以下步骤实现:
步骤10324、在所述目标作业的作业类型为数据加工处理类型时,将所述作业运行状态表中所述目标作业的运行状态修改为初始状态。
步骤10325、对所述目标作业进行重新加工处理。
示例地,在目标作业的作业类型为数据加工处理类型时,直接将作业运行状态表中目标作业的运行状态修改为初始状态,这样就会触发批量作业程序对目标作业进行重新加工处理,具体重新加工处理为对目标作业的数据进行抽取、转换和清洗等加工处理。
本发明提供的批量作业处理方法,能够对数据加工处理类型的失败作业进行自动处理,提高了数据加工处理类型的失败作业的处理效率。
可选地,图6是本发明提供的批量作业处理方法的流程示意图之六,如图6所示,在图1的步骤101之前,该批量作业处理方法还包括以下步骤:
步骤106、配置运行状态监控的执行频率。
示例地,开发人员还可以预先配置作业运行状态监控的执行频率;例如,执行频率为每小时执行一次。
需要说明的是,步骤104、步骤105和步骤106的执行顺序没有限制,可以同时执行步骤104、步骤105和步骤106;也可以依次执行步骤104至步骤106;还可以先执行步骤105和步骤106,再执行步骤104。
进一步地,图1中的步骤101具体可通过以下方式实现:
基于所述执行频率监控每个作业的运行状态配置信息。
示例地,若执行频率为每小时执行一次,则每小时轮询一次作业运行状态表,查看是否有运行失败的作业。
需要说明的是,执行频率可以根据实际情况进行自行设置,本发明对此不作限定。
本发明提供的批量作业处理方法,基于执行频率轮询作业运行状态表,实现作业运行状态和失败作业的及时监控。
下面对本发明提供的批量作业处理装置进行描述,下文描述的批量作业处理装置与上文描述的批量作业处理方法可相互对应参照。
图7是本发明提供的批量作业处理装置的结构示意图,如图7所示,该批量作业处理装置包括监控单元701、获取单元702和处理单元703;其中:
监控单元701,用于监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
获取单元702,用于在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
处理单元703,用于基于所述目标作业的作业类型对所述目标作业进行对应处理。
本发明提供的一种批量作业处理装置,监控每个作业的运行状态配置信息,在确定有运行状态为失败的目标作业时,获取目标作业的作业类型,基于作业类型对目标作业进行对应处理,实现了失败作业的自动处理,从而提高了失败作业的处理效率。
基于上述任一实施例,所述装置还包括第一配置单元;
所述第一配置单元,用于配置作业运行状态表;
其中,所述作业运行状态表中存储有每个作业的运行状态配置信息。
基于上述任一实施例,所述装置还包括第二配置单元;
所述第二配置单元,用于配置文件加载控制信息表;其中,所述文件加载控制信息表中存储有每个作业的作业名称、以及每个所述作业对应的中间文件的文件名称。
基于上述任一实施例,所述处理单元703具体用于:
在策略列表中获取所述目标作业的作业类型对应的目标处理策略;其中,所述策略列表中存储有作业类型和处理策略的对应关系;
基于所述目标处理策略对所述目标作业进行对应处理。
基于上述任一实施例,所述处理单元703还具体用于:
在所述目标作业的作业类型为文件加载类型时,在所述文件加载控制信息表中获取所述目标作业对应的每个中间文件的文件名称;
基于所述目标作业对应的每个中间文件的文件名称删除所述目标作业中的中间文件,得到初始数据文件;其中,所述中间文件为对所述初始数据文件进行解压或转码后的文件;
将所述初始数据文件添加至文件接收目录中,并将所述作业运行状态表中所述目标作业的运行状态修改为初始状态。
基于上述任一实施例,所述处理单元703还具体用于:
在所述目标作业的作业类型为数据加工处理类型时,将所述作业运行状态表中所述目标作业的运行状态修改为初始状态;
对所述目标作业进行重新加工处理。
基于上述任一实施例,所述装置还包括第三配置单元;
所述第二配置单元,用于配置运行状态监控的执行频率;
所述监控单元701具体用于:
基于所述执行频率监控每个作业的运行状态配置信息。
图8是本发明提供的电子设备的实体结构示意图,如图8所示,该电子设备可以包括:处理器(processor)810、通信接口(Communications Interface)820、存储器(memory)830和通信总线840,其中,处理器810,通信接口820,存储器830通过通信总线840完成相互间的通信。处理器810可以调用存储器830中的逻辑指令,以执行批量作业处理方法,该方法包括:监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
基于所述目标作业的作业类型对所述目标作业进行对应处理。
此外,上述的存储器830中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,计算机程序可存储在非暂态计算机可读存储介质上,所述计算机程序被处理器执行时,计算机能够执行上述各方法所提供的批量作业处理方法,该方法包括:监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
基于所述目标作业的作业类型对所述目标作业进行对应处理。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各方法提供的批量作业处理方法,该方法包括:监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
基于所述目标作业的作业类型对所述目标作业进行对应处理。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (11)
1.一种批量作业处理方法,其特征在于,包括:
监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
基于所述目标作业的作业类型对所述目标作业进行对应处理。
2.根据权利要求1所述的批量作业处理方法,其特征在于,在所述监控每个作业的运行状态配置信息之前,所述方法还包括:
配置作业运行状态表;
其中,所述作业运行状态表中存储有每个作业的运行状态配置信息。
3.根据权利要求2所述的批量作业处理方法,其特征在于,在所述监控每个作业的运行状态配置信息之前,所述方法还包括:
配置文件加载控制信息表;其中,所述文件加载控制信息表中存储有每个作业的作业名称、以及每个所述作业对应的中间文件的文件名称。
4.根据权利要求3所述的批量作业处理方法,其特征在于,所述基于所述目标作业的作业类型对所述目标作业进行对应处理,包括:
在策略列表中获取所述目标作业的作业类型对应的目标处理策略;其中,所述策略列表中存储有作业类型和处理策略的对应关系;
基于所述目标处理策略对所述目标作业进行对应处理。
5.根据权利要求4所述的批量作业处理方法,其特征在于,所述基于所述目标处理策略对所述目标作业进行对应处理,包括:
在所述目标作业的作业类型为文件加载类型时,在所述文件加载控制信息表中获取所述目标作业对应的每个中间文件的文件名称;
基于所述目标作业对应的每个中间文件的文件名称删除所述目标作业中的中间文件,得到初始数据文件;其中,所述中间文件为对所述初始数据文件进行解压或转码后的文件;
将所述初始数据文件添加至文件接收目录中,并将所述作业运行状态表中所述目标作业的运行状态修改为初始状态。
6.根据权利要求4所述的批量作业处理方法,其特征在于,所述基于所述目标策略对所述目标作业进行对应处理,包括:
在所述目标作业的作业类型为数据加工处理类型时,将所述作业运行状态表中所述目标作业的运行状态修改为初始状态;
对所述目标作业进行重新加工处理。
7.根据权利要求1-6任一项所述的批量作业处理方法,其特征在于,在所述监控每个作业的运行状态配置信息之前,所述方法还包括:
配置运行状态监控的执行频率;
所述监控每个作业的运行状态配置信息,包括:
基于所述执行频率监控每个作业的运行状态配置信息。
8.一种批量作业处理装置,其特征在于,包括:
监控单元,用于监控每个作业的运行状态配置信息;其中,所述运行状态配置信息包括作业的运行状态和作业类型;
获取单元,用于在确定有运行状态为失败的目标作业时,获取所述目标作业的作业类型;
处理单元,用于基于所述目标作业的作业类型对所述目标作业进行对应处理。
9.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至7任一项所述批量作业处理方法的步骤。
10.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述批量作业处理方法的步骤。
11.一种计算机程序产品,包括计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述批量作业处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210067424.4A CN116521326A (zh) | 2022-01-20 | 2022-01-20 | 批量作业处理方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210067424.4A CN116521326A (zh) | 2022-01-20 | 2022-01-20 | 批量作业处理方法、装置、电子设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116521326A true CN116521326A (zh) | 2023-08-01 |
Family
ID=87392657
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210067424.4A Pending CN116521326A (zh) | 2022-01-20 | 2022-01-20 | 批量作业处理方法、装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116521326A (zh) |
-
2022
- 2022-01-20 CN CN202210067424.4A patent/CN116521326A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107016480B (zh) | 任务调度方法、装置及系统 | |
CN110225078B (zh) | 一种应用服务更新方法、系统及终端设备 | |
WO2008118594A1 (en) | Bookmark and configuration file for installation sequence | |
CN111258850B (zh) | 一种基于Linux系统的更新软件信息的方法及装置 | |
CN112765161B (zh) | 报警规则匹配方法、装置、电子设备及存储介质 | |
EP4122163A1 (en) | Causality determination of upgrade regressions via comparisons of telemetry data | |
CN108667872B (zh) | 用于调度服务器的存档方法和装置 | |
CN114528350B (zh) | 集群脑裂的处理方法、装置、设备及可读存储介质 | |
CN113918438A (zh) | 服务器异常的检测方法、装置、服务器及存储介质 | |
CN106204031B (zh) | 卡应用处理方法及装置 | |
CN116521326A (zh) | 批量作业处理方法、装置、电子设备和存储介质 | |
CN114780177B (zh) | 事务执行方法及装置、存储介质及电子装置 | |
CN116028243A (zh) | 消息处理方法和装置 | |
CN113014675A (zh) | 数据处理方法及装置、电子设备和存储介质 | |
CN113297149A (zh) | 数据处理请求的监测方法及装置 | |
CN108958827B (zh) | 一种处理程序升级故障的方法和系统 | |
CN108197147B (zh) | 号卡数据库运维方法及装置 | |
CN112416385A (zh) | 采集组件管理方法和系统 | |
CN111381932A (zh) | 触发应用程序更改的方法、装置、电子设备及存储介质 | |
CN116107603B (zh) | 一种固件升级方法、装置、存储介质和电子设备 | |
CN111756778A (zh) | 一种服务器磁盘清理脚本推送的方法、装置和存储介质 | |
CN117290158A (zh) | 数据恢复方法、装置、电子设备及存储介质 | |
CN114443354A (zh) | 文件恢复方法、装置、电子设备和存储介质 | |
CN115048244B (zh) | 一种服务器的硬件修复方法、系统、计算机设备及介质 | |
CN117745202A (zh) | 业务流程处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |