CN111651262B - 批量任务生成方法及装置 - Google Patents
批量任务生成方法及装置 Download PDFInfo
- Publication number
- CN111651262B CN111651262B CN202010655090.3A CN202010655090A CN111651262B CN 111651262 B CN111651262 B CN 111651262B CN 202010655090 A CN202010655090 A CN 202010655090A CN 111651262 B CN111651262 B CN 111651262B
- Authority
- CN
- China
- Prior art keywords
- real
- batch
- time
- task
- batch task
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
- G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种批量任务生成方法及装置,其中该方法包括:接收分支机构的实时批量任务的需求信息;其中,需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则;根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。本发明通过接收分支机构的实时需求,根据实时需求即时生成批量任务,从而满足各分支机构的实时任务需求;定制化生成分支机构所需的实时批量任务,能够完美贴合各分支机构的任务需求,避免了分支机构的业务人员二次开发,降低了开发成本,减轻了分支机构业务人员的压力。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及批量任务生成方法及装置。
背景技术
本部分旨在为权利要求书中陈述的本发明实施例提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。
由于银行的各个分支机构,业务发展程度、对业务的处理要求和需求千差万别且随时间变化,以及各个分支机构所在地区或者所归属的清算组织的监管要求也是千差万别,因此各个分支机构所需要生成的批量任务各不相同。
为了减少各个分支机构的工作量,现有技术通过梳理整合出所有分支机构所需要的批量任务间的共同特点,根据共同特点开发编写框架,而针对非共性的个体需求单独编写程序,从而生成针对各个分支机构需求的批量任务。但由于统计各个分支机构提交批量任务需求后,再进行程序的开发,使得批量任务生成的实施周期长,需求与实现存在较长的时间差,而各个分支机构的任务需求在实时变化,使得生成的批量任务无法满足分支机构实时的需求;且现有技术为了降低程序开发的成本,生成的批量任务仅能保证满足共性需求,并不能完整贴合每个分支机构的任务需求,导致分支机构的业务人员还需进行二次开发,不仅增加了开发成本,也提高了对分支机构业务人员的要求,增加了分支机构业务人员的压力。
发明内容
本发明实施例提供一种批量任务生成方法,用以根据分支机构实时任务需求生成批量任务,减轻业务人员的压力,该方法包括:
接收分支机构的实时批量任务的需求信息;其中,所述需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,所述实时批量任务的生成规则用于表征所述实时批量任务的动作逻辑;
根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据,所述系统数据库中还存储有不同的数据之间的关联关系,包括交易信息与客户信息、账户信息之间的关联关系,用以在进行批量任务生成时,选取所需数据,或者生成批量任务时、所选择的数据不全时,补全实时任务所需要的数据;
根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
具体实施例中,根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务,包括:
根据实时批量任务的生成规则,确定实时批量任务的类型;
根据实时批量任务的类型,确定所述类型对应的初始批量任务生成模型;
根据实时批量任务的生成规则,修改初始批量任务生成模型,得到修改后的批量任务生成模型;
根据修改后的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
进一步地,批量任务的类型、初始批量任务生成模型及二者的对应关系,预设于所述系统数据库中;
若所述系统数据库中未存储实时批量任务的类型,根据实时批量任务的生成规则,创建批量任务生成模型;
根据创建的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
本发明具体实施例中,所述需求信息还包括实时批量任务之间的关联关系;
所述批量任务生成方法还包括:
生成分支机构所需的实时批量任务后,根据实时批量任务之间的关联关系,确定所述实时批量任务的调度执行顺序。
可选地,在本发明另一具体实施例中,所述需求信息还包括对实时批量任务的监控需求信息;
所述批量任务生成方法还包括:
根据所述监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息;
将所述监控结果信息发送给分支机构。
本发明实施例还提供一种批量任务生成装置,用以根据分支机构实时任务需求生成批量任务,该装置包括:
实时需求接收模块,用于接收分支机构的实时批量任务的需求信息;其中,所述需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,所述实时批量任务的生成规则用于表征所述实时批量任务的动作逻辑;
任务数据调用模块,用于根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据,所述系统数据库中还存储有不同的数据之间的关联关系,包括交易信息与客户信息、账户信息之间的关联关系,用以在进行批量任务生成时,选取所需数据,或者生成批量任务时、所选择的数据不全时,补全实时任务所需要的数据;
批量任务生成模块,用于根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
具体实施例中,所述批量任务生成模块具体用于:
根据实时批量任务的生成规则,确定实时批量任务的类型;
根据实时批量任务的类型,确定所述类型对应的初始批量任务生成模型;
根据实时批量任务的生成规则,修改初始批量任务生成模型,得到修改后的批量任务生成模型;
根据修改后的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
进一步地,批量任务的类型、初始批量任务生成模型及二者的对应关系,预设于所述系统数据库中;
所述批量任务生成模块具体用于:
若所述系统数据库中未存储实时批量任务的类型,根据实时批量任务的生成规则,创建批量任务生成模型;
根据创建的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
本发明具体实施例中,所述需求信息还包括实时批量任务之间的关联关系;
所述批量任务生成装置还包括:
任务调度模块,用于生成分支机构所需的实时批量任务后,根据实时批量任务之间的关联关系,确定所述实时批量任务的调度执行顺序。
可选地,在本发明另一具体实施例中,所述需求信息还包括对实时批量任务的监控需求信息;
所述批量任务生成装置还包括:监控模块用于:
根据所述监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息;
将所述监控结果信息发送给分支机构。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述批量任务生成方法。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行上述批量任务生成方法的计算机程序。
本发明实施例中,接收分支机构的实时批量任务的需求信息;其中,需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,实时批量任务的生成规则用于表征实时批量任务的动作逻辑;根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据;根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务,与现有技术中需求与实现存在较长的时间差的技术方案相比,通过接收分支机构的实时需求,根据实时需求即时生成批量任务,从而满足各分支机构的实时任务需求;通过根据各分支机构的实时需求,定制化生成分支机构所需的实时批量任务,能够完美贴合各分支机构的任务需求,避免了分支机构的业务人员二次开发,降低了开发成本,减轻了分支机构业务人员的压力。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。在附图中:
图1为本发明实施例中批量任务生成方法的示意图。
图2为本发明具体实施例中步骤103的具体实施过程示意图。
图3为本发明一具体实施例中批量任务生成方法示意图。
图4(a)为另一具体实施例中批量任务生成方法示意图。
图4(b)为又一具体实施例中批量任务生成方法示意图。
图5为本发明一具体应用实施中的基于支付系统的批量任务自动生成工具的结构示意图。
图6为本发明实施例中批量任务生成装置的示意图。
图7为本发明一具体实施例中批量任务生成装置的示意图。
图8(a)为另一具体实施例中批量任务生成装置的示意图。
图8(b)为又一具体实施例中批量任务生成装置的示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白,下面结合附图对本发明实施例做进一步详细说明。在此,本发明的示意性实施例及其说明用于解释本发明,但并不作为对本发明的限定。
本发明实施例提供了一种批量任务生成方法,用以根据分支机构实时任务需求生成批量任务,减轻业务人员的压力,如图1所示,该方法包括:
步骤101:接收分支机构的实时批量任务的需求信息;其中,需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,上述实时批量任务的生成规则用于表征实时批量任务的动作逻辑;
步骤102:根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据;
步骤103:根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
由图1所示流程可以得知,本发明实施例中,通过接收分支机构的实时批量任务的需求信息;其中,需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,实时批量任务的生成规则用于表征实时批量任务的动作逻辑;根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据;根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务,与现有技术中需求与实现存在较长的时间差的技术方案相比,通过接收分支机构的实时需求,根据实时需求即时生成批量任务,从而满足各分支机构的实时任务需求;通过根据各分支机构的实时需求,定制化生成分支机构所需的实时批量任务,能够完美贴合各分支机构的任务需求,避免了分支机构的业务人员二次开发,降低了开发成本,减轻了分支机构业务人员的压力。
首先接收分支机构的实时批量任务的需求信息。其中,该需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,实时批量任务的生成规则用于表征实时批量任务的动作逻辑。
接收分支机构的实时批量任务的需求信息后,根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据。其中,系统数据库中存储有用于生成批量任务的全量数据,将用于生成的全量数据存储在系统数据库中,作为铺底数据。具体实施例中,系统数据库中还存储有不同的数据之间的关联关系,例如交易信息与客户信息、账户信息之间的关联关系,以便在进行批量任务生成时,更快地选取所需数据,或者生成批量任务时,所选择的数据不全时,及时补全实时任务所需要的数据。
选择实时批量任务的所需数据后,根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。具体实施时,如图2所示,包括:
步骤201:根据实时批量任务的生成规则,确定实时批量任务的类型;
步骤202:根据实时批量任务的类型,确定上述类型对应的初始批量任务生成模型;
步骤203:根据实时批量任务的生成规则,修改初始批量任务生成模型,得到修改后的批量任务生成模型;
步骤204:根据修改后的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
其中,初始批量任务生成模型是按照任务类型的不同,预先分析批量任务的所需数据和生成的批量任务之间的映射关系,得到的基底模型。具体实施例中,批量任务的类型、初始批量任务生成模型及二者的对应关系,预设于上述系统数据库中。具体实施例中,若该系统数据库中未存储实时批量任务的类型,根据实时批量任务的生成规则,创建批量任务生成模型;根据创建的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。并将创建的批量任务生成模型存储至系统数据库中,以不断丰富完善系统数据库中存储的作为基底的初始批量任务生成模型。
本发明具体实施例中,需求信息还包括实时批量任务之间的关联关系,例如执行批量任务A之前,必须先完成批量任务B,因此,批量任务B必须要在批量任务A之前被调度执行。由此,本发明一具体实施例中的批量任务生成方法,如图3所示,在图1的基础上,还包括:
步骤301:生成分支机构所需的实时批量任务后,根据实时批量任务之间的关联关系,确定实时批量任务的调度执行顺序。
本发明具体实施例中,需求信息还包括对实时批量任务的监控需求信息,是指在批量任务运行过程中或运行结果中业务人员希望监控或业务需要监控的指标,例如,执行结果中的报错等级、报错信息和运行时间等指标。由此,本发明另一具体实施例中的批量任务生成方法,如图4(a)所示,在图1的基础上,还包括:
步骤401:根据监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息。
本发明又一具体实施例中的批量任务生成方法,如图4(b)所示,在图3的基础上,还包括:
步骤401:根据监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息。
业务人员可根据时批量任务的监控结果信息,作为生成的实时批量任务的评价指标,从而对实时批量任务的生成进行调整,以生成更符合分支机构要求的批量任务。
下面给出一具体实例说明本发明实施例如何生成批量任务。本例为应用本发明实施例中提供的批量任务生成方法所开发的基于支付系统的批量任务自动生成工具。
本具体实例涉及专业用语如下:
支付系统:指支持同一银行内部或不同银行间通过账户进行债权、债务清偿的流程的系统。
分布式:将一个大型的系统分为几个子系统,通过计算机网络分布到多台主机上,多个主机一起协同完成工作。
微服务:是一种新型的软件架构,把一个大型的单体应用程序和服务拆分为多个支持的微服务。
规则驱动:在本系统中,为实现动态规则功能的后台代码实现。
缓存:数据交换的缓冲区,缓存是存在内存中的,访问速度比从硬盘中读取要快。
批量任务:联机实时交易外,需要统一或集中对某些业务处理,亦或对依赖相关系统的数据进行处理为联机交易做铺垫,或为业务人员/监管系统出具一些对账文本,交易报表等一系列动作过程。
在支付交易系统中,所涉及的交易场景众多,大体可以分为两类:联机交易和批量处理。除联机交易在不同地区的交易处理流程不同外;各海外分行业务发展程度、对业务的处理要求,需求千差万别且经常变化以及各个分行所在国家或者清算组织的监管要求也是千差万别。所以各个分行的批量处理的要求也是不尽相同,无法统一实现且工作繁复。并且在现有技术中,需求提出到最终的功能实现需要经过一个相对长的时间,不利于业务发展。
本具体实施例提供基于支付系统的批量任务自动生成工具,结合支付系统架构,通过简单配置的方式,能够自动生成各个国家地区个性化调度任务程序(监管程序和业务报表等),使得需求能够快速实现的同时,也能够让非专业软件开发人员(例如银行业务人员和刚接手的技术人员),也能够完成相对复杂的程序实现。
在该工具中使用规则+插件驱动的概念,基于Java脚本引擎工具,通过基础插件的方式,部署在支付系统中以供使用。结合TASKCTL析工具和Java语言,将批量数据文件、业务报表、监管数据的调度工具,设计成一个基础组件部署在支付系统中,以供业务人员或者技术人员使用。同时,为减少修改代码带来的一系列问题,本工具采用前端页面进行规则配置,用户在页面点击保存按钮后,自动生成执行码程序和调度逻辑,当达到执行条件后自动进行执行,并输出结果和状态到前台。其中,TASKCTL由于采用任务插件驱动机制,可支持各种存储过程、各种脚本、以及诸如Datastage\Informatica\kettle等各种ETL工具任务。
不同地区的不同分行,或者同一地区的不同机构,所开展的业务类型不同,所面临的外部监管规则不同,机构内部的管理需求不同,各个分支机构所需要的批量任务(数据/报表)也不相同,即时同样的批量任务,不同机构的调度要求:串行、并行、执行计划、依赖、定时等也不尽相同。分行根据内外部需求制定本行支付系统中批量调度任务时,可以通过该工具的前端界面进行自定义的配置,包括:数据文件名、报表名字、数据生成的条件、统计的维度和度量、各个任务之间的依赖关系、先后顺序或者执行的时间点、产出结果的展现方式以及数据接收方式等。从而灵活的完成批量任务的生成和调度。
该工具如图5所示,主要包含以下几个模块:
初始化配置模块501:自动识别与解析支付系统的交易数据以及支付系统内的数据存储关系,自动生成数据源获取的规则,通过解析支付系统的统一交易报文的规范(ISO/SWIFT),生成交易数据收取和解析的规则,作为铺底数据导入。将ISO或者SWIFT规范以铺底数据形式导入到系统数据库中,以供后续使用。
批量任务创建模块502:
用户可通过前端界面配选择或配置批量任务需求信息,例如,一个批量任务主要包含类型选择、目标系统、生成规则和任务命名,因此,批量任务需求信息包括如下字段:
Name:批量任务工程的名字。
condition:批量任务动作逻辑,用户可以根据业务场景在前端界面设置不同的动作逻辑,保存后台生成可执行Java语句如下:
ruleVo.setString("P_OFFICE").equals("SG1")&&ruleVo.setString("P_DBT_MOP").equals("BOOK")
action:表示批量任务类型:数据文件类,业务报表类,集中处理等。
Target:决定是生成文本发送还是接收文本处理等。
在前端完成需求信息配置或编辑后,点击Save按钮,将界面内容存储到该工具的文件系统,并将索引信息存储到对应数据库表中。
根据需求信息生成的索引信息数据库表,如表1所示:
表1
用来存储所有批量任务的任务信息的数据库表的主要字段,如表2所示,包括:
表2
字段名 | 描述 |
UID | 批量任务UID(主键) |
BATCHPROCESS_NAME | 批量任务名称 |
BATCHPROCESS_CONTENT_ID | BATCHPROCESS_CONTENT_ID |
ACTION_ID | 执行动作的Action id |
ACTION_NAME | Action name |
用来存储规则绑定的信息的数据库表中,主要字段,如表3所示,包括:
表3
字段名 | 描述 |
BATCHPROCESS_CONTENT_ID | BATCHPROCESS_CONTENT_ID |
OBJECT_ID | 绑定Object id(一般为OFFICEID) |
UID_BATCHPROCESS | 绑定规则的UID_BATCHPROCESS |
用来存储批量任务目标的数据库表中,主要字段,如表4所示,包括:
表4
调度任务生成模块503:批量任务生成后通过jar包方法引入支付系统服务中,系统启动时,调用setApplicationContext.initRunner()方法,将数据库表中存储的配置信息载到runner中。
通过调用executeBatchProcessGenerate()方法执行,传入任务类型、文件名,交易类型等参数。
根据传输参数在缓存中读取批量任务内容,如果读不到类似任务则新生成,并更新到数据库表中。如果读到则进行复制,并修改相关调度信息生成当前OFFICE任务,最终Java执行代码的结果就是批量任务的执行程序。
逻辑关系及时间点设置模块504:将生成的同一分支机构的批量任务,以列表的形式展现在前端界面,供前端浏览和展示。通过界面设计批量任务的关联关系,开始时间,并发操作等设定,将结果发送到调度控制核心。
监控模块505:通过界面设置监控信息展示要素,包含:报错等级,报错信息,运行时间等要素。
结果展示模块506:将批量任务执行结果在前段展示。
各个模块的运行工作逻辑如下:
首先数据铺底,将解析规范映射关系通过铺底数据的方式导入数据库中。
系统启动后,系统自动获取铺底数据,自动解析对应数据库结构表结构,获取各个表之间的关联关系,加载常用批量任务模型到缓存中。数据库结构表结构是指支付交易系统中不同类别的数据存储在不同的数据库结构表中,不同的表之间有关联关系。
用户创建批量任务:将任务需求信息传递到后台,批量任务创建模块502生成程序存储,并将信息更新至数据库表中。
调度逻辑创建:用户将定义好的批量调度任务逻辑关系进行设定,传递至调度核心并存入数据库中。
监控设置:用户自定义监控信息,将定制化监控信息发送至监控模块505,并存入数据库中。
执行并反馈:执行批量任务,将支付系统中的数据加工分发至各个关联系统,并将执行结果和监控信息反馈前端并存入数据库中。
开发人员或者业务人员可以根据分行的不同需求或不同的监管需求,进行定制化配置,该工具根据配置生成定制化的批量任务。通过这种灵活可视化的方式,方便开发人员进行配置管理,不需要后台插入复杂的执行脚本,降低了开发难度和错误率。
将该工具布置在支付系统中,减少了资源的浪费,且减少了各个系统之间的壁垒。
结合TASKCTL析工具和Java语技术,实现了对批量任务的的可配置性,可动态的调整逻辑规则并能实时生效,无需调整代码和系统重启。
系统启动后,将常用数据与逻辑模型加载到缓存中,减少了与数据库之间的I/O操作,无需访问数据库,使得微服务处理速度更快,提高了处理效率。
该工具具有可复用性,可针对不同支付的要求灵活配置,无需修改底层代码,使用统一的代码逻辑,减少了开发成本和运行维护的难度。
上述具体应用的实施仅为举例,其余实施方式不再一一赘述。
本发明实施例中还提供了一种批量任务生成装置,如下面的实施例所述。由于该装置解决问题的原理与批量任务生成方法相似,因此该装置的实施可以参见批量任务生成方法的实施,重复之处不再赘述。
本发明实施例提供的批量任务生成装置,如图6所示,包括:
实时需求接收模块601,用于接收分支机构的实时批量任务的需求信息;其中,需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,实时批量任务的生成规则用于所述实时批量任务的动作逻辑;
任务数据调用模块602,用于根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据;
批量任务生成模块603,用于根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
具体实施时,批量任务生成模块603具体用于:
根据实时批量任务的生成规则,确定实时批量任务的类型;
根据实时批量任务的类型,确定该类型对应的初始批量任务生成模型;
根据实时批量任务的生成规则,修改初始批量任务生成模型,得到修改后的批量任务生成模型;
根据修改后的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
具体实施例中,批量任务的类型、初始批量任务生成模型及二者的对应关系,预设于所述系统数据库中;
批量任务生成模块603具体用于:
若系统数据库中未存储实时批量任务的类型,根据实时批量任务的生成规则,创建批量任务生成模型;
根据创建的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
需求信息还包括实时批量任务之间的关联关系,本发明一具体实施例提供的一种批量任务生成装置,如图7所示,在图6基础上还包括:
任务调度模块701,用于生成分支机构所需的实时批量任务后,根据实时批量任务之间的关联关系,确定实时批量任务的调度执行顺序。
具体实施时,需求信息还包括对实时批量任务的监控需求信息。本发明另一具体实施例提供的一种批量任务生成装置,如图8(a)所示,在图6基础上还包括:
监控模块801,用于:
根据监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息;
将监控结果信息发送给分支机构。
本发明另一具体实施例提供的一种批量任务生成装置,如图8(b)所示,在图7基础上还包括:
监控模块801,用于:
根据监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息;
将监控结果信息发送给分支机构。
本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述批量任务生成方法。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质存储有执行上述批量任务生成方法的计算机程序。
本发明实施例中,接收分支机构的实时批量任务的需求信息;其中,需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,实时批量任务的生成规则用于表征实时批量任务的动作逻辑;根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据;根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务,与现有技术中需求与实现存在较长的时间差的技术方案相比,通过接收分支机构的实时需求,根据实时需求即时生成批量任务,从而满足各分支机构的实时任务需求;通过根据各分支机构的实时需求,定制化生成分支机构所需的实时批量任务,能够完美贴合各分支机构的任务需求,避免了分支机构的业务人员二次开发,降低了开发成本,减轻了分支机构业务人员的压力。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (12)
1.一种批量任务生成方法,其特征在于,包括:
接收分支机构的实时批量任务的需求信息;其中,所述需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,所述实时批量任务的生成规则用于表征所述实时批量任务的动作逻辑;
根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据,所述系统数据库中还存储有不同的数据之间的关联关系,包括交易信息与客户信息、账户信息之间的关联关系,用以在进行批量任务生成时,选取所需数据,或者生成批量任务时、所选择的数据不全时,补全实时任务所需要的数据;
根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
2.如权利要求1所述的批量任务生成方法,其特征在于,根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务,包括:
根据实时批量任务的生成规则,确定实时批量任务的类型;
根据实时批量任务的类型,确定所述类型对应的初始批量任务生成模型;
根据实时批量任务的生成规则,修改初始批量任务生成模型,得到修改后的批量任务生成模型;
根据修改后的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
3.如权利要求2所述的批量任务生成方法,其特征在于,批量任务的类型、初始批量任务生成模型及二者的对应关系,预设于所述系统数据库中;
若所述系统数据库中未存储实时批量任务的类型,根据实时批量任务的生成规则,创建批量任务生成模型;
根据创建的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
4.如权利要求1所述的批量任务生成方法,其特征在于,所述需求信息还包括实时批量任务之间的关联关系;
所述批量任务生成方法还包括:
生成分支机构所需的实时批量任务后,根据实时批量任务之间的关联关系,确定所述实时批量任务的调度执行顺序。
5.如权利要求1或4所述的批量任务生成方法,其特征在于,所述需求信息还包括对实时批量任务的监控需求信息;
所述批量任务生成方法还包括:
根据所述监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息;
将所述监控结果信息发送给分支机构。
6.一种批量任务生成装置,其特征在于,包括:
实时需求接收模块,用于接收分支机构的实时批量任务的需求信息;其中,所述需求信息包括实时批量任务的所需数据的标识以及实时批量任务的生成规则,所述实时批量任务的生成规则用于表征所述实时批量任务的动作逻辑;
任务数据调用模块,用于根据实时批量任务的所需数据的标识,在系统数据库中选择实时批量任务的所需数据;其中,系统数据库中存储有用于生成批量任务的全量数据,所述系统数据库中还存储有不同的数据之间的关联关系,包括交易信息与客户信息、账户信息之间的关联关系,用以在进行批量任务生成时,选取所需数据,或者生成批量任务时、所选择的数据不全时,补全实时任务所需要的数据;
批量任务生成模块,用于根据实时批量任务的生成规则,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
7.如权利要求6所述的批量任务生成装置,其特征在于,所述批量任务生成模块具体用于:
根据实时批量任务的生成规则,确定实时批量任务的类型;
根据实时批量任务的类型,确定所述类型对应的初始批量任务生成模型;
根据实时批量任务的生成规则,修改初始批量任务生成模型,得到修改后的批量任务生成模型;
根据修改后的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
8.如权利要求7所述的批量任务生成装置,其特征在于,批量任务的类型、初始批量任务生成模型及二者的对应关系,预设于所述系统数据库中;
所述批量任务生成模块具体用于:
若所述系统数据库中未存储实时批量任务的类型,根据实时批量任务的生成规则,创建批量任务生成模型;
根据创建的批量任务生成模型,组合调用实时批量任务的所需数据,生成分支机构所需的实时批量任务。
9.如权利要求6所述的批量任务生成装置,其特征在于,所述需求信息还包括实时批量任务之间的关联关系;
所述批量任务生成装置还包括:
任务调度模块,用于生成分支机构所需的实时批量任务后,根据实时批量任务之间的关联关系,确定所述实时批量任务的调度执行顺序。
10.如权利要求6或9所述的批量任务生成装置,其特征在于,所述需求信息还包括对实时批量任务的监控需求信息;
所述批量任务生成装置还包括:监控模块用于:
根据所述监控需求信息,监控实时批量任务的执行,得到实时批量任务的监控结果信息;
将所述监控结果信息发送给分支机构。
11.一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至5任一所述方法。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有执行权利要求1至5任一所述方法的计算机程序。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010655090.3A CN111651262B (zh) | 2020-07-09 | 2020-07-09 | 批量任务生成方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010655090.3A CN111651262B (zh) | 2020-07-09 | 2020-07-09 | 批量任务生成方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111651262A CN111651262A (zh) | 2020-09-11 |
CN111651262B true CN111651262B (zh) | 2023-09-22 |
Family
ID=72343211
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010655090.3A Active CN111651262B (zh) | 2020-07-09 | 2020-07-09 | 批量任务生成方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111651262B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112163023A (zh) * | 2020-09-29 | 2021-01-01 | 银盛支付服务股份有限公司 | 一种分润计算方法及系统 |
CN113360452A (zh) * | 2021-06-07 | 2021-09-07 | 中国工商银行股份有限公司 | 分布式文件生成方法及装置 |
CN114118811A (zh) * | 2021-11-29 | 2022-03-01 | 深圳壹账通智能科技有限公司 | 服务代码的生成、执行方法、装置、设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106445556A (zh) * | 2016-10-18 | 2017-02-22 | 中国银行股份有限公司 | 一种可视化代码生成方法及系统 |
CN107894953A (zh) * | 2017-11-21 | 2018-04-10 | 中国银行股份有限公司 | 一种银行应用测试数据的生成方法及装置 |
CN108829506A (zh) * | 2018-07-04 | 2018-11-16 | 中国建设银行股份有限公司 | 批量任务处理方法、装置及服务系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10339485B2 (en) * | 2012-12-14 | 2019-07-02 | International Business Machines Corporation | Efficiently generating test cases |
-
2020
- 2020-07-09 CN CN202010655090.3A patent/CN111651262B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106445556A (zh) * | 2016-10-18 | 2017-02-22 | 中国银行股份有限公司 | 一种可视化代码生成方法及系统 |
CN107894953A (zh) * | 2017-11-21 | 2018-04-10 | 中国银行股份有限公司 | 一种银行应用测试数据的生成方法及装置 |
CN108829506A (zh) * | 2018-07-04 | 2018-11-16 | 中国建设银行股份有限公司 | 批量任务处理方法、装置及服务系统 |
Also Published As
Publication number | Publication date |
---|---|
CN111651262A (zh) | 2020-09-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111651262B (zh) | 批量任务生成方法及装置 | |
CN110532536B (zh) | 一种规则配置方法及装置 | |
US8630969B2 (en) | Systems and methods for implementing business rules designed with cloud computing | |
CN115129304B (zh) | 一种基于零代码平台的可视化业务服务编排方法及装置 | |
CN111400011B (zh) | 一种实时任务调度方法、系统、设备及可读存储介质 | |
CN108268615B (zh) | 一种数据处理方法、装置以及系统 | |
CN111061733A (zh) | 数据处理方法、装置、电子设备和计算机可读存储介质 | |
CN112258306B (zh) | 账务信息核对的方法、装置、电子设备和存储介质 | |
CN112907346A (zh) | 一种对账数据处理方法及装置 | |
CN112367363A (zh) | 一种信息共享方法、装置、服务器及存储介质 | |
CN113570468A (zh) | 一种企业支付风控服务平台 | |
CN103064955A (zh) | 查询规划方法及装置 | |
US20220255989A1 (en) | Systems and methods for hybrid burst optimized regulated workload orchestration for infrastructure as a service | |
CN115170085A (zh) | 审批流程生成方法、装置、存储介质以及电子设备 | |
CN117055859A (zh) | 一种基于数据流程分析的低代码开发系统 | |
CN116151774A (zh) | 一种自动生成协议模板的可视化管理方法和系统、电子设备 | |
CN110866813A (zh) | 管理会计用智能记账系统 | |
Souto et al. | COSMIC Sizing of RPA Software: A Case Study from a Proof of Concept Implementation in a Banking Organization. | |
CN113436018A (zh) | 一种资产托管业务处理方法、装置、存储介质及电子设备 | |
JP2020514907A (ja) | プロセス定義およびプロセス実行トラッキングのためのユーザインターフェイスおよびランタイム環境 | |
CN114372189A (zh) | 一种自定义报表的处理方法、装置、存储介质及电子设备 | |
CN115687054A (zh) | 基于业务分割还原的自适应测试方法以及装置 | |
CN114356884A (zh) | 数据迁移方法和装置 | |
CN109767248B (zh) | 客户需求信息处理方法、装置及系统 | |
CN108595488B (zh) | 数据迁移方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |