CN116627599A - 一种任务处理方法、装置、电子设备和存储介质 - Google Patents
一种任务处理方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN116627599A CN116627599A CN202310785710.9A CN202310785710A CN116627599A CN 116627599 A CN116627599 A CN 116627599A CN 202310785710 A CN202310785710 A CN 202310785710A CN 116627599 A CN116627599 A CN 116627599A
- Authority
- CN
- China
- Prior art keywords
- task
- subtasks
- node
- state
- nodes
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 14
- 238000012545 processing Methods 0.000 claims abstract description 89
- 238000000034 method Methods 0.000 claims abstract description 83
- 230000008569 process Effects 0.000 claims description 46
- 230000006870 function Effects 0.000 claims description 25
- 238000004590 computer program Methods 0.000 claims description 9
- 238000010276 construction Methods 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 8
- 230000005540 biological transmission Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/466—Transaction processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/546—Message passing systems or structures, e.g. queues
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请实施例提供一种任务处理方法、装置、电子设备和存储介质,其中,方法包括:接收第一任务;将第一任务拆分为多个子任务;构建多个子任务和第一任务的完成状态节点;根据多个子任务和第一任务的从属关系将多个子任务的完成状态节点和第一任务的完成状态节点进行连接,得到处理状态数据结构;将数据多个子任务推送到消息队列,多个订阅节点在消息队列中获取并执行多个子任务,多个订阅节点在根据子任务的完成状态更新子任务对应的完成状态节点;在处理状态数据结构中确定关键节点;获取关键节点的状态;根据关键节点的状态判断第一任务是否完成。实施上述实施例,能够加快任务处理速度,快速获取任务处理结果。
Description
技术领域
本申请涉及金融科技领域,具体而言,涉及一种任务处理方法、装置、电子设备和计算机可读存储介质。
背景技术
在银行开发业务需求中,往往存在这样一种特定的业务功能:执行流程长,关键事件多,业务互相堆砌,需要实现幂等。对于这种业务执行链路十分冗长,也相当耗时,服务器承载压力大。
发明内容
本申请实施例的目的在于提供一种任务处理方法、装置、电子设备和计算机可读存储介质,能够利用服务器集群的优势,快速将任务发送到不同的节点进行处理,并且快速地获取任务的处理状态。
第一方面,本申请实施例提供了一种任务处理方法,包括:
接收第一任务;
将所述第一任务拆分为多个子任务;
构建所述多个子任务和所述第一任务的完成状态节点;
根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构;
将所述数据多个子任务推送到消息队列,多个订阅节点在所述消息队列中获取并执行所述多个子任务,所述多个订阅节点在根据所述子任务的完成状态更新所述子任务对应的完成状态节点;
在所述处理状态数据结构中确定关键节点;
获取所述关键节点的状态;
根据所述关键节点的状态判断所述第一任务是否完成。
在上述实现过程中,在接收第一任务之后讲第一任拆分为多个子任务,分别为多个子任务、第一任务构建完成状态节点,基于完成状态节点、第一任务之间的从属关系构建处理状态数据结构,通过消息队列将多个子任务分散到多个订阅节点,订阅节点在消息队列中获取子任务,并根据子任务的完成状态更新处理状态数据结构,基于处理状态数据结构的关键节点的状态,即可快速获取整个第一任务的完成状态。上述实施方式充分调动了所有订阅节点的工作能力以及多个订阅节点之间的信息传输能力,通过处理状态数据结构将订阅节点的子任务处理完成状态进行整合,最终得到一任务的完成状态。
进一步地,在所述将所述多个第一任务拆分为多个子任务之后,还包括:
将每个所述子任务拆分为至少一个进程;
所述构建所述多个子任务和所述第一任务的完成状态节点,包括:
构建所述多个子任务和所述第一任务的完成状态节点和每个所述子任务的至少一个进程的完成状态节点;
所述处理状态数据结构为树形数据结构;
所述根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构,包括:
当第一子任务是第二子任务/第一任务的直接子任务时,将所述第一子任务对应的完成状态节点作为所述第二子任务/第一任务对应的完成状态节点的子节点;
当第一进程是第三子任务/第一任务的直接进程时,将所述第一进程对应的完成状态节点作为所述第三子任务/第一任务对应的完成状态节点的子节点。
在上述实现过程中,将子任务进行进一步拆分,得到子任务对应的执行进程,处理状态数据结构的具体数据结构是树形数据结构,树形数据结构本身具有父节点、子节点、根节点等概念,不同节点之间的关系和子任务、第一任务之间的关系相同,便于进行管理和映射。通过上述方法,能够通过父节点的工作状态知晓其子节点的工作状态,便于快速地了解当前任何子任务/第一任务的完成状态。
进一步地,所述在所述处理状态数据结构中确定关键节点,包括:
将所述处理状态数据结构的根节点作为所述关键节点。
在上述实现过程中,树形数据结构的根节点是树形数据结构中其他节点的祖先节点,同时数据结构的根节点是树形数据结构的入口,因此,将处理状态数据结构的根节点作为关键节点能够快速地获取第一任务的完成状态。
进一步地,所述处理状态数据结构的节点包括:完成和取消;
所述方法还包括:定时遍历所述树形数据结构,若所述树形数据结构的当前节点的子节点均为完成,更新所述当前节点的完成状态为完成,若所述当前节点存在取消状态的子节点,更新所述当前节点的完成状态为取消。
在上述实现过程中,通过上述方法,能够通过父节点的工作状态知晓其子节点的工作状态,便于快速地了解当前任何子任务/第一任务的完成状态。
进一步地,所述方法还包括:预先生成处理任务表,所述处理任务表中包括:多个没有依赖关系的第一任务,所述第一任务为银行业务;
所述接收第一任务,包括:
接收第二任务,根据所述处理任务表将所述第一任务拆分为多个没有依赖关系的第一任务,将所述第一任务发送到不同的服务器集群。
在上述实现过程中,将第二任务拆分为多个没有依赖关系的第一任务,将多个第一任务发送到不同的服务器集群进行处理,能够提高第一任务的完成速度。
进一步地,所述方法还包括:预先生成服务器功能表,所述服务器功能表中包括;不同的服务器对应的功能和不同的服务器对应的消息队列;
所述将所述数据多个子任务推送到消息队列,包括:
根据所述服务器功能表确定所述多个子任务对应的目标消息队列;
将所述多个子任务推送到对应的目标消息队列。
在上述实现过程中,根据服务器功能表确定多个子任务对应的目标消息队列,将多个子任务推送到对应的目标消息队列,能够将多个子任务有序分配。
进一步地,所述消息队列具有多个;
所述将所述数据多个子任务推送到消息队列,包括:
根据所述消息队列的当前处理量将所述多个子任务推送到消息队列。
第二方面,本申请实施例提供一种任务处理装置,包括:
接收模块,用于接收第一任务;
拆分模块,用于将所述第一任务拆分为多个子任务;
节点构建模块,用于构建所述多个子任务和所述第一任务的完成状态节点;
连接模块,用于根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构;
推送模块,用于将所述数据多个子任务推送到消息队列,多个订阅节点在所述消息队列中获取并执行所述多个子任务,所述多个订阅节点在根据所述子任务的完成状态更新所述子任务对应的完成状态节点;
关键节点确定模块,用于在所述处理状态数据结构中确定关键节点;
状态获取模块,用于获取所述关键节点的状态;
判断模块,用于根据所述关键节点的状态判断所述第一任务是否完成。
在上述实现过程中,在接收第一任务之后讲第一任拆分为多个子任务,分别为多个子任务、第一任务构建完成状态节点,基于完成状态节点、第一任务之间的从属关系构建处理状态数据结构,通过消息队列将多个子任务分散到多个订阅节点,订阅节点在消息队列中获取子任务,并根据子任务的完成状态更新处理状态数据结构,基于处理状态数据结构的关键节点的状态,即可快速获取整个第一任务的完成状态。上述实施方式充分调动了所有订阅节点的工作能力以及多个订阅节点之间的信息传输能力,通过处理状态数据结构将订阅节点的子任务处理完成状态进行整合,最终得到一任务的完成状态。
第三方面,本申请实施例提供的一种电子设备,包括:存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面任一项所述的方法的步骤。
第四方面,本申请实施例提供的一种计算机可读存储介质,所述计算机可读存储介质上存储有指令,当所述指令在计算机上运行时,使得所述计算机执行如第一方面任一项所述的方法。
第五方面,本申请实施例提供的一种计算机程序产品,所述计算机程序产品在计算机上运行时,使得计算机执行如第一方面任一项所述的方法。
本申请公开的其他特征和优点将在随后的说明书中阐述,或者,部分特征和优点可以从说明书推知或毫无疑义地确定,或者通过实施本申请公开的上述技术即可得知。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本申请实施例提供的任务处理方法的流程示意图;
图2为本申请实施例提供的处理状态数据结构的示意图;
图3为本申请实施例提供的任务处理装置的示意图;
图4为本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本申请的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
参见图1,本申请实施例提供一种任务处理方法、装置、电子设备和存储介质,可应用于服务器中,用于对大型任务进行处理。其中,服务器可以是独立的服务器或者是多个服务器组成的服务器集群来实现,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能采样点设备等基础云计算服务的云服务器。参见图1,方法包括:
S1:接收第一任务;
S2:将所述第一任务拆分为多个子任务;
S3:构建所述多个子任务和所述第一任务的完成状态节点;
S4:根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构;
S5:将所述数据多个子任务推送到消息队列,多个订阅节点在所述消息队列中获取并执行所述多个子任务,所述多个订阅节点在根据所述子任务的完成状态更新所述子任务对应的完成状态节点;
S6:在所述处理状态数据结构中确定关键节点;
S7:获取所述关键节点的状态;
S8:根据所述关键节点的状态判断所述第一任务是否完成。
上述实施例中,第一任务可以是银行业务,比如,批量更新用户资料,批量获取用户资料,对大量用户的信用状态进行预测等,这些任务的处理过程较长,消耗的服务器资源较多,如果将第一任务交由一个服务器或服务器集群处理,耗费时间过多,降低了效率。拆分的多个子任务可以是在数据库中获取数据、将数据中的第一子数据进行处理、将数据中的第二资数据进行处理,划分的方式具有多种。
在一些实施例中,可以采用redisi来实现处理状态数据结构。
Redis(Remote Dictionary Server ),即远程字典服务,是一个开源的使用ANSIC语言编写、支持网络、可基于内存亦可持久化的日志型、Key-Value数据库,并提供多种语言的API。
在上述实现过程中,在接收第一任务之后讲第一任拆分为多个子任务,分别为多个子任务、第一任务构建完成状态节点,基于完成状态节点、第一任务之间的从属关系构建处理状态数据结构,通过消息队列将多个子任务分散到多个订阅节点,订阅节点在消息队列中获取子任务,并根据子任务的完成状态更新处理状态数据结构,基于处理状态数据结构的关键节点的状态,即可快速获取整个第一任务的完成状态。上述实施方式充分调动了所有订阅节点的工作能力以及多个订阅节点之间的信息传输能力,通过处理状态数据结构将订阅节点的子任务处理完成状态进行整合,最终得到一任务的完成状态。
进一步地,在所述将所述多个第一任务拆分为多个子任务之后,还包括:
将每个所述子任务拆分为至少一个进程;
所述构建所述多个子任务和所述第一任务的完成状态节点,包括:
构建所述多个子任务和所述第一任务的完成状态节点和每个所述子任务的至少一个进程的完成状态节点;
所述处理状态数据结构为树形数据结构;
所述根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构,包括:
当第一子任务是第二子任务/第一任务的直接子任务时,将所述第一子任务对应的完成状态节点作为所述第二子任务/第一任务对应的完成状态节点的子节点;
当第一进程是第三子任务/第一任务的直接进程时,将所述第一进程对应的完成状态节点作为所述第三子任务/第一任务对应的完成状态节点的子节点。
示例性地,参见图2,为本申请实施例提供的完成状态的数据结构的示意图,根节点为第一任务,将第一任务划分为多个子任务,多个子任务又可以划分为各自的进程。每个进程被推送到消息队列中,消息队列的订阅节点(服务器或者服务器集群)从消息队列中取出进程相关信息,并根据进程相关信息进行实例化。
可以理解的是,只有树形数据结构中的叶子节点对应的任务/进程才会被推送到消息队列中并被执行,叶子节点的状态是订阅节点更新的,而其他节点是根据叶子节点的状态而更新的,更新方法在本申请的其他部分描述。
在上述实现过程中,将子任务进行进一步拆分,得到子任务对应的执行进程,处理状态数据结构的具体数据结构是树形数据结构,树形数据结构本身具有父节点、子节点、根节点等概念,不同节点之间的关系和子任务、第一任务之间的关系相同,便于进行管理和映射。通过上述方法,能够通过父节点的工作状态知晓其子节点的工作状态,便于快速地了解当前任何子任务/第一任务的完成状态。
进一步地,所述在所述处理状态数据结构中确定关键节点,包括:
将所述处理状态数据结构的根节点作为所述关键节点。
在上述实现过程中,树形数据结构的根节点是树形数据结构中其他节点的祖先节点,同时数据结构的根节点是树形数据结构的入口,因此,将处理状态数据结构的根节点作为关键节点能够快速地获取第一任务的完成状态。
进一步地,所述处理状态数据结构的节点包括:完成和取消;
所述方法还包括:定时遍历所述树形数据结构,若所述树形数据结构的当前节点的子节点均为完成,更新所述当前节点的完成状态为完成,若所述当前节点存在取消状态的子节点,更新所述当前节点的完成状态为取消。
在上述实现过程中,通过上述方法,能够通过父节点的工作状态知晓其子节点的工作状态,便于快速地了解当前任何子任务/第一任务的完成状态。
进一步地,所述方法还包括:预先生成处理任务表,所述预先平行处理任务表中包括:多个没有依赖关系的第一任务,所述第一任务为银行业务;
所述接收第一任务,包括:
接收第二任务,根据所述处理任务表将所述第一任务拆分为多个没有依赖关系的第一任务,将所述第一任务发送到不同的服务器集群。
上述实施例中,如果A任务的完成前提是B任务首先完成,那么A任务和B任务具有依赖关系。
在上述实现过程中,将第二任务拆分为多个没有依赖关系的第一任务,将多个第一任务发送到不同的服务器集群进行处理,能够提高第一任务的完成速度。
进一步地,所述方法还包括:预先生成服务器功能表,所述服务器功能表中包括;不同的服务器对应的功能和不同的服务器对应的消息队列;
所述将所述数据多个子任务推送到消息队列,包括:
根据所述服务器功能表确定所述多个子任务对应的目标消息队列;
将所述多个子任务推送到对应的目标消息队列。
在上述实现过程中,根据服务器功能表确定多个子任务对应的目标消息队列,将多个子任务推送到对应的目标消息队列,能够将多个子任务有序分配。
进一步地,所述消息队列具有多个,根据所述消息队列的当前处理量将所述多个子任务推送到消息队列。
本申请实施例提供一种任务处理装置,包括:
接收模块1,用于接收第一任务;
拆分模块2,用于将所述第一任务拆分为多个子任务;
节点构建模块3,用于构建所述多个子任务和所述第一任务的完成状态节点;
连接模块4,用于根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构;
推送模块5,用于将所述数据多个子任务推送到消息队列,多个订阅节点在所述消息队列中获取并执行所述多个子任务,所述多个订阅节点在根据所述子任务的完成状态更新所述子任务对应的完成状态节点;
关键节点确定模块6,用于在所述处理状态数据结构中确定关键节点;
状态获取模块7,用于获取所述关键节点的状态;
判断模块8,用于根据所述关键节点的状态判断所述第一任务是否完成。
在上述实现过程中,在接收第一任务之后讲第一任拆分为多个子任务,分别为多个子任务、第一任务构建完成状态节点,基于完成状态节点、第一任务之间的从属关系构建处理状态数据结构,通过消息队列将多个子任务分散到多个订阅节点,订阅节点在消息队列中获取子任务,并根据子任务的完成状态更新处理状态数据结构,基于处理状态数据结构的关键节点的状态,即可快速获取整个第一任务的完成状态。上述实施方式充分调动了所有订阅节点的工作能力以及多个订阅节点之间的信息传输能力,通过处理状态数据结构将订阅节点的子任务处理完成状态进行整合,最终得到一任务的完成状态。
在一些实施例中,拆分模块还用于将每个所述子任务拆分为至少一个进程;
所述构建所述多个子任务和所述第一任务的完成状态节点,包括:
构建所述多个子任务和所述第一任务的完成状态节点和每个所述子任务的至少一个进程的完成状态节点;
所述处理状态数据结构为树形数据结构;
连接模块还用于当第一子任务是第二子任务/第一任务的直接子任务时,将所述第一子任务对应的完成状态节点作为所述第二子任务/第一任务对应的完成状态节点的子节点;
当第一进程是第三子任务/第一任务的直接进程时,将所述第一进程对应的完成状态节点作为所述第三子任务/第一任务对应的完成状态节点的子节点。
在一些实施例中,关键节点确定模块还用于将所述处理状态数据结构的根节点作为所述关键节点。
在一些实施例中,所述处理状态数据结构的节点包括:完成和取消;所述装置还包括:更新模块,用于定时遍历所述树形数据结构,若所述树形数据结构的当前节点的子节点均为完成,更新所述当前节点的完成状态为完成,若所述当前节点存在取消状态的子节点,更新所述当前节点的完成状态为取消。
在一些实施例中,装置还包括:处理任务表生成模块,用于预先生成处理任务表,所述预先平行处理任务表中包括:多个没有依赖关系的第一任务,所述第一任务为银行业务;所述接收模块还用于接收第二任务,根据所述处理任务表将所述第一任务拆分为多个没有依赖关系的第一任务,将所述第一任务发送到不同的服务器集群。
在一些实施例中,装置还包括:服务器功能表生成模块,用于预先生成服务器功能表,所述服务器功能表中包括;不同的服务器对应的功能和不同的服务器对应的消息队列;
推送模块还用于根据所述服务器功能表确定所述多个子任务对应的目标消息队列;
将所述多个子任务推送到对应的目标消息队列。
在一些实施例中,所述消息队列具有多个;
所述推送模块还用于根据所述消息队列的当前处理量将所述多个子任务推送到消息队列。
本申请还提供一种电子设备,请参见图4,图4为本申请实施例提供的一种电子设备的结构框图。电子设备可以包括处理器41、通信接口42、存储器43和至少一个通信总线44。其中,通信总线44用于实现这些组件直接的连接通信。其中,本申请实施例中电子设备的通信接口42用于与其他节点设备进行信令或数据的通信。处理器41可以是一种集成电路芯片,具有信号的处理能力。
上述的处理器41可以是通用处理器,包括中央处理器(CPU,CentralProcessingUnit)、网络处理器(NP,NetworkProcessor)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器41也可以是任何常规的处理器等。
存储器43可以是,但不限于,随机存取存储器(RAM,RandomAccessMemory),只读存储器(ROM,Read Only Memory),可编程只读存储器(PROM ,Programmable Read-OnlyMemory),可擦除只读存储器(EPROM ,Erasable Programmable Read-Only Memory),电可擦除只读存储器(EEPROM ,Electric Erasable Programmable Read-Only Memory)等。存储器43中存储有计算机可读取指令,当所述计算机可读取指令由所述处理器41执行时,电子设备可以执行上述方法实施例涉及的各个步骤。
可选地,电子设备还可以包括存储控制器、输入输出单元。
所述存储器43、存储控制器、处理器41、外设接口、输入输出单元各元件相互之间直接或间接地电性连接,以实现数据的传输或交互。例如,这些元件相互之间可通过一条或多条通信总线44实现电性连接。所述处理器41用于执行存储器43中存储的可执行模块,例如电子设备包括的软件功能模块或计算机程序。
输入输出单元用于提供给用户创建任务以及为该任务创建启动可选时段或预设执行时间以实现用户与服务器的交互。所述输入输出单元可以是,但不限于,鼠标和键盘等。
可以理解,图4所示的结构仅为示意,所述电子设备还可包括比图4中所示更多或者更少的组件,或者具有与图4所示不同的配置。图4中所示的各组件可以采用硬件、软件或其组合实现。
本申请实施例还提供一种存储介质,所述存储介质上存储有指令,当所述指令在计算机上运行时,所述计算机程序被处理器执行时实现方法实施例所述的方法,为避免重复,此处不再赘述。
本申请还提供一种计算机程序产品,所述计算机程序产品在计算机上运行时,使得计算机执行方法实施例所述的方法。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本申请的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅为本申请的实施例而已,并不用于限制本申请的保护范围,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应所述以权利要求的保护范围为准。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
Claims (10)
1.一种任务处理方法,其特征在于,包括:
接收第一任务;
将所述第一任务拆分为多个子任务;
构建所述多个子任务和所述第一任务的完成状态节点;
根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构;
将所述数据多个子任务推送到消息队列,多个订阅节点在所述消息队列中获取并执行所述多个子任务,所述多个订阅节点在根据所述子任务的完成状态更新所述子任务对应的完成状态节点;
在所述处理状态数据结构中确定关键节点;
获取所述关键节点的状态;
根据所述关键节点的状态判断所述第一任务是否完成。
2.根据权利要求1所述的任务处理方法,其特征在于,在所述将所述第一任务拆分为多个子任务之后,还包括:
将每个所述子任务拆分为至少一个进程;
所述构建所述多个子任务和所述第一任务的完成状态节点,包括:
构建所述多个子任务和所述第一任务的完成状态节点和每个所述子任务的至少一个进程的完成状态节点;
所述处理状态数据结构为树形数据结构;
所述根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构,包括:
当第一子任务是第二子任务/第一任务的直接子任务时,将所述第一子任务对应的完成状态节点作为所述第二子任务/第一任务对应的完成状态节点的子节点;
当第一进程是第三子任务/第一任务的直接进程时,将所述第一进程对应的完成状态节点作为所述第三子任务/第一任务对应的完成状态节点的子节点。
3.根据权利要求2所述的任务处理方法,其特征在于,所述在所述处理状态数据结构中确定关键节点,包括:
将所述处理状态数据结构的根节点作为所述关键节点。
4.根据权利要求2所述的任务处理方法,其特征在于,所述处理状态数据结构的节点包括:完成和取消;
所述方法还包括:定时遍历所述树形数据结构,若所述树形数据结构的当前节点的子节点均为完成,更新所述当前节点的完成状态为完成,若所述当前节点存在取消状态的子节点,更新所述当前节点的完成状态为取消。
5.根据权利要求1所述的任务处理方法,其特征在于,所述方法还包括:预先生成处理任务表,所述处理任务表中包括:多个没有依赖关系的第一任务,所述第一任务为银行业务;
所述接收第一任务,包括:
接收第二任务,根据所述处理任务表将所述第一任务拆分为多个没有依赖关系的第一任务,将所述第一任务发送到不同的服务器集群。
6.根据权利要求1所述的任务处理方法,其特征在于,所述方法还包括:预先生成服务器功能表,所述服务器功能表中包括;不同的服务器对应的功能和不同的服务器对应的消息队列;
所述将所述数据多个子任务推送到消息队列,包括:
根据所述服务器功能表确定所述多个子任务对应的目标消息队列;
将所述多个子任务推送到对应的目标消息队列。
7.根据权利要求1所述的任务处理方法,其特征在于,所述消息队列具有多个;
所述将所述数据多个子任务推送到消息队列,包括:
根据所述消息队列的当前处理量将所述多个子任务推送到消息队列。
8.一种任务处理装置,其特征在于,包括:
接收模块,用于接收第一任务;
拆分模块,用于将所述第一任务拆分为多个子任务;
节点构建模块,用于构建所述多个子任务和所述第一任务的完成状态节点;
连接模块,用于根据所述多个子任务和所述第一任务的从属关系将所述多个子任务的完成状态节点和所述第一任务的完成状态节点进行连接,得到处理状态数据结构;
推送模块,用于将所述数据多个子任务推送到消息队列,多个订阅节点在所述消息队列中获取并执行所述多个子任务,所述多个订阅节点在根据所述子任务的完成状态更新所述子任务对应的完成状态节点;
关键节点确定模块,用于在所述处理状态数据结构中确定关键节点;
状态获取模块,用于获取所述关键节点的状态;
判断模块,用于根据所述关键节点的状态判断所述第一任务是否完成。
9.一种电子设备,其特征在于,包括:存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1-7任一项所述的方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有指令,当所述指令在计算机上运行时,使得所述计算机执行如权利要求1-7任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310785710.9A CN116627599A (zh) | 2023-06-29 | 2023-06-29 | 一种任务处理方法、装置、电子设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310785710.9A CN116627599A (zh) | 2023-06-29 | 2023-06-29 | 一种任务处理方法、装置、电子设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116627599A true CN116627599A (zh) | 2023-08-22 |
Family
ID=87592222
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310785710.9A Pending CN116627599A (zh) | 2023-06-29 | 2023-06-29 | 一种任务处理方法、装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116627599A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117149887A (zh) * | 2023-11-01 | 2023-12-01 | 建信金融科技有限责任公司 | 一种异常处理方法、装置、电子设备及计算机可读介质 |
-
2023
- 2023-06-29 CN CN202310785710.9A patent/CN116627599A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117149887A (zh) * | 2023-11-01 | 2023-12-01 | 建信金融科技有限责任公司 | 一种异常处理方法、装置、电子设备及计算机可读介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10146599B2 (en) | System and method for a generic actor system container application | |
CN109716320B (zh) | 用于事件处理的图生成的方法、系统、介质和应用处理引擎 | |
CN110807067B (zh) | 关系型数据库和数据仓库的数据同步方法、装置及设备 | |
US11327749B2 (en) | System and method for generating documentation for microservice based applications | |
US10776107B2 (en) | Microservice-based data processing apparatus, method, and program | |
US9674294B1 (en) | Integrated collaboration environment | |
US20200159718A1 (en) | Workflow dependency management system | |
CN109117252B (zh) | 基于容器的任务处理的方法、系统及容器集群管理系统 | |
WO2013148488A1 (en) | A method and system for centralized issue tracking | |
CN110249312B (zh) | 用于将数据集成作业从源框架转换到目标框架的方法和系统 | |
CN111427748A (zh) | 任务告警方法、系统、设备及存储介质 | |
CN116627599A (zh) | 一种任务处理方法、装置、电子设备和存储介质 | |
US20150019284A1 (en) | Dynamically modifying business processes based on real-time events | |
CN112434982A (zh) | 任务处理方法、装置、系统、存储介质及电子设备 | |
CN111221871A (zh) | 实时查询任务发布方法、平台、设备及存储介质 | |
Altiok | Queueing modeling of a single processor with failures | |
US9059992B2 (en) | Distributed mobile enterprise application platform | |
Chen et al. | Related technologies | |
CN115080570A (zh) | 一种基于图数据库的字段血缘处理方法及系统 | |
US20180082241A1 (en) | Processing records by combining visualforce and queueables technologies in the salesforce platform | |
CN115526224A (zh) | 用于信息技术操作的人工智能的随机事件分类 | |
Mikkelsen et al. | Architectural Principles for Autonomous Microservices. | |
Pouchard et al. | Challenges for implementing fair digital objects with high performance workflows | |
US20230010906A1 (en) | System event analysis and data management | |
CN112950138B (zh) | 协同开发的状态管理方法、装置和服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |