CN114201285A - 事件异步化处理方法、装置、计算机设备及存储介质 - Google Patents

事件异步化处理方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN114201285A
CN114201285A CN202111559128.8A CN202111559128A CN114201285A CN 114201285 A CN114201285 A CN 114201285A CN 202111559128 A CN202111559128 A CN 202111559128A CN 114201285 A CN114201285 A CN 114201285A
Authority
CN
China
Prior art keywords
data
processed
state
asynchronous
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111559128.8A
Other languages
English (en)
Inventor
姜喜秋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An E Wallet Electronic Commerce Co Ltd
Original Assignee
Ping An E Wallet Electronic Commerce Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An E Wallet Electronic Commerce Co Ltd filed Critical Ping An E Wallet Electronic Commerce Co Ltd
Priority to CN202111559128.8A priority Critical patent/CN114201285A/zh
Publication of CN114201285A publication Critical patent/CN114201285A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/54—Interprogram communication
    • G06F9/546—Message passing systems or structures, e.g. queues
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0207—Discounts or incentives, e.g. coupons or rebates
    • G06Q30/0208—Trade or exchange of goods or services in exchange for incentives or rewards
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/08—Insurance

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Technology Law (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及大数据技术，提供了事件异步化处理方法、装置、设备及介质，是先获取待处理数据，然后若确定异步处理状态为开启状态，将待处理数据写入异步事件表以进行保存并将状态切换为初始状态，之后若确定通过批处理调度获取到待处理数据，将其状态切换为处理中状态，及根据异步事件表中待处理数据的异步事件编码确定待处理数据的第一输出结果，若确定待处理数据的第一输出结果与待处理数据的元信息满足转换条件，将其状态切换为第一输出标签状态，最后若确定待处理数据的第一输出结果与待处理数据的元信息不满足转换条件，将其状态切换为第二输出标签状态。实现了基于状态机的异步事件加调度配合确保数据处理的时效性，提高数据处理效率。

Description

事件异步化处理方法、装置、计算机设备及存储介质
技术领域
本发明涉及大数据的数据处理技术领域，尤其涉及一种事件异步化处理方法、装置、计算机设备及存储介质。
背景技术
目前，许多网上购物平台或者是投保平台，都支持积分抵扣金额进行交易的方式。例如以投保平台为例，投保平台出现积分扣分交易接口耗时较长，经排查为归集流水和异步应计流水过多导致耗时较长。积分会员进行积分消费，扣分接口会对账户根据商户进行积分扣减操作。其中账户包括资产、渠道、归集、应计四层账户，资产层、渠道层、归集层实时记录交易动账信息，应计层的应计流水记录则为对账提供依据。归集层实时动账完成后，将归集流水和资产渠道账户信息拼接后批量插入归集同步流水表，作为异步应计流水处理的数据源。部分交易接口耗时过长则是由于归集流水记录过多。大部分消费扣分交易99线在122ms-800ms之间，为上游可接受范围，少部分最差时长为5s-7s，影响业务时效性。
为异步补应计流水而采取的拼接和插入归集同步流水表记录过多，是影响业务时效的关键处。在此处直接将拼接后消息批量进行发Q处理(发Q处理即发送至消息队列)，对于实时接口并不能从根本上减少耗时，也就无法提高整体流程的数据处理效率。
发明内容
本发明实施例提供了一种事件异步化处理方法、装置、计算机设备及存储介质，旨在解决现有技术中在积分扣分交易接口的归集层实时动账完成后，将归集流水和资产渠道账户信息拼接后批量插入归集同步流水表，直接将拼接后消息批量进行发消息队列处理，无法减少耗时，降低整体数据处理效率的问题。
第一方面，本发明实施例提供了一种事件异步化处理方法，其包括：
响应于用户账户数据变化指令，获取与所述用户账户数据变化指令对应的待处理数据；
若确定异步处理状态为开启状态，将所述待处理数据写入异步事件表以保存，及将所述待处理数据的状态切换为初始状态；
若确定通过批处理调度获取到所述异步事件表中的所述待处理数据，将所述待处理数据的状态切换为处理中状态，及根据所述异步事件表中所述待处理数据的异步事件编码确定所述待处理数据的第一输出结果；
若确定所述待处理数据的第一输出结果与所述待处理数据的元信息满足预设的转换条件，将所述待处理数据的状态切换为第一输出标签状态；以及
若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，将所述待处理数据的状态切换为第二输出标签状态。
第二方面，本发明实施例提供了一种事件异步化处理装置，其包括：
待处理数据获取单元，用于响应于用户账户数据变化指令，获取与所述用户账户数据变化指令对应的待处理数据；
第一异步处理单元，用于若确定异步处理状态为开启状态，将所述待处理数据写入异步事件表以保存，及将所述待处理数据的状态切换为初始状态；
第二异步处理单元，用于若确定通过批处理调度获取到所述异步事件表中的所述待处理数据，将所述待处理数据的状态切换为处理中状态，及根据所述异步事件表中所述待处理数据的异步事件编码确定所述待处理数据的第一输出结果；
第三异步处理单元，用于若确定所述待处理数据的第一输出结果与所述待处理数据的元信息满足预设的转换条件，将所述待处理数据的状态切换为第一输出标签状态；以及
第四异步处理单元，用于若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，将所述待处理数据的状态切换为第二输出标签状态。
第三方面，本发明实施例又提供了一种计算机设备，其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面所述的事件异步化处理方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其中所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的事件异步化处理方法。
本发明实施例提供了一种事件异步化处理方法、装置、计算机设备及存储介质，先获取待处理数据，然后若确定异步处理状态为开启状态，将待处理数据写入异步事件表以进行保存，及将待处理数据的状态切换为初始状态，之后若确定通过批处理调度获取到异步事件表中的待处理数据，将待处理数据的状态切换为处理中状态，及根据异步事件表中待处理数据的异步事件编码确定待处理数据的第一输出结果，若确定待处理数据的第一输出结果与待处理数据的元信息满足预设的转换条件，将待处理数据的状态切换为第一输出标签状态，最后若确定待处理数据的第一输出结果与待处理数据的元信息不满足预设的转换条件，将待处理数据的状态切换为第二输出标签状态。实现了基于状态机的异步事件加调度配合确保数据处理的时效性，提高数据处理效率。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的事件异步化处理方法的应用场景示意图；
图2为本发明实施例提供的事件异步化处理方法的流程示意图；
图3为本发明实施例提供的事件异步化处理装置的示意性框图；
图4为本发明实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
请参阅图1和图2，图1为本发明实施例提供的事件异步化处理方法的应用场景示意图；图2为本发明实施例提供的事件异步化处理方法的流程示意图，该事件异步化处理方法应用于服务器中，该方法通过安装于服务器中的应用软件进行执行。
如图2所示，该方法包括步骤S101～S105。
S101、响应于用户账户数据变化指令，获取与所述用户账户数据变化指令对应的待处理数据。
在本实施例中，是以服务器为执行主体描述技术方案，而且本申请以用户通过积分消费购买产品，积分扣分接口会对用户账户根据产品相应商户进行积分扣减操作的具体应用场景为例来说明，当用户操作用户端选购商品并选择采用积分抵扣现金进行支付操作时会触发产生用户账户数据变化指令并发送至服务器。一般用户的账号是包括资产层、渠道层、归集层、应计层这四层账户，资产层、渠道层和归集层实时记录交易动账信息，应计层的应计流水记录则为对账提供依据。归集层实时动账完成后，将归集流水和资产渠道账户信息拼接后批量插入归集同步流水表，作为异步应计流水处理的数据源。若直接将归集同步流水表批量发送至消息队列处理仍无法确保减少耗时，此时可以在归集层动账完成后，新建异步事件表，将交易元信息交易号、商户、会员、交易类型等信息写入异步事件表，用一条异步事件记录作为异步补应计流水处理的数据源，这样就避免了拼接归集流水和批量插入归集同步流水表导致的耗时。其中，可以将服务器检测到的与所述用户账户数据变化指令对应的待处理数据作为一条异步事件记录数据写入异步事件表。
S102、若确定异步处理状态为开启状态，将所述待处理数据写入异步事件表以保存，及将所述待处理数据的状态切换为初始状态。
在本实施例中，由于在服务器中预先创建了异步事件表，异步事件表是对应部署在Oracle等数据库关系型中，该异步事件表受异步开关的控制，若异步开关打开时则异步事件表为生效状态，表示可写入数据至异步事件表。一旦服务器中有检测到待处理数据时，是先将待处理数据作为一条异步事件记录数据写入异步事件表，同时将所述待处理数据的异步事件状态机的状态切换为初始状态。其中，异步事件状态机的状态切换过程中采用悲观锁，以确保在状态切换过程中，将异步事件表中的数据处于锁定状态，确保数据不易发生变动导致数据处理过程错误。在后续步骤中只要异步事件状态机的状态发生切换，均在异步事件状态机的状态切换过程中采用悲观锁。
在一实施例中，步骤S102之后还包括：
根据所述待处理数据写入异步事件表的写入事件类型确定异步事件编码。
在本实施例中，由于异步事件表中可以写入多条异步事件记录数据，此时可以先获取所述待处理数据这一条异步事件记录数据对应的写入事件类型，例如在积分扣分接口的应计层，既处理异步补应计流水且处理C-商户补贷记业务则确定异步事件编码为11，既不处理异步补应计流水且不处理C-商户补贷记业务则确定异步事件编码为00，不处理异步补应计流水且只处理C-商户补贷记业务则确定异步事件编码为01，不处理异步补应计流水且只处理C-商户补贷记业务则确定异步事件编码为10。可见，以异步事件编码来标识各待处理的异步事件，可以有效将不同的异步事件进行区分以分开异步处理。
在一实施例中，步骤S101之后还包括：
若确定异步处理状态为关闭状态，将所述待处理数据对应生成流水号，及将所述待处理数据以原始调度方式进行运算，得到输出结果。
在本实施例中，由于异步事件表受异步开关的控制，若异步开关是关闭状态时则表示异步事件表为未生效状态，表示不可写入数据至异步事件表，此时直接基于待处理数据对应生成流水号(流水号可以理解为动账流水号)，然后将所述待处理数据以原始调度方式进行运算得到输出结果。其中，原始调度方式是指原本处理应计动账流水的调度。
S103、若确定通过批处理调度获取到所述异步事件表中的所述待处理数据，将所述待处理数据的状态切换为处理中状态，及根据所述异步事件表中所述待处理数据的异步事件编码确定所述待处理数据的第一输出结果。
在本实施例中，当将待处理数据存储至异步事件表中后，具体是先将所述待处理数据的状态切换为处理中状态，然后将所述待处理数据通过消息队列发送(通过消息队列发送可以简记为发Q)至批处理调度，由批处理调度中的业务逻辑及所述异步事件编码对应的时间处理方式对所述待处理数据进行运算，得到第一输出结果。
在一实施例中，步骤S103包括：
将所述待处理数据通过消息队列发送至批处理调度对应的进程，及将所述待处理数据的状态由初始状态切换为处理中状态；
若确定所述异步事件编码为预设的第一编码值，获取与所述第一编码值对应的第一运算逻辑，将所述待处理数据在所述进程中以所述第一运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第二编码值，获取与所述第二编码值对应的第二运算逻辑，将所述待处理数据在所述进程中以所述第二运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第三编码值，获取与所述第三编码值对应的第三运算逻辑，将所述待处理数据在所述进程中以所述第三运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第四编码值，获取与所述第四编码值对应的第四运算逻辑，将所述待处理数据在所述进程中以所述第四运算逻辑进行运算得到第一输出结果。
在本实施例中，预设的第一编码值为00、第二编码值为01、第三编码值为10且第四编码值为11；若确定所述异步事件编码为预设的第一编码值(即00)表示既不处理异步补应计流水且不处理C-商户补贷记业务，此时获取第一编码值相应的第一运算逻辑且基于第一运算逻辑对所述待处理数据进行运算得到第一输出结果；若确定所述异步事件编码为预设的第二编码值(即01)表示不处理异步补应计流水且只处理C-商户补贷记业务，此时获取第二编码值相应的第二运算逻辑且基于第二运算逻辑对所述待处理数据进行运算得到第一输出结果；若确定所述异步事件编码为预设的第三编码值(即10)表示只处理异步补应计流水且不处理C-商户补贷记业务，此时获取第三编码值相应的第三运算逻辑且基于第三运算逻辑对所述待处理数据进行运算得到第一输出结果；若确定所述异步事件编码为预设的第四编码值(即11)表示既处理异步补应计流水且处理C-商户补贷记业务，此时获取第四编码值相应的第四运算逻辑且基于第四运算逻辑对所述待处理数据进行运算得到第一输出结果。可见，基于异步事件表包含异步事件编码对应处理数据，可根据该编码判断处理的业务类型，现处理异步补应计流水、C-商户补贷记业务，后期可增加拓展B端商户流水异步化，可扩展处理非时效性高的业务，若有新增业务可不影响原业务，使用灵活性高。
在一实施例中，所述将所述待处理数据的状态切换为处理中状态，包括：
将所述待处理数据的状态由初始状态切换为处理中状态。
在本实施例中，一旦通过批处理调度来获取所述异步事件表中的所述待处理数据进行计算处理时，需要及时的将所述待处理数据的状态由初始状态切换为处理中状态，以确保异步事件状态机的状态与当前数据处理过程相对应，从而正确标识数据处理状态。
S104、若确定所述待处理数据的第一输出结果与所述待处理数据的元信息满足预设的转换条件，将所述待处理数据的状态切换为第一输出标签状态。
在本实施例中，当基于异步事件表和批调度处理方式获取了与所述待处理数据对应的第一输出结果后，需要与待处理数据的元信息(待处理数据的元信息即处理补应计流水或补贷记等事务的元信息)，根据流水号、交易号等信息反查原交易信息，从而可以进一步确认处理结果的正确性。一旦确定第一输出结果与所述待处理数据的元信息满足预设的转换条件(例如元信息转换为第一输出结果的计算逻辑与批调度处理中采用的计算逻辑相同，可以判定为第一输出结果与所述待处理数据的元信息满足预设的转换条件)，则表示处理结果是正确的。
在一实施例中，所述将所述待处理数据的状态切换为第一输出标签状态，包括：
将所述待处理数据的状态由处理中状态切换为第一输出标签状态。
在本实施例中，此时将所述待处理数据的状态由处理中状态切换为第一输出标签状态，其中第一输出标签状态可以理解为处理成功状态。由于异步事件状态机的状态及时进行了切换，能有效标识数据处理的最新状态。
通过异步事件表的状态机标识第一输出标签状态为S(S是Success的简称)可以保证业务消息一定被成功发送，对于消息接收处理与原异步补应计流水逻辑处理过程一致。原对账调度可保证双向核对交易与处理完成后的异步事件，准确发现业务是否存在异常情况。但存在消息处理异常情况，此时异步事件状态机已更为S，不会重新发送消息，所以需要补偿调度对异常情况重新发起处理，以保证健壮性。
S105、若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，将所述待处理数据的状态切换为第二输出标签状态。
在本实施例中，若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，则表示处理结果的正确性无法保证，此时可以现将其状态由处理中状态切换为第二输出标签状态，其中第二输出标签状态可以理解为处理失败状态(失败状态可以F这一Fail的简称表示)。之所以要获取为处理失败状态的待处理数据，是为了确保后续重新对其处理直至得到正确的处理结果。
在一实施例中，步骤S105之后还包括：
获取状态为第二输出标签状态或处理中状态的待处理数据，通过补漏调度以获取所述待处理数据的第二输出结果。
在本实施例中，若有待处理数据是第二输出标签状态或者是长期处于处理中状态(例如超过5分钟都还是处理中状态可以认定为长期处于处理中状态)，此时可以通过补漏调度以获取所述待处理数据的第二输出结果。补漏调度就是当有状态为第二输出标签状态或处理中状态的待处理数据，则重新由批处理调度来对所述待处理数据进行重新处理直至其处理成功。
本申请实施例可以基于人工智能技术对相关的服务器中数据进行获取和处理。其中，人工智能(Artificial Intelligence，AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。
人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、机器人技术、生物识别技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
该方法实现了基于状态机的异步事件加调度配合确保数据处理的时效性，提高数据处理效率。
本发明实施例还提供一种事件异步化处理装置，该事件异步化处理装置用于执行前述事件异步化处理方法的任一实施例。具体地，请参阅图3，图3是本发明实施例提供的事件异步化处理装置100的示意性框图。
其中，如图3所示，事件异步化处理装置100包括待处理数据获取单元101、第一异步处理单元102、第二异步处理单元103、第三异步处理单元104和第四异步处理单元105。
待处理数据获取单元101，用于响应于用户账户数据变化指令，获取与所述用户账户数据变化指令对应的待处理数据。
在本实施例中，是以服务器为执行主体描述技术方案，而且本申请以用户通过积分消费购买产品，积分扣分接口会对用户账户根据产品相应商户进行积分扣减操作的具体应用场景为例来说明。一般用户的账号是包括资产层、渠道层、归集层、应计层这四层账户，资产层、渠道层和归集层实时记录交易动账信息，应计层的应计流水记录则为对账提供依据。归集层实时动账完成后，将归集流水和资产渠道账户信息拼接后批量插入归集同步流水表，作为异步应计流水处理的数据源。若直接将归集同步流水表批量发送至消息队列处理仍无法确保减少耗时，此时可以在归集层动账完成后，新建异步事件表，将交易元信息交易号、商户、会员、交易类型等信息写入异步事件表，用一条异步事件记录作为异步补应计流水处理的数据源，这样就避免了拼接归集流水和批量插入归集同步流水表导致的耗时。其中，可以将服务器检测到的与所述用户账户数据变化指令对应的待处理数据作为一条异步事件记录数据写入异步事件表。
第一异步处理单元102，用于若确定异步处理状态为开启状态，将所述待处理数据写入异步事件表以保存，及将所述待处理数据的状态切换为初始状态。
在本实施例中，由于在服务器中预先创建了异步事件表，异步事件表是对应部署在Oracle等数据库关系型中，该异步事件表受异步开关的控制，若异步开关打开时则异步事件表为生效状态，表示可写入数据至异步事件表。一旦服务器中有检测到待处理数据时，是先将待处理数据作为一条异步事件记录数据写入异步事件表，同时将所述待处理数据的异步事件状态机的状态切换为初始状态。其中，异步事件状态机的状态切换过程中采用悲观锁，以确保在状态切换过程中，将异步事件表中的数据处于锁定状态，确保数据不易发生变动导致数据处理过程错误。在后续步骤中只要异步事件状态机的状态发生切换，均在异步事件状态机的状态切换过程中采用悲观锁。
在一实施例中，事件异步化处理装置100还包括：
异步事件编码获取单元，用于根据所述待处理数据写入异步事件表的写入事件类型确定异步事件编码。
在本实施例中，由于异步事件表中可以写入多条异步事件记录数据，此时可以先获取所述待处理数据这一条异步事件记录数据对应的写入事件类型，例如在积分扣分接口的应计层，既处理异步补应计流水且处理C-商户补贷记业务则确定异步事件编码为11，既不处理异步补应计流水且不处理C-商户补贷记业务则确定异步事件编码为00，不处理异步补应计流水且只处理C-商户补贷记业务则确定异步事件编码为01，不处理异步补应计流水且只处理C-商户补贷记业务则确定异步事件编码为10。可见，以异步事件编码来标识各待处理的异步事件，可以有效将不同的异步事件进行区分以分开异步处理。
在一实施例中，事件异步化处理装置100还包括：
输出结果获取单元，用于若确定异步处理状态为关闭状态，将所述待处理数据对应生成流水号，及将所述待处理数据以原始调度方式进行运算，得到输出结果。
在本实施例中，由于异步事件表受异步开关的控制，若异步开关是关闭状态时则表示异步事件表为未生效状态，表示不可写入数据至异步事件表，此时直接基于待处理数据对应生成流水号(流水号可以理解为动账流水号)，然后将所述待处理数据以原始调度方式进行运算得到输出结果。其中，原始调度方式是指原本处理应计动账流水的调度。
第二异步处理单元103，用于若确定通过批处理调度获取到所述异步事件表中的所述待处理数据，将所述待处理数据的状态切换为处理中状态，及根据所述异步事件表中所述待处理数据的异步事件编码确定所述待处理数据的第一输出结果。
在本实施例中，当将待处理数据存储至异步事件表中后，具体是先将所述待处理数据的状态切换为处理中状态，然后将所述待处理数据通过消息队列发送(通过消息队列发送可以简记为发Q)至批处理调度，由批处理调度中的业务逻辑及所述异步事件编码对应的时间处理方式对所述待处理数据进行运算，得到第一输出结果。
在一实施例中，第二异步处理单元103具体用于：
将所述待处理数据通过消息队列发送至批处理调度对应的进程，及将所述待处理数据的状态由初始状态切换为处理中状态；
若确定所述异步事件编码为预设的第一编码值，获取与所述第一编码值对应的第一运算逻辑，将所述待处理数据在所述进程中以所述第一运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第二编码值，获取与所述第二编码值对应的第二运算逻辑，将所述待处理数据在所述进程中以所述第二运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第三编码值，获取与所述第三编码值对应的第三运算逻辑，将所述待处理数据在所述进程中以所述第三运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第四编码值，获取与所述第四编码值对应的第四运算逻辑，将所述待处理数据在所述进程中以所述第四运算逻辑进行运算得到第一输出结果。
在本实施例中，预设的第一编码值为00、第二编码值为01、第三编码值为10且第四编码值为11；若确定所述异步事件编码为预设的第一编码值(即00)表示既不处理异步补应计流水且不处理C-商户补贷记业务，此时获取第一编码值相应的第一运算逻辑且基于第一运算逻辑对所述待处理数据进行运算得到第一输出结果；若确定所述异步事件编码为预设的第二编码值(即01)表示不处理异步补应计流水且只处理C-商户补贷记业务，此时获取第二编码值相应的第二运算逻辑且基于第二运算逻辑对所述待处理数据进行运算得到第一输出结果；若确定所述异步事件编码为预设的第三编码值(即10)表示只处理异步补应计流水且不处理C-商户补贷记业务，此时获取第三编码值相应的第三运算逻辑且基于第三运算逻辑对所述待处理数据进行运算得到第一输出结果；若确定所述异步事件编码为预设的第四编码值(即11)表示既处理异步补应计流水且处理C-商户补贷记业务，此时获取第四编码值相应的第四运算逻辑且基于第四运算逻辑对所述待处理数据进行运算得到第一输出结果。可见，基于异步事件表包含异步事件编码对应处理数据，可根据该编码判断处理的业务类型，现处理异步补应计流水、C-商户补贷记业务，后期可增加拓展B端商户流水异步化，可扩展处理非时效性高的业务，若有新增业务可不影响原业务，使用灵活性高。
在一实施例中，所述第二异步处理单元103还具体用于：
将所述待处理数据的状态由初始状态切换为处理中状态。
在本实施例中，一旦通过批处理调度来获取所述异步事件表中的所述待处理数据进行计算处理时，需要及时的将所述待处理数据的状态由初始状态切换为处理中状态，以确保异步事件状态机的状态与当前数据处理过程相对应，从而正确标识数据处理状态。
第三异步处理单元104，用于若确定所述待处理数据的第一输出结果与所述待处理数据的元信息满足预设的转换条件，将所述待处理数据的状态切换为第一输出标签状态。
在本实施例中，当基于异步事件表和批调度处理方式获取了与所述待处理数据对应的第一输出结果后，需要与待处理数据的元信息(待处理数据的元信息即处理补应计流水或补贷记等事务的元信息)，根据流水号、交易号等信息反查原交易信息，从而可以进一步确认处理结果的正确性。一旦确定第一输出结果与所述待处理数据的元信息满足预设的转换条件(例如元信息转换为第一输出结果的计算逻辑与批调度处理中采用的计算逻辑相同，可以判定为第一输出结果与所述待处理数据的元信息满足预设的转换条件)，则表示处理结果是正确的。
在一实施例中，所述第三异步处理单元104还具体用于：
将所述待处理数据的状态由处理中状态切换为第一输出标签状态。
在本实施例中，此时将所述待处理数据的状态由处理中状态切换为第一输出标签状态，其中第一输出标签状态可以理解为处理成功状态。由于异步事件状态机的状态及时进行了切换，能有效标识数据处理的最新状态。
通过异步事件表的状态机标识第一输出标签状态为S(S是Success的简称)可以保证业务消息一定被成功发送，对于消息接收处理与原异步补应计流水逻辑处理过程一致。原对账调度可保证双向核对交易与处理完成后的异步事件，准确发现业务是否存在异常情况。但存在消息处理异常情况，此时异步事件状态机已更为S，不会重新发送消息，所以需要补偿调度对异常情况重新发起处理，以保证健壮性。
第四异步处理单元105，用于若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，将所述待处理数据的状态切换为第二输出标签状态。
在本实施例中，若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，则表示处理结果的正确性无法保证，此时可以现将其状态由处理中状态切换为第二输出标签状态，其中第二输出标签状态可以理解为处理失败状态(失败状态可以F这一Fail的简称表示)。之所以要获取为处理失败状态的待处理数据，是为了确保后续重新对其处理直至得到正确的处理结果。
在一实施例中，事件异步化处理装置100还包括：
第二输出结果获取单元，用于获取状态为第二输出标签状态或处理中状态的待处理数据，通过补漏调度以获取所述待处理数据的第二输出结果。
在本实施例中，若有待处理数据是第二输出标签状态或者是长期处于处理中状态(例如超过5分钟都还是处理中状态可以认定为长期处于处理中状态)，此时可以通过补漏调度以获取所述待处理数据的第二输出结果。补漏调度就是当有状态为第二输出标签状态或处理中状态的待处理数据，则重新由批处理调度来对所述待处理数据进行重新处理直至其处理成功。
该装置实现了基于状态机的异步事件加调度配合确保数据处理的时效性，提高数据处理效率。
上述事件异步化处理装置可以实现为计算机程序的形式，该计算机程序可以在如图4所示的计算机设备上运行。
请参阅图4，图4是本发明实施例提供的计算机设备的示意性框图。该计算机设备500是服务器，也可以是服务器集群。服务器可以是独立的服务器，也可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content Delivery Network，CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。
参阅图4，该计算机设备500包括通过装置总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括存储介质503和内存储器504。
该存储介质503可存储操作装置5031和计算机程序5032。该计算机程序5032被执行时，可使得处理器502执行事件异步化处理方法。
该处理器502用于提供计算和控制能力，支撑整个计算机设备500的运行。
该内存储器504为存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行事件异步化处理方法。
该网络接口505用于进行网络通信，如提供数据信息的传输等。本领域技术人员可以理解，图4中示出的结构，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现本发明实施例公开的事件异步化处理方法。
本领域技术人员可以理解，图4中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定，在其他实施例中，计算机设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。例如，在一些实施例中，计算机设备可以仅包括存储器及处理器，在这样的实施例中，存储器及处理器的结构及功能与图4所示实施例一致，在此不再赘述。
应当理解，在本发明实施例中，处理器502可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable GateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本发明的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为非易失性的计算机可读存储介质，也可以为易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序，其中计算机程序被处理器执行时实现本发明实施例公开的事件异步化处理方法。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的设备、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中，应该理解到，所揭露的设备、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为逻辑功能划分，实际实现时可以有另外的划分方式，也可以将具有相同功能的单元集合成一个单元，例如多个单元或组件可以结合或者可以集成到另一个装置，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，后台服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种事件异步化处理方法，其特征在于，包括：
响应于用户账户数据变化指令，获取与所述用户账户数据变化指令对应的待处理数据；
若确定异步处理状态为开启状态，将所述待处理数据写入异步事件表以保存，及将所述待处理数据的状态切换为初始状态；
若确定通过批处理调度获取到所述异步事件表中的所述待处理数据，将所述待处理数据的状态切换为处理中状态，及根据所述异步事件表中所述待处理数据的异步事件编码确定所述待处理数据的第一输出结果；
若确定所述待处理数据的第一输出结果与所述待处理数据的元信息满足预设的转换条件，将所述待处理数据的状态切换为第一输出标签状态；以及
若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，将所述待处理数据的状态切换为第二输出标签状态。
2.根据权利要求1所述的事件异步化处理方法，其特征在于，所述若确定异步处理状态为开启状态，将所述待处理数据写入异步事件表以保存，及将所述待处理数据的状态切换为初始状态之后，还包括：
根据所述待处理数据写入异步事件表的写入事件类型确定异步事件编码。
3.根据权利要求1所述的事件异步化处理方法，其特征在于，所述响应于用户账户数据变化指令，获取与所述用户账户数据变化指令对应的待处理数据之后，还包括：
若确定异步处理状态为关闭状态，将所述待处理数据对应生成流水号，及将所述待处理数据以原始调度方式进行运算，得到输出结果。
4.根据权利要求1所述的事件异步化处理方法，其特征在于，所述若确定通过批处理调度获取到所述异步事件表中的所述待处理数据，将所述待处理数据的状态切换为处理中状态，及根据所述异步事件表中所述待处理数据的异步事件编码确定所述待处理数据的第一输出结果，包括：
将所述待处理数据通过消息队列发送至批处理调度对应的进程，及将所述待处理数据的状态由初始状态切换为处理中状态；
若确定所述异步事件编码为预设的第一编码值，获取与所述第一编码值对应的第一运算逻辑，将所述待处理数据在所述进程中以所述第一运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第二编码值，获取与所述第二编码值对应的第二运算逻辑，将所述待处理数据在所述进程中以所述第二运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第三编码值，获取与所述第三编码值对应的第三运算逻辑，将所述待处理数据在所述进程中以所述第三运算逻辑进行运算得到第一输出结果；
若确定所述异步事件编码为预设的第四编码值，获取与所述第四编码值对应的第四运算逻辑，将所述待处理数据在所述进程中以所述第四运算逻辑进行运算得到第一输出结果。
5.根据权利要求1所述的事件异步化处理方法，其特征在于，所述将所述待处理数据的状态切换为处理中状态，包括：
将所述待处理数据的状态由初始状态切换为处理中状态。
6.根据权利要求1所述的事件异步化处理方法，其特征在于，所述将所述待处理数据的状态切换为第一输出标签状态，包括：
将所述待处理数据的状态由处理中状态切换为第一输出标签状态。
7.根据权利要求1所述的事件异步化处理方法，其特征在于，所述若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，将所述待处理数据的状态切换为第二输出标签状态之后，还包括：
获取状态为第二输出标签状态或处理中状态的待处理数据，通过补漏调度以获取所述待处理数据的第二输出结果。
8.一种事件异步化处理装置，其特征在于，包括：
待处理数据获取单元，用于响应于用户账户数据变化指令，获取与所述用户账户数据变化指令对应的待处理数据；
第一异步处理单元，用于若确定异步处理状态为开启状态，将所述待处理数据写入异步事件表以保存，及将所述待处理数据的状态切换为初始状态；
第二异步处理单元，用于若确定通过批处理调度获取到所述异步事件表中的所述待处理数据，将所述待处理数据的状态切换为处理中状态，及根据所述异步事件表中所述待处理数据的异步事件编码确定所述待处理数据的第一输出结果；
第三异步处理单元，用于若确定所述待处理数据的第一输出结果与所述待处理数据的元信息满足预设的转换条件，将所述待处理数据的状态切换为第一输出标签状态；以及
第四异步处理单元，用于若确定所述待处理数据的第一输出结果与所述待处理数据的元信息不满足预设的转换条件，将所述待处理数据的状态切换为第二输出标签状态。
9.一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的事件异步化处理方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行如权利要求1至7任一项所述的事件异步化处理方法。
CN202111559128.8A 2021-12-20 2021-12-20 事件异步化处理方法、装置、计算机设备及存储介质 Pending CN114201285A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111559128.8A CN114201285A (zh) 2021-12-20 2021-12-20 事件异步化处理方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111559128.8A CN114201285A (zh) 2021-12-20 2021-12-20 事件异步化处理方法、装置、计算机设备及存储介质

Publications (1)

Publication Number Publication Date
CN114201285A true CN114201285A (zh) 2022-03-18

Family

ID=80655327

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111559128.8A Pending CN114201285A (zh) 2021-12-20 2021-12-20 事件异步化处理方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN114201285A (zh)

Similar Documents

Publication Publication Date Title
CN110263024B (zh) 数据处理方法、终端设备及计算机存储介质
CN100375038C (zh) 重定序两阶段提交中的资源的最后代理优化方法和系统
US11379438B2 (en) Database migration between computing platforms using virtual backups
CN110648138B (zh) 基于区块链的交易查询、交易数据处理方法、装置及设备
CN109034993A (zh) 对账方法、设备、系统及计算机可读存储介质
CN106294125B (zh) 银行核心系统数据处理方法
US20210049715A1 (en) Blockchain-based data procesing method, apparatus, and electronic device
CN109840837B (zh) 财务数据的处理方法、装置、计算机可读介质及电子设备
US20200202396A1 (en) Blockchain-based invoice creation method apparatus, and electronic device
CN100587740C (zh) 一种网络税控系统的税控数据申报、稽查处理方法
CN110781235A (zh) 基于大数据的采购数据处理方法、装置、终端及存储介质
CN114416891A (zh) 在知识图谱中进行数据处理的方法、系统、装置和介质
CN114201285A (zh) 事件异步化处理方法、装置、计算机设备及存储介质
CN116703631A (zh) 对账数据处理方法及装置
CN111242779A (zh) 金融数据特征选择和预测方法、装置、设备及存储介质
CN109597706B (zh) 一种核对差异数据的检测方法、装置及系统
CN115841384A (zh) 基于区块链的个人购汇处理方法及装置
CN115829307A (zh) 智能卡自动化生产方法、装置及可读存储介质
CN109360102A (zh) 股票交易数据处理方法、装置、计算机设备以及存储介质
CN115511586A (zh) 基于jmeter的自动对账方法、系统、终端设备及存储介质
CN112419052B (zh) 交易测试方法、装置、电子设备及可读存储介质
CN114186961A (zh) 业务审批流程配置方法、装置、计算机设备和存储介质
CN113051135A (zh) 一种应用线程池的监控方法及线程池监控装置
CN112650911A (zh) 业务消息下发方法、装置、计算机设备及存储介质
CN111639057A (zh) 日志消息处理方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination