CN113450220A - 一种基于分散批处理的处理方法和装置 - Google Patents
一种基于分散批处理的处理方法和装置 Download PDFInfo
- Publication number
- CN113450220A CN113450220A CN202110738759.XA CN202110738759A CN113450220A CN 113450220 A CN113450220 A CN 113450220A CN 202110738759 A CN202110738759 A CN 202110738759A CN 113450220 A CN113450220 A CN 113450220A
- Authority
- CN
- China
- Prior art keywords
- account
- data
- processing
- batch
- online transaction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 416
- 238000003672 processing method Methods 0.000 title abstract description 28
- 238000000034 method Methods 0.000 claims abstract description 23
- 238000005520 cutting process Methods 0.000 claims abstract description 20
- 230000001360 synchronised effect Effects 0.000 claims description 34
- 238000010923 batch production Methods 0.000 claims description 23
- 238000003860 storage Methods 0.000 claims description 12
- 238000012216 screening Methods 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 9
- 230000002354 daily effect Effects 0.000 description 27
- 238000010586 diagram Methods 0.000 description 9
- 238000004891 communication Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000006870 function Effects 0.000 description 6
- 238000002955 isolation Methods 0.000 description 6
- 230000001960 triggered effect Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000002776 aggregation Effects 0.000 description 1
- 238000004220 aggregation Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003203 everyday effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012958 reprocessing Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/02—Banking, e.g. interest calculation or account maintenance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/128—Details of file system snapshots on the file-level, e.g. snapshot creation, administration, deletion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/178—Techniques for file synchronisation in file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Theoretical Computer Science (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- General Business, Economics & Management (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于分散批处理的处理方法和装置，涉及计算机技术领域。该方法的一具体实施方式包括：对账户数据进行联机交易处理；对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理；进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理；进行批量日切，基于批量处理所使用的数据快照进行卸数。该实施方式能够解决批处理耗时长导致影响用户体验的技术问题。
Description
技术领域
本发明涉及计算机技术领域，尤其涉及一种基于分散批处理的处理方法和装置。
背景技术
随着金融市场的竞争白热化，为吸引更多的客户，银行必须给客户提供更便捷的全天候服务，可以让客户随时随地进行交易。对于银行后台系统而言，7x24小时的稳定运行至关重要。
银行系统传统交易模式通常会划分为白天联机交易和夜间批量批处理，由于批处理需要耗费大量时间，银行一般会在夜间某个时间点(如北京时间22:00)就进入批处理，集中批量处理全部数据，默认当天已经日终，期间用户不能再发起交易，或可以发起交易但会默认为是第二天的交易数据。在批量处理期间需要长时间暂停联机服务，严重影响系统的可用性，给客户带来了极大的不便，造成不好的用户体验。在某些业务系统，可能还会造成客户的经济损失或征信问题。
在实现本发明过程中，发明人发现现有技术中至少存在如下问题：
1)集中进行批量处理，时间窗口难以控制，耗时长；
2)系统压力大，影响系统可用性；
3)未及时全部跑批成功，影响下游依赖系统以及各外围系统，容易造成下游系统接收数据延迟，甚至接收失败；尤其是在数据量大的时候，比如节假日，流量突发，容易发生数据拥堵；
4)批量处理期间需要长时间暂停联机服务，在此期间用户不能进行交易，影响用户体验。
发明内容
有鉴于此，本发明实施例提供一种基于分散批处理的处理方法和装置，以解决批处理耗时长导致影响用户体验的技术问题。
为实现上述目的，根据本发明实施例的一个方面，提供了一种基于分散批处理的处理方法，包括：
对账户数据进行联机交易处理；
对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理；
进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理；
进行批量日切，基于批量处理所使用的数据快照进行卸数。
可选地，对账户数据进行联机交易处理，包括：
接收账户的联机交易请求；
基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理；
将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期；
基于联机交易的处理结果更新所述联机交易所使用的数据快照。
可选地，对账户数据进行分散批处理，包括：
筛选出账务日期小于等于批量日期的账户，对每个所述账户的账户数据进行批处理。
可选地，对每个所述账户的账户数据进行批处理，包括：
对于每个账户，判断所述账户的处理状态是否为重跑批；
若是，则将联机交易所使用的数据快照同步至批量处理所使用的数据快照，然后基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照；
若否，则基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照。
可选地，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，包括：
对于每个账户，判断所述账户的处理状态是否为已跑批；
若是，则将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步；
若否，则对所述账户的账户数据进行批处理，然后将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步。
可选地，在数据同步期间，对账户数据进行联机交易处理，包括：
在数据同步期间，接收账户的联机交易请求；
判断所述账户的处理状态是否为已同步；
若是，则基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照；
若否，则同步联机交易所使用的数据快照以及批量处理所使用的数据快照，然后基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照。
可选地，基于批量处理所使用的数据快照进行卸数，包括：
基于批量处理所使用的数据快照，进行卸数给数据仓库或者下游系统。
另外，根据本发明实施例的另一个方面，提供了一种基于分散批处理的处理装置，包括：
联机处理模块，用于对账户数据进行联机交易处理；
批处理模块，用于对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理；
同步模块，用于进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理；
卸数模块，用于进行批量日切，基于批量处理所使用的数据快照进行卸数。
可选地，所述联机处理模块还用于：
接收账户的联机交易请求；
基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理；
将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期；
基于联机交易的处理结果更新所述联机交易所使用的数据快照。
可选地，所述批处理模块还用于：
筛选出账务日期小于等于批量日期的账户，对每个所述账户的账户数据进行批处理。
可选地，所述批处理模块还用于：
对于每个账户，判断所述账户的处理状态是否为重跑批；
若是，则将联机交易所使用的数据快照同步至批量处理所使用的数据快照，然后基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照；
若否，则基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照。
可选地，所述同步模块还用于：
对于每个账户，判断所述账户的处理状态是否为已跑批；
若是，则将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步；
若否，则对所述账户的账户数据进行批处理，然后将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步。
可选地，所述同步模块还用于：
在数据同步期间，接收账户的联机交易请求；
判断所述账户的处理状态是否为已同步；
若是，则基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照；
若否，则同步联机交易所使用的数据快照以及批量处理所使用的数据快照，然后基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照。
可选地，所述卸数模块还用于：
基于批量处理所使用的数据快照，进行卸数给数据仓库或者下游系统。
根据本发明实施例的另一个方面，还提供了一种电子设备，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行时，所述一个或多个处理器实现上述任一实施例所述的方法。
根据本发明实施例的另一个方面，还提供了一种计算机可读介质，其上存储有计算机程序，所述程序被处理器执行时实现上述任一实施例所述的方法。
上述发明中的一个实施例具有如下优点或有益效果：因为采用在联机日切之前，对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理的技术手段，所以克服了现有技术中批处理耗时长导致影响用户体验的技术问题。本发明实施例基于数据同步和隔离技术，可以使得批处理和联机交易互不影响，并在联机日切之后快速同步数据。而且，本发明可以结合业务和系统特性，可有效地筛选出可提前分散批处理的数据，从而抹掉联机与批量的明显界限。
上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。
附图说明
附图用于更好地理解本发明，不构成对本发明的不当限定。其中：
图1是根据本发明实施例的基于分散批处理的处理方法的主要流程的示意图；
图2是根据本发明一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图；
图3是根据本发明另一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图；
图4是根据本发明再一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图；
图5是根据本发明再一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图；
图6是根据本发明实施例的基于分散批处理的处理装置的主要模块的示意图；
图7是本发明实施例可以应用于其中的示例性系统架构图；
图8是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。
图1是根据本发明实施例的基于分散批处理的处理方法的主要流程的示意图。作为本发明的一个实施例，如图1所示，所述基于分散批处理的处理方法可以包括：
步骤101，对账户数据进行联机交易处理。
账户可以发起联机交易请求，系统接收到联机交易请求后，对该账户的账户数据进行联机交易处理。
可选地，步骤101可以包括：接收账户的联机交易请求；基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理；将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期；基于联机交易的处理结果更新所述联机交易所使用的数据快照。在T日，系统在接收到某账户发起的联机交易请求时，基于O档数据进行联机交易处理，在联机交易处理完成后，将该账户的处理状态设置为重跑批，同时将该账户的账务日期更新为联机日期，以作为后续批处理的筛选条件。而且，在完成联机交易处理后，系统基于联机交易的处理结果更新O档数据，以保证O档数据是最新的。
在本发明的实施例中，O档(Online)是指联机交易所使用的数据快照；B档(Batch)是指批量处理所使用的数据快照；联机日期是指联机交易所使用的系统日期；批量日期是指批量处理所使用的系统日期；账务日期是指记录账户最近发生联机账务交易的日期；账户处理状态包括：已同步(初始状态)、已跑批和重跑批；其中，已同步表示B档和O档的数据是一致的；已跑批表示已经完成T日的批处理；重跑批表示需重新处理T日的批处理。
步骤102，对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理。
系统会视情况分散地发起若干个批处理，每个批是基于B档数据进行处理，以账户为维度进行纵向处理。可选地，对账户数据进行分散批处理，包括：筛选出账务日期小于等于批量日期的账户，对每个所述账户的账户数据进行批处理。在本发明的实施例中，将账户的账务日期作为筛选条件，筛选出账务日期小于等于批量日期的账户，对于这些筛选出的每个账户，分别进行批处理。对于某个账户在分散批处理期间，由于批处理和联机处理基于的数据档不同，是允许发生联机金融交易的，不会有任何阻塞和影响。
本发明实施例的核心思路是把集中式的批处理进行分散做、提前做，选择对哪些数据什么时候进行批处理至关重要。应根据系统和业务特点进行选择数据，选择的标准可以包括：1、明确可以提前进行批处理的数据，以账务交易系统为例，在发生一些金融交易后往往需要把交易流水下传给下游系统，对于这部分数据可以从批处理中抽取出来，改成联机异步推送的方式，如通过MQ消息中间件进行异步推送，并提供夜间文件服务，以对日间的失败消息进行补漏，做到双保险；2、根据业务特性，某些数据大概率在日间不会发生账务交易，提前进行批处理大概率不会导致重跑批，这样数据进行提前批处理的收益会较乐观。以贷款业务为例，没有逾期的账户在非还款日是大概率不会发生金融交易，对于这部分数据可以提前进行批处理。
根据上述标准选取出已同步的账务日期小于等于批量日期的数据，然后根据系统的闲忙情况定好数据量和批处理的时间点，对每个账户进行纵向的批处理。对于重跑批的数据，根据交易时间按一定时间间隔进行二次批处理。在本发明的实施例中，大部分数据都分散在这个阶段进行批处理，在联机日切后，仅需处理小量的数据。因此，本发明实施例基于不同数据快照，用提前批、分散批代替集中批处理，筛选符合标准的数据，在合适时点进行批处理。
可选地，对每个所述账户的账户数据进行批处理，包括：对于每个账户，判断所述账户的处理状态是否为重跑批；若是，则将联机交易所使用的数据快照同步至批量处理所使用的数据快照，然后基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照；若否，则基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照。对于重跑批的账户，则先把O档对应的数据同步至B档，然后基于B档进行批处理，批处理完成后把账户的处理状态设置为已跑批。对非重跑批的账户，则直接基于B档进行批处理，批处理完成后把账户的处理状态设置为已跑批。
本发明实施例不再采用集中批处理的模式，而是基于不同数据快照，采用提前做、分散做的方式，可有效解决现有技术中存在的技术问题，给用户提供全天候不间断的联机服务。
步骤103，进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理。
可选地，可选择在自然日切换后(00:00后)，进行联机日切，进入数据同步期间，联机日期切换成T+1日，批量日期仍为T日，在此期间，对B档和O档的数据进行同步处理。需要指出的是，联机日切可以根据需要设定，比如可以是在22:00进行联机日切，也可以在23:00进行联机日切，还可以在00:00进行联机日切。
可选地，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，包括：对于每个账户，判断所述账户的处理状态是否为已跑批；若是，则将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步；若否，则对所述账户的账户数据进行批处理，然后将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步。该阶段主要是用于B档数据同步O档，以及对小量未跑批或重跑批的数据进行批处理。在数据同步期间，对于非已跑批的数据先触发跑批，跑批完成后再进行数据同步。
可选地，在数据同步期间，对账户数据进行联机交易处理，包括：在数据同步期间，接收账户的联机交易请求；判断所述账户的处理状态是否为已同步；若是，则基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照；若否，则同步联机交易所使用的数据快照以及批量处理所使用的数据快照，然后基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照。在这个阶段发生的联机交易归属于T+1日，先判断数据是否已同步，对于未同步的账户先触发数据同步，同步结束后，基于O档进行联机交易处理，账户的账务日期更新为联机日期(即T+1日)，账户的处理状态更新为重跑批，用于T+1日的分散批处理的筛选条件。
步骤104，进行批量日切，基于批量处理所使用的数据快照进行卸数。
可选地，步骤104可以包括：基于批量处理所使用的数据快照，进行卸数给数据仓库或者下游系统。完成数据同步后，进行批量日切，全面进入第二天交易阶段，同时完成卸数给数据仓库或下游系统。在全部账户完成数据同步后，进行批量日切，批量日期切换成T+1日，系统完整切换到T+1日。进入数据下传阶段后，基于B档进行卸数给数据仓库或下游系统。由于数据隔离，完全不会影响到T+1日的联机交易。
本发明实施例通过分散处理，而不是集中处理，能避免数据量太大造成耗时长，保证日切前所有账户全部跑批成功。通过分散批，由于一些账户已进行批处理，能避免在集中的某一个时点发生数据拥堵。系统每天要处理大数据量的业务，这些业务批处理不会全部积压到同一时点集中进行批处理，能减轻系统压力，提高系统可用性，还能保证下游依赖系统在批后操作的顺利进行，不造成数据延时。
根据上面所述的各种实施例，可以看出本发明实施例通过在联机日切之前，对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理的技术手段，解决了现有技术中批处理耗时长导致影响用户体验的技术问题。本发明实施例基于数据同步和隔离技术，可以使得批处理和联机交易互不影响，并在联机日切之后快速同步数据。而且，本发明可以结合业务和系统特性，可有效地筛选出可提前分散批处理的数据，从而抹掉联机与批量的明显界限。
因此，本发明实施例解决了批量处理期间需要长时间暂停联机服务的技术问题，提供账户级批处理，进行纵向批处理，就算晚上日切时点有联机交易，也会先触发单账户跑批，跑批确保数据一致，单账户能确保系统响应及时，该过程对用户透明，做到了真正的7*24服务(指系统不间断或趋于不间断提供服务)，给用户提供了7*24小时全天候不间断的服务，提高用户体验。
图2是根据本发明一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图。作为本发明的又一个实施例，如图2所示，对每个所述账户的账户数据进行批处理的步骤可以包括：
步骤201，判断账户的处理状态是否为重跑批；若是，则执行步骤202；若否，则执行步骤203。
步骤202，将联机交易所使用的数据快照同步至批量处理所使用的数据快照。
步骤203，基于所述批量处理所使用的数据快照进行批处理。
步骤204，将账户的处理状态置为已跑批。
步骤205，基于批处理结果更新所述批量处理所使用的数据快照。
另外，在本发明一个可参考实施例中基于分散批处理的处理方法的具体实施内容，在上面所述基于分散批处理的处理方法中已经详细说明了，故在此重复内容不再说明。
图3是根据本发明另一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图。作为本发明的另一个实施例，如图3所示，数据同步的步骤可以包括：
步骤301，判断账户的处理状态是否为已跑批；若否，则执行步骤302；若是，则执行步骤303。
步骤302，对所述账户的账户数据进行批处理。
步骤303，将批量处理所使用的数据快照同步至联机交易所使用的数据快照。
步骤304，将所述账户的处理状态置为已同步；
另外，在本发明另一个可参考实施例中基于分散批处理的处理方法的具体实施内容，在上面所述基于分散批处理的处理方法中已经详细说明了，故在此重复内容不再说明。
图4是根据本发明再一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图。作为本发明的再一个实施例，如图4所示，对账户数据进行联机交易处理的步骤可以包括：
步骤401，接收账户的联机交易请求。
步骤402，判断所述账户的处理状态是否为已同步；若否，则执行步骤403；若是，则执行步骤404。
步骤403，同步联机交易所使用的数据快照以及批量处理所使用的数据快照。
步骤404，基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理。
步骤405，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期。
步骤406，基于联机交易的处理结果更新所述联机交易所使用的数据快照。
另外，在本发明再一个可参考实施例中基于分散批处理的处理方法的具体实施内容，在上面所述基于分散批处理的处理方法中已经详细说明了，故在此重复内容不再说明。
图5是根据本发明再一个可参考实施例的基于分散批处理的处理方法的主要流程的示意图。作为本发明的再一个实施例，如图5所示，对账户数据进行联机交易处理的步骤可以包括：
系统在接收到某账户的金融交易时，基于O档数据进行联机交易处理。在联机交易处理完成后，将该账户的处理状态设置为重跑批，同时将该账户的账务日期更新为联机日期，以作为后续批处理的筛选条件。而且，在完成联机交易处理后，系统基于联机交易的处理结果更新O档数据，以保证O档数据是最新的。
然后，开始分散批处理，具体地，系统会视情况分散地发起若干个批处理，每个批是基于B档数据进行处理，以账户为维度进行纵向处理。对于重跑批的账户，则先把O档对应的数据同步至B档，然后基于B档进行批处理，批处理完成后把账户的处理状态设置为已跑批。对非重跑批的账户，则直接基于B档进行批处理，批处理完成后把账户的处理状态设置为已跑批。在分散批处理期间，仍然可以对账户数据进行联机交易处理。对于某个账户在分散批处理期间，由于批处理和联机处理基于的数据档不同，是允许发生联机金融交易的，不会有任何阻塞和影响。
接着，到达联机日切点时，进行联机日切换，进入数据同步期间，联机日期切换成T+1日，批量日期仍为T日，在此期间，对B档和O档的数据进行同步处理。该阶段主要是用于B档数据同步O档，以及对小量未跑批或重跑批的数据进行批处理。在数据同步期间，对于非已跑批的数据先触发跑批，跑批完成后再进行数据同步。在这个阶段发生的联机交易归属于T+1日，先判断数据是否已同步，对于未同步的账户先触发数据同步，同步结束后，基于O档进行联机交易处理，账户的账务日期更新为联机日期(即T+1日)，账户的处理状态更新为重跑批，用于T+1日的分散批处理的筛选条件。
最后，到达批量日切点时，进行批量日切换。在全部账户完成数据同步后，进行批量日切，批量日期切换成T+1日，系统完整切换到T+1日。进入数据下传阶段后，基于B档进行卸数给数据仓库或下游系统。由于数据隔离，完全不会影响到T+1日的联机交易。
另外，在本发明再一个可参考实施例中基于分散批处理的处理方法的具体实施内容，在上面所述基于分散批处理的处理方法中已经详细说明了，故在此重复内容不再说明。
图6是根据本发明实施例的基于分散批处理的处理装置的主要模块的示意图，如图6所示，所述基于分散批处理的处理装置600包括联机处理模块601、批处理模块602、同步模块603和卸数模块604；其中，联机处理模块601用于对账户数据进行联机交易处理；批处理模块602用于对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理；同步模块603用于进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理；卸数模块604用于进行批量日切，基于批量处理所使用的数据快照进行卸数。
可选地，所述联机处理模块601还用于：
接收账户的联机交易请求；
基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理；
将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期；
基于联机交易的处理结果更新所述联机交易所使用的数据快照。
可选地，所述批处理模块602还用于：
筛选出账务日期小于等于批量日期的账户，对每个所述账户的账户数据进行批处理。
可选地，所述批处理模块602还用于：
对于每个账户，判断所述账户的处理状态是否为重跑批；
若是，则将联机交易所使用的数据快照同步至批量处理所使用的数据快照，然后基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照；
若否，则基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照。
可选地，所述同步模块603还用于：
对于每个账户，判断所述账户的处理状态是否为已跑批；
若是，则将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步；
若否，则对所述账户的账户数据进行批处理，然后将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步。
可选地，所述同步模块603还用于：
在数据同步期间，接收账户的联机交易请求；
判断所述账户的处理状态是否为已同步；
若是，则基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照；
若否，则同步联机交易所使用的数据快照以及批量处理所使用的数据快照，然后基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照。
可选地，所述卸数模块604还用于：
基于批量处理所使用的数据快照，进行卸数给数据仓库或者下游系统。
根据上面所述的各种实施例，可以看出本发明实施例通过在联机日切之前，对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理的技术手段，解决了现有技术中批处理耗时长导致影响用户体验的技术问题。本发明实施例基于数据同步和隔离技术，可以使得批处理和联机交易互不影响，并在联机日切之后快速同步数据。而且，本发明可以结合业务和系统特性，可有效地筛选出可提前分散批处理的数据，从而抹掉联机与批量的明显界限。
需要说明的是，在本发明所述基于分散批处理的处理装置的具体实施内容，在上面所述基于分散批处理的处理方法中已经详细说明了，故在此重复内容不再说明。
图7示出了可以应用本发明实施例的基于分散批处理的处理方法或基于分散批处理的处理装置的示例性系统架构700。
如图7所示，系统架构700可以包括终端设备701、702、703，网络704和服务器705。网络704用以在终端设备701、702、703和服务器705之间提供通信链路的介质。网络704可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备701、702、703通过网络704与服务器705交互，以接收或发送消息等。终端设备701、702、703上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等(仅为示例)。
终端设备701、702、703可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器705可以是提供各种服务的服务器，例如对用户利用终端设备701、702、703所浏览的购物类网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的物品信息查询请求等数据进行分析等处理，并将处理结果反馈给终端设备。
需要说明的是，本发明实施例所提供的基于分散批处理的处理方法一般由服务器705执行，相应地，所述基于分散批处理的处理装置一般设置在服务器705中。
应该理解，图7中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。
下面参考图8，其示出了适于用来实现本发明实施例的终端设备的计算机系统800的结构示意图。图8示出的终端设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图8所示，计算机系统800包括中央处理单元(CPU)801，其可以根据存储在只读存储器(ROM)802中的程序或者从存储部分808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中，还存储有系统800操作所需的各种程序和数据。CPU 801、ROM 802以及RAM803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
以下部件连接至I/O接口805：包括键盘、鼠标等的输入部分806；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分807；包括硬盘等的存储部分808；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分809。通信部分809经由诸如因特网的网络执行通信处理。驱动器810也根据需要连接至I/O接口805。可拆卸介质811，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器810上，以便于从其上读出的计算机程序根据需要被安装入存储部分808。
特别地，根据本发明公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明公开的实施例包括一种计算机程序，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分809从网络上被下载和安装，和/或从可拆卸介质811被安装。在该计算机程序被中央处理单元(CPU)801执行时，执行本发明的系统中限定的上述功能。
需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。
附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
描述于本发明实施例中所涉及到的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中，例如，可以描述为：一种处理器包括联机处理模块、批处理模块、同步模块和卸数模块，其中，这些模块的名称在某种情况下并不构成对该模块本身的限定。
作为另一方面，本发明还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该设备执行时，该设备实现如下方法：对账户数据进行联机交易处理；对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理；进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理；进行批量日切，基于批量处理所使用的数据快照进行卸数。
根据本发明实施例的技术方案，因为采用在联机日切之前，对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理的技术手段，所以克服了现有技术中批处理耗时长导致影响用户体验的技术问题。本发明实施例基于数据同步和隔离技术，可以使得批处理和联机交易互不影响，并在联机日切之后快速同步数据。而且，本发明可以结合业务和系统特性，可有效地筛选出可提前分散批处理的数据，从而抹掉联机与批量的明显界限。
上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。
Claims (16)
1.一种基于分散批处理的处理方法，其特征在于，包括：
对账户数据进行联机交易处理；
对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理；
进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理；
进行批量日切，基于批量处理所使用的数据快照进行卸数。
2.根据权利要求1所述的方法，其特征在于，对账户数据进行联机交易处理，包括：
接收账户的联机交易请求；
基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理；
将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期；
基于联机交易的处理结果更新所述联机交易所使用的数据快照。
3.根据权利要求1所述的方法，其特征在于，对账户数据进行分散批处理，包括：
筛选出账务日期小于等于批量日期的账户，对每个所述账户的账户数据进行批处理。
4.根据权利要求3所述的方法，其特征在于，对每个所述账户的账户数据进行批处理，包括：
对于每个账户，判断所述账户的处理状态是否为重跑批；
若是，则将联机交易所使用的数据快照同步至批量处理所使用的数据快照，然后基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照；
若否，则基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照。
5.根据权利要求1所述的方法，其特征在于，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，包括：
对于每个账户，判断所述账户的处理状态是否为已跑批；
若是，则将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步；
若否，则对所述账户的账户数据进行批处理，然后将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步。
6.根据权利要求1所述的方法，其特征在于，在数据同步期间，对账户数据进行联机交易处理，包括：
在数据同步期间，接收账户的联机交易请求；
判断所述账户的处理状态是否为已同步；
若是，则基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照；
若否，则同步联机交易所使用的数据快照以及批量处理所使用的数据快照，然后基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照。
7.根据权利要求1所述的方法，其特征在于，基于批量处理所使用的数据快照进行卸数，包括：
基于批量处理所使用的数据快照，进行卸数给数据仓库或者下游系统。
8.一种基于分散批处理的处理装置，其特征在于，包括：
联机处理模块，用于对账户数据进行联机交易处理；
批处理模块，用于对账户数据进行分散批处理，并且在分散批处理期间，对账户数据进行联机交易处理；
同步模块，用于进行联机日切，同步联机交易所使用的数据快照以及批量处理所使用的数据快照，并且在数据同步期间，对账户数据进行联机交易处理；
卸数模块，用于进行批量日切，基于批量处理所使用的数据快照进行卸数。
9.根据权利要求8所述的装置，其特征在于，所述联机处理模块还用于：
接收账户的联机交易请求；
基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理；
将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期；
基于联机交易的处理结果更新所述联机交易所使用的数据快照。
10.根据权利要求8所述的装置，其特征在于，所述批处理模块还用于：
筛选出账务日期小于等于批量日期的账户，对每个所述账户的账户数据进行批处理。
11.根据权利要求10所述的装置，其特征在于，所述批处理模块还用于：
对于每个账户，判断所述账户的处理状态是否为重跑批；
若是，则将联机交易所使用的数据快照同步至批量处理所使用的数据快照，然后基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照；
若否，则基于所述批量处理所使用的数据快照进行批处理，将账户的处理状态置为已跑批，并基于批处理结果更新所述批量处理所使用的数据快照。
12.根据权利要求8所述的装置，其特征在于，所述同步模块还用于：
对于每个账户，判断所述账户的处理状态是否为已跑批；
若是，则将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步；
若否，则对所述账户的账户数据进行批处理，然后将批量处理所使用的数据快照同步至联机交易所使用的数据快照，并将所述账户的处理状态置为已同步。
13.根据权利要求8所述的装置，其特征在于，所述同步模块还用于：
在数据同步期间，接收账户的联机交易请求；
判断所述账户的处理状态是否为已同步；
若是，则基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照；
若否，则同步联机交易所使用的数据快照以及批量处理所使用的数据快照，然后基于联机交易所使用的数据快照对所述账户的账户数据进行联机交易处理，将所述账户的处理状态置为重跑批，将所述账户的账务日期更新为联机日期，基于联机交易的处理结果更新所述联机交易所使用的数据快照。
14.根据权利要求8所述的装置，其特征在于，所述卸数模块还用于：
基于批量处理所使用的数据快照，进行卸数给数据仓库或者下游系统。
15.一种电子设备，其特征在于，包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行时，所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
16.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110738759.XA CN113450220A (zh) | 2021-06-30 | 2021-06-30 | 一种基于分散批处理的处理方法和装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110738759.XA CN113450220A (zh) | 2021-06-30 | 2021-06-30 | 一种基于分散批处理的处理方法和装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113450220A true CN113450220A (zh) | 2021-09-28 |
Family
ID=77814508
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110738759.XA Pending CN113450220A (zh) | 2021-06-30 | 2021-06-30 | 一种基于分散批处理的处理方法和装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113450220A (zh) |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1811838A (zh) * | 2005-12-23 | 2006-08-02 | 中国工商银行股份有限公司 | 一种实现连续服务的数据处理方法和系统 |
| WO2007071984A2 (en) * | 2005-12-19 | 2007-06-28 | Misys Plc | Method and system for running a batch process |
| WO2017074320A1 (en) * | 2015-10-27 | 2017-05-04 | Hewlett Packard Enterprise Development Lp | Service scaling for batch processing |
| CN106981021A (zh) * | 2017-03-28 | 2017-07-25 | 中国工商银行股份有限公司 | 一种实现连续服务的数据处理方法及装置 |
| CN107563887A (zh) * | 2017-08-22 | 2018-01-09 | 福建省农村信用社联合社 | 基于as400银行核心账务系统零停机日切方法 |
| CN110276614A (zh) * | 2019-04-30 | 2019-09-24 | 阿里巴巴集团控股有限公司 | 分户账的更新方法和装置 |
| CN110610414A (zh) * | 2019-09-19 | 2019-12-24 | 中国银行股份有限公司 | 一种数据处理方法及系统 |
| CN111125106A (zh) * | 2019-12-23 | 2020-05-08 | 深圳乐信软件技术有限公司 | 一种跑批任务执行方法、装置、服务器和存储介质 |
| CN112099934A (zh) * | 2020-09-22 | 2020-12-18 | 中国建设银行股份有限公司 | 一种批处理方法、系统、计算机设备及存储介质 |
-
2021
- 2021-06-30 CN CN202110738759.XA patent/CN113450220A/zh active Pending
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2007071984A2 (en) * | 2005-12-19 | 2007-06-28 | Misys Plc | Method and system for running a batch process |
| CN1811838A (zh) * | 2005-12-23 | 2006-08-02 | 中国工商银行股份有限公司 | 一种实现连续服务的数据处理方法和系统 |
| WO2017074320A1 (en) * | 2015-10-27 | 2017-05-04 | Hewlett Packard Enterprise Development Lp | Service scaling for batch processing |
| CN106981021A (zh) * | 2017-03-28 | 2017-07-25 | 中国工商银行股份有限公司 | 一种实现连续服务的数据处理方法及装置 |
| CN107563887A (zh) * | 2017-08-22 | 2018-01-09 | 福建省农村信用社联合社 | 基于as400银行核心账务系统零停机日切方法 |
| CN110276614A (zh) * | 2019-04-30 | 2019-09-24 | 阿里巴巴集团控股有限公司 | 分户账的更新方法和装置 |
| CN110610414A (zh) * | 2019-09-19 | 2019-12-24 | 中国银行股份有限公司 | 一种数据处理方法及系统 |
| CN111125106A (zh) * | 2019-12-23 | 2020-05-08 | 深圳乐信软件技术有限公司 | 一种跑批任务执行方法、装置、服务器和存储介质 |
| CN112099934A (zh) * | 2020-09-22 | 2020-12-18 | 中国建设银行股份有限公司 | 一种批处理方法、系统、计算机设备及存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 梁礼方；: "联机与批量", 金融科技时代, no. 05, 10 May 2012 (2012-05-10), pages 39 - 42 * |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109189835B (zh) | 实时生成数据宽表的方法和装置 | |
| CN109150929B (zh) | 高并发场景下的数据请求处理方法和装置 | |
| CN110795443A (zh) | 数据同步的方法、装置、设备和计算机可读介质 | |
| CN110648216A (zh) | 一种风控方法和装置 | |
| CN112597126A (zh) | 一种数据迁移方法和装置 | |
| CN113760924B (zh) | 一种分布式事务的处理方法和装置 | |
| CN111753019A (zh) | 一种应用于数据仓库的数据分区方法和装置 | |
| CN113450220A (zh) | 一种基于分散批处理的处理方法和装置 | |
| CN111767495A (zh) | 一种合成网页的方法及系统 | |
| CN111008202A (zh) | 分布式事务处理方法和框架 | |
| CN113486032A (zh) | 日期切换方法、装置、电子设备以及计算机可读介质 | |
| CN115129429A (zh) | 容器应用管理方法、装置、电子设备及存储介质 | |
| CN115190125A (zh) | 一种缓存集群的监控方法和装置 | |
| CN116263926A (zh) | 基于区块链的对账方法、装置和系统 | |
| CN113760861A (zh) | 一种数据迁移的方法和装置 | |
| CN113190558A (zh) | 一种数据加工方法和系统 | |
| CN111695984A (zh) | 一种账号余额处理方法和装置 | |
| CN111402030A (zh) | 账单生成的方法和装置 | |
| CN112862554A (zh) | 一种订单数据的处理方法和装置 | |
| CN113778959B (zh) | 数据处理的方法、装置、设备和计算机可读介质 | |
| CN114756556B (zh) | 处理账户数据的方法、装置、电子设备和计算机可读介质 | |
| CN112948430B (zh) | 一种日期数据查询方法和装置 | |
| CN109446183B (zh) | 全局防重的方法和装置 | |
| CN114169997A (zh) | 一种扣款方法和装置 | |
| CN114925305A (zh) | 一种页面加载的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |