CN115544008A - 交易单分库分表处理方法、系统、电子设备及存储介质 - Google Patents

交易单分库分表处理方法、系统、电子设备及存储介质 Download PDF

Info

Publication number
CN115544008A
CN115544008A CN202211183421.3A CN202211183421A CN115544008A CN 115544008 A CN115544008 A CN 115544008A CN 202211183421 A CN202211183421 A CN 202211183421A CN 115544008 A CN115544008 A CN 115544008A
Authority
CN
China
Prior art keywords
transaction
transaction order
logic
serial number
library
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211183421.3A
Other languages
English (en)
Inventor
周全
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Pinshun Information Technology Co ltd
Original Assignee
Shanghai Pinshun Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Pinshun Information Technology Co ltd filed Critical Shanghai Pinshun Information Technology Co ltd
Priority to CN202211183421.3A priority Critical patent/CN115544008A/zh
Publication of CN115544008A publication Critical patent/CN115544008A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2282—Tablespace storage structures; Management thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2474—Sequence data queries, e.g. querying versioned data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • G06F16/278—Data partitioning, e.g. horizontal or vertical partitioning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0633—Lists, e.g. purchase orders, compilation or processing
    • G06Q30/0635—Processing of requisition or of purchase orders

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Fuzzy Systems (AREA)
  • Computing Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Mathematical Physics (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种交易单分库分表处理方法、系统、电子设备及存储介质，涉及数据处理的技术领域，包括：根据预计交易单数据将交易单数据拆分为若干逻辑库；接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；在所述第一逻辑库中写入创建交易单操作，完成交易单创建；获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。本申请具有数据存储分配均匀的优点，通过将用户的交易数据均匀分配在若干个数据库中，实现了查询灵活的效果，提高了交易系统的承载能力。

Description

交易单分库分表处理方法、系统、电子设备及存储介质
技术领域
本申请涉及数据处理的技术领域，具体涉及一种交易单分库分表处理方法、系统、电子设备及存储介质。
背景技术
目前，使用的交易单的存储方式是通过单库单表格模式，单库单表模式已经不能满足业务数据持续且大量的增长数量，单DB模式不仅存在数据交互的性能瓶颈，而且当系统的查询语句存在漏洞时通常会导致全表扫描，危害性低时可能会影响部分用户产品的使用体验，出现较大危害时会导致系统占用大量宽带，长时间占有系统不能及时释放。当遇到用户访问量较大的情况时，QPS(Queries-per-second每秒查询率)突然增加，数据库宕机将会导致整个系统崩溃，此时用户无法继续使用系统平台上的产品，对于用户的需求也无法响应、处理。
发明内容
为了解决上述背景技术中提到的至少一个问题，本申请提供了一种交易单分库分表处理方法、系统、电子设备及存储介质，具有数据存储分配均匀的优点，通过将用户的交易数据均匀分配在若干个数据库中，实现了查询灵活的效果；在进行分库分表操作时实现了不停服的状态，支持交易数据灵活地在不同维度进行数据聚合。
本申请实施例提供的具体技术方案如下：
第一方面，提供一种交易单分库分表处理方法，所述方法包括：
根据预计交易单数据将交易单数据拆分为若干逻辑库；
接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，所述根据预计交易单数据将交易单数据拆分为若干逻辑库，具体包括：
获取历史交易单数据，将所述历史交易单数据输入预测模型；
输出预计交易单数据，根据所述预计交易单数据计算得到拆分的逻辑库数量；
根据所述拆分的逻辑库数量将交易单数据拆分为若干逻辑库。
在一个具体的实施例中，根据所述用户请求中的用户唯一标识查询到第一逻辑库，具体包括：
获取所述调用还款请求中的用户唯一标识；
根据分库策略算法计算所述用户唯一标识对应的分库分表路由；
根据所述用户唯一标识对应的分库分表路由查询到所述第一逻辑库。
在一个具体的实施例中，所述在所述第一逻辑库中写入创建交易单操作，完成交易单创建，具体包括：
通过分库中间件获取所述第一逻辑库的数据库链接；
根据所述数据库链接写入创建交易单操作。
在一个具体的实施例中，所述在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息，具体包括：
通过分库中间件获取所述第二逻辑库的数据路链接；
获取所述交易单流水号对应的交易单映射表；
根据所述第二逻辑库的数据路链接在所述交易单映射表中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，所述方法还包括：
根据所述用户唯一标识查询所述第一逻辑库中的交易单数据；
对所述第一逻辑库中的交易单信息进行增加、删除、修改操作；
根据所述交易单流水号查询所述第一逻辑库中的交易单数据。
在一个具体的实施例中，根据所述交易单流水号查询所述第一逻辑库中的交易单数据，具体包括：
获取交易单流水号，根据所述交易单流水号查询所述第二逻辑库，从所述交易单流水号与所述用户唯一标识的映射信息中查询到对应的用户唯一标识；
根据所述用户唯一标识查询所述第一逻辑库中的交易单数据。
第二方面，提供一种交易单分库分表处理系统，所述系统包括：
拆分模块，所述拆分模块用于根据预计交易单数据将交易单数据拆分为若干逻辑库；
第一查询模块，所述第一查询模块用于接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
第一创建模块，所述第一创建模块用于在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
第二查询模块，所述第二查询模块用于获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
第二创建模块，所述第二创建模块用于在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
第三方面，提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
步骤A：根据预计交易单数据将交易单数据拆分为若干逻辑库；
步骤B：接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
步骤C：在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
步骤D：获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
步骤E：在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：
步骤A：根据预计交易单数据将交易单数据拆分为若干逻辑库；
步骤B：接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
步骤C：在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
步骤D：获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
步骤E：在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。本申请实施例具有如下有益效果：
1.本申请实施例提供的根据预计交易单数据将交易单数据拆分为若干逻辑库，接收来自外围系统的用户请求，根据用户请求中的用户唯一标识查询到其中一个逻辑库，即第一逻辑库，然后在第一逻辑库中写入创建交易单操作，完成交易单创建；获取交易单流水号，根据交易单流水号查询得到第二逻辑库，在第二逻辑库中插入交易单流水号与用户唯一标识的映射信息，由此完成了交易单信息的分库分表；通过以上设置，具有数据存储分配均匀的优点，通过将用户的交易数据均匀分配在若干个数据库中，实现了查询灵活的效果，解决了数据库查询慢的问题，提升了交易系统的承载能力，在进行分库分表操作时实现了不停服的状态，支持交易数据灵活地在不同维度进行数据聚合。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出根据本申请中的交易单分库分表处理方法的示意图
图2用于体现本申请中的分钟级别的监控看板图；
图3用于体现本申请中的用户还款的流程示意图；
图4示出根据本申请中的交易单分库分表处理系统的示意图；
图5示出根据本申请中的电子设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
如背景技术中所述，单库单表模式已经不能满足业务数据持续且大量的增长数量，单DB模式不仅存在数据交互的性能瓶颈，而且当系统的查询语句存在漏洞时通常会导致全表扫描，危害性低时可能会影响部分用户产品的使用体验，出现较大危害时会导致系统占用大量宽带，长时间占有系统不能及时释放。当遇到用户访问量较大的情况时，QPS(Queries-per-second每秒查询率)突然增加，数据库宕机将会导致整个系统崩溃，此时用户无法继续使用系统平台上的产品，对于用户的需求也无法响应、处理。基于以上问题，本申请提出了一种交易单分库分表处理方法、系统、电子设备及存储介质。
实施例一
一种交易单分库分表处理方法，如图1所示，所述方法包括如下步骤：
步骤S1：根据预计交易单数据将交易单数据拆分为若干逻辑库。
在一个具体的实施例中，具体包括：获取历史交易单数据，将所述历史交易单数据输入预测模型；输出预计交易单数据，根据所述预计交易单数据计算得到拆分的逻辑库数量；根据所述拆分的逻辑库数量将交易单数据拆分为若干逻辑库。
在一个具体的实施例中，交易单数据包括订单主表中的数据和订单detail表中的数据，以及映射表中的数据。例如通过统计得出2021年的订单主表的数量为“4836万”，2021年以前的交易单的总数为“3832万”，即历史交易单数据为“3832万”，在预设模型中设置单表数量控制小于“1000万”；经过统计得出2020年的差不多4000W，2021增长了20％，所以设置2022年的年增长率为“20％”，2022年的交易单系统需要满足“4亿”左右的交易单数据，因此按照逻辑库为32个进行拆分，将交易单数据拆分为32个逻辑库；若出现实际交易单数据超过4亿之后，将历史的数据进行归档为最近的数据留出存储空间。
步骤S2：接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库。
在一个具体的实施例中，根据所述用户请求中的用户唯一标识查询到第一逻辑库，具体包括：获取所述调用还款请求中的用户唯一标识；根据分库策略算法计算所述用户唯一标识对应的分库分表路由；根据所述用户唯一标识对应的分库分表路由查询到所述第一逻辑库。
在一个具体的实施例中，由于订单主表、订单明细表、订单优惠券记录表等都是订单相关交易表，都是通过订单主表ID进行关联了，对订单主表分库之后，需要保证其他表关联订单主表ID是唯一，由于交易系统历史数据的关联性没有考虑到uuid模式，在分库后还需要保证历史数据，关联关系正确，采用分库的ID自增使用不同的起始值进行分段。由此可以满足交易系统未来的扩展需要，并减少对下游的影响；在数据库层面，减少了对应用程序的入侵，也避免应用程序的修改；实现过程简单，在未来如果需要对交易表继续拆分时，也可对分段部分进一步拆分以满足全局的需要。
在一个具体的实施例中，外围系统发起调用还款接口的请求，其中调用还款接口的请求中带有用户唯一标识信息，服务端接收到用户的请求，并通过分库策略算法计算该用户唯一标识对应的分库分表路由，找到对应的第一逻辑库，第一逻辑库为逻辑库中的其中一个。
在一个具体的实施例中，分库中间件进行分库操作的原理，以及通过分库策略设置的用户唯一标识的分库算法如下：
Figure BDA0003866222740000071
通过逻辑存储库指定的用户唯一标识关联对应分库进行存储操作的代码如下：
“@RepositorySharding(strategy＝repayment Sharding.REPAYMENT SHARDINGSTRATEY,key＝”#userId”)
Public Repayment order Detail selectbyId(String userId,Long id){
Return ShardRepayment order detail Mapper.selectBy Primary key(id)；}”
通过以上过程，完成了分库过程，并查询到第一逻辑库。
步骤S3：在所述第一逻辑库中写入创建交易单操作，完成交易单创建。
在一个具体的实施例中，所述在所述第一逻辑库中写入创建交易单操作，完成交易单创建，具体包括：通过分库中间件获取所述第一逻辑库的数据库链接；根据所述数据库链接写入创建交易单操作。
在一个具体的实施例中，在交易单创建成功后，通过分库中间件获取第一逻辑库中对应的数据库链接，根据第一逻辑库中对应的数据库链接写入创建交易单的操作。具体的，第一逻辑库中至少包括订单主表、订单明细表和映射表，根据数据库链接，将订单数据分别写入对应的数据表中。
步骤S4：获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库。
在一个具体的实施例中，获取交易单流水号，对交易单流水号计算对应的分库分表路由，根据交易单流水号对应的分库分表路由找到对应的第二逻辑库；通过分库中间件获取第二逻辑库中的数据库链接，在交易单流水号映射表中插入交易单流水号和用户唯一标识的映射信息，以此实现对交易数据的分库分表存储。
步骤S5：在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息，具体包括：通过分库中间件获取所述第二逻辑库的数据路链接；获取所述交易单流水号对应的交易单映射表；根据所述第二逻辑库的数据路链接在所述交易单映射表中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，在交易单创建成功后，根据交易单流水号计算对应的分库分表路由，根据交易单分库分表路由查询到对应的第二逻辑库，通过分库中间件获取第二逻辑库的数据库链接(shard_y库的DB链接)，并结合交易单流水号在映射表中插入交易单水流号和用户唯一标识的映射信息。以此实现通过分库分表对交易单水流号与用户唯一标识映射记录的存储。
通过以上过程，具有数据存储分配均匀的优点，通过将用户的交易数据均匀分配在若干个数据库中，实现了查询灵活的效果，解决了数据库查询慢的问题，提升了交易系统的承载能力，在进行分库分表操作时实现了不停服的状态，支持交易数据灵活地在不同维度进行数据聚合。
在一个具体的实施例中，当需要对相应的订单数据进行查询时，具体包括根据所述用户唯一标识查询所述第一逻辑库中的交易单数据；对所述第一逻辑库中的交易单信息进行增加、删除、修改操作。
具体包括，外围系统发起调用交易单查询接口“interface2”的请求，入参会带有用户唯一标识，服务端接收到调用请求通过分库策略算法，计算该用户唯一标识对应的分库分表路由，并找到对应的shard_x库(第一逻辑库)；再通过分库中间件获取shard_x库的数据库链接，从而查询到shard_x库的订单记录。
当根据交易单流水号对订单数据进行查询时，根据所述交易单流水号查询所述第一逻辑库中的交易单数据，具体包括：获取交易单流水号，根据所述交易单流水号查询所述第二逻辑库，从所述交易单流水号与所述用户唯一标识的映射信息中查询到对应的用户唯一标识；根据所述用户唯一标识查询所述第一逻辑库中的交易单数据。具体包括：根据所述交易单流水号查询所述第一逻辑库中的交易单数据。
具体的，外围系统发起调用交易单查询接口“interface3”，入参会带有交易单流水号；服务端接收该调用请求通过分库策略算法，计算该交易单流水号的分库分表路由，并找到对应的“shard_y库”(第二逻辑库)，通过分库中间件获取第二逻辑库的数据库链接，查询第二逻辑库的映射表获得对应的用户唯一标识，交易系统通过分库策略算法，计算该用户唯一标识对应的分库分表路由，然后找到对应的shard_x库(第一逻辑库)，通过分库中间件获取shard_x库的数据库链接，并根据用户唯一标识查询到对应的订单数据。
在一个具体的实施例中，交易单数据主要存储在订单主表和订单明细表中，映射表中存储有交易单流水号和用户唯一标识对应的映射信息。
在一个具体的实施例中，交易单系统中的数据通过垂直切分得到订单数据库和其他数据库，其中订单数据库包括还款订单表、还款订单明细表和映射表等等；其他数据库包括取现代还订单表、取现代还记录表、取现还款券表、取现还款券使用明细表等等。然后对订单数据表进一步进行水平切分得到若干个逻辑库，包括shard1、shard2、shard3、shard4等等。
用于服务端的交易系统是线上已有的系统，进行分库分表操作时，为了确保交易系统的不停服的工作状态，以及保持主库跟32个逻辑库之间的数据一致性的问题，采用双写双读、单写双读、单写单读模式，能保证系统不停服或不摘取流量下平滑迁移到32个分库。而且，采用XA分布式事务，是数据库本身支持的协议，具备强一致性。满足交易系统场景，交易系统的状态流转就是需要强一致性。
通过以上设置实现了交易系统从单库到32个库的存储方式，使得交易单实时查询更加高效，能够覆盖大量的数据处理以及存储；同时能够通过监控看板进行数据的监控，监控看板能够对数据进行实时刷新，其中分钟级别的监控看板如图2所示。具体的，如图3所示，其中“Vfq-payment”属于核心还款交易系统，维护交易单的增删改查，该系统进行了分库分表升级；“Xjd”属于上游外围系统，“Deduct”、“Osp_captcha”属于基础服务，在用户进行还款操作时，通过交易系统中的外围系统“Xjd”发起调用还款接口的请求，其中包括发送还款短信等等，开通协议通过发送验证码方式进行验证，并通过验证码发誓协议代扣预开户；用户提交验证码，系统进行验证码的校验，用户提交还款操作，系统创建代扣订单用于进行还款交易。
实施例二
对应上述实施例，本申请提供了一种交易单分库分表处理系统，如图4所示，所述系统包括：
拆分模块，所述拆分模块用于根据预计交易单数据将交易单数据拆分为若干逻辑库；
第一查询模块，所述第一查询模块用于接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
第一创建模块，所述第一创建模块用于在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
第二查询模块，所述第二查询模块用于获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
第二创建模块，所述第二创建模块用于在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，拆分模块具体包括获取历史交易单数据，将所述历史交易单数据输入预测模型；输出预计交易单数据，根据所述预计交易单数据计算得到拆分的逻辑库数量；根据所述拆分的逻辑库数量将交易单数据拆分为若干逻辑库。
在一个具体的实施例中，第一查询模块具体包括获取所述调用还款请求中的用户唯一标识；根据分库策略算法计算所述用户唯一标识对应的分库分表路由；根据所述用户唯一标识对应的分库分表路由查询到所述第一逻辑库。
在一个具体的实施例中，第一创建模块具体包括通过分库中间件获取所述第一逻辑库的数据库链接；根据所述数据库链接写入创建交易单操作。
在一个具体的实施例中，第二创建模块包括通过分库中间件获取所述第二逻辑库的数据路链接；获取所述交易单流水号对应的交易单映射表；根据所述第二逻辑库的数据路链接在所述交易单映射表中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，所述系统还包括根据所述用户唯一标识查询所述第一逻辑库中的交易单数据；对所述第一逻辑库中的交易单信息进行增加、删除、修改操作；根据所述交易单流水号查询所述第一逻辑库中的交易单数据。
在一个具体的实施例中，其中交易单流水号查询所述第一逻辑库中的交易单数据，具体包括：获取交易单流水号，根据所述交易单流水号查询所述第二逻辑库，从所述交易单流水号与所述用户唯一标识的映射信息中查询到对应的用户唯一标识；根据所述用户唯一标识查询所述第一逻辑库中的交易单数据。
实施例三
提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，处理器执行计算机程序时实现以下步骤：
步骤101：根据预计交易单数据将交易单数据拆分为若干逻辑库；
步骤102：接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
步骤103：在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
步骤104：获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
步骤105：在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，步骤101具体包括获取历史交易单数据，将所述历史交易单数据输入预测模型；输出预计交易单数据，根据所述预计交易单数据计算得到拆分的逻辑库数量；根据所述拆分的逻辑库数量将交易单数据拆分为若干逻辑库。
在一个具体的实施例中，步骤102具体包括获取所述调用还款请求中的用户唯一标识；根据分库策略算法计算所述用户唯一标识对应的分库分表路由；根据所述用户唯一标识对应的分库分表路由查询到所述第一逻辑库。
在一个具体的实施例中，步骤103具体包括通过分库中间件获取所述第一逻辑库的数据库链接；根据所述数据库链接写入创建交易单操作。
在一个具体的实施例中，步骤105具体包括通过分库中间件获取所述第二逻辑库的数据路链接；获取所述交易单流水号对应的交易单映射表；根据所述第二逻辑库的数据路链接在所述交易单映射表中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，还包括根据所述用户唯一标识查询所述第一逻辑库中的交易单数据；对所述第一逻辑库中的交易单信息进行增加、删除、修改操作；根据所述交易单流水号查询所述第一逻辑库中的交易单数据。
在一个具体的实施例中，其中根据所述交易单流水号查询所述第一逻辑库中的交易单数据，具体包括：获取交易单流水号，根据所述交易单流水号查询所述第二逻辑库，从所述交易单流水号与所述用户唯一标识的映射信息中查询到对应的用户唯一标识；根据所述用户唯一标识查询所述第一逻辑库中的交易单数据。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是服务器，其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储历史交易单数据以及预测模型等数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种交易单分库分表处理方法。
本领域技术人员可以理解，图5中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
实施例四
在一个本实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：
步骤201：根据预计交易单数据将交易单数据拆分为若干逻辑库；
步骤202：接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
步骤203：在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
步骤204：获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
步骤205：在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，步骤201具体包括获取历史交易单数据，将所述历史交易单数据输入预测模型；输出预计交易单数据，根据所述预计交易单数据计算得到拆分的逻辑库数量；根据所述拆分的逻辑库数量将交易单数据拆分为若干逻辑库。
在一个具体的实施例中，步骤202具体包括获取所述调用还款请求中的用户唯一标识；根据分库策略算法计算所述用户唯一标识对应的分库分表路由；根据所述用户唯一标识对应的分库分表路由查询到所述第一逻辑库。
在一个具体的实施例中，步骤203具体包括通过分库中间件获取所述第一逻辑库的数据库链接；根据所述数据库链接写入创建交易单操作。
在一个具体的实施例中，步骤205具体包括通过分库中间件获取所述第二逻辑库的数据路链接；获取所述交易单流水号对应的交易单映射表；根据所述第二逻辑库的数据路链接在所述交易单映射表中插入所述交易单流水号与所述用户唯一标识的映射信息。
在一个具体的实施例中，还包括根据所述用户唯一标识查询所述第一逻辑库中的交易单数据；对所述第一逻辑库中的交易单信息进行增加、删除、修改操作；根据所述交易单流水号查询所述第一逻辑库中的交易单数据。
在一个具体的实施例中，其中根据所述交易单流水号查询所述第一逻辑库中的交易单数据，具体包括：获取交易单流水号，根据所述交易单流水号查询所述第二逻辑库，从所述交易单流水号与所述用户唯一标识的映射信息中查询到对应的用户唯一标识；根据所述用户唯一标识查询所述第一逻辑库中的交易单数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
尽管已描述了本申请实施例中的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请实施例中范围的所有变更和修改。
显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims (10)

1.一种交易单分库分表处理方法，其特征在于，所述方法包括：
根据预计交易单数据将交易单数据拆分为若干逻辑库；
接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
2.根据权利要求1所述的交易单分库分表处理方法，其特征在于，所述根据预计交易单数据将交易单数据拆分为若干逻辑库，具体包括：
获取历史交易单数据，将所述历史交易单数据输入预测模型；
输出预计交易单数据，根据所述预计交易单数据计算得到拆分的逻辑库数量；
根据所述拆分的逻辑库数量将交易单数据拆分为若干逻辑库。
3.根据权利要求2所述的交易单分库分表处理方法，其特征在于，根据所述用户请求中的用户唯一标识查询到第一逻辑库，具体包括：
获取所述调用还款请求中的用户唯一标识；
根据分库策略算法计算所述用户唯一标识对应的分库分表路由；
根据所述用户唯一标识对应的分库分表路由查询到所述第一逻辑库。
4.根据权利要求3所述的交易单分库分表处理方法，其特征在于，所述在所述第一逻辑库中写入创建交易单操作，完成交易单创建，具体包括：
通过分库中间件获取所述第一逻辑库的数据库链接；
根据所述数据库链接写入创建交易单操作。
5.根据权利要求4所述的交易单分库分表处理方法，其特征在于，所述在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息，具体包括：
通过分库中间件获取所述第二逻辑库的数据路链接；
获取所述交易单流水号对应的交易单映射表；
根据所述第二逻辑库的数据路链接在所述交易单映射表中插入所述交易单流水号与所述用户唯一标识的映射信息。
6.根据权利要求5所述的交易单分库分表处理方法，其特征在于，所述方法还包括：
根据所述用户唯一标识查询所述第一逻辑库中的交易单数据；
对所述第一逻辑库中的交易单信息进行增加、删除、修改操作；
根据所述交易单流水号查询所述第一逻辑库中的交易单数据。
7.根据权利要求6所述的交易单分库分表处理方法，其特征在于，根据所述交易单流水号查询所述第一逻辑库中的交易单数据，具体包括：
获取交易单流水号，根据所述交易单流水号查询所述第二逻辑库，从所述交易单流水号与所述用户唯一标识的映射信息中查询到对应的用户唯一标识；
根据所述用户唯一标识查询所述第一逻辑库中的交易单数据。
8.一种交易单分库分表处理系统，其特征在于，所述系统包括：
拆分模块，所述拆分模块用于根据预计交易单数据将交易单数据拆分为若干逻辑库；
第一查询模块，所述第一查询模块用于接收用户请求，根据所述用户请求中的用户唯一标识查询到第一逻辑库；
第一创建模块，所述第一创建模块用于在所述第一逻辑库中写入创建交易单操作，完成交易单创建；
第二查询模块，所述第二查询模块用于获取所述交易单流水号，根据所述交易单流水号查询到第二逻辑库；
第二创建模块，所述第二创建模块用于在所述第二逻辑库中插入所述交易单流水号与所述用户唯一标识的映射信息。
9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1～7中任一项所述方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1～7中任一项所述的方法的步骤。
CN202211183421.3A 2022-09-27 2022-09-27 交易单分库分表处理方法、系统、电子设备及存储介质 Pending CN115544008A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211183421.3A CN115544008A (zh) 2022-09-27 2022-09-27 交易单分库分表处理方法、系统、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211183421.3A CN115544008A (zh) 2022-09-27 2022-09-27 交易单分库分表处理方法、系统、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN115544008A true CN115544008A (zh) 2022-12-30

Family

ID=84729145

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211183421.3A Pending CN115544008A (zh) 2022-09-27 2022-09-27 交易单分库分表处理方法、系统、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN115544008A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116091175A (zh) * 2023-04-10 2023-05-09 南京航空航天大学 一种基于大数据的交易信息数据管理系统及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116091175A (zh) * 2023-04-10 2023-05-09 南京航空航天大学 一种基于大数据的交易信息数据管理系统及方法
CN116091175B (zh) * 2023-04-10 2023-08-22 南京航空航天大学 一种基于大数据的交易信息数据管理系统及方法

Similar Documents

Publication Publication Date Title
CN107038182B (zh) 分表数据的完备性检查方法及装置
US11250395B2 (en) Blockchain-based transaction processing methods and apparatuses and electronic devices
CN112597153B (zh) 一种基于区块链的数据存储方法、装置及存储介质
CN110008665B (zh) 一种区块链的权限控制方法及装置
CN111124917A (zh) 公共测试用例的管控方法、装置、设备及存储介质
CN115544008A (zh) 交易单分库分表处理方法、系统、电子设备及存储介质
CN116308824A (zh) 基于知识图谱的团伙欺诈风险识别方法及相关设备
CN114239060A (zh) 数据获取方法、装置、电子设备及存储介质
CN110942314A (zh) 异常账户监管方法及装置
CN112835885A (zh) 一种分布式表格存储的处理方法、装置及系统
CN113360210A (zh) 数据对账方法、装置、计算机设备和存储介质
CN113157734A (zh) 基于搜索框架的数据处理方法、装置、设备及存储介质
CN112015819A (zh) 分布式图数据库的数据更新方法、装置、设备及介质
CN117271571A (zh) 数据库唯一性约束处理方法、装置、设备及存储介质
CN111522881A (zh) 业务数据处理方法、装置、服务器及存储介质
CN111309746A (zh) 异步并行数据同步方法及装置
CN110765131A (zh) 货源数据的数据压缩方法、装置、计算机设备和存储介质
CN109299189A (zh) 基于区块链的分布式数据库集群处理方法及装置
CN113269625A (zh) 一种工单处理方法及装置
CN114547108A (zh) 数据处理方法、装置、设备及介质
CN113364806A (zh) 一种服务接口迁移的校验方法及装置
CN111585897A (zh) 请求路由管理方法、系统、计算机系统及可读存储介质
CN116703184B (zh) 数据处理方法、数据处理装置、电子设备及可读存储介质
CN109002448B (zh) 一种报表统计方法、装置及系统
CN116703505A (zh) 一种订单信息的判断方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination