CN110413679B

CN110413679B - 数据库信息处理方法、装置、设备及可读存储介质

Info

Publication number: CN110413679B
Application number: CN201910716597.2A
Authority: CN
Inventors: 刘高亮; 卫劲波; 李凌
Original assignee: WeBank Co Ltd
Current assignee: WeBank Co Ltd
Priority date: 2019-07-31
Filing date: 2019-07-31
Publication date: 2023-01-24
Anticipated expiration: 2039-07-31
Also published as: CN110413679A

Abstract

本发明涉及金融科技领域，并公开了一种数据库信息处理方法，包括：在接收到用户端的信息查询指令时，判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集；若所述当前信息集中存在与所述信息查询指令对应的第一信息集，则判断降级表中是否存在与所述第一信息集的预设标识对应的降级记录；若所述降级表中存在所述降级记录，则在数据库中获取与所述预设标识对应的第二信息集，将所述第二信息集发送至所述用户端。本发明还公开了一种数据库信息处理装置、设备和可读存储介质。本发明通过降级表，有效降低对高速缓存的依赖，在高速缓存系统出现故障的情况下，不影响维护交易，也不影响信息访问交易。

Description

数据库信息处理方法、装置、设备及可读存储介质

技术领域

本发明涉及金融科技(Fintech)技术领域，尤其涉及金融行业的数据库信息处理方法、装置、设备及可读存储介质。

背景技术

随着计算机技术的发展，越来越多的技术(如分布式、区块链Blockchain、人工智能等)应用在金融领域，传统金融业正在逐步向金融科技(Fintech)转变，越来越多的技术应用于金融行业。在金融行业中，银行账户的常用信息集通常会存储在数据库中，由于数据库的查询通常较慢，对于频繁使用的信息集，会加载在高速缓存中，以便于用户快速查询到所需信息集。

现有技术中，在用户查询高速缓存中没有查询到对应的信息集时，会继续查询较慢的数据库，这种方案为了保证高速缓存中的信息集不是老旧过时信息，在信息发生变更时，将高速缓存中的信息集进行删除，以便于使用者降级到查询较慢的数据库中获取最新的信息集；在异步线程加载最新信息集至高速缓存时，需要缓存操作同步锁，才能将信息集加载至高速缓存中；在信息维护过程中，通过同步锁，进行清除高速缓存操作，以便于最新的信息集能够加载至高速缓存中。然而，为了保证缓存中的信息集是最新的，信息维护过程与异步线程加载过程需要保持同步，对信息维护的吞吐量影响较大，并且，由于对高速缓存的依赖较强，在高速缓存系统出现故障时，导致查询失败。

发明内容

本发明的主要目的在于提出一种数据库信息处理方法、装置、设备及可读存储介质，旨在解决现有技术中用户查询数据库信息集时，通过高速缓存查询时对高速缓存过于依赖，在高速缓存出现故障时容易导致查询失败的问题。

为实现上述目的，本发明提供一种数据库信息处理方法，所述数据库信息处理方法包括如下步骤：

在接收到用户端的信息查询指令时，判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集；

若所述当前信息集中存在与所述信息查询指令对应的第一信息集，则判断降级表中是否存在与所述第一信息集的预设标识对应的降级记录；

若所述降级表中存在所述降级记录，则在数据库中获取与所述预设标识对应的第二信息集，并将所述第二信息集发送至所述用户端。

可选地，所述判断降级表中是否存在所述第一信息集对应的降级记录的步骤之后，所述数据库信息处理方法包括：

若所述降级表中不存在所述降级记录，则在所述高速缓存中获取所述当前信息集；

将所述当前信息集中与所述信息查询指令对应的第三信息集发送至所述用户端。

可选地，所述判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集的步骤之后，所述数据库信息处理方法包括：

若所述当前信息集不存在与所述信息查询指令对应的第一信息集，则在所述数据库中获取所述信息查询指令对应的第四信息集，并将所述第四信息集发送至所述用户端。

可选地，所述在接收到用户端的信息查询指令时，判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集的步骤之前，所述数据库信息处理方法还包括：

获取所述数据库的实时信息集，其中，所述实时信息集为数据库中实时更新的数据集合；

判断所述实时信息集是否发生改变；

若是，则基于所述实时信息集，在所述降级表中登记降级记录。

可选地，所述判断所述实时信息集中是否发生改变的步骤包括：

判断所述实时信息集中是否存在信息标识；

若是，则判定所述实时信息集发生改变；

若否，则判定所述实时信息集未发生改变。

可选地，所述降级记录包括信息索引项，所述基于所述实时信息集，在所述降级表中登记降级记录的步骤包括：

基于所述信息标识，获取对应的所述预设标识；

生成将所述预设标识对应的降级记录并存储于所述降级表中，以使所述降级记录登记于所述降级表中。

可选地，在所述数据库中获取所述降级记录对应的第二信息集的步骤之后，所述数据库信息处理方法包括：

将所述第二信息集加载至所述当前信息集中，以对所述第一信息集进行替换；

在所述第二信息集加载完毕后，在所述降级表中删除所述降级记录。

此外，为实现上述目的，本发明还提供一种数据库信息处理装置，所述数据库信息处理装置包括：

第一判断模块，用于在接收到用户端的信息查询指令时，判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集；

第二判断模块，用于若所述当前信息集中存在与所述信息查询指令对应的第一信息集，则判断降级表中是否存在与所述第一信息集的预设标识对应的降级记录；

处理模块，用于若所述降级表中存在所述降级记录，则在数据库中获取与所述预设标识对应的第二信息集，并将所述第二信息集发送至所述用户端。

可选地，在所述第二判断模块执行判断降级表中是否存在所述第一信息集对应的降级记录的步骤之后，所述数据库信息处理装置包括第一执行模块，用于：

可选地，在所述第一判断模块执行判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集的步骤之后；所述数据库信息处理装置包括第二执行模块，用于：

可选地，在执行第一查询模块之前，所述数据库信息处理装置还包括登记模块，用于：

判断所述实时信息集是否发生改变；

可选地，在所述处理模块执行在所述数据库中获取所述预设标识对应的第二信息集的步骤之后，所述数据库信息处理装置还包括加载模块，用于：

此外，为实现上述目的，本发明还提供一种数据库信息处理设备，所述数据库信息处理设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据库信息处理程序，所述数据库信息处理程序被所述处理器执行时实现如上所述的数据库信息处理方法的步骤。

此外，为实现上述目的，本发明还提供一种可读存储介质，所述可读存储介质上存储有数据库信息处理程序，所述数据库信息处理程序被处理器执行时实现如上所述的数据库信息处理方法的步骤。

本发明提出的数据库信息处理方法，在数据库端引入降级表，在接收到信息查询指令时，首先对高速缓存的当前信息集进行查询，若高速缓存中存在对应的第一信息集，且降级表中存在降级记录，则说明高速缓存中的当前信息集为老旧过时信息，不应该被使用，否则会导致数据的一致性问题；此时，需要从数据库中获取第二信息集，即获取最新的信息集，以保证用户端获取到的是最新的信息集。本发明通过降级表，有效降低对高速缓存的依赖，在高速缓存系统出现故障的情况下，不影响维护交易，也不影响信息访问交易。

附图说明

图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图；

图2为本发明数据库信息处理方法第一实施例的流程示意图；

图3为本发明数据库信息处理方法第二实施例的流程示意图；

图4为本发明数据库信息处理方法第三实施例的流程示意图。

本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。

具体实施方式

应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

如图1所示，图1是本发明实施例方案涉及的硬件运行环境的设备结构示意图。

本发明实施例数据库信息处理设备可以是PC机或服务器设备。

如图1所示，该数据库信息处理设备可以包括：处理器1001，例如CPU，网络接口1004，用户接口1003，存储器1005，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。

本领域技术人员可以理解，图1中示出的设备结构并不构成对设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。

如图1所示，作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及数据库信息处理程序。

在图1所示的设备中，网络接口1004主要用于连接后台服务器，与后台服务器进行数据通信；用户接口1003主要用于连接客户端，与客户端进行数据通信；而处理器1001可以用于调用存储器1005中存储的数据库信息处理程序，并执行下述数据库信息处理方法各个实施例中的操作。

基于上述硬件结构，提出本发明数据库信息处理方法实施例。

参照图2，图2为本发明数据库信息处理方法第一实施例的流程示意图，所述方法包括：

步骤S10，在接收到用户端的信息查询指令时，判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集；

本实施例中，银行账户的常用信息集通常会存储在数据库上，由于数据库中存在很多用户高频访问的信息集，为了便于用户快速查询到所需信息集，通常会将用户高频访问的信息集加载在高速缓存中，以便于用户即使获取。

当接收到用户端的信息查询指令时，开始对高速缓存进行查询，查看高速缓存中的当前信息集是否存在与信息查询指令对应的第一信息集。

信息查询指令可以包括信息ID、信息内容及存储位置等，高速缓存的当前信息可以缓存有用户高频使用的信息集。

高速缓存中存储有很多使用频繁的信息集，以便于用户能够及时调用，在接收到用户的信息查询指令时，获取高速缓存的当前信息集，并且，将信息查询指令对应的第一信息集与高速缓存中的当前信息集进行对比，若当前信息集中存在第一信息集，则判定高速缓存存在该第一信息集。

为了判断高速缓存的信息集是否为最新的信息集，还需要进行后续判断，避免高速缓存中的当前信息集是老旧过时而被拿来使用。

步骤S20，若所述当前信息集中存在与所述信息查询指令对应的第一信息集，则判断降级表中是否存在所述第一信息集的预设标识对应的降级记录；

该步骤中，在认为高速缓存中存在第一信息集时，为了确定高速缓存的当前信息集是否为最新信息集，需要去查询降级表。

本案的降级表，降级是指如果高速缓存上没有获取到获取获取到的信息集被判定为过时而无法使用时，则下降到较慢速度的数据库中执行信息查询，本案的降级表，是相对于高速缓存的查询速度较低、而相对于数据库的查询速度较高的一个数据表，可以是一列，或者是几列组成，同时，也是一个数据量较小的表，按照一定的时间频度，根据降级表中的信息集标识从数据库中将最新的信息集加载至高速缓存中，并删除降级记录，从而，该降级表的体量维持在一个很小的水平。

由于降级表的轻量化存储方式，能够简单记录数据库中改变的信息集，在降级表中的降级记录对应的信息加载至高速缓存后，可把该项降级记录删除掉，使得降级表的体量维持在一个很小的水平，查询速度快。

通过降级表，存储最新信息集的相关信息，在降级表中存在与预设标识对应的降级记录时，说明高速缓存中的当前信息集已发生变更，是老旧过时的信息，需要去数据库获取最新的信息，才能避免数据一致性问题。

在判定降级表中存在第一信息集的预设标识对应的降级记录时，说明高速缓存的当前信息集已发生变更，是老旧过时的信息，此时，需要对高速缓存的当前信息集进行更新。

在判定降级表中不存在第一信息集的预设标识对应的降级记录时，说明高速缓存的当前信息集并没有发生变更，此时，高速缓存中的当前信息与数据库中的最新信息集一致，则可直接调用该信息集，执行对应的逻辑操作。

步骤S30，若所述降级表中存在所述降级记录，则在数据库中获取与所述预设标识对应的第二信息集，并将所述第二信息集发送至所述用户端。

该步骤中，对降级表是否存在第一信息集对应的降级记录进行判断，在判定降级表中存在第一信息集的预设标识对应的降级记录时，说明高速缓存的当前信息集已发生变更，是老旧过时的信息，即数据库中存在的最新信息明显与高速缓存的当前信息集不一致，由于数据库中的最新信息在信息维护阶段时，信息发生更改，已登记于降级表中，所以，能够在降级表中查询到该降级记录。

通过依次对高速缓存、降级表，甚至是数据库的查询，保证用户端查询到的信息集是最新的；并且，由于增加了降级表，有效降低高速缓存的依赖性。

进一步地，在步骤S20之后，所述数据库信息处理方法包括：

步骤S21，若所述降级表中不存在所述降级记录，则在所述高速缓存中获取所述当前信息集；

步骤S22，将所述当前信息集中与所述信息查询指令对应的第三信息集发送至所述用户端。

在本实施例中，在判定降级表中不存在第一信息集对应的降级记录时，说明高速缓存的当前信息集并没有发生变更，此时，高速缓存中的当前信息与数据库中的最新信息集一致，将当前信息集中与所述信息查询指令对应的第三信息集发送至所述用户端，使得用户端可直接调用该信息集，执行对应的逻辑操作。

通过降级表与高速缓存的配合，保证高速缓存与数据库中的数据一致，从而有效保证用户查询到的信息集为最新信息集。

进一步地，在步骤S10之后，所述数据库信息处理方法包括：

步骤S11，若所述当前信息集不存在与所述信息查询指令对应的第一信息集，则在所述数据库中获取所述信息查询指令对应的第四信息集，并将所述第四信息集发送至所述用户端。

本实施例中，若所述当前信息集不存在与所述信息查询指令对应的第一信息集，则说明高速缓存中不存在该第一信息集，该第一信息集可判定为从来没有用户使用过的信息集，即属于低频信息，所以，此时只需直接降级去数据库查找，即查找数据库中信息查询指令对应的第四信息集，且将第四信息集发送至用户端，以便于用户端执行相应的逻辑操作。

针对低频信息，无需使用高速缓存及降级表，仅仅存储与数据库中，有效减小高速缓存的使用压力。

进一步地，基于本发明的第一实施例，提出数据库信息处理方法的第二实施例子，请参阅图3，在步骤S10之前，所述数据库信息处理方法还包括：

步骤S101，获取所述数据库的实时信息集，其中，所述实时信息集为数据库中实时更新的数据集合；

步骤S102，判断所述实时信息集是否发生改变；

步骤S103，若是，则基于所述实时信息集，在所述降级表中登记降级记录。

本实施例中，在信息维护阶段，获取所述数据库的实时信息集；判断所述实时信息集是否发生改变；若是，则基于所述实时信息集，在所述降级表中登记降级记录。

判断所述实时信息集是否发生改变具体为：判断所述实时信息集中是否存在信息标识；若是，则判定所述实时信息集发生改变。

实时信息集为数据库中实时更新的数据集合，信息维护时，通过对信息集的增删改即可使得信息集发生改变，若数据库的实时信息集发生改变，则登记到降级表中。降级表存在记录表明该信息标识对应的高速缓存信息集已经是老旧过时的，信息使用者需要降级到较慢的关系数据库中获取最新信息；降级记录也驱动异步处理线程加载更新老旧过时的高速缓存信息。

进一步地，在步骤S102可以包括：

判断所述实时信息集中是否存在信息标识；

若是，则判定所述实时信息集发生改变；

若否，则判定所述实时信息集未发生改变。

在本实施例中，实时信息集是否发生改变的判断依据在于是否存在信息标识，在对信息集的增、删、改这些改变时，进行面向截面编程(AOP)，会形成信息标识，该信息标识可以让业务无感知地登记降级记录中。维护时也无需进行同步锁，不用针对维护的目标信息集先行删除对应的高速缓存，维护失败时负责恢复缓存这些比较笨重的操作。

进一步地，步骤S103可以包括：

基于所述信息标识，获取对应的所述预设标识；

生成所述预设标识对应的降级记录并存储于所述降级表，以使所述降级记录登记于所述降级表中。

本实施例中，数据库中的实时信息集同样可以包括信息ID及信息内容等，还可以包括信息发生改变时的信息标识，信息ID作为一个查找关键词，且信息ID与信息内容相对应，一个信息ID对应一段信息内容；信息标识对应一个信息ID，一段信息内容；降级表中的降级记录集，包括多条降级记录，罗列于一个表格中，降级记录只记录某个信息ID、信息ID对应的索引项、更改的时间以及存储位置信息简单信息，如第一信息ID的预设标识为1，第二信息ID的预设标识为2，在某个时间点修改。

降级表是一个结构简单的表，根据信息集唯一标识的组成情况，可能只有一列，也可以由几列组成，简单且易于实现。

进一步地，基于本发明的第一实施例，提出数据库信息处理方法的第三实施例子，请参阅图4，步骤S30之后，数据库信息处理方法包括：

步骤S40，将所述第二信息集加载至所述当前信息集中，以对所述第一信息集进行替换；

步骤S50，在所述第二信息集加载完毕后，在所述降级表中删除所述降级记录。

本实施例中，在异步处理线程中，将所述第二信息集加载至所述当前信息集中，以对所述第一信息集进行替换，在第二信息集缓存加载/更新完毕后删除该信息标识的降级记录，当检测不存在信息集标识的降级记录时，从高速缓存获取信息可以保证是最新的。

降级记录也驱动异步处理线程加载更新老旧过时的高速缓存信息，按照一定的时间频度根据降级表中信息集标识从数据库加载最新的信息集到高速缓存并删除降级记录，这样就使降级表的体量维持在一个很小的水平。

本发明还提供一种数据库信息处理装置。本发明所述数据库信息处理装置包括：

进一步地，在所述第二判断模块执行判断降级表中是否存在所述第一信息集对应的降级记录的步骤之后，所述数据库信息处理装置包括第一执行模块，用于：

进一步地，在所述第一判断模块执行判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集的步骤之后；所述数据库信息处理装置包括第二执行模块，用于：

进一步地，在执行第一查询模块之前，所述数据库信息处理装置还包括登记模块，用于：

判断所述实时信息集是否发生改变；

进一步地，所述登记模块，还用于：

判断所述实时信息集中是否存在信息标识；

若是，则判定所述实时信息集发生改变

若否，则判定所述实时信息集未发生改变。

进一步地，所述降级记录包括信息索引项，所述登记模块还用于：

基于所述信息标识，获取对应的所述预设标识；

进一步地，在所述处理模块执行在所述数据库中获取所述预设标识对应的第二信息集的步骤之后，所述数据库信息处理装置还包括加载模块，用于：

本发明还提供一种计算机可读存储介质。

本发明计算机可读存储介质上存储有数据库信息处理程序，所述数据库信息处理程序被处理器执行时实现如上所述的数据库信息处理方法的步骤。

其中，在所述处理器上运行的数据库信息处理程序被执行时所实现的方法可参照本发明数据库信息处理方法各个实施例，此处不再赘述。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个可读存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台数据库信息处理设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。

以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims

1.一种数据库信息处理方法，其特征在于，所述数据库信息处理方法包括如下步骤：

若所述降级表中存在所述降级记录，则在数据库中获取与所述预设标识对应的第二信息集，并将所述第二信息集发送至所述用户端；

其中，在所述在数据库中获取与所述预设标识对应的第二信息集步骤之后，所述数据库信息处理方法还包括：

2.如权利要求1所述的数据库信息处理方法，其特征在于，所述判断降级表中是否存在与所述第一信息集的预设标识对应的降级记录的步骤之后，所述数据库信息处理方法包括：

3.如权利要求1所述的数据库信息处理方法，其特征在于，所述判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集的步骤之后，所述数据库信息处理方法包括：

4.如权利要求1所述的数据库信息处理方法，其特征在于，所述在接收到用户端的信息查询指令时，判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集的步骤之前，所述数据库信息处理方法还包括：

判断所述实时信息集是否发生改变；

5.如权利要求4所述的数据库信息处理方法，其特征在于，所述判断所述实时信息集中是否发生改变的步骤包括：

判断所述实时信息集中是否存在信息标识；

若是，则判定所述实时信息集发生改变；

若否，则判定所述实时信息集未发生改变。

6.如权利要求5所述的数据库信息处理方法，其特征在于，所述在所述降级表中登记降级记录的步骤包括：

基于所述信息标识，获取对应的所述预设标识；

7.一种数据库信息处理装置，其特征在于，所述数据库信息处理装置包括：

处理模块，用于若所述降级表中存在所述降级记录，则在数据库中获取与所述预设标识对应的第二信息集，并将所述第二信息集发送至所述用户端；

所述数据库信息处理装置还包括加载模块，用于：

8.如权利要求7所述的数据库信息处理装置，其特征在于，在所述第二判断模块执行判断降级表中是否存在所述第一信息集对应的降级记录的步骤之后，所述数据库信息处理装置包括第一执行模块，用于：

9.如权利要求7所述的数据库信息处理装置，其特征在于，在所述第一判断模块执行判断所述判断高速缓存的当前信息集是否存在与所述信息查询指令对应的第一信息集的步骤之后；所述数据库信息处理装置包括第二执行模块，用于：

10.如权利要求7所述的数据库信息处理装置，其特征在于，在执行第一查询模块之前，所述数据库信息处理装置还包括登记模块，用于：

判断所述实时信息集是否发生改变；

11.一种数据库信息处理设备，其特征在于，所述数据库信息处理设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据库信息处理程序，所述数据库信息处理程序被所述处理器执行时实现如权利要求1至6中任一项所述的数据库信息处理方法的步骤。

12.一种可读存储介质，其特征在于，所述可读存储介质上存储有数据库信息处理程序，所述数据库信息处理程序被处理器执行时实现如权利要求1至6中任一项所述的数据库信息处理方法的步骤。