CN109871338B - 一种数据存储方法、装置及计算机设备 - Google Patents

Abstract

本发明提供了一种数据存储方法、装置及计算机设备，所述方法包括：在每个cache下对应的多个sqlID，在每个sqlID对应的一个或多个第一表，将不同cache下具有相同表名的多个第一表和具有不同sqlID的内容合并，得到一个或多个合并后的第二表，其中，每个所述第二表包含多个cache所对应的多个sqlID，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表；解析当前操作的sql指令对应的sqlID、以及该指令对应的cache；判断当前操作的sqlID以及cache所在的合并后的第二表是否一致，若一致根据所述当前操作的sql操作，对第二表中涉及的多个cache的数据进行删除或重新从数据库中调取数据，写入缓存。

Description

一种数据存储方法、装置及计算机设备

技术领域

本发明涉及数据存储技术领域，尤其是涉及一种数据存储方法、装置及计算机设备。

背景技术

mybatis是一种流行的java持久层框架，主要用来简化传统jdbc方式对数据库的操作。以数据为中心建立POJO与SQL之间的映射关系，然后通过映射配置文件，将SQL所需的参数，以及返回的结果字段映射到指定POJO。iBATIS是一种“Sql Mapping”的ORM实现。

二级缓存mybatis在使用中要求在整个系统中只有单表操作，并且和该表相关的全部操作必须在一个namespace下。执行写入操作时，将含有客户信息的数据写入cache1的客户数据表；如果有更新操作时，将含有客户信息的数据在cache2的客户数据表中更新数据；由于在cache2的客户数据表中更新了数据，在更新操作之后，会清空cache2的客户数据表的数据内容。在二级缓存内读取客户信息数据时，由于cache1中存储有客户数据表，系统不访问数据库的数据，直接从cache1中客户数据表读取数据，而在cache2中客户数据已经做了修改并清除，此时读取的cache1中客户数据不是最新的数据，从而导致数据读取错误。

发明内容

针对现有技术存在的缺陷，第一方面，本发明提供了一种数据存储方法，用于实现对数据的二级缓存，包括：

在每个cache下对应的多个sqlID，在每个sqlID对应的一个或多个第一表，将不同cache下具有相同表名的多个第一表和具有不同sqlID的内容合并，得到一个或多个合并后的第二表，其中，每个所述第二表包含多个cache所对应的多个sqlID，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表；

解析当前操作的sql指令对应的sqlID、以及该指令对应的cache；

判断当前操作的sqlID以及cache所在的合并后的第二表是否一致，若一致根据所述当前操作的sql操作，对第二表中涉及的多个cache的数据进行删除或重新从数据库中调取数据，写入缓存。

本发明的有益效果是：

本发明是更加细粒度分析缓存中数据和缓存表之间的相互关系。通过设置合理的数据结构来表达这种关系。针对更新操作时能更加细粒度删除数据，而不是将整个缓存数据都删除，同时一并解决了不同mapper之间缓存无联系这种缺陷导致在使用缓存具有很大局限性。

进一步，所述当前操作的sql操作包括以下至少之一：查询操作、更新操作、提交操作、回滚操作。

进一步，当所述当前操作的sql操作为查询操作时，执行所述查询操作包括：

先从cache中判断是否存在需要查询的数据，如果存在则直接返回；

如果不存在则获取该查询操作涉及到的第一表，将查询结果放入缓存队列。

进一步，当所述当前操作的sql操作为更新操作时，执行所述更新操作包括：

根据所述映射关系，获取所述更新操作对应的第一表的表名；

通过获取到的表名查询得到相对应的缓存键的键值；

清空查询到的所有缓存键的键值。

进一步，当所述当前操作的sql操作为提交操作时，执行所述提交操作包括：

根据所述映射关系，将当前缓存队列中的数据写入缓存。

进一步，当所述当前操作的sql操作为回滚操作时，执行所述回滚操作包括：清空当前缓存队列。

第二方面，本发明提供了一种数据存储装置，设置于数据系统，用于实现对数据的二级缓存，包括：

合并模块，用于在每个cache下对应的多个sqlID，在每个sqlID对应的一个或多个第一表，将不同cache下具有相同表名的多个第一表和具有不同sqlID的内容合并，得到一个或多个合并后的第二表，其中，每个所述第二表包含多个cache所对应的多个sqlID，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表；

解析模块，用于解析当前操作的sql指令对应的sqlID、以及该指令对应的cache；

判断模块，用于判断当前操作的sqlID以及cache所在的合并后的第二表是否一致，若一致根据所述当前操作的sql操作，对第二表中涉及的多个cache的数据进行删除或重新从数据库中调取数据，写入缓存。

进一步，所述当前操作的sql操作包括以下至少之一：查询操作、更新操作、提交操作、回滚操作。

第三方面，本发明提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法的步骤。

与现有技术相比。本申请提案的技术优点有：

1、更加细粒度控制cache中的数据清除，从全部清除到精确控制某条数据的删除，以提高在缓存中查询到数据的概率。

2、解决了不同mapper对应的缓存实例之前无联系，导致想要使用二级缓存必须使用同一缓存表并且只能在同一个mapper下实现的技术问题。通过改进后，不在有这种限制，灵活性大大增强。

附图说明

图1为本发明的一种数据存储方法的流程示意图；

图2为本发明的实施例1的第一表合并生成第二表的示意图；

图3为本发明的实施例2的第一表合并生成第二表的示意图；

图4为本发明的一种数据存储装置的结构示意图。

具体实施方式

以下描述中，为了说明而不是为了限定，提出了诸如特定装备结构、接口、技术之类的具体细节，以便透彻理解本发明。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中，省略对众所周知的装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。

如图1所示，本发明提供了一种数据存储方法，用于实现对数据的二级缓存，包括：

S1：在每个cache下对应的多个sqlID，在每个sqlID对应的一个或多个第一表，将不同cache下具有相同表名的多个第一表和具有不同sqlID的内容合并，得到一个或多个合并后的第二表，其中，每个所述第二表包含多个cache所对应的多个sqlID，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表；

S2：解析当前操作的sql指令对应的sqlID、以及该指令对应的cache；

S3：判断当前操作的sqlID以及cache所在的合并后的第二表是否一致，若一致根据所述当前操作的sql操作，对第二表中涉及的多个cache的数据进行删除或重新从数据库中调取数据，写入缓存。

实施例1：

所述S1中将每个cache下对应的多个sqlID、每个sqlID对应的多个第一表，将每个表中具有相同cache、和相同sqlID的内容合并，得到多个合并后的第二表的过程如图2所示，每一个mapper与一个cache一一对应，同一个mapper下具有多个saqID，一个sqlID下具有一个或多个第一表。

图2中query1、query2、query3分别对应一个sqlID，对应的key1、key2、key3分别是每个sqlID在一个cache下缓存数据的标识。

图2中mappernamespace1下的t1、t2、t3为第一表，其中第一键值key1-vlaue涉及t1和t2两张第一表,第二键值key2-value涉及到t1一张第一表,第三键值key3-value涉及到t3一张第一表，最后生成数据结构,见图2中“查询缓存cachekey和缓存表对应关系1”。namespace1 mapper中包括了query1,query2,query3三个查询方法，query1的查询结果缓存到为第一键值key1-value，query2，query3依次类推。

图2中mappernamespace2下的t1、t5、t6为第一表，其中第一键值key1-vlaue涉及t1和t5两张第一表,第二键值key2-value涉及到t1一张第一表,第三键值key3-value涉及到t6一张第一表，最后生成数据结构,见图2中“查询缓存cachekey和缓存表对应关系2”。

将上述“查询缓存cachekey和缓存表对应关系1”和“查询缓存cachekey和缓存表对应关系2”的内容合并得到第二表：

t1:[(cache1,key1,key2),(cache2,key1,key2)]。

实施例2：

图3中mappernamespace3下的t2、t3、t4为第一表，其中第一键值key1-vlaue涉及t2和t4两张第一表,第二键值key2-value涉及到t4一张第一表,第三键值key3-value涉及到t3一张第一表，最后生成数据结构,见图3中“查询缓存cachekey和缓存表对应关系3”。

图3中mappernamespace4下的t4、t5、t6为第一表，其中第一键值key1-vlaue涉及t4和t5两张第一表,第二键值key2-value涉及到t4一张第一表,第三键值key3-value涉及到t6一张第一表，最后生成数据结构,见图3中“查询缓存cachekey和缓存表对应关系4”。

将上述“查询缓存cachekey和缓存表对应关系3”和“查询缓存cachekey和缓存表对应关系4”的内容合并得到第二表：

t4:[(cache3,key1,key2),(cache4,key1,key2)]。

结合实施例1和实施例2不难发现，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表。

为了提高查询效率，用户还是希望能用二级缓存，因此，想到了本申请的技术方案，核心点就是，做一个全局配置，把mapper(namespace)、缓存键、缓存表三者之间的关系在初始化的时候存起来。在出现更新update等操作的时候，只删除对应sqlid相关的namespace在二级缓存里面的缓存数据，而不是像以前全部删除整个namespace的缓存数据。这样保障了后续的查询(若没有查询到二级缓存的数据，就去数据库把数据查询到，然后缓存到二级缓存里面)能够查询到最准确的数据。

在一些说明性实施例中，所述当前操作的sql操作包括以下至少之一：查询操作、更新操作、提交操作、回滚操作。

在一些说明性实施例中，当所述当前操作的sql操作为查询操作时，执行所述查询操作包括：

先从cache中判断是否存在需要查询的数据，如果存在则直接返回；

如果不存在则获取该查询操作涉及到的第一表，将查询结果放入缓存队列。

在一些说明性实施例中，当所述当前操作的sql操作为更新操作时，执行所述更新操作包括：

根据所述映射关系，获取所述更新操作对应的第一表的表名；

通过获取到的表名查询得到相对应的缓存键的键值；

清空查询到的所有缓存键的键值。

在一些说明性实施例中，当所述当前操作的sql操作为提交操作时，执行所述提交操作包括：

根据所述映射关系，将当前缓存队列中的数据写入缓存。

在一些说明性实施例中，当所述当前操作的sql操作为回滚操作时，执行所述回滚操作包括：清空当前缓存队列。

如图4所示，本发明还提供了一种数据存储装置，设置于数据系统，用于实现对数据的二级缓存，包括：

合并模块100，用于在每个cache下对应的多个sqlID，在每个sqlID对应的一个或多个第一表，将不同cache下具有相同表名的多个第一表和具有不同sqlID的内容合并，得到一个或多个合并后的第二表，其中，每个所述第二表包含一个cache所对应的多个sqlID，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表；

解析模块200，用于解析当前操作的sql指令对应的sqlID、以及该指令对应的cache；

判断模块300，用于判断当前操作的sqlID以及cache所在的合并后的第二表是否一致，若一致根据所述当前操作的sql操作，对第二表中涉及的多个cache的数据进行删除或重新从数据库中调取数据，写入缓存。

在一些说明性实施例中，所述当前操作的sql操作包括以下至少之一：查询操作、更新操作、提交操作、回滚操作。

本发明还提供了一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述方法的步骤。

读者应理解，在本说明书的描述中，参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对所述术语的示意性表述不必针对的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外，在不相互矛盾的情况下，本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。

尽管上面已经示出和描述了本发明的实施例，可以理解的是，所述实施例是示例性的，不能理解为对本发明的限制，本领域的普通技术人员在本发明的范围内可以对所述实施例进行变化、修改、替换和变型。

Claims (9)

1.一种数据存储方法，用于实现对数据的二级缓存，其特征在于，包括：

在每个cache下对应的多个sqlID，在每个sqlID对应的一个或多个第一表，将不同cache下具有相同表名的多个第一表和具有相同sqlID的内容合并，得到一个或多个合并后的第二表，其中，每个所述第二表包含多个cache所对应的多个sqlID，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表；

解析当前操作的sql指令对应的sqlID、以及该指令对应的cache；

判断当前操作的sqlID以及cache所在的合并后的第二表，根据所述当前操作的sql操作，对第二表中涉及的多个cache的数据进行删除或重新从数据库中调取数据，写入缓存。

2.根据权利要求1所述的数据存储方法，其特征在于，所述当前操作的sql操作包括以下至少之一：查询操作、更新操作、提交操作、回滚操作。

3.根据权利要求2所述的数据存储方法，其特征在于，当所述当前操作的sql操作为查询操作时，执行所述查询操作包括：

先从cache中判断是否存在需要查询的数据，如果存在则直接返回；

如果不存在则获取该查询操作涉及到的第一表，将查询结果放入缓存队列。

4.根据权利要求2所述的数据存储方法，其特征在于，当所述当前操作的sql操作为更新操作时，执行所述更新操作包括：

根据映射关系，获取所述更新操作对应的第一表的表名；

通过获取到的表名查询得到相对应的缓存键的键值；

清空查询到的所有缓存键的键值。

5.根据权利要求2所述的数据存储方法，其特征在于，当所述当前操作的sql操作为提交操作时，执行所述提交操作包括：

根据映射关系，将当前缓存队列中的数据写入缓存。

6.根据权利要求2所述的数据存储方法，其特征在于，当所述当前操作的sql操作为回滚操作时，执行所述回滚操作包括：清空当前缓存队列。

7.一种数据存储装置，设置于数据系统，用于实现对数据的二级缓存，其特征在于，包括：

合并模块，用于在每个cache下对应的多个sqlID，在每个sqlID对应的一个或多个第一表，将不同cache下具有相同表名的多个第一表和相同sqlID的内容合并，得到一个或多个合并后的第二表，其中，每个所述第二表包含多个cache所对应的多个sqlID，每个所述第二表对应多个表名相同的第一表，任意两个所述第二表之间没有同名的第一表；

解析模块，用于解析当前操作的sql指令对应的sqlID、以及该指令对应的cache；

判断模块，用于判断当前操作的sqlID以及cache所在的合并后的第二表，根据所述当前操作的sql操作，对第二表中涉及的多个cache的数据进行删除或重新从数据库中调取数据，写入缓存。

8.根据权利要求7所述的数据存储装置，其特征在于，所述当前操作的sql操作包括以下至少之一：查询操作、更新操作、提交操作、回滚操作。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1-6任一项中所述方法的步骤。

Images