CN112800092A - 一种数据缓存管理方法、装置、设备及可读存储介质 - Google Patents

Abstract

本发明公开了一种数据缓存管理方法，考虑到不同类型的数据库具有不同的特性，而海量需要缓存的数据也有不同的类型，因此本申请根据预设的数据类型以及数据库类型的对应关系，将待缓存数据根据其类型存入相应类型的数据库中，可以更加合理以及充分地利用不同类型数据库的特性(例如可以将后续查询频率较高的内存性数据缓存至具有较高读取速度的数据库等)，提高了数据查询效率，另外，将数据进行分类缓存还有利于对海量缓存数据的管理。本发明还公开了一种数据缓存管理装置、设备及计算机可读存储介质，具有如上数据缓存管理方法相同的有益效果。

Description

一种数据缓存管理方法、装置、设备及可读存储介质

技术领域

本发明涉及分布式存储系统领域，特别是涉及一种数据缓存管理方法，本发明还涉及一种数据缓存管理装置、设备及计算机可读存储介质。

背景技术

分布式存储系统已发展的比较成熟，其在应用过程中通常具有海量的数据缓存需求，后续在需要的时候可以对缓存的数据进行查询，现有技术中缺乏一种成熟的数据缓存管理方法，一方面导致后续对于缓存数据的查询效率低下，另一方面也难以针对海量的缓存数据进行管理。

因此，如何提供一种解决上述技术问题的方案是本领域技术人员目前需要解决的问题。

发明内容

本发明的目的是提供一种数据缓存管理方法，提高了数据查询效率，另外，将数据进行分类缓存还有利于对海量缓存数据的管理；本发明的另一目的是提供一种数据缓存管理装置、设备及计算机可读存储介质，提高了数据查询效率，另外，将数据进行分类缓存还有利于对海量缓存数据的管理。

为解决上述技术问题，本发明提供了一种数据缓存管理方法，包括：

确定待缓存数据的数据类型；

根据预设的数据类型以及数据库类型的对应关系，确定出所述待缓存数据的数据类型对应的数据库类型；

将所述待缓存数据存储至所述数据库类型对应的数据库中。

优选地，所述确定待缓存数据的数据类型之前，该数据缓存管理方法还包括：

判断接收到的待缓存数据是否完整；

若不完整，判断重试次数是否大于预设阈值；

若不大于，向发送所述待缓存数据的节点重新请求所述待缓存数据并将初始值为零的所述重试次数加一。

优选地，所述判断重试次数是否大于预设阈值之后，该数据缓存管理方法还包括：

若大于，则控制报警器报警。

优选地，所述若大于之后，所述控制报警器报警之前，该数据缓存管理方法还包括：

判断所述待缓存数据的数据类型是否属于预设重点类型；

若属于，则执行所述控制报警器报警的步骤。

优选地，所述报警器为蜂鸣器。

优选地，该数据缓存管理方法还包括：

响应于接收到的对应关系配置指令，对所述对应关系进行配置。

优选地，所述响应于接收到的对应关系配置指令，对所述对应关系进行配置之后，该数据缓存管理方法还包括：

响应于接收到的数据库类型配置指令，对数据库的类型结构进行配置。

为解决上述技术问题，本发明还提供了一种数据缓存管理装置，包括：

第一确定模块，用于确定待缓存数据的数据类型；

第二确定模块，用于根据预设的数据类型以及数据库类型的对应关系，确定出所述待缓存数据的数据类型对应的数据库类型；

执行模块，用于将所述待缓存数据存储至所述数据库类型对应的数据库中。

为解决上述技术问题，本发明还提供了一种数据缓存管理设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如上所述数据缓存管理方法的步骤。

为解决上述技术问题，本发明还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述数据缓存管理方法的步骤。

本发明提供了一种数据缓存管理方法，考虑到不同类型的数据库具有不同的特性，而海量需要缓存的数据也有不同的类型，因此本申请根据预设的数据类型以及数据库类型的对应关系，将待缓存数据根据其类型存入相应类型的数据库中，可以更加合理以及充分地利用不同类型数据库的特性(例如可以将后续查询频率较高的内存性数据缓存至具有较高读取速度的数据库等)，提高了数据查询效率，另外，将数据进行分类缓存还有利于对海量缓存数据的管理。

本发明还提供了一种数据缓存管理装置、设备及计算机可读存储介质，具有如上数据缓存管理方法相同的有益效果。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对现有技术和实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明提供的一种数据缓存管理方法的流程示意图；

图2为本发明提供的一种数据缓存管理装置的结构示意图；

图3为本发明提供的一种数据缓存管理设备的结构示意图。

具体实施方式

本发明的核心是提供一种数据缓存管理方法，提高了数据查询效率，另外，将数据进行分类缓存还有利于对海量缓存数据的管理；本发明的另一核心是提供一种数据缓存管理装置、设备及计算机可读存储介质，提高了数据查询效率，另外，将数据进行分类缓存还有利于对海量缓存数据的管理。

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参考图1，图1为本发明提供的一种数据缓存管理方法的流程示意图，该数据缓存管理方法包括：

步骤S1：确定待缓存数据的数据类型；

具体的，考虑到如上背景技术中的技术问题，又结合考虑到不同类型的数据库具有不同的特性，例如redis数据库具有数据读取速度快的特点，mongodb数据库适合存储日志这种大型的文档数据，关系型数据库管理系统mysql数据库较适合存储关系型数据(例如用户数据以及节点数据)，而海量需要缓存的数据也有不同的类型，例如读取频率较高的内存型数据、日志这种大型文档数据以及关系型数据等，因此本申请欲设立多种不同类型的数据库，并依据类型将待缓存数据存入对应类型的数据库中，因此在本步骤中首先需要确定出待缓存数据的类型，并将其作为后续步骤的数据基础以便实现缓存数据的高效管理。

当然，除了上述提及的数据库类型外，数据库类型还可以为其他类型，例如sqlite数据库等，本发明实施例在此不做限定。

其中，确定待缓存数据的数据类型的方式可以为多种，例如节点在发送待缓存数据时，可以一并发送待缓存数据的数据类型，处理器只需解析出其中的数据类型即可，本发明实施例在此不做限定。

步骤S2：根据预设的数据类型以及数据库类型的对应关系，确定出待缓存数据的数据类型对应的数据库类型；

具体的，在得到待缓存数据的数据类型后，便可以根据预设的数据类型以及数据库类型的对应关系，确定出待缓存数据的数据类型对应的数据库类型，也即该待缓存数据适合存储于何种类型的数据库中，确定出来的数据库类型可以作为后续步骤的数据基础。

其中，预设的数据类型以及数据库类型的对应关系可以预先进行自主设定，其具体形式可以为多种，本发明实施例在此不做限定。

步骤S3：将待缓存数据存储至数据库类型对应的数据库中。

具体的，在确定出待缓存数据对应的数据库类型后，便可以将待缓存数据存储至该数据库类型对应的数据库中，从而数据对待缓存数据的分类存储的管理工作，此种方式一方面可以充分利用不同类型数据库的特性，另一方面方便对各种类型的缓存数据进行管理。

其中，在将待缓存数据存储至对应类型的数据库中后，在用户后续有查询需求的时候，便可以从数据库中将数据读取出来并提供给用户。

本发明提供了一种数据缓存管理方法，考虑到不同类型的数据库具有不同的特性，而海量需要缓存的数据也有不同的类型，因此本申请根据预设的数据类型以及数据库类型的对应关系，将待缓存数据根据其类型存入相应类型的数据库中，可以更加合理以及充分地利用不同类型数据库的特性(例如可以将后续查询频率较高的内存性数据缓存至具有较高读取速度的数据库等)，提高了数据查询效率，另外，将数据进行分类缓存还有利于对海量缓存数据的管理。

在上述实施例的基础上：

作为一种优选的实施例，确定待缓存数据的数据类型之前，该数据缓存管理方法还包括：

判断接收到的待缓存数据是否完整；

若不完整，判断重试次数是否大于预设阈值；

若不大于，向发送待缓存数据的节点重新请求待缓存数据并将初始值为零的重试次数加一。

具体的，为了保证数据缓存的完整性，在接收到节点发送的待缓存数据时，可以判断待缓存数据是否完整，若不完整便可以向发送待缓存数据的节点重新请求待缓存数据，直至接收到完整的待缓存数据为止，从而保证数据缓存的完整性。

当然，为了在持续无法接收到完整的待缓存数据的情况下使得分布式存储系统正常工作，本发明实施例中还设置了预设阈值，只有在重试次数未超过预设阈值的情况下进行重新请求，在重试次数超过预设阈值的情况下不再请求接收该待缓存数据，从而保证分布式存储系统能够正常执行其他业务。

其中，预设阈值可以进行自主设定，例如可以为5次等，本发明实施例在此不做限定。

作为一种优选的实施例，判断重试次数是否大于预设阈值之后，该数据缓存管理方法还包括：

若大于，则控制报警器报警。

具体的，考虑到数据缓存失败可能会对用户带来非常大的不便，或者可能存在某些故障，因此本申请中在重试次数大于预设阈值的情况下可以控制报警器报警，以便相关人员及时获悉并采取相应措施。

其中，报警器的设置位置可以为多种，例如可以为分布式存储系统管理员所在地，也可以为未完整接收的待缓存数据对应节点，也可以在上述两个位置均设置报警器，本发明实施例在此不做限定。

作为一种优选的实施例，若大于之后，控制报警器报警之前，该数据缓存管理方法还包括：

判断待缓存数据的数据类型是否属于预设重点类型；

若属于，则执行控制报警器报警的步骤。

具体的，考虑到在分布式存储系统中需要缓存的数据是海量的，若对所有未完整接收到的待缓存数据均进行报警，一方面是没有必要的，另一方面频繁的报警会加重相关人员的负担，因此本申请中预先设置了重点类型，只有当重试次数大于预设阈值的待缓存数据的数据类型属于预设重点类型时，才会控制报警器报警，一方面可以对重点类型的数据进行关注，另一方面不会过分加重工作人员的负担。

其中，预设重点类型具体可以为多种形式，本发明实施例在此不做限定。

作为一种优选的实施例，报警器为蜂鸣器。

具体的，蜂鸣器具有体积小、成本低以及报警效果好等优点。

其中，在蜂鸣器的基础上还可以通过文字进行提示，以便相关人员获悉具体的未缓存成功的待缓存数据。

当然，除了蜂鸣器外，报警器还可以为其他多种类型，例如显示器等，本发明实施例在此不做限定。

作为一种优选的实施例，该数据缓存管理方法还包括：

响应于接收到的对应关系配置指令，对对应关系进行配置。

具体的，考虑到随着分布式存储系统的使用，所对应的用户节点的结构或者数据类型可能会发生变化，从而导致分布式存储系统所涉及到的待缓存数据的数据类型可能会发生变化，因此也就需要对对应关系进行调整，在本发明实施例中，可以响应于接收到的对应关系配置指令，对对应关系进行配置，以便能够使得分布式存储系统适应于缓存数据的数据类型的变化。

其中，对应关系配置指令可以为工作人员通过人机交互装置发送的指令，本发明实施例在此不做限定。

作为一种优选的实施例，响应于接收到的对应关系配置指令，对对应关系进行配置之后，该数据缓存管理方法还包括：

响应于接收到的数据库类型配置指令，对数据库的类型结构进行配置。

具体的，考虑到某些情况下由于涉及到的缓存数据的数据类型的变化还需要对数据库类型结构进行调整，因此在本发明实施例中，可以响应于接收到的数据库类型配置指令，对数据库的类型结构进行配置，以便更好地服务于缓存数据的查询工作以及管理工作。

其中数据库类型，配置指令可以为工作人员通过人机交互装置发送的指令，本发明实施例在此不做限定。

请参考图2，图2为本发明提供的一种数据缓存管理装置的结构示意图，该数据缓存管理装置包括：

第一确定模块1，用于确定待缓存数据的数据类型；

第二确定模块2，用于根据预设的数据类型以及数据库类型的对应关系，确定出待缓存数据的数据类型对应的数据库类型；

执行模块3，用于将待缓存数据存储至数据库类型对应的数据库中。

对于本发明实施例提供的数据缓存管理装置的介绍请参照前述的数据缓存管理方法的实施例，本发明实施例在此不再赘述。

请参考图3，图3为本发明提供的一种数据缓存管理设备的结构示意图，该数据缓存管理设备包括：

存储器4，用于存储计算机程序；

处理器5，用于执行计算机程序时实现如前述实施例中数据缓存管理方法的步骤。

对于本发明实施例提供的数据缓存管理设备的介绍请参照前述的数据缓存管理方法的实施例，本发明实施例在此不再赘述。

本发明还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如前述实施例中数据缓存管理方法的步骤。

对于本发明实施例提供的计算机可读存储介质的介绍请参照前述的数据缓存管理方法的实施例，本发明实施例在此不再赘述。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者设备中还存在另外的相同要素。

对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其他实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种数据缓存管理方法，其特征在于，包括：

确定待缓存数据的数据类型；

根据预设的数据类型以及数据库类型的对应关系，确定出所述待缓存数据的数据类型对应的数据库类型；

将所述待缓存数据存储至所述数据库类型对应的数据库中。

2.根据权利要求1所述的数据缓存管理方法，其特征在于，所述确定待缓存数据的数据类型之前，该数据缓存管理方法还包括：

判断接收到的待缓存数据是否完整；

若不完整，判断重试次数是否大于预设阈值；

若不大于，向发送所述待缓存数据的节点重新请求所述待缓存数据并将初始值为零的所述重试次数加一。

3.根据权利要求2所述的数据缓存管理方法，其特征在于，所述判断重试次数是否大于预设阈值之后，该数据缓存管理方法还包括：

若大于，则控制报警器报警。

4.根据权利要求3所述的数据缓存管理方法，其特征在于，所述若大于之后，所述控制报警器报警之前，该数据缓存管理方法还包括：

判断所述待缓存数据的数据类型是否属于预设重点类型；

若属于，则执行所述控制报警器报警的步骤。

5.根据权利要求4所述的数据缓存管理方法，其特征在于，所述报警器为蜂鸣器。

6.根据权利要求1所述的数据缓存管理方法，其特征在于，该数据缓存管理方法还包括：

响应于接收到的对应关系配置指令，对所述对应关系进行配置。

7.根据权利要求6所述的数据缓存管理方法，其特征在于，所述响应于接收到的对应关系配置指令，对所述对应关系进行配置之后，该数据缓存管理方法还包括：

响应于接收到的数据库类型配置指令，对数据库的类型结构进行配置。

8.一种数据缓存管理装置，其特征在于，包括：

第一确定模块，用于确定待缓存数据的数据类型；

第二确定模块，用于根据预设的数据类型以及数据库类型的对应关系，确定出所述待缓存数据的数据类型对应的数据库类型；

执行模块，用于将所述待缓存数据存储至所述数据库类型对应的数据库中。

9.一种数据缓存管理设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述数据缓存管理方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述数据缓存管理方法的步骤。

Images