CN102541927A - 一种实现数据缓存的方法和装置 - Google Patents

Abstract

本发明公开了一种实现数据缓存的方法，对数据库的存储数据进行ORM，获得第一存储数据对象，根据指定基类对第一存储数据对象进行继承操作，获得第二存储数据对象，根据存储数据在数据库中的表标识，生成所述第二存储数据对象的前缀值，将第二存储数据对象的主键值设置为与存储数据在所述数据库中的主键值相同，根据键值存储方式向分布式内存对象缓存系统存储第二存储数据对象的前缀值、主键值与第二存储数据对象的对应关系。本发明还公开了一种实现数据缓存的装置。采用本发明的实现数据缓存的方法和装置，由于分布式内存对象缓存系统的存取速度快，容量能够根据需要扩充或减少，因而能够提高数据查询速度。

Description

一种实现数据缓存的方法和装置

技术领域

本发明涉及数据存储技术，特别是涉及一种实现数据缓存的方法和装置。

背景技术

在大型网站等数据存储的应用领域，需要频繁地对大量数据进行读写操作。对于大型数据库，为了提高查询速度，目前存在两种优化的存取方式。在第一种方式中，根据读写数据操作将全部数据库划分为主数据库和辅数据库，通过读写分离来分散数据库读写压力，提高查询速度。在第二种方式中，按照业务特点横向或纵向分割数据库，通过提高访问效率提高查询速度。

采用上述数据库优化存取方式，虽然通过划分对数据库进行了优化，但是，上述数据库存取方式都需要与硬盘、磁带等存储介质进行数据交换。由于硬盘、磁带等存储介质的输入输出速度慢，因此，采用现有的数据存取方法，数据查询速度慢，访问效率低。

发明内容

本发明提供了一种实现数据缓存的方法，以提高数据查询速度。

本发明还提供了一种实现数据缓存的装置，以提高数据查询速度。

为达到上述目的，本发明的技术方案是这样实现的：

本发明公开了一种实现数据缓存的方法，包括：

对数据库的存储数据进行对象关系映射(ORM)，获得第一存储数据对象；

根据指定基类，对所述第一存储数据对象进行继承操作，获得第二存储数据对象；

获取所述存储数据在所述数据库中的表标识和主键值；

根据所述存储数据在所述数据库中的表标识，生成所述第二存储数据对象的前缀值；

将所述第二存储数据对象的主键值设置为与所述存储数据在所述数据库中的主键值相同；

根据键值存储方式向分布式内存对象缓存系统存储所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系。

本发明还公开了一种实现数据缓存的装置，包括：

数据库模块，用于保存存储数据；

映射模块，用于对数据库的存储数据进行对象关系映射ORM，获得第一存储数据对象，根据指定基类，对所述第一存储数据对象进行继承操作，获得第二存储数据对象；

获取模块，用于获取所述存储数据在所述数据库中的表标识和主键值；

取值模块，用于根据所述存储数据在所述数据库中的表标识，生成所述第二存储数据对象的前缀值，将所述第二存储数据对象的主键值设置为与所述存储数据在所述数据库中的主键值相同；

分布式内存对象缓存系统，用于根据键值存储方式存储所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系。

由以上发明内容可见，通过对数据库的存储数据进行对象关系映射后存储到分布式内存对象缓存系统，在数据查询时，先在分布式内存对象缓存系统进行查询，只有当内存中无法查询到该数据时，才进入数据库中进行查询。由于分布式内存对象缓存系统的全部操作都在内存中进行，内存的存取速度显著快于硬盘、磁带等存储介质的存取速度，容量能够根据需要扩充或减少，因而提高了数据查询速度。

附图说明

图1为本发明实施例一的实现数据缓存的方法的流程图；

图2为本发明实施例二的实现数据缓存的装置的结构示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面结合附图和具体实施例对本发明进行详细描述。

本发明的基本思想是，对数据库的存储数据进行对象关系映射继承指定基类，根据存储数据在数据库中的表标识和主键值将获得的存储数据对象存储到内存，在数据查询时，先在内存进行查询，只有当内存中无法查询到该数据时，才在数据库中进行查询，因为内存的存取速度显著快于对硬盘、磁带等磁盘介质的存取速度，因此能够提高数据查询速度。

图1为本发明实施例一的实现数据缓存的方法的流程图。如图1所示，该方法包括如下过程。

步骤101：对数据库的存储数据进行对象关系映射(ORM)，获得第一存储数据对象。

步骤102：根据指定基类，对第一存储数据对象进行继承操作，获得第二存储数据对象。

在本步骤中，在对全部第一存储数据对象进行继承操作时，均采用统一的指定基类，例如，该指定基类采用基本实体(BaseEntity)，从而令获得的全部第二存储数据对象都继承同样的基类。

步骤103：获取存储数据在数据库中的表标识和主键值。

步骤104：根据存储数据在数据库中的表标识，生成第二存储数据对象的前缀值。

在本步骤中，采用键获取(getKey)方法，根据该表标识生成该前缀值。

步骤105：将第二存储数据对象的主键值设置为与存储数据在数据库中的主键值相同。

步骤106：根据键值存储方式向分布式内存对象缓存系统(mencached)存储第二存储数据对象的前缀值、主键值与第二存储数据对象的对应关系。

在步骤106之后，完成了对数据库中数据的映像和缓存。进一步地，在步骤106之后，在对数据进行查询时，还可以包括以下步骤。

步骤107：获取数据查询指令。

在本步骤中，该数据查询指令包括：查询数据的前缀值和主键值。

步骤108：判断分布式内存对象缓存系统中是否存在查询数据的前缀值和主键值；如果是，执行步骤109，否则，执行步骤110。

步骤109：查询分布式内存对象缓存系统，根据第二存储数据对象的前缀值、主键值与第二存储数据对象的对应关系，获取查询数据的前缀值和主键值对应的第二存储数据对象并输出。

步骤110：查询数据库，获取查询数据的前缀值和主键值对应的存储数据并进行ORM，获得第一查询数据对象，根据指定基类，对第一查询数据对象进行继承操作，获得第二查询数据对象并输出。

进一步地，在步骤110之后，还可以包括步骤111。

步骤111：根据键值存储方式向分布式内存对象缓存系统存储第二查询数据对象的前缀值、主键值与第二查询数据对象的对应关系。其中，第二查询数据对象的前缀值和主键值分别与查询数据的前缀值和主键值相同。

进一步地，采用上述的实现数据缓存的方法，当需要对数据库进行数据更新或插入操作时，相应地，需要对分布式内存对象缓存系统进行数据对象的更新或插入操作，具体包括如下过程：第一步，获取数据更新或插入指令，其中，数据更新或插入指令包括：更新或插入数据以及更新或插入数据在数据库中的表标识和主键值。第二步，根据数据更新或插入指令，对数据库进行数据更新或插入操作。第三步，对更新或插入数据进行ORM，获得第一更新或插入数据对象。第四步，根据指定基类，对第一更新或插入数据对象进行继承操作，获得第二更新或插入数据对象。第五步，根据更新或插入数据在数据库中的表标识，生成第二更新或插入数据对象的前缀值。第六步，将第二更新或插入数据对象的主键值设置为与更新或插入数据在数据库中的主键值相同。第七步，根据键值存储方式向分布式内存对象缓存系统存储第二更新或插入数据对象的前缀值、主键值与第二更新或插入数据对象的对应关系。

进一步地，采用上述的实现数据缓存的方法，当需要对数据库进行数据删除操作时，相应地，需要对分布式内存对象缓存系统进行数据对象的删除操作，具体包括如下过程：第一步，获取数据删除指令，数据删除指令包括：待删除数据以及待删除数据在数据库中的表标识和主键值。第二步，根据数据删除指令，对数据库进行数据删除操作第三步，根据待删除数据在数据库中的表标识，生成第二待删除数据对象的前缀值。第四步，将第二待删除数据对象的主键值设置为与待删除数据在数据库中的主键值相同。第五步，在分布式内存对象缓存系统中删除第二待删除数据对象的前缀值、主键值以及与第二待删除数据对象的前缀值、主键值对应的第二待删除数据对象。

以上对本发明实施例一的实现数据缓存的方法进行了介绍，该方法具体可以通过本发明实施例二的数据缓存装置实现。

图2为本发明实施例二的实现数据缓存的装置的结构示意图。如图2所示，该装置至少包括：数据库21、映射模块22、获取模块23、取值模块24、分布式内存对象缓存系统25，进一步地，还可以包括：指令模块26、查询模块27和输出模块28。

其中，数据库21保存存储数据。进一步地，数据库21还根据数据更新或插入指令，进行数据更新或插入操作。进一步地，数据库21还根据数据删除指令，进行数据删除操作。

映射模块22对数据库21的存储数据进行ORM，获得第一存储数据对象，根据指定基类，对第一存储数据对象进行继承操作，获得第二存储数据对象。进一步地，映射模块22还对查询数据的前缀值和主键值对应的存储数据进行ORM，获得第一查询数据对象，根据指定基类，对第一查询数据对象进行继承操作，获得第二查询数据对象。进一步地，映射模块22还对更新或插入数据进行ORM，获得第一更新或插入数据对象，根据指定基类，对第一更新或插入数据对象进行继承操作，获得第二更新或插入数据对象。

获取模块23获取存储数据在数据库21中的表标识和主键值。

取值模块24根据存储数据在数据库21中的表标识，生成第二存储数据对象的前缀值，将第二存储数据对象的主键值设置为与存储数据在数据库21中的主键值相同。进一步地，取值模块24还将第二查询数据对象的前缀值和主键值分别设置为与查询数据的前缀值和主键值相同。进一步地，取值模块24还根据更新或插入数据在数据库21中的表标识，生成第二更新或插入数据对象的前缀值，将第二更新或插入数据对象的主键值设置为与更新或插入数据在数据库21中的主键值相同。进一步地，取值模块24还根据待删除数据在数据库21中的表标识，生成第二待删除数据对象的前缀值，将第二待删除数据对象的主键值设置为与待删除数据在数据库21中的主键值相同。

分布式内存对象缓存系统25根据键值存储方式存储第二存储数据对象的前缀值、主键值与第二存储数据对象的对应关系。进一步地，该分布式内存对象缓存系统25还根据键值存储方式存储第二查询数据对象的前缀值、主键值与第二查询数据对象的对应关系。进一步地，该分布式内存对象缓存系统25还根据键值存储方式存储第二更新或插入数据对象的前缀值、主键值与第二更新或插入数据对象的对应关系。进一步地，分布式内存对象缓存系统25还删除第二待删除数据对象的前缀值、主键值以及与第二待删除数据对象的前缀值、主键值对应的第二待删除数据对象。

指令模块26获取数据查询指令，数据查询指令包括：查询数据的前缀值和主键值。进一步地，该指令模块26还获取数据更新或插入指令，数据更新或插入指令包括：更新或插入数据以及更新或插入数据在数据库21中的表标识和主键值。进一步地，该指令模块26还获取数据删除指令，数据删除指令包括：待删除数据以及待删除数据在数据库21中的表标识和主键值。

查询模块27判断分布式内存对象缓存系统25中是否存在查询数据的前缀值和主键值。如果是，查询分布式内存对象缓存系统25，根据第二存储数据对象的前缀值、主键值与第二存储数据对象的对应关系，获取查询数据的前缀值和主键值对应的第二存储数据对象；否则，查询数据库21，获取查询数据的前缀值和主键值对应的存储数据。

输出模块28输出查询数据的前缀值和主键值对应的第二存储数据对象或第二查询数据对象。

在上述实现数据缓存的装置中，映射模块22、获取模块23、取值模块24、指令模块26、查询模块27和输出模块28等，可以通过面向方面编程(AOP)实现，通过AOP控制分布式内存对象缓存系统25进行读取操作、更新或插入操作、删除操作。

由以上具体实施方式可见，通过对数据库的存储数据进行对象关系映射后存储到分布式内存对象缓存系统。将分布式内存对象缓存系统部署在前台应用和数据库之间，作为两者之间的数据缓冲，在数据查询时，先在分布式内存对象缓存系统进行查询，只有当内存中无法查询到该数据时，才进入数据库中进行查询。分布式内存对象缓存系统的全部操作都在内存中进行，因为内存的存取速度显著快于硬盘、磁带等存储介质的存取速度，因此能够减少对数据库的访问，快速响应前台应用的查询请求，因而提高了数据查询速度。内存的容量能够根据需要扩充或减少。并且，由于分布式内存对象缓存系统能够同时服务于多条连接，因此，采用本发明提供的实现数据缓存的方法和装置，能够提高数据存取系统的并发处理能力。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (10)

1.一种实现数据缓存的方法，其特征在于，包括：

对数据库的存储数据进行对象关系映射ORM，获得第一存储数据对象；

根据指定基类，对所述第一存储数据对象进行继承操作，获得第二存储数据对象；

获取所述存储数据在所述数据库中的表标识和主键值；

根据所述存储数据在所述数据库中的表标识，生成所述第二存储数据对象的前缀值；

将所述第二存储数据对象的主键值设置为与所述存储数据在所述数据库中的主键值相同；

根据键值存储方式向分布式内存对象缓存系统存储所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系。

2.根据权利要求1所述的方法，其特征在于，所述根据键值存储方式向分布式内存对象缓存系统存储所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系之后，还包括：

获取数据查询指令，所述数据查询指令包括：查询数据的前缀值和主键值；

判断所述分布式内存对象缓存系统中是否存在所述查询数据的前缀值和主键值；

如果是，查询所述分布式内存对象缓存系统，根据所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系，获取所述查询数据的前缀值和主键值对应的第二存储数据对象并输出；

否则，查询所述数据库，获取所述查询数据的前缀值和主键值对应的存储数据并进行ORM，获得第一查询数据对象，根据指定基类，对所述第一查询数据对象进行继承操作，获得第二查询数据对象并输出。

3.根据权利要求2所述的方法，其特征在于，所述获得第二查询数据对象并输出之后，还包括：

根据键值存储方式向分布式内存对象缓存系统存储所述第二查询数据对象的前缀值、主键值与所述第二查询数据对象的对应关系，所述第二查询数据对象的前缀值和主键值分别与所述查询数据的前缀值和主键值相同。

4.根据权利要求1至3中任意一项所述的方法，其特征在于，所述根据键值存储方式向分布式内存对象缓存系统存储所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系之后，还包括：

获取数据更新或插入指令，所述数据更新或插入指令包括：更新或插入数据以及所述更新或插入数据在所述数据库中的表标识和主键值；

根据所述数据更新或插入指令，对所述数据库进行数据更新或插入操作；

对所述更新或插入数据进行ORM，获得第一更新或插入数据对象；

根据指定基类，对所述第一更新或插入数据对象进行继承操作，获得第二更新或插入数据对象；

根据所述更新或插入数据在所述数据库中的表标识，生成所述第二更新或插入数据对象的前缀值；

将所述第二更新或插入数据对象的主键值设置为与所述更新或插入数据在所述数据库中的主键值相同；

根据键值存储方式向分布式内存对象缓存系统存储所述第二更新或插入数据对象的前缀值、主键值与所述第二更新或插入数据对象的对应关系。

5.根据权利要求1至3中任意一项所述的方法，其特征在于，所述根据键值存储方式向分布式内存对象缓存系统存储所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系之后，还包括：

获取数据删除指令，所述数据删除指令包括：待删除数据以及所述待删除数据在所述数据库中的表标识和主键值；

根据所述数据删除指令，对所述数据库进行数据删除操作；

根据所述待删除数据在所述数据库中的表标识，生成第二待删除数据对象的前缀值；

将所述第二待删除数据对象的主键值设置为与所述待删除数据在所述数据库中的主键值相同；

在所述分布式内存对象缓存系统中删除所述第二待删除数据对象的前缀值、主键值以及与所述第二待删除数据对象的前缀值、主键值对应的第二待删除数据对象。

6.一种实现数据缓存的装置，其特征在于，包括：

数据库模块，用于保存存储数据；

映射模块，用于对数据库的存储数据进行对象关系映射ORM，获得第一存储数据对象，根据指定基类，对所述第一存储数据对象进行继承操作，获得第二存储数据对象；

获取模块，用于获取所述存储数据在所述数据库中的表标识和主键值；

取值模块，用于根据所述存储数据在所述数据库中的表标识，生成所述第二存储数据对象的前缀值，将所述第二存储数据对象的主键值设置为与所述存储数据在所述数据库中的主键值相同；

分布式内存对象缓存系统，用于根据键值存储方式存储所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系。

7.根据权利要求6所述的装置，其特征在于，所述装置还包括：

指令模块，用于获取数据查询指令，所述数据查询指令包括：查询数据的前缀值和主键值；

查询模块，用于判断所述分布式内存对象缓存系统中是否存在所述查询数据的前缀值和主键值；如果是，查询所述分布式内存对象缓存系统，根据所述第二存储数据对象的前缀值、主键值与所述第二存储数据对象的对应关系，获取所述查询数据的前缀值和主键值对应的第二存储数据对象；否则，查询所述数据库，获取所述查询数据的前缀值和主键值对应的存储数据；

输出模块，用于输出所述查询数据的前缀值和主键值对应的第二存储数据对象或第二查询数据对象；

所述映射模块还用于对所述查询数据的前缀值和主键值对应的存储数据进行ORM，获得第一查询数据对象，根据指定基类，对所述第一查询数据对象进行继承操作，获得所述第二查询数据对象。

8.根据权利要求7所述的装置，其特征在于，

所述取值模块，还用于将所述第二查询数据对象的前缀值和主键值分别设置为与所述查询数据的前缀值和主键值相同；

所述分布式内存对象缓存系统，还用于根据键值存储方式存储所述第二查询数据对象的前缀值、主键值与所述第二查询数据对象的对应关系。

9.根据权利要求7中任意一项所述的装置，其特征在于，

所述指令模块，还用于获取数据更新或插入指令，所述数据更新或插入指令包括：更新或插入数据以及所述更新或插入数据在所述数据库中的表标识和主键值；

所述数据库，还用于根据所述数据更新或插入指令，进行数据更新或插入操作；

所述映射模块，还用于对所述更新或插入数据进行ORM，获得第一更新或插入数据对象，根据指定基类，对所述第一更新或插入数据对象进行继承操作，获得第二更新或插入数据对象；

所述取值模块，还用于根据所述更新或插入数据在所述数据库中的表标识，生成所述第二更新或插入数据对象的前缀值，将所述第二更新或插入数据对象的主键值设置为与所述更新或插入数据在所述数据库中的主键值相同；

所述分布式内存对象缓存系统，还用于根据键值存储方式存储所述第二更新或插入数据对象的前缀值、主键值与所述第二更新或插入数据对象的对应关系。

10.根据权利要求7中任意一项所述的装置，其特征在于，

所述指令模块，还用于获取数据删除指令，所述数据删除指令包括：待删除数据以及所述待删除数据在所述数据库中的表标识和主键值；

所述数据库，还用于根据所述数据删除指令，进行数据删除操作；

所述取值模块，还用于根据所述待删除数据在所述数据库中的表标识，生成第二待删除数据对象的前缀值，将所述第二待删除数据对象的主键值设置为与所述待删除数据在所述数据库中的主键值相同；

所述分布式内存对象缓存系统，还用于删除所述第二待删除数据对象的前缀值、主键值以及与所述第二待删除数据对象的前缀值、主键值对应的第二待删除数据对象。

Images