CN1924853A - 一种加速数据库查询速度的方法 - Google Patents

Abstract

本发明针对现有的电信计费系统数据查询速度较慢，对数据库性能依赖性大的问题，公开了一种加速数据库查询速度的方法，它通过在系统内存中开辟用于存放数据和数据索引的共享内存段，由守护进程按约定的方式将数据库中的数据和数据索引分别调入相应的共享内存段中供务业进程调用，同时由守护进程定时或循环对数据库中的记录进行查询，及时将更接的数据内容记录到上述共享内存段中。在不增加硬件投资的前提下，可有效地提高数据库的查询速度，减少对数据库性能的依赖。

Description

一种加速数据库查询速度的方法

技术领域

本发明涉及一种电信计费系统的数据库技术，具体地说是一种加速数据库查询速度的方法。

背景技术

目前，计费系统中各种业务程序需要对数据库中的数据进行频繁的查询操作，涉及的数据量非常巨大，访问数据库的频率很高，由此产生过多的数据库交互导致程序性能降低。使用共享内存技术将数据库待查询的数据上载到业务程序所在的系统内存中，结合业务需求建立快速有效的查询方式，提高查询速度，减少对数据库性能的依赖。

发明内容

本发明的目的是针对现有的电信计费系统数据查询速度较慢，对数据库性能依赖性大的问题，提供一种加速数据库查询速度的方法。

本发明的技术方案是：

一种加速数据库查询速度的方法，其特征是在系统内存中开辟用于存放数据和数据索引的共享内存段，由守护进程按约定的方式将数据库中的数据和数据索引分别调入相应的共享内存段中供业务进程调用，同时由守护进程定时或循环对数据库中的记录进行查询，及时将更新的数据内容记录到上述共享内存段中。

在上载数据的过程中，所述的守护进程可根据业务查询需求的内容，获取数据库中对应的数据，经过处理后形成逻辑表的记录用以上载；同时根据业务查询的要求，对逻辑表的记录建立索引和对应的查询方法；根据业务实际数据量建立对应大小的共享内存，将逻辑表的数据和索引以数组方式上载到共享内存中并进行管理。

在查询数据过程中，业务进程连接指定的共享内存，根据系统提供的查询方法获取需要的数据，拷贝到进程内部内存进行操作，并限制修改共享内存中的数据。

维护数据过程中，守护进程通过设定的查询方式获取数据库中更新过的数据记录，采用与上载数据类似方法更新共享内存中的数据，完成数据同步。

本发明的有益效果：

1、本发明在不增加硬件投资的前提下，可有效地提高数据库的查询速度。

2、本发明通过使用共享内存技术将数据库待查询的数据上载到业务程序所在的系统内存中，结合业务需求建立快速有效的查询方式，提高了查询速度，减少了对数据库性能的依赖。

附图说明

图1是本发明的原理示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的说明。

图1所示。

一种加速数据库查询速度的方法，在系统内存中开辟用于存放数据和数据索引的共享内存段，由守护进程按约定的方式将数据库中的数据和数据索引分别调入相应的共享内存段中供业务进程调用，同时由守护进程定时或循环对数据库中的记录进行查询，及时将更新的数据内容记录到上述共享内存段中。

在上载数据的过程中，所述的守护进程可根据业务查询需求的内容，获取数据库中对应的数据，经过处理后形成逻辑表的记录用以上载；同时根据业务查询的要求，对逻辑表的记录建立索引和对应的查询方法；根据业务实际数据量建立对应大小的共享内存，将逻辑表的数据和索引以数组方式上载到共享内存中并进行管理。

在查询数据过程中，业务进程连接指定的共享内存，根据系统提供的查询方法获取需要的数据，拷贝到进程内部内存进行操作，并限制修改共享内存中的数据。

维护数据过程中，守护进程通过设定的查询方式获取数据库中更新过的数据记录，采用与上载数据类似方法更新共享内存中的数据，完成数据同步。

本发明可根据需要查询的数据量，首先在系统内存中开辟足够的共享内存段，用于存放数据记录。同时根据数据查询的需求建立对应的查询方式(即建立索引)，创建立对应的共享内存段，用于存放索引及辅助维护数据。系统框架如图1。详述如下

总体流程：

守护进程根据预先定义，查询并获取数据库中的原始数据，经过处理形成需要存放的记录并插入共享内存的数据段，同时根据查询方式形成对应的索引记录，插入共享内存的索引段。在数据被批量上载后，业务进程可以连接共享内存，先访问索引段，然后获取对应的数据记录。数据库数据发生变动时，守护进程根据相应的机制获取变动的资料，依照前面业务进程查询数据的方法，如果找到指定数据就更新，如果没有找到就插入新记录。

共享内存：

首先建立一个共享内存管理区，用于存放相关数据段和索引段的管理信息。每个数据段和索引段都是不同的共享内存段，它们之间的逻辑关系存放在管理区。同时管理区还需要保存每个段的相关信息比如段的大小，段的系统标识，创建时间，更新时间，存放的记录数，记录大小。

索引：

根据各个业务进程查询的需要，以及业务数据本身的特点，采用散列方法生成索引。将数据库各表的数据根据业务要求结合，对应生成各种逻辑表，逻辑表的数据记录就是需要存放在共享内存的数据记录，通过数据库查询SQL获得这些记录后按照数组的方式存放数据。同时根据每个数据记录的逻辑建立散列索引。索引记录存放位址是根据对应数据记录的逻辑索引散列获取，索引记录的内容是对应数据记录的存放信息，段落号和段内偏移位置。对同一个逻辑表可能存在不同的索引，及对一个数据记录存在多个索引记录用来保存其地址信息。业务进程和守护进程需要使用统一的建立索引的方法。

数据维护：

系统的目标是提供快捷的查询途径，所以本系统的数据更新只涉及根据数据库记录的增加和修改，数据的删除不在系统功能范围内。守护进程定时或者循环查询数据库记录修改时间，或者修改记录查询已经被修改的记录，完成内存数据库数据记录在共享内存的同步更新(根据系统和数据量影响会产生一定的更新时间差)。共享内存的数据有守护进程负责修改，其它的访问进程只能查询，因此可以保证在某个时刻业务逻辑的完整性。

下面以一个具体的实施对本发明的加速数据库查询的方法作一步的说明：

例如数据库中的订户表SUBS，包含字段有ID，PREFIX，ACC_NBR，ACCT_ID，CUST_ID，USER_ID，AGENT_ID，PRICE_PLAN_ID，BONUS_AMOUNT，UPDATE_DATE等字段。其中部分字段是在计费业务中是必不可少的，当守护进程准备将该表的数据上载到共享内存前，会根据业务需求将对应的CUST_ID，USER_ID，AGENT_ID字段舍去，同时根据业务进程查询数据的查询条件，对PREFIX和ACC_NBR，ACCT_ID，ID建立对应的索引，并提供对应的查询方法。其中ID是主键，是内存中数据唯一的标识，这个是必须存在的，用于更新和插入数据的。

当守护进程上载完数据到共享内存中后，定时进行维护更新操作。当数据库中表SUBS有记录修改后，需要有机制可以记录被修改记录的主键标识。守护进程根据被修改记录的主键标识，通过ID索引查询对应的数据，如果存在则更新共享内存中的数据，如果不存在，则新建一个记录在共享内存中。如果修改的字段中包含了作为索引的字段，如PREFIX，ACC_NBR，ACCT_ID则守护进程需要更新修改记录对应的索引信息。

业务进程根据需要查询共享内存数据时，比如根据PREFIX和ACC_NBR(号码前缀和号码)进行记录查找，只需知道对应的PREFIX和ACC_NBR对应的数值，使用对应的查询方法，就可以获取数据。

Claims (4)

1、一种加速数据库查询速度的方法，其特征是在系统内存中开辟用于存放数据和数据索引的共享内存段，由守护进程按约定的方式将数据库中的数据和数据索引分别调入相应的共享内存段中供业务进程调用，同时由守护进程定时或循环对数据库中的记录进行查询，及时将更新的数据内容记录到上述共享内存段中。

2、根据权利要求1所述的加速数据库查询速度的方法，其特征是上载数据的过程中，守护进程根据业务查询需求的内容，获取数据库中对应的数据，经过处理后形成逻辑表的记录用以上载；同时根据业务查询的要求，对逻辑表的记录建立索引和对应的查询方法；根据业务实际数据量建立对应大小的共享内存，将逻辑表的数据和索引以数组方式上载到共享内存中并进行管理。

3、根据权利要求1所述的加速数据库查询速度的方法，其特征是在查询数据过程中，业务进程连接指定的共享内存，根据系统提供的查询方法获取需要的数据，拷贝到进程内部内存进行操作，并限制修改共享内存中的数据。

4、根据权利要求1所述的加速数据库查询速度的方法，其特征是维护数据过程中，守护进程通过设定的查询方式获取数据库中更新过的数据记录，采用与上载数据类似方法更新共享内存中的数据，完成数据同步。