CN101860449A - 一种数据查询方法、装置及系统 - Google Patents

Abstract

本发明实施例提供一种数据查询的方法，应用服务器根据客户端发送的查询符合一定查询条件的数据的查询请求，确定查询主键，并向数据库服务器查询该查询主键的值，根据查询请求中的查询结果项数及对应的查询主键的值创建数据库临时表，最后查询出临时表中查询主键的值标识的数据，该数据即为客户端所需的数据。本发明还提供一种数据查询的装置和系统。通过本发明实施例提供技术方案可以提高数据查询的效率。

Description

一种数据查询方法、装置及系统

技术领域

本发明涉及通信技术领域，特别涉及一种数据查询方法、装置及系统。

背景技术

随着通信技术的发展，为满足各种业务的需要，数据库服务器中存储的数据越来越多，对于大型应用系统(如电信级应用系统)，数据库服务器中的数据数量往往是百万级的，而查询并浏览数据是用户最为常见的需求。如何从数据库服务器庞大的数据中快速、可靠的读取用户需要的数据显得尤为重要。

在B/S(Browser/Server)浏览器/服务器模式和C/S(Client/Server)客户端/服务器模式的应用系统中，现有技术一般的查询过程为：数据存储在数据库服务器中，当用户需要查询数据时，将查询条件发给应用服务器，应用服务器接到客户端查询请求后，将查询任务提交给数据库服务器，数据库查询出符合查询条件的数据，并发给应用服务器，应用服务器再将查询出的数据全部反馈给客户端，在客户端进行缓存并显示。

发明人在研究中发现，通过以上方法查询数据存在如下问题：现有技术中的查询操作严重依赖数据库服务器，受数据库服务器处理速度的影响很大，数据库服务器直接根据查询条件查找数据，在存储有百万级数据量的数据库中过滤出符合查询条件的数据，对数据数据库的负载很大，查询效率也很低，影响客户的查询体验。

发明内容

本发明所要解决的技术问题是提供一种数据查询方法，用以在节省数据库服务器资源占用的情况下，有效的提高数据查询的效率。

为解决以上问题，本发明所提供的实施例是通过以下技术方案实现的：

一种数据查询方法，该方法包括：

应用服务器接收来自客户端的查询第一数据的第一查询请求，该第一查询请求包括查询条件和第一查询结果项数；

应用服务器根据查询条件确定查询主键，获取与第一查询结果项数及对应的查询主键的值，并指令数据库服务器利用第一查询结果项数对应的查询主键的值创建第一临时表，该第一临时表中每一个表项记录有查询主键的值，第一临时表包含的表项数目等于第一查询结果项数；

应用服务器生成包含第一临时表的表名的第一查询语句，利用第一查询语句向数据库服务器查询第一临时表中的查询主键的值标识的第一数据。

一种数据查询装置，该装置包括：

接收模块，接收来自客户端的查询数据的查询请求，该查询请求中包括查询条件和所要查询的数据的查询结果项数；

执行模块，用于根据接收模块接收到的查询条件确定查询主键；

查询模块，用于生成包括查询条件和查询主键的第一查询语句，利用第一查询语句查询查询主键的值；

指令模块，用于指令数据库服务器利用查询结果项数及对应的查询主键的值创建临时表，该临时表中每一个表项记录有查询主键的值，所述临时表包含的表项数目等于查询结果项数；

查询模块，还用于生成包含临时表的表名的第二查询语句，利用第二查询语句查询临时表中的查询主键的值标识的所述数据。

一种数据查询系统，该系统包括：客户端、应用服务器和数据库服务器，其中，

客户端用于发送查询数据的请求，该请求中包括查询条件和数据的查询结果项数；

应用服务器用于接收客户端发送的请求，根据请求中的查询条件确定数据的查询主键，生成包括查询条件和查询主键的第一查询语句，第一查询语句用于向所述数据库服务器查询查询主键的值，并指令数据库服务器利用查询结果项数及对应的查询主键的值创建临时表，临时表中每一个表项记录有查询主键的值，第一临时表包含的表项数目等于第一查询结果项数，并生成第二查询语句，利用第二查询语句向数据库服务器查询临时表中查询主键的值标识的数据；

数据库服务器用于执行第一查询语句，查询查询主键的值，并创建临时表，执行第二查询语句，查询临时表中查询主键的值标识的数据。

通过以上的方案可以看出，本发明实施例中，通过确定满足查询条件的数据的查询主键，可以使得数据库服务器快速的查找出查询主键的值，利用查询结果项数及查询出的与之对应的查询主键的值建立临时表，从而查找出客户端需要的数据。该查询过程利用了查询主键查找的快速性和临时表的高效性，且该查询结果是以查询结果项数为基础，从而减少了数据的处理量和传输量，有效的减少了系统资源占用，提高了数据查询的效率，提升了客户端的查询体验。

附图说明

图1是本发明实施例中进行首次数据查询时的流程图；

图2是本发明实施例中进行拖动或翻页查询时的流程图；

图3是本发明实施例中装置实施例的结构示意图；

图4是本发明实施例中系统实施例的结构示意图。

具体实施方式

为使本发明的目的、技术方案及优点更加清楚明白，以下参照附图并举实施例，对本发明实施例进一步详细说明。

本发明实施例中，应用服务器根据客户端发送的查询请求中的查询条件确定查询主键，并向数据库服务器查询该查询主键的值，根据查询请求中的查询结果项数及对应的查询主键的值指令数据库服务器建立临时表，最后查询临时表中查询主键的值标识的数据，查询出客户端所需的数据。通过以上技术手段，提升了数据查询的效率，减轻数据库服务器的负荷，从而提升了客户端的查询体验。

下面对该实现过程进行详细的说明。

本发明实施例提供一种查询数据的方法，包括：

应用服务器接收来自客户端的查询第一数据的第一查询请求，所述第一查询请求包括查询条件和第一查询结果项数；

应用服务器根据所述查询条件确定查询主键，获取与所述第一查询结果项数对应的查询主键的值，并指令数据库服务器利用第一查询结果项数对应的查询主键的值创建第一临时表，所述第一临时表中每一个表项记录有查询主键的值，所述第一临时表包含的表项数目等于第一查询结果项数；

应用服务器生成包含第一临时表的表名的第一查询语句，利用所述第一查询语句向数据库服务器查询所述第一临时表中的查询主键的值标识的所述第一数据。

具体流程如图1和图2所示，其中，图1是客户端进行首次查询时的流程图，图2是客户端在后续的拖动或翻页查询时的流程图。

首先对客户端进行首次数据查询时的过程进行详细说明：

S101、客户端向应用服务器发送查询请求，该查询请求用于向应用服务器查询符合一定查询条件的数据，该查询请求中包括要查询的数据的查询条件和查询结果项数。

此处的客户端根据实际需求查询满足一定条件的数据。例如，要查询全国人口信息数据库中某个姓氏人口所有信息，该人口数据库如表1所示，表中包括的人口信息有People_ID身份证号码、Name(姓名)、Gender(性别)、Age(年龄)、Birth(生日)和Address(住址)等信息。此时，客户端将查询条件(例如姓李的人口信息)、查询结果项数携带于查询请求中发送给应用服务器，该人口信息包括身份证号、性别、姓名、年龄等，查询结果项数的大小一般等于客户端能够显示的缓冲区的大小，如显示器每屏只能显示80行，则该查询结果项数就为80个，当然也可以根据需要设定一定的查询结果项数，本实施例中以80行为例，则查询结果项数为80个。

S102-S103、应用服务器接收到客户端发送的查询请求后，根据查询请求中的查询条件确定查询主键，然后生成包括上述查询条件和上述查询主键的第一查询语句，利用第一查询语句向数据库服务器查询上述查询主键的值，数据库服务器根据应用服务器的第一查询语句查询所述查询主键的值。

接上例中查询姓李的人口信息这一查询过程。应用服务器接收到查询“姓李的人口信息”这一查询请求后，首先将用户端来的查询条件生成第二查询语句。本发明实施例中的查询语句(包括本发明实施例中出现的第一查询语句、第二查询语句...和第八查询语句)为数据库服务器能够识别的查询语句，优选的，本发明实施例中以SQL(Structured Query Language，结构化查询语言)语句为例进行说明。本实施例中，根据客户端的请求生成的第二查询语句为“select People_ID，Name，Gender，Age，Birth，Address...from People_Tablewhere Name like％李％”，其中，“select People ID_ID，Name，Gender，Age，Birth，Address...”表示要查询的人口信息包括“People_ID(身份证号)，Name(姓名)，Gender(性别)，Age(年龄)，Birth(生日)，Address(住址)...”等信息，“from People_Table”表示从人口数据库中查询，“where Name like％李％”表示条件为“姓李的信息”。

随后，应用服务器将上述第二查询语句转换成包括上述查询条件和应用服务器根据上述查询条件确定的查询主键第一查询语句，该第一查询语句用于查询查询主键的值。应用服务器根据查询条件，从多个候选索引(本例中候选索引有People_ID，Name，Gender，Age，Birth，Address等)中选择能够唯一标识符合查询条件的数据的查询主键(选出的查询主键可能包括一个或多个候选索引)，所谓查询主键，是能够唯一标识数据表中某一行的属性或属性组，一个数据表通常只有一个查询主键，但查询主键可以包括多个候选索引列。本例中能够唯一标识本例中查询条件的为People_ID列，即查询主键为People_ID。然后应用服务器生成包括查询条件和查询主键的第一查询语句，生成的第一查询语句为“select People_ID from People_Table where Namelike％李％”，其中，“select People_ID”表示要查询的内容为People_ID(身份证号)，其他部分表示的含义同第二查询语句。应用服务器将生成的第一查询语句发送给数据库服务器，数据库服务器根据第一查询语句的指示，查询出查询主键的值，即People_ID(身份证号)的内容，该内容即为符合查询条件的查询主键的值。

在大数量级的数据库服务器中，都会对其存储的数据建立数据表，并会为每个数据表建立候选索引列，以方便应用服务器对其进行管理，应用服务器从候选索引中确定出查询主键后，就可以指定数据库服务器找出查询主键的值，且查询查询主键的值是非常高效的，有利于提高整个查询过程的查询效率。

表1People_Table(人口数据库)

S104-S106、数据库服务器将查询出的查询主键的值返回给应用服务器，应用服务器将返回的与所述查询结果项数对应的查询主键的值加载入内存中，并根据要查询的查询结果项数及对应的查询主键的值指令数据库服务器创建临时表，该临时表中的每一个表项记录有查询主键的值，且临时表中的表项数目等于查询结果项数。

接上例中查询姓李的人口信息这一查询过程。数据库服务器查询出符合查询条件的查询主键的值后，将查询主键的值返回给应用服务器，应用服务器首先将首次查询的查询结果项数(本例中为前80个)的查询主键的值加载入内存，应用服务器指令数据库服务器创建临时表，该临时表中的每一个表项记录有查询主键的值，且临时表中的表项数目等于查询结果项数，优选的，该临时表中有表示查询结果项数的列和表示查询主键的值的列，在表示查询结果项数列中有所述查询结果项数的序号，在表示查询主键的值的列中有查询结果项数对应的查询主键的值，优选的，临时表中的查询结果项数的序号和查询主键的值可以通过批插的方式插入。本例中创建的临时表为“createtable#n30_161xx(row_no int，tmp_0 numeric(20))”，其中，“create table”表示创建数据表，“#”表示是临时表，“n30_161xx”表示临时表的名称，“row_noint”表示临时表中一列的内容为本次查询的查询结果项数的序号，“tmp_0”表示临时表中一列的内容为所述查询主键的值，“numeric(20)”表示所建的临时表中的内容是数据格式的。该临时表中包括表示查询结果项数(row_no int)的列和表示查询主键的列(tmp_0)。

生成的临时表如表2所示，表的列中包括序号，如“row_no”列中是本次查询所需的查询结果项数，从0到79行的序号，“Tmp_0”列中是查询主键的值，本例中是查询出的身份证号。

表2临时表

S107、应用服务器生成第三查询语句，所述第三查询语句用于向数据库服务器查询所述查询主键的值标识的数据，数据库服务器执行第三查询语句，查询出的数据即为符合查询条件的数据，将该数据返回给应用服务器，应用服务器将上述数据返回给客户端。

应用服务器根据临时表和客户端提交的查询条件生成第三查询语句，本例中生成的第三查询语句可为“select People_ID，Name，Gender，Age，Birth，Address...from People_Table，#n30_161xx where People_ID＝tmp_0 ORDERBY row_no ASC”，其中，“People_ID，Name，Gender，Age，Bath，Address...”是本次查询的人口信息的内容，“from People_Table”表示从人口数据库中进行查询，“#n30_161xx where People_ID＝tmp_0”表示要查询临时表中查询主键的值标识的身份证号所对应人口信息，“ORDER BY row_no ASC”表示以临时表的查询结果项数中的序号排序。应用服务器接收到第三SQL语句后，执行该查询语句，查询出满足第三查询语句的数据，该数据即为客户端首次查询所要的数据，并将查询出的数据返回给应用服务器，应用服务器将上述数据返回给客户端，然后数据库服务器将第一临时表删除。

S110-S111、应用服务器继续将数据库服务器返回的查询主键的值加载入内存，并通知客户端加载进度。在S105步骤中，应用服务器只加载用户首次查询所需的查询结果项数(前80个)对应的查询主键的值，S110步骤是将除S105步骤外的其他查询主键的值加载入内存，以方便用户在后续的拖动或翻页操作时的查询，当然，S110-S111步骤与S105-S109步骤之间并没有严格的先后顺序，可以同时进行。

上述过程是对客户端的首次查询过程的详细描述，客户端在完成首次的查询后，还可能通过拖动或者翻页的形式对其余符合查询条件的数据进行查看，以下是客户端在拖动或翻页查看时的查询过程，具体流程如图2所示：

S201、客户端向应用服务器发送查询请求，向应用服务器查询符合一定查询条件的数据，该查询请求中包括本次查询的查询条件和所要查询的查询结果项数。在客户端进行拖动操作时，查询条件与首次查询时的查询条件相同，查询结果项数的大小等于客户端拖动的行数，在客户端进行翻页操作时查询结果项数是能够显示的缓冲区的大小，如显示器每屏只能显示80行，则该查询结果项数就为(n-[n+79])个。

S202、应用服务器接收到客户端发送的查询请求后，根据查询条件和第二查询结果项数从其内存中获取与第二查询结果项数对应的第二查询主键的值。

S203、应用服务器指令数据库服务器创建第二临时表，该第二临时表中每一个表项记录有查询主键的值，该第二临时表中包含的表项数目等于第二查询结果项数。优选的，第二临时表中可以包括表示第二查询结果项数的列和表示查询主键的值的列，其中，在表示查询结果项数的列中有所述查询结果项数的序号，在表示查询主键的值的列中有查询结果项数对应的查询主键的值。优选的，临时表中的查询结果项数的序号和查询主键的值可以通过批插的方式插入。该过程同S106，只是这时的查询结果项数列的内容和索引信息列的内容有不同，此处不再详述。

S204、应用服务器生成包括临时表表名的第四查询语句，向数据库服务器进行查询，数据库服务器根据第四查询语句查询出符合查询条件的数据，该数据即为客户端需要的数据，将该数据返回给应用服务器，应用服务器将上述数据返回给客户端。该第四查询语句与第三查询语句的不同在于，第四SQL语句中的临时表为S203创建的第二临时表，其它部分相同，具体的查询过程同S107步骤，此处不再详述。

S205-S206、数据库服务器将查询出的数据返回给应用服务器，应用服务器将数据返回给客户端，数据库服务器将第二临时表删除。

用户继续进行拖动或翻页查看时，只需重复S201到S206的步骤即可。

上述发明实施例提供的方法，由于利用了查询主键查询的高效性和临时表的高效性(所有数据库操作系统均有临时表的高效机制)，使得查询操作本身效率得到很大提高，客户端能够迅速响应用户的查询需求。利用本方法，以200万数据进行测试，在CPU与IO(接口设备)资源消耗均在90％的情况下，客户端与服务器的每次交互在1S以内，而在采用此方案前，在同样背景下，客户端与服务器的每次交互在20S以上，效率提高近10倍。

本发明实施例还提供一种数据查询的装置，该装置为应用服务器，具体包括接收模块301，执行模块302，查询模块303，指令模块304和存储模块305。

其中，接收模块301用于接收来自客户端的查询数据的查询请求，该查询请求中包括本次查询的查询条件和所要查询数据的查询结果项数。

执行模块302，用于根据接收模块301接收到的查询条件确定查询主键。该过程同方法实施例中确定查询主键的过程，此处不再详述。

查询模块303，用于生成包括上述查询条件和上述查询主键的第五查询语句，该第五查询语句查询执行模块302确定的查询主键的值。该第五查询语句的具体结构同方法实施例中查询查询主键的值的查询语句，此处不再详述。

指令模块304，用于指令数据库服务器利用查询结果项数及对应的查询主键的值创建临时表，该临时表中每一个表项记录有查询主键的值，该临时表包含的表项数目等于查询结果项数。

查询模块303，还用于生成包含临时表的表名的第六查询语句，该第六查询语句用于查询所述临时表中的查询主键的值标识的数据。

另外，接收模块301，还用于接收数据库服务器返回查询主键的值和数据库服务器返回的数据。

该装置还包括存储模块305，用于存储接收模块301接收到的查询主键的值。

本发明实施例还提供一种数据查询的系统，该系统包括客户端401，应用服务器402和数据库服务器403。

其中，客户端401用于发送查询请求，向应用服务器查询符合一定查询条件的数据，该查询请求中包括本次查询的查询条件和所要查询数据的查询结果项数。该查询结果项数的大小一般等于客户端能够显示的缓冲区的大小，如显示器每屏只能显示80行，则该查询结果项数就为80个，当然也可以根据需要设定一定的查询结果项数。并接收应用服务器402返回的符合查询条件的数据。具体过程同方法实施例中相应部分。

应用服务器402用于接收客户端401发送的查询请求，根据查询请求中的查询条件确定要查询的数据的查询主键，然后生成包括上述查询条件和上述查询主键的第七查询语句，利用第七查询语句向数据库服务器403查询该查询主键的值，并接收数据库服务器403返回的查询主键的值，并指令数据库服务器403创建临时表，该临时表中每一个表项记录有查询主键的值，且该临时表中包含的表项数目等于查询结果项数，并生成包含临时表的表名的第八查询语句，利用该第八查询语句向数据库服务器403查询临时表中查询主键的值标识的数据，该数据即为客户端需要的数据，接收数据库服务器403返回的符合查询条件的数据，将该数据返回给客户端401。

数据库服务器403用于执行以上的第七查询语句，查询出查询主键的值，执行第八查询语句，查询出临时表中查询主键的值标识的数据，数据库服务器403还用于将查询出的数据发送给应用服务器402。

上述各个设备具体的执行过程同方法实施例，此处不在赘述。

本领域普通技术人员可以理解，实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random Access Memory，RAM)等。

本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种数据查询方法，其特征在于，所述方法包括：

应用服务器接收来自客户端的查询第一数据的第一查询请求，所述第一查询请求包括查询条件和第一查询结果项数；

应用服务器根据所述查询条件确定查询主键，获取与所述第一查询结果项数对应的查询主键的值，并指令数据库服务器利用所述第一查询结果项数及对应的查询主键的值创建第一临时表，所述第一临时表中每一个表项记录有查询主键的值，所述第一临时表包含的表项数目等于第一查询结果项数；

应用服务器生成包含第一临时表的表名的第一查询语句，利用所述第一查询语句向数据库服务器查询所述第一临时表中的查询主键的值标识的所述第一数据。

2.根据权利要求1所述的方法，其特征在于，所述获取与所述第一查询结果项数对应的查询主键的值，具体包括：

应用服务器生成包括所述查询条件和所述查询主键的第二查询语句，利用所述第二查询语句向数据库服务器查询所述查询主键的值，接收所述数据库服务器返回的所述查询主键的值，保存与所述第一查询结果项数对应的查询主键的值。

3.根据权利要求1或2所述的方法，其特征在于，还包括：应用服务器接收所述数据库服务器返回的所述第一数据，并发送给客户端。

4.根据权利要求1或2所述的方法，其特征在于，还包括：保存所述查询主键的值。

5.根据权利要求4所述的方法，其特征在于，还包括：

应用服务器接收查询第二数据的第二查询请求，所述第二查询请求包括所述查询条件和第二查询结果项数；

应用服务器根据所述查询条件和所述第二查询结果项数获取与所述第二查询结果项数对应的查询主键的值，并指令数据库服务器利用所述第二查询结果项数及对应的查询主键的值创建第二临时表，所述第二临时表中每一个表项记录有查询主键的值，所述第二临时表包含的表项数目等于第二查询结果项数；

应用服务器生成包含第二临时表的表名的第三查询语句，利用所述第三查询语句向数据库服务器查询第二临时表中查询主键的值标识的所述第二数据。

6.一种数据查询装置，其特征在于，所述装置包括：

接收模块，用于接收来自客户端的查询数据的查询请求，所述查询请求中包括查询条件和所要查询的数据的查询结果项数；

执行模块，用于根据所述接收模块接收到的所述查询条件确定查询主键；

查询模块，用于生成包括所述查询条件和所述查询主键的第一查询语句，利用所述第一查询语句查询所述查询主键的值；

指令模块，用于指令数据库服务器利用查询结果项数及对应的查询主键的值创建临时表，所述临时表中每一个表项记录有查询主键的值，所述临时表包含的表项数目等于查询结果项数；

查询模块，还用于生成包含临时表的表名的第二查询语句，利用所述第二查询语句查询所述临时表中的查询主键的值标识的所述数据。

7.根据权利要求6所述的装置，其特征在于，所述装置还包括存储模块，所述存储模块用于存储所述查询主键的值。

8.根据权利要求6或7所述的方法，其特征在于，所述接收模块还用于接收所述数据。

9.一种数据查询系统，其特征在于，所述系统包括：客户端、应用服务器和数据库服务器，其中，

所述客户端用于发送查询数据的请求，所述请求中包括查询条件和数据的查询结果项数；

所述应用服务器用于接收所述客户端发送的所述请求，根据所述请求中的查询条件确定所述数据的查询主键，生成包括所述查询条件和所述查询主键的第一查询语句，利用所述第一查询语句向所述数据库服务器查询所述查询主键的值，并指令所述数据库服务器利用查询结果项数及对应的查询主键的值创建临时表，所述临时表中每一个表项记录有查询主键的值，所述临时表包含的表项数目等于查询结果项数，并生成包含临时表的表名的第二查询语句，利用所述第二查询语句向数据库服务器查询所述临时表中查询主键的值标识的数据；

所述数据库服务器用于执行所述第一查询语句，查询所述查询主键的值，并创建临时表，执行所述第二查询语句，查询所述临时表中查询主键的值标识的所述数据。

10.根据权利要求9所述的系统，其特征在于，还包括，所述数据库服务器还用于将查询出的所述数据发送给所述应用服务器，所述应用服务器还用于将所述数据发送给所述客户端。

Images