CN106294499A - 一种数据库数据查询方法和设备 - Google Patents

Abstract

本申请实施例公开了一种数据库数据查询方法，应用于包括关系型数据库和非关系型数据库的系统中，当接收到需要同时在关系型数据库和非关系型数据库中进行数据查询的SQL时，根据SQL中用于在关系型数据库中进行数据查询的SQL部分，获取关系型数据库中相对应的第一数据；根据第一数据生成用于在非关系型数据库中进行数据查询的row key，并获取非关系型数据库中与row key相对应的第二数据；将第一数据与第二数据进行匹配，生成SQL对应的查询数据。从而，能够实现使用一条需要同时在关系型数据库和非关系型数据库中进行数据查询的SQL，到两个数据库中去查询相关数据，进而能够实现跨关系型数据库和非关系型数据库的连接操作的技术效果。

Description

一种数据库数据查询方法和设备

技术领域

本申请涉及计算机技术领域，特别涉及一种数据库数据查询方法和设备。

背景技术

近年来，有很多公司或者企业选择将公司或者企业内部的很多数据存储于MySQL数据库(一种小型关系型数据库)和Hbase数据库(一种开源的非关系型分布式数据库)上。

进一步，当这些公司或者企业要用这些数据去进行某项业务时，就需要到这两个数据库去查询相关的数据；其中，到这两个数据库中查询数据的过程中，会用到一条要同时在MySQL数据库和Hbase数据库中获取数据的SQL(Structured Query Language，结构化查询语言)；其中，SQL是专门用于访问和处理数据库的标准的计算机语言。

发明人在实现本申请的过程中发现，对于MySQL数据库而言，其是支持SQL的，而对于Hbase数据库而言，其却是不支持SQL的。因此，现有技术中无法实现使用一条同时涉及到MySQL数据库和Hbase数据库的SQL到两个数据库中去查询相关数据。现有技术中亟待找到一种能够实现使用一条同时涉及到MySQL数据库和Hbase数据库的SQL到两个数据库中去查询相关数据的方案，进而以实现跨MySQL和Hbase的join(连接)操作。

发明内容

本申请实施例提供一种数据库数据查询方法和设备，以实现使用一条同时涉及到MySQL数据库和Hbase数据库的SQL到两个数据库中去查询相关数据，进而以实现跨MySQL和Hbase的join操作。

为了达到上述目的，本申请实施例提供一种数据库数据查询方法，其特征在于，所述方法应用于包括关系型数据库和非关系型数据库的系统中，该方法包括：

当接收到需要同时在所述关系型数据库和所述非关系型数据库中进行数据查询的查询语句SQL时，获取所述SQL中用于在所述关系型数据库中进行数据查询的SQL部分；

根据所述SQL部分获取所述关系型数据库中与所述SQL部分相对应的第一数据；

根据所述第一数据生成用于在所述非关系型数据库中进行数据查询的主键row key；

根据所述row key获取所述非关系型数据库中与所述row key相对应的第二数据；

将所述第一数据与所述第二数据进行匹配，并根据匹配结果生成所述SQL对应的查询数据。

本申请实施例还提供一种一种数据库数据查询设备，其特征在于，所述设备应用于包括关系型数据库和非关系型数据库的系统中，该设备包括：

第一获取模块，用于当接收到需要同时在所述关系型数据库和所述非关系型数据库中进行数据查询的查询语句SQL时，获取所述SQL中用于在所述关系型数据库中进行数据查询的SQL部分；

第二获取模块，用于根据所述SQL部分获取所述关系型数据库中与所述SQL部分相对应的第一数据；

第一生成模块，用于根据所述第一数据生成用于在所述非关系型数据库中进行数据查询的主键row key；

第三获取模块，用于根据所述row key获取所述非关系型数据库中与所述row key相对应的第二数据；

第二生成模块，用于将所述第一数据与所述第二数据进行匹配，并根据匹配结果生成所述SQL对应的查询数据。

与现有技术相比，本申请实施例公开的方法可以实现：使用一条同时涉及到MySQL数据库和Hbase数据库的SQL到两个数据库中去查询相关数据，进而以实现跨MySQL和Hbase的join操作。

附图说明

图1是本申请实施例一提供的一种数据库数据查询方法的流程示意图；

图2是本申请实施例三提供的一种数据库数据查询设备的结构示意图。

具体实施方式

下面将结合本申请的附图，对本申请中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请的部分实施例，而不是全部的实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

如图1所示，为本申请实施例一提供的数据库数据查询方法的流程示意图，具体包括以下步骤：

步骤101、当接收到需要同时在所述关系型数据库和所述非关系型数据库中进行数据查询的SQL时，获取SQL中可用于在关系型数据库中进行数据查询的SQL部分。

由于一条需要同时在关系型数据库和非关系型数据库中进行数据查询的SQL至少包括两部分，其中一部分为关系型数据库可执行的SQL部分，另外一部分为关系型数据库不可执行的SQL部分；又由于只有关系型数据库可执行的SQL部分才可用于在关系型数据库中进行数据查询，关系型数据库不可执行的SQL部分不但不能用于在关系型数据库中进行数据查询，当将其直接用于在关系型数据库中进行数据查询时，还会频繁的报错，最终影响从关系型数据库中捞取需要的数据；因此，在本申请的优选实施例中，只获取关系型数据库可执行的SQL部分或者称为可用于在关系型数据库中进行数据查询的SQL部分。

具体的，在本申请的优选实施例中，采取如下方式实现只获取可用于在关系型数据库中进行数据查询的SQL部分：

对完整的SQL进行解析，对解析结果进行拆分，从拆分结果中获取可用于在关系型数据库中进行数据查询的SQL部分。

需要说明的是，为便于后续阐述和比较，在本申请的优先实施例中，将可用于在关系型数据库中进行数据查询的SQL部分称为SQL部分A。

步骤S102、根据SQL部分A获取关系型数据库中与SQL部分A相对应的第一数据。

由于关系型数据库存储数据的方式是：将数据存储到多张list列表中；因此当根据SQL部分A到关系型数据库中获取与SQL部分A相对应的第一数据时；首先要找对应的list列表；具体的，在本申请的优选实施例中，可通过如下步骤实现找对应的list列表：

首先在list列表中提前设置一个特征值，然后在SQL部分A中携带这一特征值，最后比较SQL部分A中携带的特征值与list列表中设置的特征值是否相同，若相同，则证明该list列表为与其相对应的list列表；若不相同，则证明该list列表并非与其相对应的list列表；需要说明的是，本领域技术人员还可根据实际需要设置多个特征值用于找对应的list列表，在此不再一一列举。

又由于每一张list列表中不止存储一个业务的数据，一个list列表中记录有多条数据，因此当找到对应的list列表之后，还需要到list列表中找与SQL部分A相对应的第一数据；具体的，在本申请的优选实施例中，可通过如下步骤实现获取list中与SQL部分A相对应的第一数据：

首先根据预设的选取规则在list所记录的数据中选择一条数据作为待判断数据，其中，预设的选取规则可以为根据存储数据时的顺序进行选取；之后根据SQL部分A判断待判断数据是否是与其相对应的第一数据；具体的，在本申请的优选实施例中，可通过以下步骤实现根据SQL部分A判断待判断数据是否是与其相对应的第一数据：首先为第一数据提前设置一个特征值，然后在SQL部分A中携带这一特征值，比较SQL部分A中携带的特征值与待判断数据中设置的特征值是否相同，若相同，则证明待判断数据为与其相对应的第一数据；若不相同，则证明待判断数据并非与其相对应的第一数据；需要说明的是，证明待判断数据并非与其相对应的第一数据时，进一步，还会将在待判断数据的下一条数据作为新的待判断数据，判断其是否为与SQL部分A相对应的第一数据，并以此类推，直到找到SQL部分A相对应的第一数据。

需要说明的是，在本申请的优选实施例中，与SQL部分A相对应的第一数据为与一个业务有关的被存储到关系型数据库上的部分数据。

步骤S103、根据第一数据生成用于在非关系型数据库中进行数据查询的row key。

由于row key是非关系型数据库唯一的主键，因此如果要实现使用一条需要同时在关系型数据库和非关系型数据库中查询数据的SQL到两个数据库中去查询相关数据，就必须对从关系型数据库中获得的第一数据进行转换，转换得到row key；具体的，在本申请的优选实施例中，通过以下步骤实现将从关系型数据库中获得的第一数据转换为row key：

首先提前设定一个row key生成规则，该row key生成规则至少需要用到以下参数：用于对字符串进行加密的第一参数和用于指示从字符串第几位开始取值的第二参数；具体的，第一参数用如下符合表示：MD5()，第二参数用如下符合表示：subtring(0,4)；其中，subtring(0,4)表示字符串的取值范围从原点开始到第4位结束；需要说明的是，本领域还可根据实际需要选择字符串的取值范围，例如subtring(0,5)；接着从第一数据中提取出第一特征值和第二特征值；最后根据MD5()、subtring(0,4)、第一特征值以及第二特征值转换出主键row key，在实际场景中，可采取如下公式实现：rowkey＝MD5(第一特征值)subtring(0,4)+(第二特征值)。

步骤S104、根据row key获取非关系型数据库中与row key相对应的第二数据。

由于row key是根据公式row key＝MD5(第一特征值)subtring(0,4)+(第二特征值)转换而来的，其中包括了第一特征值和第二特征值，而第一特征值和第二特征值除了作为第一数据的特征值之外，同时又可以作为第二数据的特征值，因此可以用于在非关系型数据库上确定第二数据也即与一个业务有关的被存储到非关系型数据库上的另外一部分数据。

步骤S105、将第一数据与第二数据进行匹配，并根据匹配结果生成SQL对应的查询数据。

将所述第一数据与所述第二数据进行匹配，也即将与一个业务有关的被存储到关系型数据库上的部分数据和与一个业务有关的被存储到非关系型数据库上的另外一部分数据进行匹配，此时得到即与一个业务有关的完整数据，也即实现了跨关系型数据库和非关系型数据库的连接操作。

下面结合具体的应用场景对本申请实施例提供的技术方案进行更加详细的说明，如下：

当接收到一条需要同时在MySQL数据库(MySQL数据库对应t1)查询用户的user_id、name、age和在Hbase数据库(Hbase数据库对应t2)中查询用户的user_id、name、sex的SQL时，如下；

首先，获取SQL中用于在t1中查询用户的user_id、name、age的SQL部分，记为SQL部分A，如下；

然后，根据SQL部分A在t1中获取到用户的user_id、name、age；

再然后，根据根据user_id、name以及row key＝MD5(user_id)subtring(0,4)+(name)转换得到row key；

再然后，根据row key到t2中查询用户的user_id、name、sex；

最后，将从t1获取到的用户的user_id、name、age，与从t2中获取到的用户的user_id、name、sex进行匹配，此时得到了用户的完整信息：user_id、name、age、sex。

与现有技术相比，本申请实施例公开的方法可以实现：使用一条需要同时在关系型数据库和非关系型数据库中进行数据查询的SQL，到两个数据库中去查询相关数据，进而能够实现跨关系型数据库和非关系型数据库的连接操作的技术效果。

基于与上述方法相同的构思，本申请实施例二还提供了一种数据库数据查询设备，所述设备应用于包括关系型数据库和非关系型数据库的系统中，其结构图如图2所示，包括：

第一获取模块21，用于当接收到需要同时在所述关系型数据库和所述非关系型数据库中进行数据查询的查询语句SQL时，获取所述SQL中用于在所述关系型数据库中进行数据查询的SQL部分；

第二获取模块22，用于根据所述第一获取模块所获取的SQL部分获取所述关系型数据库中与所述SQL部分相对应的第一数据；

第一生成模块23，用于根据所述第二获取模块所获取的第一数据生成用于在所述非关系型数据库中进行数据查询的主键row key；

第三获取模块24，用于根据所述第一生成模块所生成的row key获取所述非关系型数据库中与所述row key相对应的第二数据；

第二生成模块25，用于将所述第二获取模块所获取的第一数据与所述第三获取模块所获取的第二数据进行匹配，并根据匹配结果生成所述SQL对应的查询数据。

第一获取模块21具体用于：

解析所述SQL获得解析结果；

拆分所述解析结果获得拆分结果；

根据所述拆分结果确定所述用于在所述关系型数据库中进行数据查询的SQL部分。

所述第二获取模块22具体用于：

获取所述关系型数据库中与所述SQL部分相对应的用于存储所述第一数据的列表list；

获取所述list中与所述SQL部分相对应的第一数据。

所述第二获取模块22还用于：

根据预设的选取规则在所述list中记录的多条数据中选取一条数据作为待判断数据，根据所述SQL部分判断所述待判断数据是否是与所述SQL部分相对应的第一数据；

判断所述待判断数据是与所述SQL部分相对应的第一数据时，将所述待判断数据作为所述第一数据；

判断所述待判断数据不是与所述SQL部分相对应的第一数据时，将在所述待判断数据的下一条数据作为新的待判断数据。

所述第一生成模块23具体用于：

获取预先设定的row key生成规则中第一参数和第二参数；第一参数用于对字符串进行加密，第二参数用于表示从字符串第几位开始取值；

根据所述第一数据、所述第一参数以及所述第二参数生成所述row key。

与现有技术相比，本申请实施例公开的方法可以实现：使用一条需要同时在关系型数据库和非关系型数据库中进行数据查询的SQL，到两个数据库中去查询相关数据，进而能够实现跨关系型数据库和非关系型数据库的连接操作的技术效果。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本申请实施例可以通过硬件实现，也可以借助软件加必要的通用硬件平台的方式来实现。基于这样的理解，本申请实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或网络侧设备等)执行本申请实施例各个实施场景所述的方法。

本领域技术人员可以理解附图只是一个优选实施场景的示意图，附图中的模块或流程并不一定是实施本申请实施例所必须的。

本领域技术人员可以理解实施场景中的装置中的模块可以按照实施场景描述进行分布于实施场景的装置中，也可以进行相应变化位于不同于本实施场景的一个或多个装置中。上述实施场景的模块可以合并为一个模块，也可以进一步拆分成多个子模块。

上述本申请实施例序号仅仅为了描述，不代表实施场景的优劣。

以上公开的仅为本申请实施例的几个具体实施场景，但是，本申请实施例并非局限于此，任何本领域的技术人员能思之的变化都应落入本申请实施例的业务限制范围。

Claims (10)

1.一种数据库数据查询方法，其特征在于，所述方法应用于包括关系型数据库和非关系型数据库的系统中，该方法包括：

当接收到需要同时在所述关系型数据库和所述非关系型数据库中进行数据查询的查询语句SQL时，获取所述SQL中用于在所述关系型数据库中进行数据查询的SQL部分；

根据所述SQL部分获取所述关系型数据库中与所述SQL部分相对应的第一数据；

根据所述第一数据生成用于在所述非关系型数据库中进行数据查询的主键row key；

根据所述row key获取所述非关系型数据库中与所述row key相对应的第二数据；

将所述第一数据与所述第二数据进行匹配，并根据匹配结果生成所述SQL对应的查询数据。

2.如权利要求1所述的方法，其特征在于，获取所述SQL中用于在所述关系型数据库中进行数据查询的SQL部分，具体包括以下步骤：

解析所述SQL获得解析结果；

拆分所述解析结果获得拆分结果；

根据所述拆分结果确定所述用于在所述关系型数据库中进行数据查询的SQL部分。

3.如权利要求1所述的方法，其特征在于，根据所述SQL部分获取所述关系型数据库中与所述SQL部分相对应的第一数据，具体包括：

获取所述关系型数据库中与所述SQL部分相对应的用于存储所述第一数据的列表list；

获取所述list中与所述SQL部分相对应的第一数据。

4.如权利要求3所述的方法，其特征在于，获取所述list中与所述SQL部分相对应的第一数据，具体包括：

根据预设的选取规则在所述list所记录的多条数据中选取一条数据作为待判断数据，判断所述待判断数据是否是与所述SQL部分相对应的第一数据；

若是，将所述待判断数据作为所述第一数据；

若不是，将所述待判断数据的下一条数据作为新的待判断数据。

5.如权利要求1所述的方法，其特征在于，根据所述第一数据生成用于在所述非关系型数据库中进行数据查询的row key，具体包括如下步骤：

获取预先设定的row key生成规则中的第一参数和第二参数；所述第一参数用于对字符串进行加密，所述第二参数用于指示从字符串第几位开始取值；

根据所述第一数据、所述第一参数以及所述第二参数生成所述row key。

6.一种数据库数据查询设备，其特征在于，所述设备应用于包括关系型数据库和非关系型数据库的系统中，该设备包括：

第一获取模块，用于当接收到需要同时在所述关系型数据库和所述非关系型数据库中进行数据查询的查询语句SQL时，获取所述SQL中用于在所述关系型数据库中进行数据查询的SQL部分；

第二获取模块，用于根据所述第一获取模块所获取的SQL部分获取所述关系型数据库中与所述SQL部分相对应的第一数据；

第一生成模块，用于根据所述第二获取模块所获取的第一数据生成用于在所述非关系型数据库中进行数据查询的主键row key；

第三获取模块，用于根据所述第一生成模块所生成的row key获取所述非关系型数据库中与所述row key相对应的第二数据；

第二生成模块，用于将所述第二获取模块所获取的第一数据与所述第三获取模块所获取的第二数据进行匹配，并根据匹配结果生成所述SQL对应的查询数据。

7.如权利要求6所述的设备，其特征在于，第一获取模块具体用于：

解析所述SQL获得解析结果；

拆分所述解析结果获得拆分结果；

根据所述拆分结果确定所述用于在所述关系型数据库中进行数据查询的SQL部分。

8.如权利要求6所述的设备，其特征在于，所述第二获取模块具体用于：

获取所述关系型数据库中与所述SQL部分相对应的用于存储所述第一数据的列表list；

获取所述list中与所述SQL部分相对应的第一数据。

9.如权利要求8所述的设备，其特征在于，所述第二获取模块，还用于：

根据预设的选取规则在所述list所记录的多条数据中选取一条数据作为待判断数据，判断所述待判断数据是否是与所述SQL部分相对应的第一数据；

判断所述待判断数据是与所述SQL部分相对应的第一数据时，将所述待判断数据作为所述第一数据；

判断所述待判断数据不是与所述SQL部分相对应的第一数据时，将所述待判断数据的下一条数据作为新的待判断数据。

10.如权利要求6所述的设备，其特征在于，所述第一生成模块具体用于：

获取预先设定的row key生成规则中的第一参数和第二参数；所述第一参数用于对字符串进行加密，所述第二参数用于指示从字符串第几位开始取值；

根据所述第一数据、所述第一参数以及所述第二参数生成所述row key。