CN112861182A - 数据库的查询方法、系统及计算机设备、存储介质 - Google Patents

Abstract

本发明提供了一种数据库的查询方法、系统及计算机设备、存储介质，所述查询方法包括：配置元数据的属性；设置元数据的查询权限；根据元数据的属性及查询权限获取用户的查询配置；基于用户的查询配置生成查询语句；根据所述查询语句对数据库进行查询，获得查询结果；对所述查询结果进行显示。本发明提供的查询方法预先对元数据的属性和查询权限进行配置，然后只需要根据用户的查询配置来生成查询语句，最后根据查询语句进行查询，整个查询对用户的技术专业程度要求较低且能够有效对查询权限进行控制，提升了查询效率和查询安全性。

Description

数据库的查询方法、系统及计算机设备、存储介质

技术领域

本发明涉及网络通信技术领域，尤其涉及一种数据库的查询方法、系统及计算机设备、存储介质。

背景技术

数据是企业的重要资产，企业通过对数据的分析来对业务进行决策和运营。现有的查询数据的方式通常是根据业务的需求由专业开发人员编写程序获取数据，流程长且时效慢；或者采用标准的结构化查询语言(Structured Query Language，SQL)进行数据查询，但是，这对业务人员的技术专业程度要求较高且权限不好控制。

发明内容

为了解决现有技术的不足，本发明提供一种数据库的查询方法、系统及计算机设备、存储介质，对技术专业程度要求较低且能够提升查询效率和查询安全性。

本发明提出的具体技术方案为：提供一种数据库的查询方法，所述查询方法包括：

配置元数据的属性；

设置元数据的查询权限；

根据元数据的属性及查询权限获取用户的查询配置；

基于用户的查询配置生成查询语句；

根据所述查询语句对数据库进行查询，获得查询结果；

对所述查询结果进行显示。

进一步地，设置用户对元数据的查询权限，包括：

基于预设的角色，为所述角色配置具有查询权限的表；

基于所述角色具有查询权限的表，为所述角色配置具有查询权限的字段；

基于预设的角色，为用户配置角色，以获得所述用户具有查询权限的表及字段。

进一步地，所述元数据的属性包括数据源属性、表属性、字段属性、字典属性。

进一步地，根据元数据的属性及查询权限获取用户的查询配置，包括：

根据元数据的属性及查询权限获得用户具有查询权限的表和字段；

基于用户具有查询权限的表和字段，配置查询元素；

基于所述查询元素，配置表条件和查询条件；

设置查询数据量和所述查询元素中字段的排序方式；

设置查询方式。

进一步地，基于用户的查询配置生成查询语句，包括：

根据预设的拼接模型对所述查询元素、表条件、查询条件、查询数据量、排序方式以及查询方式进行拼接，获得查询语句。

进一步地，根据所述查询语句对数据库进行查询，包括：

接收用户的查询请求，所述查询请求中包括用户信息、地址信息以及查询语句；

判断所述查询语句中的查询方式是否是同步查询；

若所述查询语句中的查询方式是同步查询，则判断所述查询语句是否正确；

若所述查询语句正确，则对所述查询语句进行解析，以获得解析后的用户信息和数据库的连接信息；

判断所述用户信息是否与解析后的用户信息一致；

若所述用户信息与解析后的用户信息一致，则根据所述数据库的连接信息接入对应的数据库进行查询。

进一步地，在判断所述查询语句中的查询方式是否是同步查询之前，所述查询方法还包括：

对用户的查询请求的日志进行记录。

本发明还提供了一种数据库的查询系统，所述查询系统包括：

属性配置模块，用于配置元数据的属性；

权限设置模块，用于设置元数据的查询权限；

查询配置模块，用于根据元数据的属性及查询权限获取用户的查询配置；

语句生成模块，用于基于用户的查询配置生成查询语句；

获取模块，用于根据所述查询语句对数据库进行查询，获得查询结果；

显示模块，用于对所述查询结果进行显示。

本发明还提供了一种计算机设备，包括存储器、处理器及存储在存储器上的计算机程序，所述处理器执行所述计算机程序以实现如上所述的查询方法。

本发明还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机指令，所述计算机指令被处理器执行时实现如上所述的查询方法

本发明提供的查询方法预先对元数据的属性和查询权限进行配置，然后只需要根据用户的查询配置来生成查询语句，最后根据查询语句进行查询，整个查询对用户的技术专业程度要求较低且能够有效对查询权限进行控制，提升了查询效率和查询安全性。

附图说明

下面结合附图，通过对本发明的具体实施方式详细描述，将使本发明的技术方案及其它有益效果显而易见。

图1为本发明实施例一中的查询方法的流程示意图；

图2为本发明实施例二中的查询系统的结构示意图；

图3为本发明实施例三中的计算机设备的结构示意图。

具体实施方式

以下，将参照附图来详细描述本发明的实施例。然而，可以以许多不同的形式来实施本发明，并且本发明不应该被解释为限制于这里阐述的具体实施例。相反，提供这些实施例是为了解释本发明的原理及其实际应用，从而使本领域的其他技术人员能够理解本发明的各种实施例和适合于特定预期应用的各种修改。在附图中，相同的标号将始终被用于表示相同的元件。

实施例一

参照图1，本实施例提供的数据库的查询方法，应用于查询系统，该查询方法包括步骤：

S1、配置元数据的属性；

S2、设置元数据的查询权限；

S3、根据元数据的属性及查询权限获取用户的查询配置；

S4、基于用户的查询配置生成查询语句；

S5、根据查询语句对数据库进行查询，获得查询结果；

S6、对查询结果进行显示。

在步骤S1中，配置元数据的属性指的是对元数据进行管理，其中，元数据的属性包括数据源属性、表属性、字段属性、字典属性，配置元数据的属性指的是数据源管理、数据表管理、表字段管理、字典管理。

具体地，数据源管理包含但不限于数据库的连接信息、数据库的库名等，其中，数据库的连接信息包括用户名和密码信息；数据表管理包含但不限于表名、表中文名、表分区信息；表字段管理包含但不限于字段名、字段中文名、字段备注、字段类型、是否加密及加密规则；字典管理包含但不限于字段的字典枚举键和值。

在对元数据的属性进行配置后还需要对元数据的查询权限进行配置，即设置用户对字段的查询权限。本实施例设置用户对元数据的查询权限，即步骤S2具体包括：

S21、基于预设的角色，为角色配置具有查询权限的表；

S22、基于角色具有查询权限的表，为角色配置具有查询权限的字段；

S23、基于预设的角色，为用户配置角色，以获得用户具有查询权限的表及字段。

在步骤S21中，预设的角色可以根据需要进行设定，其中，在设定具体角色时还需要对角色的属性进行配置，具体包括角色名称、角色类型及角色状态等。在设定好角色后，需要为角色配置具有查询权限的表，以便后续查询表时判断该角色是否具有查询权限。这里需要说明的是，每一个角色可以配置多个表，即该角色对多个表都具有查询权限，同一个表也可以配置给多个角色，即多个角色对该表都具有查询权限，从而实现角色与表的多对多关系。

由于每一个表对应多个字段，在实际应用中，给定的角色有可能只对该表中某几个字段具有查询权限，因此，在步骤S22中，在为每个角色设置好具有查询权限的表后，需要进一步设定该角色对具有查询权限的表中的哪些字段具有查询权限，这里在判断角色是否对字段具有查询权限时需要先判断角色对该字段所属的表是否具有查询权限，只有在角色对该字段所属的表具有查询权限的前提下才会判断角色对该字段是否具有查询权限。同样的，一个角色可以配置多个字段，即该角色对多个字段都具有查询权限，同一个字段也可以配置给多个角色，即多个角色对该字段都具有查询权限，从而实现角色与字段的多对多关系。

在步骤S23中，在配置好角色以及角色具有查询权限的表和字段后，需要为用户配置角色，以获得该用户具有查询权限的表和字段。具体地，为用户配置角色时还需要先设定用户的属性信息，具体包括用户名称、用户类型等。在设定好用户的属性信息后，再为用户配置角色，其中，每一个用户可以配置多个角色，即该用户对多个角色都具有查询权限，同一个角色也可以配置给多个用户，即多个用户对该角色都具有查询权限，从而实现用户与角色的多对多关系。通过用户与角色的多对多关系、角色与字段的多对多关系，最终实现用户与字段的多对多关系，从而获得用户对字段的查询权限。

在配置好元数据的属性及元数据的查询权限后，再根据元数据的属性及查询权限获取用户的查询配置，具体地，步骤S3包括：

S31、根据元数据的属性及查询权限获得用户具有查询权限的表和字段；

S32、基于用户具有查询权限的表和字段，配置查询元素；

S33、基于查询元素，配置表条件和查询条件；

S34、设置查询数据量和所述查询元素中字段的排序方式；

S35、设置查询方式。

本实施例通过步骤S2后便可以获得每一个用户具有查询权限的表和字段，在步骤S31中，查询系统接收用户输入的选表请求，其中，在查询系统接收到用户输入的用户名时即为接收到用户的选表请求，查询系统根据用户名来调用该用户具有查询权限的表和字段，以便后续用户选择具体对哪个字段进行查询。

在步骤S32中，在获得用户具有查询权限的表和字段后，由用户来配置查询元素，具体地，用户先选择具有查询权限的表，然后再选择该表下具有查询权限的字段。其中，查询系统提供的可配置的查询元素包括表、字段、聚合函数和字段，聚合函数用于对选中的字段进行聚合，聚合函数包括求和、计数、唯一计数、求平均、求最大、求最小等，在选择聚合函数后，查询系统需要先对聚合的字段的类型进行匹配，例如，当聚合函数为求平均、求最大、求最小时，对应的字段的类型应当是数值型字段。在配置查询元素时，用户至少配置一个表且配置的字段和聚合函数的个数和应大于1。

当查询元素配置完成后，需要基于查询元素来配置表条件，这里的表条件指的是表分区条件或者表关联条件。当用户选择的表为分区表时，此时需要配置表分区条件，例如，用户选择的表为记录用户在一年的时间内所有交易的表，由于该表的数据量较大，因此，该表按照预设的时间区间被分为多个分区表，此时当用户选择其中一个分区表作为查询的表时，需要输入该分区表对应的时间区间来作为该分区表的表分区条件。当用户选择的是多个表时，此时需要对多个表之间的关联关系进行配置，例如，若步骤S301配置的是多个表，则应配置表的关联关系，即多个表之间是如何进行关联。

在配置好表条件后还需要配置查询条件，这里的查询条件包括条件块和逻辑符，条件块之间需配置逻辑符，逻辑符可选自逻辑与、逻辑或、逻辑非等。条件块包括两种类型，一种是字段+逻辑操作符+条件值，另一种是聚合函数+字段+逻辑操作符+条件值，其中，条件块的逻辑操作符可选自大于、小于、大于或等于、小于或等于、等于、不等于、包含、in、notin、模糊匹配等，选择的逻辑操作符应与字段的类型或者聚合函数返回的类型相对应，例如，字段的类型或者聚合函数返回的类型为数值型，则可选择的逻辑操作符包括大于、小于、大于或等于、小等于、等于、不等于、in、not in，字段的类型或者聚合函数返回的类型为字符型，则可选择的逻辑操作符包括等于、不等于、包含、in、not in、模糊匹配等。

在配置好表条件和查询条件，还需要设置查询数据量和查询元素中字段的排序方式，查询数据量指的是用户希望查询系统呈现的数据量，这里查询数据量为正整数。查询元素字段的排序方式指的是用户希望查询元素字段以何种顺序进行显示，排序方式可以是时间先后顺序或者大小顺序，例如，查询元素中多个字段以时间先后顺序进行排列。

在获得查询数据量和查询元素中字段的排序方式后，还需要设置查询方式，本实施例中的查询方式包括同步查询、异步查询这两种查询方式。

本实施例中的查询方法通过步骤S3后便可以得到查询配置，然后在步骤S4中，根据查询配置生成查询语句，具体地，根据预设的拼接模型对查询元素、表条件、查询条件、查询数据量、排序方式以及查询方式进行拼接，获得查询语句。这里，本实施例中的查询系统通过javascript进行拼接，预设的拼接模型可以选用JSON，其中，JSON数据格式为：

在获得查询语句后，根据查询语句对数据库进行查询即步骤S5具体包括：

S51、接收用户的查询请求，查询请求中包括用户信息、地址信息以及查询语句；

S52、判断查询语句中的查询方式是否是同步查询，若是，则进入步骤S53；

S53、判断所述查询语句是否正确，若所述查询语句正确，则进入步骤S54，若所述查询语句不正确，则进入步骤S57；

S54、对查询语句进行解析，以获得解析后的用户信息和数据库的连接信息；

S55、判断用户信息是否与解析后的用户信息一致，若一致，则进入步骤S56，若不一致，则进入步骤S57；

S56、根据数据库的连接信息接入对应的数据库进行查询，获得查询结果；

S57、返回错误信息。

在步骤S51中，用户发起的查询请求中包括用户信息、地址信息和步骤S4中获得的查询语句，其中，地址信息包括但不限于服务器ip地址、查询接口地址，每一个服务器包括多个服务节点，根据查询接口地址便可以接入对应的服务节点进行查询。

在步骤S52中，若查询语句中的查询方式是异步查询，则需要等待调度器调起本次查询任务。其中，查询调度可通过java的线程池来实现，例如，在接收到查询请求时启动时线程池，定时查询日志表，将本次查询任务调起，进入步骤S53。

在步骤S53中，在查询开始之前，需要先判断用户输入的查询语句是否正确，在查询语句正确的条件下才会执行后续的查询操作，其中，判断用户输入的查询语句是否正确即判断查询语句是否合理以及是否是可执行的查询语句。若查询语句正确，则进入步骤S54，不正确则进入步骤S57。

在步骤S54中，在进行查询操作之前还需要对查询语句进行解析，以获得解析后的用户信息和数据库的连接信息，便于后续对用户进行权限校验，其中，解析后的用户信息指的是需要查询的表和字段对应的用户信息。

在步骤S55中，判断用户信息是否与解析后的用户信息一致具体指的是判断用户发起请求时输入的用户信息是否与需要查询的表和字段所对应的用户信息一致，若一致，表示发起请求的用户对需要查询的表和字段具有查询权限，则进入步骤S56，若不一致，表示发起请求的用户对需要查询的表和字段没有权限，则进入步骤S57。

在步骤S56中，若需要加速执行查询，接入的数据库为数据中心存储数据的数据库，例如，hive数据库，若不需要加速执行查询，则接入的数据库为底层数据库。

为了便于数据追溯，在步骤S52之前，本实施例中的查询方法还包括：

S520、对用户的查询请求的日志进行记录。

在步骤S520中，查询请求的日志信息包括但不限于用户信息、查询语句、查询时间、发起查询的服务器ip地址等。在对用户的查询请求的日志进行记录后，步骤S52、S53可以直接从查询请求的日志中获得查询语句以及查询方式。

若在配置元数据的属性时设置了字典属性，则在步骤S57之后，本实施例中的查询方法还包括：

S58、对查询结果进行转换。

在步骤S58中，对查询结果进行转换具体指的是将查询得到的字段替换为字典。

通过步骤S5获得查询结果后需要对查询结果进行显示，具体地，步骤S6包括：

S61、对查询结果进行缓存；

S62、判断查询结果中的字段是否是聚合字段，若是，则表头显示聚合函数、字段的表名及字段的中文名，若不是，则表头显示字段的表名及字段的中文名；

S63、对查询结果中的字段和元数据进行显示。

在步骤S61中，对查询结果进行缓存之前需要先判断查询结果是否成功接收，若成功接收，则对查询结果进行缓存，若没有成功接收，则显示错误信息。

在步骤S63中，若元数据的属性包括字典属性，则将字段用字典值进行替换后进行显示。

本实施例提供的查询方法预先对元数据的属性和查询权限进行配置，然后根据用户的查询配置生成查询语句，对用户的技术专业程度要求较低且能够有效对查询权限进行控制，提升了查询效率和查询安全性。

实施例二

参照图2，本实施例提供了一种数据库的查询系统，该查询系统包括属性配置模块1、权限设置模块2、查询配置模块3、语句生成模块4、获取模块5、显示模块6。

属性配置模块1用于配置元数据的属性，权限设置模块2用于设置元数据的查询权限，查询配置模块3用于根据元数据的属性及查询权限获取用户的查询配置，语句生成模块4用于基于用户的查询配置生成查询语句，获取模块5用于根据所述查询语句对数据库进行查询，获得查询结果，显示模块6用于对所述查询结果进行显示。

具体地，属性配置模块1用于配置数据源属性、表属性、字段属性、字典属性，即用于对数据源、数据表、表字段、字典进行管理。

权限设置模块2用于基于预设的角色为角色配置具有查询权限的表、基于角色具有查询权限的表为角色配置具有查询权限的字段以及基于预设的角色为用户配置角色，以获得用户具有查询权限的表及字段。

查询配置模块3用于根据元数据的属性及查询权限获得用户具有查询权限的表和字段、基于用户具有查询权限的表和字段配置查询元素、基于查询元素配置表条件和查询条件、设置查询数据量和所述查询元素中字段的排序方式以及设置查询方式。

语句生成模块4用于根据预设的拼接模型对查询元素、表条件、查询条件、查询数据量、排序方式以及查询方式进行拼接，获得查询语句。

获取模块5用于接收用户的查询请求、判断查询语句中的查询方式是否是同步查询、并在查询方式是同步查询时判断查询语句是否正确，并在查询语句正确时对查询语句进行解析来获得解析后的用户信息和数据库的连接信息、判断用户信息是否与解析后的用户信息一致、并在用户信息与解析后的用户信息一致时根据数据库的连接信息接入对应的数据库进行查询来获得查询结果。

实施例三

参照图3，本实施例提供了一种计算机设备，包括处理器200、存储器201以及网络接口202，存储器201上存储有计算机程序，处理器200执行计算机程序以实现如实施例一所述的查询方法。

存储器201可以包括高速随机存取存储器(Random Access Memory，RAM)，也可能还包括非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。

处理器200可以是一种集成电路芯片，具有信号的处理能力。在实现过程中，实施例一所述的查询方法的各步骤可以通过处理器200中的硬件的集成逻辑电路或者软件形式的指令完成。处理器200也可以是通用处理器，包括中央处理器(Central ProcessingUnit，CPU)、网络处理器(Network Processor，NP)等，还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

存储器201用于存储计算机程序，处理器200在接收到执行指令后，执行该计算机程序以实现如实施例一所述的查询方法。

本实施例还提供了一种计算机存储介质，计算机存储介质中存储有计算机程序，处理器200用于读取并执行计算机存储介质中存储的计算机程序，以实现如实施例一所述的查询方法。

在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机存储介质中，或者从一个计算机存储介质向另一个计算机存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘(solidstate disk，SSD))等。

本发明实施例是参照根据本发明实施例的方法、装置、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述仅是本申请的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种数据库的查询方法，其特征在于，所述查询方法包括：

配置元数据的属性；

设置元数据的查询权限；

根据元数据的属性及查询权限获取用户的查询配置；

基于用户的查询配置生成查询语句；

根据所述查询语句对数据库进行查询，获得查询结果；

对所述查询结果进行显示。

2.根据权利要求1所述的查询方法，其特征在于，设置用户对元数据的查询权限，包括：

基于预设的角色，为所述角色配置具有查询权限的表；

基于所述角色具有查询权限的表，为所述角色配置具有查询权限的字段；

基于预设的角色，为用户配置角色，以获得所述用户具有查询权限的表及字段。

3.根据权利要求1所述的查询方法，其特征在于，所述元数据的属性包括数据源属性、表属性、字段属性、字典属性。

4.根据权利要求1所述的查询方法，其特征在于，根据元数据的属性及查询权限获取用户的查询配置，包括：

根据元数据的属性及查询权限获得用户具有查询权限的表和字段；

基于用户具有查询权限的表和字段，配置查询元素；

基于所述查询元素，配置表条件和查询条件；

设置查询数据量和所述查询元素中字段的排序方式；

设置查询方式。

5.根据权利要求4所述的查询方法，其特征在于，基于用户的查询配置生成查询语句，包括：

根据预设的拼接模型对所述查询元素、表条件、查询条件、查询数据量、排序方式以及查询方式进行拼接，获得查询语句。

6.根据权利要求5所述的查询方法，其特征在于，根据所述查询语句对数据库进行查询，包括：

接收用户的查询请求，所述查询请求中包括用户信息、地址信息以及查询语句；

判断所述查询语句中的查询方式是否是同步查询；

若所述查询语句中的查询方式是同步查询，则判断所述查询语句是否正确；

若所述查询语句正确，则对所述查询语句进行解析，以获得解析后的用户信息和数据库的连接信息；

判断所述用户信息是否与解析后的用户信息一致；

若所述用户信息与解析后的用户信息一致，则根据所述数据库的连接信息接入对应的数据库进行查询。

7.根据权利要求6所述的查询方法，其特征在于，在判断所述查询语句中的查询方式是否是同步查询之前，所述查询方法还包括：

对用户的查询请求的日志进行记录。

8.一种数据库的查询系统，其特征在于，所述查询系统包括：

属性配置模块，用于配置元数据的属性；

权限设置模块，用于设置元数据的查询权限；

查询配置模块，用于根据元数据的属性及查询权限获取用户的查询配置；

语句生成模块，用于基于用户的查询配置生成查询语句；

获取模块，用于根据所述查询语句对数据库进行查询，获得查询结果；

显示模块，用于对所述查询结果进行显示。

9.一种计算机设备，包括存储器、处理器及存储在存储器上的计算机程序，其特征在于，所述处理器执行所述计算机程序以实现如权利要求1～7任一项所述的查询方法。

10.一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机指令，其特征在于，所述计算机指令被处理器执行时实现如权利要求1～7任一项所述的查询方法。

Images