CN111651470A - 统一sql执行与查询方法和系统 - Google Patents

Abstract

本发明涉及统一SQL执行与查询方法和系统。方法包括以下步骤：获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语法，若语法正确，则解析该SQL语句类型；将SQL语句转入服务端执行，返回结果集。本发明通过输入相关信息实例名或者ip，数据库运维人员不需要登录数据库就可执行SQL，因此不需要拥有数据库ip、端口、用户名、密码等信息，也不需要堡垒机、跳板机，还可以将SQL统一下发到不同的数据库实例，支持批量数据库执行统一SQL，此外，本发明设有白名单，提升了数据库系统的安全性。

Description

统一SQL执行与查询方法和系统

技术领域

本发明涉及数据库技术领域，尤其涉及统一SQL执行与查询方法、和系统。

背景技术

随着业务规模壮大和业务形式多样化，数据库实例越来越多，数据库运维人员登录数据库执行SQL，无论是使用可视化数据库工具，还是在linux环境中通过命令登录数据库，不仅需要拥有数据库ip、端口、用户名、密码等信息，还需要通过登录堡垒机、跳板机才能登录到数据库，而且在不同的数据库中执行SQL，还需要一个个的执行，不能将SQL统一下发到不同的数据库实例。如果运维人员不小心执行了一个错误的SQL，执行的SQL也没有白名单限制，很容易造成事故。

发明内容

为了解决上述技术问题，本发明的目的在于提供统一种SQL执行与查询方法和系统。

根据本发明的一个方面，提供了一种统一SQL执行与查询方法，包括：

获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；

接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语句语法，若语法正确，则解析该SQL语句类型；

将SQL语句转入服务端执行，返回结果集。

作为优选，所述数据库相关信息包括数据库实例名称或ip地址。

作为优选，获取数据库相关信息，查询匹配数据库，接收执行SQL语句的数据库选择，包括：

批量选取数据库，所述数据库用于执行SQL语句。

作为优选，将SQL语句转入服务端执行，返回结果集，包括：

异步执行所述SQL语句。

作为优选，将SQL语句转入服务端执行，返回结果集，包括：

若所述SQL语句为非查询类型，则所述结果集为非查询结果集，执行失败的数据库信息和对应的错误信息展示在错误页面；

若所述SQL语句为查询类型，则所述结果集为查询结果集，对不同数据库实例查询结果进行分页，查看数据库实例所在的页面方可执行该页面的SQL语句。

根据本发明的另一个方面，提供了统一SQL执行与查询系统，包括：

数据库选取单元，配置用于获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；

白名单配置单元，配置用于接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语句语法，若语法正确，则解析该SQL语句类型；

SQL语句执行单元，配置用于将SQL语句转入服务端执行，返回结果集。

作为优选，所述数据库相关信息包括数据库实例名称或ip地址。

作为优选，数据库选取单元包括：

批量数据库选取子单元，配置用于批量选取数据库，所述数据库用于执行SQL语句。

作为优选，SQL语句执行单元，包括：

SQL语句异步执行子单元，配置用于异步执行所述SQL语句。

作为优选，SQL语句执行单元，包括：

非查询类型分类子单元，配置用于若所述SQL语句为非查询类型，则所述结果集为非查询结果集，执行失败的数据库信息和对应的错误信息展示在错误页面；

查询类型分类子单元，配置用于若所述SQL语句为查询类型，对不同数据库实例查询结果进行分页，查看数据库实例所在的页面方可执行该页面的SQL语句。

与现有技术相比，本发明具有以下有益效果：

1、本发明示例的统一SQL执行与查询方法，包括：获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语句语法，若语法正确，则解析该SQL语句类型；将SQL语句转入服务端执行，返回结果集。

数据库运维人员通过输入数据库相关信息，即实例名或者ip，由于数据库实例信息对应的ip、端口、用户名、密码等信息存储在本地服务器数据库中，需要时服务端可直接调用，不需重新输入，因此不需要登录数据库就可执行SQL语句，因而既不需要拥有数据库ip、端口、用户名、密码等信息，也不需要堡垒机、跳板机；通过选择要执行SQL语句的数据库，可以将SQL语句统一下发到不同的数据库实例。

此外，本发明示例的统一SQL执行与查询方法，设有白名单，由于白名单为配置在数据库中的正则表达式，该正则表达式可以匹配SQL语句，如果SQL语句匹配成功则表示对该SQL语句进行了白名单配置，因此即使运维人员不小心执行了错误的SQL语句，也不会造成事故发生，因此提升数据库系统的安全性。

2、本发明示例的统一SQL执行与查询系统，包括：数据库选取单元，配置用于获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；白名单配置单元，配置用于接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语法，若语法正确，则解析该SQL语句类型；SQL语句执行单元，配置用于将SQL语句转入服务端执行，返回结果集。

上述单元相互协作，数据库运维人员通过输入相关信息实例名或者ip，不需要登录数据库就可执行SQL，因此不需要拥有数据库ip、端口、用户名、密码等信息，也不需要堡垒机、跳板机；通过选择要执行SQL语句的数据库，可以将SQL语句统一下发到不同的数据库实例，支持数据库执行统一SQL。此外，执行的SQL语句设有白名单，即使运维人员不小心执行了错误的SQL，也不会造成事故发生，因此提升数据库系统的安全性。

附图说明

图1为本发明方法流程图；

图2为本发明流程框图；

图3为实施例1服务器的计算机系统的结构示意图。

具体实施方式

为了更好的了解本发明的技术方案，下面结合具体实施例、说明书附图对本发明作进一步说明。

实施例一：

本实施例的统一SQL执行与查询方法，包括：

S1：获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；

其中，所述数据库相关信息包括数据库实例名称或ip地址。

S1包括：批量选取数据库，所述数据库用于执行SQL语句。

首先用户输入实例名或者ip，查询出符合条件的数据库实例，由用户选择需要执行SQL语句的数据库，此处支持用户批量选择数据库，SQL输入框支持输入多条不同类型SQL语句，支持SQL语句注释过滤。

本实施例通过批量选择要执行SQL语句的数据库，可以将SQL语句统一下发到不同的数据库实例，支持批量数据库执行统一SQL语句，因此可以实现在多个数据库实例执行SQL语句，不需要重复一次次执行。

S2：接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语法，若语法正确，则解析该SQL语句类型；

具体的，用户输入SQL语句点击执行后，服务端接收客户端逐条发送过来的SQL语句，校验SQL语句语法的合法性和SQL语句是否在白名单中，此处白名单是指配置在数据库中的正则表达式，该正则表达式可以匹配SQL语句，如果SQL语句匹配成功则表示对该SQL语句进行了白名单配置。

如果该SQL语句在白名单中则交由druid检验SQL语句语法，语法正确则由SQL解析器解析SQL语句类型，返回客户端。客户端根据解析的SQL语句类型调用相应的接口，select类型调用查询类型SQL接口，非select类型调用更新类型SQL接口。此处druid中文名称为德鲁伊，为阿里开发的开源插件名称，是一种操作数据库的插件。为了保证数据库的安全性，增加了SQL语句白名单配置，只有在数据库白名单配置表中有配置的SQL语句才允许执行。

S3：将SQL语句转入服务端执行，返回结果集。

其中，S3包括：

异步执行SQL语句。

S3还包括：

若所述SQL语句为非查询类型，则所述结果集为非查询结果集，执行失败的数据库信息和对应的错误信息展示在错误页面；

若所述SQL语句为查询类型，则所述结果集为查询结果集，对不同数据库实例查询结果进行分页，查看数据库实例所在的页面方可执行该页面的SQL语句。

对于语法合法且在白名单中的SQL语句，客户端优先发送第一条SQL语句到服务端，服务端执行SQL语句并返回SQL语句的执行结果给客户端，此处第一条SQL语句为以分号隔开的批量SQL语句中写在最前面的SQL语句。

服务端获取数据库实例信息，包括ip、端口、用户名、密码等信息，并连接数据库，下发SQL语句到服务端执行，执行的结果集返回给用户。数据库实例信息对应的ip、端口、用户名、密码等信息存储在本地服务器数据库中，需要时服务端可直接调用，不需重新输入。

所述结果集为SQL语句执行的结果，若所述SQL语句为非查询类型，则所述结果集为非查询结果集，执行失败的数据库信息和对应的错误信息展示在错误页面；

若所述SQL语句为查询类型，则所述结果集为查询结果集，若选择了操作上千个不同的数据库服务器进行执行SQL语句，则SQL语句统一执行采用异步的方式给用户展示查询结果，即根据不同数据库实例进行分页，只有用户需要查看该实例的所在页面才进行SQL语句的执行。

对于异步执行模式，是指语句在异步执行模式下，各语句执行结束的顺序与语句执行开始的顺序并不一定相同。例如查询操作，客户机上的应用程序在向服务器发出了查询操作的指令后，将立刻执行查询语句指令的下一条语句，而不需要等到服务器将查询结果返回客户机端。异步执行方式使应用程序能摆脱单个任务的牵制，提高了灵活性和应用程序的执行效率。

在本实施例中，客户端根据不同实例生成不同页面，如果有批量SQL语句，则该页面下根据SQL语句分成多个页面展示结果，即每个SQL语句返回的结果不同，需要将每个SQL语句返回的结果分成多个页面展示。当用户点击其他数据库实例页面，或者该页面下的SQL语句的小页面，客户端会将该数据库实例信息要执行的SQL语句发送到服务端执行该SQL语句。用户可以点击小页面的标题名来回切换小页面，也可以查看多个小页面的信息，从而实现异步执行SQL语句，提升效率。本实施例所选择的数据库实例个数批量无上限，为了及时响应，客户端采用异步请求的方式，发送SQL语句到后端，多线程执行，及时返回结果，可提高执行效率。

本实施例还提供了统一SQL执行与查询系统，包括：

数据库选取单元，配置用于获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；

白名单配置单元，配置用于接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语句语法，若语法正确，则解析该SQL语句类型；

SQL语句执行单元，配置用于将SQL语句转入服务端执行，返回结果集。

优选的，所述数据库相关信息包括数据库实例名称或ip地址。

优选的，数据库选取单元包括：

批量数据库选取子单元，配置用于批量选取数据库，所述数据库用于执行SQL语句。

优选的，SQL语句执行单元，包括：

SQL语句异步执行子单元，配置用于异步执行所述SQL语句。

优选的，SQL语句执行单元，包括：

非查询类型分类子单元，配置用于若所述SQL语句为非查询类型，则所述结果集为非查询结果集，执行失败的数据库信息和对应的错误信息展示在错误页面；

查询类型分类子单元，配置用于若所述SQL语句为查询类型，对不同数据库实例查询结果进行分页，查看数据库实例所在的页面方可执行该页面的SQL语句。

本实施例提供了一种设备，所述设备包括：

一个或多个处理器；

存储器，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器执行如上任一项所述的方法。通过处理器执行统一SQL执行与查询方法。

本实施例提供了一种存储有计算机程序的计算机可读存储介质，该程序被处理器执行时实现如上任一项所述的方法，储存有被处理器执行时实现的所述统一SQL执行与查询方法，进一步介绍如下：

计算机系统包括中央处理单元(CPU)101，其可以根据存储在只读存储器(ROM)102中的程序或者从存储部分加载到随机访问存储器(RAM)103中的程序而执行各种适当的动作和处理。在RAM103中，还存储有系统操作所需的各种程序和数据。CPU 101、ROM 102以及RAM 103通过总线104彼此相连。输入/输出(I/O)接口105也连接至总线104。

以下部件连接至I/O接口105：包括键盘、鼠标等的输入部分106；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分；包括硬盘等的存储部分108；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分109。通信部分109经由诸如因特网的网络执行通信处理。驱动器也根据需要连接至I/O接口105。可拆卸介质111，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器110上，以便于从其上读出的计算机程序根据需要被安装入存储部分108。

特别地，根据本发明的实施例，上文参考流程图1描述的过程可以被实现为计算机软件程序。例如，本发明的实施例1包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分从网络上被下载和安装，和/或从可拆卸介质被安装。在该计算机程序被中央处理单元(CPU)101执行时，执行本申请的系统中限定的上述功能。

需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本发明各种实施例1的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的单元可以通过软件的方式实现，也可以通过硬件的方式来实现，所描述的单元也可以设置在处理器中。其中，这些单元的名称在某种情况下并不构成对该单元本身的限定。所描述的单元或模块也可以设置在处理器中，例如，可以描述为：一种处理器包括取数据库实例信息获取单元、白名单配置单元和SQL语句执行单元，其中，这些单元或模块的名称在某种情况下并不构成对该单元或模块本身的限定，例如，SQL语句执行单元还可以被描述为“用于将SQL语句转入后端数据库执行的SQL语句执行单元”。

作为另一方面，本申请还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的电子设备中所包含的；也可以是单独存在，而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该电子设备执行时，使得该电子设备实现如上述实施例中所述的统一SQL执行与查询方法。

例如，所述电子设备可以实现如图1所示的：获取数据库相关信息，查询匹配数据库，选取待执行SQL语句的数据库；接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语法，若语法正确，则解析该SQL语句类型；将SQL语句转入后端数据库执行，返回结果集。又如，所述电子设备可以实现如图2所示的各个步骤。

应当注意，尽管在上文详细描述中提及了用于动作执行的设备的若干模块或者单元，但是这种划分并非强制性的。实际上，根据本公开的实施方式，上文描述的两个或更多模块或者单元的特征和功能可以在一个模块或者单元中具体化。反之，上文描述的一个模块或者单元的特征和功能可以进一步划分为由多个模块或者单元来具体化。

此外，尽管在附图中以特定顺序描述了本公开中方法的各个步骤，但是，这并非要求或者暗示必须按照该特定顺序来执行这些步骤，或是必须执行全部所示的步骤才能实现期望的结果。附加的或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，以及/或者将一个步骤分解为多个步骤执行等。

通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。

以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解，本申请中所涉及的发明范围，并不限于上述技术特征的特定组合而成的技术方案，同时也应涵盖在不脱离所述发明构思的情况下，由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能。

Claims (10)

1.统一SQL执行与查询方法，其特征是，包括：

获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；

接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语句语法，若语法正确，则解析该SQL语句类型；

将SQL语句转入服务端执行，返回结果集。

2.根据权利要求1所述的统一SQL执行与查询方法，其特征是，所述数据库相关信息包括数据库实例名称或ip地址。

3.根据权利要求1所述的统一SQL执行与查询方法，其特征是，获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句，包括：

批量选取数据库，所述数据库用于执行SQL语句。

4.根据权利要求1所述的统一SQL执行与查询方法，其特征是，将SQL语句转入服务端执行，返回结果集，包括：

异步执行所述SQL语句。

5.根据权利要求1所述的统一SQL执行与查询方法，其特征是，将SQL语句转入服务端执行，返回结果集，包括：

若所述SQL语句为非查询类型，则所述结果集为非查询结果集，执行失败的数据库信息和对应的错误信息展示在错误页面；

若所述SQL语句为查询类型，则所述结果集为查询结果集，对不同数据库实例查询结果进行分页，查看数据库实例所在的页面方可执行该页面的SQL语句。

6.统一SQL执行与查询系统，其特征是，包括：

数据库选取单元，配置用于获取数据库相关信息，查询匹配数据库，选取数据库，所述数据库用于执行SQL语句；

白名单配置单元，配置用于接收SQL语句，检查该SQL语句是否在白名单中，若在白名单中，则校验该SQL语句语法，若语法正确，则解析该SQL语句类型；

SQL语句执行单元，配置用于将SQL语句转入服务端执行，返回结果集。

7.根据权利要求6所述的统一SQL执行与查询系统，其特征是，所述数据库相关信息包括数据库实例名称或ip地址。

8.根据权利要求6所述的统一SQL执行与查询系统，其特征是，数据库选取单元包括：

批量数据库选取子单元，配置用于批量选取数据库，所述数据库用于执行SQL语句。

9.根据权利要求6所述的统一SQL执行与查询系统，其特征是，SQL语句执行单元，包括：

SQL语句异步执行子单元，配置用于异步执行所述SQL语句。

10.根据权利要求6所述的统一SQL执行与查询系统，其特征是，SQL语句执行单元，包括：

非查询类型分类子单元，配置用于若所述SQL语句为非查询类型，则所述结果集为非查询结果集，执行失败的数据库信息和对应的错误信息展示在错误页面；

查询类型分类子单元，配置用于若所述SQL语句为查询类型，对不同数据库实例查询结果进行分页，查看数据库实例所在的页面方可执行该页面的SQL语句。

Images