CN112130841A

CN112130841A - Sql开发方法、装置及终端设备

Info

Publication number: CN112130841A
Application number: CN202010913905.3A
Authority: CN
Inventors: 宣钢炜; 招伟东; 刘达明
Original assignee: Guangzhou Shuangzhao Electronic Technology Co ltd
Current assignee: Guangzhou Shuangzhao Electronic Technology Co ltd
Priority date: 2020-09-02
Filing date: 2020-09-02
Publication date: 2020-12-25
Anticipated expiration: 2040-09-02
Also published as: CN112130841B

Abstract

本申请公开了一种SQL开发方法、装置及终端设备，所述方法包括：获取SQL语句组件的选取指令，根据选取指令在SQL组件编辑区域选取对应的SQL语句组件；获取SQL语句组件的编辑指令，根据编辑指令配置SQL语句组件的参数信息；响应数据转化指令，根据SQL组件编辑区域内的SQL语句组件排序信息以及各SQL组件的参数信息生成底层数据结构，以将底层数据结构转换为SQL语句。

Description

SQL开发方法、装置及终端设备

技术领域

本申请涉及计算机技术领域，尤其涉及一种SQL开发方法、装置及终端设备。

背景技术

SQL是当前最为流行的数据库操作语言之一，可用于实现IT业务系统中业务规则的配置。但由于SQL开发需要经过繁琐的编码、编译和打包的过程，同时开发过程中需要借助数据库开发工具进行调试验证，导致需要编写大量的SQL代码，使得在实现业务规则配置的需求时交付时间过长。且如果产生基于业务规则配置的变化请求，则需要对SQL代码进行大量修改来适配对应的需求，从而带来了大量的人力成本和时间成本，影响SQL的开发效率。

发明内容

本申请实施例所要解决的技术问题在于，解决SQL开发效率差的技术问题。

为解决上述问题，本申请实施例提供一种SQL开发方法，适于在计算装置中执行，至少包括如下步骤：

获取SQL语句组件的选取指令，根据所述选取指令在SQL组件编辑区域选取对应的SQL语句组件；

获取所述SQL语句组件的编辑指令，根据所述编辑指令配置所述SQL语句组件的参数信息；

响应数据转化指令，根据所述SQL组件编辑区域内的SQL语句组件排序信息以及各所述SQL组件的参数信息生成底层数据结构，以将所述底层数据结构转换为SQL语句。

进一步的，所述根据所述选取指令在SQL组件编辑区域选取对应的SQL语句组件，包括：

根据所述选取指令，在所述SQL组件编辑区域内基于预设的组件选取顺序，依次选取对应的SQL语句组件。

进一步的，所述根据所述SQL组件编辑区域内SQL语句组件排序信息以及各所述SQL组件的参数信息生成底层数据结构，包括：

根据各所述SQL组件的参数信息，查找与各SQL组件的参数信息对应的各底层数据，并将各所述底层数据根据SQL语句组件排序信息，生成底层数据结构。

进一步的，所述将所述底层数据结构转换为SQL语句之前，还包括：

检测所述底层数据结构的结构配置是否达到预设要求；其中，若是，则调用组装接口对所述底层数据结构进行SQL语句转化；

否则，将所述底层数据结构保存至数据库。

进一步的，所述将所述底层数据结构转换为SQL语句，包括：

对所述底层数据结构进行解析，获取解析结果；

根据解析结果与元数据构建RedNode对象节点；

根据所述RedNode对象节点，将所述底层数据结构中的底层数据转换为RedNode对象后，将所述RedNode对象转换为SQL语句。

进一步的，所述SQL语句组件包括配置输入组件、字段衍生组件、条件过滤组件、分组聚合组件和排序输出组件。

进一步的，所述字段衍生组件的参数信息可自定义配置。

进一步的，还提供一种SQL开发装置，包括：

组件配置模块，用于获取SQL语句组件的选取指令，根据所述选取指令在SQL组件编辑区域选取对应的SQL语句组件；

组件编辑模块，用于获取所述SQL语句组件的编辑指令，根据所述编辑指令配置所述SQL语句组件的参数信息；

SQL开发模块，用于响应数据转化指令，根据所述SQL组件编辑区域内的SQL语句组件排序信息以及各所述SQL组件的参数信息生成底层数据结构，以将所述底层数据结构转换为SQL语句。

进一步的，所述SQL开发模块具体用于：

进一步的，还提供一种终端设备，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如上述实施例所述SQL开发方法的步骤。

与现有技术相比，本实施例通过设置SQL组件的参数信息，在进行数据转化时直接从服务器或数据库拉取对应参数信息设置的规则数据结构，可以减少在SQL开发过程中的编程工作，并在尽可能不修改业务规则相关代码的情况下实现SQL的动态更新，减少SQL开发过程中存在的编码以及修改成本，有效提高业务SQL开发效率。同时通过在SQL组件编辑区域内以组件化形式展示数据结构，让用户可根据组件展示来理解sql实现的逻辑，比直接看sql语句更加直观，同时无需编写代码，可直接由业务人员进行配置开发，不存在信息不对称的问题，且在面对一些保密要求高的场景时，不需要开发人员进行代码编写，提高了规则配置的安全性。

附图说明

图1一实施例提供的SQL开发方法的示例性系统架构的示意图；

图2是一实施例提供的SQL开发方法的流程示意图；

图3是SQL语句组件的配置流程图；

图4是SQL配置提交流程图；

图5是另一实施例提供的SQL开发方法的流程示意图；

图6是一实施例提供的SQL开发装置的结构示意图；

图7是一个实施例提供的终端设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

SQL是当前最为流行的数据库操作语言之一，可用于实现IT业务系统中业务规则的配置。传统的SQL开发对使用者有一定的专业性要求，开发过程必须要借助数据库开发工具进行调试验证，而这个开发过程需要编写大量的SQL代码，不便于用户理解业务逻辑，导致在实现业务规则配置的需求时交付时间过长。此外，SQL开发是为了实现业务规则配置，而在业务规则的需求是由业务人员提出，而大多数业务人员无法编写大量的SQL代码以实现对应的SQL开发，因此对应的SQL开发需要由开发人员实现，导致在SQL开发过程中，需要业务人员和开发人员进行多次交流，从而增加了人力成本和时间成本，且当信息在交流过程中丢失时，会使SQL开发出来的业务规则配置无法满足对应的业务需求。同时，对于某些保密要求高的场景，如银行风控规则配置场景，这类业务规则一般是不对开发人员公开的，而由于一般的非开发人员无法编写大量的SQL代码，因此导致现有的开发模式无法满足该类需求的实施。同时，当前互联网行业对需求交付的时限要求越来越高，经常是当天提出的新需求要求当天就能上线，甚至是希望即改即生效，但是现有的SQL开发方式如果产生基于业务规则配置的变化请求，需要对SQL代码进行大量修改来适配对应的需求，修改时间长，难以做到及时更新，因此无法满足当下互联网行业的需求。

为解决上述问题，如图1所示，是一实施例提供的SQL开发方法的示例性系统架构的示意图。系统架构100可以包括终端110和服务器120。终端110与服务器120通信连接，使得终端110能够向服务器120发送信息或接收服务器120发送的信息。通信连接可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。终端110具体可以是台式终端或移动终端，移动终端具体可以手机、平板电脑、笔记本电脑等终端中的至少一种。服务器120可以用独立的服务器或者是多个服务器组成的服务器集群。其中，终端110通过接收用户发送的SQL语句组件的选取指令，根据选取指令选取SQL语句组件后，响应用户发送的SQL语句组件的编辑指令，配置SQL语句组件的参数信息，并根据被选定的各业务规则组件的参数信息从服务器120中拉取对应的底层数据，形成规则底层数据结构后，对底层数据结构进行解析，转化成SQL语句，从而形成可直接运行的SQL代码。

通过设置SQL组件的参数信息，在进行数据转化时直接从服务器拉取对应参数信息设置的规则数据结构，可以减少在SQL开发过程中的编程工作，并在尽可能不修改业务规则相关代码的情况下实现SQL的动态更新，减少SQL开发过程中存在的编码以及修改成本，有效提高业务SQL开发效率。同时通过组件化形式展示，让业务人员也能直观的理解代码逻辑，无需编写代码，可直接由业务人员进行配置开发，不存在信息不对称的问题，且在面对一些保密要求高的场景时，不需要开发人员进行代码编写，提高了规则配置的安全性。

下面结合附图对本公开示例实施方式进行详细说明。

在一个实施例中，如图2所示，提供了一种SQL开发方法。本实施例主要以该方法应用于计算机设备来举例说明，该计算机设备具体可以是上述图1中的终端110，具体包括如下步骤：

步骤S11，获取SQL语句组件的选取指令，根据选取指令在SQL组件编辑区域选取对应的SQL语句组件。

在一实施例中，SQL语句组件由开发人员通过统计小组内产品的共性，将SQL语句的各功能组件化从而开发出来，存储在服务器上供用户调用。其中SQL语句的功能包括定义SQL语句的配置输入、字段衍生、条件过滤、分组聚合及排序输出等功能。每个SQL语句组件均设置有参数信息，参数信息包括已配置接口和与SQL语句组件对应的底层数据的存储地址。其中，底层数据存储于服务器上，SQL语句组件的选取方式除了可以通过拖拽操作在组件编辑区域内添加SQL语句组件，也可以通过点击、按键等方式添加业务规则组件，在此不做限定。其中，配置输入实现了SQL语句中的from table及on条件部分功能，支持单表查询和多表关联查询；字段衍生用于对字段进行衍生处理，支持计算衍生、函数衍生以及映射衍生三种方式，计算衍生主要是对字段进行四则运算处理，函数衍生是使用SQL支持的函数进行处理，映射衍生主要是要实现类似case when功能；条件过滤实现了SQL语句中的where条件部分功能，支持多级条件函套，支持函数条件以及条件复制粘贴等功能；分组聚合实现了SQL语句中的group by和having部分功能；排序输出实现了SQL语句中的select和order by部分功能。其中，SQL语句组件的配置方式可如图3所示。

需要说明的是，字段衍生组件的参数信息可自定义配置。用户可通过字段衍生组件中的参数配置栏，自定义配置字段衍生组件的参数信息，从而可在获取字段衍生组件的底层数据时根据自定义的参数信息修改该底层数据内的参数信息。

步骤S12，获取SQL语句组件的编辑指令，根据编辑指令配置SQL语句组件的参数信息。

在一实施例中，可以响应属性编辑指令展示属性编辑框，属性编辑框包括参数信息输入栏，参数信息输入栏用于增加、修改和删除参数信息。其中，可以在SQL语句组件内使用滑动、滚动、分页等形式陈列参数信息，在此不做限定。

由于各SQL语句组件对应的底层数据结构均保存在服务器上，因此在读取SQL语句组件的底层数据设置时，可以根据参数信息从服务器实时拉取底层数据，从而在需要对SQL开发的内容进行大规模批量更新时，无需修改代码，仅需修改SQL语句组件的参数信息或修改参数信息对应的底层数据，即可使选取同一SQL语句组件的终端能更新到该SQL语句组件的底层数据，从而减少SQL开发需求的交付时间，且便于使用者理解SQL语句的逻辑，不容易出错，提高开发效率。

步骤S13，响应数据转化指令，根据SQL组件编辑区域内的SQL语句组件排序信息以及各SQL组件的参数信息生成底层数据结构，以将底层数据结构转换为SQL语句。

在一实施例中，在转化成SQL语句的过程中，根据参数信息，从服务器实时拉取底层数据，然后再根据SQL语句组件排序信息，将各底层数据组装生成底层数据结构，无需进行代码编写，极大减少了使用人员的工作量和所需知识量，同时提高SQL的开发效率。其中，底层数据为定义好的数据，包括表/视图、输入字段、衍生字段、分组字段、聚合字段、条件表达式、映射字段、排序字段和输出字段。

由于一次性配置的可能数据比较多，因此当有数据遗漏时，可能会导致需求无法实现，此时若要从头进行开发，会浪费大量的时间成本。因此在一实施例中，在将底层数据结构转换为SQL语句之前，会检测底层数据结构的结构配置是否达到预设要求，以判断SQL配置是否完整。若达到预设要求，则调用组装接口对底层数据结构进行SQL语句转化，生成SQL语句然后更新SQL为就绪状态，保存SQL及配置信息，否则，判断该SQL配置不完整，将该底层数据结构存储到mySQL数据库中，从而将不完整的配置存下来，以供后续需要继续配置时进行调取，无需从头开发。其处理流程可如图4所示。

为进一步提高SQL的开发效率，在一实施例中，将底层数据转换为SQL语句包括：对底层数据结构进行解析，获取解析结果，根据解析结果与元数据构建RedNode对象节点，验证RedNode对象语法后，根据RedNode对象节点，将底层数据结构中的底层数据转换为RedNode对象后，将RedNode对象转换为SQL语句。其中，元数据信息为从redis下加载表和视图对应的元数据信息。同时，为兼容实际场景的应用，还可根据用户的个性需求将生成的SQL进行例外处理，如处理自定义函数、衍生字段以及flink个性语法上的一些问题。

优选的，将底层数据转换为SQL语句的过程可通过calcite组件实现，其中元数据用于将正式表的信息转换为calcite组件对应表配置结构，以帮助组件进行sql校验及转化。利用calcite组件的格式化sql，校验sql、美化格式以及多数据源兼容等特点，使得sql预览更美观，且当有些配置不完整或配置与sql实际上是有冲突时，可以进行提醒，减少发布后报错。

上述SQL开发方法主要面向flink语法的SQL语句，由于flink底层也是基于该组件实现转化的，即将SQL语句转化为对象，因此将上述实施例用于flink语法的SQL开发时，兼容度很高。

与现有技术相比，本实施例通过设置SQL组件的参数信息，在进行数据转化时直接从服务器或数据库拉取对应参数信息设置的规则数据结构，可以减少在SQL开发过程中的编程工作，并在尽可能不修改业务规则相关代码的情况下实现SQL的动态更新，减少SQL开发过程中存在的编码以及修改成本，有效提高业务SQL开发效率。同时通过前端技术在SQL组件编辑区域内以组件化形式展示数据结构，让用户可根据组件展示来理解sql实现的逻辑，比直接看sql语句更加直观，同时无需编写代码，可直接由业务人员进行配置开发，不存在信息不对称的问题，且在面对一些保密要求高的场景时，不需要开发人员进行代码编写，提高了规则配置的安全性。

由于SQL语句需要按一定的逻辑顺序执行，而若在开发过程中SQL语句组件的组装顺序出错，可能导致SQL开发出错。因此，参见图5，是本申请的是另一实施例提供的SQL开发方法的流程示意图，包括：

步骤S21，获取SQL语句组件的选取指令，根据选取指令，在SQL组件编辑区域内基于预设的组件选取顺序，依次选取对应的SQL语句组件。

在本实施例中，通过对组件的选取顺序进行设定，使得在开发的过程中不会出现SQL语句组件的组装顺序出错的问题，进而确保SQL开发的准确性。

步骤S22，获取SQL语句组件的编辑指令，根据编辑指令配置SQL语句组件的参数信息。

在本实施例中，步骤S22的运行过程与上述实施例中步骤S12类似，在此不多赘述。

步骤S23，响应数据转化指令，根据所述SQL组件编辑区域内的SQL语句组件排序信息以及各所述SQL组件的参数信息生成底层数据结构，以将所述底层数据结构转换为SQL语句。

在本实施例中，步骤S23的运行过程与上述实施例中步骤S13类似，在此不多赘述。

在一实施例中，提供了一种SQL开发装置。如图6所示，包括：

组件配置模块101，用于获取SQL语句组件的选取指令，根据选取指令在SQL组件编辑区域选取对应的SQL语句组件。

其中，SQL语句组件包括配置输入组件、字段衍生组件、条件过滤组件、分组聚合组件和排序输出组件，字段衍生组件的参数信息可自定义配置。

组件编辑模块102，用于获取SQL语句组件的编辑指令，根据编辑指令配置SQL语句组件的参数信息。

SQL开发模块103，用于响应数据转化指令，根据SQL组件编辑区域内的SQL语句组件排序信息以及各SQL组件的参数信息生成底层数据结构，以将底层数据结构转换为SQL语句。

在一实施例中，组件配置模块101具体用于，根据选取指令，在SQL组件编辑区域内基于预设的组件选取顺序，依次选取对应的SQL语句组件。

在一实施例中，SQL开发模块103具体用于，根据各SQL组件的参数信息，查找与各SQL组件的参数信息对应的各底层数据，并将各底层数据根据SQL语句组件排序信息，生成底层数据结构。

在一实施例中，SQL开发模块103还用于，检测底层数据结构的结构配置是否达到预设要求；其中，若是，则调用组装接口对底层数据结构进行SQL语句转化；否则，将底层数据结构保存至数据库。

在一实施例中，SQL开发模块103还用于，对底层数据结构进行解析，获取解析结果；根据解析结果与元数据构建RedNode对象节点；根据RedNode对象节点，将底层数据结构中的底层数据转换为RedNode对象后，将RedNode对象转换为SQL语句。

在一实施例中，提供了一种终端设备的结构示意图。如图7所示，该终端设备包括通过系统总线连接的处理器、存储器、输入/输出接口和数据库。其中，该终端设备的处理器用于提供计算和控制能力。该终端设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该终端设备的网络接口用于与外部的数据库连接，以接收数据库中的组件数据。该终端设备在处理器执行时以实现上述实施例所述的SQL开发方法。本领域技术人员可以理解，图7中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的终端设备的限定，具体的终端设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

以上所述是本申请的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本申请的保护范围。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)或随机存储记忆体(Random AccessMemory，RAM)等。

Claims

1.一种SQL开发方法，其特征在于，包括：

2.根据权利要求1所述的SQL开发方法，其特征在于，所述根据所述选取指令在SQL组件编辑区域选取对应的SQL语句组件，包括：

3.根据权利要求1所述的SQL开发方法，其特征在于，所述根据所述SQL组件编辑区域内SQL语句组件排序信息以及各所述SQL组件的参数信息生成底层数据结构，包括：

4.根据权利要求1所述的SQL开发方法，其特征在于，所述将所述底层数据结构转换为SQL语句之前，还包括：

否则，将所述底层数据结构保存至数据库。

5.根据权利要求1所述的SQL开发方法，其特征在于，所述将所述底层数据结构转换为SQL语句，包括：

对所述底层数据结构进行解析，获取解析结果；

根据解析结果与元数据构建RedNode对象节点；

6.根据权利要求1-5任意一项所述的SQL开发方法，其特征在于，所述SQL语句组件包括配置输入组件、字段衍生组件、条件过滤组件、分组聚合组件和排序输出组件。

7.根据权利要求6所述的SQL开发方法，其特征在于，所述字段衍生组件的参数信息可自定义配置。

8.一种SQL开发装置，其特征在于，包括：

9.根据权利要求8所述的SQL开发装置，其特征在于，所述SQL开发模块具体用于：

10.一种终端设备，其特征在于，包括存储器和处理器，所述存储器存储有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至7中任一项所述SQL开发方法的步骤。