CN110222128B - 一种生成数据预置sql的方法及装置 - Google Patents

Abstract

本发明公开了一种生成数据预置sql的方法及装置，属于数据库技术，本发明要解决的技术问题为如何避免手工编写及维护sql的复杂性，降低人工成本，提升数据预置效率，技术方案为：①该方法步骤如下：S1、选择表；S2、设置表；S3、生成数据预置sql：根据表设置及当前的数据库类型生成符合该数据库类型语法规范的数据预置sql；S4、执行sql：将步骤S3生成的数据预置sql，在当前已连接的数据库中执行并打印日志；S5、配置保存与读取：在步骤S2‑S4中的任意阶段均可保存当前设置情况为配置文件或加载已有的配置文件，使得可跨数据库类型生成sql及表结构发生变动时可生成最新sql。②该装置包括表选择模块、表设置模块、sql生成模块、sql执行模块以及配置保存与读取模块。

Description

一种生成数据预置sql的方法及装置

技术领域

本发明涉及数据库技术，具体地说是一种生成数据预置sql的方法及装置。

背景技术

数据库(Database)是按照数据结构来组织、存储和管理数据的仓库，在软件开发和测试过程中，经常需要对数据库进行操作，尤其在软件测试时，需要根据测试需要，在测试环境中预置测试数据或往年历史数据，此操作称为数据预置。数据预置完成后，被预置的表会插入预先设定的一行或多行数据。

传统的数据预置方式是连接数据库，在数据库的sql执行窗口编写数据预置sql，通常为insert开头的sql语句或包含insert的一段sql语句，如果预置的数据量较大或较为复杂，sql可能涉及到多种数据库技术，如表间关联、游标、循环等，编写比较耗费精力；如果后期表结构发生变化，对应的sql可能需要调整，维护成本比较高。如果需要测试多种数据库类型，需要根据每种数据库类型的语法规范，编写对应的sql，重复劳动较多，比较耗时。综上所述，目前手工编写数据预置sql成本高、维护性差，故如何避免手工编写及维护sql的复杂性，降低人工成本，提升数据预置效率是目前现有技术中急需解决的问题。

发明内容

本发明的技术任务是提供一种生成数据预置sql的方法及装置，来解决如何避免手工编写及维护sql的复杂性，降低人工成本，提升数据预置效率的问题。

本发明的技术任务是按以下方式实现的，一种生成数据预置sql的方法，该方法步骤如下：

S1、选择表：配置数据库连接信息，配置完成后连接该数据库，利用数据库内置的系统表及系统函数，获取当前连接用户所有的表，根据需要选择一张表或多张表或同一张表多次选择；

S2、设置表：根据数据库系统表及系统函数，获取步骤S2中选择的表对应的表结构，根据不同字段的类型分别匹配不同的设置选项，对需要预置数据的字段逐一进行设置；

S3、生成数据预置sql：根据表设置及当前的数据库类型生成符合该数据库类型语法规范的数据预置sql；

S4、执行sql：将步骤S3生成的数据预置sql，在当前已连接的数据库中执行并打印日志；同时判断执行是否正确：

①、若执行正确，则记录当前sql的执行时间；

②、若执行异常，则打印异常详细信息；

S5、配置保存与读取：在步骤S2-S4中的任意阶段均可保存当前设置情况为配置文件或加载已有的配置文件，使得可跨数据库类型生成sql及表结构发生变动时可生成最新sql；配置文件中包括当前要设置的表、已设置的字段、循环次数、表间关联的所有生成sql相关的信息，。

作为优选，所述步骤S1中数据库包括sqlserver、oracle、postgresql三种关系型数据库。

更优地，所述步骤S2中字段类型包括字符串类型、整数类型、浮点数类型以及日期类型。

更优地，所述字符串类型匹配的设置选型为随机字符串、固定字符串或带前缀的顺序字符串，覆盖了常用类型及常用设置选项；

整数类型匹配的设置选型为固定整数或随机整数，覆盖了常用类型及常用设置选项；

浮点数类型配置的设置选型为固定小数或随机小数，覆盖了常用类型及常用设置选项；

日期类型匹配的设置选型为随机日期或固定日期，覆盖了常用类型及常用设置选项。

作为优选，所述步骤S2中设置表还包括设置预置的数据量以及设置预置表间关联关系。

作为优选，所述步骤S3中生成数据预置sql具体步骤如下：

S301、搭建整体的sql框架，sql框架包含sql起始、变量、循环次数、核心insert语句、表关联语句、变量递增语句以及结束语句；

S302、遍历表字段设置，将描述语言转为sql语句；

S303、设置生成的sql与框架进行组装；

S304、将所有sql按照语法次序拼接成最终sql。

作为优选，所述步骤S5中配置保存是将当前所有设置信息以描述语言的方式保存至文本文件；当前表的所有设置内容都将以描述语言的形式保存为文本文件，该配置未包含任何sql相关语法，使得同一份配置文件在不同类型的数据库上，会解析生成不同语法的数据预置sql；其中，表所有设置内容包括各个字段的设置、循环次数设置以及表关联设置；

作为优选，所述步骤S5中配置读取是将文件中描述语言加载至对应的设置选项；读取选定的配置文件，解析并加载到设置界面，数据类型不同或表结构发生变化时，生成的sql均不受影响，为符合语法规范的最新sql。一种生成数据预置sql的装置，该装置包括表选择模块、表设置模块、sql生成模块、sql执行模块以及配置保存与读取模块，表设置模块发送数据到表设置模块，表设置模块发送数据到sql生成模块，sql生成模块发送数据到sql执行模块；

其中，表选择模块用于配置数据库连接信息，配置完成后连接该数据库，利用数据库内置的系统表及系统函数，获取当前连接用户所有的表，根据需要选择一张表或多张表或同一张表多次选择；

表设置模块用于根据数据库系统表及系统函数，获取步骤S2中选择的表对应的表结构，根据不同字段的类型分别匹配不同的设置选项，对需要预置数据的字段逐一进行设置；

sql生成模块用于根据表设置及当前的数据库类型生成符合该数据库类型语法规范的数据预置sql；

sql执行模块用于sql生成模块生成的数据预置sql，在当前已连接的数据库中执行并打印日志，同时判断执行是否正确；

配置保存与读取模块用于保存及读取表设置模块、sql生成模块以及sql执行模块中的数据。

作为优选，所述配置保存与读取模块包括配置保存模块和配置读取模块；

其中，配置保存模块用于保存表设置模块、sql生成模块以及sql执行模块中的数据；

配置读取模块用于读取表设置模块、sql生成模块以及sql执行模块保存中的数据。

本发明的生成数据预置sql的方法及装置具有以下优点：

(一)、本发明解决了手工编写sql复杂及后期sql维护成本高问题，节省人力成本，提升效率；

(二)、界面化设置，自动生成数据预置sql及执行sql；

(三)、配置可保存，配置可跨数据库类型读取及生成当前数据库语法规范sql；

(四)、表结构发生变动后，生成的是依据当前表结构最新的sql，无需人工干预；

(五)、支持常见字段设置，支持表间关联，满足大部分的数据预置需求；

(六)、针对目前手工编写数据预置sql成本高、维护性差的问题，本发明根据设置自动生成数据预置sql及执行sql，且可保存当前设置，不同数据库类型可共用该设置；每次生成的数据预置sql为最新，不受表结构变动影响，以免去手工编写及维护sql的复杂性，降低人工成本，提升数据预置效率；

(七)、本发明可以通过图形界面形式，进行表字段的设置、表间关联设置等，自动生成数据预置sql并可批量执行；同时可以以配置文件形式保存设置而非保存sql，实现配置文件的跨数据库类型通用，在表结构发生变动时，再次生成会是最新的sql；

(八)、本发明可实现界面化设置预置数据、自动批量生成预置sql、自动批量执行预置sql并打印日志、一份配置文件多类型数据库通用等，免去了手工编写大量数据预置sql及后期sql维护的成本，提升了数据预置的效率；

附图说明

下面结合附图对本发明进一步说明。

附图1为生成数据预置sql的方法流程框图；

附图2为生成数据预置sql的装置的结构框图；

附图3为数据库连接界面图；

附图4为表选择界面图；

附图5为整体设置界面图；

附图6为字符串类型字段设置界面图；

附图7为整数类型字段设置界面图；

附图8为浮点数类型设置界面图；

附图9为日期类型字段设置界面图；

附图10为设置完成并生成sql的界面；

附图11为数据预置界面图；

附图12为保存后的配置文件界面。

具体实施方式

参照说明书附图和具体实施例对本发明的一种生成数据预置sql的方法及装置作以下详细地说明。

实施例1：

如附图1所示，本发明的1生成数据预置sql的方法,该方法步骤如下：

S1、选择表：配置数据库连接信息，配置完成后连接该数据库，数据库连接界面如附图3所示；利用数据库内置的系统表及系统函数，获取当前连接用户所有的表，根据需要选择一张表或多张表或同一张表多次选择，表选择界面如附图4所示；如连接postgresql数据库，选择user、department、position三张表(用户表、部门表、岗位表)；

S2、设置表：根据数据库系统表及系统函数，目前支持sqlserver、oracle、postgresql三种关系型数据库；获取步骤S2中选择的表对应的表结构，根据不同字段的类型分别匹配不同的设置选项，对需要预置数据的字段逐一进行设置，整体设置界面如附图5所示；其中，字段类型包括字符串类型、整数类型、浮点数类型以及日期类型。字符串类型匹配的设置选型为随机字符串、固定字符串或带前缀的顺序字符串，字符串类型字段设置界面如附图6所示；整数类型匹配的设置选型为固定整数或随机整数，整数类型字段设置界面如附图7所示；浮点数类型配置的设置选型为固定小数或随机小数，浮点数类型字段设置界面如附图8所示；日期类型匹配的设置选型为随机日期或固定日期，日期类型字段设置界面如附图9所示，覆盖了常用类型及常用设置选项。设置表还包括设置预置的数据量以及设置预置表间关联关系。目前支持的类型及设置如下表所示：

假使需要为信息部预置100个用户，则表字段设置完成后，还需设置预置的数据量，如100，且关联的department表name值为“信息部”。

假使1中所选user表，其表结构如下：

假使user表的某一设置如下：

S3、生成数据预置sql：根据表设置及当前的数据库类型生成符合该数据库类型语法规范的数据预置sql，数据预置界面如附图11所示；具体步骤如下：

S301、搭建整体的sql框架，sql框架包含sql起始、变量、循环次数、核心insert语句、表关联语句、变量递增语句以及结束语句；

S302、遍历表字段设置，将描述语言转为sql语句；

S303、设置生成的sql与框架进行组装；

S304、将所有sql按照语法次序拼接成最终sql，设置完成并生成sql的界面如附图10所示。

关键代码如下：

S4、执行sql：将步骤S3生成的数据预置sql，在当前已连接的数据库中执行并打印日志；同时判断执行是否正确：

①、若执行正确，则记录当前sql的执行时间；

②、若执行异常，则打印异常详细信息；

S5、配置保存与读取：在步骤S2-S4中的任意阶段均可保存当前设置情况为配置文件或加载已有的配置文件，使得可跨数据库类型生成sql及表结构发生变动时可生成最新sql；配置文件中包括当前要设置的表、已设置的字段、循环次数、表间关联的所有生成sql相关的信息；其中，配置保存是将当前所有设置信息以描述语言的方式保存至文本文件，保存后的配置文件界面如附图12所示；当前表的所有设置内容都将以描述语言的形式保存为文本文件，该配置未包含任何sql相关语法，使得同一份配置文件在不同类型的数据库上，会解析生成不同语法的数据预置sql；其中，表所有设置内容包括各个字段的设置、循环次数设置以及表关联设置；配置读取是将文件中描述语言加载至对应的设置选项；读取选定的配置文件，解析并加载到设置界面，数据类型不同或表结构发生变化时，生成的sql均不受影响，为符合语法规范的最新sql。

上述user表保存配置后，会生成如下内容的配置文件：

#表名:user#

id-character varying(36)＝前缀:user,起始编号:1,编号长度:4

name-character varying(36)＝随机字符串:4

age-integer＝随机整数:20-65

departmentid-character varying(36)＝关联:department.id

workdate-date＝当前日期时间:DATE

循环次数:100

where条件:department.name＝'信息部'

参照本表:0。

实施例2：

如附图2所示，生成数据预置sql的装置，该装置包括表选择模块、表设置模块、sql生成模块、sql执行模块以及配置保存与读取模块，表设置模块发送数据到表设置模块，表设置模块发送数据到sql生成模块，sql生成模块发送数据到sql执行模块；其中，表选择模块用于配置数据库连接信息，配置完成后连接该数据库，利用数据库内置的系统表及系统函数，获取当前连接用户所有的表，根据需要选择一张表或多张表或同一张表多次选择；表设置模块用于根据数据库系统表及系统函数，获取步骤S2中选择的表对应的表结构，根据不同字段的类型分别匹配不同的设置选项，对需要预置数据的字段逐一进行设置；sql生成模块用于根据表设置及当前的数据库类型生成符合该数据库类型语法规范的数据预置sql；sql执行模块用于sql生成模块生成的数据预置sql，在当前已连接的数据库中执行并打印日志，同时判断执行是否正确；配置保存与读取模块用于保存及读取表设置模块、sql生成模块以及sql执行模块中的数据。配置保存与读取模块包括配置保存模块和配置读取模块；其中，配置保存模块用于保存表设置模块、sql生成模块以及sql执行模块中的数据；配置读取模块用于读取表设置模块、sql生成模块以及sql执行模块保存中的数据。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种生成数据预置sql的方法，其特征在于，该方法步骤如下：

S1、选择表：配置数据库连接信息，配置完成后连接该数据库，利用数据库内置的系统表及系统函数，获取当前连接用户所有的表，根据需要选择一张表或多张表或同一张表多次选择；

S2、设置表：根据数据库系统表及系统函数，获取步骤S2中选择的表对应的表结构，根据不同字段的类型分别匹配不同的设置选项，对需要预置数据的字段逐一进行设置；

S3、生成数据预置sql：根据表设置及当前的数据库类型生成符合该数据库类型语法规范的数据预置sql；

S4、执行sql：将步骤S3生成的数据预置sql，在当前已连接的数据库中执行并打印日志；同时判断执行是否正确：

①、若执行正确，则记录当前sql的执行时间；

②、若执行异常，则打印异常详细信息；

S5、配置保存与读取：在步骤S2-S4中的任意阶段均可保存当前设置情况为配置文件或加载已有的配置文件，使得可跨数据库类型生成sql及表结构发生变动时可生成最新sql；配置文件中包括当前要设置的表、已设置的字段、循环次数、表间关联的所有生成sql相关的信息。

2.根据权利要求1所述的生成数据预置sql的方法，其特征在于，所述步骤S1中数据库包括sqlserver、oracle、postgresql三种关系型数据库。

3.根据权利要求2所述的生成数据预置sql的方法，其特征在于，所述步骤S2中字段类型包括字符串类型、整数类型、浮点数类型以及日期类型。

4.根据权利要求3所述的生成数据预置sql的方法，其特征在于，所述字符串类型匹配的设置选型为随机字符串、固定字符串或带前缀的顺序字符串；

整数类型匹配的设置选型为固定整数或随机整数；

浮点数类型配置的设置选型为固定小数或随机小数；

日期类型匹配的设置选型为随机日期或固定日期。

5.根据权利要求1或2或3或4所述的生成数据预置sql的方法，其特征在于，所述步骤S2中设置表还包括设置预置的数据量以及设置预置表间关联关系。

6.根据权利要求1所述的生成数据预置sql的方法，其特征在于，所述步骤S3中生成数据预置sql具体步骤如下：

S301、搭建整体的sql框架，sql框架包含sql起始、变量、循环次数、核心insert语句、表关联语句、变量递增语句以及结束语句；

S302、遍历表字段设置，将描述语言转为sql语句；

S303、设置生成的sql与框架进行组装；

S304、将所有sql按照语法次序拼接成最终sql。

7.根据权利要求1所述的生成数据预置sql的方法，其特征在于，所述步骤S5中配置保存是将当前所有设置信息以描述语言的方式保存至文本文件；当前表的所有设置内容都将以描述语言的形式保存为文本文件，该配置未包含任何sql相关语法，使得同一份配置文件在不同类型的数据库上，会解析生成不同语法的数据预置sql；其中，表所有设置内容包括各个字段的设置、循环次数设置以及表关联设置。

8.根据权利要求1或7所述的生成数据预置sql的方法，其特征在于，所述步骤S5中配置读取是将文件中描述语言加载至对应的设置选项；读取选定的配置文件，解析并加载到设置界面，数据类型不同或表结构发生变化时，生成的sql均不受影响，为符合语法规范的最新sql。

9.一种生成数据预置sql的装置，其特征在于，该装置包括表选择模块、表设置模块、sql生成模块、sql执行模块以及配置保存与读取模块，表设置模块发送数据到表设置模块，表设置模块发送数据到sql生成模块，sql生成模块发送数据到sql执行模块；

其中，表选择模块用于配置数据库连接信息，配置完成后连接该数据库，利用数据库内置的系统表及系统函数，获取当前连接用户所有的表，根据需要选择一张表或多张表或同一张表多次选择；

表设置模块用于根据数据库系统表及系统函数，获取步骤S2中选择的表对应的表结构，根据不同字段的类型分别匹配不同的设置选项，对需要预置数据的字段逐一进行设置；

sql生成模块用于根据表设置及当前的数据库类型生成符合该数据库类型语法规范的数据预置sql；

sql执行模块用于sql生成模块生成的数据预置sql，在当前已连接的数据库中执行并打印日志，同时判断执行是否正确；

配置保存与读取模块用于保存及读取表设置模块、sql生成模块以及sql执行模块中的数据。

10.根据权利要求9所述的生成数据预置sql的装置，其特征在于，所述配置保存与读取模块包括配置保存模块和配置读取模块；

其中，配置保存模块用于保存表设置模块、sql生成模块以及sql执行模块中的数据；

配置读取模块用于读取表设置模块、sql生成模块以及sql执行模块保存中的数据。

Images