CN109445768B - 数据库脚本生成方法、装置、计算机设备及存储介质 - Google Patents
数据库脚本生成方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN109445768B CN109445768B CN201811138310.4A CN201811138310A CN109445768B CN 109445768 B CN109445768 B CN 109445768B CN 201811138310 A CN201811138310 A CN 201811138310A CN 109445768 B CN109445768 B CN 109445768B
- Authority
- CN
- China
- Prior art keywords
- field
- database script
- database
- current
- script
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/30—Creation or generation of source code
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了数据库脚本生成方法、装置、计算机设备及存储介质,方法包括:根据历史业务需求信息及与其对应的数据库脚本,构建数据集;根据数据库脚本包括的限定条件,构建数据集的限定条件库;接收数据计算所需求的字段需求信息,根据字段需求信息对应的字段在限定条件库中进行搜索,得到对应的当前限定条件候选集;根据字段需求信息、及在当前限定条件候选集中所选定的当前限定条件,对应生成当前数据库脚本,并从数据集中提取对应的字段,及与字段对应的数据。该方法实现了利用大数据分析,将历史的需求信息和脚本进行分析,得到使用频率高的字段和字段组合,根据使用频率高的限定条件构建限定条件库,便于快速根据限定条件库来生成脚本。
Description
技术领域
本申请涉及数据处理技术领域,尤其涉及一种数据库脚本生成方法、装置、计算机设备及存储介质。
背景技术
目前,企业在收集到海量的用户数据、业务数据等数据时,在根据需求端(如业务员或财务人员)提出的业务需求以生成报表时,一般都是数据库工程师在业务需求经过高权限的管理人员审批后通过对业务需求进行分析并对应编写数据库脚本,而且数据库脚本中关于限定条件的编写需要将用户可能选择的维度情况全部穷举出来,这就导致编写脚本的准确性受到数据库工程师的经验局限性影响,而且手工编写脚本的效率低下。
申请内容
本申请实施例提供了一种数据库脚本生成方法、装置、计算机设备及存储介质,旨在解决现有的技术方法中数据需求方提出的业务需求以提取数据并填充报表时,一般都是数据库工程师通过对业务需求进行分析并对应编写数据库脚本,数据库脚本中关于限定条件的编写需要将用户可能选择的维度情况全部穷举出来,导致编写脚本的准确性不高且效率低下问题。
第一方面,本申请实施例提供了一种数据库脚本生成方法,其包括:
根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据;
根据所述数据库脚本包括的限定条件,构建数据集的限定条件库;
接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集;
根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本;
根据所述当前数据库脚本从所述数据集中提取对应的字段,及与所述字段对应的数据。
第二方面,本申请实施例提供了一种数据库脚本生成装置,其包括:
数据集构建单元,用于根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据;
限定条件库构建单元,用于根据所述数据库脚本包括的限定条件,构建数据集的限定条件库;
候选集获取单元,用于接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集;
脚本生成单元,用于根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本;
数据提取单元,用于根据所述当前数据库脚本从所述数据集中提取对应的字段,及与所述字段对应的数据。
第三方面,本申请实施例又提供了一种计算机设备,其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面所述的数据库脚本生成方法。
第四方面,本申请实施例还提供了一种存储介质,其中所述存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行上述第一方面所述的数据库脚本生成方法。
本申请实施例提供了一种数据库脚本生成方法、装置、计算机设备及存储介质。该方法通过根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;根据所述数据库脚本包括的限定条件,构建数据集的限定条件库;接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集;根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本;根据所述当前数据库脚本从所述数据集中提取对应的字段,及与所述字段对应的数据。该方法实现了利用大数据分析,将历史的需求信息和数据库脚本进行分析,得到使用频率高的字段和字段组合构建数据集,并根据使用频率高的限定条件构建限定条件库,便于快速根据限定条件库来生成当前数据库脚本。
附图说明
为了更清楚地说明本申请实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的数据库脚本生成方法的流程示意图;
图2为本申请实施例提供的数据库脚本生成方法的子流程示意图;
图3为本申请实施例提供的数据库脚本生成方法的另一子流程示意图;
图4为本申请实施例提供的数据库脚本生成装置的示意性框图;
图5为本申请实施例提供的数据库脚本生成装置的子单元示意性框图;
图6为本申请实施例提供的数据库脚本生成装置的另一子单元示意性框图;
图7为本申请实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
应当理解,当在本说明书和所附权利要求书中使用时,术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在,但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解,在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样,除非上下文清楚地指明其它情况,否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。
请参阅图1,图1是本申请实施例提供的数据库脚本生成方法的示意流程图。该数据库脚本生成方法应用于管理服务器中,该方法通过安装于管理服务器中的应用软件进行执行,多台用户终端通过与管理服务器建立网络连接以进行信息传输。其中,用户终端是具有接入互联网功能的终端设备,例如台式电脑、笔记本电脑、平板电脑或手机等;管理服务器是用于数据库脚本生成的企业终端。
如图1所示,该方法包括步骤S110~S150。
S110、根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据。
在本实施例中,历史业务需求信息及其对应的数据库脚本的积累过程如下:即管理服务器在获取了业务数据需求端发出的历史业务需求信息后,管理服务器通知数据库管理人员在解读和分析了历史业务需求信息后,提炼出历史业务需求信息所对应需要获取的字段,并在这些字段的获取请求得到更高权限人员的审批放行后,再根据历史业务需求信息所对应需要获取的字段对应编写数据库脚本,从而在管理服务器中所存储的海量数据中提取所需数据,并由历史业务需求信息所对应需要获取的字段及所提取的数据对应组成报表,最后将报表反馈至业务数据需求端。
可见,历史业务需求信息,及与历史业务需求信息对应的数据库脚本可作为数据分析统计的样本,从而构建数据集。即根据历史业务需求信息和对应的数据库脚本,就能获知需求端对哪些字段的需求量比较大,也能知道需求端对由哪些字段组成的表的需求量较大。
在一实施例中,如图2所示,步骤S110包括:
S111、获取历史业务需求信息,及与所述历史业务需求信息对应的数据库脚本;
S112、根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各单一字段,及各单一字段的频率;
S113、根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各组合字段,及各组合字段的频率;
S114、根据所述数据库脚本中各单一字段、各单一字段的频率、各组合字段、及各组合字段的频率进行归集,对应建立数据集。
在本实施例中,从管理服务器中获取了历史业务需求信息,及与历史业务需求信息对应的数据库脚本后,可统计数据库脚本中出现的单一字段,及与每一单一字段分别对应的频率;还可统计数据库脚本中出现的组合字段,及与每一组合字段分别对应的频率。
例如数据库脚本中存在select字段名A from数据表这一查询语句,可以将该字段名A被查询的频率加一;例如数据库脚本中存在select字段名A,字段名B,字段名C from数据表这一查询语句,可以将该组合字段A、B、C被查询的频率加一,同时将该字段名A被查询的频率加一,该字段名B被查询的频率加一,该字段名C被查询的频率加一;统计组合字段的频率是为了设置业务场景信息或机构来源信息与目标字段的对应关系,也就是某一业务场景或机构来源所需查询字段就是字段名A,字段名B,字段名C,而且该组合字段A、B、C被查询的频率也较高,故在管理服务器预先配置好该业务场景信息或机构来源信息与目标字段A、B、C的对应关系,能便于后续根据业务场景或机构来源来快速定制生成报表。
S120、根据所述数据库脚本包括的限定条件,构建数据集的限定条件库。
在本实施例中,由于数据库脚本中除了包括所需求的字段,有部分数据表脚本还包括针对字段查询的限定条件,这样通过统计与各字段或各字段组合对应的限定条件、及各限定条件的频率,也能与构建数据集类似,构建一个数据集的限定条件库,以便于后续快速获取限定条件以生成数据库脚本。
在一实施例中,步骤S120包括:
根据所述数据库脚本,统计获取所述数据库脚本中与各字段或各字段组合对应的限定条件、及各限定条件的频率,并归集得到数据集的限定条件库。
例如数据库脚本中存在select字段名A,字段名B,字段名C from数据表where限定条件1限定条件2这一查询语句(例如限定条件1为字段D=X,限定条件2为字段E=Y),可以将该组合字段A、B、C被查询的频率加一,同时将该字段名A被查询的频率加一,该字段名B被查询的频率加一,该字段名C被查询的频率加一,还可以将限定条件1的频率加一,限定条件2的频率加一;统计限定条件的频率是为了设置业务场景信息与目标字段的对应关系,以及这一限定条件的出现频率,也就是某一业务场景所需查询字段就是字段名A,字段名B,字段名C,而且该组合字段A、B、C在限定条件1和限定条件2限制下被查询的频率也较高,故在服务器端预先配置好该业务场景信息与目标字段A、B、C的对应关系,能便于后续根据限定来快速定制生成报表。
S130、接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集。
在本实施例中,当用户所对应的需求端向管理服务器发出字段需求信息时,其可以是纯文字的描述性需求信息(例如A机构需要整理一类业绩报表,所需要的信息有保单号、保费、保单起始日期、保单终止日期),也可以是填充于Excel表格内的需求信息(例如在Excel表格内的多列中,每一列都填写一字段,这些字段就是需要从数据集中所提取的字段),即字段需求信息是用户对获取相关字段的数据所提出的一种需求。通过接收用户端发送的字段需求信息,管理服务器能准确的获知用户所需数据的要求。
在一实施例中,如图3所示,步骤S130包括:
S131、解析获取所述字段需求信息中包括的需求字段;
S132、若所述限定条件库中存在所述需求字段,从所述限定条件库中获取所述需求字段对应的当前限定条件;
S133、若所述当前限定条件的个数大于1,根据每一限定条件对应的频率进行降序排序,得到由降序排序后的当前限定条件组成的当前限定条件候选集。
在本实施例中,管理服务器根据字段需求信息可以解析出其所包括需求字段,此时先在限定条件库中搜索是否存在所述需求字段,若所述限定条件库中存在所述需求字段,从所述限定条件库中获取所述需求字段对应的当前限定条件。此时由于与所述需求字段对应的当前限定条件的个数可能为2个及以上,此时为了更准确对用户提供较常见的限定条件,可以将这2个及以上的当前限定条件根据每一限定条件对应的频率进行降序排序,得到由降序排序后的当前限定条件组成的当前限定条件候选集。这样,以限定条件对应的频率作为推荐过程所考量的指标,更具参考性。
S140、根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本。
在本实施例中,若根据所述当前限定条件候选集选中了所需要的限定条件,此时可直接根据所述字段需求信息对应的需求字段、以及限定条件,直接填充至脚本模板,即可快速生成查询脚本以从数据集对应的数据库中获取所需数据。由于用户端向服务器端获取业务数据一般是发出查询请求,故该脚本模板为select语句脚本模板,如该select语句脚本模板为select字段名from数据表where限定条件。
在一实施例中,步骤S140包括:
将所述字段需求信息对应的需求字段填充至脚本模板中的字段名填充区域,将在所述当前限定条件候选集中所选定的当前限定条件分别填充至脚本模板中的限定条件填充区域,得到与所选定的当前限定条件一一对应的当前数据库脚本;其中,所述当前数据库脚本的个数与在所述当前限定条件候选集中所选定的当前限定条件的个数相同。
例如在某一选定的业务场景下,用户在字段需求信息中输入所需字段名,就可以自动在数据集的限定条件库中查询这一字段名组合常用的限定条件组合,以供用户进一步选择哪一具体的限定条件。如当用户的字段需求信息中包括字段A和字段B,在数据集的限定条件库中根据字段A和字段B的组合可知,常见的限定条件有3种情况,分别是限定条件1&限定条件2,限定条件3,限定条件4&限定条件5&限定条件6,这三种限定条件所对应的SQL语句,此时将这三种限定条件组合以列表的形式展示给用户,以供用户具体选择,则无需用户通过穷举的方式来编辑限定条件。
限定条件1&限定条件,2、限定条件3,限定条件4&限定条件5&限定条件6是直接对应解析成SQL语句中的限定条件并对应封装,一旦用户在字段需求信息中输入所需字段名,上述封装的限定条件是先以列表形式展示给用户选择,用户选择其中一个限定条件时则直接将该限定条件填充的用于查询的SQL语句的限定条件部分。
S150、根据所述当前数据库脚本从所述数据集中提取对应的字段,及与所述字段对应的数据。
即根据字段需求信息在数据集中提取了对应的字段后,即可获取需生成的目标报表包括哪些列,也即每一列对应上述提取的一个字段。此时生成了空的目标报表后,再将通过所述当前数据库脚本从所述数据集中提取的与每一字段对应的数据对应填充至该列即可。
本方法通过将历史的需求信息和数据库脚本进行分析,得到使用频率高的字段和字段组合构建数据集,并根据使用频率高的限定条件构建限定条件库,便于快速根据限定条件库来生成当前数据库脚本。
本申请实施例还提供一种数据库脚本生成装置,该数据库脚本生成装置用于执行前述数据库脚本生成方法的任一实施例。具体地,请参阅图4,图4是本申请实施例提供的数据库脚本生成装置的示意性框图。数据库脚本生成装置100可以配置于管理服务器中。
如图4所示,数据库脚本生成装置100包括数据集构建单元110、限定条件库构建单元120、候选集获取单元130、脚本生成单元140、数据提取单元150。
数据集构建单元110,用于根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据。
在本实施例中,历史业务需求信息及其对应的数据库脚本的积累过程如下:即管理服务器在获取了业务数据需求端发出的历史业务需求信息后,管理服务器通知数据库管理人员在解读和分析了历史业务需求信息后,提炼出历史业务需求信息所对应需要获取的字段,并在这些字段的获取请求得到更高权限人员的审批放行后,再根据历史业务需求信息所对应需要获取的字段对应编写数据库脚本,从而在管理服务器中所存储的海量数据中提取所需数据,并由历史业务需求信息所对应需要获取的字段及所提取的数据对应组成报表,最后将报表反馈至业务数据需求端。
可见,历史业务需求信息,及与历史业务需求信息对应的数据库脚本可作为数据分析统计的样本,从而构建数据集。即根据历史业务需求信息和对应的数据库脚本,就能获知需求端对哪些字段的需求量比较大,也能知道需求端对由哪些字段组成的表的需求量较大。
在一实施例中,如图5所示,数据集构建单元110包括:
历史数据解析单元111,用于获取历史业务需求信息,及与所述历史业务需求信息对应的数据库脚本;
第一统计单元112,用于根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各单一字段,及各单一字段的频率;
第二统计单元113,用于根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各组合字段,及各组合字段的频率;
归集单元114,用于根据所述数据库脚本中各单一字段、各单一字段的频率、各组合字段、及各组合字段的频率进行归集,对应建立数据集。
在本实施例中,从管理服务器中获取了历史业务需求信息,及与历史业务需求信息对应的数据库脚本后,可统计数据库脚本中出现的单一字段,及与每一单一字段分别对应的频率;还可统计数据库脚本中出现的组合字段,及与每一组合字段分别对应的频率。
例如数据库脚本中存在select字段名A from数据表这一查询语句,可以将该字段名A被查询的频率加一;例如数据库脚本中存在select字段名A,字段名B,字段名C from数据表这一查询语句,可以将该组合字段A、B、C被查询的频率加一,同时将该字段名A被查询的频率加一,该字段名B被查询的频率加一,该字段名C被查询的频率加一;统计组合字段的频率是为了设置业务场景信息或机构来源信息与目标字段的对应关系,也就是某一业务场景或机构来源所需查询字段就是字段名A,字段名B,字段名C,而且该组合字段A、B、C被查询的频率也较高,故在管理服务器预先配置好该业务场景信息或机构来源信息与目标字段A、B、C的对应关系,能便于后续根据业务场景或机构来源来快速定制生成报表。
限定条件库构建单元120,用于根据所述数据库脚本包括的限定条件,构建数据集的限定条件库。
在本实施例中,由于数据库脚本中除了包括所需求的字段,有部分数据表脚本还包括针对字段查询的限定条件,这样通过统计与各字段或各字段组合对应的限定条件、及各限定条件的频率,也能与构建数据集类似,构建一个数据集的限定条件库,以便于后续快速获取限定条件以生成数据库脚本。
在一实施例中,限定条件库构建单元120具体用于:
根据所述数据库脚本,统计获取所述数据库脚本中与各字段或各字段组合对应的限定条件、及各限定条件的频率,并归集得到数据集的限定条件库。
例如数据库脚本中存在select字段名A,字段名B,字段名C from数据表where限定条件1限定条件2这一查询语句(例如限定条件1为字段D=X,限定条件2为字段E=Y),可以将该组合字段A、B、C被查询的频率加一,同时将该字段名A被查询的频率加一,该字段名B被查询的频率加一,该字段名C被查询的频率加一,还可以将限定条件1的频率加一,限定条件2的频率加一;统计限定条件的频率是为了设置业务场景信息与目标字段的对应关系,以及这一限定条件的出现频率,也就是某一业务场景所需查询字段就是字段名A,字段名B,字段名C,而且该组合字段A、B、C在限定条件1和限定条件2限制下被查询的频率也较高,故在服务器端预先配置好该业务场景信息与目标字段A、B、C的对应关系,能便于后续根据限定来快速定制生成报表。
候选集获取单元130,用于接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集。
在本实施例中,当用户所对应的需求端向管理服务器发出字段需求信息时,其可以是纯文字的描述性需求信息(例如A机构需要整理一类业绩报表,所需要的信息有保单号、保费、保单起始日期、保单终止日期),也可以是填充于Excel表格内的需求信息(例如在Excel表格内的多列中,每一列都填写一字段,这些字段就是需要从数据集中所提取的字段),即字段需求信息是用户对获取相关字段的数据所提出的一种需求。通过接收用户端发送的字段需求信息,管理服务器能准确的获知用户所需数据的要求。
在一实施例中,如图6所示,候选集获取单元130包括:
需求字段解析获取单元131,用于解析获取所述字段需求信息中包括的需求字段;
限定条件筛选单元132,用于若所述限定条件库中存在所述需求字段,从所述限定条件库中获取所述需求字段对应的当前限定条件;
限定条件排序单元133,用于若所述当前限定条件的个数大于1,根据每一限定条件对应的频率进行降序排序,得到由降序排序后的当前限定条件组成的当前限定条件候选集。
在本实施例中,管理服务器根据字段需求信息可以解析出其所包括需求字段,此时先在限定条件库中搜索是否存在所述需求字段,若所述限定条件库中存在所述需求字段,从所述限定条件库中获取所述需求字段对应的当前限定条件。此时由于与所述需求字段对应的当前限定条件的个数可能为2个及以上,此时为了更准确对用户提供较常见的限定条件,可以将这2个及以上的当前限定条件根据每一限定条件对应的频率进行降序排序,得到由降序排序后的当前限定条件组成的当前限定条件候选集。这样,以限定条件对应的频率作为推荐过程所考量的指标,更具参考性。
脚本生成单元140,用于根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本。
在本实施例中,若根据所述当前限定条件候选集选中了所需要的限定条件,此时可直接根据所述字段需求信息对应的需求字段、以及限定条件,直接填充至脚本模板,即可快速生成查询脚本以从数据集对应的数据库中获取所需数据。由于用户端向服务器端获取业务数据一般是发出查询请求,故该脚本模板为select语句脚本模板,如该select语句脚本模板为select字段名from数据表where限定条件。
在一实施例中,脚本生成单元140具体用于:
将所述字段需求信息对应的需求字段填充至脚本模板中的字段名填充区域,将在所述当前限定条件候选集中所选定的当前限定条件分别填充至脚本模板中的限定条件填充区域,得到与所选定的当前限定条件一一对应的当前数据库脚本;其中,所述当前数据库脚本的个数与在所述当前限定条件候选集中所选定的当前限定条件的个数相同。
例如在某一选定的业务场景下,用户在字段需求信息中输入所需字段名,就可以自动在数据集的限定条件库中查询这一字段名组合常用的限定条件组合,以供用户进一步选择哪一具体的限定条件。如当用户的字段需求信息中包括字段A和字段B,在数据集的限定条件库中根据字段A和字段B的组合可知,常见的限定条件有3种情况,分别是限定条件1&限定条件2,限定条件3,限定条件4&限定条件5&限定条件6,这三种限定条件所对应的SQL语句,此时将这三种限定条件组合以列表的形式展示给用户,以供用户具体选择,则无需用户通过穷举的方式来编辑限定条件。
限定条件1&限定条件,2、限定条件3,限定条件4&限定条件5&限定条件6是直接对应解析成SQL语句中的限定条件并对应封装,一旦用户在字段需求信息中输入所需字段名,上述封装的限定条件是先以列表形式展示给用户选择,用户选择其中一个限定条件时则直接将该限定条件填充的用于查询的SQL语句的限定条件部分。
数据提取单元150,用于根据所述当前数据库脚本从所述数据集中提取对应的字段,及与所述字段对应的数据。
即根据字段需求信息在数据集中提取了对应的字段后,即可获取需生成的目标报表包括哪些列,也即每一列对应上述提取的一个字段。此时生成了空的目标报表后,再将通过所述当前数据库脚本从所述数据集中提取的与每一字段对应的数据对应填充至该列即可。
本装置通过将历史的需求信息和数据库脚本进行分析,得到使用频率高的字段和字段组合构建数据集,并根据使用频率高的限定条件构建限定条件库,便于快速根据限定条件库来生成当前数据库脚本。
上述数据库脚本生成装置可以实现为计算机程序的形式,该计算机程序可以在如图7所示的计算机设备上运行。
请参阅图7,图7是本申请实施例提供的计算机设备的示意性框图。
参阅图7,该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505,其中,存储器可以包括非易失性存储介质503和内存储器504。
该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032包括程序指令,该程序指令被执行时,可使得处理器502执行数据库脚本生成方法。
该处理器502用于提供计算和控制能力,支撑整个计算机设备500的运行。
该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境,该计算机程序5032被处理器502执行时,可使得处理器502执行数据库脚本生成方法。
该网络接口505用于进行网络通信,如为网络访问提供数据流量的传输等。本领域技术人员可以理解,图7中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备500的限定,具体的计算机设备500可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
其中,所述处理器502用于运行存储在存储器中的计算机程序5032,以实现如下功能:根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据;根据所述数据库脚本包括的限定条件,构建数据集的限定条件库;接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集;根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本;根据所述当前数据库脚本从所述数据集中提取对应的字段,及与所述字段对应的数据。
在一实施例中,处理器502在执行所述根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集的步骤时,执行如下操作:获取历史业务需求信息,及与所述历史业务需求信息对应的数据库脚本;根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各单一字段,及各单一字段的频率;根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各组合字段,及各组合字段的频率;根据所述数据库脚本中各单一字段、各单一字段的频率、各组合字段、及各组合字段的频率进行归集,对应建立数据集。
在一实施例中,处理器502在执行所述根据所述数据库脚本包括的限定条件,构建数据集的限定条件库的步骤时,执行如下操作:根据所述数据库脚本,统计获取所述数据库脚本中与各字段或各字段组合对应的限定条件、及各限定条件的频率,并归集得到数据集的限定条件库。
在一实施例中,处理器502在执行所述根据所述字段需求信息对应的需求字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集的步骤时,执行如下操作:解析获取所述字段需求信息中包括的需求字段;若所述限定条件库中存在所述需求字段,从所述限定条件库中获取所述需求字段对应的当前限定条件;若所述当前限定条件的个数大于1,根据每一限定条件对应的频率进行降序排序,得到由降序排序后的当前限定条件组成的当前限定条件候选集。
在一实施例中,处理器502在执行所述根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本的步骤时,执行如下操作:将所述字段需求信息对应的需求字段填充至脚本模板中的字段名填充区域,将在所述当前限定条件候选集中所选定的当前限定条件分别填充至脚本模板中的限定条件填充区域,得到与所选定的当前限定条件一一对应的当前数据库脚本;其中,所述当前数据库脚本的个数与在所述当前限定条件候选集中所选定的当前限定条件的个数相同。
本领域技术人员可以理解,图7中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定,在其他实施例中,计算机设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。例如,在一些实施例中,计算机设备可以仅包括存储器及处理器,在这样的实施例中,存储器及处理器的结构及功能与图7所示实施例一致,在此不再赘述。
应当理解,在本申请实施例中,处理器502可以是中央处理单元(CentralProcessing Unit,CPU),该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable GateArray,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中,通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本申请的另一实施例中提供存储介质。该存储介质可以为非易失性的计算机可读存储介质。该存储介质存储有计算机程序,其中计算机程序被处理器执行时实现以下步骤:根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据;根据所述数据库脚本包括的限定条件,构建数据集的限定条件库;接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集;根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本;根据所述当前数据库脚本从所述数据集中提取对应的字段,及与所述字段对应的数据。
在一实施例中,所述根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集的步骤,包括:获取历史业务需求信息,及与所述历史业务需求信息对应的数据库脚本;根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各单一字段,及各单一字段的频率;根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各组合字段,及各组合字段的频率;根据所述数据库脚本中各单一字段、各单一字段的频率、各组合字段、及各组合字段的频率进行归集,对应建立数据集。
在一实施例中,所述根据所述数据库脚本包括的限定条件,构建数据集的限定条件库的步骤,包括:根据所述数据库脚本,统计获取所述数据库脚本中与各字段或各字段组合对应的限定条件、及各限定条件的频率,并归集得到数据集的限定条件库。
在一实施例中,所述根据所述字段需求信息对应的需求字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集的步骤,包括:解析获取所述字段需求信息中包括的需求字段;若所述限定条件库中存在所述需求字段,从所述限定条件库中获取所述需求字段对应的当前限定条件;若所述当前限定条件的个数大于1,根据每一限定条件对应的频率进行降序排序,得到由降序排序后的当前限定条件组成的当前限定条件候选集。
在一实施例中,所述根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本的步骤,包括:将所述字段需求信息对应的需求字段填充至脚本模板中的字段名填充区域,将在所述当前限定条件候选集中所选定的当前限定条件分别填充至脚本模板中的限定条件填充区域,得到与所选定的当前限定条件一一对应的当前数据库脚本;其中,所述当前数据库脚本的个数与在所述当前限定条件候选集中所选定的当前限定条件的个数相同。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的设备、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的几个实施例中,应该理解到,所揭露的设备、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为逻辑功能划分,实际实现时可以有另外的划分方式,也可以将具有相同功能的单元集合成一个单元,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本申请实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分,或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。
Claims (8)
1.一种数据库脚本生成方法,其特征在于,包括:
根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据;
根据所述数据库脚本包括的限定条件,构建数据集的限定条件库;
接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集;
根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本;
根据所述当前数据库脚本从所述数据集对应的数据库中获取所需数据;
所述根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集,包括:
获取历史业务需求信息,及与所述历史业务需求信息对应的数据库脚本;
根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各单一字段,及各单一字段的频率;
根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各组合字段,及各组合字段的频率;
根据所述数据库脚本中各单一字段、各单一字段的频率、各组合字段、及各组合字段的频率进行归集,对应建立数据集。
2.根据权利要求1所述的数据库脚本生成方法,其特征在于,所述根据所述数据库脚本包括的限定条件,构建数据集的限定条件库,包括:
根据所述数据库脚本,统计获取所述数据库脚本中与各字段或各字段组合对应的限定条件、及各限定条件的频率,并归集得到数据集的限定条件库。
3.根据权利要求1所述的数据库脚本生成方法,其特征在于,所述根据所述字段需求信息对应的需求字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集,包括:
解析获取所述字段需求信息中包括的需求字段;
若所述限定条件库中存在所述需求字段,从所述限定条件库中获取所述需求字段对应的当前限定条件;
若所述当前限定条件的个数大于1,根据每一限定条件对应的频率进行降序排序,得到由降序排序后的当前限定条件组成的当前限定条件候选集。
4.根据权利要求1所述的数据库脚本生成方法,其特征在于,所述根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本,包括:
将所述字段需求信息对应的需求字段填充至脚本模板中的字段名填充区域,将在所述当前限定条件候选集中所选定的当前限定条件分别填充至脚本模板中的限定条件填充区域,得到与所选定的当前限定条件一一对应的当前数据库脚本;其中,所述当前数据库脚本的个数与在所述当前限定条件候选集中所选定的当前限定条件的个数相同。
5.一种数据库脚本生成装置,其特征在于,包括:
数据集构建单元,用于根据历史业务需求信息及与所述历史业务需求信息对应的数据库脚本,构建数据集;其中,所述数据库脚本用于在目标数据库中提取相应字段的数据;
限定条件库构建单元,用于根据所述数据库脚本包括的限定条件,构建数据集的限定条件库;
候选集获取单元,用于接收数据计算所需求的字段需求信息,根据所述字段需求信息对应的字段在限定条件库中进行搜索,得到与所述字段需求信息对应的当前限定条件候选集;
脚本生成单元,用于根据所述字段需求信息、及在所述当前限定条件候选集中所选定的至少一个当前限定条件,对应生成当前数据库脚本;
数据提取单元,用于根据所述当前数据库脚本从所述数据集对应的数据库中获取所需数据;
所述数据集构建单元,包括:
历史数据解析单元,用于获取历史业务需求信息,及与所述历史业务需求信息对应的数据库脚本;
第一统计单元,用于根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各单一字段,及各单一字段的频率;
第二统计单元,用于根据所述数据库脚本,统计获取数据库脚本中所包括多个脚本中各组合字段,及各组合字段的频率;
归集单元,用于根据所述数据库脚本中各单一字段、各单一字段的频率、各组合字段、及各组合字段的频率进行归集,对应建立数据集。
6.根据权利要求5所述的数据库脚本生成装置,其特征在于,所述数据提取单元具体用于:
根据所述数据库脚本,统计获取所述数据库脚本中与各字段或各字段组合对应的限定条件、及各限定条件的频率,并归集得到数据集的限定条件库。
7.一种计算机设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4中任一项所述的数据库脚本生成方法。
8.一种存储介质,其特征在于,所述存储介质存储有计算机程序,所述计算机程序当被处理器执行时使所述处理器执行如权利要求1至4任一项所述的数据库脚本生成方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811138310.4A CN109445768B (zh) | 2018-09-28 | 2018-09-28 | 数据库脚本生成方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811138310.4A CN109445768B (zh) | 2018-09-28 | 2018-09-28 | 数据库脚本生成方法、装置、计算机设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109445768A CN109445768A (zh) | 2019-03-08 |
CN109445768B true CN109445768B (zh) | 2022-02-11 |
Family
ID=65545983
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811138310.4A Active CN109445768B (zh) | 2018-09-28 | 2018-09-28 | 数据库脚本生成方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109445768B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111339720B (zh) * | 2020-02-28 | 2023-08-29 | 深圳市赤狐软件技术有限公司 | 基于大数据采集的芯片信息生成方法、装置及计算机设备 |
CN111984670B (zh) * | 2020-07-27 | 2024-03-19 | 北京天健源达科技股份有限公司 | 一种生成显示视图注释信息脚本的方法 |
CN112256672B (zh) * | 2020-10-22 | 2023-05-30 | 中国联合网络通信集团有限公司 | 数据库变更审批方法及装置 |
CN112395343B (zh) * | 2020-11-18 | 2022-07-26 | 浪潮卓数大数据产业发展有限公司 | 一种基于dsg的字段变更数据采集抽取方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103135976A (zh) * | 2011-11-30 | 2013-06-05 | 阿里巴巴集团控股有限公司 | 代码自动生成方法及装置 |
WO2014131430A1 (de) * | 2013-02-26 | 2014-09-04 | Siemens Aktiengesellschaft | Verfahren zur modellbasierten softwareentwicklung von programmen mit datenbankzugriff |
CN104809254A (zh) * | 2015-05-19 | 2015-07-29 | 郑州悉知信息技术有限公司 | 一种数据查询方法及装置 |
CN107016018A (zh) * | 2015-10-23 | 2017-08-04 | 阿里巴巴集团控股有限公司 | 数据库索引创建方法及装置 |
CN107844519A (zh) * | 2017-10-09 | 2018-03-27 | 平安科技(深圳)有限公司 | 电子装置、数据库查询脚本生成方法及存储介质 |
CN107908631A (zh) * | 2017-07-25 | 2018-04-13 | 平安科技(深圳)有限公司 | 数据处理方法、装置、存储介质和计算机设备 |
CN107908657A (zh) * | 2017-10-17 | 2018-04-13 | 平安科技(深圳)有限公司 | 业务报表的查询方法、装置、计算机设备及存储介质 |
CN108241620A (zh) * | 2016-12-23 | 2018-07-03 | 北京国双科技有限公司 | 查询脚本的生成方法及装置 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7136868B2 (en) * | 2003-06-06 | 2006-11-14 | Microsoft Corporation | Database object script generation method and system |
US8452724B2 (en) * | 2008-06-10 | 2013-05-28 | Oracle International Corporation | Techniques for creating reports using cached data |
US9372671B2 (en) * | 2011-08-30 | 2016-06-21 | Sybase, Inc. | Modeling and code generation for SQL-based data transformations |
KR101368500B1 (ko) * | 2012-04-26 | 2014-02-28 | 주식회사 엘지씨엔에스 | 데이터베이스 히스토리 관리 방법 및 그를 위한 데이터베이스 히스토리 관리 시스템 |
-
2018
- 2018-09-28 CN CN201811138310.4A patent/CN109445768B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103135976A (zh) * | 2011-11-30 | 2013-06-05 | 阿里巴巴集团控股有限公司 | 代码自动生成方法及装置 |
WO2014131430A1 (de) * | 2013-02-26 | 2014-09-04 | Siemens Aktiengesellschaft | Verfahren zur modellbasierten softwareentwicklung von programmen mit datenbankzugriff |
CN104809254A (zh) * | 2015-05-19 | 2015-07-29 | 郑州悉知信息技术有限公司 | 一种数据查询方法及装置 |
CN107016018A (zh) * | 2015-10-23 | 2017-08-04 | 阿里巴巴集团控股有限公司 | 数据库索引创建方法及装置 |
CN108241620A (zh) * | 2016-12-23 | 2018-07-03 | 北京国双科技有限公司 | 查询脚本的生成方法及装置 |
CN107908631A (zh) * | 2017-07-25 | 2018-04-13 | 平安科技(深圳)有限公司 | 数据处理方法、装置、存储介质和计算机设备 |
CN107844519A (zh) * | 2017-10-09 | 2018-03-27 | 平安科技(深圳)有限公司 | 电子装置、数据库查询脚本生成方法及存储介质 |
CN107908657A (zh) * | 2017-10-17 | 2018-04-13 | 平安科技(深圳)有限公司 | 业务报表的查询方法、装置、计算机设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
企业信息化元数据管理方法研究;谢庆庆;《中国信息化》;20180430;第55-57页 * |
自动生成代码数据库查询语句;小贺学习笔记;《https://blog.csdn.net/qq_40680190/article/details/79963311》;20180416;第1-3页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109445768A (zh) | 2019-03-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109271411B (zh) | 报表生成方法、装置、计算机设备及存储介质 | |
CN109445768B (zh) | 数据库脚本生成方法、装置、计算机设备及存储介质 | |
US11379475B2 (en) | Analyzing tags associated with high-latency and error spans for instrumented software | |
US11526799B2 (en) | Identification and application of hyperparameters for machine learning | |
US10769228B2 (en) | Systems and methods for web analytics testing and web development | |
CN112800095B (zh) | 一种数据处理方法、装置、设备及存储介质 | |
EP4099170B1 (en) | Method and apparatus of auditing log, electronic device, and medium | |
US20190243753A1 (en) | Intermittent failure metrics in technological processes | |
US10592327B2 (en) | Apparatus, system, and method for analyzing logs | |
CN107729376B (zh) | 保险数据审核方法、装置、计算机设备及存储介质 | |
CN109933514B (zh) | 一种数据测试方法和装置 | |
CN112395333A (zh) | 用于排查数据异常的方法、装置、电子设备及存储介质 | |
CN110543426A (zh) | 一种软件性能风险检测方法及装置 | |
CN110941530A (zh) | 监控数据的获取方法、装置、计算机设备和存储介质 | |
CN109542890B (zh) | 数据修改方法、装置、计算机设备及存储介质 | |
CN115658731A (zh) | 一种数据查询方法、装置、设备和存储介质 | |
CN114860608A (zh) | 基于场景构建的系统自动化测试方法、装置、设备及介质 | |
CN114741392A (zh) | 数据查询方法、装置、电子设备及存储介质 | |
CN113448985A (zh) | 一种api接口生成方法、调用方法、装置及电子设备 | |
CN113138974A (zh) | 数据库合规检测的方法和装置 | |
CN111831534A (zh) | 一种对数据报表进行准确性验证的方法和装置 | |
CN110750563A (zh) | 多模型数据处理方法、系统、装置、电子设备及存储介质 | |
CN109828983A (zh) | Pg数据库处理方法、装置、电子设备及存储介质 | |
CN109871215B (zh) | 软件发布的方法和装置 | |
CN109933573B (zh) | 数据库业务更新方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |