CN112579635A - 一种sql语句的优化方法、装置、电子设备及存储介质 - Google Patents
一种sql语句的优化方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN112579635A CN112579635A CN201910944682.4A CN201910944682A CN112579635A CN 112579635 A CN112579635 A CN 112579635A CN 201910944682 A CN201910944682 A CN 201910944682A CN 112579635 A CN112579635 A CN 112579635A
- Authority
- CN
- China
- Prior art keywords
- field
- sql statement
- unique constraint
- unique
- fields
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000005457 optimization Methods 0.000 title claims abstract description 59
- 238000000034 method Methods 0.000 title claims abstract description 58
- 238000012217 deletion Methods 0.000 claims description 3
- 230000037430 deletion Effects 0.000 claims description 3
- 238000012216 screening Methods 0.000 claims description 3
- 238000001914 filtration Methods 0.000 description 6
- 230000002776 aggregation Effects 0.000 description 5
- 238000004220 aggregation Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000007405 data analysis Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006116 polymerization reaction Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2453—Query optimisation
- G06F16/24534—Query rewriting; Transformation
- G06F16/24549—Run-time optimisation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及一种SQL语句的优化方法、装置、电子设备及存储介质，所述方法包括以下步骤：SQL语句的优化方法，获取用于生成SQL语句的目标字段；确定包含有至少一个唯一约束字段的唯一约束字段集合，唯一约束字段为具有唯一性的字段值的字段；将唯一约束字段集合与目标字段进行匹配；根据匹配结果，判断SQL语句是否满足预设的优化条件；若SQL语句满足预设的优化条件，则执行对SQL语句的优化操作。本申请实施例通过识别用于对待查询内容进行分组的分组字段是否存在唯一性，如果存在唯一性则对SQL语句进行优化，以达到节约计算资源，提高查询性能和提升查询速度的目的。
Description
技术领域
本申请涉及计算机技术领域，尤其涉及一种SQL语句的优化方法、装置、电子设备及存储介质。
背景技术
在做数据分析的产品或是其他类似场景中，需要将使用者的查询需求转换为SQl语句到数据库中进行查询。相关技术利用SqlBuilder将使用者的查询需求信息分为分组字段、过滤字段和聚合指标，利用这些字段生成相应的SQl语句。
相关技术的生成SQl语句的方法，在不同的查询场景下，查询速度不同，部分情况下存在查询性能降低的问题。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本申请提供了一种SQL语句的优化方法、装置、电子设备及存储介质。
有鉴于此，第一方面，本申请实施例提供了一种SQL语句的优化方法，所述方法包括以下步骤：
获取用于生成所述SQL语句的目标字段；
确定包含有唯一约束字段的唯一约束字段集合，其中，所述唯一约束字段为具有唯一性的字段值的字段；
将所述唯一约束字段集合与所述目标字段进行匹配；
根据匹配结果，判断所述SQL语句是否满足预设的优化条件；
若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。
结合第一方面，在第一方面第一种可能的实施方式中，所述根据匹配结果，判断所述SQL语句是否满足预设的优化条件，包括：
判断所述唯一约束字段集合中是否存在与所述目标字段相匹配的唯一约束字段；
如果所述唯一约束字段集合中存在与所述目标字段相匹配的唯一约束字段，则确定所述SQL语句满足预设的优化条件。
结合第一方面，在第一方面第二种可能的实施方式中，在所述获取用于生成所述SQL语句的目标字段之前，所述方法还包括：
判断所述SQL语句中是否包括分组语句；
若所述SQL语句是包括分组语句，则获取用于生成所述SQL语句的目标字段。
结合第一方面，在第一方面第三种可能的实施方式中，所述执行对所述SQL语句的优化操作，包括：
确定与所述目标字段相匹配的唯一约束字段所在的分组语句；
对所述分组语句执行删除操作，以得到优化后的SQL语句。
结合第一方面，在第一方面第四种可能的实施方式中，所述确定包含有唯一约束字段的唯一约束字段集合，包括：
根据配置文件的配置信息和/或数据库，确定多个字段；其中，所述配置信息和/或数据库中包括：多个字段，与各个所述字段相对应的字段信息表，以及各个所述字段信息表之间的对应关系，所述字段信息表用于表示所述字段的信息；
从多个所述字段中筛选出具有唯一的关联关系的字段，得到多个唯一约束字段；
利用多个所述唯一约束字段，构建字段组合；
利用所述字段组合，构建所述唯一约束字段集合。
结合第一方面，在第一方面第五种可能的实施方式中，所述方法还包括：
若所述SQL语句不满足预设的优化条件，则保留所述目标字段生成的所述SQL语句。
结合第一方面，在第一方面第六种可能的实施方式中，所述方法还包括：
如果所述唯一约束字段集合中不存在与所述目标字段相匹配的唯一约束字段，则确定所述SQL语句不满足预设的优化条件。
第二方面，本申请实施例提供了一种SQL语句的优化装置，所述装置包括：
获取单元，用于获取用于生成所述SQL语句的目标字段；
确定单元，用于确定包含有唯一约束字段的唯一约束字段集合，所述唯一约束字段为具有唯一性的字段值的字段；
匹配单元，用于将所述唯一约束字段集合与所述目标字段进行匹配；
判断单元，用于根据匹配结果，判断所述SQL语句是否满足预设的优化条件；以及
执行单元，用于若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。
第三方面，本申请实施例提供了一种电子设备，所述电子设备包括：至少一个处理器、存储器、至少一个网络接口和用户接口；
所述至少一个处理器、存储器、至少一个网络接口和用户接口通过总线系统耦合在一起；
所述处理器通过调用所述存储器存储的程序或指令，用于执行如第一方面所述的SQL语句的优化方法的步骤。
第四方面，本申请实施例提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有SQL语句的优化程序，所述SQL语句的优化程序被处理器执行时实现如第一方面所述的SQL语句的优化方法的步骤。
本申请实施例提供的上述技术方案与现有技术相比具有如下优点：
本申请实施例提供的SQL语句的优化方法，获取用于生成SQL语句的目标字段；确定包含有至少一个唯一约束字段的唯一约束字段集合，所述唯一约束字段为具有唯一性的字段值的字段；将所述唯一约束字段集合与所述目标字段进行匹配；根据匹配结果，判断所述SQL语句是否满足预设的优化条件；若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。本申请实施例通过识别用于生成SQL语句的目标字段是否包含有唯一约束字段，如果包含则对SQL语句进行优化，以达到节约计算资源，提高查询性能和提升查询速度的目的。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种SQL语句的优化方法的流程示意图；
图2为本申请实施例提供的另一种SQL语句的优化方法的流程示意图；
图3为本申请实施例提供的一种SQL语句的优化装置的结构示意图；
图4为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请的一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
现在将参考附图描述实现本发明各个实施例的服务器。在后续的描述中，使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明，其本身并没有特定的意义。因此，“模块”与“部件”可以混合地使用。
在数据分析或是其他类似场景中，需要将用户的查询需求转换为SQL语句到数据库中进行查询。举例来说，假设数据库中有两张表：
一张是文章表(Article)，文章表(Article)包含两个列ArticleId和ChannelType，ArticleId为唯一标识一篇文章的Id，ChannelType表示这篇文章的类型，文章的类型包括新闻、微博和论坛帖子；
另一张是句子表(Sentence)，句子表(Sentence)包括三个列ArticleId、SentenceId、Entity，其中ArticleId标识该句子所在的文章，SentenceId标识该句子在文章的第几句，而Entity标识这个句子里提到的内容。
例如，用户的查询需求是：列出来自微博的文章的每个句子，以及该句子涉及的Entity。则利用SqlBuilder将用户的查询需求分为以下三点：
1.分组字段：SentenceId(标识该句子是在文章中的第几句),Entity(代表这个句子里提到了哪些内容)；
2.过滤字段：ChannelType＝‘微博’；
3.聚合指标：无
根据现有的SqlBuilder的实现过程，SqlBuilder有一个配置文件记录了所有会用到的信息表，以及会用到的每个字段分别位于哪张信息表里，还记录了信息表与信息表之间用哪个(些)字段进行关联。根据配置文件的配置信息：
1.SqlBuilder先检查分组字段、聚合指标字段涉及哪几张信息表，发现涉及Sentence表；
2.检查过滤字段，发现过滤字段位于Article表中；
3.由步骤1和2的结论，这个查询涉及Article和Sentence两张表，根据配置信息可查得这两张表使用ArticleId字段进行关联；
4.将涉及分组字段和聚合指标字段的表生成WITH子句(如果存在多张这样的表，则生成多个WITH子句)，该子句包含要查询的列、过滤条件和分组。需要说明的是，如果后续要和其他表进行关联，则关联列也要放在GROUPBY里面。
5.将生成的WITH子句和剩余的仅涉及过滤条件的表进行JOIN操作，生成最终的SQL语句。
上述生成的SQL语句虽然能够满足用户的查询需求，但却不是最优的语句，由于一篇文章最多只会有一个第一句，最多只会有一个第二句，以此类推，因此ArticleId(唯一标识一篇文章的Id)和SentenceId(标识该句子是在文章中的第几句)这两个字段的组合是唯一的，则上面的GROUP BY语句由于涉及了这两个字段，最终这两个字段的查询结果为相同的数据，因此GROUP BY运算是多余的运算，不仅浪费计算力，还使得查询的速度变慢，导致查询性能降低。
为此，本申请实施例提供了一种SQL语句的优化方法，如图1所示，该方法可以包括以下步骤：
S101、获取用于生成所述SQL(Structured Query Language，结构化查询语言)语句的目标字段。
可选的，在步骤S101、获取用于生成所述SQL语句的目标字段之前，该方法还包括：
判断所述SQL语句中是否包括分组语句；
若所述SQL语句包括分组语句，则获取用于生成所述SQL语句的目标字段。
本申请实施例，在对SQL语句进行优化前，先确定下该SQL语句中是否存在GROUPBY运算，即分组运算，可选的，根据SQL语句中是否包括分组语句来判断SQL语句中是否存在GROUP BY运算；如果SQL语句中包括分组语句，则说明该SQL语句存在GROUP BY运算，即分组运算；如果SQL语句中不包括分组语句，则说明该SQL语句不存在GROUP BY运算。
在SQL语句存在GROUP BY运算，需要判断下这个GROUP BY运算是否是多余的运算，可选的，获取用于生成所述SQL的目标字段，该目标字段可以是用于对待查询内容进行分组的分组字段，通过分组字段是否具有唯一性，来判断GROUP BY运算是否是多余的运算；当分组字段具有唯一性时，则判定GROUP BY运算是多余的运算，需要对SQL语句进行优化；当分组字段不具有唯一性时，则判定GROUP BY运算不是多余的运算，不需要对SQL语句进行优化，也就是说，保留生成的SQL语句。后面将对分组字段是否具有唯一性进行详细说明，在此不再赘述。
S102、确定包含有唯一约束字段的唯一约束字段集合，其中，所述唯一约束字段为具有唯一性的字段值的字段。
在本申请实施例中，确定包含有唯一约束字段的唯一约束字段集合，包括：
根据配置文件的配置信息和/或数据库，确定多个字段；其中，所述配置信息和/或数据库中包括：多个字段，与各个所述字段相对应的字段信息表，以及各个所述字段信息表之间的对应关系，所述字段信息表用于表示所述字段的信息；
从多个所述字段中筛选出具有唯一的关联关系的字段，得到多个唯一约束字段；
利用多个所述唯一约束字段，构建字段组合；
利用所述字段组合，构建所述唯一约束字段集合。
在本申请实施例中，由于从数据库读取唯一约束字段可能不适用于一些情况，因为从数据插入性能考虑，很多情况下数据库会不设置唯一约束字段，为了解决这个问题，本申请实施例还可以通过从配置文件读取字段的方法来作为获取唯一约束字段的补充实现方式，以达到更好的SQL语句的优化效果。
可选的，上述读取配置文件的配置信息，程序的开发者可以任意制定格式，只要在配置文件或其他存储方式中能够体现出查询可能涉及的每张信息表分别都有哪些列组合(即字段)具备唯一性即可，在此不再赘述。
上述从数据库中获取唯一约束字段的方法，在不同的数据库引擎中实现方式也不同，下面我们以Sql Server为例进行说明，要获取某张信息表的唯一约束字段，可以通过系统表sys.indexes、sys.index columns，以及sys.columns进行联合查询来得到。
查询结果如表一所示：
表一、唯一约束字段的查询结果
其中，表一中的column_name表示信息表中涉及的列的名字，每一个列可以包括多个字段，constraint_name相同的则应放到一个元素中，因此根据上述例子的查询结果可以得到的查询结果为：唯一约束字段[Id]；以及，字段组合[RuleId,ArticleId]。
S103、将所述唯一约束字段集合与所述目标字段进行匹配。
S104、根据匹配结果，判断所述SQL语句是否满足预设的优化条件，若所述SQL语句满足预设的优化条件，执行步骤S105；若所述SQL语句不满足预设的优化条件，执行步骤S106。
S105、执行对所述SQL语句的优化操作。
在本申请实施例中，执行对所述SQL语句的优化操作，包括：
确定与所述目标字段相匹配的唯一约束字段所在的分组语句；
对所述分组语句执行删除操作，以得到优化后的SQL语句。
本申请实施例通过删除分组语句，即删除多余的GROUP BY运算的方式，来提升查询性能。
S106、保留所述目标字段生成的所述SQL语句。
如图2所示，本申请实施例还提供了一种SQL语句的优化方法，包括以下步骤：
S201、获取用于生成所述SQL语句的目标字段。
S202、确定包含有唯一约束字段的唯一约束字段集合，其中，所述唯一约束字段为具有唯一性的字段值的字段。
S203、将所述唯一约束字段集合与所述目标字段进行匹配。
S204、根据匹配结果，判断所述唯一约束字段集合中是否存在与所述目标字段相匹配的唯一约束字段，如果所述唯一约束字段集合中存在与所述目标字段相匹配的唯一约束字段，执行步骤S205；如果所述唯一约束字段集合中不存在与所述目标字段相匹配的唯一约束字段，执行步骤S207。
S205、确定所述SQL语句满足预设的优化条件，执行步骤S206。
S206、执行对所述SQL语句的优化操作。
S207、确定所述SQL语句不满足预设的优化条件。
本申请实施例通过识别用于对待查询内容进行分组的分组字段是否存在唯一性，如果存在唯一性则对SQL语句进行优化，以达到节约计算资源，提高查询性能和提升查询速度的目的。
下面对本申请实施例进行举例说明：
根据用户的查询需求，将涉及分组字段和聚合指标字段的信息表的列表，记为TableList；TableList中每个信息表所需的分组列的集合(由用户指定的分组字段列、聚合指标字段的相关列、信息表进行连接所用的列合并而成)，记为GroupColumnList；TableList中每个信息表所涉及的过滤字段列表，记为FilterList。
循环为TableList中的每个信息表执行以下步骤：
步骤一、读取当前信息表的唯一列(或唯一列组合，即多个唯一列)的集合，记为UniqueConstraints(即上述的唯一约束字段集合)；
可选的，UniqueConstraints(即上述的唯一约束字段集合)中的每个元素都是一个列组合(即由具有唯一的关联关系的字段所构建的字段组合)，任意一个元素都不会出现这些列完全相同的条目，也就是说，这些元素具有唯一性。
例如，UniqueConstraints＝[
[SentenceId,ArticleId],
[RowId]
]
如果SentenceId和ArticleId这两列(即字段)同时出现，则具备唯一性；同样的，如果RowId这个列出现，则也具备唯一性。
构建UniqueConstraints(即上述的唯一约束字段集合)的方法有多种方式，可以通过读取配置文件和从数据库获取唯一约束信息，唯一约束信息即字段间的唯一的关联关系，根据唯一约束信息从多个字段中筛选出的字段具有唯一的关联关系，将这个字段分别进行组合，得到字段组合。
需要说明的是，通过多种方式得到的字段组合应当进行合并，以得到最终的UniqueConstraints(即唯一约束字段集合)。
比如，假设通过数据库获得的唯一约束列为[RowId]，通过配置文件读取到的唯一约束列为[ArticleId,SentenceId]，则二者合并之后的结果为：
UniqueConstraints＝[
[SentenceId,ArticleId],
[RowId]
]
需要说明的是，UniqueConstraints(即唯一约束字段集合)中的每个元素内部的列(即唯一约束字段)的顺序并不存在影响，例如，[ArticleId,SentenceId]等价于[SentenceId,ArticleId]。
步骤二、判断当前信息表的GroupColumnList是否包含UniqueConstraints中的任意一个元素，如果包含，则设置标志位NoGroupBy＝true；
例如，GroupColumnList＝[SentenceId,Entity,ColumnX,ColumnY]，而UniqueConstraints＝[[SentenceId,Entity],[RowId]]，则通过对比会发现UniqueConstraints(即唯一约束字段集合)的第一个元素[SentenceId,Entity]被完全包含在GroupColumnList中，因此设置标志位NoGroupBy＝true。
反之，如果UniqueConstraints(即唯一约束字段集合)的任意一个元素都没有被GroupColumnList所包含，那么NoGroupBy＝false
步骤三、生成WITH子句。
可选的，WITH子句包括以下4个部分：(1)子句的别称；(2)分组列的列表；(3)过滤条件；(4)分组列的列表，将这四个部分按照以下方式组合成WITH子句：
例如，
1.[子句的别称]AS(
2.SELECT[分组列1],[分组列2],…FROM[当前信息表的名字]
3.WHERE[过滤条件]
4.GROUP BY[分组列1],[分组列2],…
5.)
在组合的时候检查NoGroupBy标志位，如果值为true，则不使用上述第4行的GROUPBY语句，否则如果值为false，则仍保留GROUPBY语句。
本申请实施例还提供了一种SQL语句的优化装置，如图3所示，所述装置包括：
获取单元11，用于获取用于生成所述SQL语句的目标字段；
确定单元12，用于确定包含有唯一约束字段的唯一约束字段集合，所述唯一约束字段为具有唯一性的字段值的字段；
匹配单元13，用于将所述唯一约束字段集合与所述目标字段进行匹配；
判断单元14，用于根据匹配结果，判断所述SQL语句是否满足预设的优化条件；以及
执行单元15，用于若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。
本申请实施例还提供了一种电子设备的结构示意图，如图4所示，该电子设备400包括：至少一个处理器401、存储器402、至少一个网络接口404和其他用户接口403。移动终端400中的各个组件通过总线系统405耦合在一起。可理解，总线系统405用于实现这些组件之间的连接通信。总线系统405除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图4中将各种总线都标为总线系统405。
其中，用户接口403可以包括显示器、键盘或者点击设备(例如，鼠标，轨迹球(trackball)、触感板或者触摸屏等。
可以理解，本发明实施例中的存储器402可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-OnlyMemory，ROM)、可编程只读存储器(ProgrammableROM，PROM)、可擦除可编程只读存储器(ErasablePROM，EPROM)、电可擦除可编程只读存储器(ElectricallyEPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(RandomAccessMemory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(StaticRAM，SRAM)、动态随机存取存储器(DynamicRAM，DRAM)、同步动态随机存取存储器(SynchronousDRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(DoubleDataRateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(SynchlinkDRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambusRAM，DRRAM)。本文描述的存储器402旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中，存储器402存储了如下的元素，可执行单元或者数据结构，或者他们的子集，或者他们的扩展集：操作系统4021和应用程序4022。
其中，操作系统4021，包含各种系统程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序4022，包含各种应用程序，例如媒体播放器(MediaPlayer)、浏览器(Browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序4022中。
在本发明实施例中，通过调用存储器402存储的程序或指令，具体的，可以是应用程序4022中存储的程序或指令，处理器401用于执行各方法实施例所提供的方法步骤，例如包括：
获取用于生成所述SQL语句的目标字段；
确定包含有唯一约束字段的唯一约束字段集合，其中，所述唯一约束字段为具有唯一性的字段值的字段；
将所述唯一约束字段集合与所述目标字段进行匹配；
根据匹配结果，判断所述SQL语句是否满足预设的优化条件；
若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。
上述本发明实施例揭示的方法可以应用于处理器401中，或者由处理器401实现。处理器401可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器401中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器401可以是通用处理器、数字信号处理器(DigitalSignalProcessor，DSP)、专用集成电路(ApplicationSpecific IntegratedCircuit，ASIC)、现成可编程门阵列(FieldProgrammableGateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件单元组合执行完成。软件单元可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器402，处理器401读取存储器402中的信息，结合其硬件完成上述方法的步骤。
可以理解的是，本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(ApplicationSpecificIntegratedCircuits，ASIC)、数字信号处理器(DigitalSignalProcessing，DSP)、数字信号处理设备(DSPDevice，DSPD)、可编程逻辑设备(ProgrammableLogicDevice，PLD)、现场可编程门阵列(Field-ProgrammableGateArray，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现，可通过执行本文所述功能的单元来实现本文所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
本申请实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有SQL语句的优化程序，所述SQL语句的优化程序被处理器执行时实现如各方法实施例所示的SQL语句的优化方法的步骤，例如包括：
获取用于生成所述SQL语句的目标字段；
确定包含有唯一约束字段的唯一约束字段集合，其中，所述唯一约束字段为具有唯一性的字段值的字段；
将所述唯一约束字段集合与所述目标字段进行匹配；
根据匹配结果，判断所述SQL语句是否满足预设的优化条件；
若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。
为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本发明时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置或系统实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置及系统实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本发明的具体实施方式，使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种SQL语句的优化方法，其特征在于，所述方法包括以下步骤：
获取用于生成所述SQL语句的目标字段；
确定包含有唯一约束字段的唯一约束字段集合，其中，所述唯一约束字段为具有唯一性的字段值的字段；
将所述唯一约束字段集合与所述目标字段进行匹配；
根据匹配结果，判断所述SQL语句是否满足预设的优化条件；
若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。
2.根据权利要求1所述的方法，其特征在于，所述根据匹配结果，判断所述SQL语句是否满足预设的优化条件，包括：
判断所述唯一约束字段集合中是否存在与所述目标字段相匹配的唯一约束字段；
如果所述唯一约束字段集合中存在与所述目标字段相匹配的唯一约束字段，则确定所述SQL语句满足预设的优化条件。
3.根据权利要求1所述的方法，其特征在于，在所述获取用于生成所述SQL语句的目标字段之前，所述方法还包括：
判断所述SQL语句中是否包括分组语句；
若所述SQL语句包括分组语句，则获取用于生成所述SQL语句的目标字段。
4.根据权利要求3所述的方法，其特征在于，所述执行对所述SQL语句的优化操作，包括：
确定与所述目标字段相匹配的唯一约束字段所在的分组语句；
对所述分组语句执行删除操作，以得到优化后的SQL语句。
5.根据权利要求1所述的方法，其特征在于，所述确定包含有唯一约束字段的唯一约束字段集合，包括：
根据配置文件的配置信息和/或数据库，确定多个字段；其中，所述配置信息和/或数据库中包括：多个字段，与各个所述字段相对应的字段信息表，以及各个所述字段信息表之间的对应关系，所述字段信息表用于表示所述字段的信息；
从多个所述字段中筛选出具有唯一的关联关系的字段，得到多个唯一约束字段；
利用多个所述唯一约束字段，构建字段组合；
利用所述字段组合，构建所述唯一约束字段集合。
6.根据权利要求2所述的方法，其特征在于，所述方法还包括：
若所述SQL语句不满足预设的优化条件，则保留所述目标字段生成的所述SQL语句。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
如果所述唯一约束字段集合中不存在与所述目标字段相匹配的唯一约束字段，则确定所述SQL语句不满足预设的优化条件。
8.一种SQL语句的优化装置，其特征在于，所述装置包括：
获取单元，用于获取用于生成所述SQL语句的目标字段；
确定单元，用于确定包含有唯一约束字段的唯一约束字段集合，所述唯一约束字段为具有唯一性的字段值的字段；
匹配单元，用于将所述唯一约束字段集合与所述目标字段进行匹配；
判断单元，用于根据匹配结果，判断所述SQL语句是否满足预设的优化条件；以及
执行单元，用于若所述SQL语句满足预设的优化条件，则执行对所述SQL语句的优化操作。
9.一种电子设备，其特征在于，所述电子设备包括：至少一个处理器、存储器、至少一个网络接口和用户接口；
所述至少一个处理器、存储器、至少一个网络接口和用户接口通过总线系统耦合在一起；
所述处理器通过调用所述存储器存储的程序或指令，用于执行如权利要求1至7中任意一项所述的SQL语句的优化方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有SQL语句的优化程序，所述SQL语句的优化程序被处理器执行时实现如权利要求1至7中任一项所述的SQL语句的优化方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910944682.4A CN112579635A (zh) | 2019-09-30 | 2019-09-30 | 一种sql语句的优化方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910944682.4A CN112579635A (zh) | 2019-09-30 | 2019-09-30 | 一种sql语句的优化方法、装置、电子设备及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112579635A true CN112579635A (zh) | 2021-03-30 |
Family
ID=75116717
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910944682.4A Pending CN112579635A (zh) | 2019-09-30 | 2019-09-30 | 一种sql语句的优化方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112579635A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114116750A (zh) * | 2021-11-29 | 2022-03-01 | 深圳壹账通智能科技有限公司 | 数据更新方法、装置、终端设备及存储介质 |
| CN115309406A (zh) * | 2022-09-30 | 2022-11-08 | 北京大禹智芯科技有限公司 | P4控制分支语句的性能优化方法和装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150205951A1 (en) * | 2014-01-20 | 2015-07-23 | Prevoty, Inc. | Systems and methods for sql query constraint solving |
| CN106484815A (zh) * | 2016-09-26 | 2017-03-08 | 北京赛思信安技术股份有限公司 | 一种基于海量数据类sql检索场景的自动识别优化方法 |
| CN107229651A (zh) * | 2016-03-25 | 2017-10-03 | 阿里巴巴集团控股有限公司 | 唯一性约束异常的确定方法、异常处理方法及装置 |
| CN108304505A (zh) * | 2018-01-18 | 2018-07-20 | 上海达梦数据库有限公司 | 一种sql语句的处理方法、装置、服务器及存储介质 |
| CN108628975A (zh) * | 2018-04-25 | 2018-10-09 | 上海达梦数据库有限公司 | 一种数据库sql语句优化方法及装置 |
-
2019
- 2019-09-30 CN CN201910944682.4A patent/CN112579635A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20150205951A1 (en) * | 2014-01-20 | 2015-07-23 | Prevoty, Inc. | Systems and methods for sql query constraint solving |
| CN107229651A (zh) * | 2016-03-25 | 2017-10-03 | 阿里巴巴集团控股有限公司 | 唯一性约束异常的确定方法、异常处理方法及装置 |
| CN106484815A (zh) * | 2016-09-26 | 2017-03-08 | 北京赛思信安技术股份有限公司 | 一种基于海量数据类sql检索场景的自动识别优化方法 |
| CN108304505A (zh) * | 2018-01-18 | 2018-07-20 | 上海达梦数据库有限公司 | 一种sql语句的处理方法、装置、服务器及存储介质 |
| CN108628975A (zh) * | 2018-04-25 | 2018-10-09 | 上海达梦数据库有限公司 | 一种数据库sql语句优化方法及装置 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114116750A (zh) * | 2021-11-29 | 2022-03-01 | 深圳壹账通智能科技有限公司 | 数据更新方法、装置、终端设备及存储介质 |
| CN115309406A (zh) * | 2022-09-30 | 2022-11-08 | 北京大禹智芯科技有限公司 | P4控制分支语句的性能优化方法和装置 |
| CN115309406B (zh) * | 2022-09-30 | 2022-12-20 | 北京大禹智芯科技有限公司 | P4控制分支语句的性能优化方法和装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107038207B (zh) | 一种数据查询方法、数据处理方法及装置 | |
| CN108170656B (zh) | 模板创建方法、文档创建方法、渲染方法和装置 | |
| WO2020211236A1 (zh) | 基于b+树的读写冲突解决方法、装置及存储介质 | |
| CN106611044B (zh) | 一种sql优化方法及设备 | |
| WO2021179722A1 (zh) | Sql语句解析方法、系统、计算机设备和存储介质 | |
| MX2013014800A (es) | Recomendacion de enriquecimientos de datos. | |
| US20110320431A1 (en) | Strong typing for querying information graphs | |
| WO2020215689A1 (zh) | 一种列存储文件的查询方法及查询装置 | |
| CN108563694B (zh) | 对逻辑删除的sql执行方法、装置、计算机设备和存储介质 | |
| CN113672977A (zh) | 隐私数据处理方法和装置 | |
| CA3149710A1 (en) | Data collecting method, device, computer equipment and storage medium | |
| CN112579635A (zh) | 一种sql语句的优化方法、装置、电子设备及存储介质 | |
| EP3889797A1 (en) | Database index and database query processing method, apparatus, and device | |
| US20190197123A1 (en) | Metadata storage method, device and server | |
| CN111159187A (zh) | 二维查询方法、装置、终端设备及计算机可读存储介质 | |
| CN111639087B (zh) | 数据库中数据更新方法、装置和电子设备 | |
| CN110232063B (zh) | 层级数据查询方法、装置、计算机设备和存储介质 | |
| CN111125216A (zh) | 数据导入Phoenix的方法及装置 | |
| CN108629012B (zh) | 取证数据解析准确性的智能校验方法和系统 | |
| CN111831659B (zh) | 一种检查索引的方法、装置及计算设备 | |
| CN112380174B (zh) | 含删除文件的xfs文件系统解析方法、终端设备及存储介质 | |
| CN111488360B (zh) | 一种行级安全的实现方法、装置、设备及存储介质 | |
| US9020995B2 (en) | Hybrid relational, directory, and content query facility | |
| CN108984719B (zh) | 基于列存储的数据删除方法、装置、服务器及存储介质 | |
| CN112860714A (zh) | 知识库、数据库、信息更新方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20210330 |