CN113157691A - 一种可配置的数据搜索方法及系统 - Google Patents

Abstract

本发明公开了一种可配置的数据搜索方法及系统，属于数据智能搜索技术领域。本发明方法，包括：对业务表的使用次数进行统计，筛选出使用次数大于预设值的业务表，针对大于预设值的业务表生成查询配置表信息；读取查询配置表信息，根据业务表数据的关联关系，对配置表信息进行分类，确定查询条件；当用户请求数据搜索后，获取用户的查询字段，对用户的查询字段进行解析，获取解析字段，并对解析字段按照SQL语句的编写规范，生成查询语句；以查询语句使用查询条件，进行查询，获取数据简化简表，根据数据简化简表获取搜索数据。本发明对查询日志进行定期智能分析，然后给予用户合理、可靠的查询优化建议。

Description

一种可配置的数据搜索方法及系统

技术领域

本发明涉及数据智能搜索技术领域，并且更具体地，涉及一种可配置 的数据搜索方法及系统。

背景技术

近年来，信息化成为当今时代发展的大趋势。顺应时代的潮流，各行 业都在积极地发展大数据产业，试图通过数据的统计分析助力企业的发展。

各企业的业务范畴不断扩大，海量的存储数据管理起来繁琐复杂，数 据搜索和统计成为日常工作所需。虽然各企业之间具有独特性，数据的统 计分析应当根据各企业的业务要求进行个性化定制，但实际上，数据的统 计归根到底就是数据的搜索和整合，最后形成可视化简表，让用户直观的 查看自己企业各项工作的运转情况，方便对企业各项工作进行管理，并对 统计工作中反应出的问题进行解决。

现阶段，数据的统计分析存在着如下问题：

1、条件单一性：一般来说，每个功能菜单的查询条件都是固定的，因 此每次仅能查询满足当前给定条件下的数据，无法对查询条件进行扩展， 查询出更精准的数据。数据的不精准一来可能影响数据的归类分析，二来 可能会给问题数据充当了庇护伞，导致无法找到问题的存在；

2、缺乏包容性：当前每一类数据的查询统计都需要提供的一个单独 菜单功能，而且每一个菜单的统计条件可能还是一样，这样就会形成多个 一摸一样，统计数据类别不一样的菜单，显然这个对于一个系统来说是没 有多大意义的；

3、查询统计语句依赖专业的开发人员进行编写，一旦编写完成，语句 就会一成不变的固定在后台代码中，每次统计就是使用同一条语句。当业 务需求发生变化、表结构改变、索引改变等，仅能对代码中的语句进行调 整后，方能满足业务的需求，保证拆查询语句性能的最优；

基于以上认识，发明一种通过配置，形成条件可选择、包容性强、智 能拼接语句的高效智能查询方法及系统成为了各企业所需。

发明内容

针对上述问题，本发明提出了一种可配置的数据搜索方法，包括：

对业务表的使用次数进行统计，筛选出使用次数大于预设值的业务表， 针对大于预设值的业务表生成查询配置表信息；

读取查询配置表信息，根据业务表数据的关联关系，对配置表信息进 行分类，确定查询条件；

当用户请求数据搜索后，获取用户的查询字段，对用户的查询字段进 行解析，获取解析字段，并对解析字段按照SQL语句的编写规范，生成查 询语句；

以查询语句使用查询条件，进行查询，获取数据简化简表，根据数据 简化简表获取搜索数据。

可选的，查询配置表信息，包括：表名、字段名、字段中文名、字段 类型、字典项、是否必录信息及是否索引信息。

可选的，查询字段，包括多个。

可选的，数据简化简表，包括数据搜索过程中的查询日志信息、查询 用户、查询时间、查询耗时及使用索引信息，根据所述简化简表的查询日 志信息、查询用户、查询时间、查询耗时及使用索引信息，生成查询记录， 并对查询记录进行存储。

可选的，方法还包括：

获取查询条件的查询频率、查询字段的使用频率、查询耗时及执行信 息；

根据所述查询频率、查询字段的使用频率、查询耗时及执行信息，确 定查询方案，并将查询方案发送至用户，所述查询方案用于对数据搜索进 行优化。

本发明还提出了一种可配置的数据搜索系统，包括：

筛选模块，对业务表的使用次数进行统计，筛选出使用次数大于预设 值的业务表，针对大于预设值的业务表生成查询配置表信息；

条件确定模块，读取查询配置表信息，根据业务表数据的关联关系， 对配置表信息进行分类，确定查询条件；

查询模块，确定当用户请求数据搜索后，获取用户的查询字段，对用 户的查询字段进行解析，获取解析字段，并对解析字段按照SQL语句的编 写规范，生成查询语句；

输出模块，以查询语句使用查询条件，进行查询，获取数据简化简表， 根据数据简化简表获取搜索数据。

可选的，查询配置表信息，包括：表名、字段名、字段中文名、字段 类型、字典项、是否必录信息及是否索引信息。

可选的，查询字段，包括多个。

可选的，数据简化简表，包括数据搜索过程中的查询日志信息、查询 用户、查询时间、查询耗时及使用索引信息，根据所述简化简表的查询日 志信息、查询用户、查询时间、查询耗时及使用索引信息，生成查询记录， 并对查询记录进行存储。

可选的，所述输出模块，还用于：

获取查询条件的查询频率、查询字段的使用频率、查询耗时及执行信 息；

根据所述查询频率、查询字段的使用频率、查询耗时及执行信息，确 定查询方案，并将查询方案发送至用户，所述查询方案用于对数据搜索进 行优化。

本发明不仅可以解决目前查询统计存在的问题，而且还可设置常用语 句进行记忆查询以及对查询日志进行定期智能分析，然后给予用户合理、 可靠的查询优化建议。

附图说明

图1为本发明一种可配置的数据搜索方法的流程图；

图2为本发明一种可配置的数据搜索系统的结构图。

具体实施方式

现在参考附图介绍本发明的示例性实施方式，然而，本发明可以用许 多不同的形式来实施，并且不局限于此处描述的实施例，提供这些实施例 是为了详尽地且完全地公开本发明，并且向所属技术领域的技术人员充分 传达本发明的范围。对于表示在附图中的示例性实施方式中的术语并不是 对本发明的限定。在附图中，相同的单元/元件使用相同的附图标记。

除非另有说明，此处使用的术语(包括科技术语)对所属技术领域的 技术人员具有通常的理解含义。另外，可以理解的是，以通常使用的词典 限定的术语，应当被理解为与其相关领域的语境具有一致的含义，而不应 该被理解为理想化的或过于正式的意义。

本发明提出了一种可配置的数据搜索方法，如图1所示，包括：

对业务表的使用次数进行统计，筛选出使用次数大于预设值的业务表， 针对大于预设值的业务表生成查询配置表信息；

读取查询配置表信息，根据业务表数据的关联关系，对配置表信息进 行分类，确定查询条件；

当用户请求数据搜索后，获取用户的查询字段，对用户的查询字段进 行解析，获取解析字段，并对解析字段按照SQL语句的编写规范，生成查 询语句；

以查询语句使用查询条件，进行查询，获取数据简化简表，根据数据 简化简表获取搜索数据；

获取查询条件的查询频率、查询字段的使用频率、查询耗时及执行信 息；

根据所述查询频率、查询字段的使用频率、查询耗时及执行信息，确 定查询方案，并将查询方案发送至用户，所述查询方案用于对数据搜索进 行优化。

其中，查询配置表信息，包括：表名、字段名、字段中文名、字段类 型、字典项、是否必录信息及是否索引信息。

其中，查询字段，包括多个。

其中，数据简化简表，包括数据搜索过程中的查询日志信息、查询用 户、查询时间、查询耗时及使用索引信息，根据所述简化简表的查询日志 信息、查询用户、查询时间、查询耗时及使用索引信息，生成查询记录， 并对查询记录进行存储。

下面结合实施例对本发明进行进一步的说明：

本发明提供了灵活的配置功能，用户可以把日常工作中需要进行查询 的表名、表字段、字段类型等相关信息进行配置，配置完成后在前台查询 功能界面可按配置表中的表名分类，展示各表的字段名。

用户可自行根据业务需要，选择查询统计时需要的字段，输入条件值， 之后系统会根据用户的选择和输入，自动识别查询的表名，用到的字段名 和字段值，形成语法准确，执行效率最优的语句。

查询完成后，形成友好的可视化简表界面，方便用户查看查询统计结 果，并且提供打印和导出功能。当某个语句使用次数比较多时，可把本次 查询的语句保存起来，设置一个模块名，作为常用语句，下一次需要用到 该语句时，只需选择该模块名，便会调出上一次的查询语句进行查询。在 查询时，系统会自动记录查询日志，并定期对查询日志进行智能分析，然 后通过可视化界面给予用户合理、可靠的查询优化建议。

本发明方法包括：

1、自定义查询配置；

根据常用的业务表生成查询配置表信息，主要包括表名、字段名、字 段中文名、字段类型、字典项、是否必录、是否索引等信息，用户可根据 日常业务需求，通过界面功能对查询配置表信息进行自定义修改。

2、智能语句生成；

读取配置表信息，根据数据关联关系智能分类展示查询条件，当用户 选择多个查询字段时，系统会自动识别字段信息，并智能解析后按照SQL 语句的编写规范形成有效的、完整的、性能最优的查询语句。

查询条件选择完成后，根据用户选择的字段及表之间的关联关系，将 中文描述智能解析并转换为数据库可执行的SQL语句。

用户可将某条语句设置成常用语句，此后只需在界面上输入该查询的 关键字，系统便会在常用语句存储区找到对应的语句，供用户使用。

3、查询结果反馈；

查询完成后，系统会形成一张可视化的数据结果简表，用户可按照自 己的想法灵活设置简表的展示项，同时支持倒序或者升序排列，可进行打 印导出。

4、查询情况分析；

对查询情况进行智能分析；

1)查询过程中，系统自动记录当前查询日志，包括查询人、查询时间、 查询耗时、使用索引等信息；

2)定期根据各语句查询频率、字段使用频率、耗时情况、索引执行情 况等进行智能分析，给予用户合理、可靠的查询优化建议；

3)生成分析报表，可进行下载、打印。

本发明查询条件可选择：查询统计时不再局限于以往规定的条件进行 查询，可根据需要，选择多个条件，直到获得最精准的查询结果。精准的 查询结果有利于企业对业务数据的分析，也有利于企业排查问题数据，及 时进行修改处理；

本发明包容性强：只需一个功能菜单就能查询统计多种类型的数据， 由于查询的表名、字段名等都是通过配置表配置的，因此只要是配置表中 有配置到的，都可以把对应的表数据查出来；

本发明对查询语句拼接是符合SQL语句的编写规范的，其具有一定的 科学性、准确性和性能最优性，尽可能的保证了各项业务的统计都是确认 无误的；

本发明对查询情况的定时智能分析，能及时给予用户合理、可靠的查 询优化建议，使得查询会更加高效。

本发明还提出了一种可配置的数据搜索系统200，如图2所示，包括：

筛选模块201，对业务表的使用次数进行统计，筛选出使用次数大于 预设值的业务表，针对大于预设值的业务表生成查询配置表信息；

条件确定模块202，读取查询配置表信息，根据业务表数据的关联关 系，对配置表信息进行分类，确定查询条件；

查询模块203，确定当用户请求数据搜索后，获取用户的查询字段， 对用户的查询字段进行解析，获取解析字段，并对解析字段按照SQL语句 的编写规范，生成查询语句；

输出模块204，以查询语句使用查询条件，进行查询，获取数据简化 简表，根据数据简化简表获取搜索数据；

输出模块204，还用于：

获取查询条件的查询频率、查询字段的使用频率、查询耗时及执行信 息；

根据所述查询频率、查询字段的使用频率、查询耗时及执行信息，确 定查询方案，并将查询方案发送至用户，所述查询方案用于对数据搜索进 行优化。

其中，查询配置表信息，包括：表名、字段名、字段中文名、字段类 型、字典项、是否必录信息及是否索引信息。

其中，查询字段，包括多个。

其中，数据简化简表，包括数据搜索过程中的查询日志信息、查询用 户、查询时间、查询耗时及使用索引信息，根据所述简化简表的查询日志 信息、查询用户、查询时间、查询耗时及使用索引信息，生成查询记录， 并对查询记录进行存储。

本发明不仅可以解决目前查询统计存在的问题，而且还可设置常用语 句进行记忆查询以及对查询日志进行定期智能分析，然后给予用户合理、 可靠的查询优化建议。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、 或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施 例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个 或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不 限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的 形式。本申请实施例中的方案可以采用各种计算机语言实现，例如，面向 对象的程序设计语言Java和直译式脚本语言JavaScript等。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序 产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流 程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中 的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专 用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个 机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产 生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方 框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理 设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存 储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个 流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上， 使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现 的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流 程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能 的步骤。

尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知 了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所 附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和 修改。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离 本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权 利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在 内。

Claims (10)

1.一种可配置的数据搜索方法，所述方法包括：

对业务表的使用次数进行统计，筛选出使用次数大于预设值的业务表，针对大于预设值的业务表生成查询配置表信息；

读取查询配置表信息，根据业务表数据的关联关系，对配置表信息进行分类，确定查询条件；

当用户请求数据搜索后，获取用户的查询字段，对用户的查询字段进行解析，获取解析字段，并对解析字段按照SQL语句的编写规范，生成查询语句；

以查询语句使用查询条件，进行查询，获取数据简化简表，根据数据简化简表获取搜索数据。

2.根据权利要求1所述的方法，所述查询配置表信息，包括：表名、字段名、字段中文名、字段类型、字典项、是否必录信息及是否索引信息。

3.根据权利要求1所述的方法，所述查询字段，包括多个。

4.根据权利要求1所述的方法，所述数据简化简表，包括数据搜索过程中的查询日志信息、查询用户、查询时间、查询耗时及使用索引信息，根据所述简化简表的查询日志信息、查询用户、查询时间、查询耗时及使用索引信息，生成查询记录，并对查询记录进行存储。

5.根据权利要求1所述的方法，所述方法还包括：

获取查询条件的查询频率、查询字段的使用频率、查询耗时及执行信息；

根据所述查询频率、查询字段的使用频率、查询耗时及执行信息，确定查询方案，并将查询方案发送至用户，所述查询方案用于对数据搜索进行优化。

6.一种可配置的数据搜索系统，所述系统包括：

筛选模块，对业务表的使用次数进行统计，筛选出使用次数大于预设值的业务表，针对大于预设值的业务表生成查询配置表信息；

条件确定模块，读取查询配置表信息，根据业务表数据的关联关系，对配置表信息进行分类，确定查询条件；

查询模块，确定当用户请求数据搜索后，获取用户的查询字段，对用户的查询字段进行解析，获取解析字段，并对解析字段按照SQL语句的编写规范，生成查询语句；

输出模块，以查询语句使用查询条件，进行查询，获取数据简化简表，根据数据简化简表获取搜索数据。

7.根据权利要求6所述的系统，所述查询配置表信息，包括：表名、字段名、字段中文名、字段类型、字典项、是否必录信息及是否索引信息。

8.根据权利要求6所述的系统，所述查询字段，包括多个。

9.根据权利要求6所述的系统，所述数据简化简表，包括数据搜索过程中的查询日志信息、查询用户、查询时间、查询耗时及使用索引信息，根据所述简化简表的查询日志信息、查询用户、查询时间、查询耗时及使用索引信息，生成查询记录，并对查询记录进行存储。

10.根据权利要求6所述的系统，所述输出模块，还用于：

获取查询条件的查询频率、查询字段的使用频率、查询耗时及执行信息；

根据所述查询频率、查询字段的使用频率、查询耗时及执行信息，确定查询方案，并将查询方案发送至用户，所述查询方案用于对数据搜索进行优化。

Images