CN114969109A - 一种渐进交互式数据查询系统、方法及介质 - Google Patents

Abstract

本发明公开了一种渐进交互式数据查询系统、方法及介质，根据数据源中数据的字段信息得到简单指标组成的元数据表，简单指标包括指标名称、字段名称、字段类型、源表名称；根据简单指标的具体含义对简单指标进行逻辑运算生成复杂指标；对简单指标和复杂指标进行逻辑运算得到条件指标；根据结构化查询语言规范，将简单指标、复杂指标和条件指标组合成查询模板，查询模板用于生成数据库查询语句。本发明能自动读取数据信息并将其转化为易于理解的指标信息，由用户对易于理解的指标进行编排、筛选组合及运算，降低了数据查询的技术门槛，解决了不断围绕用户需求迭代开发的问题。同时本发明可直观地获得业务数据，使用户能渐进式的不断优化指标及模板。

Description

一种渐进交互式数据查询系统、方法及介质

技术领域

本发明属于数据查询技术领域，具体涉及一种渐进交互式数据查询系统、方法及介质。

背景技术

在企业数字化过程中，数据规模和存储形式会随着业务变化而变化，导致为了能从多个不确定的维度将数据展示在用户面前，必须不断围绕用户需求迭代开发以适应用户的不同需求。

在企业信息系统中，以关系型数据库为例普遍遵循的查询和统计数据的方法是建立数据库连接，发送SQL(结构化查询语言)语句，返回结果集，展示结果页面。

目前面向用户的数据查询方案有以下几种：具备数据库专业知识人员直接编写SQL语句发送到数据库查询数据；针对特定的业务编写代码将SQL语句及其维度固化到代码中，用户只能在固定的预设维度中查询数据；将SQL语句中的元素参数化，提供给用户选择并赋值，最终拼接成SQL语句；用户将数据导入到类似EXCEL的表格软件中，形成易于理解的数据表格，然后编写公式筛选和查询数据。

综上所述，用户查询数据本质上是与计算机系统沟通的过程，让用户能理解查询语句、数据格式及分布则是自主查询的关键。然而，面向一般用户而言，不断增长的需求及晦涩难懂查询语句，以及繁杂数据表定义，导致需要不断地迭代开发。

发明内容

本发明针对上述问题，旨在提供一种直观的数据查询系统，让不具备计算机编程专业知识的用户，也能根据自身业务专业知识经过简单配置就能在繁杂的数据中查询到真正有价值的数据。

实现本发明目的之一的一种渐进交互式数据查询系统，包括简单指标生成模块、复杂指标生成模块、条件指标生成模块和查询模板生成模块；

所述简单指标生成模块用于根据数据源中的数据的字段信息得到简单指标，所述简单指标包括指标名称、字段名称、字段类型、源表名称；

所述复杂指标生成模块用于根据简单指标的具体含义对简单指标进行逻辑运算生成复杂指标；

所述条件指标生成模块用于对简单指标和复杂指标进行逻辑运算得到条件指标；

所述查询模板生成模块用于根据结构化查询语言规范，将简单指标、复杂指标和条件指标组合成查询模板，所述查询模板用于生成数据库查询语句进行数据查询。

进一步地，所述查询模板包括范围指标和条件指标；所述范围指标由简单指标和复杂指标组成，用于表示需要查询的数据，所述条件指标由简单指标和复杂指标组成，所述条件指标用于表示需要查找的数据需满足的条件。

进一步地，所述查询模板还包括数据库查询语句生成模块，用于根据查询模板生成标准数据库查询语句。

进一步地，所述复杂指标生成模块中的逻辑运算包括四则运算、求和、求平均值和求最值。

进一步地，所述条件指标生成模块中的逻辑运算包括并且、或者、大于、大于等于、等于、小于、小于等于、早于、晚于、起始于、结束于、包含。

进一步地，本系统还包括数据存储模块，用于存储复杂指标、条件指标和查询模板，数据存储模块中的数据掉电不消失，所存储的复杂指标、条件指标和查询模板存储一次后可反复使用或修改。

实现本发明目的之二的一种渐进交互式数据查询方法，包括如下步骤：

S1、根据数据源中的数据的字段信息得到简单指标组成的元数据表，所述简单指标包括指标名称、字段名称、字段类型、源表名称；

S2、根据元数据表中的简单指标的具体含义将简单指标编排成复杂指标；所述复杂指标为对简单指标进行逻辑运算后形成的指标，所述逻辑运算包括四则运算、求和、求平均值和求最值；

S3、对简单指标和复杂指标进行逻辑运算得到条件指标，所述逻辑运算包括并且、或者、大于、大于等于、等于、小于、小于等于、早于、晚于、起始于、结束于、包含；

S4、根据结构化查询语言规范，将简单指标、复杂指标和条件指标组合成查询模板，所述查询模板用于生成数据库查询语句进行数据查询。

进一步地，所述步骤S2中，所述对简单指标进行的逻辑运算包括四则运算、求和、求平均值和求最值。

进一步地，所述步骤S3中，所述对复杂指标进行的逻辑运算包括并且、或者、大于、大于等于、等于、小于、小于等于、早于、晚于、起始于、结束于、包含。

进一步地，所述步骤S4中，所述查询模板由范围指标和条件指标组成，所述范围指标由简单指标和复杂指标组成，用于表示需要查询的数据；所述条件指标由简单指标和复杂指标组成，所述条件指标用于表示需要查询的数据需满足的条件；

在查询模板的执行阶段，按照以下指标转换的基本原则生成数据库查询语句：

SELECT 范围指标

FROM 数据表

WHERE 条件指标

其中，所述范围指标由简单指标和/或复杂指标组成，所述条件指标由简单指标和/或复杂指标组成；其中FROM后面的数据表来源于元数据表中该范围指标所在的源表名称。

实现本发明目的之三的一种非暂态计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现所述渐进交互式数据查询方法的任一项步骤。

有益效果：

本发明能自动读取数据的描述信息(字段名称、字段类型、关联关系等)并将其转化为易于理解的指标信息，可使普通用户更易于理解；将指标信息按照数据库查询规范灵活组合成规则，提高易用性及复用性；同时提供指标编排的操作界面，交由用户对易于理解的指标进行编排、筛选组合及运算，降低了用户数据查询的技术门槛，解决了不断围绕用户需求迭代开发的问题。同时，本发明可直观地获得业务数据，使用户能渐进式的不断优化指标及模板。

附图说明

图1是本发明所述方法的流程图；

图2是本发明所述的简单指标生成的示意图；

图3是本发明所述的元数据表示意图；

图4是本发明所述的复杂指标编辑器示意图；

图5是本发明所述的条件指标编辑器示意图；

图6是本发明所述的查询模板编辑器示意图。

具体实施方式

下列具体实施方式用于对本发明权利要求技术方案的解释，以便本领域的技术人员理解本权利要求书。本发明的保护范围不限于下列具体的实施结构。本领域的技术人员做出的包含有本发明权利要求书技术方案而不同于下列具体实施方式的也是本发明的保护范围。

如图1所示为本发明的功能分布及执行流程图，其中虚线代表数据输入，实线代表用户操作后的数据输出；

下面结合图2～6讲述本发明所述方法的具体实施方式。

S1、如图2所示，收集数据源中的每张表的字段信息，形成元数据表；

将所述数据源中的每张表的字段信息定义为简单指标，所述简单指标包括指标名称、字段名称、字段类型、源表名称和数据源类型，用于为后续的复杂指标和条件指标编辑提供基础数据支持；

所述元数据表如图3所示，将不同数据源中的所有表中的字段信息整合成一张元数据表，元数据表中的字段包括：指标名称、字段名称、字段类型、源表名称和数据源类型；

字段名称和字段类型来源于所述指标在源表中的字段名称和字段类型；源表名称即该元数据所在表的名称；数据源类型即所收集数据的存储方式或来源，包括但不限于数据库、excel文件或者csv文件；指标名称为用户可以理解的字段名称的别名，主要目的是为了让用户明确该字段所表示的意义，如字段名称为age，指标名称则为年龄；

S2、根据简单指标的具体含义将简单指标编排成复杂指标；

所述复杂指标为对简单指标进行逻辑运算后形成的指标，所述逻辑运算包括但不限于四则运算、求和、求平均值和求最值。

如图4所示，根据简单指标中的年订单量、年失败订单量，可计算出年成单率，所述年成单率即为复杂指标。

所述编排方法可以利用现有软件或简单编程即可实现，具体方法为从元数据表中读取简单指标，用户可以根据自己的需求搜索自己想要进行计算的简单指标，然后根据实际需求对简单指标进行四则运算、求和、求平均值和求最值等逻辑运算，形成复杂指标。

图4中，复杂指标的结果展示位于左边界面的顶部，包括复杂指标的名称和所对应的逻辑运算，展示复杂指标与所关联的简单指标的运算方法；用户还可通过“所有指标”搜索框输入关键字查询和过滤简单指标；用户也可直接选择所列出来的常用的简单指标，对所选中的简单指标进行运算；所述逻辑操作符也可直接在界面上点击选择。每完成一个复杂指标的运算方法后，用户将其保存后可继续下一个复杂指标的编辑，复杂指标保存后见图4右侧，复杂指标保存一次即可，后续可直接复用。

以本实施例中的图4中的年成单率为例，保存后将产生一条复杂指标数据，所述复杂指标包括复杂指标名称、该复杂指标所包含的运算项(运算项是简单指标、常量的集合)、以及各运算项的数学运算方法。

S3、根据需求将简单指标和复杂指标编排成条件指标；

所述条件指标为简单指标和复杂指标经过逻辑运算后形成的指标，用于标识查询的过滤条件，所述逻辑运算包括但不限于并且、或者、大于、大于等于、等于、小于、小于等于、早于、晚于、起始于、结束于、包含。

如图5所示，条件指标的结果展示位于左边界面的顶部，包括条件指标名称和所对应的逻辑运算过程；用户可通过“所有指标”搜索框输入关键字查询和过滤简单指标和复杂指标；用户也可在界面上直接选择常用的简单指标或复杂指标，对所选中的简单指标或复杂指标进行条件编辑；所述逻辑操作符也可直接在界面上点击选择。每完成一个条件指标的编辑后，用户将其保存后可继续下一个条件指标的编辑，条件指标保存一次即可，后续可直接复用。

所述条件指标包括条件指标名称、该指标所包含的运算项(运算项是简单指标、复杂指标及常量的集合)、以及各运算项的逻辑运算算法；以本实施例中图5的年成单率为例，保存后将产生一条条件指标：性别等于“男”并且年成单率大于等于95％；其中条件指标名称为：销售业绩优异的男性；运算项为：性别等于“男”、年成单率大于等于95％；运算项的逻辑运算为“并且”。

S4、根据结构化查询语言规范，将简单指标、复杂指标和条件指标组合成查询模板；所述查询模板用于生成数据库查询语句，对数据进行查询。

所述查询模板由范围指标和条件指标组成，用于生成数据查询语句。

如图5中，选择简单指标中的姓名作为查询模板中的范围指标，选择复杂指标中的年成单率大于95％、性别为男性、时间等于今年作为查询模板中的条件指标，可以得到一条如下所示的查询模板，即：性别等于“男”、今年的年成单率大于等于95％的所有销售人员的姓名。

以本实施例中图6所示的年成单率为例，保存后将产生查询模板数据，该数据将描述SQL语句中各个部分的组成及关系，其中包括复杂指标和条件指标；

S5执行查询模版，返回结果集；

在查询模版的执行阶段，将按照以下步骤生成数据库查询语句：

指标转换的基本原则如下：

SELECT 范围指标

FROM 数据表

WHERE 条件指标

其中，所述范围指标由简单指标和/或复杂指标组成，所述条件指标由简单指标和/或复杂指标组成；其中FROM后面的数据表来源于元数据表中该范围指标所在的源表名称。

以图6中描述的场景为例，步骤如下：

1、根据复杂指标数据及简单指标数据，产生伪查询语句

SELECT ‘姓名’

FROM 数据表

WHERE ‘年成单率’>95％AND‘性别’＝‘男’AND‘时间’＝‘$今年’

2、查询元数据表，最终产生数据库查询语句：

SELECT A

FROM T,E

WHERE ((SUM(day_salce)-SUM(day_lose))/SUM(day_salce)*100)>95AND性别’＝‘男’AND‘时间’＝YEAR(NOW())

GROUP BY A

上述数据库查询语句可在数据库客户端执行并返回查询结果；如果数据源为非数据库来源，如XLS或CSV，则需要将数据导入数据库中后再进行查询。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

本申请实施例还提供一种渐进交互式数据查询系统，包括简单指标生成模块、复杂指标生成模块、条件指标生成模块和查询模板生成模块；

所述简单指标生成模块用于根据数据源中的数据的字段信息得到简单指标组成的元数据表，所述简单指标包括指标名称、字段名称、字段类型、源表名称；

所述复杂指标生成模块用于根据元数据表中的简单指标的具体含义将简单指标编排成复杂指标；所述复杂指标为对简单指标进行逻辑运算后形成的指标；

所述条件指标生成模块用于对简单指标和复杂指标进行逻辑运算得到条件指标；

所述查询模板生成模块用于根据结构化查询语言规范，将简单指标、复杂指标和条件指标组合成查询模板，所述查询模板用于生成数据库查询语句进行数据查询。

所述查询模板包括范围指标和条件指标；所述范围指标由简单指标和复杂指标组成，用于表示需要查询的数据，所述条件指标由简单指标和复杂指标组成，所述条件指标用于表示需要查找的数据需满足的条件。

所述查询模板还包括数据库查询语句生成模块，用于根据查询模板生成标准数据库查询语句。

所述复杂指标生成模块中的逻辑运算包括四则运算、求和、求平均值和求最值。

所述条件指标生成模块中的逻辑运算包括并且、或者、大于、大于等于、等于、小于、小于等于、早于、晚于、起始于、结束于、包含。

本申请实施例还提供一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序包括程序指令，该程序指令被处理器执行时实现所述基于深度学习的电网调控领域信息检索方法的各个步骤，在此不再赘述。

计算机可读存储介质可以是前述任一实施例提供的数据传输装置或者计算机设备的内部存储单元，例如计算机设备的硬盘或内存。该计算机可读存储介质也可以是该计算机设备的外部存储设备，例如该计算机设备上配备的插接式硬盘，智能存储卡(smartmedia card，SMC)，安全数字(secure digital,SD)卡，闪存卡(flash card)等。

进一步地，该计算机可读存储介质还可以既包括该计算机设备的内部存储单元也包括外部存储设备。该计算机可读存储介质用于存储该计算机程序以及该计算机设备所需的其他程序和数据。该计算机可读存储介质还可以用于暂时地存储将要输出或己输出的数据。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

最后应当说明的是：以上实施例仅用以说明本发明的技术方案而非对其限制，尽管参照上述实施例对本发明进行了详细的说明，所属领域的普通技术人员应当理解：依然可以对本发明的具体实施方式进行修改或者等同替换，而未脱离本发明精神和范围的任何修改或者等同替换，其均应涵盖在本发明的权利要求保护范围之内。

本说明书未作详细描述的内容属于本领域专业技术人员公知的现有技术。

Claims (10)

1.一种渐进交互式数据查询系统，其特征在于，包括简单指标生成模块、复杂指标生成模块、条件指标生成模块和查询模板生成模块；

所述简单指标生成模块用于根据不同数据源中的数据的字段信息得到简单指标，所述简单指标包括指标名称、字段名称、字段类型、源表名称；

所述复杂指标生成模块用于根据简单指标的具体含义对简单指标进行逻辑运算得到复杂指标；

所述条件指标生成模块用于对简单指标和复杂指标进行逻辑运算得到条件指标；

所述查询模板生成模块用于根据结构化查询语言规范，将简单指标、复杂指标和条件指标组合成查询模板，所述查询模板用于生成数据库查询语句进行数据查询。

2.如权利要求1所述的渐进交互式数据查询系统，其特征在于，所述查询模板包括范围指标和条件指标；所述范围指标由简单指标和复杂指标组成，用于表示需要查询的数据；所述条件指标由简单指标和复杂指标组成，所述条件指标用于表示需要查询的数据需满足的条件。

3.如权利要求1所述的渐进交互式数据查询系统，其特征在于，所述查询模板还包括数据库查询语句生成模块，用于根据查询模板生成标准数据库查询语句。

4.如权利要求1所述的渐进交互式数据查询系统，其特征在于，所述复杂指标生成模块中的逻辑运算包括四则运算、求和、求平均值和求最值；所述条件指标生成模块中的逻辑运算包括并且、或者、大于、大于等于、等于、小于、小于等于、早于、晚于、起始于、结束于、包含。

5.如权利要求1所述的渐进交互式数据查询系统，其特征在于，还包括数据存储模块，用于存储复杂指标、条件指标和查询模板，数据存储模块中的数据掉电不消失，所存储的复杂指标、条件指标和查询模板存储一次后可反复使用或修改。

6.如权利要求1所述系统的一种渐进交互式数据查询方法，其特征在于，包括如下步骤：

S1、根据数据源中的数据的字段信息得到简单指标组成的元数据表，所述简单指标包括指标名称、字段名称、字段类型、源表名称；

S2、根据简单指标的具体含义对简单指标进行逻辑运算得到复杂指标；

S3、对简单指标和复杂指标进行逻辑运算得到条件指标；

S4、根据结构化查询语言规范，将简单指标、复杂指标和条件指标组合成查询模板，所述查询模板用于生成数据库查询语句进行数据查询。

7.如权利要求6所述的渐进交互式数据查询方法，其特征在于，所述步骤S2中，所述对简单指标进行的逻辑运算包括四则运算、求和、求平均值和求最值。

8.如权利要求6所述的渐进交互式数据查询方法，其特征在于，所述步骤S3中，所述对复杂指标进行的逻辑运算包括并且、或者、大于、大于等于、等于、小于、小于等于、早于、晚于、起始于、结束于、包含。

9.如权利要求6所述的渐进交互式数据查询方法，其特征在于，所述步骤S4中，所述查询模板由范围指标和条件指标组成，所述范围指标由简单指标和复杂指标组成，用于表示需要查询的数据；所述条件指标由简单指标和复杂指标组成，所述条件指标用于表示需要查询的数据需满足的条件；

在查询模板的执行阶段，按照以下指标转换的基本原则生成数据库查询语句：

SELECT范围指标

FROM数据表

WHERE条件指标

其中，所述范围指标由简单指标和/或复杂指标组成，所述条件指标由简单指标和/或复杂指标组成；其中FROM后面的数据表来源于元数据表中该范围指标所在的源表名称。

10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现所述渐进交互式数据查询方法的任一项步骤。

Images