CN109710663B

CN109710663B - 一种数据统计图表生成方法

Info

Publication number: CN109710663B
Application number: CN201811634328.3A
Authority: CN
Inventors: 单承方; 郑博文; 温小龙; 耿建光; 牛建义; 李大林; 郭宁
Original assignee: Beijing Shenzhou Aerospace Software Technology Co ltd
Current assignee: Beijing Shenzhou Aerospace Software Technology Co.,Ltd.
Priority date: 2018-12-29
Filing date: 2018-12-29
Publication date: 2020-12-04
Anticipated expiration: 2038-12-29
Also published as: CN109710663A

Abstract

本发明公开的数据统计图表生成方法，根据统计图中需要展示的内容，选择存储在关系型数据库中的对象及对象对应的字段并为对象设置过滤条件，根据字段及所述过滤条件，创建数据库视图，将数据库视图作为维度模型的数据源，将数据库视图中的字段作为维度模型的维度，生成维度模型的配置文件，创建统计图表的配置文件，根据配置文件，生成维度查询语句，将维度查询语句输入维度查询模块，对关系型数据库进行维度查询，得到用于生成统计图表的数据，根据数据的格式及目标数据的格式，获取数据转换适配器，利用数据转换适配器对数据的格式进行转换，将数据输入图表生成引擎，生成目标统计图表，简化了维度模型建模的过程，提高了维度模型建模的效率。

Description

一种数据统计图表生成方法

技术领域

本发明涉及数据库技术领域，具体涉及一种数据统计图表生成方法。

背景技术

数据统计图表的生成过程一般需经历数据准备、数据加工、生成统计图等过程。其中，数据准备为获取待处理数据的方式，结果为行、列组成的二维数据结构，现有数据准备方式包括从Oracle、MySql、SqlServer、Access等关系数据库中直接查询及通过excel、csv等数据文件导入的方式；数据加工包括对二维表中的数据进行求和、求平均值、计数等统计计算及按列中的数据值进行分组计数等操作，以便生成最终用于统计图表中所显示的数据，现有技术一般是将二维数据复制到excel中通过新建数据透视表来生成统计结果、通过编写代码进行数据运算等方式来得到统计结果，生成统计图一般使用图形引擎来实现。

现有技术主要存在以下缺点：

由于维度查询语言不能够直接在关系型数据库中使用，所以，为了能够使用维度查询语言对数据进行统计，需要预先对关系数据库中的数据建立维度模型并配置维度模型与关系型数据库表结构间的映射关系。维度建模是需要使用专业的建模工具来完成的，目前的维度建模工具厂商为了最大化的满足不同用户、针对不同数据源、在不同使用场景中的维度模型定义要求，将维度建模的过程分解成了很多步骤，并为每个步骤都定义了多种限定条件、提供了丰富的配置选项，使得建模工具具备了强大的配置能力。但各厂商的维度建模工具在提供强大配置能力的同时，也为维度模型的定义和使用带来了过多的操作步骤和复杂的配置，所以，在维度模型建模的过程中需要具备一定专业知识的人员对存储在关系型数据库中的业务数据进行表结构分析、配置、验证、固化等复杂过程才能完成维度模型的建模过程且维度模型与关系模型的映射关系都需要手工完成，导致维度模型建模的过程较为繁琐且效率较低。

发明内容

为解决现有技术的不足，本发明实施例提供了一种数据统计图表生成方法，该方法包括：

通过对关系型数据库中的数据进行维度建模并使用维度查询语言来获取统计数据，并通过适配器对统计数据进行格式转换，将转换后的数据提供给图表生成引擎，从而完成统计图表的生成，具体包括以下步骤：

Step1：根据统计图中需要展示的内容，选择存储在关系型数据库中的对象及所述对象对应的字段并为所述对象设置过滤条件；

Step2：根据所述字段及所述过滤条件，创建数据库视图；

Step3：将所述数据库视图作为维度模型的数据源，将所述数据库视图中的字段作为维度模型的维度，生成维度模型的配置文件；

Step4：创建统计图表的配置文件，根据所述配置文件，生成维度查询语句；

Step5：将所述维度查询语句输入维度查询模块，对所述关系型数据库进行维度查询，得到用于生成统计图表的数据；

Step6：根据所述数据的格式及目标数据的格式，创建数据转换适配器，利用所述数据转换适配器对所述数据的格式进行转换；

Step7：将所述数据输入图表生成引擎，生成目标统计图表。

进一步地，所述字段包括创建时间、创建人、数量、所属产品、受控时间及修改次数。

进一步地，所述过滤条件包括目标字段、比较条件及条件值，其中，所述比较条件包括大于、大于等于、小于、小于等于、等于、晚于、早于、不晚于、不早于、关键字、取值区间，所述条件值包括数字型、字符型、日期型、数值区间、日期区间及字符型集合。

进一步地，所述根据所述字段及所述过滤条件，创建数据库视图包括：

将Step1中选择的字段和过滤条件作为输入数据，生成创建数据库视图的DDL语句，在数据库中执行所述DDL语句，完成视图对象创建；

对所述表字段和过滤条件和数据库视图信息进行持久化存储，其中，所述数据库视图信息包括视图名称、视图存储位置、视图中的字段。

进一步地，所述配置信息包括统计图表的名称、统计图表的类型、统计图表展示的数据项及数据统计方式，其中，所述数据项包括横轴的数据、纵轴的数据，所述统计方式包括计数、求和、求平均值、按时间分组及按字段值分组。

进一步地，所述维度查询模块包括Mondrian、Kylin。

进一步地，所述图表生成引擎包括JFreeChart、ECharts、Highcharts。

本发明实施例提供的数据统计图表生成方法具有以下有益效果：

对维度建模的过程进行了预设和简化，使得维度模型定义这一过程可以通过程序自动完成，使得使用人员仅需要从关系型数据库中选择统计图中需要展示的数据项即可在后台自动生成维度模型和相应的配置文件，从而完成维度模型建模和配置的过程，简化了维度模型建模的过程，提高了维度模型建模的效率。

附图说明

图1是本发明实施例提供的数据统计图表生成方法的流程示意图；

图2是本发明实施例提供的数据统计图表生成方法的过滤条件选择示意图；

图3是根据本发明实施例提供的数据统计图表生成方法生成的统计图表示意图。

具体实施方式

以下结合附图和具体实施例对本发明作具体的介绍

参照图1，本发明实施例提供的数据统计图表生成方法包括以下步骤：

S101：根据统计图中需要展示的内容，选择存储在关系型数据库中的对象及所述对象对应的字段并为所述对象设置过滤条件。

S102：根据所述字段及所述过滤条件，创建数据库视图。

S103：将所述数据库视图作为维度模型的数据源，将所述数据库视图中的字段作为维度模型的维度，生成维度模型的配置文件。

S104：创建统计图表的配置文件，根据所述配置文件，生成维度查询语句。

S105：将所述维度查询语句输入维度查询模块，对所述关系型数据库进行维度查询，得到用于生成统计图表的数据。

S106：根据所述数据的格式及目标数据的格式，创建数据转换适配器，利用所述数据转换适配器对所述数据的格式进行转换。

其中，不同引擎对图表所用数据的格式定义不同，即使是同一个图表引擎，在生成不同类型的统计图时所使用的数据格式也是各同的。

作为一个具体的实施例，

Echart生成柱状图使用的数据格式为：

而JfreeChart生成柱状图使用的数据格式为：

DefaultCategoryDataset dataset＝new DefaultCategoryDataset()；

dataset.addValue(18203,"巴西","2011")；

dataset.addValue(19325,"巴西","2012")；

dataset.addValue(23489,"印尼","2011")；

dataset.addValue(23438,"印尼","2012")；

dataset.addValue(29034,"美国","2011")；

dataset.addValue(31000,"美国","2012")；

dataset.addValue(104970,"印度","2011")；

dataset.addValue(121594,"印度","2012")；

dataset.addValue(131744,"中国","2011")；

dataset.addValue(134141,"中国","2012")。

S107：将所述数据输入图表生成引擎，生成目标统计图表。

可选地，所述字段包括创建时间、创建人、数量、所属产品、受控时间及修改次数。

可选地，所述过滤条件包括目标字段、比较条件及条件值，其中，所述比较条件包括大于、大于等于、小于、小于等于、等于、晚于、早于、不晚于、不早于、关键字、取值区间，所述条件值包括数字型、字符型、日期型、数值区间、日期区间及字符型集合。

作为一个具体的实施例，过滤条件的选择界面示意图如图2所示。

可选地，所述根据所述字段及所述过滤条件，创建数据库视图包括：

可选地，所述配置信息包括统计图表的名称、统计图表的类型、统计图表展示的数据项及数据统计方式，其中，所述数据项包括横轴的数据、纵轴的数据，所述统计方式包括计数、求和、求平均值、按时间分组及按字段值分组。

作为一个具体的实施例，当统计方式为将数据按年分组时生成的图表如图3所示。

可选地，所述维度查询模块包括Mondrian、Kylin。

可选地，所述图表生成引擎包括JFreeChart、ECharts、Highcharts。

本发明实施例提供的数据统计图表生成方法，根据统计图中需要展示的内容，选择存储在关系型数据库中的对象及对象对应的字段并为对象设置过滤条件，根据字段及所述过滤条件，创建数据库视图，将数据库视图作为维度模型的数据源，将数据库视图中的字段作为维度模型的维度，生成维度模型的配置文件，创建统计图表的配置文件，根据配置文件，生成维度查询语句，将维度查询语句输入维度查询模块，对关系型数据库进行维度查询，得到用于生成统计图表的数据，根据数据的格式及目标数据的格式，获取数据转换适配器，利用数据转换适配器对数据的格式进行转换，将数据输入图表生成引擎，生成目标统计图表，简化了维度模型建模的过程，提高了维度模型建模的效率。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

可以理解的是，上述方法及装置中的相关特征可以相互参考。另外，上述实施例中的“第一”、“第二”等是用于区分各实施例，而并不代表各实施例的优劣。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在此提供的算法和显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述，构造这类系统所要求的结构是显而易见的。此外，本发明也不针对任何特定编程语言。应当明白，可以利用各种编程语言实现在此描述的本发明的内容，并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。

此外，存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。

还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。

本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims

1.一种数据统计图表生成方法，其特征在于，通过对关系型数据库中的数据进行维度建模并使用维度查询语言来获取统计数据，并通过适配器对统计数据进行格式转换，将转换后的数据提供给图表生成引擎，从而完成统计图表的生成，具体包括以下步骤：

Step2：根据所述字段及所述过滤条件，创建数据库视图；

Step4：创建统计图表的配置文件，根据所述维度模型的配置文件及统计图表的配置文件，生成维度查询语句；

Step7：将所述数据输入图表生成引擎，生成目标统计图表。

2.根据权利要求1所述的数据统计图表生成方法，其特征在于，所述字段包括创建时间、创建人、数量、所属产品、受控时间、修改次数。

3.根据权利要求1所述的数据统计图表生成方法，其特征在于，所述过滤条件包括目标字段、比较条件、条件值，其中，所述比较条件包括大于、大于等于、小于、小于等于、等于、晚于、早于、不晚于、不早于、关键字、取值区间，所述条件值包括数字型、字符型、日期型、数值区间、日期区间、字符型集合。

4.根据权利要求1所述的数据统计图表生成方法，其特征在于，所述根据所述字段及所述过滤条件，创建数据库视图包括：

对所述字段和过滤条件和数据库视图信息进行持久化存储，其中，所述数据库视图信息包括视图名称、视图存储位置、视图中的字段。

5.根据权利要求1所述的数据统计图表生成方法，其特征在于，所述统计图表的配置文件包括统计图表的名称、统计图表的类型、统计图表展示的数据项、数据统计方式，其中，所述数据项包括横轴的数据、纵轴的数据，所述统计方式包括求和、求平均值、按时间分组、按字段值分组。

6.根据权利要求1所述的数据统计图表生成方法，其特征在于，所述维度查询模块包括Mondrian、Kylin。

7.根据权利要求1所述的数据统计图表生成方法，其特征在于，所述图表生成引擎包括JFreeChart、ECharts、Highcharts。