CN109299187A - 数据分析方法、装置及设备 - Google Patents

Abstract

本发明提供了一种数据分析方法、装置、设备及计算机可读存储介质。其中，数据分析方法包括：响应于分析指令，解析分析指令中的指定数据源；分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；在可视化界面中显示数据关系信息。本发明提供的数据分析方法面向ERP系统的开发人员，通过分析出指定数据源中的数据之间的数据关系信息，并据此生成可视化的界面，能够便于开发人员理解数据之间的关系，从而缩短ERP系统扩展过程中的时间消耗，快速解决排查、定位数据问题，提高客户的满意度。此外，本方法的运行独立于ERP系统，不需要额外的硬件设备，免安装，便于开发人员使用。

Description

数据分析方法、装置及设备

技术领域

本发明涉及信息处理技术领域，具体而言，涉及一种数据分析方法、一种数据分析装置、一种数据分析设备及一种计算机可读存储介质。

背景技术

在企业信息化高度发展的今天，ERP(Enterprise Resource Planning，企业资源计划)系统的使用率越来越高，客户对业务的需求在不断地提升，系统进行扩展开发频繁。扩展开发必将导致表关系的变化，而且由于没有成行自动统计工具，表关系不明确一直困扰着维护人员和扩展开发人员。企业的数据量一般都特别大，对于不熟悉业务的技术人员来说，排除问题就更加困难，一般的解决方式是逐个表手工查询，这种方式比较耗时而且定位数据不准确，解决问题的低效会导致客户的满意度降低。

发明内容

本发明旨在至少解决现有技术或相关技术中存在的技术问题之一。

为此，本发明的第一个方面在于，提出一种数据分析方法。

本发明的第二个方面在于，提出一种数据分析装置。

本发明的第三个方面在于，提出一种数据分析设备。

本发明的第四个方面在于，提出一种计算机可读存储介质。

有鉴于此，根据本发明的第一个方面，提供了一种数据分析方法，包括：响应于分析指令，解析分析指令中的指定数据源；分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；在可视化界面中显示数据关系信息。

本发明提供的数据分析方法面向ERP系统的开发人员，通过分析出指定数据源中的数据之间的数据关系信息，并据此生成可视化的界面，能够便于开发人员理解数据之间的关系，从而缩短ERP系统扩展过程中的时间消耗，快速解决排查、定位数据问题，提高客户的满意度。此外，本方法的运行独立于ERP系统，不需要额外的硬件设备，免安装，便于开发人员使用。

另外，根据本发明提供的上述技术方案中的数据分析方法，还可以具有如下附加技术特征：

在上述技术方案中，优选地，在可视化界面中显示数据关系信息的步骤包括：获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典；在可视化界面中显示数据关系图和/或数据字典。

在该技术方案中，具体限定了如何显示数据关系信息。首先针对分析出的数据关系信息，按照展示指令选择性地生成数据关系图和/或数据字典，再在可视化的图形界面中加以展示，能够便于开发人员理解数据之间的关系。其中，数据关系图以图标代表数据，以连线的方式显示不同数据之间的关联；数据字典则以字典的形式形成索引，用户可输入具体的数据，从而得到与之关联的其他数据，并以图形化的界面加以展示，便于快速定位。可以想到地，还可以将以上两者相结合，先展示数据关系图，再在接收到待检索的数据时，在数据关系图中将该数据和与之关联的数据加以突出显示，例如闪烁或调整为高亮色，调整为高亮色时还可将待检索的数据以一种颜色显示，将与该数据关联的其他数据以其他颜色显示，甚至可以按照关系的不同显示为不同的色彩，这都属于本发明的保护范围。通过以上方式提供友好的交互界面，有利于开发人员使用。此外，展示指令用于选择以上述三种形式中的哪一种展示数据关系信息，可以是预先设置的，也可以是用户当前输入的，由用户当前输入时，可随分析指令一同输入，也可在分析完成后再提示用户选择展示方式。

在上述任一技术方案中，优选地，指定数据源对应的各项数据包括表格和表格中的字段；数据关系信息包括同一表格中不同的字段之间的关联关系、不同的表格之间的关联关系、多个表格中不同的字段之间的关联关系。

在该技术方案中，具体限定了指定数据源对应的数据和数据关系信息的内容。ERP系统借助表格记录企业管理过程中产生的各项数据，每个表格中都包含有多个字段，对于同一表格，其内的字段之间通常存在关联，即上下游关系，也就是下游字段的数据受上游字段的数据影响，从而具备表结构；对于多个表格，不同表格之间会因为包含相同或相关联的字段而产生关联，从而具备表关系，表关系具体由这些表格中的字段之间的上述关联关系来体现。本方法可利用数据关系信息记录整体的表关系，通过提供可视化的界面，来展现表结构、表关系，并提供数据字段，具体地，利用数据关系图和数据字典，可以针对表、字段等信息快速检索数据库，陈列出相关表以及字段上下游数据关系等，快速解决排查、定位数据问题，易于开发人员理解数据的业务含义，便于后续的开发工作。

在上述任一技术方案中，优选地，分析指定数据源以生成数据关系信息的操作包括：当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息；当指定数据源为至少一个数据库时，获取至少一个数据库的连接，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息。

在该技术方案中，数据源支持元数据文件和数据库，针对不同的数据源将执行不同的数据分析操作。元数据是关于数据的组织、数据域及其关系的信息，简言之，就是描述数据的数据，元数据文件(具体为bmf文件)是模型文件，一个模型文件相当于一个元数据组件，可以对应一个或多个表格。元数据文件是部署的基本单元，用于描述关联字段之间的关系，因而直接分析元数据文件的内容即可得到数据关系信息。数据库是以一定方式储存在一起、能予多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，当指定数据源是数据库时，则基于深度学习算法对数据库中的数据进行数据挖掘，分析并生成数据关系信息。进一步地，当指定数据源是数据库时，分析数据前还要先获取数据库连接，本方法提供基于配置的方式来个性化数据库连接，以适配市场上主流的数据库，可直接获取相应数据库的连接，开发人员不必再执行相应数据库的配置操作，即输入数据库地址，简化了开发人员的操作。此外，元数据文件和数据库的数量都可为至少一个，换言之，可以针对指定的一个或多个元数据文件进行数据分析，也可以针对指定的一个或多个数据库进行数据分析，还可以针对指定的至少一个元数据文件和至少一个数据库进行数据分析。

在上述任一技术方案中，优选地，在获取至少一个数据库的连接的操作之后，还包括：实时监控针对至少一个数据库的操作语句；在监控日志中记录操作语句。

在该技术方案中，数据库可视为存储电子文件的处所，用户可以借助操作语句(常用SQL语句)对文件中的数据运行新增、截取、更新、删除等操作。当指定数据源为数据库并获取到数据库连接时，通过实时监控操作语句并持久化到硬盘，即在监控日志中记录操作语句并存储监控日志，一方面能够实时监控记录对数据源的所有操作，为数据恢复提供操作记录以防止误操作；另一方面，提供日志化的操作记录，可便于开发人员对操作语句进行分析和优化。

在上述任一技术方案中，优选地，在响应于分析指令，解析分析指令中的指定数据源的步骤之前，还包括：响应于使用原分析结果的指令，获取最近一次生成的数据关系信息，并执行在可视化界面中显示数据关系信息的步骤；响应于重新分析的指令，发出提示信息以提示用户输入分析指令。

在该技术方案中，用户在界面上可以选择是否重新进行数据分析，使得分析流程按需进行，减少了不必要的计算量，提高了分析的灵活性。具体来说，当需要改变指定数据源时，就需要重新进行数据分析。如果没有重新分析的需求，则自动根据上一次的分析结果进行图形化界面展现，如果需要重新进行数据分析，则提示用户输入分析指令以获得待分析的指定数据源，进而执行前述分析步骤。

根据本发明的第二个方面，提供了一种数据分析装置，包括：解析模块，用于响应于分析指令，解析分析指令中的指定数据源；分析模块，用于分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；视图模块，用于在可视化界面中显示数据关系信息。

本发明提供的数据分析装置面向ERP系统的开发人员，首先通过解析模块解析用户的分析指令，再由分析模块分析出指定数据源中的数据之间的数据关系信息，最后由视图模块据此生成可视化的界面，能够便于开发人员理解数据之间的关系，从而缩短ERP系统扩展过程中的时间消耗，快速解决排查、定位数据问题，提高客户的满意度。此外，本装置独立于ERP系统运行，不需要额外的硬件设备，免安装，便于开发人员使用。

另外，根据本发明提供的上述技术方案中的数据分析装置，还可以具有如下附加技术特征：

在上述技术方案中，优选地，视图模块包括：准备子模块，用于获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典；显示子模块，用于在可视化界面中显示数据关系图和/或数据字典。

在该技术方案中，具体限定了视图模块。首先准备子模块针对分析出的数据关系信息，按照展示指令选择性地生成数据关系图和/或数据字典，显示子模块再在可视化的图形界面中加以展示，能够便于开发人员理解数据之间的关系。其中，数据关系图以图标代表数据，以连线的方式显示不同数据之间的关联；数据字典则以字典的形式形成索引，用户可输入具体的数据，从而得到与之关联的其他数据，并以图形化的界面加以展示，便于快速定位。可以想到地，还可以将以上两者相结合，先展示数据关系图，再在接收到待检索的数据时，在数据关系图中将该数据和与之关联的数据加以突出显示，例如闪烁或调整为高亮色，调整为高亮色时还可将待检索的数据以一种颜色显示，将与该数据关联的其他数据以其他颜色显示，甚至可以按照关系的不同显示为不同的色彩，这都属于本发明的保护范围。通过以上方式提供友好的交互界面，有利于开发人员使用。此外，准备子模块获取的展示指令用于选择以上述三种形式中的哪一种展示数据关系信息，可以是预先设置的，也可以是用户当前输入的，由用户当前输入时，可随分析指令一同输入，也可在分析完成后再提示用户选择展示方式。

在上述任一技术方案中，优选地，指定数据源对应的各项数据包括表格和表格中的字段；数据关系信息包括同一表格中不同的字段之间的关联关系、不同的表格之间的关联关系、多个表格中不同的字段之间的关联关系。

在该技术方案中，具体限定了指定数据源对应的数据和数据关系信息的内容。ERP系统借助表格记录企业管理过程中产生的各项数据，每个表格中都包含有多个字段，对于同一表格，其内的字段之间通常存在关联，即上下游关系，也就是下游字段的数据受上游字段的数据影响，从而具备表结构；对于多个表格，不同表格之间会因为包含相同或相关联的字段而产生关联，从而具备表关系，表关系具体由这些表格中的字段之间的上述关联关系来体现。本装置可利用数据关系信息记录整体的表关系，通过提供可视化的界面，来展现表结构、表关系，并提供数据字段，具体地，利用数据关系图和数据字典，可以针对表、字段等信息快速检索数据库，陈列出相关表以及字段上下游数据关系等，快速解决排查、定位数据问题，易于开发人员理解数据的业务含义，便于后续的开发工作。

在上述任一技术方案中，优选地，分析模块包括：文件分析器，用于当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息；数据分析器，用于当指定数据源为至少一个数据库时，获取至少一个数据库的连接，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息。

在该技术方案中，数据源支持元数据文件和数据库，分析模块针对不同的数据源将执行不同的数据分析操作。分析模块具体包括文件分析器和数据分析器，文件分析器是用于对元数据文件进行解析分析的组件，数据分析器是基于深度学习算法对数据库数据进行数据分析的组件。具体而言，元数据是关于数据的组织、数据域及其关系的信息，简言之，就是描述数据的数据，元数据文件(具体为bmf文件)是模型文件，一个模型文件相当于一个元数据组件，可以对应一个或多个表格。元数据文件是部署的基本单元，用于描述关联字段之间的关系，因而文件分析器直接分析元数据文件的内容即可得到数据关系信息。数据库是以一定方式储存在一起、能予多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，当指定数据源是数据库时，数据分析器基于深度学习算法对数据库中的数据进行数据挖掘，分析并生成数据关系信息。此外，元数据文件和数据库的数量都可为至少一个，换言之，分析模块可以针对指定的一个或多个元数据文件进行数据分析，也可以针对指定的一个或多个数据库进行数据分析，还可以针对指定的至少一个元数据文件和至少一个数据库进行数据分析。

在上述任一技术方案中，优选地，分析模块还包括数据库连接组件，用于维护与至少一个数据库的连接会话。

在该技术方案中，分析模块还包括数据库连接组件，用于维护与数据库的连接会话。具体地，数据库连接组件采用Proxool数据库连接，提供基于配置的方式来个性化数据库连接，以适配市场上主流的数据库，可直接获取相应数据库的连接，开发人员不必再执行相应数据库的配置操作，即输入数据库地址，简化了开发人员的操作。

在上述任一技术方案中，优选地，数据库连接组件还用于实时监控针对至少一个数据库的操作语句；分析模块还包括记录子模块，用于在监控日志中记录操作语句。

在该技术方案中，数据库可视为存储电子文件的处所，用户可以借助操作语句(常用SQL语句)对文件中的数据运行新增、截取、更新、删除等操作。当数据库连接组件获取到数据库连接时，还基于连接进行对数据库的监控，由记录子模块将监控到的操作语句记录到监控日志中并持久化到硬盘，即在监控日志中记录操作语句并存储监控日志，一方面能够实时监控记录对数据源的所有操作，为数据恢复提供操作记录以防止误操作；另一方面，提供日志化的操作记录，可便于开发人员对操作语句进行分析和优化。

在上述任一技术方案中，优选地，还包括：获取模块，用于响应于使用原分析结果的指令，获取最近一次生成的数据关系信息，并激活视图模块；提示模块，用于响应于重新分析的指令，发出提示信息以提示用户输入分析指令。

在该技术方案中，用户在界面上可以选择是否重新进行数据分析，使得分析流程按需进行，减少了不必要的计算量，提高了分析的灵活性。具体来说，当需要改变指定数据源时，即接收到用户输入的重新分析的指令，就需要重新进行数据分析。如果没有重新分析的需求，即接收到用户输入的使用原分析结果的指令，则获取模块自动获取上一次的分析结果，以供视图模块据此进行图形化界面展现；如果接收到用户输入的重新分析的指令，则提示模块提示用户输入分析指令以获得待分析的指定数据源，进而激活解析模块和分析模块以启动对新指定的数据源的分析。

根据本发明的第三个方面，提供了一种数据分析设备，包括：存储器，配置为存储可执行指令；处理器，配置为执行存储的指令以实现如上述任一技术方案所述方法的步骤，因而具备该数据分析方法的全部技术效果，在此不再赘述。

根据本发明的第四个方面，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现如上述任一技术方案所述方法的步骤，因而具备该数据分析方法的全部技术效果，在此不再赘述。

本发明的附加方面和优点将在下面的描述部分中变得明显，或通过本发明的实践了解到。

附图说明

本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解，其中：

图1示出了本发明第一个实施例的数据分析方法的示意流程图；

图2示出了本发明第二个实施例的数据分析方法的示意流程图；

图3示出了本发明第三个实施例的数据分析方法的示意流程图；

图4示出了本发明第四个实施例的数据分析方法的示意流程图；

图5示出了本发明第五个实施例的数据分析方法的示意流程图；

图6示出了本发明第一个实施例的数据分析装置的示意框图；

图7示出了本发明第二个实施例的数据分析装置的示意框图；

图8示出了本发明第三个实施例的数据分析装置的示意框图；

图9示出了本发明第四个实施例的数据分析装置的示意框图；

图10示出了本发明第五个实施例的数据分析装置的示意框图；

图11示出了本发明一个实施例的数据分析装置的数据导向图；

图12示出了本发明一个实施例的数据分析设备的示意框图。

具体实施方式

为了能够更清楚地理解本发明的上述目的、特征和优点，下面结合附图和具体实施方式对本发明进行进一步的详细描述。需要说明的是，在不冲突的情况下，本申请的实施例及实施例中的特征可以相互组合。

在下面的描述中阐述了很多具体细节以便于充分理解本发明，但是，本发明还可以采用其他不同于在此描述的其他方式来实施，因此，本发明的保护范围并不受下面公开的具体实施例的限制。

本发明第一方面的实施例提供了一种数据分析方法。

图1示出了本发明第一个实施例的数据分析方法的示意流程图。如图1所示，该方法包括：

S102，响应于分析指令，解析分析指令中的指定数据源；

S104，分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；

S106，在可视化界面中显示数据关系信息。

本发明提供的数据分析方法面向ERP系统的开发人员，通过分析出指定数据源中的数据之间的数据关系信息，并据此生成可视化的界面，能够便于开发人员理解数据之间的关系，从而缩短ERP系统扩展过程中的时间消耗，快速解决排查、定位数据问题，提高客户的满意度。此外，本方法的运行独立于ERP系统，不需要额外的硬件设备，免安装，便于开发人员使用。具体地，通过图表插件将数据关系信息进行图形化的展现。

图2示出了本发明第二个实施例的数据分析方法的示意流程图。如图2所示，该方法包括：

S202，响应于分析指令，解析分析指令中的指定数据源；

S204，分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；

S206，获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典；

S208，在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，具体限定了如何显示数据关系信息。首先针对分析出的数据关系信息，按照展示指令选择性地生成数据关系图和/或数据字典，再在可视化的图形界面中加以展示，能够便于开发人员理解数据之间的关系。其中，数据关系图以图标代表数据，以连线的方式显示不同数据之间的关联；数据字典则以字典的形式形成索引，用户可输入具体的数据，从而得到与之关联的其他数据，并以图形化的界面加以展示，便于快速定位。可以想到地，还可以将以上两者相结合，先展示数据关系图，再在接收到待检索的数据时，在数据关系图中将该数据和与之关联的数据加以突出显示，例如闪烁或调整为高亮色，调整为高亮色时还可将待检索的数据以一种颜色显示，将与该数据关联的其他数据以其他颜色显示，甚至可以按照关系的不同显示为不同的色彩，这都属于本发明的保护范围。通过以上方式提供友好的交互界面，有利于开发人员使用。此外，展示指令用于选择以上述三种形式中的哪一种展示数据关系信息，可以是预先设置的，也可以是用户当前输入的，由用户当前输入时，可随分析指令一同输入，也可在分析完成后再提示用户选择展示方式。

在本发明的一个实施例中，优选地，指定数据源对应的各项数据包括表格和表格中的字段；数据关系信息包括同一表格中不同的字段之间的关联关系、不同的表格之间的关联关系、多个表格中不同的字段之间的关联关系。

在该实施例中，具体限定了指定数据源对应的数据和数据关系信息的内容。ERP系统借助表格记录企业管理过程中产生的各项数据，每个表格中都包含有多个字段，对于同一表格，其内的字段之间通常存在关联，即上下游关系，也就是下游字段的数据受上游字段的数据影响，从而具备表结构；对于多个表格，不同表格之间会因为包含相同或相关联的字段而产生关联，从而具备表关系，表关系具体由这些表格中的字段之间的上述关联关系来体现。本方法可利用数据关系信息记录整体的表关系，通过提供可视化的界面，来展现表结构、表关系，并提供数据字段，具体地，利用数据关系图和数据字典，可以针对表、字段等信息快速检索数据库，陈列出相关表以及字段上下游数据关系等，快速解决排查、定位数据问题，易于开发人员理解数据的业务含义，便于后续的开发工作。具体地，本方法基于Echart数据图表库来绘制表结构、表关系和数据字段等可视化图标，以提供友好的交互界面。

图3示出了本发明第三个实施例的数据分析方法的示意流程图。如图3所示，该方法包括：

S302，响应于分析指令，解析分析指令中的指定数据源；

S304，当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；

S306，当指定数据源为至少一个数据库时，获取至少一个数据库的连接，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息；

S308，获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典；

S310，在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，数据源支持元数据文件和数据库，针对不同的数据源将执行不同的数据分析操作。元数据是关于数据的组织、数据域及其关系的信息，简言之，就是描述数据的数据，元数据文件(具体为bmf文件)是模型文件，一个模型文件相当于一个元数据组件，可以对应一个或多个表格。元数据文件是部署的基本单元，用于描述关联字段之间的关系，因而直接分析元数据文件的内容即可得到数据关系信息。数据库是以一定方式储存在一起、能予多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，当指定数据源是数据库时，则基于深度学习算法对数据库中的数据进行数据挖掘，分析并生成数据关系信息。具体地，基于深度学习算法DL4J和ND4J来进行数据挖掘，通过深度学习分析数据表结构以及表关系，通过DOM4J来将表结构以及表关系持久化到文件(例如pdm文件)，即生成数据关系信息并存储下来。进一步地，当指定数据源是数据库时，分析数据前还要先获取数据库连接，本方法采用Proxool数据库连接，提供基于配置的方式来个性化数据库连接，以适配市场上主流的数据库，如Oracle，MySql等，可直接获取相应数据库的连接，开发人员不必再执行相应数据库的配置操作，即输入数据库地址，简化了开发人员的操作。此外，元数据文件和数据库的数量都可为至少一个，换言之，可以针对指定的一个或多个元数据文件进行数据分析，也可以针对指定的一个或多个数据库进行数据分析，还可以针对指定的至少一个元数据文件和至少一个数据库进行数据分析。

图4示出了本发明第四个实施例的数据分析方法的示意流程图。如图4所示，该方法包括：

S402，响应于分析指令，解析分析指令中的指定数据源；

S404，当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；

S406，当指定数据源为至少一个数据库时，获取至少一个数据库的连接；

S408，实时监控针对至少一个数据库的操作语句；

S410，在监控日志中记录操作语句；

S412，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息；

S414，获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典；

S416，在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，数据库可视为存储电子文件的处所，用户可以借助操作语句(常用SQL语句)对文件中的数据运行新增、截取、更新、删除等操作。当指定数据源为数据库并获取到数据库连接时，通过实时监控操作语句并持久化到硬盘，即在监控日志中记录操作语句并存储监控日志，一方面能够实时监控记录对数据源的所有操作，为数据恢复提供操作记录以防止误操作；另一方面，提供日志化的操作记录，可便于开发人员对操作语句进行分析和优化。

图5示出了本发明第五个实施例的数据分析方法的示意流程图。如图5所示，该方法包括：

S502，响应于使用原分析结果的指令，获取最近一次生成的数据关系信息，并转到S518；

S504，响应于重新分析的指令，发出提示信息以提示用户输入分析指令；

S506，响应于分析指令，解析分析指令中的指定数据源；

S508，当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；

S510，当指定数据源为至少一个数据库时，获取至少一个数据库的连接；

S512，实时监控针对至少一个数据库的操作语句；

S514，在监控日志中记录操作语句；

S516，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息；

S518，获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典；

S520，在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，用户在界面上可以选择是否重新进行数据分析，使得分析流程按需进行，减少了不必要的计算量，提高了分析的灵活性。具体来说，当需要改变指定数据源时，就需要重新进行数据分析。如果没有重新分析的需求，则自动根据上一次的分析结果进行图形化界面展现，如果需要重新进行数据分析，则提示用户输入分析指令以获得待分析的指定数据源，进而执行前述分析步骤。

综上所述，采用本发明公开的实施例提供的方法时，用户在界面上可以选择是否重新进行数据分析。如果没有重新分析的需求，则自动根据上一次的分析结果进行图形化界面展现。用户如果需要重新进行数据分析，需要在界面中输入指定数据源，数据源支持数据库和元数据文件。当指定数据源为数据库时，先获取数据库连接，在获取连接后对数据库进行实时监控，并生成监控日志。同时基于深度学习算法对数据库中的数据进行数据分析以生成分析结果，再进行图形化的界面展现。当指定数据源为元数据文件时，对元数据文件的内容进行分析，并生成分析结果，再对分析结果进行图形化的展现。

图6示出了本发明第一个实施例的数据分析装置100的示意框图。如图6所示，该装置100包括：

解析模块102，用于响应于分析指令，解析分析指令中的指定数据源；

分析模块104，用于分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；

视图模块106，用于在可视化界面中显示数据关系信息。

本发明提供的数据分析装置100面向ERP系统的开发人员，首先通过解析模块102解析用户的分析指令，再由分析模块104分析出指定数据源中的数据之间的数据关系信息，最后由视图模块106据此生成可视化的界面，能够便于开发人员理解数据之间的关系，从而缩短ERP系统扩展过程中的时间消耗，快速解决排查、定位数据问题，提高客户的满意度。此外，本装置100独立于ERP系统运行，不需要额外的硬件设备，免安装，便于开发人员使用。具体地，视图模块106通过图表插件将数据关系信息进行图形化的展现。

图7示出了本发明第二个实施例的数据分析装置200的示意框图。如图7所示，该装置200包括：

解析模块202，用于响应于分析指令，解析分析指令中的指定数据源；

分析模块204，用于分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系；

视图模块206，用于在可视化界面中显示数据关系信息，视图模块206包括准备子模块208和显示子模块210，准备子模块208用于获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典，显示子模块210用于在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，具体限定了视图模块206。首先准备子模块208针对分析出的数据关系信息，按照展示指令选择性地生成数据关系图和/或数据字典，显示子模块210再在可视化的图形界面中加以展示，能够便于开发人员理解数据之间的关系。其中，数据关系图以图标代表数据，以连线的方式显示不同数据之间的关联；数据字典则以字典的形式形成索引，用户可输入具体的数据，从而得到与之关联的其他数据，并以图形化的界面加以展示，便于快速定位。可以想到地，还可以将以上两者相结合，先展示数据关系图，再在接收到待检索的数据时，在数据关系图中将该数据和与之关联的数据加以突出显示，例如闪烁或调整为高亮色，调整为高亮色时还可将待检索的数据以一种颜色显示，将与该数据关联的其他数据以其他颜色显示，甚至可以按照关系的不同显示为不同的色彩，这都属于本发明的保护范围。通过以上方式提供友好的交互界面，有利于开发人员使用。此外，准备子模块208获取的展示指令用于选择以上述三种形式中的哪一种展示数据关系信息，可以是预先设置的，也可以是用户当前输入的，由用户当前输入时，可随分析指令一同输入，也可在分析完成后再提示用户选择展示方式。

在本发明的一个实施例中，优选地，指定数据源对应的各项数据包括表格和表格中的字段；数据关系信息包括同一表格中不同的字段之间的关联关系、不同的表格之间的关联关系、多个表格中不同的字段之间的关联关系。

在该实施例中，具体限定了指定数据源对应的数据和数据关系信息的内容。ERP系统借助表格记录企业管理过程中产生的各项数据，每个表格中都包含有多个字段，对于同一表格，其内的字段之间通常存在关联，即上下游关系，也就是下游字段的数据受上游字段的数据影响，从而具备表结构；对于多个表格，不同表格之间会因为包含相同或相关联的字段而产生关联，从而具备表关系，表关系具体由这些表格中的字段之间的上述关联关系来体现。本装置可利用数据关系信息记录整体的表关系，通过提供可视化的界面，来展现表结构、表关系，并提供数据字段，具体地，利用数据关系图和数据字典，可以针对表、字段等信息快速检索数据库，陈列出相关表以及字段上下游数据关系等，快速解决排查、定位数据问题，易于开发人员理解数据的业务含义，便于后续的开发工作。具体地，本装置基于Echart数据图表库来绘制表结构、表关系和数据字段等可视化图标，以提供友好的交互界面。

图8示出了本发明第三个实施例的数据分析装置300的示意框图。如图8所示，该装置300包括：

解析模块302，用于响应于分析指令，解析分析指令中的指定数据源；

分析模块304，用于分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系，分析模块304包括文件分析器306和数据分析器308，文件分析器306用于当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息，数据分析器308用于当指定数据源为至少一个数据库时，获取至少一个数据库的连接，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息；

视图模块310，用于在可视化界面中显示数据关系信息，视图模块310包括准备子模块312和显示子模块314，准备子模块312用于获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典，显示子模块314用于在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，数据源支持元数据文件和数据库，分析模块304针对不同的数据源将执行不同的数据分析操作。分析模块304具体包括文件分析器306和数据分析器308，文件分析器306是用于对元数据文件进行解析分析的组件，数据分析器308是基于深度学习算法对数据库数据进行数据分析的组件。具体而言，元数据是关于数据的组织、数据域及其关系的信息，简言之，就是描述数据的数据，元数据文件(具体为bmf文件)是模型文件，一个模型文件相当于一个元数据组件，可以对应一个或多个表格。元数据文件是部署的基本单元，用于描述关联字段之间的关系，因而文件分析器306直接分析元数据文件的内容即可得到数据关系信息。数据库是以一定方式储存在一起、能予多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合，当指定数据源是数据库时，数据分析器基于深度学习算法对数据库中的数据进行数据挖掘，分析并生成数据关系信息。具体地，基于深度学习算法DL4J和ND4J来进行数据挖掘，通过深度学习分析数据表结构以及表关系，通过DOM4J来将表结构以及表关系持久化到文件(例如pdm文件)，即生成数据关系信息并存储下来。此外，元数据文件和数据库的数量都可为至少一个，换言之，分析模块304可以针对指定的一个或多个元数据文件进行数据分析，也可以针对指定的一个或多个数据库进行数据分析，还可以针对指定的至少一个元数据文件和至少一个数据库进行数据分析。

图9示出了本发明第四个实施例的数据分析装置400的示意框图。如图9所示，该装置400包括：

解析模块402，用于响应于分析指令，解析分析指令中的指定数据源；

分析模块404，用于分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系，分析模块404包括文件分析器406、数据分析器408、数据库连接组件410和记录子模块412，文件分析器406用于当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息，数据分析器408用于当指定数据源为至少一个数据库时，获取至少一个数据库的连接，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息，数据库连接组件410用于维护与至少一个数据库的连接会话，还用于实时监控针对至少一个数据库的操作语句，记录子模块412用于在监控日志中记录操作语句；

视图模块414，用于在可视化界面中显示数据关系信息，视图模块414包括准备子模块416和显示子模块418，准备子模块416用于获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典，显示子模块418用于在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，分析模块404还包括数据库连接组件410，用于维护与数据库的连接会话。具体地，数据库连接组件410采用Proxool数据库连接，提供基于配置的方式来个性化数据库连接，以适配市场上主流的数据库，如Oracle，MySql等，可直接获取相应数据库的连接，开发人员不必再执行相应数据库的配置操作，即输入数据库地址，简化了开发人员的操作。

此外，数据库可视为存储电子文件的处所，用户可以借助操作语句(常用SQL语句)对文件中的数据运行新增、截取、更新、删除等操作。当数据库连接组件410获取到数据库连接时，还基于连接进行对数据库的监控，由记录子模块412将监控到的操作语句记录到监控日志(监控日志是数据库连接后，对数据库的操作进行实时监控而生成的日志文件，针对SQL语句即为SQL日志)中并持久化到硬盘，即在监控日志中记录操作语句并存储监控日志，一方面能够实时监控记录对数据源的所有操作，为数据恢复提供操作记录以防止误操作；另一方面，提供日志化的操作记录，可便于开发人员对操作语句进行分析和优化。

图10示出了本发明第五个实施例的数据分析装置500的示意框图。如图10所示，该装置500包括：

获取模块502，用于响应于使用原分析结果的指令，获取最近一次生成的数据关系信息，并激活视图模块518；

提示模块504，用于响应于重新分析的指令，发出提示信息以提示用户输入分析指令；

解析模块506，用于响应于分析指令，解析分析指令中的指定数据源；

分析模块508，用于分析指定数据源以生成数据关系信息，数据关系信息包括指定数据源对应的各项数据之间的关系，分析模块508包括文件分析器510、数据分析器512、数据库连接组件514和记录子模块516，文件分析器510用于当指定数据源为至少一个元数据文件时，分析至少一个元数据文件以生成数据关系信息，数据分析器512用于当指定数据源为至少一个数据库时，获取至少一个数据库的连接，基于深度学习算法分析至少一个数据库中的数据以生成数据关系信息，数据库连接组件514用于维护与至少一个数据库的连接会话，还用于实时监控针对至少一个数据库的操作语句，记录子模块516用于在监控日志中记录操作语句；

视图模块518，用于在可视化界面中显示数据关系信息，视图模块518包括准备子模块520和显示子模块522，准备子模块520用于获取展示指令，根据展示指令和数据关系信息生成数据关系图和/或数据字典，显示子模块522用于在可视化界面中显示数据关系图和/或数据字典。

在该实施例中，用户在界面上可以选择是否重新进行数据分析，使得分析流程按需进行，减少了不必要的计算量，提高了分析的灵活性。具体来说，当需要改变指定数据源时，即接收到用户输入的重新分析的指令，就需要重新进行数据分析。如果没有重新分析的需求，即接收到用户输入的使用原分析结果的指令，则获取模块502自动获取上一次的分析结果，以供视图模块518据此进行图形化界面展现；如果接收到用户输入的重新分析的指令，则提示模块504提示用户输入分析指令以获得待分析的指定数据源，进而激活解析模块506和分析模块508以启动对新指定的数据源的分析。

综上所述，如图11所示，采用本发明公开的实施例提供的装置时，用户在界面上可以选择是否重新进行数据分析。如果没有重新分析的需求，获取模块会自动根据上一次的分析结果(即数据关系信息)进行图形化界面展现。用户如果需要重新进行数据分析，提示模块会提示用户在界面中输入指定数据源，数据源支持数据库和元数据文件。当解析模块解析出指定数据源为数据库时，数据库连接组件会获取数据库连接，在获取连接后对数据库进行实时监控，并由记录子模块生成监控日志。同时数据分析器基于深度学习算法对数据库中的数据进行数据分析以生成分析结果，再通过视图模块进行图形化的界面展现。当解析模块解析出指定数据源为元数据文件时，文件分析器会对元数据文件的内容进行分析，并生成分析结果，视图模块再对分析结果进行图形化的展现。

如图12所示，本发明第三方面的实施例提供了一种数据分析设备60，包括：存储器602，配置为存储可执行指令；处理器604，配置为执行存储的指令以实现如上述任一实施例所述方法的步骤，因而具备该数据分析方法的全部技术效果，在此不再赘述。

具体地，上述存储器602可以包括用于数据或指令的大容量存储器。举例来说而非限制，存储器602可包括硬盘驱动器(Hard Disk Drive，HDD)、软盘驱动器、闪存、光盘、磁光盘、磁带或通用串行总线(Universal Serial Bus，USB)驱动器或者两个或更多个以上这些的组合。在合适的情况下，存储器602可包括可移除或不可移除(或固定)的介质。在合适的情况下，存储器602可在综合网关容灾设备的内部或外部。在特定实施例中，存储器602是非易失性固态存储器。在特定实施例中，存储器602包括只读存储器(ROM)。在合适的情况下，该ROM可以是掩模编程的ROM、可编程ROM(PROM)、可擦除PROM(EPROM)、电可擦除PROM(EEPROM)、电可改写ROM(EAROM)或闪存或者两个或更多个以上这些的组合。

处理器604可以包括中央处理器(CPU)，或者特定集成电路(ApplicationSpecific Integrated Circuit，ASIC)，或者可以被配置成实施本发明实施例的一个或多个集成电路。

本发明第四方面的实施例提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现如上述任一技术方案所述方法的步骤，因而具备该数据分析方法的全部技术效果，在此不再赘述。

计算机可读存储介质可以包括能够存储或传输信息的任何介质。计算机可读存储介质的例子包括电子电路、半导体存储器设备、ROM、闪存、可擦除ROM(EROM)、软盘、CD-ROM、光盘、硬盘、光纤介质、射频(RF)链路，等等。代码段可以经由诸如因特网、内联网等的计算机网络被下载。

在本发明的描述中，需要理解的是，术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本发明的描述中，“多个”的含义是至少两个，例如两个，三个等，除非另有明确具体的限定。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (15)

1.一种数据分析方法，其特征在于，包括：

响应于分析指令，解析所述分析指令中的指定数据源；

分析所述指定数据源以生成数据关系信息，所述数据关系信息包括所述指定数据源对应的各项数据之间的关系；

在可视化界面中显示所述数据关系信息。

2.根据权利要求1所述的数据分析方法，其特征在于，所述在可视化界面中显示所述数据关系信息的步骤包括：

获取展示指令，根据所述展示指令和所述数据关系信息生成数据关系图和/或数据字典；

在可视化界面中显示所述数据关系图和/或所述数据字典。

3.根据权利要求1所述的数据分析方法，其特征在于，

所述指定数据源对应的各项数据包括表格和所述表格中的字段；

所述数据关系信息包括同一所述表格中不同的所述字段之间的关联关系、不同的所述表格之间的关联关系、多个所述表格中不同的所述字段之间的关联关系。

4.根据权利要求1所述的数据分析方法，其特征在于，所述分析所述指定数据源以生成数据关系信息的操作包括：

当所述指定数据源为至少一个元数据文件时，分析所述至少一个元数据文件以生成所述数据关系信息；

当所述指定数据源为至少一个数据库时，获取所述至少一个数据库的连接，基于深度学习算法分析所述至少一个数据库中的数据以生成所述数据关系信息。

5.根据权利要求4所述的数据分析方法，其特征在于，在所述获取所述至少一个数据库的连接的操作之后，还包括：

实时监控针对所述至少一个数据库的操作语句；

在监控日志中记录所述操作语句。

6.根据权利要求1至5中任一项所述的数据分析方法，其特征在于，在所述响应于分析指令，解析所述分析指令中的指定数据源的步骤之前，还包括：

响应于使用原分析结果的指令，获取最近一次生成的所述数据关系信息，并执行所述在可视化界面中显示所述数据关系信息的步骤；

响应于重新分析的指令，发出提示信息以提示用户输入所述分析指令。

7.一种数据分析装置，其特征在于，包括：

解析模块，用于响应于分析指令，解析所述分析指令中的指定数据源；

分析模块，用于分析所述指定数据源以生成数据关系信息，所述数据关系信息包括所述指定数据源对应的各项数据之间的关系；

视图模块，用于在可视化界面中显示所述数据关系信息。

8.根据权利要求7所述的数据分析装置，其特征在于，所述视图模块包括：

准备子模块，用于获取展示指令，根据所述展示指令和所述数据关系信息生成数据关系图和/或数据字典；

显示子模块，用于在可视化界面中显示所述数据关系图和/或所述数据字典。

9.根据权利要求7所述的数据分析装置，其特征在于，

所述指定数据源对应的各项数据包括表格和所述表格中的字段；

所述数据关系信息包括同一所述表格中不同的所述字段之间的关联关系、不同的所述表格之间的关联关系、多个所述表格中不同的所述字段之间的关联关系。

10.根据权利要求7所述的数据分析装置，其特征在于，所述分析模块包括：

文件分析器，用于当所述指定数据源为至少一个元数据文件时，分析所述至少一个元数据文件以生成所述数据关系信息；

数据分析器，用于当所述指定数据源为至少一个数据库时，获取所述至少一个数据库的连接，基于深度学习算法分析所述至少一个数据库中的数据以生成所述数据关系信息。

11.根据权利要求10所述的数据分析装置，其特征在于，所述分析模块还包括数据库连接组件，用于维护与所述至少一个数据库的连接会话。

12.根据权利要求11所述的数据分析装置，其特征在于，

所述数据库连接组件还用于实时监控针对所述至少一个数据库的操作语句；

所述分析模块还包括记录子模块，用于在监控日志中记录所述操作语句。

13.根据权利要求7至12中任一项所述的数据分析装置，其特征在于，还包括：

获取模块，用于响应于使用原分析结果的指令，获取最近一次生成的所述数据关系信息，并激活所述视图模块；

提示模块，用于响应于重新分析的指令，发出提示信息以提示用户输入所述分析指令。

14.一种检测设备，其特征在于，包括：

存储器，配置为存储可执行指令；

处理器，配置为执行存储的指令以实现如权利要求1至6中任一项所述方法的步骤。

15.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述方法的步骤。