CN108170696A - 一种数据挖掘的方法 - Google Patents

Abstract

本发明涉及数据分析挖掘领域，具体涉及一种数据挖掘的方法。本发明所述的方法是对部件资源采用树形组织结构进行组织；资源树采用自定义的树状数据结构并整体存储数据库，通过解释后得到具体的树状信息；由用户自定义执行流程；资源树使用B+树算法实现；子树记录着下层子树创建的时间、节点类型；叶子结点记录文件资源的创建时间、资源类型、节点类型、资源ID；树资源的信息通过持久化整体以二进制的形式存储在数据库。本发明通过对数据挖掘中所使用到的资源进行有效的管理，简化使用流程，在用户选择算法等资源的时候给出相应的使用建议，降低各种挖掘算法使用的复杂度，使得一般的用户使用更加方便地使用本方法实现的系统。

Description

一种数据挖掘的方法

技术领域

本发明涉及数据分析挖掘领域，具体涉及一种数据挖掘的方法。

背景技术

随着计算机技术的不断发展，数据的分析挖掘、数据的组织和展示显得尤为重要，数据的价值需要通过挖掘和分析才能充分地体现出来，而挖掘通常要涉及各种流程，资源的管理涉及组织形式和存储，通过合理的资源组织能够是系统对资源的管理更加简便高效。而合理的数据挖掘流程能够使得系统具有便捷性，数据的展示更具有多样性。

发明内容

本发明解决的技术问题在于提供一种数据挖掘的方法统，使得对于普通用户来说，数据挖掘更加易于使用，系统的管理更加高效，节约成本。

本发明解决上述技术问题的技术方案是：

所述的方法是对部件资源采用树形组织结构进行组织；资源树采用自定义的树状数据结构并整体存储数据库，通过解释后得到具体的树状信息；由用户自定义执行流程；

所述的资源树使用B+树算法实现；子树记录着下层子树创建的时间、节点类型；叶子结点记录文件资源的创建时间、资源类型、节点类型、资源lD；树资源的信息通过持久化整体以二进制的形式存储在数据库。

数据源、算法库、可视化图表和用户自定义创建的文件资源都以树的分支或者叶子节点的方式组织。

用户以拖拽的方式从资源树中选择流程环节部件，当所有或部分的部件都选择完成后，通过箭头连接完成执行流程顺序。

所述方法的工作流程如下：

(1)、系统从数据库读取树结构；

(2)、根据读取的结果进行解释，得到一棵完整的资源树，并根据叶子结点查询相应资源的位置，生成json或者xml格式的数据返回到前台；

(3)、前台根据后台返回的json数据或者xml数据，把树形结构的组织数据展示出来，并且实现节点的折叠；

(4)、通过拖拽的选择方式，把组件放置面板，包括数据源组件、算法组件和可视化组件；

(5)、通过使用系统提供的箭头，把组件依次连接起来，系统按照所设置的参数依次执行流程，最后得到结果；

(6)、点击保存按钮后，资源树通过json格式或者xml格式返回，后台解释后存入数据库。

本发明通过对数据挖掘中所使用到的资源进行有效的管理，简化使用流程，在用户选择算法等资源的时候给出相应的使用建议，降低各种挖掘算法使用的复杂度，使得一般的用户使用更加方便地使用本方法实现的系统。

本发明通过以树形结构组织资源并展示给用户，用户通过拖拽资源部件到面板，并以箭头线连接部件，表示执行的流程。除了系统固定部分的资源，用户是可以在资源树上新建文件资源，为了减少数据库设计的复杂性和提高效率，资源树以持久化二进制文件的方式存储于数据库。

附图说明

下面结合附图对本发明进一步说明：

图1是本发明用户自定义挖掘流程图；

图2是本发明资源树解释流程图。

具体实施方式

本发明所述的方法的主要思想是：通过以树形结构组织资源并展示给用户，用户通过拖拽资源部件到面板，并以箭头线连接部件，表示执行的流程。除了系统固定部分的资源，用户是可以在资源树上新建文件资源，为了减少数据库设计的复杂性和提高效率，资源树以持久化二进制文件的方式存储于数据库。

如图1所示，整个工作详细流程如下：

1、系统从数据库读取树结构；

2、根据读取的结果进行解释，得到一棵完整的资源树，并根据叶子结点查询相应资源的位置，生成json或者xml格式的数据返回到前台；

3、前台根据后台返回的json数据或者xml数据，把树形结构的组织数据展示出来，并且实现节点的折叠；

4、通过拖拽的选择方式，把组件放置面板，包括数据源组件、算法组件和可视化组件；

5、通过使用系统提供的箭头，把组件依次连接起来，系统会按照所设置的参数依次执行流程，最后得到结果；

6、点击保存按钮后，资源树通过json格式或者xml格式返回，后台解释后存入数据库。

见图2所示，本发明首先通过读取数据库的树信息，然后解释成json或者xml的数据格式后，返回给前端进行展示。如果前端发生创建或者删除节点的事件，将会及时反馈到后台，后台重新构造树结构，把构造的结果返回前端，并且把新的树信息存储到数据库。

本发明设置流程环节所涉及的部件包括数据源、算法库和可视化图表。数据源包括如下形式的数据：关系型数据库、文本类型数据、HDFS大数据、虚拟数据库数据；算法库是一个如同容器一样的可以动态更新算法的部件；可视化图表包括2D图表和3D图表，用于对挖掘结果或者数据的直接展示。

Claims (5)

1.一种数据挖掘的方法，其特征在于：所述的方法是对部件资源采用树形组织结构进行组织；资源树采用自定义的树状数据结构并整体存储数据库，通过解释后得到具体的树状信息；由用户自定义执行流程；

所述的资源树使用B+树算法实现；子树记录着下层子树创建的时间、节点类型；叶子结点记录文件资源的创建时间、资源类型、节点类型、资源ID；树资源的信息通过持久化整体以二进制的形式存储在数据库。

2.根据权利要求1所述的数据挖掘的方法，树形组织结构，其特征在于：数据源、算法库、可视化图表和用户自定义创建的文件资源都以树的分支或者叶子节点的方式组织。

3.根据权利要求1所述的数据挖掘的方法，其特点在于：用户以拖拽的方式从资源树中选择流程环节部件，当所有或部分的部件都选择完成后，通过箭头连接完成执行流程顺序。

4.根据权利要求2所述的数据挖掘的方法，其特点在于：用户以拖拽的方式从资源树中选择流程环节部件，当所有或部分的部件都选择完成后，通过箭头连接完成执行流程顺序。

5.根据权利要求1至4任一项所述的数据挖掘的方法，其特点在于：所述方法的工作流程如下：

(1)、系统从数据库读取树结构；

(2)、根据读取的结果进行解释，得到一棵完整的资源树，并根据叶子结点查询相应资源的位置，生成json或者xml格式的数据返回到前台；

(3)、前台根据后台返回的json数据或者xml数据，把树形结构的组织数据展示出来，并且实现节点的折叠；

(4)、通过拖拽的选择方式，把组件放置面板，包括数据源组件、算法组件和可视化组件；

(5)、通过使用系统提供的箭头，把组件依次连接起来，系统按照所设置的参数依次执行流程，最后得到结果；

(6)、点击保存按钮后，资源树通过json格式或者xml格式返回，后台解释后存入数据库。