CN104537035A - 一种数据融合应用系统和方法 - Google Patents

Abstract

本发明公开了一种数据融合应用系统和方法，涉及数据融合应用领域。该系统包括：核心调度器和数据应用组件，所述数据应用组件与所述核心调度器数据连接；所述核心调度器用于对所述数据应用组件的调度和数据交换；所述数据应用组件用于实现数据应用功能的开发和实现数据应用。本发明通过数据融合应用核心调度器，整合业务数据录入组件、流程组件、数据集成组件、报表展现组件、多维分析处理、数据挖掘组件，以及外部接口组件和门户应用组件，构建的数据融合应用系统，不仅满足了数据应用的不同开发要求，而且解决了系统开发管理难度大的问题，提高了开发效率，降低了系统建设成本。

Description

一种数据融合应用系统和方法

技术领域

本发明涉及数据融合应用领域，尤其涉及一种数据融合应用系统和方法。

背景技术

企事业单位对数据的应用涉及业务数据录入处理、数据导入处理、流程处理、数据集成处理、报表展现处理、图形展现处理、多维分析处理、数据分析挖掘处理等多个过程。

目前，针对多个数据应用过程，一般需要多个不同的系统来分别实现不同的数据应用过程，比如，通过一般的业务支撑系统实现业务数据录入处理、数据导入处理和流程处理；通过数据集成工具(ETL)实现数据的加载和转换集成处理(如INFORMATIC)；通过商业智能展现工具(如BO、Cognos)实现报表展现处理、图形展现处理和多维分析处理；通过数据挖掘工具实现数据分析挖掘(如SAS)处理，然后再将这些系统或工具集成起来，应用集成的功能实现数据的融合应用。

但是，由于涉及到的系统或工具比较多，所以，不仅项目管理困难，而且，基于上述模式系统开发厂商需要掌握不同厂家的工具，开发难度大，需要进行多次的数据库配置，另外，需要购买多个系统或工具，成本比较高。

发明内容

本发明的目的在于提供一种数据融合应用系统和方法，从而解决现有技术中存在的前述问题。

为了实现上述目的，本发明采用的技术方案如下：

一种数据融合应用系统，包括：

核心调度器和数据应用组件，所述数据应用组件与所述核心调度器数据连接；

所述核心调度器用于对所述数据应用组件的调度和数据交换；

所述数据应用组件用于实现数据应用功能的开发和实现数据应用。

进一步地，还包括门户应用组件，所述门户应用组件与所述核心调度器进行数据连接；

所述门户应用组件用于构建数据应用的门户，所述数据应用的门户用于发布利用所述数据应用组件进行数据应用的结果。

优选地，所述门户应用组件包括，

系统登录模块：用于构建数据应用的门户；

个性化定制模块：用于发布利用所述数据应用组件开发的数据应用。

进一步地，还包括外部接口组件，所述外部接口组件用于将所述数据融合应用系统连接于外系统。

其中，所述外部接口组件用于将所述数据融合应用系统连接于外系统，具体包括单点登录和统一授权管理。

优选地，所述核心调度器包括，

连接会话控制模块：用于确保所述数据应用组件在会话周期内能够正常访问，还用于实现访问用户的信息管理；

访问权限控制模块：用于利用规则库对所述数据应用组件访问权限及数据访问权限进行安全控制；

数据库连接控制模块：用于实现数据库的连接和断开，其中，连接包括支持Java数据库连接(JDBC)标准和Java命名和目录接口(JNDI)标准的两种连接模式；

配置文件管理模块：用于对所有配置文件进行集中管理，还用于根据需要将配置后的配置文件传递给所述数据应用组件；

数据交换管理模块：用于所述数据应用组件之间的数据交换；

数据应用组件调用接口模块：用于为所述数据应用组件提供可用的调用接口，还用于调用所述数据应用组件的接口；

任务定时器模块：用于根据配置策略实现任务定时触发，还用于在任务失败后重新启动或放弃。

优选地，所述数据应用组件包括：数据录入组件、流程组件、数据集成组件、报表展现组件、多维分析组件和数据挖掘组件中的至少一种；

所述数据录入组件用于生成录入界面、配置访问资源和管理访问用户；

所述流程组件用于实现流程配置、流程审批、待办和流程查看；

所述数据集成组件用于数据转换设计、调度任务设计、数据转换执行和调度任务执行；

所述报表展现组件用于报表设计和展示，所述报表包括一般表格、分组表格、复杂表格以及线图、饼图、柱状图，其中线图、饼图、柱状图支持3Dflash图形展示；

所述多维分析组件用于多维分析方式的设计与展示，所述多维分析方式包括上钻、下钻、切片、切块和旋转；

所述数据挖掘组件包括模型构建组件、算法库、模型库和模型运行组件，所述模型构建组件用于算法模型的选择，所述模型运行组件用于生成日常数据。

一种数据融合应用方法，包括如下步骤：

步骤1，使用数据录入组件构建业务录入界面，调用数据集成组件导入数据；

步骤2，使用流程组件设定所述数据的业务功能流转流程，包括流程的发起和流转；

步骤3，使用所述数据集成组件进行数据加工、集成处理；

步骤4，使用报表展现组件进行数据的报表和/或图形展现；

步骤5，使用多维分析组件进行数据的多维分析；

步骤6，使用数据挖掘组件对所述数据进行算法验证，形成预测结果，所述预测结果可通过调用报表展现组件进行报表和/或图形展现；

步骤7，调用数据集成组件，将所述预测结果与所述数据整合，形成决策审批申请数据，使用流程组件进行流程流转；

所述数据录入组件、数据集成组件、流程组件、报表展现组件、多维分析组件、数据挖掘组件通过核心调度器实现数据交换和调用。

进一步地，在步骤1之前，还包括步骤：使用门户应用组件构建数据融合应用的门户；则步骤1和步骤2之间，还包括：使用门户应用组件发布所述数据融合应用的门户。

进一步地，步骤4中，所述使用报表展现组件进行数据的报表和/或图形展现，之后，还包括步骤：使用门户应用组件发布所述数据的报表和/或图形展现的结果；

和/或

步骤5中，所述使用多维分析组件进行数据的多维分析，之后，还包括步骤：使用门户应用组件发布所述数据的多维分析的结果；

和/或

步骤6中，所述预测结果可通过调用报表展现组件进行报表和/或图形展现，之后，还包括步骤：使用门户应用组件发布所述报表和/或图形展现的结果。

本发明的有益效果是：本发明中，通过数据融合应用核心调度器，整合业务数据录入组件、流程组件、数据集成组件、报表展现组件、多维分析处理、数据挖掘组件，以及外部接口组件和门户应用组件，构建的数据融合应用系统，不仅满足了数据应用的不同开发要求，而且解决了系统开发管理难度大的问题，提高了开发效率，降低了系统建设成本。

附图说明

图1是本发明实施例提供的数据融合应用系统的示意图；

图2是本发明实施例提供的核心调度器与系列组件之间的逻辑关系示意图；

图3是本发明实施例提供的数据融合应用方法流程示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施方式仅仅用以解释本发明，并不用于限定本发明。

实施例一

如图1-2所示，本发明实施例提供了一种数据融合应用系统，包括：

核心调度器和数据应用组件，所述数据应用组件与所述核心调度器数据连接；

所述核心调度器用于对所述数据应用组件的调度和数据交换；

所述数据应用组件用于实现数据应用功能的开发和实现数据应用。

本发明实施例提供的数据融合应用系统，通过对企事业单位数据应用的深刻分析，理解其对数据融合应用的要求，通过构建用于数据处理及交换的核心调度器，并按组件接口规范提供系列组件，不同的组件用于实现具体的数据应用，比如：业务数据录入、数据导入、流程、数据集成、报表展现、图形展现、多维分析、数据分析挖掘，实现数据的全过程融合应用，为企事业的数据融合应用提供了全套解决方案，实现数据生成、审批、展现、挖掘应用无缝融合，支持数据-信息-知识-决策-数据的周而复始应用。

在数据融合应用过程中，不同的数据应用组件为数据应用提供了实现功能和开发基础，核心调度器用于不同的数据应用组件之间的数据交换以及对数据应用组件的调度，即以核心调度器为中心，通过多个数据应用开发组件，构建了数据融合应用的开发工具，进而实现了整套的数据融合应用。

本发明实施例提供的数据融合应用系统，还包括门户应用组件，所述门户应用组件与所述核心调度器进行数据连接；

所述门户应用组件用于构建数据应用的门户，所述数据应用的门户用于发布利用所述数据应用组件进行数据应用的结果。

其中，所述门户应用组件包括，

系统登录模块：用于构建数据应用的门户；

个性化定制模块：用于发布利用所述数据应用组件开发的数据应用。

本发明实施例提供的数据融合应用系统，还包括外部接口组件，所述外部接口组件用于将所述数据融合应用系统连接于外系统。

其中，所述外部接口组件用于将所述数据融合应用系统连接于外系统，具体包括单点登录和统一授权管理。

本发明实施例中，所述核心调度器包括，

连接会话控制模块：用于确保所述数据应用组件在会话周期内能够正常访问，还用于实现访问用户的信息管理；

访问权限控制模块：用于利用规则库对所述数据应用组件访问权限及数据访问权限进行安全控制；

数据库连接控制模块：用于实现数据库的连接和断开，其中，连接包括支持Java数据库连接(JDBC)标准和Java命名和目录接口(JNDI)标准的两种连接模式；

配置文件管理模块：用于对所有配置文件进行集中管理，还用于根据需要将配置后的配置文件传递给所述数据应用组件；如本领域技术人员可以理解的，数据应用组件有几个，配置文件就要传递到几个组件中，使每个组件都能够接收到有关配置文件的信息，从而可以避免出现同样信息在多个组件中重复配置的情况。其中，本发明实施例中，配置文件可以通过数据应用组件调用接口进行传递。

数据交换管理模块：用于所述数据应用组件之间的数据交换；

数据应用组件调用接口模块：用于为所述数据应用组件提供可用的调用接口，还用于调用所述数据应用组件的接口；

任务定时器模块：用于根据配置策略实现任务定时触发，还用于在任务失败后重新启动或放弃。

本发明实施例中，所述数据应用组件包括：数据录入组件、流程组件、数据集成组件、报表展现组件、多维分析组件和数据挖掘组件中的至少一种；

所述数据录入组件用于生成录入界面、配置访问资源和管理访问用户；

所述流程组件用于实现流程配置、流程审批、待办和流程查看；

所述数据集成组件用于数据转换设计、调度任务设计、数据转换执行和调度任务执行；支持oracle、sqlserver、mysql等常用数据库以及excel、txt、xml等文件数据源；

所述报表展现组件用于报表设计和展示，所述报表包括一般表格、分组表格、复杂表格以及线图、饼图、柱状图，其中线图、饼图、柱状图支持3Dflash图形展示；

所述多维分析组件用于多维分析方式的设计与展示，所述多维分析方式包括上钻、下钻、切片、切块和旋转；

所述数据挖掘组件包括模型构建组件、算法库、模型库和模型运行组件，所述模型构建组件用于算法模型的选择，所述模型运行组件用于生成日常数据。

本发明实施例中，通过数据融合应用核心调度器，整合业务数据录入组件、数据导入组件、流程组件、数据集成组件、报表展现组件、多维分析处理、数据分析组件、数据挖掘组件，以及外部接口组件，构建的数据融合应用系统，不仅满足了数据应用的不同开发要求，而且解决了系统开发管理难度大的问题，提高了开发效率，降低了系统建设成本。采用本发明实施例提供的数据融合应用系统，使用户只要通过一套系统就能实现本单位数据处理全过程，提高了开发周期和使用效率，实现了数据的融合应用。

本发明实施例中，所涉及到的核心调度器、数据应用组件以及核心调度器与数据应用组件之间的数据连接关系，可以根据其功能，采用本领域的常规技术手段进行构建。

实施例二

如图2和图3所示，本发明实施例还提供了一种数据融合应用方法，包括如下步骤：

步骤1，使用数据录入组件构建业务录入界面，调用数据集成组件导入数据；

步骤2，使用流程组件设定所述数据的业务功能流转流程，包括流程的发起和流转；

步骤3，使用所述数据集成组件进行数据加工、集成处理；其中，数据加工处理包括数据的清洗和转换等，本实施例中，数据可以经过业务录入界面及流程审批确定后，进入数据库，之后再进行数据的加工和集成处理，为后续的操作提供数据服务。

步骤4，使用报表展现组件进行数据的报表和/或图形展现；

步骤5，使用多维分析组件进行数据的多维分析；

步骤6，使用数据挖掘组件对所述数据进行算法验证，形成预测结果，所述预测结果可通过调用报表展现组件进行报表和/或图形展现；

步骤7，使用数据集成组件，将所述预测结果与所述数据整合，形成决策审批申请数据，使用流程组件进行流程流转；从而实现数据的融合应用；

上述步骤中，所述数据录入组件、数据集成组件、流程组件、报表展现组件、多维分析组件、数据挖掘组件均可以通过核心调度器实现数据交换和调用。

使用上述方法，系列数据应用组件通过核心调度器的调度和数据交换，进行协同合作，实现数据的全过程融合应用，为企事业的数据融合应用提供了全套解决方案，实现数据生成、审批、展现、挖掘应用无缝融合，支持数据-信息-知识-决策-数据的周而复始应用。

其中，在步骤1之前，还包括步骤：使用门户应用组件构建数据融合应用的门户；则步骤1和步骤2之间，还包括：使用门户应用组件发布所述数据融合应用的门户。

其中，步骤4中，所述使用报表展现组件进行数据的报表和/或图形展现，之后，还包括步骤：使用门户应用组件发布所述数据的报表和/或图形展现的结果；

和/或

步骤5中，所述使用多维分析组件进行数据的多维分析，之后，还包括步骤：使用门户应用组件发布所述数据的多维分析的结果；

和/或

步骤6中，所述预测结果可通过调用报表展现组件进行报表和/或图形展现，之后，还包括步骤：使用门户应用组件发布所述报表和/或图形展现的结果。

这样，通过使用门户应用组件就可以将其他数据应用组件开发的功能或界面进行发布。

本发明实施例中，涉及到的数据应用组件的调用、数据交换和数据应用的过程，可以采用本领域的常规技术手段实现。

通过采用本发明公开的上述技术方案，得到了如下有益的效果：本发明中，通过数据融合应用核心调度器，整合业务数据录入组件、数据导入组件、流程组件、数据集成组件、报表展现组件、多维分析处理、数据分析组件、数据挖掘组件，以及外部接口组件，构建的数据融合应用系统，不仅满足了数据应用的不同开发要求，而且解决了系统开发管理难度大的问题，提高了开发效率，降低了系统建设成本。采用本发明实施例提供的数据融合应用系统，使用户只要通过一套系统就能实现本单位数据处理全过程，提高了开发周期和使用效率，实现了数据的融合应用。

本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。

本领域人员应该理解的是，上述实施例提供的方法步骤的时序可根据实际情况进行适应性调整，也可根据实际情况并发进行。

上述实施例涉及的方法中的全部或部分步骤可以通过程序来指令相关的硬件来完成，所述的程序可以存储于计算机设备可读取的存储介质中，用于执行上述各实施例方法所述的全部或部分步骤。所述计算机设备，例如：个人计算机、服务器、网络设备、智能移动终端、智能家居设备、穿戴式智能设备、车载智能设备等；所述的存储介质，例如：RAM、ROM、磁碟、磁带、光盘、闪存、U盘、移动硬盘、存储卡、记忆棒、网络服务器存储、网络云存储等。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视本发明的保护范围。

Claims (10)

1.一种数据融合应用系统，其特征在于，包括：

核心调度器和数据应用组件，所述数据应用组件与所述核心调度器数据连接；

所述核心调度器用于对所述数据应用组件的调度和数据交换；

所述数据应用组件用于实现数据应用功能的开发和实现数据应用。

2.根据权利要求1所述的数据融合应用系统，其特征在于，还包括门户应用组件，所述门户应用组件与所述核心调度器进行数据连接；

所述门户应用组件用于构建数据应用的门户，所述数据应用的门户用于发布利用所述数据应用组件进行数据应用的结果。

3.根据权利要求2所述的数据融合应用系统，其特征在于，所述门户应用组件包括，

系统登录模块：用于构建数据应用的门户；

个性化定制模块：用于发布利用所述数据应用组件开发的数据应用。

4.根据权利要求1所述的数据融合应用系统，其特征在于，还包括外部接口组件，所述外部接口组件用于将所述数据融合应用系统连接于外系统。

5.根据权利要求4所述的数据融合应用系统，其特征在于，所述外部接口组件用于将所述数据融合应用系统连接于外系统，具体包括单点登录和统一授权管理。

6.根据权利要求1所述的数据融合应用系统，其特征在于，所述核心调度器包括，

连接会话控制模块：用于确保所述数据应用组件在会话周期内能够正常访问，还用于实现访问用户的信息管理；

访问权限控制模块：用于利用规则库对所述数据应用组件访问权限及数据访问权限进行安全控制；

数据库连接控制模块：用于实现数据库的连接和断开，其中，连接包括支持Java数据库连接(JDBC)标准和Java命名和目录接口(JNDI)标准的两种连接模式；

配置文件管理模块：用于对所有配置文件进行集中管理，还用于根据需要将配置后的配置文件传递给所述数据应用组件；

数据交换管理模块：用于所述数据应用组件之间的数据交换；

数据应用组件调用接口模块：用于为所述数据应用组件提供可用的调用接口，还用于调用所述数据应用组件的接口；

任务定时器模块：用于根据配置策略实现任务定时触发，还用于在任务失败后重新启动或放弃。

7.根据权利要求1所述的数据融合应用系统，其特征在于，所述数据应用组件包括：数据录入组件、流程组件、数据集成组件、报表展现组件、多维分析组件和数据挖掘组件中的至少一种；

所述数据录入组件用于生成录入界面、配置访问资源和管理访问用户；

所述流程组件用于实现流程配置、流程审批、待办和流程查看；

所述数据集成组件用于数据转换设计、调度任务设计、数据转换执行和调度任务执行；

所述报表展现组件用于报表设计和展示，所述报表包括一般表格、分组表格、复杂表格以及线图、饼图、柱状图，其中线图、饼图、柱状图支持3Dflash图形展示；

所述多维分析组件用于多维分析方式的设计与展示，所述多维分析方式包括上钻、下钻、切片、切块和旋转；

所述数据挖掘组件包括模型构建组件、算法库、模型库和模型运行组件，所述模型构建组件用于算法模型的选择，所述模型运行组件用于生成日常数据。

8.一种数据融合应用方法，其特征在于，包括如下步骤：

步骤1，使用数据录入组件构建业务录入界面，调用数据集成组件导入数据；

步骤2，使用流程组件设定所述数据的业务功能流转流程，包括流程的发起和流转；

步骤3，使用所述数据集成组件进行数据加工、集成处理；

步骤4，使用报表展现组件进行数据的报表和/或图形展现；

步骤5，使用多维分析组件进行数据的多维分析；

步骤6，使用数据挖掘组件对所述数据进行算法验证，形成预测结果，所述预测结果可通过调用报表展现组件进行报表和/或图形展现；

步骤7，调用数据集成组件，将所述预测结果与所述数据整合，形成决策审批申请数据，使用流程组件进行流程流转；

所述数据录入组件、数据集成组件、流程组件、报表展现组件、多维分析组件、数据挖掘组件通过核心调度器实现数据交换和调用。

9.根据权利要求8所述的数据融合应用方法，其特征在于，在步骤1之前，还包括步骤：使用门户应用组件构建数据融合应用的门户；则步骤1和步骤2之间，还包括：使用门户应用组件发布所述数据融合应用的门户。

10.根据权利要求9所述的数据融合应用方法，其特征在于，

步骤4中，所述使用报表展现组件进行数据的报表和/或图形展现，之后，还包括步骤：使用门户应用组件发布所述数据的报表和/或图形展现的结果；

和/或

步骤5中，所述使用多维分析组件进行数据的多维分析，之后，还包括步骤：使用门户应用组件发布所述数据的多维分析的结果；

和/或

步骤6中，所述预测结果可通过调用报表展现组件进行报表和/或图形展现，之后，还包括步骤：使用门户应用组件发布所述报表和/或图形展现的结果。