CN109446278A - 一种基于区块链的大数据管理平台系统 - Google Patents

Abstract

本发明涉及大数据技术领域，具体是一种基于区块链的大数据管理平台系统。包括分析应用单元、服务器及大数据平台；所述分析应用单元用于提供各种大数据分析，包括BI，预测和高级分析、风险分析、情绪分析、Web和数字分析；所述服务器用于响应服务请求，并进行处理；所述大数据平台用于为分析应用单元提供数据信息，并对数据信息进行数据化资源整合。本发明具有便于管理、资源数据信息可视化、数据准确及分析能力强的的优点。

Description

一种基于区块链的大数据管理平台系统

技术领域

本发明涉及大数据技术领域，具体是一种基于区块链的大数据管理平台系统。

背景技术

大数据技术是以数据为本质的新一代革命性的信息技术，在数据挖潜过程中，能够带动理念、模式、技术及应用实践的创新。

数据价值的凸显和数据获取手段、数据处理技术的改进是"大数据"爆发的根源。而随着数据生产要素化，数据科学、数据科技的不断发展和数据价值的深度挖掘及应用，一场大数据革命正在进行，它将带动国家战略及区域经济发展，智慧城市建设，企业转型升级，社会管理及个人工作、生活等各个领域的创新和变革。如何真正应用好大数据，发挥大数据的威力，是当前所有人都在共同研究和探索的问题。

发明内容

针对上述现有技术中的不足之处，本发明旨在提供一种便于管理、资源数据信息可视化、数据准确及分析能力强的基于区块链的大数据管理平台系统。

为解决上述技术问题，本发明的技术方案为：一种基于区块链的大数据管理平台系统，包括分析应用单元、服务器及大数据平台；

所述分析应用单元用于提供各种大数据分析，包括BI，预测和高级分析、风险分析、情绪分析、Web和数字分析；

所述服务器用于响应服务请求，并进行处理；

所述大数据平台用于为分析应用单元提供数据信息，并对数据信息进行数据化资源整合。

优选的，所述大数据平台包括可视化单元、应用程序开发及系统管理单元；

所述可视化单元用于利用最佳的可视化组合，收集、提取并探索数据；

所述应用程序开发用于开发新的程序和功能，提供更全面化的资源数据；

所述系统管理单元用于管理系统中各个单元之间的管理和控制，实现各单元之间的系统控制。

优选的，所述大数据平台还包括设置于其中的加速器、Hadoop系统、流计算、数据库及语境搜索；

所述加速器用于利用分析和应用程序加速器，加快实现价值的速度；

所述Hadoop系统用于以经济高效的方式分析PB级的结构化和非结构化信息；

所述流计算用于分析数据和激增的大型数据，获得实时洞察；

所述数据库用于在数据库内分析和运营分析，提供数据信息并深入洞察数据分析；

所述语境搜索用于牵引和联邦搜索，实现上下文协作洞察。

优选的，还包括设置于所述大数据平台中的信息整合治理单元；所述信息整合治理单元用于治理数据质量并管理信息生命周期。

优选的，所述大数据平台为IBM大数据平台。

本发明一种基于区块链的大数据管理平台系统具有以下优点：第一、利用分析应用单元可提供各种大数据分析，包括BI，预测和高级分析、风险分析、情绪分析、Web和数字分析，从而使得其系统平台便于管理和控制；第二、将数据信息实现资源合理化整盒，利用可视化单元，利用最佳的可视化组合，收集、提取并探索数据，实现数据可视化；第三、加速器便于提高其各单元之间的数据收集速率及资源整合能力，提高其工作效率。

附图说明

图1为本发明一种基于区块链的大数据管理平台系统的系统框图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。

如图1所示，本本发明的一种基于区块链的大数据管理平台系统，包括分析应用单元、服务器及大数据平台；

所述分析应用单元用于提供各种大数据分析，包括BI，预测和高级分析、风险分析、情绪分析、Web和数字分析；在其中，BI是指商业智能(BI，BusinessIntelligence)。商业智能的概念最早在1996年提出。当时将商业智能定义为一类由数据仓库(或数据集市)、查询报表、数据分析、数据挖掘、数据备份和恢复等部分组成的、以帮助企业决策为目的技术及其应用。目前，商业智能通常被理解为将企业中现有的数据转化为知识，帮助企业做出明智的业务经营决策的工具。商务智能系统中的数据来自企业其他业务系统。例如商贸型企业，其商务智能系统数据包括业务系统的订单、库存、交易账目、客户和供应商信息等，以及企业所处行业和竞争对手的数据、其他外部环境数据。而这些数据可能来自企业的CRM、SCM等业务系统。风险通常是指由于当事者主观上不能控制的一些因素的影响，使得实际结果与当事者的事先估计有较大的背离而带来的经济损失。这些背离产生的原因，可能是当事者对有关因素和未来情况缺乏足够情报而无法作出精确估计，也可能是由于考虑的因素不够全面而造成预期效果与实际效果之间的差异。进行风险分析，有助于确定有关因素的变化对决策的影响程度，有助于确定投资方案或生产经营方案对某一特定因素变动的敏感性。若一种因素在一定范围内发生变化，但对决策没有引起很大影响，则所采取的决策对这种因素是不敏感的；若一个因素的大小稍有变化就会引起投资决策的较大变动，则决策对这一因素便是高度敏感的。了解在给定条件下的风险对这些因素的敏感程度，有助于正确地作出决策。

风险分析是找出行动方案的不确定性(主观上无法控制)因素，分析其环境状况和对方案的敏感程度；估计有关数据，包括行动方案的费用，在不同情况下得到的收益以及不确定性因素各种机遇的概率，计算各种风险情况下的经济效果；作出正确判断。

所述服务器用于响应服务请求，并进行处理；服务器是提供计算服务的设备。由于服务器需要响应服务请求，并进行处理，因此一般来说服务器应具备承担服务并且保障服务的能力。服务器的构成包括处理器、硬盘、内存、系统总线等，和通用的计算机架构类似，但是由于需要提供高可靠的服务，因此在处理能力、稳定性、可靠性、安全性、可扩展性、可管理性等方面要求较高。在网络环境下，根据服务器提供的服务类型不同，分为文件服务器，数据库服务器，应用程序服务器，WEB服务器等。支持双CPU以上的对称处理器结构，具备比较完全的硬件配置，如磁盘阵列、存储托架等。还集成了大量的监测及管理电路，具有全面的服务器管理能力，可监测如温度、电压、风扇、机箱等状态参数，结合标准服务器管理软件，使管理人员及时了解服务器的工作状况。同时，具有优良的系统扩展性，能够满足用户在业务量迅速增大时能够及时在线升级系统，充分保护了用户的投资。它是企业网络中分散的各基层数据采集单位与最高层的数据中心保持顺利连通的必要环节。

所述大数据平台用于为分析应用单元提供数据信息，并对数据信息进行数据化资源整合。

所述大数据平台包括可视化单元、应用程序开发及系统管理单元；

所述可视化单元用于利用最佳的可视化组合，收集、提取并探索数据；

所述应用程序开发用于开发新的程序和功能，提供更全面化的资源数据；

所述系统管理单元用于管理系统中各个单元之间的管理和控制，实现各单元之间的系统控制。

所述大数据平台还包括设置于其中的加速器、Hadoop系统、流计算、数据库及语境搜索；

所述加速器用于利用分析和应用程序加速器，加快实现价值的速度；

所述Hadoop系统用于以经济高效的方式分析PB级的结构化和非结构化信息；

所述流计算用于分析数据和激增的大型数据，获得实时洞察；它是一个完整的计算架构，通过“streamcomputing”技术，可以对stream形式的数据进行real-time的分析。“最初的系统拥有大约800个微处理器，但IBM称，根据需求，这个数字也有可能上万。其中最关键的部分是SystemS软件，它可以将任务分开，比如分为图像识别和文本识别，然后将处理后的结果碎片组成完整的答案。SystemS是一个全新的运算模式，它的灵活性和速度颇具优势。而与传统系统相比，它的方式更加智能化，可以适当转变，以适用其需要解决的问题。在传统的数据处理流程中，总是先收集数据，然后将数据放到DB中。当人们需要的时候通过DB对数据做query，得到答案或进行相关的处理。这样看起来虽然非常合理，但是结果却非常的紧凑，尤其是在一些实时搜索应用环境中的某些具体问题，类似于MapReduce方式的离线处理并不能很好地解决问题。这就引出了一种新的数据计算结构---流计算方式。它可以很好地对大规模流动数据在不断变化的运动过程中实时地进行分析，捕捉到可能有用的信息，并把结果发送到下一计算节点。

所述数据库用于在数据库内分析和运营分析，提供数据信息并深入洞察数据分析；数据库(Database)是按照数据结构来组织、存储和管理数据的仓库，为用户所需要的各种数据管理的方式。数据库是长期储存在计算机内、有组织的、可共享的数据集合。数据库中的数据指的是以一定的数据模型组织、描述和储存在一起、具有尽可能小的冗余度、较高的数据独立性和易扩展性的特点并可在一定范围内为多个用户共享。这种数据集合具有如下特点：尽可能不重复，以最优方式为某个特定组织的多种应用服务，其数据结构独立于使用它的应用程序，对数据的增、删、改、查由统一软件进行管理和控制。从发展的历史看，数据库是数据管理的高级阶段。

所述语境搜索用于牵引和联邦搜索，实现上下文协作洞察。

还包括设置于所述大数据平台中的信息整合治理单元；所述信息整合治理单元用于治理数据质量并管理信息生命周期。

所述大数据平台为IBM大数据平台。所述IBM大数据平台是利用企业需要访问大量数据，并依靠来自这些数据的强有力的洞察，生成更完善的业务成果。以企业Hadoop解决方案为特征的IBM大数据解决方案支持用户存储、管理和分析各种来源的数据，同时使业务分析人员、数据研究员和IT用户可以访问这些数据。

显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

Claims (5)

1.一种基于区块链的大数据管理平台系统，其特征在于：包括分析应用单元、服务器及大数据平台；

所述分析应用单元用于提供各种大数据分析，包括BI，预测和高级分析、风险分析、情绪分析、Web和数字分析；

所述服务器用于响应服务请求，并进行处理；

所述大数据平台用于为分析应用单元提供数据信息，并对数据信息进行数据化资源整合。

2.根据权利要求1所述的一种基于区块链的大数据管理平台系统，其特征在于：所述大数据平台包括可视化单元、应用程序开发及系统管理单元；

所述可视化单元用于利用最佳的可视化组合，收集、提取并探索数据；

所述应用程序开发用于开发新的程序和功能，提供更全面化的资源数据；

所述系统管理单元用于管理系统中各个单元之间的管理和控制，实现各单元之间的系统控制。

3.根据权利要求1或2所述的一种基于区块链的大数据管理平台系统，其特征在于：所述大数据平台还包括设置于其中的加速器、Hadoop系统、流计算、数据库及语境搜索；

所述加速器用于利用分析和应用程序加速器，加快实现价值的速度；

所述Hadoop系统用于以经济高效的方式分析PB级的结构化和非结构化信息；

所述流计算用于分析数据和激增的大型数据，获得实时洞察；

所述数据库用于在数据库内分析和运营分析，提供数据信息并深入洞察数据分析；

所述语境搜索用于牵引和联邦搜索，实现上下文协作洞察。

4.根据权利要求3所述的一种基于区块链的大数据管理平台系统，其特征在于：还包括设置于所述大数据平台中的信息整合治理单元；所述信息整合治理单元用于治理数据质量并管理信息生命周期。

5.根据权利要求4所述的一种基于区块链的大数据管理平台系统，其特征在于：所述大数据平台为IBM大数据平台。