CN109474499A - 一种分布式区块链监控系统的解决方法 - Google Patents

Abstract

本发明公开了一种分布式区块链监控系统的解决方法。包括如下步骤：1)在区块链网络自动部署时，加上探头组件收集数据。2)探头组件将数据推送给传输组件。3)传输组件将数据做统一处理、规整，并转发给存储组件和告警组件。4)存储组件将数据抽样后存储在时序数据库中。5)告警组件依照设置的相应阈值对多端进行告警。6)查询组件根据查询内容将抽样后数据返回给查询者。本发明实现了一种分布式区块链监控系统的解决方法，解决了对大量区块链上数据进行收集，存储，采样，查询的问题。

Description

一种分布式区块链监控系统的解决方法

技术领域

本发明涉及区块链技术、数据存储技术，尤其涉及一种分布式区块链监控系统的解决方法。

背景技术

区块链技术，区块链是一种新型去中心化分布式账本技术，能安全地存储数字货币交易或其他数据，特点是存储在区块链上的信息不可伪造和篡改，区块链共识算法驱动区块链上的每个节点都参与到交易的验证过程中，保证区块链上交易都是经过确认可信的，区块链上每个节点都维护一个公共的账本，用于存储区块链网络上所有用户的余额和智能合约数据，任何一个节点对自己所维护的账本的修改都将不被其他节点所承认，从而保证公共账本不可被伪造和篡改。

分布式系统是由一组通过网络进行通信、为了完成共同的任务而协调工作的计算机节点组成的系统。分布式系统的出现是为了用廉价的、普通的机器完成单个计算机无法完成的计算、存储任务。其目的是利用更多的机器，处理更多的数据。

随着区块链即服务(BaaS)技术的普及，区块链网络的部署、运维、管理的复杂度得到了极大的降低，与此同时建立大量区块链网络并管理的场景越来越常见。因此，需要一个能够统一管理大量区块链网络的监控系统。然而，现有区块链技术中对大量区块链监控信息收集困难，使得信息收集效率低下，运维成本高。

发明内容

本发明的目的是针对现有区块链技术中对大量区块链监控信息收集困难的问题，提供一种分布式区块链监控系统的解决方法。本发明提出的的监控解决方法可以实时监测区块链平台的业务状态，链上负载，浏览区块和交易历史，提高问题定位销率，降低运维成本。

本发明的目的是通过以下技术方案来实现：一种分布式区块链监控系统的解决方法，包括如下步骤：

1)在区块链网络自动部署时，加上探头组件收集数据；

2)探头组件将数据推送给传输组件；

3)传输组件将数据做统一处理、规整，并转发给存储组件和告警组件；

4)存储组件将数据抽样后存储在时序数据库中；

5)告警组件依照设置的相应阈值对多端进行告警；

6)查询组件根据查询内容将抽样后数据返回给查询者。

进一步地，步骤1)中的区块链网络自动部署流程是由趣链科技BaaS平台所控制的,监控探头作为单独的组件嵌入到每个区块链节点的服务器中。

进一步地，步骤2)中的监控探头在监控到区块链节点产生新数据后才主动推送数据信息给传输组件，同时监控探头和整个监控系统之间通过心跳服务来保证服务的健康和维护。

进一步地，步骤3)中的传输组件首先承接所有监控数据，将数据做规整、检查之后转发给告警组件和存储组件。

进一步地，步骤4)中的时序数据库是直接存储在文件系统中的，通过对存储数据按时间顺序排序，在对时序数据的进行存取时通过时序数据库优化过的流程进行。

进一步地，步骤6)中数据查询的方式可以通过http统一开放api和内部系统的rpc调用。

本发明的有益效果是：本发明从区块链节点中采集区块链运行时产生的各项数据，并通过数据规整、转发、告警、抽样、归档、查询这些流程，解决了大量区块链监控数据收集，存储，处理的问题，提出了一种行之有效的分布式区块链监控系统解决方法。

附图说明

图1是本发明的软件设计架构图；

具体实施方式

下面根据附图和具体实施例详细描述本发明，本发明的目的和效果将变得更加明显。

如图1所示，本发明方法，包括如下步骤：

1)在区块链网络自动部署时，加上探头组件收集数据，在区块链节点部署时，自动填写探头组件的配置文件，使其建立与区块链节点和传输组件的网络连接；

2)探头组件将数据推送给传输组件，同时通过发送心跳信息维护健康状态；

3)传输组件将数据做统一处理、规整，并转发给存储组件和告警组件；

4)存储组件将数据抽样、归档后存储在时序数据库中，有多种归档形式；

5)告警组件依照设置的相应阈值对多端进行告警；

6)查询组件根据查询内容将抽样后数据返回给查询者，提供多种方式。

进一步的，所述的步骤1)中，部署完成的区块链节点应该是健康运行的，在区块链节点部署完成后，会将探头组件自动启动，同时自动配置好网络环境和探头组建的配置文件，使得探头组件能够通过相应的交互接口得到区块链数据，同时探头组件和区块链节点之间不应存在网络隔离。

进一步的，所述的步骤1)中探头组件应该在区块链节点启动成功后自行启动，并开始监控该区块链节点的相应数据。

进一步的，所述的步骤2)中探头组件通过配置文件找到特定网络环境中传输组件的位置，通过网络通信将数据传输给传输组件，同时通过一个心跳服务保证心跳组件的健康管理，抽样组件和探头组件之间不应该存在网络隔离。

进一步的，步骤3)中传输组件通过配置文件找到特定网络环境中告警组件和存储组件的位置，通过网络通信将数据转发给告警组件和存储组件。传输组件和告警组件、存储组件之间不应该存在网络隔离。

进一步的，步骤4)中存储组件接收到传输组件转发的数据后，将其存储在时序存储数据库opentsdb中，在数据每次存入的时候，会自动进行抽样、归档。归档策略如下，历史数据保存5年。同时为了不丢失信息量，数据归档的时候，会按照平均值采样、最大值采样、最小值采样存三份。

进一步的，步骤5)中告警组件收到传输组件转发的数据后，会按照设置好的告警阈值对各项数值进行检查，对超过阈值的数据做告警处理，告警可以通过各种形式，如程序接入，钉钉、微信、回调、邮件等。

进一步地，所述步骤6)中，查询组件接收多种方式的数据查询请求，包括http/restful,rpc调用,websocket长连接。

下面用一个区块链部署后进行监控的流程来说明具体的实施方式：

首先部署好除了探头之外的组件，并暴露固定网络IP。如图1所示,对于负载高的组件支持高可用分布式部署，通过负载均衡技术将请求分散到多态服务实例上，实现服务能力的横向扩容。

之后进行趣链科技BaaS平台的自动化部署区块链流程。在部署一条区块链时，会同时将探头组件置于区块链节点的相同服务器上，同时自动配置好配置文件。在确认区块链节点启动后探头组件会开始监控区块链的相关监控数据，同时通过配置文件找到传输组件进行监控数据传输。探头组件启动时也会通过配置文件开始执行心跳服务来保证自身的健康状态维护。

监控数据被探头组件采集后发送到传输组件，传输组件根据规则将数据规整、检查之后转发给多个服务，主要是告警组件和存储组件。告警组件本身存在一个默认的告警数值的阈值配置，使用者也可以手动配置各项数据的报警规则，用户可以很灵活的来配置告警判定策略，比如连续n次都满足条件、连续n次的最大值满足条件、不同的时间段不同的阈值、如果处于维护周期内则忽略等等。另外也支持突升突降类的判定和告警。告警组件收到数据后会根据设置好的告警规则对各项数值进行检查，通过邮件，微信，钉钉，回调，程序集成等方式进行告警信息的通知。存储组件拿到数据后首先存储在文件数据库中，并定期作不同规则的抽样和归档。对于绘图的数据来讲，查询要快是关键，同时不能丢失信息量。我们参考rrdtool的理念，在数据每次存入的时候，会自动进行采样、归档。我们的归档策略如下，历史数据保存5年。同时为了不丢失信息量，数据归档的时候，会按照平均值采样、最大值采样、最小值采样存三份。

使用者在需要查询监控数据的时候可以调用查询组件来得到单点的数据或者连续的用于绘图的数据，查询组件会将存储组件存储的抽样后数据归并、整理后返回给调用者。

Claims (6)

1.一种分布式区块链监控系统的解决方法，其特征在于，包括如下步骤：

1)在区块链网络自动部署时，加上探头组件收集数据。

2)探头组件将数据推送给传输组件。

3)传输组件将数据做统一处理、规整，并转发给存储组件和告警组件。

4)存储组件将数据抽样后存储在时序数据库中。

5)告警组件依照设置的相应阈值对多端进行告警。

6)查询组件根据查询内容将抽样后数据返回给查询者。

2.如权利要求1所述的一种分布式区块链监控系统的解决方法，其特征在于，步骤1)中的区块链网络自动部署流程是由趣链科技BaaS平台所控制的,监控探头作为单独的组件嵌入到每个区块链节点的服务器中。

3.如权利要求1所述的一种分布式区块链监控系统的解决方法，其特征在于，步骤2)中的监控探头在监控到区块链节点产生新数据后才主动推送数据信息给传输组件，同时监控探头和整个监控系统之间通过心跳服务来保证服务的健康和维护。

4.如权利要求1所述的一种分布式区块链监控系统的解决方法，其特征在于，步骤3)中的传输组件首先承接所有监控数据，将数据做规整、检查之后转发给告警组件和存储组件。

5.如权利要求1所述的一种分布式区块链监控系统的解决方法，其特征在于，步骤4)中的时序数据库是直接存储在文件系统中的，通过对存储数据按时间顺序排序，在对时序数据的进行存取时通过时序数据库优化过的流程进行。

6.如权利要求1所述的一种分布式区块链监控系统的解决方法，其特征在于，步骤6)中数据查询的方式可以通过http统一开放api和内部系统的rpc调用。