CN116095084B - 一种基于区块链的智能电网数据存储方法和系统 - Google Patents
一种基于区块链的智能电网数据存储方法和系统 Download PDFInfo
- Publication number
- CN116095084B CN116095084B CN202310344520.3A CN202310344520A CN116095084B CN 116095084 B CN116095084 B CN 116095084B CN 202310344520 A CN202310344520 A CN 202310344520A CN 116095084 B CN116095084 B CN 116095084B
- Authority
- CN
- China
- Prior art keywords
- power grid
- data
- grid data
- nodes
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/12—Applying verification of the received information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
- H04L67/101—Server selection for load balancing based on network conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
- Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
- Y04S10/00—Systems supporting electrical power generation, transmission or distribution
- Y04S10/50—Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications
Abstract
本发明公开了一种基于区块链的智能电网数据存储方法和系统。搭建区块链的存储结构,所有节点分为用于接收采集的电网数据进而发送到边缘层的终端层、用于对采集的电网数据进行清洗进而发送到核心层的边缘层和用于进行实际存储的核心层,终端层、边缘层和核心层的节点数量比例为4:5:1;通过数据采集设备采集电网数据,进而输入到区块链中进行存储;在区块链的存储结构中实现对数据的存储和管理,并通过共识机制进行数据的安全性校验与确认。本发明能够根据节点的带宽和存储容量进行综合优化,审核边缘层节点的合法性,确定节点的权重和出块权限。审核边缘层节点的合法性,解决了传统电网数据存储方式存在的安全性低、数据不可靠等问题。
Description
技术领域
本发明涉及了区块链共识算法以及存储处理系统,涉及了一种基于区块链的智能电网数据存储方法和系统。
背景技术
随着社会经济的发展,电网的运行日益复杂,对电网数据的采集、存储、管理和分析提出了更高的要求。传统的电网数据存储方式存在安全性低、数据不可靠等问题。为了解决这些问题,人们开始研究基于区块链技术的电网数据存储系统。区块链技术作为一种新型的分布式数据存储技术,具有数据安全性高、不可篡改性强等优点。在电网数据存储领域,它可以用于解决数据安全性、可靠性等问题。已有的基于区块链技术的电网数据存储系统大多是采用以太坊等公有链技术,但由于公有链的特点,在扩展性、安全性等方面存在一定的局限性。
发明内容
为了解决背景技术中存在的问题,本发明提出了一种基于区块链的智能电网数据存储方法和系统,通过对电网数据进行采集、分布式存储、验证和确认,解决了传统电网数据存储方式存在的安全性低、数据不可靠等问题。
本发明的技术方案如下:
S1、搭建区块链的存储结构;
S2、通过数据采集设备采集电网数据,进而输入到区块链中进行存储;
S3、在区块链的存储结构中实现对数据的存储和管理,并通过共识机制进行数据的安全性校验与确认。
本发明是对区块链中的节点进行分组分层级设置,并计算节点的综合量化的权重,根据设计的PoS共识算法进行迭代优化。
所述步骤S1中,将区块链中的所有节点分为终端层、边缘层和核心层的三层级,终端层的节点用于接收采集的电网数据进而发送到边缘层的节点,边缘层的节点用于对采集的电网数据进行清洗进而发送到核心层的节点中进行存储,核心层的节点用于对接收到的电网数据进行存储,终端层、边缘层和核心层的节点数量比例为4:5: 1。
核心层节点负责维护系统的核心功能,如共识算法、网络安全等。
边缘层节点这些节点负责数据采集、存储和传输等功能。
终端层节点负责与用户的交互和数据展示等功能。
所述步骤S2是将智能电网中各类数据采集设备连接在一起而建立数据采集网络,对电网数据进行实时采集。
所述步骤S2中,采集的电网数据的参数包括采集频率、数据类型等。
所述步骤S2中,通过数据采集设备将采集的电网数据以API方式区块链中。
本发明是设置了一种新的共识机制,该共识机制采用"通过投票权重来证明权益"的方法。具体算法如下:
所述步骤S1中,对区块链的所有节点按照以下公式设置权重Score:
Score = α * Bandwidth + (1-α) * Storage
其中,Bandwidth表示节点的实时带宽大小,Storage表示节点的剩余存储容量大小,α为权重系数。
所述步骤S2中:
S21、更新权重:对区块链的所有节点每天更新一次各自的权重;
S22、选举共识节点:在区块链的所有节点中以权重从大到小排序,选取最前面10%的节点作为核心层的节点,选取最后面40%的节点作为终端层的节点,选取中间剩余的50%的节点作为边缘层的节点;
S23、以核心层的节点作为共识节点,将电网数据和存储指令输入到共识节点中以多数服从少数的共识方式进行共识,进行存储或者不存储。
所述步骤S21中,如果网络访问不通,则实时带宽大小Bandwidth为0。
所述步骤S21中,如果节点的权重连续持续10天均处于区块链中所有节点的权重从大到小排序的最后面10%,则该节点被淘汰,被剔除出区块链。
本发明基于区块链节点分层的共识机制对电网数据进行存储,且能够不断更新优化,能够给存储系统带来更高的安全性、可靠性以及高效性,实现协作效率提升30%以上,存储容量提高5倍以上。
包括数据采集设备,采集电网数据进而输入到区块链中;
包括区块链,用于接收数据采集设备采集的电网数据并存储和管理,区块链中的所有节点分为终端层、边缘层和核心层的三层级,终端层、边缘层和核心层的节点数量比例为4:5: 1。
本发明提供了一种新的PoS共识算法,算法能够根据节点的带宽和存储容量进行综合优化,从而确定节点的权重和出块权限。
本发明还提供了一种机制来审核边缘层节点的合法性。
本发明的有益效果是:
本发明能够实现智能电网数据的快速准确有效存储,安全性高,数据存储可靠,实现协作效率提升30%以上,存储容量提高5倍以上。
附图说明
图1是本发明的区块链分层处理的逻辑框图。
图2是实施例的证明协作效率提升的数据结果统计图。
图3是实施例的证明数据存储容量提升的数据结果统计图。
具体实施方式
下面结合附图和具体实施对本发明作进一步说明。
具体实施的智能电网数据存储系统,包括:
包括数据采集设备,采集电网数据进而输入到区块链中;
包括区块链,用于接收数据采集设备采集的电网数据并存储和管理,还可通过共识机制进行数据的安全性校验与确认,区块链中的所有节点分为终端层、边缘层和核心层的三层级,终端层、边缘层和核心层的节点数量比例为4:5: 1。
具体实施中选择合适的数据采集设备:可以选择使用通用的数据采集设备或者专门针对电网数据采集的设备。
安装并配置数据采集设备:根据设备的要求安装并配置数据采集设备,确保能够正常使用。
具体实施中,配置数据采集设备将采集到的数据传输到区块链核心层的方式,可以使用API的方式。
本发明系统的具体工作过程是:
开始采集:启动数据采集设备并开始采集电网数据。
数据清洗:对采集到的数据进行清洗,去除重复数据和无效数据。
开始传输:将采集到的并清洗过后的数据传输到区块链的核心层。
监控系统:对整个系统进行监控,确保系统正常运行。
如图1所示,本发明的具体实施例及其实施过程情况如下:
S1、搭建区块链的存储结构;
步骤S1中,对区块链的所有节点按照以下公式设置权重Score,权重表示其在共识中的权益:
Score = α * Bandwidth + (1-α) * Storage
其中,Bandwidth表示节点的实时带宽大小,Storage表示节点的剩余存储容量大小,α为权重系数,用于控制带宽和存储容量在最终评分中的权重。
S2、通过数据采集设备采集电网数据,进而输入到区块链中进行存储;
步骤S2是将智能电网中各类数据采集设备连接在一起而建立数据采集网络,对电网数据进行实时采集。
采集的电网数据的参数包括采集频率、数据类型等,通过数据采集设备将采集的电网数据以API方式区块链中。
步骤S2中:
S21、更新权重:对区块链的所有节点每天更新一次各自的权重,实时带宽大小Bandwidth会随网速更新变化,剩余存储容量大小Storage会随内部存储的数据量而更新变化;
S22、选举共识节点:选出共识节点的方法为,在区块链的所有节点中以权重从大到小排序,选取最前面10%的节点作为核心层的节点,选取最后面40%的节点作为终端层的节点,选取中间剩余的50%的节点作为边缘层的节点;
S23、以核心层的节点作为共识节点,将电网数据和存储指令输入到共识节点中以多数服从少数的共识方式进行共识,进行存储或者不存储。
每次更新后将重新组织区块链的所有节点的分层架构进而优化电网数据的存储。
步骤S21中,如果网络访问不通,即网速为零,则实时带宽大小Bandwidth为0。如果节点的权重连续持续10天均处于区块链中所有节点的权重从大到小排序的最后面10%,则该节点被淘汰,被剔除出区块链。
实时带宽大小是根据网速而会动态变化。
具体实施中,带宽和存储容量的数值可以先进行归一化处理,方便评分的计算和比较。
S3、数据存储的实现:在区块链的存储结构中实现对数据的存储和管理,并通过共识机制进行数据的安全性校验与确认。
步骤S1中,将区块链中的所有节点分为终端层、边缘层和核心层的三层级,单个节点仅属于终端层、边缘层和核心层中的一个,终端层的节点相互连接用于接收采集的电网数据进而发送到边缘层的节点,边缘层的节点相互连接用于对采集的电网数据进行清洗进而发送到核心层的节点中进行存储,终端层、边缘层和核心层的节点数量比例为4:5:1。
具体实施情况和数据:
本实验对比的区块链系统为Hyperledger(一种开源的区块链系统),以字母H代替。本发明所设计的系统以字母A代替。系统A和H默认均有100个节点,其中A系统按本发明所述方法进行分层组织。
首先证明协作效率的提升,本实验衡量协作效果的指标为每次存储请求的耗时。共设置3组实验,分别对2组系统发送1000, 10000, 100000次存储指令,计算出平均每次存储操作的用时,单位为秒。从图2可看出,本发明所设计的系统A平均耗时与传统系统相比,由于共识节点减少,共识过程效率会显著提升,最终平均降低30%的存储耗时。
另外,本系统相较于传统区块链系统可以提高5倍以上的存储容量。衡量指标为系统能接受的最大存储容量。实验设置如下,系统A和H节点数量分别设立,50,100,150个,每个节点的存储容量为2GB。A系统节点权重更新频率设置为10秒。结果如图3,从图3可以看出,由于传统系统将所有数据在所有节点上都进行存储,所以系统的最大存储容量只有2GB,无论节点规模多大。而本发明所设计的系统,由于只有一小部分的共识节点才会存储数据,当共识节点容量降低时,则会因为更新算法的关系,系统倾向重新选择容量更大的节点作为共识节点,从而导致系统的总容量增大。
上述实施可见,本发明能实现协作效率提升30%以上,存储容量提高5倍以上。
Claims (7)
1.一种基于区块链的智能电网数据存储方法,其特征在于:
S1、搭建区块链的存储结构:将区块链中的所有节点分为终端层、边缘层和核心层的三层级,终端层的节点用于接收采集的电网数据进而发送到边缘层的节点,边缘层的节点用于对采集的电网数据进行清洗进而发送到核心层的节点中进行存储,核心层的节点用于对接收到的电网数据进行存储,终端层、边缘层和核心层的节点数量比例为4:5: 1;
所述步骤S1中,对区块链的所有节点按照以下公式设置权重Score:
Score = α * Bandwidth + (1-α) * Storage
其中,Bandwidth表示节点的实时带宽大小,Storage表示节点的剩余存储容量大小,α为权重系数;
S2、通过数据采集设备采集电网数据,进而输入到区块链中进行存储;
所述步骤S2中:
S21、更新权重:对区块链的所有节点每天更新一次各自的权重;
S22、选举共识节点:在区块链的所有节点中以权重从大到小排序,选取最前面10%的节点作为核心层的节点,选取最后面40%的节点作为终端层的节点,选取中间剩余的50%的节点作为边缘层的节点;
S23、以核心层的节点作为共识节点,将电网数据和存储指令输入到共识节点中以多数服从少数的共识方式进行共识,进行存储或者不存储;
S3、在区块链的存储结构中实现对数据的存储和管理,并通过共识机制进行数据的安全性校验与确认。
2.根据权利要求1所述的一种基于区块链的智能电网数据存储方法,其特征在于:所述步骤S2是将智能电网中各类数据采集设备连接在一起而建立数据采集网络,对电网数据进行实时采集。
3.根据权利要求1所述的一种基于区块链的智能电网数据存储方法,其特征在于:所述步骤S2中,采集的电网数据的参数包括采集频率、数据类型。
4.根据权利要求1所述的一种基于区块链的智能电网数据存储方法,其特征在于:所述步骤S2中,通过数据采集设备将采集的电网数据以API方式区块链中。
5.根据权利要求1所述的一种基于区块链的智能电网数据存储方法,其特征在于:
所述步骤S21中,如果网络访问不通,则实时带宽大小Bandwidth为0。
6.根据权利要求1所述的一种基于区块链的智能电网数据存储方法,其特征在于:所述步骤S21中,如果节点的权重连续持续10天均处于区块链中所有节点的权重从大到小排序的最后面10%,则该节点被淘汰,被剔除出区块链。
7.一种基于区块链的智能电网数据存储系统,应用于权利要求1-6任一项所述的方法,其特征在于:
包括数据采集设备,采集电网数据进而输入到区块链中;
包括区块链,用于接收数据采集设备采集的电网数据并存储和管理,区块链中的所有节点分为终端层、边缘层和核心层的三层级,终端层、边缘层和核心层的节点数量比例为4:5: 1。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310344520.3A CN116095084B (zh) | 2023-04-03 | 2023-04-03 | 一种基于区块链的智能电网数据存储方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310344520.3A CN116095084B (zh) | 2023-04-03 | 2023-04-03 | 一种基于区块链的智能电网数据存储方法和系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116095084A CN116095084A (zh) | 2023-05-09 |
CN116095084B true CN116095084B (zh) | 2023-08-01 |
Family
ID=86199495
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310344520.3A Active CN116095084B (zh) | 2023-04-03 | 2023-04-03 | 一种基于区块链的智能电网数据存储方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116095084B (zh) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109617992A (zh) * | 2018-12-29 | 2019-04-12 | 杭州趣链科技有限公司 | 一种基于区块链的边缘计算节点动态选举方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111901350B (zh) * | 2020-07-30 | 2022-10-14 | 平安科技(深圳)有限公司 | 区块链系统、数据处理方法、计算机设备及存储介质 |
CN114065283A (zh) * | 2020-11-20 | 2022-02-18 | 北京邮电大学 | 一种轻量级可循环再生的区块链存储方法及装置 |
CN112968942A (zh) * | 2021-01-29 | 2021-06-15 | 南京邮电大学 | 一种区块链数据安全存储框架及方法 |
CN113568577B (zh) * | 2021-07-27 | 2023-11-21 | 天津大学 | 一种基于联盟区块链的分布式分组存储方法 |
CN113656495B (zh) * | 2021-07-28 | 2023-11-24 | 复旦大学 | 一种部署区块链的端边云协同的可信边缘物联网系统 |
-
2023
- 2023-04-03 CN CN202310344520.3A patent/CN116095084B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109617992A (zh) * | 2018-12-29 | 2019-04-12 | 杭州趣链科技有限公司 | 一种基于区块链的边缘计算节点动态选举方法 |
Also Published As
Publication number | Publication date |
---|---|
CN116095084A (zh) | 2023-05-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104376365B (zh) | 一种基于关联规则挖掘的信息系统运行规则库的构造方法 | |
CN101808351B (zh) | 业务影响分析方法和系统 | |
CN102622303A (zh) | 一种内存过载控制的方法及装置 | |
CN101567814A (zh) | 基于SNMP和随机Petri网的自动化网络管理方法 | |
CN103262498A (zh) | 对于完全不同的处理的基于行为的客户端选择 | |
CN109039766B (zh) | 一种基于渗流概率的电力cps网络风险传播阈值确定方法 | |
CN105553103B (zh) | 一种区域主动配电网能量管理系统及方法 | |
CN103581339A (zh) | 基于云计算的存储资源分配监控处理方法 | |
CN103618652A (zh) | 一种业务数据的审计和深度分析系统及其方法 | |
CN108228740A (zh) | 电力全业务统一数据中心数据分析域数据比对工具 | |
CN102624865A (zh) | 集群负载预测方法及分布式集群管理系统 | |
CN107205248A (zh) | 一种资源分配方法及系统 | |
CN112365366A (zh) | 一种基于智能化5g切片的微电网管理方法及系统 | |
CN109445903A (zh) | 基于QoS特征发现的云计算节能调度实现方法 | |
CN100488114C (zh) | 一种网元管理方法与系统 | |
CN105471893B (zh) | 一种分布式等值数据流连接方法 | |
CN112381407A (zh) | 基于随机算法的信用加权双随机监管的方法 | |
CN116095084B (zh) | 一种基于区块链的智能电网数据存储方法和系统 | |
CN107609090A (zh) | 分布式存储系统中多副本弱一致性维护方法 | |
CN205050194U (zh) | 电力通信网络应急预案生成装置 | |
CN101986608B (zh) | 一种异构覆盖网络负载均衡程度的评价方法 | |
CN106856509A (zh) | 一种基于knl集群的大规模数据的处理方法及系统 | |
CN107248962A (zh) | 用于电网信息采集的通信切换方法及装置 | |
CN114639484A (zh) | 基于电力大数据的小区人口流动情况分析系统及方法 | |
CN103096380A (zh) | 无线接入点负载均衡优化方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |