CN116938953A - 基于区块链的数据处理方法、装置、电子设备及存储介质 - Google Patents
基于区块链的数据处理方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN116938953A CN116938953A CN202310927940.4A CN202310927940A CN116938953A CN 116938953 A CN116938953 A CN 116938953A CN 202310927940 A CN202310927940 A CN 202310927940A CN 116938953 A CN116938953 A CN 116938953A
- Authority
- CN
- China
- Prior art keywords
- data
- node
- blockchain
- current target
- segmentation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003860 storage Methods 0.000 title claims abstract description 56
- 238000003672 processing method Methods 0.000 title claims abstract description 26
- 230000011218 segmentation Effects 0.000 claims abstract description 82
- 238000012545 processing Methods 0.000 claims abstract description 31
- 238000000034 method Methods 0.000 claims description 34
- 238000004590 computer program Methods 0.000 claims description 16
- 230000008521 reorganization Effects 0.000 claims description 9
- 238000000638 solvent extraction Methods 0.000 claims description 6
- 239000004973 liquid crystal related substance Substances 0.000 claims description 5
- 238000004891 communication Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 15
- 238000012544 monitoring process Methods 0.000 description 13
- 238000005192 partition Methods 0.000 description 10
- 238000013523 data management Methods 0.000 description 8
- 230000006798 recombination Effects 0.000 description 7
- 238000005215 recombination Methods 0.000 description 7
- 239000003550 marker Substances 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000007704 transition Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
- H04L67/1074—Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
- H04L67/1078—Resource delivery mechanisms
- H04L67/108—Resource delivery mechanisms characterised by resources being split in blocks or fragments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例公开了一种基于区块链的数据处理方法、装置、电子设备及存储介质,其中,基于区块链的数据处理方法包括:在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据;确定所述当前目标区块链节点的关联空闲区块链节点;将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。本发明实施例的技术方案能够提高基于区块链的数据处理效率。
Description
技术领域
本发明实施例涉及区块链技术领域,尤其涉及一种基于区块链的数据处理方法、装置、电子设备及存储介质。
背景技术
对于大数据如智能电网中电网数据以及云计算等互联网数据来说,数据的管理是一个复杂的过程,涉及到数据的收集、存储、处理和分析等方面,现有的单节点存储已经不能满足大数据对于系统容灾抗毁需求。
目前,为了保证数据的持续可用性及其安全性,通常可以将数据上传到区块链中,利用区块链去中心化、开放性、独立性、安全性和匿名性的特点,实现对大数据的可靠管理。
发明人在实现本发明的过程中,发现现有技术存在如下缺陷:通常大数据的容量较大,在将数据传输到区块链节点中时,会导致数据传输时间较长,无法实现数据的迅速上传,数据处理的效率较低。
发明内容
本发明实施例提供一种基于区块链的数据处理方法、装置、电子设备及存储介质,能够提高基于区块链的数据处理效率。
根据本发明的一方面,提供了一种基于区块链的数据处理方法,包括:
在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据;
确定所述当前目标区块链节点的关联空闲区块链节点;
将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
根据本发明的另一方面,提供了一种基于区块链的数据处理装置,包括:
分割数据获取模块,用于在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据;
关联空闲区块链节点确定模块,用于确定所述当前目标区块链节点的关联空闲区块链节点;
分割数据上传模块,用于将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的基于区块链的数据处理方法。
根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的基于区块链的数据处理方法。
本发明实施例通过在对当前目标区块链节点上传数据的过程中,确定当前目标区块链节点的节点状态为忙碌状态时,对当前目标区块链节点的待上传数据进行分割,得到分割数据,并确定当前目标区块链节点的关联空闲区块链节点,以将分割数据上传至关联空闲区块链节点进行分布式存储,解决现有对区块链节点上传数据时存在的数据上传效率低的问题,能够提高基于区块链的数据处理效率。
应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的一种基于区块链的数据处理方法的流程图;
图2是本发明实施例二提供的一种基于区块链的数据处理方法的流程图;
图3是本发明实施例二提供的一种数据管理平台的结构示意图;
图4是本发明实施例二提供的一种节点共享单元的结构示意图;
图5是本发明实施例二提供的一种备份存储单元的结构示意图;
图6是本发明实施例二提供的一种后台调控单元的结构示意图;
图7是本发明实施例二提供的一种状态展示单元的结构示意图;
图8是本发明实施例二提供的一种通过数据管理平台向区块链上传电网数据的流程示意图;
图9是本发明实施例三提供的一种基于区块链的数据处理装置的示意图;
图10为本发明实施例四提供的一种电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例一
图1是本发明实施例一提供的一种基于区块链的数据处理方法的流程图,本实施例可适用于对区块链节点上传的数据进行分布式上传以提高数据上传效率的情况,该方法可以由基于区块链的数据处理装置来执行,该装置可以由软件和/或硬件的方式来实现,并一般可集成在电子设备中,该电子设备可以是终端设备,也可以是服务器设备,本发明实施例并不对电子设备的具体设备类型进行限定。相应的,如图1所示,该方法包括如下操作:
S110、在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据。
其中,当前目标区块链节点可以是从区块链系统中选取的其中一个或多个区块链节点,用于向区块链系统上传相应的数据。待上传数据可以是需要上传至当前目标区块链节点的数据,可以是任意领域的大数据,如电网数据、水利数据、农产品数据以及互联网数据等,本发明实施例并不对待上传数据所属领域和具体的数据内容进行限定。可选的,待上传数据可以用于上传至当前目标区块链节点后,由当前目标区块链节点将其存储至区块。或者,还可以仅将待上传数据上传至当前目标区块链节点,并在当前目标区块链节点处存储,本发明实施例并不对待上传数据在区块链系统中的存储方式进行限定。
在本发明实施例中,可以将需要上传至区块链系统的数据通过区块链系统中的区块链节点进行上传。可选的,可以将待上传数据存储至区块链的不同节点上。在上传待上传数据之前,可以首先从区块链系统中选取当前目标区块链节点。示例性的,可以首先从区块链系统中选取各空闲状态的区块链节点,并从各空闲状态的区块链节点中随机选取其中一个节点作为当前目标区块链节点。或者,也还可以在筛选出空闲状态的区块链节点后,为了保证有足够的数据存储空间,对各空闲状态的区块链节点的存储空间进行判断,并从满足待上传数据存储需求的空闲状态的区块链节点中筛选当前目标区块链节点。只要当前目标区块链节点能够满足待上传数据的存储需求即可,本发明实施例并不对当前目标区块链节点的选取方式进行限定。其中,节点的空闲状态也即区块链节点可以正常上传数据且保持正常上传速度的状态。相对应的,节点的忙碌状态可以是区块链节点不能正常上传数据或难以保持正常上传速度的状态。可以理解的是,当区块链节点的负荷较重时,通常处于忙碌状态。相应的,当区块链节点的负荷较轻时,通常处于空闲状态。
由于当前目标区块链节点在初始状态下为空闲状态,因此可以上传待上传数据。在对当前目标区块链节点上传数据的过程中,当前目标区块链节点可能由空闲状态转变为忙碌状态。此时,可以对当前目标区块链节点的待上传数据进行分割,得到分割数据。
在本发明的一个可选实施例中,待上传数据可以包括上传至当前目标区块链节点的初始电网数据,或,待上传数据可以包括当前目标区块链节点的剩余未上传电网数据。
示例性的,当待上传数据的类型为电网数据时,如果当前目标区块链节点可能由空闲状态转变为忙碌状态,可以将需要上传至当前目标区块链节点的初始电网数据作为待上传数据并对其进行分割。或者,考虑到当前目标区块链节点可能已经上传了部分电网数据,因此,也还可以将初始电网数据中除上传后的剩余未上传的电网数据作为待上传数据并对其进行分割。将剩余未上传电网数据作为待上传数据并对其进行分割,可以降低待上传数据的数据量,从而进一步提高基于区块链的数据上传效率。
S120、确定所述当前目标区块链节点的关联空闲区块链节点。
其中,关联空闲区块链节点可以是能够辅助当前目标区块链节点存储待上传数据的区块链节点,可以理解的是,关联空闲区块链节点的节点状态为空闲状态。
S130、将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
相应的,如果在对当前目标区块链节点上传数据的过程中,发现当前目标区块链节点的节点状态转变为忙碌状态,则可以确定当前目标区块链节点的关联空闲区块链节点。例如,可以将各空闲状态的区块链节点中,与当前目标区块链节点通信性能最好的几个区块链节点作为关联空闲区块链节点,或选取数据处理效率最高的几个区块链节点作为关联空闲区块链节点,并将对待上传数据分割得到的分割数据分布上传至各关联空闲区块链节点进行分布式存储。
可选的,一个关联空闲区块链节点可以对应存储一份分割数据。此时,关联空闲区块链节点的数量和分割数据的数量相同。或者,一个关联空闲区块链节点可以对应存储多份分割数据。此时,关联空闲区块链节点的数量可以小于分割数据的数量。
可选的,当数据完成上传后,可以由区块链节点如记账节点对分布式存储的分割数据进行重组得到完整的数据,并将其存储至区块中。或者,也还可以由相应的设备或平台如数据管理平台等对分布式存储的分割数据进行重组得到完整的数据,并将其存储至当前目标区块链节点中,并由记账节点进一步将当前目标区块链节点存储的完整数据存储至区块中。
由此可见,当用于上传数据的区块链节点处于忙碌状态时,通过选择其他空闲状态的区块链节点分担数据上传任务,并对待测数据进行分布式存储,可以解决单个区块链节点上传数据效率较低的问题,能够基于区块链实现数据的迅速上传,从而提高基于区块链的数据处理效率。
本发明实施例通过在对当前目标区块链节点上传数据的过程中,确定当前目标区块链节点的节点状态为忙碌状态时,对当前目标区块链节点的待上传数据进行分割,得到分割数据,并确定当前目标区块链节点的关联空闲区块链节点,以将分割数据上传至关联空闲区块链节点进行分布式存储,解决现有对区块链节点上传数据时存在的数据上传效率低的问题,能够提高基于区块链的数据处理效率。
实施例二
图2是本发明实施例二提供的一种基于区块链的数据处理方法的流程图,本实施例以上述实施例为基础进行具体化,在本实施例中,给出了对当前目标区块链节点的待上传数据进行分割的多种具体可选的实现方式,并给出了数据分割前和分割后的可选操作。相应的,如图2所示,本实施例的方法可以包括:
S210、获取所述当前目标区块链节点的相邻区块链节点的运行状态。
S220、在确定所述相邻区块链节点的运行状态为空闲状态的情况下,采用预定节点标记将所述相邻区块链节点标记为所述关联空闲区块链节点。
其中,预定节点标记可以是预设的适用于空闲状态的区块链节点的标记。
在本发明实施例中,在对当前目标区块链节点上传数据的过程中,可以获取当前目标区块链节点的相邻区块链节点的运行状态。其中,当前目标区块链节点的相邻区块链节点可以通过通信距离界定,如将与当前目标区块链节点之间通信距离在一定范围内的区块链节点作为相邻区块链节点。或者,当前目标区块链节点的相邻区块链节点还可以通过地理位置界定,如将与当前目标区块链节点之间的地理位置距离在一定范围内的区块链节点作为相邻区块链节点。本发明实施例并不对相邻区块链节点的划分方式进行限定。
相应的,可以将相邻区块链节点中节点状态为空闲状态的区块链节点采用预定节点标记进行标记,从而得到关联空闲区块链节点。
S230、根据所述关联空闲区块链节点的节点数量实时确定动态数据分割值。
其中,动态数据分割值也即对待上传数据进行分割的数量值。可选的,动态数据分割值可以与关联空闲区块链节点的节点数量相同或不同。
S240、在确定当前目标区块链节点的节点状态为忙碌状态的情况下,根据所述动态数据分割值对所述当前目标区块链节点的待上传数据进行分割,得到所述分割数据。
可选的,根据动态数据分割值对当前目标区块链节点的待上传数据进行分割,可以将动态数据分割值作为分割份数,并待上传数据平均分割为分割份数的分割数据。或者,也可以按需将待上传数据划分为数据容量不同的分割份数的分割数据。只要分割数据的数量与动态数据分割值相同即可,本发明实施例对此并不进行限制。
S250、将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
可选的,当动态数据分割值与关联空闲区块链节点的节点数量相同时,每个关联空闲区块链节点可以存储一份分割数据。当动态数据分割值与关联空闲区块链节点的节点数量不同时,每个关联空闲区块链节点可以存储一份或多份分割数据。
例如,关联空闲区块链节点的节点数量为10时,动态数据分割值可以是10或15、20。当动态数据分割值为10时,一个关联空闲区块链节点可以对应存储一份分割数据。当动态数据分割值为15时,部分关联空闲区块链节点可以对应存储一份分割数据,部分关联空闲区块链节点可以对应存储2份或3份分割数据等,各关联空闲区块链节点存储的分割数据的数量总和为15。当动态数据分割值为20时,部分关联空闲区块链节点可以对应存储一份分割数据,部分关联空闲区块链节点可以对应存储2份或3份分割数据等,或者,也还可以每个关联空闲区块链节点可以对应存储2份分割数据,各关联空闲区块链节点存储的分割数据的数量总和为20。
在本发明的一个可选实施例中,在所述对所述当前目标区块链节点的待上传数据进行分割,得到分割数据之后,还可以包括:获取各所述分割数据的数据分割顺序;按照所述数据分割顺序对各所述分割数据标记分割顺序标识;将所述分割顺序标识和所述分割顺序标识匹配的关联空闲区块链节点位置存储至所述当前目标区块链节点。
其中,分割顺序标识可以用于标识各分割数据的分割顺序,从而利于对各分割数据进行拼接。
为了能够顺利对各分割数据进行重组拼接,得到原始完整的数据,在对当前目标区块链节点的待上传数据进行分割后,可以获取并记录各分割数据的数据分割顺序,并采用分割顺序标识按照数据分割顺序对各分割数据进行标记。示例性的,第一个分割数据可以标识为A001,第二个分割数据可以标识为A002……。相应的,可以将带有分割顺序标识的分割数据上传至关联空闲区块链节点进行存储。同时,可以在当前目标区块链节点中存储分割顺序标识以及各分割顺序标识与匹配的关联空闲区块链节点位置之间的映射关系。示例性的,分割数据的分割顺序标识为A001,其匹配的关联空闲区块链节点位置为区块链节点1,表明分割顺序标识为A001的分割数据存储在区块链节点1中。
S260、在确定所述当前目标区块链节点的节点状态转换为空闲状态的情况下,获取所述关联空闲区块链节点存储的所述分割数据。
S270、对所述分割数据进行重组,得到原始数据。
其中,原始数据可以是对当前目标区块链节点的待上传数据进行分割之前的数据。也即原始数据可以是通过对分割数据拼接得到的待上传数据。
相应的,如果确定当前目标区块链节点的节点状态转换为空闲状态,则表明当前目标区块链节点可以继续上传数据。此时,可以获取各关联空闲区块链节点存储的分割数据,并对其进行进行重组,得到原始数据。
在本公开的一个可选实施例中,所述对所述分割数据进行重组,得到原始数据,可以包括:获取所述分割数据的分割顺序标识;根据各所述分割数据的分割顺序标识确定各所述分割数据的重组顺序;根据各所述分割数据的重组顺序对所述分割数据进行重组,得到所述原始数据。
可选的,可以根据当前目标区块链节点存储的分割顺序标识和分割顺序标识匹配的关联空闲区块链节点位置等信息,依次按分割顺序获取各分割数据,并依次对获取的各分割数据确定重组顺序后对其进行重组得到原始数据。例如,从区块链节点1中获取分割顺序标识为A001的第一个分割数据,并从区块链节点2中获取分割顺序标识为A002的第二个分割数据,如果只有上述两个分割数据,则将分割顺序标识为A001的第一个分割数据和分割顺序标识为A002的第二个分割数据进行拼接重组,得到原始数据。
示例性的,对分割数据重组得到的原始数据可以是需要上传至当前目标区块链节点的初始电网数据,也还可以是当前目标区块链节点的剩余未上传电网数据,本发明实施例对此并不进行限制。可以理解的是,如果对分割数据重组得到的原始数据为当前目标区块链节点的剩余未上传电网数据,则需要再次对已上传至当前目标区块链节点的部分电网数据和剩余未上传电网数据进行重组,得到初始电网数据。
S280、将所述原始数据上传至所述当前目标区块链节点进行存储。
相应的,当对分割数据进行重组得到原始数据后,即可将重组得到的原始数据上传至当前目标区块链节点进行存储。可以理解的是,如果重组得到的原始数据是当前目标区块链节点剩余未上传的部分数据,则可以由当前目标区块链节点对已上传的数据和后续上传的重组的原始数据再次进行重组,得到真正的初始数据。如果重组得到的原始数据是需要上传至当前目标区块链节点的初始数据,则可以直接存储至当前目标区块链节点。
上述技术方案,通过对当前目标区块链节点以及相邻若干个的区块链节点的运行状态进行监控,以筛选出若干个关联空闲区块链节点,并在确定当前目标区块链节点的节点状态为忙碌状态时对待上传数据进行分割,并将分割后的数据按照分割顺序施加顺序标记后,分别上传到若干个关联空闲区块链节点中。同时在当前目标区块链节点中存储分割数据的顺序标记,实现数据的迅速上传,并且在确定当前目标区块链节点空闲时,按照顺序标记对分割后的数据进行重组,保证数据完整性的同时,达到初始数据迅速上传的目的。
为了更清楚的表述本发明实施例提供的技术方案,本发明实施例结合电网数据,以数据管理平台为例说明具体如何对区块链系统迅速上传电网数据。图3是本发明实施例二提供的一种数据管理平台的结构示意图。在一个具体的例子中,如图3所示,数据管理平台可以包括节点共享单元、备份存储单元、后台调控单元和状态展示单元,其中,节点共享单元与备份存储单元通信连接,备份存储单元与后台调控单元通信连接,后台调控单元分别与节点共享单元和状态展示单元通信连接。
图4是本发明实施例二提供的一种节点共享单元的结构示意图。在一个具体的例子中,如图4所示,节点共享单元可以包括节点监控模块和预定标记模块,其中,节点监控模块与预定标记模块通信连接。节点监控模块可以用于将电网数据存储在区块链的不同节点上,在将电网数据上传至目标节点中时,对相邻若干个节点的运行状态进行监控。预定标记模块可以用于在相邻若干个节点处于空闲状态时,标记为空闲节点,并根据空闲节点的数量设定数据分割值,同时对空闲节点进行预定标记。
图5是本发明实施例二提供的一种备份存储单元的结构示意图。在一个具体的例子中,如图5所示,备份存储单元可以包括数据分段模块、分流标记模块和集成存储模块。其中,数据分段模块与分流标记模块通信连接,分流标记模块与集成存储模块通信连接。数据分段模块可以用于在目标节点处于忙碌状态时,根据数据分割值,对上传至目标节点的初始数据进行分割,获得若干个分割数据。分流标记模块可以用于按照分割顺序对分割数据进行顺序标记,将若干个带有顺序标记的分割数据分别存储在若干个带有预定标记的空闲节点中。集成存储模块可以用于在目标节点处存储顺序标记和对应顺序标记的空闲节点位置。
图6是本发明实施例二提供的一种后台调控单元的结构示意图。在一个具体的例子中,如图6所示,后台调控单元可以包括状态监控模块、集成调控模块和反馈同步模块。其中,状态监控模块与集成调控模块通信连接,集成调控模块与反馈同步模块通信连接。状态监控模块可以用于对目标节点的运行状态进行监控。集成调控模块可以用于在目标节点处于空闲状态时,根据目标节点中存储的顺序标记和对应顺序标记的空闲节点位置,从对应空闲节点中复制带有顺序标记的分割数据,并按照顺序标记,对若干个分割数据进行重组,获取初始数据。反馈同步模块可以用于将初始数据存储在目标节点中。
图7是本发明实施例二提供的一种状态展示单元的结构示意图。在一个具体的例子中,如图7所示,状态展示单元可以包括统计展示模块和完成度展示模块,统计展示模块与完成度展示模块通信连接。其中,统计展示模块可以用于对带有预定标记的空闲节点进行展示,在若干个分割数据存储在若干个带有预定标记的空闲节点时,对数据存储进度进行展示。完成度展示模块可以用于在若干个分割数据进行重组时,对重组过程进行展示,并在重组完成后,进行重组完成标记。
图8是本发明实施例二提供的一种通过数据管理平台向区块链上传电网数据的流程示意图。在一个具体的例子中,如图8所示,通过数据管理平台向区块链上传电网数据的流程具体包括以下步骤:
步骤一、节点共享:将电网数据存储在区块链的不同节点上,通过节点监控模块将电网数据上传至目标节点中时,对相邻若干个节点的运行状态进行监控,预定标记模块在相邻若干个节点处于空闲状态时标记为空闲节点,并根据空闲节点的数量设定数据分割值,同时对空闲节点进行预定标记。
步骤二、备份存储:目标节点处于忙碌状态时,数据分段模块根据步骤一中的数据分割值对上传至目标节点的初始数据进行分割,获得若干个分割数据。分流标记模块按照分割顺序对分割数据进行顺序标记,将若干个带有顺序标记的分割数据分别存储在若干个带有预定标记的空闲节点中。集成存储模块在目标节点处存储顺序标记和对应顺序标记的空闲节点位置。
步骤三、后台调控:通过状态监控模块对目标节点的运行状态进行监控。集成调控模块在目标节点处于空闲状态时,根据目标节点中存储的顺序标记和对应顺序标记的空闲节点位置,从对应空闲节点中复制带有顺序标记的分割数据,并按照顺序标记,对若干个分割数据进行重组,获取初始数据。反馈同步模块将初始数据存储在目标节点中。
步骤四、状态展示:利用统计展示模块对步骤一中的带有预定标记的空闲节点进行展示,在步骤二中若干个分割数据存储在若干个带有预定标记的空闲节点时,对数据存储进度进行展示。在步骤三中对若干个分割数据进行重组时,完成度展示模块对重组过程进行展示,并在重组完成后,进行重组完成标记。
本发明通过对目标节点以及相邻若干个的节点的运行状态进行监控的方式,筛选出若干个空闲节点,对初始数据进行分割,并将分割后的数据按照分割顺序施加顺序标记后,分别上传到若干个空闲节点中,目标节点中存储顺序标记,实现数据的迅速上传,并且通过对目标节点的监控,在目标节点空闲时,可以按照顺序标记对分割后的数据进行重组,保证数据完整性的同时,达到初始数据迅速上传的目的。同时,通过预定标记的设置,可以实现对空闲节点的预定,避免空闲节点出现重复使用的情况,保证需要上传至目标节点中的初始数据在分割后,可以迅速的上传至对应的空闲节点中。再次,通过对带有预定标记的空闲节点和分割数据存储进度的展示,便于相关人员对初始数据上传流程的直观了解,在重组完成标记的设置下,实现对初始数据完整性的便捷判断。
需要说明的是,以上各实施例中各技术特征之间的任意排列组合也属于本发明的保护范围。
实施例三
图9是本发明实施例三提供的一种基于区块链的数据处理装置的示意图,如图9所示,所述装置包括:分割数据获取模块310、关联空闲区块链节点确定模块320以及分割数据上传模块330,其中:
分割数据获取模块310,用于在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据;
关联空闲区块链节点确定模块320,用于确定所述当前目标区块链节点的关联空闲区块链节点;
分割数据上传模块330,用于将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
本发明实施例通过在对当前目标区块链节点上传数据的过程中,确定当前目标区块链节点的节点状态为忙碌状态时,对当前目标区块链节点的待上传数据进行分割,得到分割数据,并确定当前目标区块链节点的关联空闲区块链节点,以将分割数据上传至关联空闲区块链节点进行分布式存储,解决现有对区块链节点上传数据时存在的数据上传效率低的问题,能够提高基于区块链的数据处理效率。
可选的,分割数据获取模块310具体用于:根据所述关联空闲区块链节点的节点数量实时确定动态数据分割值;根据所述动态数据分割值对所述当前目标区块链节点的待上传数据进行分割,得到所述分割数据。
可选的,基于区块链的数据处理装置还可以包括关联空闲区块链节点标记模块,用于:获取所述当前目标区块链节点的相邻区块链节点的运行状态;在确定所述相邻区块链节点的运行状态为空闲状态的情况下,采用预定节点标记将所述相邻区块链节点标记为所述关联空闲区块链节点。
可选的,基于区块链的数据处理装置还可以包括信息存储模块,用于:获取各所述分割数据的数据分割顺序;按照所述数据分割顺序对各所述分割数据标记分割顺序标识;将所述分割顺序标识和所述分割顺序标识匹配的关联空闲区块链节点位置存储至所述当前目标区块链节点。
可选的,基于区块链的数据处理装置还可以包括分割数据重组模块,用于:在确定所述当前目标区块链节点的节点状态转换为空闲状态的情况下,获取所述关联空闲区块链节点存储的所述分割数据;对所述分割数据进行重组,得到原始数据;将所述原始数据上传至所述当前目标区块链节点进行存储。
可选的,分割数据重组模块具体用于:获取所述分割数据的分割顺序标识;根据各所述分割数据的分割顺序标识确定各所述分割数据的重组顺序;根据各所述分割数据的重组顺序对所述分割数据进行重组,得到所述原始数据。
可选的,所述待上传数据包括上传至所述当前目标区块链节点的初始电网数据,或,所述待上传数据包括所述当前目标区块链节点的剩余未上传电网数据。
上述基于区块链的数据处理装置可执行本发明任意实施例所提供的基于区块链的数据处理方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明任意实施例提供的基于区块链的数据处理方法。
由于上述所介绍的基于区块链的数据处理装置为可以执行本发明实施例中的基于区块链的数据处理方法的装置,故而基于本发明实施例中所介绍的基于区块链的数据处理方法,本领域所属技术人员能够了解本实施例的基于区块链的数据处理装置的具体实施方式以及其各种变化形式,所以在此对于该基于区块链的数据处理装置如何实现本发明实施例中的基于区块链的数据处理方法不再详细介绍。只要本领域所属技术人员实施本发明实施例中基于区块链的数据处理方法所采用的装置,都属于本申请所欲保护的范围。
实施例四
图10示出了可以用来实施本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
如图10所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机访问存储器(RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。
电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如基于区块链的数据处理方法。
在一些实施例中,基于区块链的数据处理方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时,可以执行上文描述的基于区块链的数据处理方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行基于区块链的数据处理方法。
例如,基于区块链的数据处理方法可以包括:在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据;确定所述当前目标区块链节点的关联空闲区块链节点;将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
Claims (10)
1.一种基于区块链的数据处理方法,其特征在于,包括:
在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据;
确定所述当前目标区块链节点的关联空闲区块链节点;
将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
2.根据权利要求1所述的方法,其特征在于,所述对所述当前目标区块链节点的待上传数据进行分割,得到分割数据,包括:
根据所述关联空闲区块链节点的节点数量实时确定动态数据分割值;
根据所述动态数据分割值对所述当前目标区块链节点的待上传数据进行分割,得到所述分割数据。
3.根据权利要求1或2所述的方法,其特征在于,在所述对所述当前目标区块链节点的待上传数据进行分割,得到分割数据之前,还包括:
获取所述当前目标区块链节点的相邻区块链节点的运行状态;
在确定所述相邻区块链节点的运行状态为空闲状态的情况下,采用预定节点标记将所述相邻区块链节点标记为所述关联空闲区块链节点。
4.根据权利要求1或2所述的方法,其特征在于,在所述对所述当前目标区块链节点的待上传数据进行分割,得到分割数据之后,还包括:
获取各所述分割数据的数据分割顺序;
按照所述数据分割顺序对各所述分割数据标记分割顺序标识;
将所述分割顺序标识和所述分割顺序标识匹配的关联空闲区块链节点位置存储至所述当前目标区块链节点。
5.根据权利要求1所述的方法,其特征在于,在所述将所述分割数据上传至所述关联空闲区块链节点进行分布式存储之后,还包括:
在确定所述当前目标区块链节点的节点状态转换为空闲状态的情况下,获取所述关联空闲区块链节点存储的所述分割数据;
对所述分割数据进行重组,得到原始数据;
将所述原始数据上传至所述当前目标区块链节点进行存储。
6.根据权利要求5所述的方法,其特征在于,所述对所述分割数据进行重组,得到原始数据,包括:
获取所述分割数据的分割顺序标识;
根据各所述分割数据的分割顺序标识确定各所述分割数据的重组顺序;
根据各所述分割数据的重组顺序对所述分割数据进行重组,得到所述原始数据。
7.根据权利要求1所述的方法,其特征在于,所述待上传数据包括上传至所述当前目标区块链节点的初始电网数据,或,所述待上传数据包括所述当前目标区块链节点的剩余未上传电网数据。
8.一种基于区块链的数据处理装置,其特征在于,包括:
分割数据获取模块,用于在确定当前目标区块链节点的节点状态为忙碌状态的情况下,对所述当前目标区块链节点的待上传数据进行分割,得到分割数据;
关联空闲区块链节点确定模块,用于确定所述当前目标区块链节点的关联空闲区块链节点;
分割数据上传模块,用于将所述分割数据上传至所述关联空闲区块链节点进行分布式存储。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7中任一所述的基于区块链的数据处理方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7中任一所述的基于区块链的数据处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310927940.4A CN116938953A (zh) | 2023-07-26 | 2023-07-26 | 基于区块链的数据处理方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310927940.4A CN116938953A (zh) | 2023-07-26 | 2023-07-26 | 基于区块链的数据处理方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116938953A true CN116938953A (zh) | 2023-10-24 |
Family
ID=88385949
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310927940.4A Pending CN116938953A (zh) | 2023-07-26 | 2023-07-26 | 基于区块链的数据处理方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116938953A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117809657A (zh) * | 2024-02-29 | 2024-04-02 | 国网山东省电力公司东营供电公司 | 自应答智能辅助电话机器人 |
CN117809657B (zh) * | 2024-02-29 | 2024-05-24 | 国网山东省电力公司东营供电公司 | 自应答智能辅助电话机器人 |
-
2023
- 2023-07-26 CN CN202310927940.4A patent/CN116938953A/zh active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117809657A (zh) * | 2024-02-29 | 2024-04-02 | 国网山东省电力公司东营供电公司 | 自应答智能辅助电话机器人 |
CN117809657B (zh) * | 2024-02-29 | 2024-05-24 | 国网山东省电力公司东营供电公司 | 自应答智能辅助电话机器人 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113037594B (zh) | 基于云服务的压力测试方法和装置 | |
CN114896166A (zh) | 场景库构建方法、装置、电子设备及存储介质 | |
CN114070752B (zh) | 测试方法、装置、电子设备及计算机可读存储介质 | |
CN115099175B (zh) | 一种时序网表的获取方法、装置、电子设备和存储介质 | |
CN116594563A (zh) | 分布式存储扩容方法、装置、电子设备和存储介质 | |
CN115361295B (zh) | 基于topsis的资源备份方法、装置、设备及介质 | |
CN113691403B (zh) | 拓扑节点配置方法、相关装置及计算机程序产品 | |
CN116938953A (zh) | 基于区块链的数据处理方法、装置、电子设备及存储介质 | |
CN116050159A (zh) | 一种仿真场景集生成方法、装置、设备及介质 | |
CN114070889B (zh) | 配置方法、流量转发方法、设备、存储介质及程序产品 | |
CN115495151A (zh) | 规则引擎的迁移方法、装置、设备、存储介质及程序产品 | |
US10897401B2 (en) | Determining the importance of network devices based on discovered topology, managed endpoints, and activity | |
CN116743589B (zh) | 云主机迁移方法、装置及电子设备 | |
CN116306407B (zh) | 片上网络noc的验证方法、装置、设备和存储介质 | |
CN116800665A (zh) | 一种边缘节点管理方法、装置、设备及存储介质 | |
CN108733693A (zh) | 数据管理方法、装置、存储介质及处理器 | |
CN116016176A (zh) | 一种数据中心设备的自动分配方法及装置 | |
CN117290014A (zh) | 一种海外服务器部署方法、装置、设备和介质 | |
CN117061412A (zh) | 一种电力系统中的传输路径确定方法、装置及电子设备 | |
CN117632149A (zh) | 应用程序的控制方法、装置、电子设备及存储介质 | |
CN117724440A (zh) | 一种故障码采集方法、装置、电子设备和存储介质 | |
CN117749656A (zh) | 集群运行监控方法、装置、设备以及存储介质 | |
CN115203876A (zh) | 红黑图更新方法、装置、设备及介质 | |
CN115269055A (zh) | Nginx请求数据采集方法、装置、设备及存储介质 | |
CN117749614A (zh) | 一种协议规则确定方法、装置、电子设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |