CN113098970A - 一种分布式网络节点数据同步方法 - Google Patents

一种分布式网络节点数据同步方法 Download PDF

Info

Publication number
CN113098970A
CN113098970A CN202110390333.XA CN202110390333A CN113098970A CN 113098970 A CN113098970 A CN 113098970A CN 202110390333 A CN202110390333 A CN 202110390333A CN 113098970 A CN113098970 A CN 113098970A
Authority
CN
China
Prior art keywords
node
synchronized
data
block chain
distributed network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110390333.XA
Other languages
English (en)
Inventor
王保春
张蛟鹏
余洋
莫恒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Yongqi Blockchain Technology Co Ltd
Original Assignee
Zhejiang Yongqi Blockchain Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Yongqi Blockchain Technology Co Ltd filed Critical Zhejiang Yongqi Blockchain Technology Co Ltd
Priority to CN202110390333.XA priority Critical patent/CN113098970A/zh
Publication of CN113098970A publication Critical patent/CN113098970A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/104Peer-to-peer [P2P] networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种分布式网络节点数据同步方法,包括步骤:S1)确定待同步数据集合;S2)第一区块链节点接收待同步数据集合并对待同步数据集合依次进行压缩和分割处理,待同步数据集合被划分成多个待同步数据子集合;S3)根据第二区块链节点的表征能力参数评分划分多个第二区块链节点优先级;S4)多个第二区块链节点根据自身优先级被分配多个待同步数据子集合;S5)第一区块链节点向多个第二区块链节点发送数据同步请求信息,以请求获取到待同步数据子集合构成的待同步数据集合。本发明提供的分布式网络节点数据同步方法,通过设定参与节点的优先级使待同步数据与参与节点相匹配,减小了参与节点出现问题的几率,有效提高了节点数据的同步性。

Description

一种分布式网络节点数据同步方法
技术领域
本发明涉及计算机技术领域,特别是涉及一种分布式网络节点数据同步方法。
背景技术
区块链是一种按照时间顺序将区块数据以顺序相连的方式组合成的一种链式数据结构,并以密码学方式保证的不可篡改、不可伪造、完全可追溯、去中心化的分布式账本。
随着网络和信息技术的快速发展,分布式技术日益成熟,分布式系统的应用也越来越广泛。在分布式系统中,如何实现分布式节点间的信息实时共享,保证系统的数据一致性,一直都是本领域的热点问题。区块链系统中通常存在多个参与节点,参与节点之间通过共识协议来确保各自数据的一致性。但是,由于参与节点行为的随意性,每个服务节点所接受到的数据请求量就会不同,某些节点会被要求处理过多的请求,同时由于节点的宽带资源、存储容量以及环境网络差异等原因,个别节点超过自身所能承受的请求压力,因而会造成节点的故障或失效,导致该节点参与的数据落后于其他正常的参与节点,进一步造成节点数据无法同步的问题,而节点数据的同步问题一直是本领域中希望解决的难题。
发明内容
本发明的目的是提供一种分布式网络节点数据同步方法,通过设定参与节点的优先级使待同步数据与参与节点相匹配,减小了参与节点出现问题的几率,有效提高了节点数据的同步性。
为实现上述目的,本发明提供了如下方案:
一种分布式网络节点数据同步方法,包括如下步骤:
S1)确定待同步数据集合;
S2)第一区块链节点接收待同步数据集合并对待同步数据集合依次进行压缩和分割处理,待同步数据集合被划分成多个待同步数据子集合;
S3)根据第二区块链节点的表征能力参数评分划分多个第二区块链节点优先级;
S4)多个第二区块链节点根据自身优先级被分配多个待同步数据子集合;
S5)第一区块链节点向多个第二区块链节点发送数据同步请求信息,以请求获取到待同步数据子集合构成的待同步数据集合。
可选的,步骤S3)中所述第二区块链节点的表征能力参数评分由第二区块链节点的各个表征能力参数加权获得。
可选的,所述第二区块链的表征能力参数包括负载信息、接收数据响应时间以及接收数据信息成功率。
可选的,所述负载信息包括超载节点、一般节点、轻载节点以及空闲节点分别相对应的信息。
可选的,所述超载节点为负载高于80%的节点,所述一般节点为负载高于30%且低于80%的节点,所述轻载节点为负载高于0且低于30%的节点,所述空闲节点为负载是0的节点。
根据本发明提供的具体实施例,本发明公开了以下技术效果:本发明提供的分布式网络节点数据同步方法,包括步骤:S1)确定待同步数据集合;S2)第一区块链节点接收待同步数据集合并对待同步数据集合依次进行压缩和分割处理,待同步数据集合被划分成多个待同步数据子集合;S3)根据第二区块链节点的表征能力参数评分划分多个第二区块链节点优先级;S4)多个第二区块链节点根据自身优先级被分配多个待同步数据子集合;S5)第一区块链节点向多个第二区块链节点发送数据同步请求信息,以请求获取到待同步数据子集合构成的待同步数据集合。该方法简单,综合考虑了参与节点的负载信息、接收数据响应时间以及接收数据信息成功率并设定了优先级使待同步数据与参与节点相匹配,减小了参与节点出现问题的几率,有效提高了节点数据的同步性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例分布式网络节点数据同步方法的流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明的目的是提供一种分布式网络节点数据同步方法,通过设定参与节点的优先级使待同步数据与参与节点相匹配,减小了参与节点出现问题的几率,有效提高了节点数据的同步性。
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图和具体实施方式对本发明作进一步详细的说明。
图1为本发明实施例分布式网络节点数据同步方法的流程图,如图1所示,本发明实施例提供的分布式网络节点数据同步方法,包括如下步骤:
S1)确定待同步数据集合;
S2)第一区块链节点接收待同步数据集合并对待同步数据集合依次进行压缩和分割处理,待同步数据集合被划分成多个待同步数据子集合;其中,对待同步数据进行压缩处理可以减小其存储空间;
S3)根据第二区块链节点的表征能力参数评分划分多个第二区块链节点优先级;
S4)多个第二区块链节点根据自身优先级被分配多个待同步数据子集合;
S5)第一区块链节点向多个第二区块链节点发送数据同步请求信息,以请求获取到待同步数据子集合构成的待同步数据集合。
步骤S3)中所述第二区块链节点的表征能力参数评分由第二区块链节点的各个表征能力参数加权获得,其权重系数由人为设定。
所述第二区块链的表征能力参数包括负载信息、接收数据响应时间以及接收数据信息成功率。
所述负载信息包括超载节点、一般节点、轻载节点以及空闲节点分别相对应的信息。
所述超载节点为负载高于80%的节点,所述一般节点为负载高于30%且低于80%的节点,所述轻载节点为负载高于0且低于30%的节点,所述空闲节点为负载是0的节点。
本发明提供的分布式网络节点数据同步方法,包括步骤:S1)确定待同步数据集合;S2)第一区块链节点接收待同步数据集合并对待同步数据集合依次进行压缩和分割处理,待同步数据集合被划分成多个待同步数据子集合;S3)根据第二区块链节点的表征能力参数评分划分多个第二区块链节点优先级;S4)多个第二区块链节点根据自身优先级被分配多个待同步数据子集合;S5)第一区块链节点向多个第二区块链节点发送数据同步请求信息,以请求获取到待同步数据子集合构成的待同步数据集合。该方法简单,综合考虑了参与节点的负载信息、接收数据响应时间以及接收数据信息成功率并设定了优先级使待同步数据与参与节点相匹配,减小了参与节点出现问题的几率,有效提高了节点数据的同步性。
本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处。综上所述,本说明书内容不应理解为对本发明的限制。

Claims (5)

1.一种分布式网络节点数据同步方法,其特征在于,包括如下步骤:
S1)确定待同步数据集合;
S2)第一区块链节点接收待同步数据集合并对待同步数据集合依次进行压缩和分割处理,待同步数据集合被划分成多个待同步数据子集合;
S3)根据第二区块链节点的表征能力参数评分划分多个第二区块链节点优先级;
S4)多个第二区块链节点根据自身优先级被分配多个待同步数据子集合;
S5)第一区块链节点向多个第二区块链节点发送数据同步请求信息,以请求获取到待同步数据子集合构成的待同步数据集合。
2.根据权利要求1所述的分布式网络节点数据同步方法,其特征在于,步骤S3)中所述第二区块链节点的表征能力参数评分由第二区块链节点的各个表征能力参数加权获得。
3.根据权利要求2所述的分布式网络节点数据同步方法,其特征在于,所述第二区块链的表征能力参数包括负载信息、接收数据响应时间以及接收数据信息成功率。
4.根据权利要求3所述的分布式网络节点数据同步方法,其特征在于,所述负载信息包括超载节点、一般节点、轻载节点以及空闲节点分别相对应的信息。
5.根据权利要求4所述的分布式网络节点数据同步方法,其特征在于,所述超载节点为负载高于80%的节点,所述一般节点为负载高于30%且低于80%的节点,所述轻载节点为负载高于0且低于30%的节点,所述空闲节点为负载是0的节点。
CN202110390333.XA 2021-04-12 2021-04-12 一种分布式网络节点数据同步方法 Pending CN113098970A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110390333.XA CN113098970A (zh) 2021-04-12 2021-04-12 一种分布式网络节点数据同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110390333.XA CN113098970A (zh) 2021-04-12 2021-04-12 一种分布式网络节点数据同步方法

Publications (1)

Publication Number Publication Date
CN113098970A true CN113098970A (zh) 2021-07-09

Family

ID=76677154

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110390333.XA Pending CN113098970A (zh) 2021-04-12 2021-04-12 一种分布式网络节点数据同步方法

Country Status (1)

Country Link
CN (1) CN113098970A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104410708A (zh) * 2014-12-12 2015-03-11 中山大学深圳研究院 一种基于蚁群算法的p2p负载均衡方法及系统
US20190018888A1 (en) * 2017-04-12 2019-01-17 Vijay K. Madisetti Method and System for Tuning Blockchain Scalability, Decentralization, and Security for Fast and Low-Cost Payment and Transaction Processing
CN109522362A (zh) * 2018-10-17 2019-03-26 北京瑞卓喜投科技发展有限公司 基于区块链数据的非完全数据同步方法、系统及设备
CN109714412A (zh) * 2018-12-25 2019-05-03 深圳前海微众银行股份有限公司 区块同步方法、装置、设备及计算机可读存储介质
CN111241593A (zh) * 2020-01-02 2020-06-05 支付宝(杭州)信息技术有限公司 用于区块链节点的数据同步方法及装置
CN111294390A (zh) * 2020-01-17 2020-06-16 腾讯科技(深圳)有限公司 一种区块数据快速同步方法、装置、设备及存储介质
CN112287031A (zh) * 2020-12-15 2021-01-29 腾讯科技(深圳)有限公司 区块链系统的数据同步方法、装置、可读介质及电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104410708A (zh) * 2014-12-12 2015-03-11 中山大学深圳研究院 一种基于蚁群算法的p2p负载均衡方法及系统
US20190018888A1 (en) * 2017-04-12 2019-01-17 Vijay K. Madisetti Method and System for Tuning Blockchain Scalability, Decentralization, and Security for Fast and Low-Cost Payment and Transaction Processing
CN109522362A (zh) * 2018-10-17 2019-03-26 北京瑞卓喜投科技发展有限公司 基于区块链数据的非完全数据同步方法、系统及设备
CN109714412A (zh) * 2018-12-25 2019-05-03 深圳前海微众银行股份有限公司 区块同步方法、装置、设备及计算机可读存储介质
CN111241593A (zh) * 2020-01-02 2020-06-05 支付宝(杭州)信息技术有限公司 用于区块链节点的数据同步方法及装置
CN111294390A (zh) * 2020-01-17 2020-06-16 腾讯科技(深圳)有限公司 一种区块数据快速同步方法、装置、设备及存储介质
CN112287031A (zh) * 2020-12-15 2021-01-29 腾讯科技(深圳)有限公司 区块链系统的数据同步方法、装置、可读介质及电子设备

Similar Documents

Publication Publication Date Title
CN111935315B (zh) 区块同步方法及装置
CN109933431B (zh) 一种智能的客户端负载均衡方法及系统
CN106657191B (zh) 一种负载均衡方法及相关装置、系统
WO2018121201A1 (zh) 分布式集群服务结构及节点协同方法和装置、终端及介质
CN111522874B (zh) 区块链共识方法、装置、计算机设备和存储介质
CN103166871A (zh) 一种大型互联网服务器网络实现负载均衡的系统及方法
CN111858033A (zh) 基于集群和多进程的负载均衡方法
CN108924609A (zh) 流媒体数据传输的方法、电子设备、装置及存储介质
CN110515728B (zh) 服务器调度方法、装置、电子设备及机器可读存储介质
CN111491020B (zh) 数据处理方法、装置、计算机设备以及存储介质
CN111163172A (zh) 消息处理系统、方法、电子设备及存储介质
US11539919B1 (en) Dynamic cloud video composition
CN113098970A (zh) 一种分布式网络节点数据同步方法
CN112866390A (zh) 一种数据传输方法、装置、终端设备和存储介质
Singh et al. Creating an adaptive network of hubs using Schelling's model
CN103281395B (zh) 一种基于客户端数量的数据片均分选择系统及方法
CN111654393B (zh) 区块链组网方法及系统
CN114339711A (zh) 一种基于分布式架构的互联网接入系统及方法
CN112711465A (zh) 基于云平台的数据处理方法、装置、电子设备及存储介质
CN111510484A (zh) 区块链处理方法、系统、装置、计算机设备和存储介质
CN114979232B (zh) 移动web增强现实去中心协同渲染计算网络的构建方法
CN116827826B (zh) 边缘节点的评估方法、装置以及计算机可读存储介质
CN114979153B (zh) 负载均衡方法、计算机设备及存储装置
CN111698454B (zh) 一种动态选择最优路径的域间资源推送方法及装置
CN117376352B (zh) 基于区块链的物联网系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210709