CN114666248B - 一种联盟链分片交易分发方法及装置 - Google Patents
一种联盟链分片交易分发方法及装置 Download PDFInfo
- Publication number
- CN114666248B CN114666248B CN202210536592.3A CN202210536592A CN114666248B CN 114666248 B CN114666248 B CN 114666248B CN 202210536592 A CN202210536592 A CN 202210536592A CN 114666248 B CN114666248 B CN 114666248B
- Authority
- CN
- China
- Prior art keywords
- transaction
- delay
- transactions
- distributed
- fragmentation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
- H04L67/1074—Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
- H04L67/1078—Resource delivery mechanisms
- H04L67/108—Resource delivery mechanisms characterised by resources being split in blocks or fragments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
- H04L67/1008—Server selection for load balancing based on parameters of servers, e.g. available memory or workload
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/104—Peer-to-peer [P2P] networks
- H04L67/1059—Inter-group management mechanisms, e.g. splitting, merging or interconnection of groups
Abstract
本发明公开了一种联盟链分片交易分发方法及装置,本发明在用户端部署交易评估装置,并提出一种利用交易评估装置中的交易评估模型将交易分发到分片中的策略,交易评估模型从减少跨分片通信、各分片负载均衡两个方面对交易进行评估,并得出最优解,将交易分发到对应分片中,使得跨分片通信消耗最小,各分片处理交易负载均衡。本发明方法能够大大提高联盟链性能,并能够保证交易的全序性、结果一致性及安全性。
Description
技术领域
本发明属于联盟链技术领域,尤其涉及一种联盟链分片交易分发方法及装置。
背景技术
当前联盟链在很多领域得到广泛应用,但是联盟链的性能满足不了业务需求,目前针对联盟链性能优化有针对单一链下的共识优化、网络优化等,或者是采用多链分片的思想,将交易分发到不同的分片链上,分片链再进行通信,那么联盟链处理能力为这些分片的总和,但是这种做法和跨链优化比较像,其中分片间涉及到交易事务性、原子性等问题,各分片之间需要进行跨分片通信解决原子性等问题,跨分片开销比较大,另一方面要确保各分片负载均衡。
发明内容
本发明的目的在于针对现有技术的不足,提供一种联盟链分片交易分发方法及装置。
本发明的目的是通过以下技术方案实现的:
根据本发明的第一方面,提供一种联盟链分片交易分发方法,包括:
在用户端部署交易评估装置;
用户端发送交易集合到所述交易评估装置;
所述交易评估装置接收到交易集合,对交易集合进行交易有向图构造,根据交易相关性计算待分发交易在所有分片的交易相关性评分,根据网络通信时延和交易执行时延计算待分发交易在所有分片的交易延迟评分,根据交易相关性评分和交易延迟评分计算交易总评分;
所述交易评估装置将待分发交易发送到交易总评分最大值对应的分片。
进一步地,所述交易评估装置部署在用户端,通过预言机连接到联盟链网络。
进一步地,根据交易源地址和交易目的地址,得到待分发交易的前序交易和后序交易,从而确定交易相关性。
其中,为在分片k中交易u的前序交易集合,为在分片k中交易的
后序交易集合,代表集合中交易数量;为动态调整系数,,N为待分发交易
集合中的交易数量,K为分片数量;为前序交易相关性系数,如果交易u在分片k中没有
前序交易,则,否则,为分片k中的交易数量。
进一步地,所述网络通信时延采用指数分布模型进行建模,通过对开始提交交易到分片节点接收到交易的时间进行采样获得,针对分片k,网络通信时延的计算公式如下:
进一步地,所述交易执行时延采用指数分布模型进行建模,通过对交易在分片中的执行时间进行采样获得,针对分片k,交易执行时延的公式如下:
进一步地,交易提交到分片中的具体节点,随机分配或者根据节点压力分配。
根据本发明的第二方面,提供一种联盟链分片交易分发装置,包括存储器和一个或多个处理器,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,实现上述联盟链分片交易分发方法。
本发明的有益效果是:本发明在用户端部署交易评估装置,并提出一种利用交易评估装置中的交易评估模型将交易分发到分片中的策略,交易评估模型从减少跨分片通信、各分片负载均衡两个方面对交易进行评估,并将得出最优解,将交易分发到对应分片中,使得跨分片通信消耗最小,各分片处理交易负载均衡。本发明方法能够大大提高联盟链性能,并能够保证交易的全序性、结果一致性及安全性;能够显著提升业务系统的性能,为服务实体经济打下基础。
附图说明
图1为本发明实施例提供的联盟链分片交易分发总体架构图;
图2为本发明实施例提供的联盟链分片交易分发方法流程图;
图3为本发明实施例提供的联盟链分片交易分发装置结构图。
具体实施方式
为了更好的理解本申请的技术方案,下面结合附图对本申请实施例进行详细描述。
应当明确,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例,都属于本申请保护的范围。
在本申请实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
本发明出发点是:1、将相关性比较强的交易放置到同一分片中以减少跨分片通信;2、确保每个分片队列负载均衡,以求总体的最大吞吐率。
本发明通过设计用户端交易评估装置决定交易分发到哪个分片,以求联盟链网络总体最优性能。如图1所示,本发明架构如下:
本发明设计的交易评估装置部署在用户端,而不是部署在联盟链网络的节点上,用户向联盟链网络提交交易时,先通过用户端的交易评估装置得到评分,根据评分的最高值提交到对应分片的节点上,这种非入侵式的部署方式,不会影响联盟链网络本身的性能,不会带来联盟链网络的安全隐患。
此外,用户端通过预言机连接到联盟链网络,进一步提升安全性。
本发明设计的交易评估装置中执行交易评估模型,从交易相关性和交易时延这两个维度来衡量交易分发到分片的策略,下面详细阐述每个维度的具体实现流程。
(一)根据交易相关性的交易分发策略
对交易分发到各个分片进行评估打分,评分主要根据交易之间的相关性,将具有相关性的交易尽量放到同一分片中,减少跨分片通信。如果某个分片中的交易和待分发交易的相关性比较大,那么评分就会相对比较高。
在打包阶段,提交交易集合,对交易集合进行交易有向图构造。交易相关性根据交易的对象From、To决定,对于待分发交易u,根据交易有向图可以得到交易u的前序交易和后序交易,该交易顶点的入度边对应的顶点即为该交易的前序交易,该交易顶点的出度边对应的顶点即为该交易的后序交易。交易的数据结构如下表所示:
将交易集合中的交易根据交易相关性评分分发到对应分片。
在一个实施例中,交易相关性评分Correlation-score的计算过程如下:
例如交易tx1:A->B,tx2:B->D,tx3:B->E,t4:B->F,tx5:M->B,则交易tx2的前序交易为tx1和tx5,交易tx2的后序交易为tx3和tx4。
对待分发交易u计算得到其在所有分片的交易相关性评分。
(二)根据交易时延大小的交易分发策略
为了避免将交易过多的放到一个分片中,导致各分片负载不均衡,影响整个联盟链处理效率,提出交易延迟评分,用于评估从开始提交交易到交易在分片节点执行完成的时延,交易时延主要包括:网络通信时延及交易执行时延。时延可以很好地体现该分片网络的负载情况,时延越小越好。
在一个实施例中,交易延迟评分Latency-score的计算过程如下:
各分片所处理的交易集合为,当交易u分发到分片k,联盟链中网络
通信时间为独立随机分布事件,因此网络通信时延可以采用指数分布模型进行建模,具体
地,可以通过对开始提交交易到分片节点接收到交易的时间进行采样获得;
由于交易需要在各分片交易调度队列中进行调度,待分发交易u在分片k中的执行时间即交易执行时延为独立随机分布事件,因此可以采用指数分布模型进行建模,具体地,可以通过待分发交易在分片中的执行时间进行采样获得;
那么交易u分发到分片k的总交易时延的概率分布函数为网络通信时延与交易执行时延的积分值,可以用以下公式表示:
对待分发交易u计算得到其在所有分片的交易延迟评分。
(三)总体评分策略
为了尽可能地保持负责均衡与减少跨分片通信之间的平衡,以达到总体性能的最
优,交易u最终分发的分片根据交易相关性评分及交易延迟评分共同决
定,根据以上分析可知,的值越大越好,的值越小越好,本发明设计了和的加权分配策略,通过以下公式计算交易u分发到分片k的交易总评分:
其中,为动态系数,,其中,K为分片数量,为交易集合
开始分发时的各联盟链网络节点的负载率的平均值,该值能够反应每次交易集合分发时交
易相关性与负载均衡之间的权衡,该值在每次交易集合分发时会根据联盟链网络实际情况
进行动态变化。
对待分发交易u计算得到其在所有分片的交易总评分。
如图2所示,联盟链分片交易分发的总体流程如下:
(1)确定联盟链网络分片信息,即确定各个分片的节点集合;
(2)用户端发送交易集合到其交易评估装置;
(3)交易评估装置接收到交易集合,根据交易的对象From、To依赖关系构建交易有向图,得到待分发交易的前序交易和后序交易,然后对待分发交易分发到各个分片进行交易相关性评分和交易延迟评分;
(4)根据交易相关性评分和交易延迟评分计算出交易总评分,交易评估装置对交易分发到各分片的交易总评分进行排序,取最大值;
(5)将待分发交易发送到交易总评分最大值对应的分片;交易提交到分片中的具体节点,可以随机分配或者根据节点压力分配;
(6)如果不同的分片中交易有相关性,则进行跨分片通信确保交易的全序性、一致性;
(7)分片内共识;
(8)执行交易;
(9)生成区块,更新账本。
与前述联盟链分片交易分发方法的实施例相对应,本发明还提供了联盟链分片交易分发装置的实施例。
参见图3,本发明实施例提供的联盟链分片交易分发装置,包括存储器和一个或多个处理器,所述存储器中存储有可执行代码,所述处理器执行所述可执行代码时,用于实现上述实施例中的联盟链分片交易分发方法。
本发明联盟链分片交易分发装置的实施例可以应用在任意具备数据处理能力的设备上,该任意具备数据处理能力的设备可以为诸如计算机等设备或装置。装置实施例可以通过软件实现,也可以通过硬件或者软硬件结合的方式实现。以软件实现为例,作为一个逻辑意义上的装置,是通过其所在任意具备数据处理能力的设备的处理器将非易失性存储器中对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言,如图3所示,为本发明联盟链分片交易分发装置所在任意具备数据处理能力的设备的一种硬件结构图,除了图3所示的处理器、内存、网络接口、以及非易失性存储器之外,实施例中装置所在的任意具备数据处理能力的设备通常根据该任意具备数据处理能力的设备的实际功能,还可以包括其他硬件,对此不再赘述。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本发明实施例还提供一种计算机可读存储介质,其上存储有程序,该程序被处理器执行时,实现上述实施例中的联盟链分片。
所述计算机可读存储介质可以是前述任一实施例所述的任意具备数据处理能力的设备的内部存储单元,例如硬盘或内存。所述计算机可读存储介质也可以是任意具备数据处理能力的设备的外部存储设备,例如所述设备上配备的插接式硬盘、智能存储卡(Smart Media Card,SMC)、SD卡、闪存卡(Flash Card)等。进一步的,所述计算机可读存储介质还可以既包括任意具备数据处理能力的设备的内部存储单元也包括外部存储设备。所述计算机可读存储介质用于存储所述计算机程序以及所述任意具备数据处理能力的设备所需的其他程序和数据,还可以用于暂时地存储已经输出或者将要输出的数据。
以上所述仅为本说明书一个或多个实施例的较佳实施例而已,并不用以限制本说明书一个或多个实施例,凡在本说明书一个或多个实施例的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本说明书一个或多个实施例保护的范围之内。
Claims (7)
1.一种联盟链分片交易分发方法,其特征在于,包括:
在用户端部署交易评估装置;
用户端发送交易集合到所述交易评估装置;
所述交易评估装置接收到交易集合,对交易集合进行交易有向图构造,根据交易相关性计算待分发交易在所有分片的交易相关性评分,根据网络通信时延和交易执行时延计算待分发交易在所有分片的交易延迟评分,根据交易相关性评分和交易延迟评分计算交易总评分;
其中,为在分片k中交易u的前序交易集合,为在分片k中交易的后序
交易集合,代表集合中交易数量;为动态调整系数,,N为待分发交易集合
中的交易数量,K为分片数量;为前序交易相关性系数,如果交易u在分片k中没有前序
交易,则,否则,为分片k中的交易数量;
所述交易评估装置将待分发交易发送到交易总评分最大值对应的分片。
2.根据权利要求1所述的联盟链分片交易分发方法,其特征在于,所述交易评估装置部署在用户端,通过预言机连接到联盟链网络。
3.根据权利要求1所述的联盟链分片交易分发方法,其特征在于,根据交易源地址和交易目的地址,得到待分发交易的前序交易和后序交易,从而确定交易相关性。
6.根据权利要求1所述的联盟链分片交易分发方法,其特征在于,交易提交到分片中的具体节点,随机分配或者根据节点压力分配。
7.一种联盟链分片交易分发装置,包括存储器和一个或多个处理器,所述存储器中存储有可执行代码,其特征在于,所述处理器执行所述可执行代码时,实现如权利要求1-6中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210536592.3A CN114666248B (zh) | 2022-05-18 | 2022-05-18 | 一种联盟链分片交易分发方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210536592.3A CN114666248B (zh) | 2022-05-18 | 2022-05-18 | 一种联盟链分片交易分发方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114666248A CN114666248A (zh) | 2022-06-24 |
CN114666248B true CN114666248B (zh) | 2022-09-06 |
Family
ID=82036452
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210536592.3A Active CN114666248B (zh) | 2022-05-18 | 2022-05-18 | 一种联盟链分片交易分发方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114666248B (zh) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106934716A (zh) * | 2017-03-10 | 2017-07-07 | 燧石科技(武汉)有限公司 | 基于网络分布式计算的多模块自动化交易系统 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7346575B1 (en) * | 2002-01-07 | 2008-03-18 | First Data Corporation | Systems and methods for selectively delaying financial transactions |
CN109688199B (zh) * | 2018-11-28 | 2021-12-10 | 西安电子科技大学 | 一种多域分层物联网联盟链平台及其分片方法、计算机 |
CN111383019A (zh) * | 2020-05-28 | 2020-07-07 | 支付宝(杭州)信息技术有限公司 | 一种基于联盟链网络的交易执行方法及系统 |
CN111901350B (zh) * | 2020-07-30 | 2022-10-14 | 平安科技(深圳)有限公司 | 区块链系统、数据处理方法、计算机设备及存储介质 |
CN112766560B (zh) * | 2021-01-15 | 2024-02-06 | 中国工商银行股份有限公司 | 联盟区块链网络优化方法、装置、系统和电子设备 |
CN112907252B (zh) * | 2021-02-02 | 2023-10-31 | 中国科学院计算技术研究所 | 一种基于多人链下通道的区块链交易方法及系统 |
CN114298713B (zh) * | 2022-03-03 | 2022-07-08 | 浙商银行股份有限公司 | 一种联盟链分片方法、装置及存储介质 |
-
2022
- 2022-05-18 CN CN202210536592.3A patent/CN114666248B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106934716A (zh) * | 2017-03-10 | 2017-07-07 | 燧石科技(武汉)有限公司 | 基于网络分布式计算的多模块自动化交易系统 |
Non-Patent Citations (1)
Title |
---|
具有抗攻击能力的信誉与信任模型;郑小林等;《浙江大学学报(工学版)》;20110315(第03期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN114666248A (zh) | 2022-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11216878B2 (en) | Determination of implied orders in a trade matching system | |
US7987143B2 (en) | Methods and systems for multi-objective evolutionary algorithm based engineering desgin optimization | |
CN108667878A (zh) | 服务器负载均衡方法及装置、存储介质、电子设备 | |
US20170039485A1 (en) | System and Method for Balancing Computation with Communication in Parallel Learning | |
CN106411777A (zh) | 一种处理高并发数据的方法和系统 | |
Bayer et al. | A functional limit theorem for limit order books with state dependent price dynamics | |
CN101505311A (zh) | 一种基于社会化网络的信息传播方法及系统 | |
WO2022082879A1 (zh) | 基因测序数据处理方法和基因测序数据处理装置 | |
CN113194146B (zh) | 领导节点确定方法、计算机设备和存储介质 | |
CN114298713B (zh) | 一种联盟链分片方法、装置及存储介质 | |
CN114666248B (zh) | 一种联盟链分片交易分发方法及装置 | |
JP2009510615A5 (zh) | ||
CN110264467B (zh) | 基于顶点切割的动态幂律图实时重划分方法 | |
EP3506097B1 (en) | Data transmitting program, data transmitting device, and data transmitting method | |
Shi et al. | Instantchain: Enhancing order-execute blockchain systems for latency-sensitive applications | |
CN114119242B (zh) | 基于自适应窗口分片的联盟链性能优化方法及装置 | |
Yokoo et al. | Bundle design in robust combinatorial auction protocol against false-name bids | |
CN114727319A (zh) | 基于vcg拍卖机制的5g mec计算任务卸载方法 | |
CN110827162B (zh) | 一种基于网络保险的高效区块链众包系统及其激励方法 | |
CN114980216A (zh) | 基于移动边缘计算的依赖型任务卸载系统及方法 | |
CN114020418A (zh) | 一种包含轮盘赌算法的粒子群优化的虚拟机放置方法 | |
Carroll et al. | An incentive-based distributed mechanism for scheduling divisible loads in tree networks | |
CN109460533A (zh) | 一种提高gemm计算性能的方法及装置 | |
CN116468552A (zh) | 一种基于最小顶点重叠权数的区块链交易分片方法以及装置 | |
Olvera et al. | Combinatorial and multi-unit auctions applied to digital preservation of self-preserving objects |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |