CN115037813A - 一种区块链数据解析方法、装置及电子设备 - Google Patents

一种区块链数据解析方法、装置及电子设备 Download PDF

Info

Publication number
CN115037813A
CN115037813A CN202210649617.0A CN202210649617A CN115037813A CN 115037813 A CN115037813 A CN 115037813A CN 202210649617 A CN202210649617 A CN 202210649617A CN 115037813 A CN115037813 A CN 115037813A
Authority
CN
China
Prior art keywords
analysis
block chain
analyzed
batch
concurrent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210649617.0A
Other languages
English (en)
Inventor
郭巍
叶茂
姚光南
秦亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Zhifan Technology Co ltd
Original Assignee
Beijing Zhifan Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Zhifan Technology Co ltd filed Critical Beijing Zhifan Technology Co ltd
Priority to CN202210649617.0A priority Critical patent/CN115037813A/zh
Publication of CN115037813A publication Critical patent/CN115037813A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22—Parsing or analysis of headers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/24—Negotiation of communication capabilities

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种区块链数据解析方法、装置及电子设备，方法包括：当需要对待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作；获取对当前批次的区块进行解析操作时所耗费的解析时长；根据解析时长以及对待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长确定解析时长调整系数；根据解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数；根据下一批次对应的并发解析区块数量调节系数与当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。

Description

一种区块链数据解析方法、装置及电子设备
技术领域
本发明涉及区块链技术领域，具体涉及一种区块链数据解析方法、装置及电子设备。
背景技术
区块链是一种安全共享的分布式账本数据库，数据以区块为单位记录在这个分布式账本数据库中。对区块数据进行分析时，通常的做法是分批次按照区块高度顺序逐个读取区块信息，每批次读取若干个区块数据信息，然后并发的对数据进行加工分析。每批次读取区块的数量决定了后续处理速度，每批次读取区块越多，程序的吞吐量越大，处理的速度就越快；但是当每批次读取区块数量达到一个极限值时，会因为内存的限制导致程序解析失败。故亟待提出一种区块链数据解析方法以确定每一批次的并发解析区块数量，避免对解析效率造成影响。
发明内容
因此，本发明提供一种区块链数据解析方法、装置及电子设备以确定每一批次的并发解析区块数量。
根据第一方面，本发明实施例公开了一种区块链数据解析方法，应用于区块链数据解析设备，所述区块链数据解析设备与待解析区块链关联，用于从所述待解析区块链获取待解析区块；包括：当需要对所述待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作；获取对当前批次的区块进行解析操作时所耗费的解析时长；根据所述解析时长以及对所述待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长，确定解析时长调整系数；根据所述解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数；根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。
可选地，所述方法还包括：若所述当前批次为初始批次，获取所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据；根据所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据确定所述初始批次对应的解析参数，所述解析参数包括：所述期望最短解析时长、所述期望最长解析时长、所述初始批次对应的并发解析区块数量以及所述初始批次对应的并发解析区块数量调节系数。
可选地，所述方法还包括：重复所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作的步骤到所述根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量的步骤，直至所述待解析区块链中的区块数据全部解析完成。
可选地，所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作，包括：对当前批次的区块进行解析操作的同时响应对当前批次解析到的区块数据的存储操作。
根据第二方面，本发明实施例还公开了一种区块链数据解析装置，应用于区块链数据解析设备，所述区块链数据解析设备与待解析区块链关联，用于从所述待解析区块链获取待解析区块；包括：第一解析模块，用于当需要对所述待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作；第一获取模块，用于获取对当前批次的区块进行解析操作时所耗费的解析时长；第一确定模块，用于根据所述解析时长以及对所述待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长，确定解析时长调整系数；第二确定模块，用于根据所述解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数；第三确定模块，用于根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。
可选地，所述装置还包括：第二获取模块，用于若所述当前批次为初始批次，获取所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据；第四确定模块，用于根据所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据确定所述初始批次对应的解析参数，所述解析参数包括：所述期望最短解析时长、所述期望最长解析时长、所述初始批次对应的并发解析区块数量以及所述初始批次对应的并发解析区块数量调节系数。
可选地，所述装置还包括：第二解析模块，用于重复所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作的步骤到所述根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量的步骤，直至所述待解析区块链中的区块数据全部解析完成。
可选地，所述第一解析模块，还用于对当前批次的区块进行解析操作的同时响应对当前批次解析到的区块数据的存储操作。
根据第三方面，本发明实施例还公开了一种电子设备，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行如第一方面或第一方面任一可选实施方式所述的区块链数据解析方法的步骤。
根据第四方面，本发明实施方式还公开了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面或第一方面任一可选实施方式所述的区块链数据解析方法的步骤。
本发明技术方案，具有如下优点：
本发明提供的区块链数据解析方法/装置，应用于区块链数据解析设备，所述区块链数据解析设备与待解析区块链关联，用于从所述待解析区块链获取待解析区块；当需要对所述待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作，获取对当前批次的区块进行解析操作时所耗费的解析时长，根据所述解析时长以及对所述待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长确定解析时长调整系数，根据所述解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数，根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。通过确定的当前批次的区块的解析时长结合解析时长调整参数以及并发解析区块数量调节系数来灵活调整并确定下一批次对应的并发解析区块数量，避免了任一批次读取的区块数量太多出现解析失败的情况，保证了对待解析区块链的区块数据的解析效率。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例中区块链数据解析方法的一个具体示例的流程图；
图2为本发明实施例中区块链数据解析装置的一个具体示例的原理框图；
图3为本发明实施例中电子设备的一个具体示例图。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
此外，下面所描述的本发明不同实施方式中所涉及的技术特征只要彼此之间未构成冲突就可以相互结合。
本发明实施例公开了一种区块链数据解析方法，应用于区块链数据解析设备，所述区块链数据解析设备与待解析区块链关联，用于从所述待解析区块链获取待解析区块，该区块链数据解析设备可以是待解析区块链中的节点，也可以是与该待解析区块链中任一节点连接以从待解析区块链中获取待解析区块。本申请实施例中该区块链数据解析设备可以为服务器，在该服务器上预先配置有区块链数据解析程序，且该服务器与用于存储区块链数据的数据库连接。如图1所示，该方法包括如下步骤：
步骤101，当需要对所述待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作；示例性地，当前批次对应的并发解析区块数量可以根据配置相同的解析设备对存储有相同类型数据的区块链的历史解析数据确定，也可以根据配置相同的解析设备对存储有相同类型数据的区块链进行数据解析时出现程序解析失败的情况下对应的批次数量确定；或者若当前使用的区块链数据解析设备与历史进行数据解析的设备的性能配置不同和/或解析的区块链数据属性不同，可以根据性能配置的差别大小和/或区块链数据属性的差别大小，灵活调整并确定当前解析过程中的并发解析区块数量。
作为本发明一个可选实施方式，所述方法还包括：若所述当前批次为初始批次，获取所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据；示例性地，区块链数据解析设备的性能数据包括但不限于设备的CPU计算能力、内存大小等；待解析区块链的属性数据包括但不限于待解析区块链的区块数据结构的复杂度、区块大小、区块链中数据节点的吞吐量以及区块链网络的网络连接速度等。不同的区块链会根据其源代码和系统结构的不同，采取不同的数据结构设计，数据结构设计方案中可以包括但限于数据嵌套层级、更新逻辑、唯一性生成方法、加密方法等，可以根据数据结构设计方案中的数据嵌套层级复杂度、更新逻辑复杂度、采用的加密算法的复杂性等确定区块结构的复杂度。而这些也有可能会造成从同步数据到明文数据、从序列化数据到结构化数据过程中的额外算力消耗。在对链上节点的开源数据进行同步后，需要根据其链的特性和设计进行针对性的数据解析，无法采用通识性的方法来覆盖所有区块链解析问题。此外，部分区块链的独特设计，如ETH链的回滚机制，使得在对其进行解析时，需要额外关注区块是否即时确认和交易数量的变动，这在计算过程中也会产生额外的负担。
根据所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据确定所述初始批次对应的解析参数，所述解析参数包括：所述期望最短解析时长、所述期望最长解析时长、所述初始批次对应的并发解析区块数量以及所述初始批次对应的并发解析区块数量调节系数。
示例性地，根据区块链数据解析程序所在服务器的性能以及待解析区块链的属性数据确定该待解析区块链对应的期望最短解析时长(Tmin)、期望最长解析时长(Tmax)、初始批次对应的并发解析区块数量(X0)、初始批次对应的并发解析区块数量调节系数(K0)。
本申请实施例该期望最短解析时长(Tmin)、所述期望最长解析时长(Tmax)、所述初始批次对应的并发解析区块数量(X0)可以将根据所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据与历史数据进行比对后确定；如可以根据配置相同的解析设备对存储有相同类型数据的区块链进行数据解析时出现程序解析失败的情况下所耗费的解析时长确定，该期望最长解析时长小于该程序解析失败的情况下所耗费的解析时长；同理也可以根据与历史数据中不同性能的解析设备或者不同数据属性的待解析区块链的差别大小，确定上述解析参数，并且可以将初始批次对应的并发解析区块数量调节系数设定为1，以便于在后续解析过程中及时调整相应批次的数量。
步骤102，获取对当前批次的区块进行解析操作时所耗费的解析时长；示例性地，在对当前批次的区块进行解析操作时响应计时操作，根据计时操作结果得到当前批次的解析操作过程中所耗费的解析时长(fn(X))。
步骤103，根据所述解析时长以及对所述待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长，确定解析时长调整系数；
示例性地，当前批次的区块数据解析完毕后，根据解析时长(fn(X))计算解析时长调整系数(c)，对于第n批次解析，c满足：
Figure BDA0003684209920000071
在对区块批次数据持续进行读取和计算的过程中，对于任意的区块解析时长fn(X)∈(Tmin,Tmax)，总是
Figure BDA0003684209920000072
使得|fn(X)-fn-1(X)|≤ε，其中Tmax>0，Tmin>0。其中，ε为任意极限小的时间区间，上述属于数学极限定义表述，为明确阐述解析时长fn(X)这一序列预测值，在连续的X上可微。即在任一批次的计算过程中，其批次区块总耗费的解析时长(fn(X))始终限制在一个固定常量区间内。其中解析时长调整系数(c)，根据多种理论计算方式和实践过程的补足，可以通过下述方法计算得到：
(1)根据解析同类型区块数据对应的历史解析数据统计计算，得到一个固定值；根据方法(1)来计算c的值会使得整个自适应计算过程相对平稳，其测试和实际表现均验证其优越性。按照固定区块产生周期(或者时间周期)的变化，对c的固定值进行计算和刷新，来保证其能满足对最新区块自适应的表现；且可以通过加快对c常值的更新计算频率等方法来对其进行动态调优继而提高对区块变化的即时适应性。
(2)根据实时解析时长序列f(X)动态计算解析时长调整系数(c)。
解析时长序列f(X)＝(fn-m(X),fn-m+1(X)…fn-1(X))，当前批次对应的解析时长调整参数(cn)由之前m个批次构成的解析时长序列f(X)和上一个批次对应的cn-1共同决定。
cn＝softmax(cn-1+pf(X))+k
其中，m值可根据待解析区块链的不同选择不同的固定整数值，通常为10以内的整数值，m的数值过大会影响实际计算效果，例如ETH链可选择5个批次进行动态计算，可有效增加对区块产出变化的适应度；而p为一系列的常数参数，即p＝{p0，p1，p2，p3…}，通常对于所有的p，p∈(0，1]，参数p的数量和解析时长序列中的解析时长呈一一对应，即每一个解析时长都会有一个常量参数p对应，用于调节每一个解析时长对最终计算结果的影响，参数p的大小直接可用来调节该解析时长对结果影响的大小程度，通常批次距离当前批次时间越久，p的取值越小，例如p＝{0.1，0.2，0.3，0.4...}。k为常数值，k∈(0，1]，k的存在可一定程度避免时间序列预测的过度偏置。
步骤104，根据所述解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数；
示例性地，根据当前批次的并发解析区块数量调节系数(Kn)和当前批次对应的解析时长调整系数(c)共同确定下一批次对应的并发解析区块数量调节系数(Kn+1)。本申请实施例中下一批次对应的并发解析区块数量调节系数(Kn+1)可以根据下式计算得到：
Kn+1＝(1+c)*Kn，n∈N+
Kn+1作为序列变化中调整区块批次大小的系数，当前状态的数值会随着上一个时间状态的计算结果产生变化。
步骤105，根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。
示例性地，根据当前批次对应的并发解析区块数量(Xn)和下一批次对应的并发解析区块数量调节系数(Kn+1)共同计算出下一批次对应的并发解析区块数量(Xn+1)。本申请实施例中下一批次对应的并发解析区块数量(Xn+1)可以根据下式计算得到：
Xn+1＝Kn+1·Xn
Xn+1将作为当前批次并发解析的参数发送给解析程序进行区块数据解析。
根据计算得到的下一批次对应的并发解析区块数量Xn+1，从待解析区块链中获取相应数量的下一批次的区块并进行解析。当某一批次由于数据量超过硬件资源限制导致解析失败时，按照fn(X)＞Tmax情况处理，用新计算出的Xn+1重新对第n+1批次数据进行读取并解析。
本发明提供的区块链数据解析方法，通过确定的当前批次的区块的解析时长结合解析时长调整参数以及并发解析区块数量调节系数来灵活调整并确定下一批次对应的并发解析区块数量，避免了任意批次读取的区块数量太多出现解析失败的情况，保证了对待解析区块链的区块数据的解析效率。
作为本发明一个可选实施方式，所述方法还包括：重复所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作的步骤到所述根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量的步骤，直至所述待解析区块链中的区块数据全部解析完成。
作为本发明一个可选实施方式，步骤101，包括：对当前批次的区块进行解析操作的同时响应对当前批次解析到的区块数据的存储操作。
作为本发明一个具体实施方式，以以太坊作为解析对象对本申请实施例记载的方案进行说明：
首先，根据服务器的性能数据以及以太坊上待解析区块链的属性数据确定初始批次对应的解析参数，包括：期望最短解析时长(Tmin)为60s，期望最长解析时长(Tmax)为180s，初始批次对应的并发解析区块数量(X1)为100，初始批次对应的并发解析区块数量调节系数(K1)为1。
其次，通过服务器上预先集成的区块链数据解析程序连接区块链节点程序，进行第一批次区块的读取与解析操作并将解析后的区块数据存储入区块链节点数据库。解析完毕后记录解析时长f1(X)，如以f1(X)为30s为例。
根据f1(X)计算解析时长调整系数c，此处c采用固定值法得到，本申请实施例以c为0.1为例：
Figure BDA0003684209920000091
经上式可得：f1(X)＜60s，得到c＝0.1。
再次，根据c以及并发解析区块数量调节系数(K1)计算下一批次对应的并发解析区块数量调节系数(K2)，得到K2＝(1+c)*K1＝1.1。
再次，根据K2以及初始批次对应的并发解析区块数量(X1)计算下一批次对应的并发解析区块数量(X2)，得到X2＝K2*X1＝110。
最后，当进行下一批次解析时，从待解析区块链中获取110个区块作为并发区块并响应对下一批次解析操作。重复上述步骤，直至待解析区块链中全部区块数据解析完毕。
本发明实施例还公开了一种区块链数据解析装置，应用于区块链数据解析设备，所述区块链数据解析设备与待解析区块链关联，用于从所述待解析区块链获取待解析区块；如图2所示，该装置包括：
第一解析模块201，用于当需要对所述待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作；
第一获取模块202，用于获取对当前批次的区块进行解析操作时所耗费的解析时长；
第一确定模块203，用于根据所述解析时长以及对所述待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长，确定解析时长调整系数；
第二确定模块204，用于根据所述解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数；
第三确定模块205，用于根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。
本发明提供的区块链数据解析装置，通过确定的当前批次的区块的解析时长结合解析时长调整参数以及并发解析区块数量调节系数来灵活调整并确定下一批次对应的并发解析区块数量，避免了任意批次读取的区块数量太多出现解析失败的情况，保证了对待解析区块链的区块数据的解析效率。
作为本发明一个可选实施方式，所述装置还包括：第二获取模块，用于若所述当前批次为初始批次，获取所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据；第四确定模块，用于根据所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据确定所述初始批次对应的解析参数，所述解析参数包括：所述期望最短解析时长、所述期望最长解析时长、所述初始批次对应的并发解析区块数量以及所述初始批次对应的并发解析区块数量调节系数。
作为本发明一个可选实施方式，所述装置还包括：第二解析模块，用于重复所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作的步骤到所述根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量的步骤，直至所述待解析区块链中的区块数据全部解析完成。
作为本发明一个可选实施方式，所述第一解析模块，还用于对当前批次的区块进行解析操作的同时响应对当前批次解析到的区块数据的存储操作。
本发明实施例还提供了一种电子设备，如图3所示，该电子设备可以包括处理器401和存储器402，其中处理器401和存储器402可以通过总线或者其他方式连接，图3中以通过总线连接为例。
处理器401可以为中央处理器(Central Processing Unit，CPU)。处理器401还可以为其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。
存储器402作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块，如本发明实施例中的区块链数据解析方法对应的程序指令/模块。处理器401通过运行存储在存储器402中的非暂态软件程序、指令以及模块，从而执行处理器的各种功能应用以及数据处理，即实现上述方法实施例中的区块链数据解析方法。
存储器402可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储处理器401所创建的数据等。此外，存储器402可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器402可选包括相对于处理器401远程设置的存储器，这些远程存储器可以通过网络连接至处理器401。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器402中，当被所述处理器401执行时，执行如图1所示实施例中的区块链数据解析方法。
上述电子设备具体细节可以对应参阅图1所示的实施例中对应的相关描述和效果进行理解，此处不再赘述。
本领域技术人员可以理解，实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)、随机存储记忆体(RandomAccessMemory，RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive，缩写：HDD)或固态硬盘(Solid-State Drive，SSD)等；所述存储介质还可以包括上述种类的存储器的组合。
虽然结合附图描述了本发明的实施例，但是本领域技术人员可以在不脱离本发明的精神和范围的情况下作出各种修改和变型，这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (10)

1.一种区块链数据解析方法，应用于区块链数据解析设备，所述区块链数据解析设备与待解析区块链关联，用于从所述待解析区块链获取待解析区块；其特征在于，包括：
当需要对所述待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作；
获取对当前批次的区块进行解析操作时所耗费的解析时长；
根据所述解析时长以及对所述待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长，确定解析时长调整系数；
根据所述解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数；
根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
若所述当前批次为初始批次，获取所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据；
根据所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据确定所述初始批次对应的解析参数，所述解析参数包括：所述期望最短解析时长、所述期望最长解析时长、所述初始批次对应的并发解析区块数量以及所述初始批次对应的并发解析区块数量调节系数。
3.根据权利要求1所述的方法，其特征在于，所述方法还包括：
重复所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作的步骤到所述根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量的步骤，直至所述待解析区块链中的区块数据全部解析完成。
4.根据权利要求1-3中任一项所述的方法，其特征在于，所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作，包括：对当前批次的区块进行解析操作的同时响应对当前批次解析到的区块数据的存储操作。
5.一种区块链数据解析装置，应用于区块链数据解析设备，所述区块链数据解析设备与待解析区块链关联，用于从所述待解析区块链获取待解析区块；其特征在于，包括：
第一解析模块，用于当需要对所述待解析区块链进行区块数据解析时，从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作；
第一获取模块，用于获取对当前批次的区块进行解析操作时所耗费的解析时长；
第一确定模块，用于根据所述解析时长以及对所述待解析区块链进行数据解析时对应的期望最短解析时长和期望最长解析时长，确定解析时长调整系数；
第二确定模块，用于根据所述解析时长调整系数和当前批次对应的并发解析区块数量调节系数确定下一批次对应的并发解析区块数量调节系数；
第三确定模块，用于根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量。
6.根据权利要求5所述的装置，其特征在于，所述装置还包括：
第二获取模块，用于若所述当前批次为初始批次，获取所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据；
第四确定模块，用于根据所述区块链数据解析设备的性能数据和所述待解析区块链的属性数据确定所述初始批次对应的解析参数，所述解析参数包括：所述期望最短解析时长、所述期望最长解析时长、所述初始批次对应的并发解析区块数量以及所述初始批次对应的并发解析区块数量调节系数。
7.根据权利要求5所述的装置，其特征在于，所述装置还包括：
第二解析模块，用于重复所述从待解析区块链获取当前批次对应的并发解析区块数量的区块并响应对当前批次的区块解析操作的步骤到所述根据所述下一批次对应的并发解析区块数量调节系数与所述当前批次对应的并发解析区块数量确定下一批次对应的并发解析区块数量的步骤，直至所述待解析区块链中的区块数据全部解析完成。
8.根据权利要求5-7中任一项所述的装置，其特征在于，所述第一解析模块，还用于对当前批次的区块进行解析操作的同时响应对当前批次解析到的区块数据的存储操作。
9.一种电子设备，其特征在于，包括：至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器执行如权利要求1-4任一所述的区块链数据解析方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1-4中任一项所述的区块链数据解析方法的步骤。
CN202210649617.0A 2022-06-08 2022-06-08 一种区块链数据解析方法、装置及电子设备 Pending CN115037813A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210649617.0A CN115037813A (zh) 2022-06-08 2022-06-08 一种区块链数据解析方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210649617.0A CN115037813A (zh) 2022-06-08 2022-06-08 一种区块链数据解析方法、装置及电子设备

Publications (1)

Publication Number Publication Date
CN115037813A true CN115037813A (zh) 2022-09-09

Family

ID=83123302

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210649617.0A Pending CN115037813A (zh) 2022-06-08 2022-06-08 一种区块链数据解析方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN115037813A (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108228659A (zh) * 2016-12-22 2018-06-29 经贸联网科技股份有限公司 动态更新金融数据与/或动态调整电源配置的方法及系统
CN108776897A (zh) * 2018-06-05 2018-11-09 腾讯科技（深圳）有限公司 数据处理方法、装置、服务器及计算机可读存储介质
CN109461079A (zh) * 2018-10-29 2019-03-12 众安信息技术服务有限公司 基于区块链的交易处理方法和装置
CN109951482A (zh) * 2019-03-19 2019-06-28 全链通有限公司 用户终端及其区块链域名解析方法
CN111339181A (zh) * 2020-02-10 2020-06-26 腾讯科技（深圳）有限公司 区块存储方法、装置、节点设备及存储介质
CN112948501A (zh) * 2021-05-13 2021-06-11 支付宝(杭州)信息技术有限公司 数据解析方法、装置及系统
CN113419823A (zh) * 2021-06-22 2021-09-21 东北大学 一种适用于高并发事务的联盟链系统及其设计方法
CN113706146A (zh) * 2021-08-04 2021-11-26 杭州溪塔科技有限公司 一种基于区块链执行批量交易的处理方法、装置和系统

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108228659A (zh) * 2016-12-22 2018-06-29 经贸联网科技股份有限公司 动态更新金融数据与/或动态调整电源配置的方法及系统
CN108776897A (zh) * 2018-06-05 2018-11-09 腾讯科技（深圳）有限公司 数据处理方法、装置、服务器及计算机可读存储介质
CN109461079A (zh) * 2018-10-29 2019-03-12 众安信息技术服务有限公司 基于区块链的交易处理方法和装置
CN109951482A (zh) * 2019-03-19 2019-06-28 全链通有限公司 用户终端及其区块链域名解析方法
CN111339181A (zh) * 2020-02-10 2020-06-26 腾讯科技（深圳）有限公司 区块存储方法、装置、节点设备及存储介质
CN112948501A (zh) * 2021-05-13 2021-06-11 支付宝(杭州)信息技术有限公司 数据解析方法、装置及系统
CN113419823A (zh) * 2021-06-22 2021-09-21 东北大学 一种适用于高并发事务的联盟链系统及其设计方法
CN113706146A (zh) * 2021-08-04 2021-11-26 杭州溪塔科技有限公司 一种基于区块链执行批量交易的处理方法、装置和系统

Similar Documents

Publication Publication Date Title
CN108763398B (zh) 数据库配置参数处理方法、装置、计算机设备和存储介质
US10938961B1 (en) Systems and methods for data deduplication by generating similarity metrics using sketch computation
CN113254472B (zh) 一种参数配置方法、装置、设备及可读存储介质
US11249987B2 (en) Data storage in blockchain-type ledger
CN109308309B (zh) 一种数据服务质量评估方法和终端
CN111914285B (zh) 一种基于差分隐私的地理分布式图计算方法及系统
CN112732738A (zh) 基于多目标优化的自适应网络数据采集方法及相关设备
CN111122222B (zh) 一种样本点位置确定方法及系统
US20230125308A1 (en) Data compression based on co-clustering of multiple parameters for ai training
CN111291083A (zh) 网页源码数据处理方法、装置及计算机设备
TW202001701A (zh) 影像的量化方法及神經網路的訓練方法
CN115037813A (zh) 一种区块链数据解析方法、装置及电子设备
CN112711739B (zh) 一种数据处理方法、装置及服务器、存储介质
CN112751926A (zh) 一种集群中工作节点的管理方法、系统及相关装置
CN110543509B (zh) 用户访问数据的监控系统、方法、装置及电子设备
CN111258968A (zh) 企业冗余数据清理方法、装置及大数据平台
US11372832B1 (en) Efficient hashing of data objects
CN109344049B (zh) 测试数据处理系统的方法和装置
CN115794806A (zh) 金融数据的网格化处理系统及方法、装置、计算设备
CN111047042A (zh) 一种推理服务模型的运行方法及装置
Karthik et al. Performance Skew prediction in HPCC systems
CN113468179B (zh) 数据库的基数估算方法、装置、设备及存储介质
CN113485805B (zh) 基于异构加速平台的分布式计算调整方法、装置及设备
CN112435000B (zh) 待审批订单通知方法、装置、计算机设备及存储介质
CN112306691B (zh) 用户等级确定方法、系统、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination