CN110209736A - 区块链数据处理的装置、方法及存储介质 - Google Patents
区块链数据处理的装置、方法及存储介质 Download PDFInfo
- Publication number
- CN110209736A CN110209736A CN201910371198.7A CN201910371198A CN110209736A CN 110209736 A CN110209736 A CN 110209736A CN 201910371198 A CN201910371198 A CN 201910371198A CN 110209736 A CN110209736 A CN 110209736A
- Authority
- CN
- China
- Prior art keywords
- data
- node
- multichain
- scheduled
- invalid
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 67
- 238000003860 storage Methods 0.000 title claims abstract description 39
- 238000000034 method Methods 0.000 title claims abstract description 33
- 238000012544 monitoring process Methods 0.000 claims abstract description 61
- 230000000977 initiatory effect Effects 0.000 claims abstract description 20
- 238000000151 deposition Methods 0.000 claims description 4
- 238000005516 engineering process Methods 0.000 abstract 1
- 230000000694 effects Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000013500 data storage Methods 0.000 description 3
- 238000012217 deletion Methods 0.000 description 3
- 230000037430 deletion Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种区块链技术,揭露了一种区块链数据处理的装置、方法及存储介质,该方法包括:在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点;当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。本发明能够在多链场景下实现简便、高效的扩容操作。
Description
技术领域
本发明涉及区块链技术领域,尤其涉及一种区块链数据处理的装置、方法及存储介质。
背景技术
区块链一般被理解为一个分布式账本,它的本质也是一个分布式的数据库。在联盟链场景中,由于多链的引入,一个区块链节点往往同时属于多个区块链。区块链节点所在的设备存储多个链的数据时会对区块数据做存储区分,但对其他数据会做合并存储,实现上相对简单。这样的数据存储场景在节点所在的设备的存储容量状态达到瓶颈时,需要新建节点,该新建节点从创世区块(即第一个区块)开始同步数据,以便将同链的数据同步到该新建节点上。在历史数据多的情况下,这种数据处理的方法很繁琐、效率低,加重其他节点的网络压力,浪费系统资源。
发明内容
本发明的目的在于提供一种区块链数据处理的装置、方法及存储介质,旨在在多链场景下实现简便、高效的扩容操作。
为实现上述目的,本发明提供一种区块链数据处理的装置,所述区块链数据处理的装置包括存储器及与所述存储器连接的处理器,所述存储器中存储有可在所述处理器上运行的处理系统,所述处理系统被所述处理器执行时实现如下步骤:
在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;
若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点,以进行扩容;
当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。
优选地,所述多链数据包括区块数据、索引数据、状态数据及历史数据。
优选地,所述系统信息还包括多链数据的数据状态信息,所述处理系统被所述处理器执行时,还实现如下步骤:
若监控到该节点当前的存储容量大于等于预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据进行整合并删除,所述第二磁盘容量小于所述第一磁盘容量;或者
若监控到该节点当前的存储容量大于等于该预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据按照链名称进行规划,将相同链名称的无效的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的无效的多链数据的目录同步给该预定的节点,以对该无效的多链数据进行备份;
当接收到该预定的节点读取该目录中的无效的多链数据的完成消息后,删除该无效的多链数据。
优选地,所述处理系统被所述处理器执行时,还实现如下步骤:
若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点当前的存储容量发送给预定的终端进行展示并预警。
为实现上述目的,本发明还提供一种区块链数据处理的方法,所述区块链数据处理的方法包括:
S1,在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;
S2,若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;
S3,若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点,以进行扩容;
S4,当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。
优选地,所述多链数据包括区块数据、索引数据、状态数据及历史数据。
优选地,所述系统信息还包括多链数据的数据状态信息,所述步骤S1之后,还包括:
若监控到该节点当前的存储容量大于等于预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据进行整合并删除,所述第二磁盘容量小于所述第一磁盘容量;或者
若监控到该节点当前的存储容量大于等于该预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据按照链名称进行规划,将相同链名称的无效的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的无效的多链数据的目录同步给该预定的节点,以对该无效的多链数据进行备份;
当接收到该预定的节点读取该目录中的无效的多链数据的完成消息后,删除该无效的多链数据。
优选地,所述步骤S1之后,还包括:若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点当前的存储容量发送给预定的终端进行展示并预警。
优选地,所述步骤S1之前,还包括:从该节点的配置文件中获取智能合约信息,若该智能合约信息中不包括监控智能合约,则安装监控智能合约。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有处理系统,所述处理系统被处理器执行时实现上述的区块链数据处理的方法的步骤。
本发明的有益效果是:本发明通过调用监控智能合约对节点的存储容量进行监控,若有节点的存储容量达到瓶颈,则改造数据节点的存储情况,即将将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录,实现数据按链进行区分存储,在新的节点启动后,将该目录同步给新的节点,该新的节点通过搜索并读取该目录中的链名称对应的数据至本节点上,完成扩容量场景的应用,以便将部分链的数据移动到新的节点来实现扩容,该方法操作简便且高效,在扩容时不需要逐个区块数据进行同步,降低其他节点的网络压力,节省系统资源。
附图说明
图1为本发明区块链数据处理的装置一实施例的硬件架构的示意图;
图2为图1中处理系统一实施例的程序模块图;
图3为本发明区块链数据处理的方法一实施例的流程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,在本发明中涉及“第一”、“第二”等的描述仅用于描述目的,而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外,各个实施例之间的技术方案可以相互结合,但是必须是以本领域普通技术人员能够实现为基础,当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在,也不在本发明要求的保护范围之内。
参阅图1所示,是本发明区块链数据处理的装置一实施例的硬件架构的示意图。在该实施例中,区块链数据处理的装置1是一种能够按照事先设定或者存储的指令,自动进行数值计算和/或信息处理的设备。所述区块链数据处理的装置1可以是计算机、也可以是单个网络服务器、多个网络服务器组成的服务器组或者基于云计算的由大量主机或者网络服务器构成的云,其中云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个超级虚拟计算机。
在本实施例中,区块链数据处理的装置1可包括,但不仅限于,可通过系统总线相互通信连接的存储器11、处理器12、网络接口13,存储器11存储有可在处理器12上运行的处理系统10。需要指出的是,图1仅示出了具有组件11-13的区块链数据处理的装置1,但是应理解的是,并不要求实施所有示出的组件,可以替代的实施更多或者更少的组件。
其中,存储器11包括内存及至少一种类型的可读存储介质。内存为区块链数据处理的装置1的运行提供缓存;可读存储介质可为如闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等的非易失性存储介质。在一些实施例中,可读存储介质可以是区块链数据处理的装置1的内部存储单元,例如该区块链数据处理的装置1的硬盘;在另一些实施例中,该非易失性存储介质也可以是区块链数据处理的装置1的外部存储设备,例如区块链数据处理的装置1上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。本实施例中,存储器11的可读存储介质通常用于存储安装于区块链数据处理的装置1的操作系统和各类应用软件,例如存储本发明一实施例中的处理系统10的程序代码等。此外,存储器11还可以用于暂时地存储已经输出或者将要输出的各类数据。
所述处理器12在一些实施例中可以是中央处理器(Central Processing Unit,CPU)、控制器、微控制器、微处理器、或其他数据处理芯片,用于运行所述存储器11中存储的程序代码或者处理数据,例如运行处理系统10等。
所述网络接口13可包括标准的无线网络接口、有线网络接口,该网络接口13通常用于在所述区块链数据处理的装置1与其他电子设备之间建立通信连接。
所述处理系统10存储在存储器11中,包括至少一个存储在存储器11中的计算机可读指令,该至少一个计算机可读指令可被处理器器12执行,以实现本申请各实施例的方法;以及,该至少一个计算机可读指令依据其各部分所实现的功能不同,可被划为不同的逻辑模块。
在一实施例中,上述处理系统10被所述处理器12执行时实现如下步骤:
在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;
若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点,以进行扩容;
当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。
进一步地,所述多链数据包括区块数据、索引数据、状态数据及历史数据。
进一步地,所述系统信息还包括多链数据的数据状态信息,所述处理系统被所述处理器执行时,还实现如下步骤:
若监控到该节点当前的存储容量大于等于预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据进行整合并删除,所述第二磁盘容量小于所述第一磁盘容量;或者
若监控到该节点当前的存储容量大于等于该预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据按照链名称进行规划,将相同链名称的无效的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的无效的多链数据的目录同步给该预定的节点,以对该无效的多链数据进行备份;
当接收到该预定的节点读取该目录中的无效的多链数据的完成消息后,删除该无效的多链数据。
进一步地,所述处理系统被所述处理器执行时,还实现如下步骤:
若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点当前的存储容量发送给预定的终端进行展示并预警。
具体原理请参照下述图2关于处理系统10的程序模块图及图3关于该方法的流程图的介绍。
参照图2所示,为图1、图2中处理系统10的程序模块图。所述处理系统10被分割为多个模块,该多个模块被存储于存储器12中,并由处理器13执行,以完成本发明。本发明所称的模块是指能够完成特定功能的一系列计算机程序指令段。
所述处理系统10可以被分割为:监控模块101、规划模块102、同步模块103及删除模块104。
监控模块101,用于在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;
其中,利用监控智能合约对节点的系统信息进行监控。系统信息包括该节点的存储容量(即节点使用的设备的存储容量)、多链数据的数据状态信息(即数据是有效还是无效)及其他业务信息等,业务信息可以包括区块链当前交易笔数、当前交易资产总额等等,不同的业务可以定制不同的业务信息的监控。监控过程包括:节点启动后,调用监控智能合约对节点进行监控,后续节点自身可以定期执行监控智能合约以进行监控。
进一步地,节点执行监控智能合约时,可以采用常规系统工具进行监控。例如,在Linux操作系统上,使用top、htop命令来监控存储器和CPU使用情况,使用iostat命令来查看数据存储设备的使用情况,等等。
规划模块102,用于若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;
其中,多链数据包括区块数据、索引数据、状态数据及历史数据。
其中,将该节点上存储的多链数据按照链名称(也即账本名称)进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中,不同链名称的多链数据划分至不同的预先创建的目录中,每一个目录中包括一个链的全部数据,完成多链情况下多链数据的数据文件路径规划,以便将部分链的数据或者全部链的数据移动到新的节点来实现本节点的扩容。
同步模块103,用于若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点,以进行扩容;
删除模块104,用于当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。
其中,在对本节点进行扩容之前,若本节点当前没有正在执行的交易,则可以发送启动消息给预定的节点(即新的节点),若发现本节点当前有正在执行的交易,为了使得该交易不影响本次扩容,则暂停执行交易,然后再发送启动消息给预定的节点,以便启动该预定的节点,进行扩容操作。
在该预定的节点接收到启动消息后进行启动,然后,本节点将经划分后的多链数据的至少一个目录同步给该预定的节点,该预定的节点在获取到该目录后,通过搜索并读取该目录中的链名称对应的数据至本节点上,执行跨链数据的容量扩展,在读取完该目录中的链名称对应的数据后,该预定的节点发送完成消息给本节点,本节点接收到该完成消息后,删除已同步给该预定的节点的目录中对应的数据,以释放本节点的存储空间。
如图3所示,图3为本发明区块链数据处理的方法一实施例的流程示意图,区块链数据处理的装置1的处理器13执行存储器12中存储的处理系统10时实现该方法的如下步骤:
步骤S1,在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;
首先,获取该节点的配置文件,该配置文件中包括节点属于哪些链、节点的IP地址和端口信息(即地址信息)、节点包括的智能合约信息等。从该节点的配置文件中获取智能合约信息,若该智能合约信息中不包括监控智能合约,则安装监控智能合约,若该智能合约信息中已包括监控智能合约,则说明该节点当前已经安装有智能合约,不需要安装。
进一步地,该监控智能合约也可以是系统智能合约,即系统内置的智能合约,其在区块链节点创建后即存在并可提供服务,不需要额外的资源。节点在首次启动后,自动安装该系统智能合约,降低运维工作量。
其中,利用监控智能合约对节点的系统信息进行监控。系统信息包括该节点的存储容量(即节点使用的设备的存储容量)、多链数据的数据状态信息(即数据是有效还是无效)及其他业务信息等,业务信息可以包括区块链当前交易笔数、当前交易资产总额等等,不同的业务可以定制不同的业务信息的监控。监控过程包括:节点启动后,调用监控智能合约对节点进行监控,后续节点自身可以定期执行监控智能合约以进行监控。
其中,节点上的智能合约引擎执行监控智能合约,监控智能合约调用查询接口。智能合约引擎通过标准系统状态采集接口读取该节点当前的存储容量,并且返回给监控智能合约,进而进行反馈。
进一步地,节点执行监控智能合约时,可以采用常规系统工具进行监控。例如,在Linux操作系统上,使用top、htop命令来监控存储器和CPU使用情况,使用iostat命令来查看数据存储设备的使用情况,等等。
步骤S2,若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;
其中,预定的第一磁盘容量例如为节点的总存储容量的80%。
其中,多链数据包括区块数据、索引数据、状态数据及历史数据。索引数据是为了查询区块而提供的,状态数据是为了完成业务功能而提供的数据快照,历史数据记录了数据修改的历史信息。区块数据针对每个链进行区分存储,但是索引数据、状态数据及历史数据是合并存储的。
其中,将该节点上存储的多链数据按照链名称(也即账本名称)进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中,不同链名称的多链数据划分至不同的预先创建的目录中,每一个目录中包括一个链的全部数据,完成多链情况下多链数据的数据文件路径规划,以便将部分链的数据或者全部链的数据移动到新的节点来实现本节点的扩容。
进一步地,若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点当前的存储容量发送给预定的终端进行展示并预警。
其中,可以将该节点当前的存储容量转化为图形化的形式发送给预定的终端进行展示,以便更直观展示,同时,该节点当前的存储容量大于等于预定的第一磁盘容量,说明该节点当前的存储容量已经到达瓶颈状态,需要进行预警以便采取相应的措施或者人为干预。
步骤S3,若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点,以进行扩容;
步骤S4,当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。
其中,在对本节点进行扩容之前,若本节点当前没有正在执行的交易,则可以发送启动消息给预定的节点(即新的节点),若发现本节点当前有正在执行的交易,为了使得该交易不影响本次扩容,则暂停执行交易,然后再发送启动消息给预定的节点,以便启动该预定的节点,进行扩容操作。
在该预定的节点接收到启动消息后进行启动,然后,本节点将经划分后的多链数据的至少一个目录同步给该预定的节点,该预定的节点在获取到该目录后,通过搜索并读取该目录中的链名称对应的数据至本节点上,执行跨链数据的容量扩展,在读取完该目录中的链名称对应的数据后,该预定的节点发送完成消息给本节点,本节点接收到该完成消息后,删除已同步给该预定的节点的目录中对应的数据,以释放本节点的存储空间。
与现有技术相比,本发明通过调用监控智能合约对节点的存储容量进行监控,若有节点的存储容量达到瓶颈,则改造数据节点的存储情况,即将将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录,实现数据按链进行区分存储,在新的节点启动后,将该目录同步给新的节点,该新的节点通过搜索并读取该目录中的链名称对应的数据至本节点上,完成扩容量场景的应用,以便将部分链的数据移动到新的节点来实现扩容,该方法操作简便且高效,在扩容时不需要逐个区块数据进行同步,降低其他节点的网络压力,节省系统资源。
在一实施例中,上述的系统信息还包括多链数据的数据状态信息,在上述实施例的基础上,在上述步骤S1之后,该方法还包括:
若监控到该节点当前的存储容量大于等于预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据进行整合并删除,所述第二磁盘容量小于所述第一磁盘容量;或者
若监控到该节点当前的存储容量大于等于该预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据按照链名称进行规划,将相同链名称的无效的多链数据划分至相同的预先创建的目录中;若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的无效的多链数据的目录同步给该预定的节点,以对该无效的多链数据进行备份;当接收到该预定的节点读取该目录中的无效的多链数据的完成消息后,删除该无效的多链数据。
其中,预定的第二磁盘容量例如为节点的总存储容量的70%。
其中,若监控到该节点当前的存储容量大于等于预定的第二磁盘容量但小于预定的第一磁盘容量时,进一步监控该节点是否有多链数据的数据状态信息为无效,即数据是否过期或者下线,若有多链数据的数据状态信息为无效,可对该无效的数据进行淘汰处理,即进行直接删除或者备份后删除,以进一步释放本节点的存储空间。
通过上面的描述可以看出,对于跨链的数据,节点动态扩容和数据淘汰是必须的,当节点的数据量较小时,可以一个节点存储多个链的数据,当节点的数据量变多时,节点可能碰到性能瓶颈,部分链的数据可以迁移到其他新的节点,以及当数据超过有效期或者下线时,可以淘汰旧数据,释放硬件资源。
此外,本发明实施例还提出一种计算机可读存储介质,所述计算机可读存储介质可以是硬盘、多媒体卡、SD卡、闪存卡、SMC、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器等等中的任意一种或者几种的任意组合。所述计算机可读存储介质中包括处理系统,该处理系统被处理器执行时实现的功能,请参照上述关于图2和图3的介绍,在此不再赘述。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、装置、物品或者方法不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、装置、物品或者方法所固有的要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种区块链数据处理的装置,其特征在于,所述区块链数据处理的装置包括存储器及与所述存储器连接的处理器,所述存储器中存储有可在所述处理器上运行的处理系统,所述处理系统被所述处理器执行时实现如下步骤:
在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;
若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点,以进行扩容;
当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。
2.根据权利要求1所述的区块链数据处理的装置,其特征在于,所述多链数据包括区块数据、索引数据、状态数据及历史数据。
3.根据权利要求1或2所述的区块链数据处理的装置,其特征在于,所述系统信息还包括多链数据的数据状态信息,所述处理系统被所述处理器执行时,还实现如下步骤:
若监控到该节点当前的存储容量大于等于预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据进行整合并删除,所述第二磁盘容量小于所述第一磁盘容量;或者
若监控到该节点当前的存储容量大于等于该预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据按照链名称进行规划,将相同链名称的无效的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的无效的多链数据的目录同步给该预定的节点,以对该无效的多链数据进行备份;
当接收到该预定的节点读取该目录中的无效的多链数据的完成消息后,删除该无效的多链数据。
4.根据权利要求1所述的区块链数据处理的装置,其特征在于,所述处理系统被所述处理器执行时,还实现如下步骤:
若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点当前的存储容量发送给预定的终端进行展示并预警。
5.一种区块链数据处理的方法,其特征在于,所述区块链数据处理的方法包括:
S1,在联盟链的多链场景中,调用监控智能合约对节点的系统信息进行监控,所述系统信息包括该节点的存储容量;
S2,若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点上存储的多链数据按照链名称进行规划,将相同链名称的多链数据划分至相同的预先创建的目录中;
S3,若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的多链数据的至少一个目录同步给该预定的节点,以进行扩容;
S4,当接收到该预定的节点读取该目录中的多链数据的完成消息后,删除该多链数据。
6.根据权利要求5所述的区块链数据处理的方法,其特征在于,所述多链数据包括区块数据、索引数据、状态数据及历史数据。
7.根据权利要求5或6所述的区块链数据处理的方法,其特征在于,所述系统信息还包括多链数据的数据状态信息,所述步骤S1之后,还包括:
若监控到该节点当前的存储容量大于等于预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据进行整合并删除,所述第二磁盘容量小于所述第一磁盘容量;或者
若监控到该节点当前的存储容量大于等于该预定的第二磁盘容量且小于所述第一磁盘容量,且监控到该节点的有多链数据的数据状态信息为无效时,则将该无效的多链数据按照链名称进行规划,将相同链名称的无效的多链数据划分至相同的预先创建的目录中;
若该节点上当前无执行中的交易,则发送启动消息给预定的节点,并在该预定的节点启动后,将经划分后的无效的多链数据的目录同步给该预定的节点,以对该无效的多链数据进行备份;
当接收到该预定的节点读取该目录中的无效的多链数据的完成消息后,删除该无效的多链数据。
8.根据权利要求5所述的区块链数据处理的方法,其特征在于,所述步骤S1之后,还包括:若监控到该节点当前的存储容量大于等于预定的第一磁盘容量,则将该节点当前的存储容量发送给预定的终端进行展示并预警。
9.根据权利要求5所述的区块链数据处理的方法,其特征在于,所述步骤S1之前,还包括:从该节点的配置文件中获取智能合约信息,若该智能合约信息中不包括监控智能合约,则安装监控智能合约。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有处理系统,所述处理系统被处理器执行时实现如权利要求5至9中任一项所述的区块链数据处理的方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910371198.7A CN110209736A (zh) | 2019-05-06 | 2019-05-06 | 区块链数据处理的装置、方法及存储介质 |
PCT/CN2019/120589 WO2020224236A1 (zh) | 2019-05-06 | 2019-11-25 | 区块链数据处理的装置、方法、系统及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910371198.7A CN110209736A (zh) | 2019-05-06 | 2019-05-06 | 区块链数据处理的装置、方法及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110209736A true CN110209736A (zh) | 2019-09-06 |
Family
ID=67786884
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910371198.7A Pending CN110209736A (zh) | 2019-05-06 | 2019-05-06 | 区块链数据处理的装置、方法及存储介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN110209736A (zh) |
WO (1) | WO2020224236A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020224236A1 (zh) * | 2019-05-06 | 2020-11-12 | 深圳壹账通智能科技有限公司 | 区块链数据处理的装置、方法、系统及存储介质 |
CN112631994A (zh) * | 2020-12-29 | 2021-04-09 | 深圳市商汤科技有限公司 | 数据迁移方法及系统 |
CN113407626A (zh) * | 2021-06-16 | 2021-09-17 | 深圳大学 | 一种基于区块链的规划管控方法、存储介质及终端设备 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115841285B (zh) * | 2022-11-28 | 2023-09-19 | 浙江百世技术有限公司 | 基于区块链的商品物流追溯方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107453896A (zh) * | 2017-06-27 | 2017-12-08 | 阿里巴巴集团控股有限公司 | 多重区块链网络数据处理方法、装置及服务器 |
CN107832139A (zh) * | 2017-09-26 | 2018-03-23 | 上海点融信息科技有限责任公司 | 用于管理区块链节点的计算资源的方法、设备和系统 |
CN108829350A (zh) * | 2018-05-31 | 2018-11-16 | 阿里巴巴集团控股有限公司 | 基于区块链的数据迁移方法和装置 |
US20190066101A1 (en) * | 2017-08-22 | 2019-02-28 | Sap Se | Transaction Platform Providing Unified View on Multiple Heterogeneous Blockchains |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110209736A (zh) * | 2019-05-06 | 2019-09-06 | 深圳壹账通智能科技有限公司 | 区块链数据处理的装置、方法及存储介质 |
-
2019
- 2019-05-06 CN CN201910371198.7A patent/CN110209736A/zh active Pending
- 2019-11-25 WO PCT/CN2019/120589 patent/WO2020224236A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107453896A (zh) * | 2017-06-27 | 2017-12-08 | 阿里巴巴集团控股有限公司 | 多重区块链网络数据处理方法、装置及服务器 |
US20190066101A1 (en) * | 2017-08-22 | 2019-02-28 | Sap Se | Transaction Platform Providing Unified View on Multiple Heterogeneous Blockchains |
CN107832139A (zh) * | 2017-09-26 | 2018-03-23 | 上海点融信息科技有限责任公司 | 用于管理区块链节点的计算资源的方法、设备和系统 |
CN108829350A (zh) * | 2018-05-31 | 2018-11-16 | 阿里巴巴集团控股有限公司 | 基于区块链的数据迁移方法和装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020224236A1 (zh) * | 2019-05-06 | 2020-11-12 | 深圳壹账通智能科技有限公司 | 区块链数据处理的装置、方法、系统及存储介质 |
CN112631994A (zh) * | 2020-12-29 | 2021-04-09 | 深圳市商汤科技有限公司 | 数据迁移方法及系统 |
CN113407626A (zh) * | 2021-06-16 | 2021-09-17 | 深圳大学 | 一种基于区块链的规划管控方法、存储介质及终端设备 |
CN113407626B (zh) * | 2021-06-16 | 2024-05-10 | 深圳大学 | 一种基于区块链的规划管控方法、存储介质及终端设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2020224236A1 (zh) | 2020-11-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110209736A (zh) | 区块链数据处理的装置、方法及存储介质 | |
US11789925B2 (en) | System and method for conditionally updating an item with attribute granularity | |
US20210103604A1 (en) | System and method for implementing a scalable data storage service | |
US11609697B2 (en) | System and method for providing a committed throughput level in a data store | |
CN109493076B (zh) | 一种Kafka消息唯一消费方法、系统、服务器及存储介质 | |
CN113111129B (zh) | 数据同步方法、装置、设备及存储介质 | |
US20120110287A1 (en) | Snapshots in a hybrid storage device comprising a magnetic disk and a solid state disk | |
CN103473277A (zh) | 文件系统的快照方法和装置 | |
CN110659259B (zh) | 数据库迁移方法、服务器以及计算机存储介质 | |
EP3018581B1 (en) | Data staging management system | |
CN108920691A (zh) | 前端静态资源的管理方法、装置、计算机设备及存储介质 | |
CN110222535A (zh) | 区块链配置文件的处理装置、方法及存储介质 | |
CN103019891A (zh) | 一种还原被删除文件的方法及系统 | |
CN110046189A (zh) | 数据传输方法及其装置 | |
CN106874343B (zh) | 一种时序数据库的数据删除方法及系统 | |
CN113448946B (zh) | 数据迁移方法及装置、电子设备 | |
CN114610567A (zh) | 容器监控方法、网络设备及存储介质 | |
CN103778064A (zh) | 一种数据管理方法及装置 | |
CN104915376A (zh) | 一种云存储中文件的归档压缩方法 | |
CN113806309B (zh) | 基于分布式锁的元数据删除方法、系统、终端及存储介质 | |
CN109213444A (zh) | 文件存储方法及装置、存储介质、终端 | |
CN109901933B (zh) | 业务系统的操作方法及装置、存储介质、电子装置 | |
CN112286876A (zh) | 日志文件抓取方法、设备及计算机可读存储介质 | |
CN117453454A (zh) | 数据备份方法、装置、计算机设备、介质及产品 | |
CN116244381A (zh) | 一种数据转移方法、装置、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20190906 |