CN113918513A - 一种基于区块链的数据迁移方法、装置、设备及存储介质 - Google Patents

一种基于区块链的数据迁移方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN113918513A
CN113918513A CN202111509738.7A CN202111509738A CN113918513A CN 113918513 A CN113918513 A CN 113918513A CN 202111509738 A CN202111509738 A CN 202111509738A CN 113918513 A CN113918513 A CN 113918513A
Authority
CN
China
Prior art keywords
storage
file
party
storage party
migrated
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111509738.7A
Other languages
English (en)
Other versions
CN113918513B (zh
Inventor
荆博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN202111509738.7A priority Critical patent/CN113918513B/zh
Publication of CN113918513A publication Critical patent/CN113918513A/zh
Application granted granted Critical
Publication of CN113918513B publication Critical patent/CN113918513B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/119Details of migration of file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • G06F11/1451Management of the data involved in backup or backup restore by selection of backup contents
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/172Caching, prefetching or hoarding of files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2221/00Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/21Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F2221/2107File encryption

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Bioethics (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开提供了一种基于区块链的数据迁移方法、装置、设备及存储介质,涉及区块链技术领域,可用于云计算和云服务。具体实现方案为:调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度;在根据所述文件健康度识别到文件迁移事件的情况下,从所述第一存储方群组中确定待迁移存储方;从第二存储方群组中确定替换存储方;所述第二存储方群组与所述第一存储方群组不同;将所述待迁移存储方中存储的所述目标文件的文件数据迁移至所述替换存储方中。通过本公开的技术,保证了数据拥有方的数据存储安全。

Description

一种基于区块链的数据迁移方法、装置、设备及存储介质
技术领域
本公开涉及计算机技术领域,尤其涉及区块链技术,可用于云计算和云服务。
背景技术
随着技术的进步,海量隐私、高价值数据需要安全存储。数据拥有方面临巨大的存储压力,需要一种存储服务,利用闲置的存储资源,对数据拥有方所生成的数据进行存储。其中,如何保证存储数据的安全性至关重要。
发明内容
本公开提供了一种基于区块链的数据迁移方法、装置、设备以及存储介质。
根据本公开的一方面,提供了一种基于区块链的数据迁移方法,该方法包括:
调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度;
在根据所述文件健康度识别到文件迁移事件的情况下,从所述第一存储方群组中确定待迁移存储方;
从第二存储方群组中确定替换存储方;所述第二存储方群组与所述第一存储方群组不同;
将所述待迁移存储方中存储的所述目标文件的文件数据迁移至所述替换存储方中。
根据本公开的另一方面,提供了一种电子设备,该电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行本公开任一实施例所述的基于区块链的数据迁移方法。
根据本公开的另一方面,提供了一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使计算机执行本公开任一实施例所述的基于区块链的数据迁移方法。
根据本公开的技术方案,保证了数据拥有方的数据存储安全。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本公开的限定。其中:
图1是根据本公开实施例提供的一种基于区块链的数据迁移方法的流程图;
图2是根据本公开实施例提供的另一种基于区块链的迁移处理方法的流程图;
图3是根据本公开实施例提供的又一种基于区块链的数据迁移方法的流程图;
图4是根据本公开实施例提供的又一种基于区块链的数据迁移方法的流程图;
图5是根据本公开实施例提供的再一种基于区块链的数据迁移方法的流程图;
图6是根据本公开实施例提供的一种基于区块链的数据迁移装置的结构示意图;
图7是用来实现本公开实施例的基于区块链的数据迁移方法的电子设备的框图。
具体实施方式
以下结合附图对本公开的示范性实施例做出说明,其中包括本公开实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本公开的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
图1是根据本公开实施例提供的一种基于区块链的数据迁移方法的流程图。本公开实施例适用于在数据拥有方的数据已存储于一个或多个存储方的场景下,基于区块链技术对数据进行迁移的情况。其中,所谓数据拥有方即为需要借助存储方来存储其所拥有的数据的一方;存储方即为具有丰富存储资源的一方,可专门用于存储数据。可选的,数据拥有方和存储方均能够与区块链网路中的节点交互。例如,数据拥有方可以是区块链网络中的节点,还可以不是区块链网络中的节点,但是可以通过区块链节点提供的接口与该区块链节点进行交互。
本实施例中基于区块链的数据迁移方法可以由区块链网络中的节点(例如区块链网络中的区块生成节点)来执行,或者可以由数据拥有方来执行。该方法可以由基于区块链的数据迁移装置来执行,该装置可以采用软件和/或硬件的方式实现,并可集成于承载区块链节点的计算设备中,或者可以集成于数据拥有方的计算设备中。如图1所示,本实施例提供的基于区块链的数据迁移方法可以包括:
S101,调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度。
本实施例中,租赁智能合约可以是基于插件机制所编写的代码段,专门用于处理数据拥有方和存储方之间数据存储交易等的相关事宜。例如,基于租赁智能合约对数据拥有方和存储方之间的数据存储交易进行撮合,以及将数据拥有方和存储方之间的存储关系记录在租赁智能合约中等。
目标文件即为已存储于第一存储方群组中的任一文件。所谓第一存储方群组即为存储目标文件的文件数据的存储方的集合。可选的,第一存储方群组中可以包括为一个或多个第一存储方。进一步的,为保证数据的安全,数据拥有方可以对需要存储的数据进行分片,以将数据分散存储于多个存储方中,即实现去中心化的数据存储,也就是说本实施例中第一存储方群组中第一存储方的数量优选为多个。
文件健康度可以是用于衡量文件是否可恢复的一种指标。可选的,文件健康度可以以分值的形式呈现;或者可以以其他形式呈现,比如,文件健康度按照由低到高可以分为红色、黄色和绿色三个等级。
具体的,在检测到当前时间满足设定的文件检测周期的情况下,可以调用租赁智能合约,执行确定文件健康度的代码逻辑,以确定目标文件的文件健康度。例如,可以从租赁智能合约中获取目标文件的相关信息,比如存储目标文件的文件数据的第一存储方群组的信息等,根据所获取的目标文件的相关信息,确定目标文件的文件健康度。
S102,在根据文件健康度识别到文件迁移事件的情况下,从第一存储方群组中确定待迁移存储方。
其中,文件迁移事件即为需要对文件进行迁移的事件,具体为基于文件健康度所触发产生的事件。例如,在识别到文件健康度小于设定阈值的情况下,触发产生文件迁移事件。
所谓待迁移存储方即为需要对其所存储的目标文件的文件数据进行迁移的存储方。进一步的,待迁移存储方可以是第一存储方群组中的一个或多个。
一种可实施方式,在根据文件健康度识别到文件迁移事件的情况下,可以从租赁智能合约中获取第一存储方群组中各个第一存储方的相关信息,并根据第一存储方群组中各个第一存储方的相关信息,从第一存储方群组中确定待迁移存储方。
又一种可实施方式,在本实施例的执行主体为区块链节点时,区块链节点还可以在根据文件健康度识别到文件迁移事件的情况下,可以将文件健康度,以及产生此文件健康度的原因等一并发送至目标文件所属数据拥有方,由数据拥有方根据产生此文件健康度的原因,从第一存储方群组中确定待迁移存储方。
S103,从第二存储方群组中确定替换存储方。
本实施例中,第二存储方群组与第一存储方群组不同。第二存储方群组具体为未存储目标文件的存储方的集合。可选,第二存储方群组中可以包括为一个或多个第二存储方;进一步的,本实施例中第二存储方群组中第二存储方的数量优选为多个。所谓替换存储方即为即将用于存储待迁移存储方中所存储的目标文件的文件数据的一方。
一种可实施方式,可以根据待迁移存储方的数量,从第二存储方群组中随机选择替换存储方。
又一种可实施方式,可以根据待迁移存储方的数量、第二存储方群组中第二存储方所支持存储的数据结构、待迁移存储方中待迁移文件数据的数据结构、以及第二存储方群组中第二存储方的相关信息(比如第二存储方的信任度)等,从第二存储方群组中选择替换存储方。其中,第二存储方的信任度可以是第二存储方所存储数据的所有数据拥有方对第二存储方的评价。
又一种可实施方式,在本实施例的执行主体为区块链节点时,区块链节点还可以先从目标文件所属数据拥有方获取需求节点数量,之后根据需求节点数量,从第二存储方群组中选择替换存储方。或者区块链节点还可以根据第二存储方群组中第二存储方的相关信息(比如第二存储方的信任度等)对第二存储方群组中的第二存储方进行排序,而后将排序后的第二存储方群组发送给数据拥有方,由数据拥有方从排序后的第二存储方群组中选择替换存储方。
S104,将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。
所谓文件数据为目标文件中的相关数据。
可选的,在本实施例的执行主体为数据拥有方的情况下,数据拥有方在确定待迁移存储方和替换存储方之后,可以将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。例如,可以根据待迁移存储方中存储的目标文件的文件数据,确定待迁移文件数据,将待迁移文件数据存储于替换存储方中。
进一步的,在本实施例的执行主体为区块链节点的情况下,区块链节点在确定在确定替换存储方之后,可以将替换存储方反馈给数据拥有方,以使数据拥有方将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。
本公开实施例的技术方案,通过调用租赁智能合约确定存储于第一存储方群组中的目标文件的文件健康度,并在根据文件健康度识别到文件迁移事件的情况下,从第一存储方群组中确定待迁移存储方,以及从第二存储方群组中确定替换存储方;之后将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。上述方案,通过引入租赁智能合约,保证了文件健康度确定的准确度;同时基于文件健康度能够识别到是否需要对文件进行迁移,并在确定需要对文件进行迁移的情况下,及时将待迁移存储方中的文件数据迁移至替换存储方中,保证了数据拥有方的数据存储安全。
图2是根据本公开实施例提供的另一种基于区块链的数据迁移方法的流程图。本实施例在上述实施例的基础上,进第一步对如何“确定存储于第一存储方群组中的目标文件的文件健康度”进行详细解释说明。如图2所示,本实施例提供的基于区块链的数据迁移方法可以包括:
S201,调用租赁智能合约,根据第一存储方群组的节点健康度和/或目标文件的备份情况,确定存储于第一存储方群组中的目标文件的文件健康度。
本实施例中,节点健康度可以是用于表征存储方稳定性的一种指标。可选的,节点健康度可以以分值的形式呈现;或者可以以其他形式呈现,比如,节点健康度按照由低到高可以分为红色、黄色和绿色三个等级。第一存储方群组的节点健康度即为第一存储方群组中每一第一存储方的节点健康度。
一种可实施方式,可以调用租赁智能合约,执行确定节点健康度的代码逻辑,以确定第一存储方群组中每一第一存储方的节点健康度。具体可以是,调用租赁智能合约,根据第一存储方群组的历史任务完成情况和/或历史心跳情况,确定第一存储方群组的节点健康度。
需要说明的是,数据拥有方为确定存储方真正存储了其数据,通常数据拥有方在将数据发送至存储方,并等待一段时间(比如十分钟)后,可以通过区块链网络向存储方发起挑战,根据存储方应对挑战的情况,来确定存储方是否真正存储了其数据。所谓挑战即为数据拥有方为判断存储方是否真正存储了其数据的一种方式,可以以多种形式呈现,比如可以以事务请求形式呈现,如挑战可以是数据存储验证事务请求。所谓存储方应对挑战即为存储方向数据拥有方证明其已存储了相关数据的过程,如响应数据存储验证事务请求的过程。
对于第一存储方群组中的任一第一存储方,所谓历史任务完成情况即为该第一存储方一段时间内(比如最近一周内)应对数据拥有方挑战的情况,可以包括该第一存储方一段时间内应对数据拥有方挑战的总次数(即应对总次数),以及成功应对挑战次数。历史心跳情况为该第一存储方一段时间内为证明其存活性所发送的心跳情况,可以包括该第一存储方一段时间内的心跳次数。进一步的,历史任务完成情况和历史心跳情况存储于租赁智能合约中。
可选的,对于第一存储方群组中的任一第一存储方,可以从租赁智能合约中获取该第一存储方的历史任务完成情况和/或历史心跳情况,并基于租赁智能合约中确定节点健康度的代码逻辑,根据该第一存储方的历史任务完成情况和/或历史心跳情况,确定该第一存储方的健康度。例如,对于第一存储方群组中的每一第一存储方,将该第一存储方的历史任务完成情况中成功应对挑战次数和应对总次数之间的比值,作为该第一存储方的任务成功完成比例;将该第一存储方的历史心跳情况中心跳次数与设定的期望心跳次数之间的比值,作为该第一存储方的心跳比例。之后,可以将该第一存储方的任务成功完成比例或心跳比例,作为该第一存储方的节点健康度;或者,可以将该第一存储方的任务成功完成比例和心跳比例之和,作为该第一存储方的节点健康度;或者,还可以将该第一存储方的任务成功完成比例和第一权值的乘积,以及该第一存储方的心跳比例和第二权值的乘积相加之和,作为该第一存储方的节点健康度等。
值得注意的是,本实施例通过结合历史任务完成情况和历史心跳情况等不同维度数据来确定第一存储方群组中各第一存储方的节点健康度,保证了节点健康度的合理性,为基于节点健康度等确定目标文件的文件健康度提供了数据支撑。
所谓目标文件的备份情况包括是否对目标文件进行了备份。可选的,可以根据租赁智能合约中目标文件的副本参数取值,确定目标文件的备份情况。例如,若副本参数取值为1,则说明备份情况为对目标文件进行了备份;若副本参数取值为0,则说明备份情况为未对目标文件进行备份。进一步的,备份情况还可以包括将目标文件备份了几份等。
具体的,在本实施例中,可以基于租赁智能合约中确定文件健康度的代码逻辑,根据第一存储方群组的节点健康度和/或目标文件的备份情况,确定目标文件的文件健康度。
例如,可以将第一存储方群组的节点健康度和目标文件的备份情况,作为衡量文件健康度的两个维度的参考数据。
又如,根据目标文件的备份情况,确定初始分值;根据第一存储方群组中各第一存储方的节点健康度,更新初始分值;将更新后的初始分值,作为目标文件的文件健康度。其中,根据目标文件的备份情况,确定初始分值可以是:若目标文件有备份,则采用第一设定值;否则采用第二设定值;其中,第一设定值大于第二设定值。进一步的,根据第一存储方群组中各第一存储方的节点健康度,更新初始分值例如可以是:采用第一存储方群组中所有第一存储方的节点健康度之和,乘以初始分值,得到更新后的初始分值。
又如,将第一存储方群组的节点健康度和/或目标文件的备份情况输入至健康度确定模型中,进而基于健康度确定模型的输出确定目标文件的文件健康度。
S202,在根据文件健康度识别到文件迁移事件的情况下,从第一存储方群组中确定待迁移存储方。
S203,从第二存储方群组中确定替换存储方。
其中,第二存储方群组与第一存储方群组不同。
S204,将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。
本公开实施例的技术方案,通过调用租赁智能合约,结合第一存储方群组的节点健康度和目标文件的备份情况等不同维度数据来确定存储于第一存储方群组中的目标文件的文件健康度,并在根据文件健康度识别到文件迁移事件的情况下,从第一存储方群组中确定待迁移存储方,以及从第二存储方群组中确定替换存储方;之后将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。上述方案,通过结合第一存储方群组中的节点健康度和目标文件的备份情况来衡量文件健康度,使得文件健康度的衡量更全面,进而进一步提升了文件健康度的准确性。
示例性的,在上述任一实施例的基础上,在引入节点健康度来衡量存储方稳定性的情况下,可以调度租赁智能合约,根据第二存储方群组的节点健康度,从第二存储方群组中确定替换存储方。第二存储方群组的节点健康度即为第二存储方群组中每一第二存储方的节点健康度。
具体可以是,对于第二存储方群组中每一第二存储方,调用租赁智能合约,根据该第二存储方的历史任务完成情况和/或历史心跳情况,确定该第二存储方的节点健康度。之后根据节点健康度,按照从大到小的顺序,对第二存储方群组中的第二存储方进行排序;进而根据排序结果等,从第二存储方群组中选择替换存储方。
或者,对于第二存储方群组中每一第二存储方,根据该第二存储方的剩余存储容量,确定该第二存储方的基础选择概率;根据该第二存储方的节点健康度,更新该第二存储方的基础选择概率;之后根据第二存储方群组中各第二存储方更新后的基础选择概率,从第二存储方群组中选择替换存储方等。
其中,根据第二存储方的剩余存储容量,确定第二存储方的基础选择概率可以是:可以将第二存储方群组中所有第二存储方的剩余存储容量之和,作为总容量;对于第二存储方群组中每一第二存储方,将该第二存储方的剩余存储容量与总容量之间的比值,作为该第二存储方的基础选择概率。进一步的,根据节点健康度,更新第二存储方的基础选择概率可以是:对于第二存储方群组中每一第二存储方,可以采用基于该第二存储方的节点健康度乘以该第二存储方的基础选择概率,并将乘积作为该第二存储方更新后的基础选择概率。
需要说明的是,本实施例基于节点健康度对第二存储方群组中的第二存储方进行筛选,使得所选择的替换存储方更加合理,进而极大地保证了数据拥有方的数据存储安全。
示例性的,在将第一存储方群组的节点健康度和目标文件的备份情况,作为衡量文件健康度的两个维度的参考数据的情况下,根据文件健康度识别到文件迁移事件还可以是:若文件健康度中目标文件的备份情况不满足备份规则,和/或,文件健康度中第一存储方群组中存在节点健康度为设定等级的第一存储方,则确定识别到文件迁移事件。
其中,所谓备份规则即为对文件进行备份的规则,可以包括是否需要对文件进行备份,以及文件对应的备份数量,即最少需要将文件备份几份(比如2份)等。可选的,不同文件的备份规则可以相同,也可以不同。
一种可实施方式,可以从租赁智能合约中获取目标文件的备份规则和备份情况;识别目标文件的备份情况是否满足备份规则,若不满足,则确定识别到文件迁移事件。
又一种可实施方式,还可以结合文件健康度中第一存储方的节点健康度来识别到文件迁移事件。例如,若第一存储方群组中存在节点健康度为设定等级的第一存储方,则确定识别到文件迁移事件。其中,设定等级可以包括节点健康度较低的等级,比如红色等级和/或黄色等级等。
进一步的,还可以是,若文件健康度中目标文件的备份情况不满足备份规则,且,文件健康度中第一存储方群组中存在节点健康度为设定等级的第一存储方,则确定识别到文件迁移事件。
需要说明的是,本实施例中结合第一存储方群组的节点健康度和目标文件的备份情况来衡量文件健康度,使得文件迁移事件的判断更精准。
图3是根据本公开实施例提供的又一种基于区块链的数据迁移方法的流程图。本实施例在上述实施例的基础上,在文件迁移事件是基于文件健康度中第一存储方群组的节点健康度识别到的情况下,对如何确定待迁移存储方,以及如何进行文件数据的迁移进行详细解释说明。如图3所示,本实施例提供的基于区块链的数据迁移方法可以包括:
S301,调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度。
S302,在根据文件健康度中第一存储方群组的节点健康度识别到文件迁移事件的情况下,将第一存储方群组中节点健康度为第一设定等级的第一存储方,作为待剔除存储方。
本实施例中,所谓第一设定等级即为节点健康度最低的等级,比如红色等级。需要说明的是,存储方的节点健康度等级越低,存储于存储方中的文件数据被恢复的可能性越小。也就是说,存储于节点健康度为第一设定等级的第一存储方中的文件数据几乎不能被恢复,因此为了保证数据安全等,需要寻找能够替换这类第一存储方的替换存储方,来存储这类存储方中的文件数据。进一步的,由于几乎无法从这类第一存储方中拉取到文件数据,因此不能直接将这类第一存储方作为待迁移存储方。
可选的,本实施例中,在第一存储方群组中存在节点健康度为第一设定等级的第一存储方时,确定识别到文件迁移事件,此时将第一存储方中节点健康度为第一设定等级的存储方,作为待剔除存储方。
S303,根据待剔除存储方中存储的目标文件的第一文件数据,从第一存储方群组中除待剔除存储方之外的第一存储方中选择待迁移存储方。
在对目标文件进行备份以及分片存储的场景下,第一文件数据即为目标文件的一个分片数据。
在本实施例中,所谓待迁移存储方为第一存储方群组中节点健康度等级较高,且存储于其中的文件数据能够被恢复的第一存储方。进一步的,待迁移存储方具体为存储有全部或部分第一文件数据的一方。更进一步的是,在第一文件数据的分散存储于多个存储方的情况下,待迁移存储方的数量为多个。
一种可实施方式,在确定待剔除存储方之后,可以将第一存储方群组中除待剔除存储方之外的第一存储方中存储有全部或部分第一文件数据的一方,作为候选存储方;根据候选存储方的节点健康度,从候选存储方中选择待迁移存储方。
S304,从第二存储方群组中确定替换存储方。
其中,第二存储方群组与第一存储方群组不同。
S305,将待迁移存储方中存储的目标文件的第一文件数据迁移至替换存储方中。
具体的,在待迁移存储方为一个的情况下,可以从待迁移存储方中拷贝第一文件数据,并将所拷贝的第一文件数据存储于替换存储方中。
或者,在待迁移存储方为至少两个的情况下,可以分别从每一待迁移存储方中拷贝一部分第一文件数据,并根据第一文件数据的生成情况,对所拷贝的所有数据进行组合,得到第一文件数据,并将第一文件数据存储于替换存储方中。
本公开实施例的技术方案,在根据文件健康度中第一存储方群组的节点健康度识别到文件迁移事件的情况下,将第一存储方群组中节点健康度为第一设定等级的第一存储方作为待剔除存储方,同时基于待剔除存储方中存储的目标文件的第一文件数据,从第一存储方群组中除待剔除存储方之外的第一存储方中选择待迁移存储方;从第二存储方群组中确定替换存储方;之后将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。上述方案,在无法直接将待剔除存储方中的文件数据迁移至替换存储方中的情况下,通过灵活以待迁移存储方作为桥梁,实现了间接将待剔除存储方中的文件数据迁移至替换存储方中的效果,进一步提升了数据拥有方的数据存储安全。
需要说明的是,上述实施例中存储于存储方中的文件数据均为未基于标识信息进行加密的数据。进一步的,在存储于存储方中的文件数据均为基于标识信息进行加密后的数据的情况下,S305具体可以是:从待迁移存储方中获取目标文件的第二文件数据;对第二文件数据进行解密;从解密后的第二文件数据中获取第三文件数据,其中第三文件数据与第一文件数据相同;对第三文件数据进行加密,得到待迁移文件数据;将待迁移文件数据,存储于替换存储方中。
其中,所谓第二文件数据即为目标文件的加密后的分片数据;可选的,从解密后的第二文件数据中获取的第三文件数据,与上述实施例中针对存储于存储方中的文件数据均为未基于标识信息进行加密的数据场景下提及的第一文件数据相同。
例如,在待迁移存储方为一个的情况下,从待迁移存储方中拷贝第二文件数据,并基于待迁移存储方的标识信息,结合设定的密钥派生规则,派生出待迁移存储方的解密密钥;采用解密密钥对第二文件数据进行解密,得到解密后的第二文件数据。从解密后的第二文件数据中拷贝与第一文件数据相同的第三文件数据;基于替换存储方的标识信息,结合设定的密钥派生规则,派生出替换存储方的加密密钥,采用加密密钥对第三文件数据进行加密,得到待迁移文件数据;将待迁移文件数据存储于替换存储方中。
又如,在待迁移存储方为至少两个的情况下,对于每一待迁移存储方,从该待迁移存储方中拷贝第二文件数据,并基于该待迁移存储方的标识信息,结合设定的密钥派生规则,派生出该待迁移存储方的解密密钥;采用解密密钥对从该待迁移存储方中拷贝的第二文件数据进行解密,得到解密后的第二文件数据。
之后从各解密后的第二文件数据中拷贝与第一文件数据相同第三文件数据;比如,第一文件数据由数据块a和数据块b组成,待迁移存储方1的解密后的第二文件数据中包括数据块a和数据块c,待迁移存储方2的解密后的第二文件数据中包括数据块b和数据块d,此时可以从待迁移存储方1的解密后的第二文件数据中拷贝数据块a,从待迁移存储方2的解密后的第二文件数据中拷贝数据块b。之后,可以直接将数据块a和数据块b作为第三文件数据;或者可以按照设定规则,对数据块a和数据块b进行处理(比如乱序),得到第三文件数据。
而后基于替换存储方的标识信息,结合设定的密钥派生规则,派生出替换存储方的加密密钥,采用加密密钥对第三文件数据进行加密,得到待迁移文件数据;将待迁移文件数据存储于替换存储方中。
可以理解的是,本方案实现了间接将待剔除存储方中的文件数据迁移至替换存储方中的效果,同时将加密后的文件数据存储于替换存储方中,进一步提升了数据的存储安全。
图4是根据本公开实施例提供的又一种基于区块链的数据迁移方法的流程图。本实施例在上述实施例的基础上,在文件迁移事件是基于文件健康度中第一存储方群组的节点健康度识别到的情况下,又提供了一种确定待迁移存储方,以及进行文件数据迁移的方式。如图4所示,本实施例提供的基于区块链的数据迁移方法可以包括:
S401,调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度。
S402,在根据文件健康度中第一存储方群组的节点健康度识别到文件迁移事件的情况下,将第一存储方群组中节点健康度为第二设定等级的第一存储方,作为待迁移存储方。
本实施例中,所谓第二设定等级即为节点健康度位于最低和最高之间的等级,比如黄色等级。需要说明的是,存储于第二设定等级的第一存储方中的文件数据可以被恢复,因此可以直接将这类第一存储方作为待迁移存储方。
可选的,本实施例中,在第一存储方群组中存在节点健康度为第二设定等级的第一存储方时,确定识别到文件迁移事件,此时将第一存储方群组中节点健康度为第二设定等级的第一存储方,作为待迁移存储方。
S403,从第二存储方群组中确定替换存储方。
其中,第二存储方群组与第一存储方群组不同。
S404,将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。
可选的,在存储于存储方中的文件数据均为未基于标识信息进行加密的数据的情况下,可以从待迁移存储方中拷贝文件数据,并将所拷贝的文件数据存储于替换存储方中。
进一步的,在存储于存储方中的文件数据均为基于标识信息进行加密后的数据的情况下,S404具体可以是:从待迁移存储方中获取目标文件的第四文件数据;基于待迁移存储方的标识信息,对第四文件数据进行解密;基于替换存储方的标识信息,对解密后的第四文件数据进行加密,得到待迁移文件数据;将待迁移文件数据,存储于替换存储方中。
其中,所谓第四文件数据即为目标文件的加密后的分片数据。
具体的,从待迁移存储方中拷贝第四文件数据,并基于待迁移存储方的标识信息,结合设定的密钥派生规则,派生出待迁移存储方的解密密钥;采用解密密钥对第四文件数据进行解密,得到解密后的第四文件数据。基于替换存储方的标识信息,结合设定的密钥派生规则,派生出替换存储方的加密密钥,采用加密密钥对解密后的第四文件数据进行加密,得到待迁移文件数据;将待迁移文件数据存储于替换存储方中。
可以理解的是,通过将加密后的文件数据存储于存储方中,进一步提升了数据的存储安全;进一步的,通过基于存储方的标识信息派生密钥,使得存储于不同存储方中的文件数据所采用的加密密钥不同,又极大地提升了数据的存储安全。
本公开实施例的技术方案,在根据文件健康度中第一存储方群组的节点健康度识别到文件迁移事件的情况下,将第一存储方群组中节点健康度为第二设定等级的第一存储方作为待迁移存储方;从第二存储方群组中确定替换存储方;之后将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。上述方案,实现了直接将待剔除存储方中的文件数据迁移至替换存储方中的效果,进一步提升了数据拥有方的数据存储安全。
一种可实施方式,在第一存储方群组中同时存在节点健康度为第一设定等级的第一存储方和第二设定等级的第一存储方时,可以优先执行图3所示的基于区块链的数据迁移方法,而后再执行图4所示的基于区块链的数据迁移方法。
图5是根据本公开实施例提供的再一种基于区块链的数据迁移方法的流程图。本实施例在上述实施例的基础上,在文件迁移事件是基于目标文件的备份情况识别到的情况下,提供了一种确定待迁移存储方,以及进行文件数据迁移的方式。如图5所示,本实施例提供的基于区块链的数据迁移方法可以包括:
S501,调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度。
S502,在根据文件健康度中目标文件的备份情况识别到文件迁移事件的情况下,根据目标文件的备份情况,从第一存储方群组中选择待迁移存储方。
在对目标文件进行分片存储的场景下,可选的,在目标文件的备份情况不满足备份规则的情况下,确定识别到文件迁移事件。例如,根据目标文件的备份情况识别到目标文件不存在备份,而备份规则中要求备份数量为1。此时可以将第一存储方群组中所有的第一存储方一并作为待迁移存储方。
又如,根据目标文件的备份情况识别到目标文件存在备份,且备份数量为1,而备份规则中要求备份数量为2。此时可以根据第一存储方群组的节点健康度,从第一存储方群组中选择一个或多个作为待迁移存储方。
又如,在对目标文件先进行数据块划分,再基于数据块组成分片数据的场景下,若根据目标文件的备份情况识别到未对某一或某些数据块进行备份,且备份规则中要求对整个目标文件均进行备份,则确定识别到文件迁移事件。此时可以将第一存储方群组中存储有这些数据块的第一存储方中的一个或多个作为待迁移存储方。
S503,从第二存储方群组中确定替换存储方。
其中,第二存储方群组与第一存储方群组不同。
S504,将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。
可选的,在存储于存储方中的文件数据均为未基于标识信息进行加密的数据的情况下,可以从待迁移存储方中拷贝文件数据,并将所拷贝的文件数据存储于一个或多个替换存储方中;或者可以对所拷贝的文件数据进行处理(比如从中抽取一部分,或者对从多个迁移存储方中拷贝的文件数据进行组合等),并将处理之后的数据存储于一个或多个替换存储方中。
进一步的,在存储于存储方中的文件数据均为基于标识信息进行加密后的数据的情况下,若待迁移存储的数量为至少两个,则S504具体可以是:从至少两个待迁移存储方中获取目标文件的至少两份第五文件数据;对至少两份第五文件数据进行解密;对解密后的至少两份第五文件数据进行组合,并对组合后的数据进行加密,得到待迁移文件数据;将待迁移文件数据,存储于替换存储方中。
其中,所谓第五文件数据即为目标文件的加密后的分片数据。可选的,存储于不同待迁移存储方中的第五文件数据可以完全不同,或者可以存在部分相同等。
具体的,针对每一待迁移存储方,从该待迁移存储方中拷贝第五文件数据,并基于该待迁移存储方的标识信息,结合设定的密钥派生规则,派生出该待迁移存储方的解密密钥;采用解密密钥对从该待迁移存储方中拷贝的第五文件数据进行解密,得到解密后的第五文件数据。
在对目标文件先进行数据块划分,再基于数据块组成分片数据的场景下,基于数据块生成分片数据的规则,对解密后的至少两份第五文件数据进行组合;基于替换存储方的标识信息,结合设定的密钥派生规则,派生出替换存储方的加密密钥,采用加密密钥对组合后的数据进行加密,得到待迁移文件数据;将待迁移文件数据存储于替换存储方中。
可以理解的是,本方案通过将待迁移存储方的文件数据迁移至替换存储方中,实现了对目标文件进行备份的效果,提升了目标文件在外界攻击等因素下完整恢复的概率。
本公开实施例的技术方案,在根据文件健康度中目标文件的备份情况识别到文件迁移事件的情况下,根据目标文件的备份情况,从第一存储方群组中选择待迁移存储方;从第二存储方群组中确定替换存储方;之后将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。上述方案,在根据目标文件的备份情况识别到目标文件不满足备份规则的情况下,及时将待迁移存储方的文件数据迁移至替换存储方中,使得目标文件具有备份,进而可避免单一存储方受到攻击等导致文件无法完整恢复的现象,进一步提升了数据拥有方的数据存储安全。
一种可实施方式,在目标文件的备份情况不满足备份规则,以及第一存储方群组中同时存在节点健康度为第一设定等级的第一存储方和第二设定等级的第一存储方时,可以优先执行图5所示的基于区块链的数据迁移方法,而后再执行图3所示的基于区块链的数据迁移方法,最后再执行图4所示的基于区块链的数据迁移方法。
图6是根据本公开实施例提供的一种基于区块链的数据迁移装置的结构示意图。该装置可实现本公开实施例所述的基于区块链的数据迁移方法。该装置可集成于承载区块链网络中节点的计算设备中,或者可以集成于数据拥有方的计算设备中。该基于区块链的数据迁移装置600具体包括:
文件健康度确定模块601,用于调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度;
待迁移存储方确定模块602,用于在根据文件健康度识别到文件迁移事件的情况下,从第一存储方群组中确定待迁移存储方;
替换存储方确定模块603,用于从第二存储方群组中确定替换存储方;第二存储方群组与第一存储方群组不同;
数据迁移模块604,用于将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。
本公开实施例的技术方案,通过调用租赁智能合约确定存储于第一存储方群组中的目标文件的文件健康度,并在根据文件健康度识别到文件迁移事件的情况下,从第一存储方群组中确定待迁移存储方,以及从第二存储方群组中确定替换存储方;之后将待迁移存储方中存储的目标文件的文件数据迁移至替换存储方中。上述方案,通过引入租赁智能合约,保证了文件健康度确定的准确度;同时基于文件健康度能够识别到是否需要对文件进行迁移,并在确定需要对文件进行迁移的情况下,及时将待迁移存储方中的文件数据迁移至替换存储方中,保证了数据拥有方的数据存储安全。
示例性的,文件健康度确定模块601具体用于:
调用租赁智能合约,根据第一存储方群组的节点健康度和/或目标文件的备份情况,确定存储于第一存储方群组中的目标文件的文件健康度。
示例性的,上述装置还包括:
节点健康度确定模块,用于调用租赁智能合约,根据第一存储方群组的历史任务完成情况和/或历史心跳情况,确定第一存储方群组的节点健康度。
示例性的,上述装置还包括:
事件识别模块,用于若文件健康度中目标文件的备份情况不满足备份规则,和/或,文件健康度中第一存储方群组中存在节点健康度为设定等级的第一存储方,则确定识别到文件迁移事件。
示例性的,待迁移存储方确定模块602具体用于:
将第一存储方群组中节点健康度为第一设定等级的第一存储方,作为待剔除存储方;
根据待剔除存储方中存储的目标文件的第一文件数据,从第一存储方群组中除待剔除存储方之外的第一存储方中选择待迁移存储方。
示例性的,数据迁移模块604具体用于:
从待迁移存储方中获取目标文件的第二文件数据;
对第二文件数据进行解密;
从解密后的第二文件数据中获取第三文件数据;第三文件数据与第一文件数据相同;
对第三文件数据进行加密,得到待迁移文件数据;
将待迁移文件数据,存储于替换存储方中。
示例性的,待迁移存储方确定模块602具体用于:
将第一存储方群组中节点健康度为第二设定等级的第一存储方,作为待迁移存储方。
示例性的,数据迁移模块604具体用于:
从待迁移存储方中获取目标文件的第四文件数据;
基于待迁移存储方的标识信息,对第四文件数据进行解密;
基于替换存储方的标识信息,对解密后的第四文件数据进行加密,得到待迁移文件数据;
将待迁移文件数据,存储于替换存储方中。
示例性的,待迁移存储方确定模块602具体用于:
根据目标文件的备份情况,从第一存储方群组中选择待迁移存储方。
示例性的,若待迁移存储方的数量为至少两个,则数据迁移模块604具体用于:
从至少两个待迁移存储方中获取目标文件的至少两份第五文件数据;
对至少两份第五文件数据进行解密;
对解密后的至少两份第五文件数据进行组合,并对组合后的数据进行加密,得到待迁移文件数据;
将待迁移文件数据,存储于替换存储方中。
示例性的,替换存储方确定模块603具体用于:
调用租赁智能合约,根据第二存储方群组的节点健康度,从第二存储方群组中确定替换存储方。
本公开的技术方案中,所涉及的存储方的历史任务完成情况和历史心跳情况、以及文件的备份情况等的收集、存储、使用、加工、传输、提供和公开等处理,均符合相关法律法规的规定,且不违背公序良俗。
根据本公开的实施例,本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。
图7示出了可以用来实施本公开的实施例的示例电子设备700的示意性框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图7所示,电子设备700包括计算单元701,其可以根据存储在只读存储器(ROM)702中的计算机程序或者从存储单元708加载到随机访问存储器(RAM)703中的计算机程序,来执行各种适当的动作和处理。在RAM 703中,还可存储电子设备700操作所需的各种程序和数据。计算单元701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
电子设备700中的多个部件连接至I/O接口705,包括:输入单元706,例如键盘、鼠标等;输出单元707,例如各种类型的显示器、扬声器等;存储单元708,例如磁盘、光盘等;以及通信单元709,例如网卡、调制解调器、无线通信收发机等。通信单元709允许电子设备700通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
计算单元701可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元701的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元701执行上文所描述的各个方法和处理,例如基于区块链的数据迁移方法。例如,在一些实施例中,基于区块链的数据迁移方法可被实现为计算机软件程序,其被有形地包含于机器可读介质,例如存储单元708。在一些实施例中,计算机程序的部分或者全部可以经由ROM 702和/或通信单元709而被载入和/或安装到电子设备700上。当计算机程序加载到RAM 703并由计算单元701执行时,可以执行上文描述的基于区块链的数据迁移方法的一个或多个步骤。备选地,在其他实施例中,计算单元701可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行基于区块链的数据迁移方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器,使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中,机器可读介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在计算机上实施此处描述的系统和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
人工智能是研究使计算机来模拟人的某些思维过程和智能行为(如学习、推理、思考、规划等)的学科,既有硬件层面的技术也有软件层面的技术。人工智能硬件技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理等技术;人工智能软件技术主要包括计算机视觉技术、语音识别技术、自然语言处理技术及机器学习/深度学习技术、大数据处理技术、知识图谱技术等几大方向。
云计算(cloud computing),指的是通过网络接入弹性可扩展的共享物理或虚拟资源池,资源可以包括服务器、操作系统、网络、软件、应用和存储设备等,并可以按需、自服务的方式对资源进行部署和管理的技术体系。通过云计算技术,可以为人工智能、区块链等技术应用、模型训练提供高效强大的数据处理能力。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本公开公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本公开保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等,均应包含在本公开保护范围之内。

Claims (25)

1.一种基于区块链的数据迁移方法,包括:
调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度;
在根据所述文件健康度识别到文件迁移事件的情况下,从所述第一存储方群组中确定待迁移存储方;
从第二存储方群组中确定替换存储方;所述第二存储方群组与所述第一存储方群组不同;
将所述待迁移存储方中存储的所述目标文件的文件数据迁移至所述替换存储方中。
2.根据权利要求1所述的方法,其中,所述调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度,包括:
调用租赁智能合约,根据第一存储方群组的节点健康度和/或目标文件的备份情况,确定存储于所述第一存储方群组中的目标文件的文件健康度。
3.根据权利要求2所述的方法,还包括:
调用租赁智能合约,根据所述第一存储方群组的历史任务完成情况和/或历史心跳情况,确定所述第一存储方群组的节点健康度。
4.根据权利要求1所述的方法,其中,所述根据所述文件健康度识别到文件迁移事件,包括:
若所述文件健康度中所述目标文件的备份情况不满足备份规则,和/或,所述文件健康度中所述第一存储方群组中存在节点健康度为设定等级的第一存储方,则确定识别到文件迁移事件。
5.根据权利要求4所述的方法,其中,所述从所述第一存储方群组中确定待迁移存储方,包括:
将所述第一存储方群组中节点健康度为第一设定等级的第一存储方,作为待剔除存储方;
根据所述待剔除存储方中存储的所述目标文件的第一文件数据,从所述第一存储方群组中除所述待剔除存储方之外的第一存储方中选择待迁移存储方。
6.根据权利要求5所述的方法,其中,所述将所述待迁移存储方中存储的所述目标文件的文件数据迁移至所述替换存储方中,包括:
从所述待迁移存储方中获取所述目标文件的第二文件数据;
对所述第二文件数据进行解密;
从解密后的第二文件数据中获取第三文件数据;所述第三文件数据与所述第一文件数据相同;
对所述第三文件数据进行加密,得到待迁移文件数据;
将所述待迁移文件数据,存储于所述替换存储方中。
7.根据权利要求4所述的方法,其中,所述从所述第一存储方群组中确定待迁移存储方,包括:
将所述第一存储方群组中节点健康度为第二设定等级的第一存储方,作为待迁移存储方。
8.根据权利要求7所述的方法,其中,所述将所述待迁移存储方中存储的所述目标文件的文件数据迁移至所述替换存储方中,包括:
从所述待迁移存储方中获取所述目标文件的第四文件数据;
基于所述待迁移存储方的标识信息,对所述第四文件数据进行解密;
基于所述替换存储方的标识信息,对解密后的第四文件数据进行加密,得到待迁移文件数据;
将所述待迁移文件数据,存储于所述替换存储方中。
9.根据权利要求4所述的方法,其中,所述从所述第一存储方群组中确定待迁移存储方,包括:
根据所述目标文件的备份情况,从所述第一存储方群组中选择待迁移存储方。
10.根据权利要求9所述的方法,其中,若所述待迁移存储方的数量为至少两个,则所述将所述待迁移存储方中存储的所述目标文件的文件数据迁移至所述替换存储方中,包括:
从至少两个待迁移存储方中获取所述目标文件的至少两份第五文件数据;
对所述至少两份第五文件数据进行解密;
对解密后的至少两份第五文件数据进行组合,并对组合后的数据进行加密,得到待迁移文件数据;
将所述待迁移文件数据,存储于所述替换存储方中。
11.根据权利要求1所述的方法,其中,所述从第二存储方群组中确定替换存储方,包括:
调用租赁智能合约,根据所述第二存储方群组的节点健康度,从所述第二存储方群组中确定替换存储方。
12.一种基于区块链的数据迁移装置,包括:
文件健康度确定模块,用于调用租赁智能合约,确定存储于第一存储方群组中的目标文件的文件健康度;
待迁移存储方确定模块,用于在根据所述文件健康度识别到文件迁移事件的情况下,从所述第一存储方群组中确定待迁移存储方;
替换存储方确定模块,用于从第二存储方群组中确定替换存储方;所述第二存储方群组与所述第一存储方群组不同;
数据迁移模块,用于将所述待迁移存储方中存储的所述目标文件的文件数据迁移至所述替换存储方中。
13.根据权利要求12所述的装置,其中,所述文件健康度确定模块具体用于:
调用租赁智能合约,根据第一存储方群组的节点健康度和/或目标文件的备份情况,确定存储于所述第一存储方群组中的目标文件的文件健康度。
14.根据权利要求13所述的装置,还包括:
节点健康度确定模块,用于调用租赁智能合约,根据所述第一存储方群组的历史任务完成情况和/或历史心跳情况,确定所述第一存储方群组的节点健康度。
15.根据权利要求12所述的装置,还包括:
事件识别模块,用于若所述文件健康度中所述目标文件的备份情况不满足备份规则,和/或,所述文件健康度中所述第一存储方群组中存在节点健康度为设定等级的第一存储方,则确定识别到文件迁移事件。
16.根据权利要求15所述的装置,其中,所述待迁移存储方确定模块具体用于:
将所述第一存储方群组中节点健康度为第一设定等级的第一存储方,作为待剔除存储方;
根据所述待剔除存储方中存储的所述目标文件的第一文件数据,从所述第一存储方群组中除所述待剔除存储方之外的第一存储方中选择待迁移存储方。
17.根据权利要求16所述的装置,其中,所述数据迁移模块具体用于:
从所述待迁移存储方中获取所述目标文件的第二文件数据;
对所述第二文件数据进行解密;
从解密后的第二文件数据中获取第三文件数据;所述第三文件数据与所述第一文件数据相同;
对所述第三文件数据进行加密,得到待迁移文件数据;
将所述待迁移文件数据,存储于所述替换存储方中。
18.根据权利要求15所述的装置,其中,所述待迁移存储方确定模块具体用于:
将所述第一存储方群组中节点健康度为第二设定等级的第一存储方,作为待迁移存储方。
19.根据权利要求18所述的装置,其中,所述数据迁移模块具体用于:
从所述待迁移存储方中获取所述目标文件的第四文件数据;
基于所述待迁移存储方的标识信息,对所述第四文件数据进行解密;
基于所述替换存储方的标识信息,对解密后的第四文件数据进行加密,得到待迁移文件数据;
将所述待迁移文件数据,存储于所述替换存储方中。
20.根据权利要求15所述的装置,其中,所述待迁移存储方确定模块具体用于:
根据所述目标文件的备份情况,从所述第一存储方群组中选择待迁移存储方。
21.根据权利要求20所述的装置,其中,若所述待迁移存储方的数量为至少两个,则所述数据迁移模块具体用于:
从至少两个待迁移存储方中获取所述目标文件的至少两份第五文件数据;
对所述至少两份第五文件数据进行解密;
对解密后的至少两份第五文件数据进行组合,并对组合后的数据进行加密,得到待迁移文件数据;
将所述待迁移文件数据,存储于所述替换存储方中。
22.根据权利要求12所述的装置,其中,所述替换存储方确定模块具体用于:
调用租赁智能合约,根据所述第二存储方群组的节点健康度,从所述第二存储方群组中确定替换存储方。
23.一种电子设备,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-11中任一项所述的基于区块链的数据迁移方法。
24.一种存储有计算机指令的非瞬时计算机可读存储介质,其中,所述计算机指令用于使计算机执行根据权利要求1-11中任一项所述的基于区块链的数据迁移方法。
25.一种计算机程序产品,包括计算机程序,所述计算机程序在被处理器执行时实现根据权利要求1-11中任一项所述的基于区块链的数据迁移方法。
CN202111509738.7A 2021-12-10 2021-12-10 一种基于区块链的数据迁移方法、装置、设备及存储介质 Active CN113918513B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111509738.7A CN113918513B (zh) 2021-12-10 2021-12-10 一种基于区块链的数据迁移方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111509738.7A CN113918513B (zh) 2021-12-10 2021-12-10 一种基于区块链的数据迁移方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN113918513A true CN113918513A (zh) 2022-01-11
CN113918513B CN113918513B (zh) 2022-03-08

Family

ID=79248522

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111509738.7A Active CN113918513B (zh) 2021-12-10 2021-12-10 一种基于区块链的数据迁移方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN113918513B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160378547A1 (en) * 2015-06-29 2016-12-29 Amazon Technologies, Inc. Preserving state during virtual machine instance migration
CN108681943A (zh) * 2018-05-18 2018-10-19 百度在线网络技术(北京)有限公司 一种区块链网络的数据处理方法、装置、设备及存储介质
CN108829350A (zh) * 2018-05-31 2018-11-16 阿里巴巴集团控股有限公司 基于区块链的数据迁移方法和装置
CN111639061A (zh) * 2020-05-26 2020-09-08 深圳壹账通智能科技有限公司 Redis集群中数据管理方法、装置、介质及电子设备
CN113296696A (zh) * 2021-03-02 2021-08-24 阿里巴巴新加坡控股有限公司 一种数据的访问方法、计算设备及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160378547A1 (en) * 2015-06-29 2016-12-29 Amazon Technologies, Inc. Preserving state during virtual machine instance migration
CN108681943A (zh) * 2018-05-18 2018-10-19 百度在线网络技术(北京)有限公司 一种区块链网络的数据处理方法、装置、设备及存储介质
CN108829350A (zh) * 2018-05-31 2018-11-16 阿里巴巴集团控股有限公司 基于区块链的数据迁移方法和装置
CN111639061A (zh) * 2020-05-26 2020-09-08 深圳壹账通智能科技有限公司 Redis集群中数据管理方法、装置、介质及电子设备
CN113296696A (zh) * 2021-03-02 2021-08-24 阿里巴巴新加坡控股有限公司 一种数据的访问方法、计算设备及存储介质

Also Published As

Publication number Publication date
CN113918513B (zh) 2022-03-08

Similar Documents

Publication Publication Date Title
US8332367B2 (en) Parallel data redundancy removal
US20200186529A1 (en) Evaluating security of data access statements
CN104376875B (zh) 存储设备寿命预测、确定方法及装置
CN113900598B (zh) 基于区块链的数据存储方法、装置、设备以及存储介质
CN112559535B (zh) 基于多线程的异步任务处理方法、装置、设备及介质
CN110188103A (zh) 数据对账方法、装置、设备和存储介质
US9342251B2 (en) Data integrity protection in storage volumes
CN113360580A (zh) 基于知识图谱的异常事件检测方法、装置、设备及介质
WO2017035495A1 (en) Determining data locality in a distributed system using aggregation of locality summaries
CN111694843B (zh) 缺失号码检测方法、装置、电子设备及存储介质
CN113918513B (zh) 一种基于区块链的数据迁移方法、装置、设备及存储介质
CN115328621B (zh) 基于区块链的事务处理方法、装置、设备及存储介质
CN114253936A (zh) 分布式数据库的缩容方法、装置、设备和介质
CN114518848B (zh) 存储数据的处理方法、装置、设备和介质
CN113918102B (zh) 一种基于区块链的数据处理方法、装置、设备及存储介质
CN114896418A (zh) 知识图谱构建方法、装置、电子设备及存储介质
CN111651652B (zh) 基于人工智能的情感倾向识别方法、装置、设备及介质
CN115330532B (zh) 基于账户模型的区块链处理方法、装置、设备及存储介质
CN114546705B (zh) 操作响应方法、操作响应装置、电子设备以及存储介质
US10061815B1 (en) Systems and methods for displaying search results
CN118036002A (zh) 安全文件识别方法、装置、安全业务系统、设备及介质
CN117829839A (zh) 可疑交易账户识别方法、装置、设备及存储介质
CN114416678A (zh) 一种资源处理方法、装置、设备以及存储介质
CN116703539A (zh) 基于增量学习的金融风险识别方法、装置、设备及介质
CN117708201A (zh) 一种关联规则的挖掘方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant