CN109376122A - 一种文件管理方法、系统及区块链节点设备和存储介质 - Google Patents
一种文件管理方法、系统及区块链节点设备和存储介质 Download PDFInfo
- Publication number
- CN109376122A CN109376122A CN201811119746.9A CN201811119746A CN109376122A CN 109376122 A CN109376122 A CN 109376122A CN 201811119746 A CN201811119746 A CN 201811119746A CN 109376122 A CN109376122 A CN 109376122A
- Authority
- CN
- China
- Prior art keywords
- fragment
- node
- file
- block chain
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
- G06Q40/04—Trading; Exchange, e.g. stocks, commodities, derivatives or currency exchange
Landscapes
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Finance (AREA)
- Engineering & Computer Science (AREA)
- Development Economics (AREA)
- Economics (AREA)
- Marketing (AREA)
- Strategic Management (AREA)
- Technology Law (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种文件管理方法、系统及一种区块链节点设备和计算机可读存储介质,该方法包括:接收到目标文件的存储请求时,将目标文件划分为多个分片;为每个分片生成对应的索引值,并根据分片与索引值的对应关系建立索引表;将分片分配至所述区块链中的节点存储,并根据索引值与分片的存储节点的对应关系建立分片地址表。本申请提供的基于区块链技术的文件管理方法,在存储文件时,将其划分为多个分片,存储于不同的节点上,相对于整个文件来说,每个分片的文件大小很小,很大程度上减轻了每个节点的存储压力。另外,对于每个分片,不限定对应的存储节点的数量,在满足文件备份需求的前提下,满足了大文件的存储需求。
Description
技术领域
本申请涉及区块链技术领域,更具体地说,涉及一种文件管理方法、系统及一种区块链节点设备和一种计算机可读存储介质。
背景技术
据测算到2020年,全球将会有超过200亿台联网设备,众多的设备将产生海量的数据。使用目前的区块链体系对这些海量的数据进行管理、存储、检索,相对于传统的中心化文件管理体系,会消耗更多的空间和时间资源。对于大文件现有的区块链技术在每个区块链节点都会进行存储备份,消耗了大量的节点资源,无法满足大文件的存储需求。
因此,如何在区块链中满足大文件的存储需求是本领域技术人员需要解决的问题。
发明内容
本申请的目的在于提供一种文件管理方法、系统及一种区块链节点设备和一种计算机可读存储介质,在区块链中满足了大文件的存储需求。
为实现上述目的,本申请提供了一种文件管理方法,应用于区块链节点设备,包括:
接收到目标文件的存储请求时,将所述目标文件划分为多个分片;
为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;
将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
其中,将所述目标文件划分为多个分片之前,还包括:
判断所述目标文件的文件大小是否大于预设值;
若是,则执行将所述目标文件划分为多个分片的步骤。
其中,所述为每个所述分片生成对应的索引值,包括:
对所述分片进行hash运算生成hash指纹,并将所述hash指纹作为所述分片的索引值。
其中,将所述分片分配至所述区块链中的节点存储,包括:
根据所述区块链中的节点的空余存储空间选取存储节点,并按预设的分配方式将所述分片存储至所述存储节点。
其中,还包括:
接收到所述目标文件的下载请求时,获取所述目标文件的所述索引表和所述分片地址表;
根据所述索引表和所述分片地址表确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件。
其中,根据所述索引表和所述分片地址表确定每个所述分片的下载节点,包括:
根据所述索引表和所述分片地址表确定每个所述分片的存储节点,并根据所述存储节点的指标项确定每个所述分片的下载节点。
其中,所述指标项包括所述存储节点与所述区块链节点的网络距离、所述存储节点的收费权重和请求响应速度中的任一项或任几项的组合。
为实现上述目的,本申请提供了一种文件管理系统,应用于区块链节点设备,包括:
划分模块,用于接收到目标文件的存储请求时,将所述目标文件划分为多个分片;
生成模块,用于为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;
存储模块,用于将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
其中,还包括:
判断模块,用于判断所述目标文件的文件大小是否大于预设值;若是,则启动所述划分模块的工作流程。
其中,所述生成模块具体为对所述分片进行hash运算生成hash指纹,并将所述hash指纹作为所述分片的索引值,并根据所述分片与所述索引值的对应关系建立索引表的模块。
其中,所述存储模块具体为根据所述区块链中的节点的空余存储空间选取存储节点,并按预设的分配方式将所述分片存储至所述存储节点,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表的模块。
其中,还包括:
接收模块,用于接收到所述目标文件的下载请求时,获取所述目标文件的所述索引表和所述分片地址表;
确定模块,用于根据所述索引表和所述分片地址表确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件。
其中,所述确定模块具体为根据所述索引表和所述分片地址表确定每个所述分片的存储节点,并根据所述存储节点的指标项确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件的模块。
其中,所述指标项包括所述存储节点与所述区块链节点的网络距离、所述存储节点的收费权重和请求响应速度中的任一项或任几项的组合。
为实现上述目的,本申请提供了一种区块链节点设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上述文件管理方法的步骤。
为实现上述目的,本申请提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述文件管理方法的步骤。
通过以上方案可知,本申请提供的一种文件管理方法,包括:接收到目标文件的存储请求时,将所述目标文件划分为多个分片;为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
本申请提供的基于区块链技术的文件管理方法,在存储文件时,将其划分为多个分片,存储于不同的节点上,相对于整个文件来说,每个分片的文件大小很小,很大程度上减轻了每个节点的存储压力。另外,对于每个分片,不限定对应的存储节点的数量,在满足文件备份需求的前提下,满足了大文件的存储需求。本申请还公开了一种文件管理系统及一种区块链节点设备和一种计算机可读存储介质,同样能实现上述技术效果。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例公开的一种文件管理方法的流程图;
图2为本申请实施例公开的另一种文件管理方法的流程图;
图3为本申请实施例公开的一种文件管理系统的结构图;
图4为本申请实施例公开的一种区块链节点设备的结构图;
图5为本申请实施例公开的另一种区块链节点设备的结构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在现有技术中,由于每个区块链节点均存储整个文件,导致消耗了大量的节点资源。因此在本申请中将文件划分为多个分片,存储于不同的节点上,相对于整个文件来说,每个分片的文件大小很小,很大程度上减轻了每个节点的存储压力。
本申请涉及区块链技术,为了便于理解,下面将对在本申请实施例中的区块链(Block Chain)进行简单的介绍,区块链是对接入服务器的所有区块链节点公开的分布式存储的数据结构,包含着若干的区块(Block)。包含客户端的用户终端可以注册成为一个区块链节点,每一个区块链节点设备作为一个区块链节点,与接入区块链服务器的其他区块链节点组成P2P网络,区块链数据可以存放在P2P网络,P2P网络任何一个或多个区块链节点瘫痪,都不会导致区块链数据的丢失,这样区块链数据就具有很强的安全性,确保数据的永久保存和不可篡改。当一个区块持久化到区块链数据中时,接入服务器的区块链节点都可以添加该区块;区块是按照持久化时间顺序一个一个地添加到区块链数据中的,除了区块链数据中第一个区块外的每一个区块都要链接到其前一个区块,这样区块链数据就形成一个区块链接这一个区块了,就像一个链条一样,当一个区块被持久化到区块链数据后,该区块就无法被修改了。
本申请实施例公开了一种文件管理方法,在区块链中满足了大文件的存储需求。
参见图1,本申请实施例公开的一种文件管理方法的流程图,如图1所示,包括:
S101:接收到目标文件的存储请求时,将所述目标文件划分为多个分片;
本实施例中的执行主体为区块链中的任一区块链节点。区块链节点接收到目标文件的存储请求时,将目标文件划分为多个分片。此处不限定划分的具体方式,也不限定分片的具体数量。例如,可以预设设置分片单位的文件大小,将该目标文件划分为多个分片单位,也可以根据目标文件的实际文件大小将目标文件平均分为若干个分片,在此不进行一一举例。
可以理解的是,为简化文件的存储的流程,作为一种优选实施方式,可以仅对大文件进行分配存储处理,即在本步骤之前还包括判断目标文件的文件大小是否大于预设值,若是,则执行将所述目标文件划分为多个分片的步骤,若否,则按照现有技术的方式,区块链中的每一节点均会备份该目标文件。
S102:为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;
在具体实施中,为方便后续分片的寻址,需要为每个分片生成对应的索引值,本实施例不对索引值的具体形式进行限定,例如,可以对分片进行hash运算生成hash指纹,并将hash指纹作为分片的索引值。
生成每个分片的索引值后根据分片与索引值的对应关系建立索引表,并将该索引表上链存储。可以理解的是,该索引表可以存储于区块链中的各节点中,当然为减轻区块链节点的存储压力,该索引表也可以仅存储于目标文件的上传节点。
S103:将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
在具体实施中,区块链中的各节点可以主动领取分配,也可以由上传目标文件的上传节点(即上述区块链节点)自动分配。对于主动领取,当各节点自身的资源负载情况满足预设要求(如资源利用率低于预设值)时,主动领取区块链系统中的分配存储任务。对于自动分配,上传节点为每一分片选取存储节点,具体的,可以根据区块链中的节点的空余存储空间选取存储节点,即选取空余存储空间较大的节点作为存储节点。
需要说明的是,在本实施例中不限定每个分片对应的存储节点的数量,即可以存在多个存储节点存储相同的分片。确定存储节点后,将每一分片的索引值与其存储节点的对应关系记录在分片地址表中。与上述索引表相同,此处同样不限定分片的存储方式,可以存储于区块链中的各节点,也可以仅存储于目标文件的上传节点。
本申请实施例提供的基于区块链技术的文件管理方法,在存储文件时,将其划分为多个分片,存储于不同的节点上,相对于整个文件来说,每个分片的文件大小很小,很大程度上减轻了每个节点的存储压力。另外,对于每个分片,不限定对应的存储节点的数量,在满足文件备份需求的前提下,满足了大文件的存储需求。
下面介绍本申请提供的基于区块链的文件下载方法,具体的:
参见图2,本申请实施例公开的另一种文件管理方法的流程图,如图2所示,包括:
S201:接收到所述目标文件的下载请求时,获取所述目标文件的所述索引表和所述分片地址表;
在具体实施中,用户可以通过任一区块链节点请求下载目标文件,首先获取目标文件的索引表和分片地址表。可以理解的是,当索引表和分片地址表存储于目标文件的上传节点时,该目标文件的下载请求至少包括目标文件的上传节点地址,以便区块链节点从该上传节点获取目标文件的索引表和分片地址表。
S202:根据所述索引表和所述分片地址表确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件。
在具体实施中,区块链节点根据索引表确定每个分片的索引值,再通过分片地址表确定每个分片的下载节点。此处不限定每个分片的下载节点数量,即对于每个分片来说,可以选取多个存储该分片的存储节点作为下载节点,几个下载节点同时下载该分片,直至上述区块链节点中的该分片完整,停止其他下载节点的下载任务,也可以仅仅选择一个存储节点作为下载节点。
更为具体的,可以首先通过分片地址表查询每个分片的存储节点,再根据每个存储节点的指标项确定下载节点。该指标项可以包括所述存储节点与上述区块链节点的网络距离、所述存储节点的收费权重和请求响应速度等。例如,可以为每个分片选择与区块链节点的网络距离较近的一个或几个存储节点作为下载节点,也可以选择请求响应速度较快一个或几个的存储节点作为下载节点。作为一种优选实施方式,可以为每个指标项分配对应的权重值,根据存储节点的实时负载情况计算综合权重值,并根据该综合权重值选择最优的下载节点。
确定下载节点后,从下载节点中下载目标文件的所有分片,并在区块链节点中将所有分片拼接为目标文件,完成该目标文件的下载任务。
下面对本申请实施例提供的一种文件管理系统进行介绍,下文描述的一种文件管理系统与上文描述的一种文件管理方法可以相互参照。
参见图3,本申请实施例提供的一种文件管理系统的结构图,如图3所示,包括:
划分模块301,用于接收到目标文件的存储请求时,将所述目标文件划分为多个分片;
生成模块302,用于为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;
存储模块303,用于将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
本申请实施例提供的基于区块链技术的文件管理系统,在存储文件时,将其划分为多个分片,存储于不同的节点上,相对于整个文件来说,每个分片的文件大小很小,很大程度上减轻了每个节点的存储压力。另外,对于每个分片,不限定对应的存储节点的数量,在满足文件备份需求的前提下,满足了大文件的存储需求。
在上述实施例的基础上,作为一张优选实施方式,还包括:
判断模块,用于判断所述目标文件的文件大小是否大于预设值;若是,则启动所述划分模块的工作流程。
在上述实施例的基础上,作为一张优选实施方式,所述生成模块具体为对所述分片进行哈希(hash)运算生成hash指纹,并将所述hash指纹作为所述分片的索引值,并根据所述分片与所述索引值的对应关系建立索引表的模块。
在上述实施例的基础上,作为一张优选实施方式,所述存储模块具体为根据所述区块链中的节点的空余存储空间选取存储节点,并按预设的分配方式将所述分片存储至所述存储节点,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表的模块。
在上述实施例的基础上,作为一张优选实施方式,还包括:
接收模块,用于接收到所述目标文件的下载请求时,获取所述目标文件的所述索引表和所述分片地址表;
确定模块,用于根据所述索引表和所述分片地址表确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件。
在上述实施例的基础上,作为一张优选实施方式,所述确定模块具体为根据所述索引表和所述分片地址表确定每个所述分片的存储节点,并根据所述存储节点的指标项确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件的模块。
在上述实施例的基础上,作为一张优选实施方式,所述指标项包括所述存储节点与所述区块链节点的网络距离、所述存储节点的收费权重和请求响应速度中的任一项或任几项的组合。
本申请还提供了一种区块链节点设备,参见图4,本申请实施例提供的一种区块链节点设备的结构图,如图4所示,包括:
存储器100,用于存储计算机程序;
处理器200,用于执行所述计算机程序时可以实现上述实施例所提供的步骤。
具体的,存储器100包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机可读指令,该内存储器为非易失性存储介质中的操作系统和计算机可读指令的运行提供环境。处理器200为区块链节点设备提供计算和控制能力,执行所述存储器100中保存的计算机程序时,可以实现以下步骤:接收到目标文件的存储请求时,将所述目标文件划分为多个分片;为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
本申请实施例在存储文件时,将其划分为多个分片,存储于不同的节点上,相对于整个文件来说,每个分片的文件大小很小,很大程度上减轻了每个节点的存储压力。另外,对于每个分片,不限定对应的存储节点的数量,在满足文件备份需求的前提下,满足了大文件的存储需求。
优选的,所述处理器200执行所述存储器100中保存的计算机子程序时,可以实现以下步骤:判断所述目标文件的文件大小是否大于预设值;若是,则执行将所述目标文件划分为多个分片的步骤。
优选的,所述处理器200执行所述存储器100中保存的计算机子程序时,可以实现以下步骤:对所述分片进行hash运算生成hash指纹,并将所述hash指纹作为所述分片的索引值。
优选的,所述处理器200执行所述存储器100中保存的计算机子程序时,可以实现以下步骤:根据所述区块链中的节点的空余存储空间选取存储节点,并按预设的分配方式将所述分片存储至所述存储节点。
优选的,所述处理器200执行所述存储器100中保存的计算机子程序时,可以实现以下步骤:接收到所述目标文件的下载请求时,获取所述目标文件的所述索引表和所述分片地址表;根据所述索引表和所述分片地址表确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件。
优选的,所述处理器200执行所述存储器100中保存的计算机子程序时,可以实现以下步骤:根据所述索引表和所述分片地址表确定每个所述分片的存储节点,并根据所述存储节点的指标项确定每个所述分片的下载节点。
在上述实施例的基础上,作为优选实施方式,参见图5,所述区块链节点设备还包括:
输入接口300,与处理器200相连,用于获取外部导入的计算机程序、参数和指令,经处理器200控制保存至存储器100中。该输入接口300可以与输入装置相连,接收用户手动输入的参数或指令。该输入装置可以是显示屏上覆盖的触摸层,也可以是终端外壳上设置的按键、轨迹球或触控板,也可以是键盘、触控板或鼠标等。
显示单元400,与处理器200相连,用于显示处理器200发送的数据。该显示单元400可以为PC机上的显示屏、液晶显示屏或者电子墨水显示屏等。具体的,在本实施例中,可以通过显示单元400显示索引表和分片地址表等。
网络端口500,与处理器200相连,用于与外部各终端设备进行通信连接。该通信连接所采用的通信技术可以为有线通信技术或无线通信技术,如移动高清链接技术(MHL)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术等。
本申请还提供了一种计算机可读存储介质,该存储介质可以包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。该存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:接收到目标文件的存储请求时,将所述目标文件划分为多个分片;为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
本申请实施例在存储文件时,将其划分为多个分片,存储于不同的节点上,相对于整个文件来说,每个分片的文件大小很小,很大程度上减轻了每个节点的存储压力。另外,对于每个分片,不限定对应的存储节点的数量,在满足文件备份需求的前提下,满足了大文件的存储需求。
优选的,所述计算机可读存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:判断所述目标文件的文件大小是否大于预设值;若是,则执行将所述目标文件划分为多个分片的步骤。
优选的,所述计算机可读存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:对所述分片进行hash运算生成hash指纹,并将所述hash指纹作为所述分片的索引值。
优选的,所述计算机可读存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:根据所述区块链中的节点的空余存储空间选取存储节点,并按预设的分配方式将所述分片存储至所述存储节点。
优选的,所述计算机可读存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:接收到所述目标文件的下载请求时,获取所述目标文件的所述索引表和所述分片地址表;根据所述索引表和所述分片地址表确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件。
优选的,所述计算机可读存储介质中存储的计算机子程序被处理器执行时,具体可以实现以下步骤:根据所述索引表和所述分片地址表确定每个所述分片的存储节点,并根据所述存储节点的指标项确定每个所述分片的下载节点。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。
还需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
Claims (10)
1.一种文件管理方法,其特征在于,应用于区块链节点设备,包括:
接收到目标文件的存储请求时,将所述目标文件划分为多个分片;
为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;
将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
2.根据权利要求1所述文件管理方法,其特征在于,将所述目标文件划分为多个分片之前,还包括:
判断所述目标文件的文件大小是否大于预设值;
若是,则执行将所述目标文件划分为多个分片的步骤。
3.根据权利要求1所述文件管理方法,其特征在于,所述为每个所述分片生成对应的索引值,包括:
对所述分片进行hash运算生成hash指纹,并将所述hash指纹作为所述分片的索引值。
4.根据权利要求1所述文件管理方法,其特征在于,将所述分片分配至所述区块链中的节点存储,包括:
根据所述区块链中的节点的空余存储空间选取存储节点,并按预设的分配方式将所述分片存储至所述存储节点。
5.根据权利要求1-4任一项所述文件管理方法,其特征在于,还包括:
接收到所述目标文件的下载请求时,获取所述目标文件的所述索引表和所述分片地址表;
根据所述索引表和所述分片地址表确定每个所述分片的下载节点,从所述下载节点中下载所述分片,并将所有所述分片拼接为所述目标文件。
6.根据权利要求5所述文件管理方法,其特征在于,根据所述索引表和所述分片地址表确定每个所述分片的下载节点,包括:
根据所述索引表和所述分片地址表确定每个所述分片的存储节点,并根据所述存储节点的指标项确定每个所述分片的下载节点。
7.根据权利要求6所述文件管理方法,其特征在于,所述指标项包括所述存储节点与所述区块链节点的网络距离、所述存储节点的收费权重和请求响应速度中的任一项或任几项的组合。
8.一种文件管理系统,其特征在于,应用于区块链节点,包括:
划分模块,用于接收到目标文件的存储请求时,将所述目标文件划分为多个分片;
生成模块,用于为每个所述分片生成对应的索引值,并根据所述分片与所述索引值的对应关系建立索引表;
存储模块,用于将所述分片分配至所述区块链中的节点存储,并根据所述索引值与所述分片的存储节点的对应关系建立分片地址表。
9.一种区块链节点设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至7任一项所述文件管理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述文件管理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811119746.9A CN109376122A (zh) | 2018-09-25 | 2018-09-25 | 一种文件管理方法、系统及区块链节点设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811119746.9A CN109376122A (zh) | 2018-09-25 | 2018-09-25 | 一种文件管理方法、系统及区块链节点设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109376122A true CN109376122A (zh) | 2019-02-22 |
Family
ID=65401794
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811119746.9A Pending CN109376122A (zh) | 2018-09-25 | 2018-09-25 | 一种文件管理方法、系统及区块链节点设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109376122A (zh) |
Cited By (34)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110018998A (zh) * | 2019-04-12 | 2019-07-16 | 深信服科技股份有限公司 | 一种文件管理方法、系统及电子设备和存储介质 |
CN110032545A (zh) * | 2019-03-27 | 2019-07-19 | 远光软件股份有限公司 | 基于区块链的文件存储方法、系统及电子设备 |
CN110062034A (zh) * | 2019-04-01 | 2019-07-26 | 中科天御(苏州)科技有限公司 | 一种区块链大文件安全存储方法及系统 |
CN110099114A (zh) * | 2019-04-30 | 2019-08-06 | 普华云创科技(北京)有限公司 | 区块链和ipfs协议的文件存储方法、系统、终端及存储介质 |
CN110222116A (zh) * | 2019-05-07 | 2019-09-10 | 北京奇艺世纪科技有限公司 | 一种交易数据存储的控制方法、装置及存储介质 |
CN110334054A (zh) * | 2019-05-17 | 2019-10-15 | 杭州亦笔科技有限公司 | 一种区块链文件分片存储方法 |
CN110430274A (zh) * | 2019-08-09 | 2019-11-08 | 西藏宁算科技集团有限公司 | 一种基于云存储的文件下载方法及系统 |
CN110442644A (zh) * | 2019-07-08 | 2019-11-12 | 深圳壹账通智能科技有限公司 | 区块链数据归档存储方法、装置、计算机设备和存储介质 |
CN110554616A (zh) * | 2019-09-24 | 2019-12-10 | 北京艾摩瑞策科技有限公司 | 在区块链上的物联网的智能家居数据上链方法及系统 |
CN110557440A (zh) * | 2019-08-08 | 2019-12-10 | 北京芯际科技有限公司 | 一种基于区块链的多层分片结构 |
CN110737658A (zh) * | 2019-09-06 | 2020-01-31 | 平安国际智慧城市科技股份有限公司 | 数据分片存储方法、装置、终端及可读存储介质 |
CN111090616A (zh) * | 2019-12-30 | 2020-05-01 | 北京华胜天成科技股份有限公司 | 一种文件管理方法、对应装置、设备及存储介质 |
CN111147540A (zh) * | 2019-11-18 | 2020-05-12 | 深圳市元征科技股份有限公司 | 文件传输方法、装置、设备和存储介质 |
CN111314458A (zh) * | 2020-02-13 | 2020-06-19 | 深圳市网心科技有限公司 | P2p网络的打洞方法、打洞装置及计算机可读存储介质 |
CN111447265A (zh) * | 2020-03-24 | 2020-07-24 | 深圳市网心科技有限公司 | 文件存储方法、文件下载方法和文件处理方法及相关组件 |
WO2020177514A1 (zh) * | 2019-03-01 | 2020-09-10 | 阿里巴巴集团控股有限公司 | 图像存取方法及其系统 |
CN112017763A (zh) * | 2020-09-03 | 2020-12-01 | 平安国际智慧城市科技股份有限公司 | 医疗影像数据传输方法、装置、设备及介质 |
CN112199052A (zh) * | 2020-11-04 | 2021-01-08 | 江苏特思达电子科技股份有限公司 | 一种文件下载方法、装置及计算机设备 |
CN112231398A (zh) * | 2020-09-25 | 2021-01-15 | 北京金山云网络技术有限公司 | 数据存储方法、装置、设备及存储介质 |
CN112565448A (zh) * | 2020-12-16 | 2021-03-26 | 宁波云麟信息科技有限公司 | 基于区块链的电子存证节点选择方法和电子设备 |
CN112631991A (zh) * | 2020-12-26 | 2021-04-09 | 中国农业银行股份有限公司 | 一种文件迁移方法及装置 |
CN112968940A (zh) * | 2021-01-30 | 2021-06-15 | 银盛通信有限公司 | 一种基于分区认证技术的互联网交易数据储存方法 |
CN113190555A (zh) * | 2021-04-30 | 2021-07-30 | 北京沃东天骏信息技术有限公司 | 数据导入方法及装置 |
CN113518113A (zh) * | 2021-05-11 | 2021-10-19 | 深圳前海移联科技有限公司 | 一种文件存储方法、装置、计算机设备及存储介质 |
CN113709209A (zh) * | 2021-07-30 | 2021-11-26 | 济南浪潮数据技术有限公司 | 一种服务器软件下载方法、系统及计算机可读存储介质 |
CN113726873A (zh) * | 2021-08-27 | 2021-11-30 | 平安科技(深圳)有限公司 | 基于区块链的文件处理方法、系统、设备和存储介质 |
CN113821381A (zh) * | 2021-11-18 | 2021-12-21 | 深圳电通信息技术有限公司 | 区块链节点资源备份及离线节点资源转移方法及存储介质 |
CN113900720A (zh) * | 2021-10-15 | 2022-01-07 | 北京字节跳动网络技术有限公司 | 操作系统启动方法、装置和电子设备 |
CN113961640A (zh) * | 2020-07-20 | 2022-01-21 | 博斯资讯安全股份有限公司 | 区块链的数据储存结构 |
WO2022021357A1 (zh) * | 2020-07-31 | 2022-02-03 | 华为技术有限公司 | 一种文件块下载方法及装置 |
CN114138737A (zh) * | 2022-02-08 | 2022-03-04 | 亿次网联(杭州)科技有限公司 | 文件存储方法、装置、设备及存储介质 |
CN114328713A (zh) * | 2021-08-19 | 2022-04-12 | 青岛海尔电冰箱有限公司 | 基于区块链的数据资产处理方法与计算机可读存储介质 |
CN115118761A (zh) * | 2022-07-15 | 2022-09-27 | 济南浪潮数据技术有限公司 | 一种数据存储方法、装置、设备及介质 |
CN111400250B (zh) * | 2020-03-11 | 2023-04-25 | 安徽文香科技有限公司 | 一种资源获取方法、装置、设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103152395A (zh) * | 2013-02-05 | 2013-06-12 | 北京奇虎科技有限公司 | 一种分布式文件系统的存储方法及装置 |
CN103873504A (zh) * | 2012-12-12 | 2014-06-18 | 鸿富锦精密工业(深圳)有限公司 | 数据分块存储至分布式服务器的系统及方法 |
CN105335513A (zh) * | 2015-10-30 | 2016-02-17 | 迈普通信技术股份有限公司 | 一种分布式文件系统及文件存储方法 |
US20170063963A1 (en) * | 2015-09-01 | 2017-03-02 | International Business Machines Corporation | Retrieval of a file from multiple storage nodes |
CN108062202A (zh) * | 2017-12-15 | 2018-05-22 | 中链科技有限公司 | 一种文件分块存储方法及系统 |
CN108108127A (zh) * | 2017-12-15 | 2018-06-01 | 中链科技有限公司 | 一种文件读取方法及系统 |
-
2018
- 2018-09-25 CN CN201811119746.9A patent/CN109376122A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103873504A (zh) * | 2012-12-12 | 2014-06-18 | 鸿富锦精密工业(深圳)有限公司 | 数据分块存储至分布式服务器的系统及方法 |
CN103152395A (zh) * | 2013-02-05 | 2013-06-12 | 北京奇虎科技有限公司 | 一种分布式文件系统的存储方法及装置 |
US20170063963A1 (en) * | 2015-09-01 | 2017-03-02 | International Business Machines Corporation | Retrieval of a file from multiple storage nodes |
CN105335513A (zh) * | 2015-10-30 | 2016-02-17 | 迈普通信技术股份有限公司 | 一种分布式文件系统及文件存储方法 |
CN108062202A (zh) * | 2017-12-15 | 2018-05-22 | 中链科技有限公司 | 一种文件分块存储方法及系统 |
CN108108127A (zh) * | 2017-12-15 | 2018-06-01 | 中链科技有限公司 | 一种文件读取方法及系统 |
Cited By (40)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020177514A1 (zh) * | 2019-03-01 | 2020-09-10 | 阿里巴巴集团控股有限公司 | 图像存取方法及其系统 |
CN110032545A (zh) * | 2019-03-27 | 2019-07-19 | 远光软件股份有限公司 | 基于区块链的文件存储方法、系统及电子设备 |
CN110062034A (zh) * | 2019-04-01 | 2019-07-26 | 中科天御(苏州)科技有限公司 | 一种区块链大文件安全存储方法及系统 |
CN110018998A (zh) * | 2019-04-12 | 2019-07-16 | 深信服科技股份有限公司 | 一种文件管理方法、系统及电子设备和存储介质 |
CN110099114A (zh) * | 2019-04-30 | 2019-08-06 | 普华云创科技(北京)有限公司 | 区块链和ipfs协议的文件存储方法、系统、终端及存储介质 |
CN110222116A (zh) * | 2019-05-07 | 2019-09-10 | 北京奇艺世纪科技有限公司 | 一种交易数据存储的控制方法、装置及存储介质 |
CN110222116B (zh) * | 2019-05-07 | 2022-02-01 | 北京奇艺世纪科技有限公司 | 一种交易数据存储的控制方法、装置及存储介质 |
CN110334054A (zh) * | 2019-05-17 | 2019-10-15 | 杭州亦笔科技有限公司 | 一种区块链文件分片存储方法 |
CN110442644A (zh) * | 2019-07-08 | 2019-11-12 | 深圳壹账通智能科技有限公司 | 区块链数据归档存储方法、装置、计算机设备和存储介质 |
CN110557440A (zh) * | 2019-08-08 | 2019-12-10 | 北京芯际科技有限公司 | 一种基于区块链的多层分片结构 |
CN110430274A (zh) * | 2019-08-09 | 2019-11-08 | 西藏宁算科技集团有限公司 | 一种基于云存储的文件下载方法及系统 |
CN110737658A (zh) * | 2019-09-06 | 2020-01-31 | 平安国际智慧城市科技股份有限公司 | 数据分片存储方法、装置、终端及可读存储介质 |
WO2021042923A1 (zh) * | 2019-09-06 | 2021-03-11 | 平安国际智慧城市科技股份有限公司 | 数据分片存储方法、装置、终端及计算机可读存储介质 |
CN110554616A (zh) * | 2019-09-24 | 2019-12-10 | 北京艾摩瑞策科技有限公司 | 在区块链上的物联网的智能家居数据上链方法及系统 |
CN111147540A (zh) * | 2019-11-18 | 2020-05-12 | 深圳市元征科技股份有限公司 | 文件传输方法、装置、设备和存储介质 |
CN111090616A (zh) * | 2019-12-30 | 2020-05-01 | 北京华胜天成科技股份有限公司 | 一种文件管理方法、对应装置、设备及存储介质 |
CN111090616B (zh) * | 2019-12-30 | 2024-02-06 | 北京华胜天成科技股份有限公司 | 一种文件管理方法、对应装置、设备及存储介质 |
CN111314458A (zh) * | 2020-02-13 | 2020-06-19 | 深圳市网心科技有限公司 | P2p网络的打洞方法、打洞装置及计算机可读存储介质 |
CN111400250B (zh) * | 2020-03-11 | 2023-04-25 | 安徽文香科技有限公司 | 一种资源获取方法、装置、设备及存储介质 |
CN111447265A (zh) * | 2020-03-24 | 2020-07-24 | 深圳市网心科技有限公司 | 文件存储方法、文件下载方法和文件处理方法及相关组件 |
CN113961640A (zh) * | 2020-07-20 | 2022-01-21 | 博斯资讯安全股份有限公司 | 区块链的数据储存结构 |
WO2022021357A1 (zh) * | 2020-07-31 | 2022-02-03 | 华为技术有限公司 | 一种文件块下载方法及装置 |
CN112017763A (zh) * | 2020-09-03 | 2020-12-01 | 平安国际智慧城市科技股份有限公司 | 医疗影像数据传输方法、装置、设备及介质 |
CN112017763B (zh) * | 2020-09-03 | 2023-02-03 | 深圳平安智慧医健科技有限公司 | 医疗影像数据传输方法、装置、设备及介质 |
CN112231398A (zh) * | 2020-09-25 | 2021-01-15 | 北京金山云网络技术有限公司 | 数据存储方法、装置、设备及存储介质 |
CN112199052A (zh) * | 2020-11-04 | 2021-01-08 | 江苏特思达电子科技股份有限公司 | 一种文件下载方法、装置及计算机设备 |
CN112565448A (zh) * | 2020-12-16 | 2021-03-26 | 宁波云麟信息科技有限公司 | 基于区块链的电子存证节点选择方法和电子设备 |
CN112631991A (zh) * | 2020-12-26 | 2021-04-09 | 中国农业银行股份有限公司 | 一种文件迁移方法及装置 |
CN112968940A (zh) * | 2021-01-30 | 2021-06-15 | 银盛通信有限公司 | 一种基于分区认证技术的互联网交易数据储存方法 |
CN113190555A (zh) * | 2021-04-30 | 2021-07-30 | 北京沃东天骏信息技术有限公司 | 数据导入方法及装置 |
CN113518113A (zh) * | 2021-05-11 | 2021-10-19 | 深圳前海移联科技有限公司 | 一种文件存储方法、装置、计算机设备及存储介质 |
CN113709209A (zh) * | 2021-07-30 | 2021-11-26 | 济南浪潮数据技术有限公司 | 一种服务器软件下载方法、系统及计算机可读存储介质 |
CN114328713A (zh) * | 2021-08-19 | 2022-04-12 | 青岛海尔电冰箱有限公司 | 基于区块链的数据资产处理方法与计算机可读存储介质 |
CN113726873A (zh) * | 2021-08-27 | 2021-11-30 | 平安科技(深圳)有限公司 | 基于区块链的文件处理方法、系统、设备和存储介质 |
CN113900720A (zh) * | 2021-10-15 | 2022-01-07 | 北京字节跳动网络技术有限公司 | 操作系统启动方法、装置和电子设备 |
CN113900720B (zh) * | 2021-10-15 | 2023-08-08 | 抖音视界有限公司 | 操作系统启动方法、装置和电子设备 |
CN113821381A (zh) * | 2021-11-18 | 2021-12-21 | 深圳电通信息技术有限公司 | 区块链节点资源备份及离线节点资源转移方法及存储介质 |
CN114138737A (zh) * | 2022-02-08 | 2022-03-04 | 亿次网联(杭州)科技有限公司 | 文件存储方法、装置、设备及存储介质 |
CN114138737B (zh) * | 2022-02-08 | 2022-07-12 | 亿次网联(杭州)科技有限公司 | 文件存储方法、装置、设备及存储介质 |
CN115118761A (zh) * | 2022-07-15 | 2022-09-27 | 济南浪潮数据技术有限公司 | 一种数据存储方法、装置、设备及介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109376122A (zh) | 一种文件管理方法、系统及区块链节点设备和存储介质 | |
CN106201661B (zh) | 用于弹性伸缩虚拟机集群的方法和装置 | |
KR102376713B1 (ko) | 복합 파티션 함수 제공 기법 | |
CN107590001A (zh) | 负载均衡方法及装置、存储介质、电子设备 | |
CN109408205A (zh) | 基于hadoop集群的任务调度方法和装置 | |
US9244960B2 (en) | Metadata-driven version management service in pervasive environment | |
CN109634915A (zh) | 文件部署方法、云服务器、系统及存储介质 | |
CN106843755A (zh) | 用于服务器集群的数据均衡方法与装置 | |
US20140081901A1 (en) | Sharing modeling data between plug-in applications | |
US20130198741A1 (en) | Computing reusable image components to minimize network bandwidth usage | |
US20140006964A1 (en) | System and Method for Storing Data Files in Personal Devices and a network | |
CA3093681C (en) | Document storage and management | |
CN105227489A (zh) | 一种带宽管理方法及电子设备 | |
CN107861736A (zh) | 补丁生成和更新方法及装置、电子设备、存储介质 | |
CN110891087A (zh) | 一种日志传输方法、装置及电子设备和存储介质 | |
CN108255989A (zh) | 图片存储方法、装置、终端设备及计算机存储介质 | |
EP2874059A1 (en) | Personal cloud storage chain service system and method | |
CN102325367B (zh) | 为客户端应用进行数据分组同步的装置和方法 | |
CN104202305A (zh) | 一种转码处理方法、装置及服务器 | |
CN103713852A (zh) | 一种信息处理方法、服务平台及电子设备 | |
CN104518897A (zh) | 虚拟防火墙的资源管理优化处理方法和装置 | |
KR101944275B1 (ko) | 바탕화면을 이용한 애플리케이션 제공 시스템, 방법 및 그에 대한 기록매체 | |
US10795540B2 (en) | Visualizing migration of a resource of a distributed computing environment | |
CN110569212A (zh) | 一种文件部署方法、系统、存储介质和电子设备 | |
CN106934555B (zh) | 工作流的组织方法及装置、计算机设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190222 |
|
RJ01 | Rejection of invention patent application after publication |