CN110109874A - 一种基于区块链的无中心分布式文件检索方法 - Google Patents

一种基于区块链的无中心分布式文件检索方法 Download PDF

Info

Publication number
CN110109874A
CN110109874A CN201910395596.2A CN201910395596A CN110109874A CN 110109874 A CN110109874 A CN 110109874A CN 201910395596 A CN201910395596 A CN 201910395596A CN 110109874 A CN110109874 A CN 110109874A
Authority
CN
China
Prior art keywords
block chain
file
stop layer
document retrieval
distributed document
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910395596.2A
Other languages
English (en)
Inventor
李莉莉
李明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Consensus Digital Information Technology Co Ltd
Original Assignee
Beijing Consensus Digital Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Consensus Digital Information Technology Co Ltd filed Critical Beijing Consensus Digital Information Technology Co Ltd
Priority to CN201910395596.2A priority Critical patent/CN110109874A/zh
Publication of CN110109874A publication Critical patent/CN110109874A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G06F16/134—Distributed indices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G06F16/137—Hash-based
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Abstract

本发明公开了一种基于区块链的无中心分布式文件检索方法，包括：利用IPFS(星际文件系统)技术构建无中心分布式文件系统，并结合区块链技术，将文件对应的基本信息与哈希值在区块链上进行存储，再从区块链获取对应文件的基本信息与哈希值，放入数据库中，并提供查询检索方式来获取文件的方法流程，该检索方法在应用实践中，能够实现文件上传提供方所有参与者信息共享、互信，可以成为各种无中心情况下，分布式大文件检索需求的基础技术架构。

Description

一种基于区块链的无中心分布式文件检索方法
技术领域
本发明属于互联网技术领域，具体涉及一种基于区块链的无中心分布式文件检索方法。
背景技术
随着计算机技术的不断发展，区块链技术应用爆发式的增长，目前在各个领域都出现了文件的存储查询索引的需求，其中星际文件系统等多种类型的分布式文件存储技术都有一个共同的特点，即在进行无中心分布式处理后，文件的索引很难构建，导致文件的查询检索非常复杂，甚至于有的技术只能提供分布式存储，并不能提供检索服务，同时分布式技术文件的对应关系较难解决，亟需一种可以轻松构建分布式文件存储索引的技术和方法，区块链技术是非常成熟的分布式技术，安全可靠，通过多种技术方法的应用和组合，本发明提供了一种基于区块链的无中心分布式文件检索方法，通过对区块链技术、分布式文件存储技术、数据库技术的合理应用，让区块链技术和分布式文件存储可应用于多种场景。
发明内容
本发明的目的在于提供一种基于区块链的无中心分布式文件检索方法，以解决上述背景技术中提出的区块链无中心化分布式文件检索的问题。
为实现上述目的，本发明提供如下技术方案：一种基于区块链的无中心分布式文件检索方法，包括以下步骤：
将文件对应的基本信息与哈希值在区块链上进行存储，构建一个无中心化的基础环境；
同时将文件源文件进行分布式存储，提供分布式文件存储的环境；
通过数据库技术和可配置的解析方式，将区块链上的区块信息解析获取文件的基本信息和哈希值，并存入数据库中；
通过数据库中的文件基本信息和文件哈希构建索引，可自由的再无中心分布式的环境下进行检索，同时可凭借文件哈希值进行文件的下载。
与现有技术相比，本发明的有益效果是：
(1)本发明通过对区块链技术、分布式文件存储技术、数据库技术的合理应用，能够实现文件上传提供方所有参与者信息共享、互信，可以成为各种无中心情况下，分布式大文件检索需求的基础技术架构，让区块链技术和分布式文件存储可应用于多种场景。
(2)本发明实现在一个成员上传文件时，他需要将该文件的描述信息(可以是元数据、标签、文字描述等，由实际业务场景决定)一并通过DCFS接口传入，文件本身会在DCFS存储层分布式存储，而文件描述会被存储在区块链上，该成员会在DCFS节点上的本地数据库存储该文件与哈希指针的对应关系，进而便于根据文件名等信息从DCFS中取出文件。
附图说明
图1为本发明的结构示意图；
图2为本发明检索并获取文件的流程图；
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明提供一种技术方案：一种基于区块链的无中心分布式文件检索方法，包括以下步骤：
请参阅图1所示，一份文件，将其文件本身进行分布式存储；
同时将文件的哈希值和基本信息放入区块链层；
通过可配置的解析方式将区块信息解析到数据库中进行存储；
由数据库层进行索引的构建；
文件的需求方通过访问索引层，根据索引层提供的文件基本信息进行文件的检索，并通过哈希值，进行文件索引，凭借哈希值从分布式文件存储系统中获取文件。
请参阅图2所示，在区块链的无中心环境和分布式文件存储的环境下的文件检索和获取流程。
本发明是基于fabric区块链技术、分布式文件存储、非对称加密、解析方式等技术进行实施，其关键在于：
1.利用fabric和分布式存储技术，保证文件的哈希值、文件基本信息和文件位置的对应关系；
2.利用fabric不可篡改的技术，保证文件的真实性；
3.利用数据解析的方法实现将区块链上的人类不可读的区块信息解析为文件对应基本信息并存储数据库；
4.通过哈希指针的技术、数据库中的文件位置信息快速定位文件位置，来获取文件；
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (5)

1.一种基于区块链的无中心分布式文件检索方法，其特征在于：包括：
在区块链的无中心环境和文件分布式存储的环境下，提供文件的检索方法和流程；
文件哈希值在区块链上进行存储，并保证文件基本信息和哈希值的对应关系正确；
通过可配置的解析方式将区块信息解析到数据库中进行存储，构建索引层，为检索提供服务。
2.根据权利要求1所述的一种基于区块链的无中心分布式文件检索方法，其特征在于：所述文件的类型包括Word、PDF、JPG、PNG、视频以及语音。
3.根据权利要求1所述的一种基于区块链的无中心分布式文件检索方法，其特征在于：所述文件类型可通过此方法在相应环境下进行文件查询，且相应环境包括：
区块链的无中心环境；
区块链和分布式文件存储技术构建的环境。
4.根据权利要求1所述的一种基于区块链的无中心分布式文件检索方法，其特征在于：所述提供可配置的解析方式解读区块链上的区块信息，来保证索引层的构建，且可配置的解析方式包括：
任意方式的解析获取区块信息构建索引。
5.根据权利要求1所述的一种基于区块链的无中心分布式文件检索方法，其特征在于：所述利用区块链技术不可篡改的特性来保证文件的真实性。
CN201910395596.2A 2019-05-13 2019-05-13 一种基于区块链的无中心分布式文件检索方法 Pending CN110109874A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910395596.2A CN110109874A (zh) 2019-05-13 2019-05-13 一种基于区块链的无中心分布式文件检索方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910395596.2A CN110109874A (zh) 2019-05-13 2019-05-13 一种基于区块链的无中心分布式文件检索方法

Publications (1)

Publication Number Publication Date
CN110109874A true CN110109874A (zh) 2019-08-09

Family

ID=67489826

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910395596.2A Pending CN110109874A (zh) 2019-05-13 2019-05-13 一种基于区块链的无中心分布式文件检索方法

Country Status (1)

Country Link
CN (1) CN110109874A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110647503A (zh) * 2019-10-09 2020-01-03 重庆特斯联智慧科技股份有限公司 一种分布式存储方法及装置
CN111061698A (zh) * 2019-12-30 2020-04-24 语联网（武汉）信息技术有限公司 以太坊合约数据的存储方法及装置
CN111177080A (zh) * 2019-12-31 2020-05-19 西安理工大学 一种基于区块链和ipfs的知识图谱存储与验证方法
CN111427614A (zh) * 2020-03-20 2020-07-17 中国银行股份有限公司 文件版本管理方法及装置
CN111506661A (zh) * 2020-04-22 2020-08-07 腾讯科技（深圳）有限公司 一种内容访问管理方法、装置和存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107273410A (zh) * 2017-05-03 2017-10-20 上海点融信息科技有限责任公司 基于区块链的分布式存储
CN107943833A (zh) * 2017-10-25 2018-04-20 华南农业大学 一种基于区块链的无中心分布式文件存储及检索方法
CN109117501A (zh) * 2018-07-03 2019-01-01 北京航空航天大学 基于区块链的科技数据建模及存储方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107273410A (zh) * 2017-05-03 2017-10-20 上海点融信息科技有限责任公司 基于区块链的分布式存储
CN107943833A (zh) * 2017-10-25 2018-04-20 华南农业大学 一种基于区块链的无中心分布式文件存储及检索方法
CN109117501A (zh) * 2018-07-03 2019-01-01 北京航空航天大学 基于区块链的科技数据建模及存储方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110647503A (zh) * 2019-10-09 2020-01-03 重庆特斯联智慧科技股份有限公司 一种分布式存储方法及装置
CN111061698A (zh) * 2019-12-30 2020-04-24 语联网（武汉）信息技术有限公司 以太坊合约数据的存储方法及装置
CN111061698B (zh) * 2019-12-30 2023-09-05 语联网（武汉）信息技术有限公司 以太坊合约数据的存储方法及装置
CN111177080A (zh) * 2019-12-31 2020-05-19 西安理工大学 一种基于区块链和ipfs的知识图谱存储与验证方法
CN111177080B (zh) * 2019-12-31 2023-04-11 西安理工大学 一种基于区块链和ipfs的知识图谱存储与验证方法
CN111427614A (zh) * 2020-03-20 2020-07-17 中国银行股份有限公司 文件版本管理方法及装置
CN111427614B (zh) * 2020-03-20 2023-08-22 中国银行股份有限公司 文件版本管理方法及装置
CN111506661A (zh) * 2020-04-22 2020-08-07 腾讯科技（深圳）有限公司 一种内容访问管理方法、装置和存储介质

Similar Documents

Publication Publication Date Title
CN110109874A (zh) 一种基于区块链的无中心分布式文件检索方法
US11016984B2 (en) Method, system, and apparatus for enterprise wide storage and retrieval of large amounts of data
Das et al. Big data analytics: A framework for unstructured data analysis
US9400800B2 (en) Data transport by named content synchronization
US8312080B2 (en) System and method for searching for specific types of people or information on a peer to-peer network
CN104794123B (zh) 一种为半结构化数据构建NoSQL数据库索引的方法及装置
EP3776250B1 (en) Performing map iterations in blockchain-based system
US20110307451A1 (en) System and method for distributed objects storage, management, archival, searching, retrieval and mining in private and public clouds and deep invisible webs
US11868328B2 (en) Multi-record index structure for key-value stores
US20210119806A1 (en) Performing map iterations in a blockchain-based system
Abe et al. Mitigating bitcoin node storage size by DHT
Liao et al. A scalable approach for content based image retrieval in cloud datacenter
Zou et al. Verifiable keyword-based semantic similarity search on social data outsourcing
CN103136294A (zh) 文件操作方法及装置
CN109947759A (zh) 一种数据索引建立方法、索引检索方法及装置
CN115408590B (zh) 一种文档追踪溯源方法、装置及系统
Bonsma et al. Extremal graphs having no matching cuts
CN112287403B (zh) 基于区块链的电子卷宗管理方法、装置、电子设备及介质
Chazapis et al. Replica-aware, multi-dimensional range queries in distributed hash tables
Marrero et al. Performance analysis in NoSQL databases, relational databases and NoSQL databases as a service in the cloud
Zhou et al. A slice-based encryption scheme for IPFS
CN115587233B (zh) 一种数据标识及目录管理方法及系统
CN115118448B (zh) 数据处理方法、装置、设备及存储介质
CN113495982B (zh) 交易节点管理方法、装置、计算机设备及存储介质
Sujatha et al. An efficient enhanced prefix hash tree model for optimizing the storage and image deduplication in cloud

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190809

RJ01 Rejection of invention patent application after publication