CN113094334B - 基于分布式存储的数字服务方法、装置、设备及储存介质 - Google Patents

基于分布式存储的数字服务方法、装置、设备及储存介质 Download PDF

Info

Publication number
CN113094334B
CN113094334B CN202110304873.1A CN202110304873A CN113094334B CN 113094334 B CN113094334 B CN 113094334B CN 202110304873 A CN202110304873 A CN 202110304873A CN 113094334 B CN113094334 B CN 113094334B
Authority
CN
China
Prior art keywords
distributed storage
node
data
block chain
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110304873.1A
Other languages
English (en)
Other versions
CN113094334A (zh
Inventor
冯国东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sikuai Technology Tianjin Co ltd
Original Assignee
Sikuai Technology Tianjin Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sikuai Technology Tianjin Co ltd filed Critical Sikuai Technology Tianjin Co ltd
Priority to CN202110304873.1A priority Critical patent/CN113094334B/zh
Publication of CN113094334A publication Critical patent/CN113094334A/zh
Application granted granted Critical
Publication of CN113094334B publication Critical patent/CN113094334B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G06F16/134—Distributed indices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/13—File access structures, e.g. distributed indices
    • G06F16/137—Hash-based
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/14—Details of searching files based on file metadata
    • G06F16/148—File search processing
    • G06F16/152—File search processing using file content signatures, e.g. hash values
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/17—Details of further file system functions
    • G06F16/176—Support for shared access to files; File sharing support
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10—File systems; File servers
    • G06F16/18—File system types
    • G06F16/182—Distributed file systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/602—Providing cryptographic facilities or services
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/64—Protecting data integrity, e.g. using checksums, certificates or signatures

Abstract

本发明涉及数据存储技术领域，公开了一种基于分布式存储的数字服务方法、装置、设备及存储介质，所述方法包括：获取客户端发送的存储数据；将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。通过以分布式存储作为底层支撑，融合区块链网络，从而有效的实现共享交互过程中公开透明，且扩展性强。

Description

基于分布式存储的数字服务方法、装置、设备及储存介质
技术领域
本发明涉及数据存储技术领域，尤其涉及一种基于分布式存储的数字服务方法、装置、设备及储存介质。
背景技术
人类社会伴随着社交网络、电子商务以及移动通信的兴起走进大数据时代，使得每一点变化都成为可被记录和分析的数据，尽管已有相当多的应用案例和政策驱动大数据共享，然而“数据孤岛”现象仍然严重，大量数据掌握在部门组织内部和个人手上，整体共享程度相当低，目前一般通过第三方机构统一搭建的数据共享模型对用户上传的数据进行数据维护和管理，但是容易导致数据信任问题，共享交互过程无法做到公开透明，且扩展性不够强。
发明内容
本发明的主要目的在于提出一种基于分布式存储的数字服务方法、装置、设备及储存介质，旨在解决如何实现共享交互过程中公开透明，且扩展性强的技术问题。
为实现上述目的，本发明提供一种基于分布式存储的数字服务方法，所基于分布式存储的数字服务方法包括述以下步骤：
获取客户端发送的存储数据；
将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；
将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。
可选的，所述将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件，包括：
将所述存储数据发送至分布式存储系统，以使所述分布式存储系统通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，并按照预设算法计算所述加密后的存储数据的哈希值，将所述加密后的存储数据存储至所述哈希值对应的分布式存储系统节点地址，根据所述哈希值和所述分布式存储系统节点地址生成协议文件。
可选的，所述将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理之后，还包括：
获取客户端发送的存储数据对应的请求信息；
将所述请求信息发送至所述区块链网络的节点进行信息确认，并将所述存储数据存储到所述区块链网络。
可选的，所述区块链网络的节点包括：区块链网络的主节点和区块链网络的副本节点；
所述将所述请求信息发送至所述区块链网络的节点进行信息确认，并将所述存储数据存储到所述区块链网络，包括：
将所述请求信息发送至所述区块链网络的节点；
确定所述区块链网络的节点的主节点、所述请求信息对应的摘要和所述主节点对应的编号，并根据所述主节点对所述请求信息分配请求序号；
将所述请求序号、所述请求信息对应的摘要和所述主节点对应的编号发送至区块链网络的副本节点；
根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到所述区块链网络。
可选的，所述根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到区块链网络之前，还包括：
根据所述请求序号确定多个目标集合；
在相交的任意两个目标集合有一个共同的非拜占庭节点且每一个目标集合中都没有失效的节点时，执行根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到区块链网络的步骤。
可选的，所述将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理之后，还包括：
在接收到客户端发送的查找存储数据请求，提取所述查找存储数据请求的查询摘要，并查询所述区块链网络是否存在所述查询摘要；
在所述区块链网络存在所述查询摘要时，获取所述查找存储数据请求的区块链网络记录地址；
根据所述区块链网络记录地址查询所述查找存储数据请求对应的预设哈希值；
根据所述预设哈希值查询所述协议文件是否存在所述查找存储数据对应的目标哈希值，并得到查询结果；
根据所述查询结果从所述分布式存储系统获取目标存储数据。
可选的，所述根据所述查询结果从所述分布式存储系统获取目标存储数据，包括：
若所述区块链网络存在所述查找存储数据对应的目标哈希值，则根据所述目标哈希值从预设映射关系表中查询分布式存储系统节点地址；
根据所述分布式存储系统节点地址确定参考存储数据；
通过预设解密算法对所述参考存储数据进行解密，确定目标存储数据。
此外，为实现上述目的，本发明还提出一种基于分布式存储的数字服务装置，所述基于分布式存储的数字服务装置包括：
获取模块，用于获取客户端发送的存储数据；
生成模块，用于将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；
记录模块，用于将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。
此外，为实现上述目的，本发明还提出一种基于分布式存储的数字服务设备，所述基于分布式存储的数字服务设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于分布式存储的数字服务程序，所述基于分布式存储的数字服务程序配置有实现如上所述的基于分布式存储的数字服务方法的步骤。
此外，为实现上述目的，本发明还提出一种存储介质，所述存储介质上存储有基于分布式存储的数字服务程序，所述基于分布式存储的数字服务程序被处理器执行时实现如上文所述的基于分布式存储的数字服务方法的步骤。
本发明提出的基于分布式存储的数字服务方法，通过获取客户端发送的存储数据；将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。通过以分布式存储作为底层支撑，融合区块链网络，从而有效的实现共享交互过程中公开透明，且扩展性强。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的基于分布式存储的数字服务设备结构示意图；
图2为本发明基于分布式存储的数字服务方法第一实施例的流程示意图；
图3为本发明基于分布式存储的数字服务方法第二实施例的流程示意图；
图4为本发明基于分布式存储的数字服务方法第三实施例的流程示意图；
图5为本发明基于分布式存储的数字服务装置第一实施例的功能模块示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
参照图1，图1为本发明实施例方案涉及的硬件运行环境的基于分布式存储的数字服务设备结构示意图。
如图1所示，该基于分布式存储的数字服务设备可以包括：处理器1001，例如中央处理器(Central Processing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如按键，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速随机存取存储器(Random Access Memory，RAM)存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的设备结构并不构成对基于分布式存储的数字服务设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及基于分布式存储的数字服务程序。
在图1所示的基于分布式存储的数字服务设备中，网络接口1004主要用于连接外网，与其他网络设备进行数据通信；用户接口1003主要用于连接用户设备，与所述用户设备进行数据通信；本发明设备通过处理器1001调用存储器1005中存储的基于分布式存储的数字服务程序，并执行本发明实施例提供的基于分布式存储的数字服务方法。
基于上述硬件结构，提出本发明基于分布式存储的数字服务方法实施例。
参照图2，图2为本发明基于分布式存储的数字服务方法第一实施例的流程示意图。
步骤S10，获取客户端发送的存储数据。
需要说明的是，本实施例的执行主体可为基于分布式存储的数字服务设备，还可为其他可实现相同或相似功能的设备，本实施例对此不作限制，在本实施例中，以基于分布式存储的数字服务设备为例进行说明。
可以理解的是，存储数据可以为客户端上传的视频、音频、图片、文本文件等数据信息，本实施例对此不作限制。
步骤S20，将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件。
需要说明的是，分布式存储系统可以是构建和区块链网络平行的独立运行的分布式文件系统，用以负载区块链网络的大文件存储，
应当理解的是，将存储数据发送至分布式存储系统，以使分布式存储系统通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，并按照预设算法计算加密后的存储数据的哈希值，将加密后的存储数据存储至所述哈希值对应的分布式存储系统节点地址，根据哈希值和所述分布式存储系统节点地址生成协议文件。
可以理解的是，分布式存储系统接受存储数据，通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，在具体实施过程中，预设加密算法可以为非对称加密算法，本实施例对此不作限制，通过非对称加密技术生成的公私钥进行交互，客户端在需要存储数据时采用私钥对信息进行加密，确定该信息的真实性，并按照预设算法计算加密后的存储数据的哈希值，其中，预设算法可以为哈希算法，本实施例对此不作限制，并将加密后的存储数据存储至哈希值对应的分布式存储系统节点地址，根据哈希值和所述分布式存储系统节点地址生成协议文件。
需要说明的是，将存储数据上传至分布式文件系统中，进行加密处理，并获得存储数据存储的哈希值，并在分布式存储系统节点地址中记录存储数据的哈希值，例如当一个存储数据传入分布式存储系统节点时，存储数据都会转换成散列字符串，同时大文件会被切分成多个小块进而分散在网络中存储，同时在网络中的每个节点都会根据其内容计算得到一个哈希值，与其内容直接相关。
步骤S30，将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。
可以理解的是，将分布式存储系统存储的协议文件传输至区块链网络，从而可以借助区块链网络的不可篡改的特性，在区块链网络中进行记录，从而通过区块链网络记录地址对存储数据进行数据管理，保证存储数据不会被丢失。
本实施例中通过获取客户端发送的存储数据；将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。通过以分布式存储作为底层支撑，融合区块链网络，从而有效的实现共享交互过程中公开透明，且扩展性强。
在一实施例中，如图3所示，基于第一实施例提出本发明基于分布式存储的数字服务方法第二实施例，所述步骤S30之后，还包括：
步骤S40，获取客户端发送的存储数据对应的请求信息。
可以理解的是，在区块链网络中，在记录客户端发送存储数据时，会得到区块链网络记录对应存储数据对应的请求信息，请求信息可以理解为待共识请求信息，该类请求信息需要在区块链网络中通过各个节点的共识机制来保证数据的正确性和一致性。
步骤S50，将所述请求信息发送至所述区块链网络的节点进行信息确认，并将所述存储数据存储到所述区块链网络。
需要说明的是，通过客户端提出请求信息，然后区块链网络提出请求信息安排请求序号，并经过请求序号确认、提交以及答复阶段阶段，最后将请求发送给所有节点，之后在请求序号确认阶段和提交阶段服务器间两两交互确认无误后答复客户端，将存储数据存储到区块链网络。
进一步的，步骤S50包括：
将所述请求信息发送至所述区块链网络的节点。
可以理解的是，区块链网络的节点包括区块链网络的主节点和区块链网络的副本节点，将客户端端提出的请求信息向区块链网络所有节点发送。
确定所述区块链网络的节点的主节点、所述请求信息对应的摘要和所述主节点对应的编号，并根据所述主节点对所述请求信息分配请求序号。
应当理解的是，确定请求信息对应的具体请求信息、发布请求信息对应的时间戳、摘要信息以及客户端，由于通过在区块链网络中的固定位置写入摘要信息字，区块链节点根据摘要信息在数据区块链网络中进行搜索，在有海量的存储数据存储于区块链网络上时，可以极大地提高区块查询效率。
需要说明的是，通过确定区块链网络节点的主节点给该请求信息分配一个在区块链网络视图活动期内的唯一请求序号，也就是请求信息的分配编号。
将所述请求序号、所述请求信息对应的摘要和所述主节点对应的编号发送至区块链网络的副本节点。
需要说明的是，根据将当前主节点编号、摘要信息以及请求信息的分配编号分配请求序号发送至区块链网络的副本节点，以使区块链网络的副本节点对请求信息进行验证，在验证过程中，需要满足通过数字签名技术验证保证消息请求的来源可靠，通过摘要信息技术保证信息未被篡改，并且节点都处于相同的区块链网络视图下，也就是说副本节点只接受它们当前所承认的主节点的安排，最后主节点安排的客户端请求消息序号在一定的范围内。
根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到所述区块链网络。
可以理解的是，副本节点通过验证后接受该请求信息，并将请求信息进一步发送给所有的副本节点，根据副本节点与主节点对存储数据进行提交，将存储数据存储到区块链网络，在提交确认无误后答复客户端。
进一步的，根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到所述区块链网络之前，还包括：
根据所述请求序号确定多个目标集合；在相交的任意两个目标集合有一个共同的非拜占庭节点且每一个目标集合中都没有失效的节点时，执行根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到区块链网络的步骤。
可以理解的是，通过存储数据在区块链网络进行共识之后，还需要对区块链网络进行容错处理，其中，通过请求序号确定多个目标集合，目标集合中包括多个区块链节点，在容错处理中需要保证在相交的任意两个目标集合有一个共同的非拜占庭节点，并且一定有一个目标集合中没有失效的区块链网络节点。
本实施例通过获取客户端发送的存储数据对应的请求信息；通过区块链的共识和容错处理，将所述请求信息发送至所述区块链网络的节点进行信息确认，并将所述存储数据存储到所述区块链网络，从而提高实现共享交互过程中公开透明，且扩展性强的效率。
在一实施例中，如图4所示，基于第一实施例提出本发明基于分布式存储的数字服务方法第三实施例，所述步骤S30之后，还包括：
步骤S40＇，在接收到客户端发送的查找存储数据请求，提取所述查找存储数据请求的查询摘要，并查询所述区块链网络是否存在所述查询摘要。
可以理解的是，客户端发送查找存储数据请求，以使分布式存储系统查询是否存储了该存储数据，在接收到查找存储数据请求时，查找存储数据请求中需携带该查询摘要，这样区块链节点在接收到查找存储数据请求时，可以根据该查询摘要在区块链网络中进行搜索，因此可以提取查找存储数据请求的查询摘要，并查询区块链网络是否存在查询摘要。
步骤S50＇，在所述区块链网络存在所述查询摘要时，获取所述查找存储数据请求的区块链网络记录地址。
需要说明的是，根据查询摘要通过区块链网络节点进一步验证区块链网络节点是否存储有存储数据对应的摘要信息，若区块链网络节点存储有存储数据对应的摘要信息，则可以获取述查找存储数据请求的区块链网络记录地址。
步骤S60，根据所述区块链网络记录地址查询所述查找存储数据请求对应的预设哈希值。
应当理解的是，区块链网络的记录中存储有每项分布式存储系统的协议文件，每个协议文件可以记录对应的存储数据的存储数据的哈希值和分布式存储系统节点地址，根据区块链网络记录地址可以获得对应的协议文件，获取协议文件对应预设哈希值。
步骤S70，根据所述预设哈希值查询所述协议文件是否存在所述查找存储数据对应的目标哈希值，并得到查询结果。
需要说明的是，通过预设哈希值在分布式存储系统中是否存在于预设哈希值对应的协议文件，进一步的可以根据协议文件确定分布式存储系统节点地址。
步骤S80，根据所述查询结果从所述分布式存储系统获取目标存储数据。
可以理解的是，若区块链网络存在查找存储数据对应的目标哈希值，则根据目标哈希值从预设映射关系表中查询分布式存储系统节点地址，根据分布式存储系统节点地址确定参考存储数据，通过预设算法对所述参考存储数据进行解密，确定目标存储数据。
需要说明的是，由于每个协议文件可以记录对应的存储数据的存储数据的哈希值和分布式存储系统节点地址，因此，分布式存储系统中包含存储数据的哈希值和分布式存储系统节点地址的预设映射关系表，通过目标哈希值在预设映射关系表查询分布式存储系统节点地址，根据分布式存储系统节点地址确定参考存储数据，客户端在获取到参考存储数据时，通过非对称加密计算得公钥进行解密得到数据授权的目标存储数据，最终可以确保来源可信。
本实施例通过在接收到客户端发送的查找存储数据请求，提取所述查找存储数据请求的查询摘要，并查询所述区块链网络是否存在所述查询摘要；在所述区块链网络存在所述查询摘要时，获取所述查找存储数据请求的区块链网络记录地址；根据所述区块链网络记录地址查询所述查找存储数据请求对应的预设哈希值；根据所述预设哈希值查询所述协议文件是否存在所述查找存储数据对应的目标哈希值，并得到查询结果；根据所述查询结果从所述分布式存储系统获取目标存储数据，从而提高实现共享交互过程中公开透明，且扩展性强的准确性。
此外，本发明实施例还提出一种存储介质，所述存储介质上存储有基于分布式存储的数字服务程序，所述基于分布式存储的数字服务程序被处理器执行时实现如上文所述的基于分布式存储的数字服务方法的步骤。
由于本存储介质采用了上述所有实施例的全部技术方案，因此至少具有上述实施例的技术方案所带来的所有有益效果，在此不再一一赘述。
此外，参照图5，本发明实施例还提出一种基于分布式存储的数字服务装置，所述基于分布式存储的数字服务装置包括：
获取模块10，用于获取客户端发送的存储数据。
可以理解的是，存储数据可以为客户端上传的视频、音频、图片、文本文件等数据信息，本实施例对此不作限制。
生成模块20，用于将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件。
需要说明的是，分布式存储系统可以是构建和区块链网络平行的独立运行的分布式文件系统，用以负载区块链网络的大文件存储，
应当理解的是，将存储数据发送至分布式存储系统，以使分布式存储系统通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，并按照预设算法计算加密后的存储数据的哈希值，将加密后的存储数据存储至所述哈希值对应的分布式存储系统节点地址，根据哈希值和所述分布式存储系统节点地址生成协议文件。
可以理解的是，分布式存储系统接受存储数据，通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，在具体实施过程中，预设加密算法可以为非对称加密算法，本实施例对此不作限制，通过非对称加密技术生成的公私钥进行交互，客户端在需要存储数据时采用私钥对信息进行加密，确定该信息的真实性，并按照预设算法计算加密后的存储数据的哈希值，其中，预设算法可以为哈希算法，本实施例对此不作限制，并将加密后的存储数据存储至哈希值对应的分布式存储系统节点地址，根据哈希值和所述分布式存储系统节点地址生成协议文件。
需要说明的是，将存储数据上传至分布式文件系统中，进行加密处理，并获得存储数据存储的哈希值，并在分布式存储系统节点地址中记录存储数据的哈希值，例如当一个存储数据传入分布式存储系统节点时，存储数据都会转换成散列字符串，同时大文件会被切分成多个小块进而分散在网络中存储，同时在网络中的每个节点都会根据其内容计算得到一个哈希值，与其内容直接相关。
记录模块30，用于将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。
可以理解的是，将分布式存储系统存储的协议文件传输至区块链网络，从而可以借助区块链网络的不可篡改的特性，在区块链网络中进行记录，从而通过区块链网络记录地址对存储数据进行数据管理，保证存储数据不会被丢失。
本实施例中通过获取客户端发送的存储数据；将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理。通过以分布式存储作为底层支撑，融合区块链网络，从而有效的实现共享交互过程中公开透明，且扩展性强。
在一实施例中，所述生成模块20，还用于将所述存储数据发送至分布式存储系统，以使所述分布式存储系统通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，并按照预设算法计算所述加密后的存储数据的哈希值，将所述加密后的存储数据存储至所述哈希值对应的分布式存储系统节点地址，根据所述哈希值和所述分布式存储系统节点地址生成协议文件。
在一实施例中，所述获取模块10，还用于获取客户端发送的存储数据对应的请求信息；将所述请求信息发送至所述区块链网络的节点进行信息确认，并将所述存储数据存储到所述区块链网络。
在一实施例中，所述基于分布式存储的数字服务的装置还包括存储模块，用于将所述请求信息发送至所述区块链网络的节点；确定所述区块链网络的节点对应的主节点、所述请求信息对应的摘要和所述主节点对应的编号，并根据所述主节点对所述请求信息分配请求序号；将所述请求序号、所述请求信息对应的摘要和所述主节点对应的编号发送至区块链网络的副本节点；根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到所述区块链网络。
在一实施例中，所述存储模块，还用根据所述请求序号确定多个目标集合；在相交的任意两个目标集合有一个共同的非拜占庭节点且每一个目标集合中都没有失效的节点时，执行根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到区块链网络的步骤。
在一实施例中，所述获取模块10，还用于在接收到客户端发送的查找存储数据请求，提取所述查找存储数据请求的查询摘要，并查询所述区块链网络是否存在所述查询摘要；在所述区块链网络存在所述查询摘要时，获取所述查找存储数据请求的区块链网络记录地址；根据所述区块链网络记录地址查询所述查找存储数据请求对应的预设哈希值；根据所述预设哈希值查询所述协议文件是否存在所述查找存储数据对应的目标哈希值，并得到查询结果；根据所述查询结果从所述分布式存储系统获取目标存储数据。
在一实施例中，所述获取模块10，还用于若所述区块链网络存在所述查找存储数据对应的目标哈希值，则根据所述目标哈希值从预设映射关系表中查询分布式存储系统节点地址；根据所述分布式存储系统节点地址确定参考存储数据；通过预设算法对所述参考存储数据进行解密，确定目标存储数据。
在本发明所述基于分布式存储的数字服务装置的其他实施例或具体实现方法可参照上述各方法实施例，此处不再赘述。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该估算机软件产品存储在如上所述的一个估算机可读存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台智能基于分布式存储的数字服务设备(可以是手机，估算机，基于分布式存储的数字服务设备，空调器，或者网络基于分布式存储的数字服务设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (9)

1.一种基于分布式存储的数字服务方法，其特征在于，所述基于分布式存储的数字服务方法包括以下步骤：
获取客户端发送的存储数据；
将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；
将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理；
所述将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件，包括：
将所述存储数据发送至分布式存储系统，以使所述分布式存储系统通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，并按照预设算法计算所述加密后的存储数据的哈希值，将所述加密后的存储数据存储至所述哈希值对应的分布式存储系统节点地址，根据所述哈希值和所述分布式存储系统节点地址生成协议文件。
2.如权利要求1所述的基于分布式存储的数字服务方法，其特征在于，所述将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理之后，还包括：
获取客户端发送的存储数据对应的请求信息；
将所述请求信息发送至所述区块链网络的节点进行信息确认，并将所述存储数据存储到所述区块链网络。
3.如权利要求2所述的基于分布式存储的数字服务方法，其特征在于，所述区块链网络的节点包括：区块链网络的主节点和区块链网络的副本节点；
所述将所述请求信息发送至所述区块链网络的节点进行信息确认，并将所述存储数据存储到所述区块链网络，包括：
将所述请求信息发送至所述区块链网络的节点；
确定所述区块链网络的节点对应的主节点、所述请求信息对应的摘要和所述主节点对应的编号，并根据所述主节点对所述请求信息分配请求序号；
将所述请求序号、所述请求信息对应的摘要和所述主节点对应的编号发送至区块链网络的副本节点；
根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到所述区块链网络。
4.如权利要求3所述的基于分布式存储的数字服务方法，其特征在于，所述根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到区块链网络之前，还包括：
根据所述请求序号确定多个目标集合；
在相交的任意两个目标集合有一个共同的非拜占庭节点且每一个目标集合中都没有失效的节点时，执行根据所述副本节点与所述主节点对所述存储数据进行提交，将所述存储数据存储到区块链网络的步骤。
5.如权利要求1-4中任一项所述的基于分布式存储的数字服务方法，其特征在于，所述将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理之后，还包括：
在接收到客户端发送的查找存储数据请求，提取所述查找存储数据请求的查询摘要，并查询所述区块链网络是否存在所述查询摘要；
在所述区块链网络存在所述查询摘要时，获取所述查找存储数据请求的区块链网络记录地址；
根据所述区块链网络记录地址查询所述查找存储数据请求对应的预设哈希值；
根据所述预设哈希值查询所述协议文件是否存在所述查找存储数据对应的目标哈希值，并得到查询结果；
根据所述查询结果从所述分布式存储系统获取目标存储数据。
6.如权利要求5所述的基于分布式存储的数字服务方法，其特征在于，所述根据所述查询结果从所述分布式存储系统获取目标存储数据，包括：
若所述区块链网络存在所述查找存储数据对应的目标哈希值，则根据所述目标哈希值从预设映射关系表中查询分布式存储系统节点地址；
根据所述分布式存储系统节点地址确定参考存储数据；
通过预设算法对所述参考存储数据进行解密，确定目标存储数据。
7.一种基于分布式存储的数字服务装置，其特征在于，所述基于分布式存储的数字服务包括：
获取模块，用于获取客户端发送的存储数据；
生成模块，用于将所述存储数据发送至分布式存储系统，以使所述分布式存储系统生成协议文件；
记录模块，用于将所述协议文件传输至区块链网络进行记录，得到区块链网络记录地址，以通过所述区块链网络记录地址进行数据管理；
所述生成模块，还用于将所述存储数据发送至分布式存储系统，以使所述分布式存储系统通过预设加密算法对所述存储数据进行加密，得到加密后的存储数据，并按照预设算法计算所述加密后的存储数据的哈希值，将所述加密后的存储数据存储至所述哈希值对应的分布式存储系统节点地址，根据所述哈希值和所述分布式存储系统节点地址生成协议文件。
8.一种基于分布式存储的数字服务设备，其特征在于，所述基于分布式存储的数字服务设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的基于分布式存储的数字服务程序，所述基于分布式存储的数字服务程序配置有实现如权利要求1至6中任一项所述的基于分布式存储的数字服务方法的步骤。
9.一种存储介质，其特征在于，所述存储介质上存储有基于分布式存储的数字服务程序，所述基于分布式存储的数字服务程序被处理器执行时实现如权利要求1至6中任一项所述的基于分布式存储的数字服务方法的步骤。
CN202110304873.1A 2021-03-22 2021-03-22 基于分布式存储的数字服务方法、装置、设备及储存介质 Active CN113094334B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110304873.1A CN113094334B (zh) 2021-03-22 2021-03-22 基于分布式存储的数字服务方法、装置、设备及储存介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110304873.1A CN113094334B (zh) 2021-03-22 2021-03-22 基于分布式存储的数字服务方法、装置、设备及储存介质

Publications (2)

Publication Number Publication Date
CN113094334A CN113094334A (zh) 2021-07-09
CN113094334B true CN113094334B (zh) 2022-08-16

Family

ID=76668879

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110304873.1A Active CN113094334B (zh) 2021-03-22 2021-03-22 基于分布式存储的数字服务方法、装置、设备及储存介质

Country Status (1)

Country Link
CN (1) CN113094334B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113703373B (zh) * 2021-09-06 2022-10-14 杭州瀚陆信息技术有限公司 一种深海智能着陆器组网的数据存储和读取方法
WO2024001304A1 (zh) * 2022-06-30 2024-01-04 华为云计算技术有限公司 一种数据处理方法及相关设备
CN115297130B (zh) * 2022-10-09 2022-12-09 四川蜀天信息技术有限公司 一种基于区块链的分布式存储网络数据同步方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107249046A (zh) * 2017-08-15 2017-10-13 李俊庄 一种基于区块链的分布式云存储系统构建方法
CN109194708B (zh) * 2018-07-24 2021-07-13 哈尔滨工程大学 一种基于区块链技术的分布式存储系统及其身份认证方法
CN109347941A (zh) * 2018-10-10 2019-02-15 南京简诺特智能科技有限公司 一种基于区块链的数据共享平台及其实现方法
CN109614806A (zh) * 2018-12-03 2019-04-12 北京工业大学 基于区块链的日志管理系统
CN110032545A (zh) * 2019-03-27 2019-07-19 远光软件股份有限公司 基于区块链的文件存储方法、系统及电子设备
CN110399338B (zh) * 2019-04-13 2022-03-08 西安电子科技大学 基于区块链的分布式文件索引系统及方法、云存储服务器
CN110048828A (zh) * 2019-04-17 2019-07-23 江苏全链通信息科技有限公司 基于数据中心的日志存储方法和系统
CN110321074B (zh) * 2019-05-20 2021-07-09 西安电子科技大学 基于区块链和分布式存储系统的安全存储证明的共识方法
CN110647503A (zh) * 2019-10-09 2020-01-03 重庆特斯联智慧科技股份有限公司 一种分布式存储方法及装置
CN110912937B (zh) * 2019-12-23 2021-09-07 杭州中科先进技术研究院有限公司 一种基于区块链的数字存证平台和存证方法

Also Published As

Publication number Publication date
CN113094334A (zh) 2021-07-09

Similar Documents

Publication Publication Date Title
US11521176B2 (en) Service flow system and service data processing method and apparatus
CN113094334B (zh) 基于分布式存储的数字服务方法、装置、设备及储存介质
CN108123800B (zh) 密钥管理方法、装置、计算机设备及存储介质
US8681995B2 (en) Supporting DNS security in a multi-master environment
RU2346398C2 (ru) Система и способ для передачи сокращенной информации из сертификата для выполнения операций шифрования
US7890643B2 (en) System and method for providing program credentials
US8484480B2 (en) Transmitting information using virtual input layout
JP4263421B2 (ja) サーバレス分散ファイルシステム
TW202030668A (zh) 電腦實施系統及在區塊鏈上儲存資料的方法(一)
CN107948152B (zh) 信息存储方法、获取方法、装置及设备
CN108769230B (zh) 交易数据存储方法、装置、服务器及存储介质
JP2009534940A (ja) ピアツーピアコンタクト情報交換
JP2009089044A (ja) 暗号管理装置、暗号管理方法、暗号管理プログラム
RU2373572C2 (ru) Система и способ для разрешения имен
WO2022068356A1 (zh) 基于区块链的信息加密方法、装置、设备及介质
CN113612770A (zh) 一种跨域安全交互方法、系统、终端以及存储介质
CN111367923A (zh) 数据处理方法、装置、节点设备及存储介质
US7895441B2 (en) LDAP grouping for digital signature creation
CN111934854A (zh) 数据确定方法和装置、存储介质及电子装置
CN110807203B (zh) 数据处理方法、业务运营中心平台、系统以及存储介质
Ma et al. A new framework of IND-CCA secure public key encryption with keyword search
TWI723622B (zh) 能夠安全地存取及刪除資料的資料管理方法及系統
TWM591647U (zh) 能夠安全地存取及刪除資料的資料管理系統
CN110704451A (zh) 基于区块链的所有权登记、举证的方法及装置
US7984490B2 (en) Method for issuing attribute certificate from an LDAP entry

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant