CN112596682A - 一种区块链用存储装置及存储方法 - Google Patents

一种区块链用存储装置及存储方法 Download PDF

Info

Publication number
CN112596682A
CN112596682A CN202011576360.8A CN202011576360A CN112596682A CN 112596682 A CN112596682 A CN 112596682A CN 202011576360 A CN202011576360 A CN 202011576360A CN 112596682 A CN112596682 A CN 112596682A
Authority
CN
China
Prior art keywords
data
database
disk database
block
solid state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011576360.8A
Other languages
English (en)
Inventor
郝东东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN202011576360.8A priority Critical patent/CN112596682A/zh
Publication of CN112596682A publication Critical patent/CN112596682A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/062—Securing storage systems
    • G06F3/0622—Securing storage systems in relation to access
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种区块链用存储装置及存储方法，属于信息技术领域，包括：获取模块，用于获取新写入的新数据块并上传；内存数据库，内存数据库用于缓存所上传的新数据块；第一写入模块，用于将内存数据库所缓存的新新数据块写入固态硬盘数据库中。本发明中，通过将区块链网络所录入的新数据块以内存数据库和固态硬盘数据库作为缓冲带，最终将数据写入机械硬盘数据库中，能够在极高的程度上优化了存储的分配，既解决了单个区块链受制于磁盘的硬件限制，容量存在上限的问题，增强了数据存储容量的可扩展性，也在较高的程度上降低了数据信息的存储成本，同时还保证了数据处理的高效性，有益于减轻网络带宽的压力。

Description

一种区块链用存储装置及存储方法
技术领域
本发明属于信息技术领域，尤其涉及一种区块链用存储装置及存储方法。
背景技术
区块链是一个信息技术领域的术语，从本质上讲，它是一个共享数据库，存储于其中的数据或信息，具有“不可伪造”、“全程留痕”、“可以追溯”、“公开透明”、“集体维护”等特征，基于这些特征，区块链技术奠定了坚实的“信任”基础，创造了可靠的“合作”机制，具有广阔的运用前景。
区块链网络中的各节点需要分别存储一致的区块链数据，利用区块链技术进行数据存储的存储方式的应用越来越广泛，目前用区块链技术的数据存储方式在进行数据存储时，容易出现内容叠复的情况，降低了存储技术的利用率，因此，现阶段市场上亟需一种区块链用存储装置及存储方法来解决上述问题。
发明内容
本发明的目的在于：为了解决目前用区块链技术的数据存储方式在进行数据存储时，容易出现内容叠复的情况，降低了存储技术利用率的问题，而提出的一种区块链用存储装置及存储方法。
为了实现上述目的，本发明采用了如下技术方案：
一种区块链用存储装置，包括：
获取模块，用于获取新写入的新数据块并上传；
内存数据库，用于缓存获取模块所上传的新数据块；
第一写入模块，用于将内存数据库所缓存的新数据块写入固态硬盘数据库中；
第一接收装置，用于固态硬盘数据库接收内存数据库待转出数据列表中的新数据块；
固态硬盘数据库，用于短期存储由内存数据库所转出新数据块；
检索模块，用于检索固态硬盘数据库中是否存在关于新数据块的原始数据；
第一上传模块，用于当所述固态硬盘数据库中有关于新数据块的原始数据时，将所述新数据块与所述原始数据合并，当所述固态硬盘数据库中没有关于新数据块的原始数据时，直接将所述新数据块保存至固态硬盘数据库；
第二上传模块，用于将固态硬盘数据库中的等量旧数据块上传至网盘，用于当所述网盘中的旧数据块达到固态硬盘数据库所预设的清除时间时，将所述旧数据块直接上传至机械硬盘数据库中，当所述网盘数据库中没有达到固态硬盘数据库所预设的清除时间时，暂存在网盘中，直至达到预设时间后再写入机械硬盘数据库；
第二写入模块，用于将固定硬盘数据库所清理出的旧数据块从网盘写入机械硬盘数据库中；
第二接收装置，用于机械硬盘数据库接收固态硬盘数据库所清理掉的旧数据块。
作为上述技术方案的进一步描述：
所述第二写入模块用于：当本次旧数据块写入机械硬盘数据库失败时，更新标识位，对本次写入旧数据块作第一标记。
作为上述技术方案的进一步描述：
所述第二上传模块用于：检索所述机械硬盘数据库中是否有所述第一标记，当有所述第一标记时，判定所述机械硬盘数据库中存在旧数据的原始数据，并清除标记。
一种区块链用存储方法：包括：
步骤1.先获取某一目标区块链网络中某一区块链节点数据，经由节点数据处理中心处理后存入内存数据库中；
步骤2.将内存数据库中所生成的新数据块写入固态硬盘数据库中；
对所接收的新数据块进行处理，获得处理后的数据；
检索固态硬盘数据库；
是否存在新数据模块的原始数据；
若是，则将新数据模块与所对应的原始数据合并后存储至固态硬盘数据库对应的数据列表内；
若为否，则直接将新数据模块存储至固态硬盘数据库对应的数据列表内；
步骤3.获取该固定硬盘数据库待转出的旧数据块；
先将旧数据块上传至网盘；
判断旧数据块是否达到预设时间；
若是，则直接从网盘写入机械硬盘数据库；
若为否，则暂存在网盘中，直至达到预设时间后再写入机械硬盘数据库。
作为上述技术方案的进一步描述：
获取某一目标区块链网络中某一区块链节点数据，，具体包括：
获取发布至区块链的区块与基于所述区块确定的用于对区块链网络状态进行更新的状态更新数据，作为待存储的区块链数据。
综上所述，由于采用了上述技术方案，本发明的有益效果是：
1、本发明中，通过将区块链网络所录入的新数据块以内存数据库和固态硬盘数据库作为缓冲带，最终将数据写入机械硬盘数据库中，能够在极高的程度上优化了存储的分配，既解决了单个区块链受制于磁盘的硬件限制，容量存在上限的问题，增强了数据存储容量的可扩展性，也在较高的程度上降低了数据信息的存储成本，同时还保证了数据处理的高效性，有益于减轻网络带宽的压力。
2、本发明中，通过对未能够写入机械硬盘数据库内的旧数据块进行标记，当再次写入该旧数据时需要先通过检索的方式印证机械硬盘数据库中是否存在关于该标记的相同的数据内容，这样可有效避免数据的丢失，从而提高了整个系统处理数据的准确性和稳定性，提升了用户体验，同时，还可避免在机械硬盘数据库中存在相同的数据内容，有效保证了机械硬盘数据库存储能力的利用率。
附图说明
图1为本发明提出的一种区块链用存储装置及存储方法中实施例一所提供的固态硬盘数据库存储方法的流程图；
图2为本发明提出的一种区块链用存储装置及存储方法中实施例二所提供的固态硬盘数据库存储方法的流程图；
图3为本发明提出的一种区块链用存储装置及存储方法的模块框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。
请参阅图1-3，本发明提供一种技术方案：一种区块链用存储装置，包括：
获取模块，用于获取新写入的新数据块并上传；
内存数据库，用于缓存获取模块所上传的新数据块；
第一写入模块，用于将内存数据库所缓存的新数据块写入固态硬盘数据库中；
第一接收装置，用于固态硬盘数据库接收内存数据库待转出数据列表中的新数据块；
固态硬盘数据库，用于短期存储由内存数据库所转出新数据块；
检索模块，用于检索固态硬盘数据库中是否存在关于新数据块的原始数据；
第一上传模块，用于当所述固态硬盘数据库中有关于新数据块的原始数据时，将所述新数据块与所述原始数据合并，当所述固态硬盘数据库中没有关于新数据块的原始数据时，直接将所述新数据块保存到固态硬盘数据库；
第二上传模块，用于将固态硬盘数据库中的等量旧数据块上传至网盘，用于当所述网盘中的旧数据块达到固态硬盘数据库所预设的清除时间时，将所述旧数据块直接上传至机械硬盘数据库中，当所述网盘数据库中没有达到固态硬盘数据库所预设的清除时间时，暂存在网盘中，直至达到预设时间后再写入机械硬盘数据库；
第二写入模块，用于将固定硬盘数据库所清理出旧数据块写入机械硬盘数据库中；
第二接收装置，用于机械硬盘数据库接收固态硬盘数据库所清理掉的旧数据块。
具体的，如图1所示，所述第二写入模块用于：当本次旧数据块写入失败时，更新标识位，对本次写入旧数据块作第一标记。
具体的，如图1所示，所述第二上传模块用于：检索所述机械硬盘数据库中是否有所述第一标记，当有所述第一标记时，判定所述机械硬盘数据库中存在旧数据的原始数据，并清除标记。
具体的，如图3所示，所述取某一目标区块链网络中某一区块链节点数据，经由节点数据处理中心处理后存入内存数据库中；
将内存数据库中所生成的新数据块写入固态硬盘数据库中；
对所接收的新数据块进行处理，获得处理后的数据；
检索固态硬盘数据库；
是否存在新数据模块的原始数据；
若是，则将新数据模块与所对应的原始数据合并后存储至固态硬盘数据库对应的数据列表内；
若为否，则直接将新数据模块存储至固态硬盘数据库对应的数据列表内；
获取该固定硬盘数据库待转出的旧数据块；
将新数据块写入固态硬盘数据库中，并将旧数据块上传至网盘；
判断旧数据块是否达到预设时间；
若是，则直接写入机械硬盘数据库；
若为否，则暂存在网盘中，直至达到预设时间后再写入机械硬盘数据库。
具体的，如图3所示，获取待存储至内存数据库中的区块链数据，具体包括：
获取发布至区块链的区块与基于所述区块确定的用于对区块链网络状态进行更新的状态更新数据，作为待存储的区块链数据。
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (5)

1.一种区块链用存储装置，其特征在于，包括：
获取模块，用于获取新写入的新数据块并上传；
内存数据库，用于缓存获取模块所上传的新数据块；
第一写入模块，用于将内存数据库所缓存的新数据块写入固态硬盘数据库中；
第一接收装置，用于固态硬盘数据库接收内存数据库待转出数据列表中的新数据块；
所述固态硬盘数据库用于短期存储由内存数据库所转出新数据块；
检索模块，用于检索固态硬盘数据库中是否存在关于新数据块的原始数据；
第一上传模块，用于当所述固态硬盘数据库中有关于新数据块的原始数据时，将所述新数据块与所述原始数据合并，当所述固态硬盘数据库中没有关于新数据块的原始数据时，直接将所述新数据块保存在固态硬盘数据库中；
第二上传模块，用于将固态硬盘数据库中的等量旧数据块上传至网盘，用于当所述网盘中的旧数据块达到固态硬盘数据库所预设的清除时间时，将所述旧数据块直接上传至机械硬盘数据库中，当所述网盘数据库中没有达到固态硬盘数据库所预设的清除时间时，暂存在网盘中，直至达到预设时间后再写入机械硬盘数据库；
第二写入模块，用于将固定硬盘数据库所清理出的旧数据块从网盘写入机械硬盘数据库中；
第二接收装置，用于机械硬盘数据库接收固态硬盘数据库所清理掉的旧数据块。
2.根据权利要求1所述的一种区块链用存储装置，其特征在于，所述第二写入模块用于：当本次旧数据块写入机械硬盘数据库失败时，更新标识位，对本次写入旧数据块作第一标记。
3.根据权利要求2所述的一种区块链用存储装置，其特征在于，所述第二上传模块用于：检索所述机械硬盘数据库中是否有所述第一标记，当有所述第一标记时，判定所述机械硬盘数据库中存在旧数据的原始数据，并清除标记。
4.根据权利要求1所述的一种区块链用存储方法，其特征在于，包括：
步骤1.先获取某一目标区块链网络中某一区块链节点数据，经由节点数据处理中心处理后存入内存数据库中；
步骤2.将内存数据库中所生成的新数据块写入固态硬盘数据库中；
对所接收的新数据块进行处理，获得处理后的数据；
检索固态硬盘数据库，确认是否存在新数据模块的原始数据；
若是，则将新数据模块与所对应的原始数据合并后存储至固态硬盘数据库对应的数据列表内；
若为否，则直接将新数据模块存储至固态硬盘数据库对应的数据列表内；
步骤3.获取该固定硬盘数据库待转出的旧数据块；
先将旧数据块上传至网盘；
判断旧数据块是否达到预设时间；
若是，则直接从网盘写入机械硬盘数据库；
若为否，则暂存在网盘中，直至达到预设时间后再写入机械硬盘数据库。
5.根据权利要求4所述的一种区块链用存储方法，其特征在于，所述的获取某一目标区块链网络中某一区块链节点数据，具体包括：
获取发布至区块链的区块与基于所述区块确定的用于对区块链网络状态进行更新的状态更新数据，作为待存储的区块链数据。
CN202011576360.8A 2020-12-28 2020-12-28 一种区块链用存储装置及存储方法 Pending CN112596682A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011576360.8A CN112596682A (zh) 2020-12-28 2020-12-28 一种区块链用存储装置及存储方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011576360.8A CN112596682A (zh) 2020-12-28 2020-12-28 一种区块链用存储装置及存储方法

Publications (1)

Publication Number Publication Date
CN112596682A true CN112596682A (zh) 2021-04-02

Family

ID=75203575

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011576360.8A Pending CN112596682A (zh) 2020-12-28 2020-12-28 一种区块链用存储装置及存储方法

Country Status (1)

Country Link
CN (1) CN112596682A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113792074A (zh) * 2021-08-11 2021-12-14 厦门天锐科技股份有限公司 一种数据处理方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018036440A1 (zh) * 2016-08-26 2018-03-01 杨鹏 一种基于区块链的数据循环写入方法及系统
WO2020098654A1 (zh) * 2018-11-13 2020-05-22 杭州海康威视系统技术有限公司 基于云存储的数据存储方法、装置和存储介质
CN111291022A (zh) * 2020-02-10 2020-06-16 刘翱天 一种基于区块链的数据存储系统
CN111552442A (zh) * 2020-05-13 2020-08-18 重庆紫光华山智安科技有限公司 一种基于ssd的缓存管理系统及方法
WO2020192710A1 (zh) * 2019-03-28 2020-10-01 深圳大普微电子科技有限公司 基于lsm数据库的垃圾处理的方法、固态硬盘以及存储装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018036440A1 (zh) * 2016-08-26 2018-03-01 杨鹏 一种基于区块链的数据循环写入方法及系统
WO2020098654A1 (zh) * 2018-11-13 2020-05-22 杭州海康威视系统技术有限公司 基于云存储的数据存储方法、装置和存储介质
WO2020192710A1 (zh) * 2019-03-28 2020-10-01 深圳大普微电子科技有限公司 基于lsm数据库的垃圾处理的方法、固态硬盘以及存储装置
CN111291022A (zh) * 2020-02-10 2020-06-16 刘翱天 一种基于区块链的数据存储系统
CN111552442A (zh) * 2020-05-13 2020-08-18 重庆紫光华山智安科技有限公司 一种基于ssd的缓存管理系统及方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113792074A (zh) * 2021-08-11 2021-12-14 厦门天锐科技股份有限公司 一种数据处理方法及装置
CN113792074B (zh) * 2021-08-11 2024-02-06 厦门天锐科技股份有限公司 一种数据处理方法及装置

Similar Documents

Publication Publication Date Title
US11232070B2 (en) Metadata compaction in a distributed storage system
CN103294710B (zh) 一种数据存取方法和装置
EP2209074A1 (en) Data storage processing method, data searching method and devices thereof
CN102467572B (zh) 支持重复数据删除程序的数据区块查询方法
CN105183839A (zh) 一种基于Hadoop的小文件分级索引的存储优化方法
CN106951375B (zh) 在存储系统中删除快照卷的方法及装置
CN110647497A (zh) 一种基于hdfs的高性能文件存储与管理系统
CN101673192B (zh) 时序化的数据处理方法、装置及系统
CN102682037A (zh) 一种数据获取方法、系统及装置
KR101766790B1 (ko) 메인 메모리 데이터 베이스를 관리 하기 위한 방법 및 컴퓨팅 장치
CN103226965B (zh) 基于时间位图的音视频数据存取方法
CN111295649A (zh) 日志结构存储系统
CN101707633A (zh) 一种基于文件系统的消息中间件持久消息的存储方法
CN104584524A (zh) 聚合中介系统中的数据
CN105787012B (zh) 一种提高存储系统处理小文件的方法以及存储系统
CN103744913A (zh) 一种基于搜索引擎技术的数据库检索方法
CN103593460A (zh) 数据分级存储系统和数据分级存储方法
CN110381128B (zh) 一种适用于流媒体文件的上传方法和云存储模型
CN112596682A (zh) 一种区块链用存储装置及存储方法
CN102346783B (zh) 数据检索方法及装置
CN104156395A (zh) 数据存储系统
CN109189724B (zh) 提高视频监控系统音视频数据存储效率的方法及装置
CN104298747A (zh) 大数据量图片的存储方法、以及检索方法
CN112463542B (zh) 日志异常原因诊断方法、装置、计算机设备和存储介质
US20230252029A1 (en) On-board data storage method and system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination