CN107015758A - 一种新型分布式存储缓存加速方法 - Google Patents

一种新型分布式存储缓存加速方法 Download PDF

Info

Publication number
CN107015758A
CN107015758A CN201610056765.6A CN201610056765A CN107015758A CN 107015758 A CN107015758 A CN 107015758A CN 201610056765 A CN201610056765 A CN 201610056765A CN 107015758 A CN107015758 A CN 107015758A
Authority
CN
China
Prior art keywords
nvdimm
cachings
data block
distributed storage
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610056765.6A
Other languages
English (en)
Inventor
胡敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201610056765.6A priority Critical patent/CN107015758A/zh
Publication of CN107015758A publication Critical patent/CN107015758A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0611—Improving I/O performance in relation to response time
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本发明专利涉及一种新型分布式存储缓存加速方法，该方法是通过分布式存储节点内安装NVDIMM缓存，所有的数据通过NVDIMM缓存进行读写性能优化，可将随机的小块随机数据合并起来进行顺序的写入到后端磁盘存储，同时分布式节点间的数据也通过各节点的NVDIMM缓存间进行数据的同步，以提升数据同步的效率和性能，该方法利用NVDIMM缓存的高性能，以及NVDIMM有超级电容供电续电的特点，充分的提升了分布式存储的性能、且保护了数据在缓存内的安全，该方法的特征是要求分布式存储节点平台需支持NVDIMM产品和技术。

Description

一种新型分布式存储缓存加速方法
技术领域
本发明专利涉及计算机存储领域。
背景技术
随着信息化的大爆炸以及数据成指数级增长，处理数据的存储系统采用传统的单控或双控制器架构时，业务处理能力远远无法完成海量数据的处理需求，而分布式存储系统很多时候都是牺牲一定的性能以确保数据的强一致性；固态盘的出现很好的解决了性能瓶颈的问题，但固态盘的价格居高不下，使得分布系统存储系统采用全固态盘的解决方案成本太高。
因此非常有必要设计一种新型分布式存储缓存的机制，应用于分布式存储系统以提升业务数据的读写和同步至其它分布式存储节点，以提升业务处理能力。
发明专利内容
本发明专利涉及一种新型分布式存储缓存加速方法，该方法是通过分布式存储节点内安装NVDIMM缓存，所有的数据通过NVDIMM缓存进行读写性能优化，可将随机的小块随机数据合并起来进行顺序的写入到后端磁盘存储，同时分布式节点间的数据也通过各节点的NVDIMM缓存间进行数据的同步，以提升数据同步的效率和性能，该方法利用NVDIMM缓存的高性能，以及NVDIMM有超级电容供电续电的特点，充分的提升了分布式存储的性能、且保护了数据在缓存内的安全，该方法的特征是要求分布式存储节点平台需支持NVDIMM产品和技术。
附图说明
图1为本发明专利的一种新型分布式存储缓存加速方法结构示意图。
具体实施方式
为了使本发明专利的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明专利进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明专利，并不用于限定本发明专利。
请参阅图1，图1为本发明专利的一种新型分布式存储缓存加速方法结构示意图。
一种新型分布式存储缓存加速方法，其特征在于，该方法中的分布式存储节点1(12a)内需安装配置NVDIMM缓存(10a)，分布式存储节点2(12b)内需安装配置NVDIMM缓存(10b)，分布式存储节点3(12c)内需安装配置NVDIMM缓存(10c)，同时NVDIMM缓存(10a)需配备超级电容(13a)，NVDIMM缓存(10b)需配备超级电容(13ab)，NVDIMM缓存(10c)需配备超级电容(13c)。
一种新型分布式存储缓存加速方法，其特征在于，当数据块1(11a)、数据块2(11b)和数据块3(11c)有写入请求时，数据块1(11a)写入NVDIMM缓存(10a)后，NVDIMM缓存(10a)将数据块1(11a)同步写入NVDIMM缓存(10b)，同步完成后返回应用写完成；数据块2(11b)写入NVDIMM缓存(10b)后，NVDIMM缓存(10b)将数据块2(11b)同步写入NVDIMM缓存(10c)，同步完成后返回应用写完成；数据块3(11c)写入NVDIMM缓存(10c)后，NVDIMM缓存(10c)将数据块3(11c)同步写入NVDIMM缓存(10a)，同步完成后返回应用写完成。写入同步完成后，NVDIMM缓存(10a)会把数据块1(11a)和数据块3(11c)顺序写入分布式存储节点1(12a)内；NVDIMM缓存(10b)会把数据块1(11a)和数据块2(11b)顺序写入分布式存储节点2(12b)内；NVDIMM缓存(10c)会把数据块2(11b)和数据块3(11c)顺序写入分布式存储节点3(12c)内。
一种新型分布式存储缓存加速方法，其特征在于，分布式存储节点平台需支持NVDIMM产品和技术。
以上所述仅为本发明专利的较佳实施例而已，并不用以限制本发明专利，凡在本发明专利的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明专利的保护范围之内。

Claims (3)

1.一种新型分布式存储缓存加速方法，其特征在于，该方法中的分布式存储节点1(12a)内需安装配置NVDIMM缓存(10a)，分布式存储节点2(12b)内需安装配置NVDIMM缓存(10b)，分布式存储节点3(12c)内需安装配置NVDIMM缓存(10c)，同时NVDIMM缓存(10a)需配备超级电容(13a)，NVDIMM缓存(10b)需配备超级电容(13ab)，NVDIMM缓存(10c)需配备超级电容(13c)。
2.根据权利要求1所述的一种新型分布式存储缓存加速方法，其特征在于，当数据块1(11a)、数据块2(11b)和数据块3(11c)有写入请求时，数据块1(11a)写入NVDIMM缓存(10a)后，NVDIMM缓存(10a)将数据块1(11a)同步写入NVDIMM缓存(10b)，同步完成后返回应用写完成；数据块2(11b)写入NVDIMM缓存(10b)后，NVDIMM缓存(10b)将数据块2(11b)同步写入NVDIMM缓存(10c)，同步完成后返回应用写完成；数据块3(11c)写入NVDIMM缓存(10c)后，NVDIMM缓存(10c)将数据块3(11c)同步写入NVDIMM缓存(10a)，同步完成后返回应用写完成。写入同步完成后，NVDIMM缓存(10a)会把数据块1(11a)和数据块3(11c)顺序写入分布式存储节点1(12a)内；NVDIMM缓存(10b)会把数据块1(11a)和数据块2(11b)顺序写入分布式存储节点2(12b)内；NVDIMM缓存(10c)会把数据块2(11b)和数据块3(11c)顺序写入分布式存储节点3(12c)内。
3.根据权利要求1所述的一种新型分布式存储缓存加速方法，其特征在于，分布式存储节点平台需支持NVDIMM产品和技术。
CN201610056765.6A 2016-01-28 2016-01-28 一种新型分布式存储缓存加速方法 Pending CN107015758A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610056765.6A CN107015758A (zh) 2016-01-28 2016-01-28 一种新型分布式存储缓存加速方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610056765.6A CN107015758A (zh) 2016-01-28 2016-01-28 一种新型分布式存储缓存加速方法

Publications (1)

Publication Number Publication Date
CN107015758A true CN107015758A (zh) 2017-08-04

Family

ID=59439328

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610056765.6A Pending CN107015758A (zh) 2016-01-28 2016-01-28 一种新型分布式存储缓存加速方法

Country Status (1)

Country Link
CN (1) CN107015758A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111208953A (zh) * 2020-04-16 2020-05-29 广东睿江云计算股份有限公司 一种分布式存储方法及其装置
CN117573043A (zh) * 2024-01-17 2024-02-20 济南浪潮数据技术有限公司 分布式存储数据的传输方法、装置、系统、设备和介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8093868B2 (en) * 2008-09-04 2012-01-10 International Business Machines Corporation In situ verification of capacitive power support
CN102638584A (zh) * 2012-04-20 2012-08-15 青岛海信传媒网络技术有限公司 数据分布缓存方法及系统
CN104021093A (zh) * 2014-06-24 2014-09-03 浪潮集团有限公司 一种基于nvdimm的存储设备的掉电保护方法
US20150279463A1 (en) * 2014-03-31 2015-10-01 Dell Products, L.P. Adjustable non-volatile memory regions of dram-based memory module

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8093868B2 (en) * 2008-09-04 2012-01-10 International Business Machines Corporation In situ verification of capacitive power support
CN102638584A (zh) * 2012-04-20 2012-08-15 青岛海信传媒网络技术有限公司 数据分布缓存方法及系统
US20150279463A1 (en) * 2014-03-31 2015-10-01 Dell Products, L.P. Adjustable non-volatile memory regions of dram-based memory module
CN104021093A (zh) * 2014-06-24 2014-09-03 浪潮集团有限公司 一种基于nvdimm的存储设备的掉电保护方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111208953A (zh) * 2020-04-16 2020-05-29 广东睿江云计算股份有限公司 一种分布式存储方法及其装置
CN117573043A (zh) * 2024-01-17 2024-02-20 济南浪潮数据技术有限公司 分布式存储数据的传输方法、装置、系统、设备和介质

Similar Documents

Publication Publication Date Title
CN102662751B (zh) 一种提高基于热迁移虚拟机系统可用性的方法
CN101354633B (zh) 提高虚拟存储系统写效率的方法及虚拟存储系统
CN102098344B (zh) 一种缓存管理中同步版本方法和装置及其缓存管理系统
CN102331993B (zh) 分布式数据库的数据迁移方法和分布式数据库迁移系统
CN102541983A (zh) 一种分布式文件系统中多客户端缓存同步的方法
CN103500146A (zh) 虚拟机磁盘存储数据迁移方法和系统
CN103077132B (zh) 一种高速缓存处理方法及协议处理器高速缓存控制单元
TWI571749B (zh) 備份系統及其備份方法
CN103793181B (zh) 一种多层关联存储架构的数据同步方法及数据同步系统
CN102521330A (zh) 一种桌面虚拟化环境下的镜像分布式存储方法
US10609141B2 (en) Methods and apparatuses for cluster switching
CN107621927B (zh) 一种基于超融合系统的纵向扩展方法及其装置
CN102768645A (zh) 混合缓存的固态硬盘预取方法和固态硬盘ssd
CN103049224A (zh) 将数据导入物理磁带的方法、装置和系统
CN103795801A (zh) 一种基于实时应用集群的元数据集群设计方法
CN104881248A (zh) 面向ssd的文件系统中自适应直接io加速方法
CN105468297A (zh) 一种云存储系统内主从设备数据快速同步的方法
CN107015758A (zh) 一种新型分布式存储缓存加速方法
CN103617195A (zh) 一种用于MySQL数据库的数据同步系统和方法
CN108388524A (zh) 用于缓存数据的方法和设备
CN103500147A (zh) 一种嵌入分层存储的pb级集群存储系统的方法
CN107301021A (zh) 一种利用ssd缓存对lun进行加速的方法和装置
JP2017510902A5 (zh)
CN101308472B (zh) 镜像卷的初始同步方法和控制装置
CN106980475A (zh) 一种分布式集群系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20170804

WD01 Invention patent application deemed withdrawn after publication