CN105872040B - 一种利用网关节点缓存优化分布式块存储写性能的方法 - Google Patents

一种利用网关节点缓存优化分布式块存储写性能的方法 Download PDF

Info

Publication number
CN105872040B
CN105872040B CN201610188055.9A CN201610188055A CN105872040B CN 105872040 B CN105872040 B CN 105872040B CN 201610188055 A CN201610188055 A CN 201610188055A CN 105872040 B CN105872040 B CN 105872040B
Authority
CN
China
Prior art keywords
data
write
node
caching
request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610188055.9A
Other languages
English (en)
Other versions
CN105872040A (zh
Inventor
万继光
李大平
张和泉
谭志虎
谢长生
张钰彪
徐鹏
刘丽琼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huazhong University of Science and Technology
Original Assignee
Huazhong University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huazhong University of Science and Technology filed Critical Huazhong University of Science and Technology
Priority to CN201610188055.9A priority Critical patent/CN105872040B/zh
Publication of CN105872040A publication Critical patent/CN105872040A/zh
Application granted granted Critical
Publication of CN105872040B publication Critical patent/CN105872040B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/56Provisioning of proxy services
    • H04L67/568Storing data temporarily at an intermediate stage, e.g. caching
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本发明公开了一种利用网关节点缓存优化分布式块存储写性能的方法,具体包括:缓存经过网关节点的数据,并采用计数表对各数据块的访问次数进行计数;对于用户请求,若为读请求,则在读请求命中缓存时从缓存读取数据,在读请求未命中缓存时从本地节点或者副本节点读取数据;并将该请求访问过的节点计数加一;若为写请求,则先写网关节点的缓存,然后在该写请求对应的其他副本节点上做日志备份,用于掉电恢复;在提高系统性能的同时还保证了数据的可靠性;由于写操作除了写缓存以外只需要根据设定在磁盘上备份日志,不需要根据请求地址在磁盘上进行寻址操作,节省了磁盘的寻址时间,使得分布式块存储系统的写性能得到了提升。

Description

一种利用网关节点缓存优化分布式块存储写性能的方法
技术领域
本发明属于数据存储领域,更具体地,涉及一种利用网关节点缓存优化分布式块存储写性能的方法。
背景技术
在传统的网络存储系统中采用集中的存储服务器来存放所有的数据,存储服务器成为系统性能的瓶颈,不能满足大规模存储应用的需要。分布式网络存储系统采用可扩展的系统结构,将数据分散存储在多台独立的设备上,利用多台存储服务器来分担存储负荷,利用位置服务器来定位存储信息,不但提高了系统的可用性、可靠性和存取效率,而且还易于扩展。
在分布式存储系统中为了保证数据的安全性,每份数据会有多个副本存储在多个系统中的多个数据节点;多副本在提高数据安全性的同时,会引起数据一致性的问题。
现有技术中,分布式块存储系统的每个节点处于等同的地位,都可以充当网关的角色,每次写数据到目标节点以后,还需要在目标节点的网关处计算出所有副本节点的节点号并发送写请求到所有副本节点,当所有副本均更新成功时写请求才算成功,而读数据只需要从一处成功返回即可;对缓存而言,其在网关处采用了读写缓存,缓存远程或者本地结点的部分数据;而其中写操作分为写直达法和写回法:写直达法需要寻址且写多个副本,相对较慢,但可靠性比较高;写回法只需要把写请求中的数据写到第一个副本节点的网关缓存中即可,相对比较快,但当缓存掉电丢失,则会永久性损失这部分数据,可靠性得不到保障。我们需要一种方案能够综合两者的优点以在提高分布式块存储系统写性能的同时兼顾系统的可靠性。
发明内容
针对现有技术的以上缺陷或改进需求,本发明提供了一种利用网关节点缓存优化分布式块存储写性能的方法,其目的在于利用硬件资源提升分布式块存储系统的写性能。
为实现上述目的,按照本发明的一个方面,提供了一种利用网关节点缓存优化分布式块存储写性能的方法,包括如下步骤:
(1)对分布式块存储系统中流经网关节点缓存处的数据进行缓存处理,并采用计数表对各数据块的访问次数进行计数;
(2)当接收到来自客户端或者其他节点的请求,在计数表中更新该请求对应的数据块的访问计数,并判断请求类型,如果是读请求,则进入步骤(3),如果是写请求,则进入步骤(4);
(3)根据请求所经过的节点数目,判断请求是否已经过所有副本节点,若是,则返回步骤(2);
若否,则在读请求命中缓存时从缓存读取数据,在读请求未命中缓存时从本地节点或者副本节点读取数据;并将该请求访问过的节点计数加一,返回步骤(2);
(4)若写请求命中缓存,则直接用写请求的数据覆盖旧的数据块;否则将新数据写入缓存,并进入步骤(5);
(5)在写请求对应的其他副本节点的磁盘上做日志备份,用于掉电恢复,并进入步骤(2)。
优选地,各磁盘上预留有日志区,当日志区存满时,将其对应的来源节点上的缓存内的脏数据进行倒盘,将缓存清空,并删除该日志区内的内容,写入新日志。
优选地,上述利用网关节点缓存优化分布式块存储写性能的方法,其步骤(3)具体包括以下子步骤:
(3-1)判断请求所访问过的节点数目是否大于等于预设的副本数,若是,则表明没有所需数据,返回步骤(2);若否,则进入步骤(3-2);
(3-2)判断该读请求是否命中缓存,若是,则从缓存中读取数据,并返回到步骤(2);若否,则进入步骤(3-3);
(3-3)查看本地节点磁盘中是否存在所需数据,若是,则从所述本地节点磁盘读取数据,并进入步骤(3-4);若否,则把读请求转到该读请求对应的副本节点读取数据,并将被访问的副本节点的计数加一,返回步骤(2);
(3-4)判断缓存空间是否已满,若否,则将读取到的数据缓存在本节点缓存中,并返回步骤(2);若是,则进入步骤(3-5);
(3-5)根据计数表使用LRU算法(Least Recently Used,近期最少使用算法)判断该本地节点缓存中拟被替换的数据是否为脏数据,若否,则用从硬盘读取得的新数据覆盖所述拟被替换的数据;若是,则先将脏数据倒盘到该脏数据对应的所有副本节点的磁盘上去,再进行数据覆盖,并返回步骤(2)。
优选地,上述利用网关节点缓存优化分布式块存储写性能的方法,其步骤(4)具体包括以下子步骤:
(4-1)判断写请求是否命中缓存,若是,
(4-1)判断写请求是否命中缓存,若是,则进行写操作,用写请求的新数据覆盖旧的数据块,进入步骤(5);若否,则进入步骤(4-2);
(4-2)判断缓存空间是否足够,若是,则把新的写数据写入缓存,若否,则进入步骤(4-3);
(4-3)根据计数表使用LRU算法判断该本地节点缓存中拟被替换的数据是否为脏数据,若否,则用写请求中的新数据覆盖拟被替换的数据;若是,则先将脏数据倒盘到该脏数据对应的所有副本节点的磁盘上去,再进行数据覆盖,并进入步骤(5)。
优选地,上述利用网关节点缓存优化分布式块存储写性能的方法,其步骤(5)具体包括以下子步骤:
(5-1)通过元数据信息,寻找写请求对应的副本节点;
(5-2)判断副本节点磁盘上对应第一个副本节点的日志区是否已满,若否,则将写请求记录进该日志区,并返回步骤(2);若是,进入步骤(5-3);
(5-3)将上述日志区对应的来源数据节点,即第一个副本节点上的缓存区里的脏数据倒盘到该脏数据对应的其他副本节点的磁盘上,并对该缓存区进行清空操作;
(5-4)清空已满的日志区,在清空后的日志区写入新日志,并返回步骤(2)。
总体而言,通过本发明所构思的以上技术方案与现有技术相比,能够取得以下有益效果:
(1)本发明提供的一种利用网关节点缓存优化分布式块存储写性能的方法,将现有技术中的写操作进行优化,每次写操作除了写缓存以外都只在磁盘上写两份日志,不需要根据请求地址在磁盘上进行寻址操作,节省了磁盘的寻址时间,使得写性能得到了提升;
(2)本发明提供的一种利用网关节点缓存优化分布式块存储写性能的方法,由于每个写缓存的数据都在另外两个节点上有两个日志备份,在提供写性能的同时保证了数据的可靠性。
附图说明
图1是本发明实施例所基于的分布式块存储系统的结构示意图;
图2是本发明实施例提供的利用网关节点缓存优化分布式块存储写性能的方法的流程图;
图3是本发明实施例中步骤(3)的细化流程图;
图4是本发明实施例中步骤(4)的细化流程图;
图5是实施例中节点上数据结构图;
图6是本发明实施例中步骤(5)的工作过程示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。此外,下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
本发明提出的利用网关缓存来提高系统写性能的方法,其总体思路在于:对所有写缓存的数据选择两个远程节点做两个日志备份,在系统缓存丢失的时候用作恢复数据;在日志区快满时先对缓存区进行倒盘操作然后再清空日志区,以此来在保证数据可靠性的同时提高系统的写性能。
本发明实施例基于图1所示的一种包括多个节点,并且每个节点都由缓存和磁盘构成的分布式块存储系统;其中,磁盘分为日志区和数据区;实施例提供的利用网关节点缓存优化分布式块存储写性能的方法,其流程如图2所示,具体包括以下步骤:
(1)对分布式块存储系统中流经网关节点缓存处的数据进行缓存处理,并采用计数表对各数据块的访问次数进行计数;
(2)当接收到来自客户端或者其他节点的请求,在计数表中更新该请求对应的数据块的访问计数,并判断请求是读请求还是写请求,如果是读请求,则进入步骤(3),如果是写请求,则进入步骤(4);
(3)根据该请求所经过的节点数目,判定请求是否已经经过所有副本节点,是则返回步骤(2);
若否,则在读请求命中缓存时从缓存读取数据,在读请求未命中缓存时从本地节点或者副本节点读取数据;并将该请求访问过的节点计数加一,返回步骤(2);
实施例中,步骤(3)的流程如图3所示,具体如下:
(3-1)判断该请求所访问过的节点数目是否大于等于默认副本数3,若是,则表明没有所需数据,返回步骤(2);若否,则进入步骤(3-2);
(3-2)判断该读请求是否命中缓存,若是,则从缓存中读取数据,并返回到步骤(2);若否,则进入步骤(3-3);
(3-3)查看本地节点磁盘中是否存在所需数据,若是,则从所述本地节点磁盘读取数据,并进入步骤(3-4);若否,则把读请求转到该读请求对应的其它副本节点读取数据,并将被访问的副本节点的计数加一,返回步骤(2);
(3-4)判定缓存空间是否已满,若否,则将读取到的数据缓存在本节点缓存中,并且直接返回步骤(2);若是,则进入步骤(3-5);
(3-5)根据计数表使用LRU算法判断该本地节点缓存中拟被替换的数据是否为脏数据,若否,则用从硬盘读取得的新数据覆盖所述拟被替换的数据;若是,则先将脏数据倒盘到该脏数据对应的所有副本节点的磁盘上去,再进行数据覆盖,并返回步骤(2);
(4)若写请求命中缓存,则直接用写请求的数据覆盖旧的数据块,否则直接把新的数据写入缓存,当缓存空间不够需要进行替换,则要先把被替换的脏数据进行倒盘,转入步骤(5);
实施例中,步骤(4)的流程如图4所示,具体包括以下子步骤:
(4-1)判断该写请求是否命中缓存,若是,则用写请求所对应的新数据直接写覆盖到旧的数据块,进入步骤(5);若否,则进入步骤(4-2);
(4-2)判断缓存空间是否足够,若是,则把新的写数据写入缓存,若否,则进入步骤(4-3);
(4-3)根据计数表使用LRU算法判断该本地节点缓存中拟被替换的数据是否为脏数据,若否,则用写请求中的新数据覆盖拟被替换的数据;若是,则先将脏数据倒盘到该脏数据对应的所有副本节点的磁盘上去,再进行数据覆盖,并进入步骤(5);
如图5所示,是节点中的数据结构分布图,每个节点上的磁盘都会分出一部分区域作为日志区;实施例采用的是三副本结构,每次写缓存时候在其他两个副本节点上做日志备份;那么每个节点上的日志区中有且仅有两个节点缓存中的数据日志备份,为了后续清理方便,把两个节点的日志备份分开管理,先清理日志区满了的节点;
(5)在写请求对应的其他两个副本节点的磁盘上做日志备份,用于掉电恢复;
每个磁盘上预留有一部分区域做日志区,且将日志区根据所存来源节点的不同划分为两个子日志区;
随着读写次数增加,日志数据越来越大,需要定期清理日志区;当某个日志区存满时,把该日志区对应的来源节点上的缓存全部清空,清空之前要先把脏数据进行倒盘,之后删除该日志区,然后返回步骤(2);
实施例中,步骤(5)的流程如图6所示,具体包括以下子步骤:
(5-1)通过元数据信息,先找到写请求对应的第二个副本节点2;
(5-2)判断副本节点2磁盘上对应第一个副本节点1的日志区1是否已满,若否,则将写请求记录进日志区1,返回步骤(2),若是,进入步骤(5-3);
(5-3)将该日志区1对应的第一个副本节点1上的缓存区里的脏数据倒盘到该脏数据对应的三个副本节点的磁盘上去,并对节点1上的缓存区进行清空操作;
(5-4)清空上述节点2上已满的日志区1,并将新的日志写入清空后的日志区,返回步骤(2)。
本实施例中,每次写操作在写完缓存之后仅需要再在两个节点的磁盘上写两个日志,节省了磁盘的寻址时间,提高了系统的写性能,并且因为采用了两个磁盘日志对缓存中的数据做备份,也保证了数据的可靠性。
本领域的技术人员容易理解,以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (5)

1.一种利用网关节点缓存优化分布式块存储写性能的方法,其特征在于,包括如下步骤:
(1)对分布式块存储系统中流经网关节点缓存处的数据进行缓存处理,并采用计数表对各数据块的访问次数进行计数;
(2)当接收到节点的请求,在计数表中更新所述请求对应的数据块的访问计数,并判断请求类型,如果是读请求,则进入步骤(3),如果是写请求,则进入步骤(4);
(3)根据所述请求所经过的节点数目,判断请求是否已经过所有副本节点,若是,则返回步骤(2);
若否,则在读请求命中缓存时从缓存读取数据,在读请求未命中缓存时从本地节点或者副本节点读取数据;并将所述读请求访问过的节点计数加一,返回步骤(2);
(4)判定写请求是否命中缓存,若是,则用写请求的数据覆盖旧数据块;若否,则将新数据写入缓存,并进入步骤(5);
(5)在写请求对应的其他副本节点的磁盘上做日志备份,用于掉电恢复,并进入步骤(2)。
2.如权利要求1所述的利用网关节点缓存优化分布式块存储写性能的方法,其特征在于,各磁盘上预留有日志区,当日志区存满时,将所述日志区对应的来源节点上的缓存内的脏数据进行倒盘,将所述缓存清空,并删除所述日志区内的内容,写入新日志。
3.如权利要求1或2所述的利用网关节点缓存优化分布式块存储写性能的方法,其特征在于,所述步骤(3)具体包括以下子步骤:
(3-1)判断读请求所访问过的节点数目是否大于或等于预设的副本数,若是,则返回步骤(2);若否,则进入步骤(3-2);
(3-2)判断所述读请求是否命中缓存,若是,则从缓存中读取数据,并返回到步骤(2);若否,则进入步骤(3-3);
(3-3)查看本地节点磁盘中是否存在所需数据,若是,则从本地节点磁盘读取数据,并进入步骤(3-4);若否,则把读请求转到所述读请求对应的副本节点读取数据,并将被访问的副本节点的计数加一,返回步骤(2);
(3-4)判断缓存空间是否已满,若否,则将读取到的数据缓存在本节点缓存中,并返回步骤(2);若是,则进入步骤(3-5);
(3-5)根据计数表使用LRU算法判断该本地节点缓存中拟被替换的数据是否为脏数据,若否,则用从硬盘读取得的新数据覆盖所述拟被替换的数据;若是,则先将脏数据倒盘到该脏数据对应的所有副本节点的磁盘上去,再进行数据覆盖,并返回步骤(2)。
4.如权利要求1或2所述的利用网关节点缓存优化分布式块存储写性能的方法,其特征在于,所述步骤(4)具体包括以下子步骤:
(4-1)判断写请求是否命中缓存,若是,则进行写操作,用写请求的新数据覆盖旧的数据块,进入步骤(5);若否,则进入步骤(4-2);
(4-2)判断缓存空间是否足够,若是,则将新的写数据写入缓存,若否,则进入步骤(4-3);
(4-3)根据计数表使用LRU算法判断该本地节点缓存中拟被替换的数据是否为脏数据,若否,则用写请求中的新数据覆盖拟被替换的数据;若是,则先将脏数据倒盘到该脏数据对应的所有副本节点的磁盘上去,再进行数据覆盖,并进入步骤(5)。
5.如权利要求1或2所述的利用网关节点缓存优化分布式块存储写性能的方法,其特征在于,所述步骤(5)具体包括以下子步骤:
(5-1)通过元数据信息,寻找写请求对应的副本节点;
(5-2)判断副本节点磁盘上对应第一个副本节点的日志区是否已满,若否,则将写请求记录进该日志区,并返回步骤(2);若是,进入步骤(5-3);
(5-3)将上述日志区对应的来源数据节点,即第一个副本节点上的缓存区里的脏数据倒盘到该脏数据对应的其他副本节点的磁盘上,并对该缓存区进行清空操作;
(5-4)清空已满的日志区,在清空后的日志区写入新日志,并返回步骤(2)。
CN201610188055.9A 2016-03-30 2016-03-30 一种利用网关节点缓存优化分布式块存储写性能的方法 Active CN105872040B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610188055.9A CN105872040B (zh) 2016-03-30 2016-03-30 一种利用网关节点缓存优化分布式块存储写性能的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610188055.9A CN105872040B (zh) 2016-03-30 2016-03-30 一种利用网关节点缓存优化分布式块存储写性能的方法

Publications (2)

Publication Number Publication Date
CN105872040A CN105872040A (zh) 2016-08-17
CN105872040B true CN105872040B (zh) 2018-11-30

Family

ID=56626349

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610188055.9A Active CN105872040B (zh) 2016-03-30 2016-03-30 一种利用网关节点缓存优化分布式块存储写性能的方法

Country Status (1)

Country Link
CN (1) CN105872040B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109164976B (zh) * 2016-12-21 2021-12-31 北京忆恒创源科技股份有限公司 利用写缓存优化存储设备性能
CN107229535B (zh) * 2017-05-23 2020-01-21 杭州宏杉科技股份有限公司 数据块的多副本存储方法、存储设备、数据读取方法
CN107368608A (zh) * 2017-08-07 2017-11-21 杭州电子科技大学 基于arc替换算法的hdfs小文件缓存管理方法
CN107870875A (zh) * 2017-08-09 2018-04-03 成都萌想科技有限责任公司 一种基于分布式内存可定制智能数据缓存方法
CN109947727B (zh) * 2017-08-15 2023-06-13 腾讯科技(深圳)有限公司 数据处理方法、装置、计算机设备和存储介质
WO2019109209A1 (zh) * 2017-12-04 2019-06-13 华为技术有限公司 一种存储器数据替换方法、服务器节点和数据存储系统
CN108491160B (zh) * 2018-03-13 2021-11-26 北京奇艺世纪科技有限公司 一种数据写入方法及装置
CN109684338A (zh) * 2018-11-20 2019-04-26 深圳花儿数据技术有限公司 一种存储系统的数据更新方法
CN111309262B (zh) * 2020-02-16 2021-01-29 西安奥卡云数据科技有限公司 一种分布式存储缓存读取和写入方法
CN111913658B (zh) * 2020-07-13 2021-08-03 华中科技大学 一种提升云对象存储系统中负载性能的方法及系统
CN112685337B (zh) * 2021-01-15 2022-05-31 浪潮云信息技术股份公司 一种存储集群中分级缓存读写数据的方法
CN112799781B (zh) * 2021-01-20 2021-09-03 广州市品高软件股份有限公司 一种基于对象存储协议的块存储池访问方法
CN113254415B (zh) * 2021-05-19 2022-11-04 浪潮商用机器有限公司 一种分布式文件系统读请求处理方法及装置
CN114168075B (zh) * 2021-11-29 2024-05-14 华中科技大学 基于数据关联性提升负载访问性能的方法、设备及系统
CN113986148B (zh) * 2021-12-27 2022-03-22 苏州浪潮智能科技有限公司 一种数据读取方法、装置及相关设备
CN114546276B (zh) * 2022-02-23 2024-04-30 华云数据控股集团有限公司 高可用的数据存储读写方法、系统、装置及设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102770853A (zh) * 2009-12-23 2012-11-07 思杰系统有限公司 用于在多核系统中管理大型高速缓存服务的系统和方法
CN104008075A (zh) * 2014-05-26 2014-08-27 华中科技大学 一种分布式存储系统请求的处理方法
CN104657500A (zh) * 2015-03-12 2015-05-27 浪潮集团有限公司 一种基于key-value键值对的分布式存储方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102770853A (zh) * 2009-12-23 2012-11-07 思杰系统有限公司 用于在多核系统中管理大型高速缓存服务的系统和方法
CN104008075A (zh) * 2014-05-26 2014-08-27 华中科技大学 一种分布式存储系统请求的处理方法
CN104657500A (zh) * 2015-03-12 2015-05-27 浪潮集团有限公司 一种基于key-value键值对的分布式存储方法

Also Published As

Publication number Publication date
CN105872040A (zh) 2016-08-17

Similar Documents

Publication Publication Date Title
CN105872040B (zh) 一种利用网关节点缓存优化分布式块存储写性能的方法
US7711916B2 (en) Storing information on storage devices having different performance capabilities with a storage system
KR101717644B1 (ko) 고체-상태 저장 디바이스 상에서 데이터를 캐싱하는 장치, 시스템, 및 방법
US9442955B1 (en) Managing delete operations in files of file systems
US9311333B1 (en) Managing files of file systems
CN103678523B (zh) 分布式高速缓存cache数据访问方法和装置
CN110750507B (zh) 面向dfs的全局命名空间下的持久客户端缓存方法及系统
CN106648464B (zh) 基于云存储的多节点混合块缓存数据读写方法及系统
CN106844740B (zh) 基于内存对象缓存系统的数据预读方法
CN105549905A (zh) 一种多虚拟机访问分布式对象存储系统的方法
CN108647151A (zh) 一种全闪系统元数据落盘方法、装置、设备及存储介质
CN102694828B (zh) 一种分布式缓存系统数据存取的方法及装置
CN110188080A (zh) 基于客户端高效缓存的远程文件数据访问性能优化方法
WO2012116369A2 (en) Apparatus, system, and method for managing contents of a cache
CN107888687B (zh) 一种基于分布式存储系统的代理客户端存储加速方法及系统
CN110321301A (zh) 一种数据处理的方法及装置
CN110232049A (zh) 一种元数据缓存管理方法和装置
CN106528451B (zh) 针对小文件的二级缓存预取的云存储框架及构建方法
CN110147331A (zh) 缓存数据处理方法、系统及可读存储介质
CN103986779B (zh) 一种应用数据传输方法、装置及终端设备
CN106095817A (zh) 基于微内核的可扩展文件系统及文件访问方法
CN103501339B (zh) 元数据处理方法及元数据服务器
CN110032543A (zh) 一种存储文件系统的管理方法
CN106062703B (zh) 存储系统
CN109002400A (zh) 一种内容感知型计算机缓存管理系统及方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant