CN103605484B - 一种数据存储的方法和存储服务器 - Google Patents

一种数据存储的方法和存储服务器 Download PDF

Info

Publication number
CN103605484B
CN103605484B CN201310611665.1A CN201310611665A CN103605484B CN 103605484 B CN103605484 B CN 103605484B CN 201310611665 A CN201310611665 A CN 201310611665A CN 103605484 B CN103605484 B CN 103605484B
Authority
CN
China
Prior art keywords
grade
hard
disk
hard disk
capacity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310611665.1A
Other languages
English (en)
Other versions
CN103605484A (zh
Inventor
林大云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201310611665.1A priority Critical patent/CN103605484B/zh
Publication of CN103605484A publication Critical patent/CN103605484A/zh
Priority to EP14866029.3A priority patent/EP3059670B1/en
Priority to PCT/CN2014/075411 priority patent/WO2015078132A1/zh
Priority to HUE14866029A priority patent/HUE042885T2/hu
Priority to US15/162,064 priority patent/US9733835B2/en
Application granted granted Critical
Publication of CN103605484B publication Critical patent/CN103605484B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • G06F3/0607Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0631Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0632Configuration or reconfiguration of storage systems by initialisation or re-initialisation of storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/0644Management of space entities, e.g. partitions, extents, pools
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647Migration mechanisms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653Monitoring storage devices or systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0689Disk arrays, e.g. RAID, JBOD

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例公开了一种数据存储的方法和存储服务器,其中所述方法包括:检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据。采用本发明,可支持在海量存储中的硬盘容量异构。

Description

一种数据存储的方法和存储服务器
技术领域
本发明涉及数据存储领域,尤其涉及一种数据存储的方法和存储服务器。
背景技术
海量分布式存储系统大多以对象作为基本存储形式,对象是数据和自描述信息的集合,是数据在磁盘上存储的基本单元,而实现这些对象的分散性分布则通常采用一致性哈希算法。虽然一致性哈希算法保证了系统数据存储的平衡性、分散性、容错性以及可扩展性等,但是一致性哈希算法并不是保证绝对的平衡,尤其在物理节点较少的情况下,对象并不能被均匀的映射到各个节点上。为了解决这种情况,一致性哈希算法引入了虚拟节点的概念,虚拟节点是物理节点在环形空间的复制品,一个物理节点对应了若干个虚拟节点,通过增加扩展虚拟节点数量,使得算法的平衡性得到较大的提升。
在现有技术中,海量存储系统一般均采用相同容量的硬盘来组建存储集群,为每个物理节点分配相同数量的虚拟节点,使得各个节点在存储容量上尽可能保持同步增长。
随着硬盘技术的不断发展,单盘的容量得到不断的提升,海量存储系统在扩容、部件更换时不可避免的会面临硬盘容量异构的问题,但是现有的存储方案无法支持在海量存储中的硬盘容量异构,从而降低产品的使用体验。
发明内容
本发明实施例所要解决的技术问题在于,提供一种数据存储的方法和存储服务器,可支持在海量存储中的硬盘容量异构。
本发明第一方面提供了一种数据存储的方法,包括:
检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据。
在第一种可能的实现方式中,在所述检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量之前,还包括:
在系统初始化时,对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点;
其中,所述虚拟节点用于管理所存储的数据。
结合第一方面或第一方面的第一种可能的实现方式,在第二种可能的实现方式中,在所述检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量之后,还包括:
检测在所述初始容量等级对应硬盘的实际使用量超过预置的使用阈值的硬盘数量是否达到预置的数量阈值;
若检测达到所述数量阈值,则确定所述初始容量等级对应硬盘超限。
结合第一方面,或第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,在第三种可能的实现方式中,所述当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据,包括:
当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例;
根据所述迁移比例将低于所述次高容量等级的硬盘容量等级所对应硬盘中的所述虚拟节点,迁移至高于或等于所述次高容量等级的硬盘容量等级所对应的硬盘,所述虚拟节点携带有所存储的数据。
结合第一方面,或第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,在第四种可能的实现方式中,还包括:
当未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,发送扩容提示信息。
结合第一方面,或第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,或第一方面的第四种可能的实现方式,在第五种可能的实现方式中,还包括:
当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,发送扩容提示信息。
结合第一方面,或第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,或第一方面的第四种可能的实现方式,或第一方面的第五种可能的实现方式,在第六种可能的实现方式中,还包括:
在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移。
结合第一方面,或第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,或第一方面的第四种可能的实现方式,或第一方面的第五种可能的实现方式,或第一方面的第六种可能的实现方式,在第七种可能的实现方式中,还包括:
当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,对小于所述比例阈值的硬盘容量等级进行标识;
更新具有标识的硬盘容量等级以便于提升数据迁移性能。
本发明第二方面提供了一种存储服务器,包括:
使用量检测模块,用于检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
查找模块,用于当根据所述使用量检测模块检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
确定迁移模块,用于当所述查找模块查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据。
在第一种可能的实现方式中,还包括:
分配模块,用于在系统初始化时,对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点;
其中,所述虚拟节点用于管理所存储的数据。
结合第二方面或第二方面的第一种可能的实现方式,在第二种可能的实现方式中,还包括:
数量检测模块,用于检测在所述初始容量等级对应硬盘的实际使用量超过预置的使用阈值的硬盘数量是否达到预置的数量阈值;
确定模块,用于若检测达到所述数量阈值,则确定所述初始容量等级对应硬盘超限。
结合第二方面,或第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,在第三种可能的实现方式中,所述确定迁移模块包括:
比例确定单元,用于当所述查找模块查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例;
迁移单元,用于根据所述迁移比例将低于所述次高容量等级的硬盘容量等级所对应硬盘中的所述虚拟节点,迁移至高于或等于所述次高容量等级的硬盘容量等级所对应的硬盘,所述虚拟节点携带有所存储的数据。
结合第二方面,或第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,在第四种可能的实现方式中,还包括:
第一发送模块,用于当未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,发送扩容提示信息。
结合第二方面,或第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,或第二方面的第四种可能的实现方式,在第五种可能的实现方式中,还包括:
第二发送模块,用于当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,发送扩容提示信息。
结合第二方面,或第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,或第二方面的第四种可能的实现方式,或第二方面的第五种可能的实现方式,在第六种可能的实现方式中,还包括:
设置模块,用于在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移。
结合第二方面,或第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,或第二方面的第四种可能的实现方式,或第二方面的第五种可能的实现方式,或第二方面的第六种可能的实现方式,在第七种可能的实现方式中,还包括:
标识模块,用于当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,对小于所述比例阈值的硬盘容量等级进行标识;
更新模块,用于更新具有标识的硬盘容量等级以便于提升数据迁移性能。
本发明实施例通过根据硬盘实际容量划分出不同的硬盘容量等级,并在初始容量等级对应硬盘超限时对各个硬盘中携带有存储数据的虚拟节点进行迁移,使得不仅可以支持在海量存储中的硬盘容量异构,同时由于虚拟节点中的数据是按照迁移比例进行迁移的,所以还可以充分利用不同容量硬盘的存储空间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种数据存储的方法的流程示意图;
图2为本发明实施例提供的另一种数据存储的方法的流程示意图;
图3为本发明实施例提供的又一种数据存储的方法的流程示意图;
图4为本发明实施例提供的又一种数据存储的方法的流程示意图;
图5为本发明实施例提供的其中一种更新容量等级的方法的流程示意图;
图6为本发明实施例提供的一种存储服务器的结构示意图;
图7为本发明实施例提供的另一种存储服务器的结构示意图;
图8为本发明实施例提供的一种确定迁移模块的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。
请参见图1,为本发明实施例提供的一种数据存储的方法的流程示意图,所述方法包括:
S101,检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
具体的,所述硬盘容量等级是根据硬盘实际容量进行划分的。例如,某个分布式存储系统中有1TB、2TB、3TB这三种容量的硬盘,那么可以配置1TB容量硬盘的硬盘容量等级为等级1,2TB容量硬盘的硬盘容量等级为等级2,3TB容量硬盘的硬盘容量等级为等级3。其中,所述初始容量等级是在已配置的硬盘容量等级中所选择的,例如,在系统初始化时,在已配置的硬盘容量等级中选择最小的硬盘容量等级作为初始容量等级,即在等级1至等级3的硬盘容量等级中,选择等级1的硬盘容量等级作为初始容量等级。在确定了所述初始容量等级后,可以检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量。例如,若初始容量等级为等级1的硬盘容量等级,则检测等级1的硬盘容量等级所对应的硬盘中已存储数据的容量大小。其中,所述硬盘可以包括固态硬盘、机械硬盘、混合硬盘等等。
S102,当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
具体的,根据检测到的所述实际使用量可以检测所述初始容量等级对应硬盘是否超限。例如,初始容量等级为等级1的硬盘容量等级,且等级1的硬盘容量等级所对应硬盘的数量为10个,当检测到所述实际使用量超过硬盘容量50%的硬盘的数量达到8个时,可确定所述初始容量等级对应硬盘超限。当根据检测到的所述实际使用量确定出所述初始容量等级对应的硬盘超限时,可以查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘。例如,当存储系统中的硬盘可以分为等级1、等级2、等级3,且初始容量等级为等级1的硬盘容量等级时,可以查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘,即所述次高容量等级为等级2的硬盘容量等级对应的硬盘。
S103,当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据;
具体的,当查找到所述次高容量等级对应的硬盘时,可以根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据。即将低硬盘容量等级的硬盘上的携带有存储数据的虚拟节点迁移至高硬盘容量等级的硬盘上,使得可以同时对所述虚拟节点以及存储于所述虚拟节点中的数据进行迁移。并且迁移后的数据仍可以映射于与原来对应的虚拟节点,从而可以继续正常的对迁移后的数据进行存储和提取。将低硬盘容量等级的硬盘中的虚拟节点以及存储于所述虚拟节点中的数据迁移至高硬盘容量等级的硬盘中,可以减少低硬盘容量等级的硬盘的存储负担,并充分的利用了高硬盘容量等级的硬盘的存储空间。另外,还可以使高硬盘容量等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,硬盘实际容量分别为1TB、2TB、3TB,每种硬盘容量等级对应的硬盘数量相同,在系统初始化时,为每个硬盘容量等级所对应的硬盘分配48个虚拟节点,且所述初始容量等级为等级1的硬盘容量等级。当所述初始容量等级对应的硬盘超限时,将等级2的硬盘容量等级作为次高容量等级,并根据初始容量等级和次高容量等级确定虚拟节点的迁移比例,即等级1、等级2以及等级3的硬盘容量等级对应硬盘的迁移比例为1:2:2。其中高于次高容量等级的硬盘所获得的虚拟节点数量与次高容量等级的硬盘所获得虚拟节点数量相同,此时,等级1所对应硬盘中的虚拟节点按照1:2:2的迁移比例迁移至等级2和等级3的硬盘中。由于每个虚拟节点中携带有相同大小的数据,所以在虚拟节点迁移结束后,等级1、等级2以及等级3对应硬盘中所存储的数据大小比例也为1:2:2。此时,等级1对应硬盘中虚拟节点的数量为29个,等级2对应硬盘中虚拟节点的数量为57个,等级3对应硬盘中虚拟节点的数量为58个。在完成虚拟节点的迁移之后,还可以将所述次高容量等级作为初始容量等级以进行虚拟节点的迁移,即在等级2的硬盘容量等级对应的硬盘超限时,确定等级1至等级3的硬盘的虚拟节点的迁移比例为1:2:3。使得在虚拟节点迁移结束后,等级1至等级3对应的硬盘中所存储的数据大小和虚拟节点的数量的比例均为1:2:3,即等级1对应的硬盘中虚拟节点的数量为24个,等级2对应的硬盘中虚拟节点的数量为48个,等级3对应的硬盘中虚拟节点的数量为64个。
又例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,硬盘实际容量分别为1TB、2TB、3TB,且每种硬盘容量等级对应的硬盘数量不相同,等级1对应的硬盘数量为20个,等级2对应的硬盘数量为30个,等级3对应的硬盘数量为40个。在系统初始化时,为每个硬盘容量等级所对应的硬盘分配48个虚拟节点,当等级1对应的硬盘超限,且等级2为次高容量等级时,所述迁移比例仍然为1:2:2,且在虚拟节点迁移结束后,等级1对应的硬盘中虚拟节点的数量为27个,等级2对应的硬盘中虚拟节点的数量为54个,等级3对应的硬盘中虚拟节点的数量为54个。
又例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,若等级1对应的硬盘容量为1.5TB,等级2对应的硬盘容量为2.5TB,等级3对应的硬盘容量为3.5TB,且等级1对应的硬盘超限、等级2为次高容量等级,则此时根据硬盘实际容量所确定的迁移比例为1.5:2.5:2.5。
本发明实施例通过根据硬盘实际容量划分出不同的硬盘容量等级,并在初始容量等级对应硬盘超限时对各个硬盘中携带有存储数据的虚拟节点进行迁移,使得不仅可以支持在海量存储中的硬盘容量异构,同时由于虚拟节点中的数据是按照迁移比例进行迁移的,所以还可以充分利用不同容量硬盘的存储空间,而且高等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
再请参见图2,为本发明实施例提供的另一种数据存储的方法的流程示意图,所述方法包括:
S201,在系统初始化时,对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点;
具体的,在系统初始化时,对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点,使得异构硬盘之间的数据接口尽可能的均衡到各个节点上。其中,所述虚拟节点用于管理所存储的数据。
S202,检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
具体的,所述硬盘容量等级是根据硬盘实际容量进行划分的,例如,某个分布式存储系统中有1TB、2TB、3TB这三种容量的硬盘,那么可以配置1TB容量硬盘的硬盘容量等级为等级1,2TB容量硬盘的硬盘容量等级为等级2,3TB容量硬盘的硬盘容量等级为等级3。其中,所述初始容量等级是在已配置的硬盘容量等级中所选择的,例如,在系统初始化时,在已配置的硬盘容量等级中选择最小的硬盘容量等级作为初始容量等级,即在等级1至等级3的硬盘容量等级中,选择等级1的硬盘容量等级作为初始容量等级。在确定了所述初始容量等级后,可以检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量。例如,若初始容量等级为等级1的硬盘容量等级,则检测等级1的硬盘容量等级所对应的硬盘中已存储数据的容量大小。
S203,检测在所述初始容量等级对应硬盘的实际使用量超过预置的使用阈值的硬盘数量是否达到预置的数量阈值;
S204,若检测达到所述数量阈值,则确定所述初始容量等级对应硬盘超限;
当检测到所述初始容量等级对应硬盘的实际使用量超过预置的使用阈值的硬盘数量达到预置的数量阈值时,确定所述初始容量等级对应硬盘超限。例如,初始容量等级为等级1的硬盘容量等级,等级1的硬盘容量等级所对应硬盘的数量为10个,且所述使用阈值为硬盘容量的50%,所述数量阈值为某个硬盘容量等级对应硬盘数量的80%。当检测到所述实际使用量超过硬盘容量50%的硬盘的数量达到8个时,可确定所述初始容量等级对应硬盘超限。
S205,当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,可以查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘。例如,当存储系统中的硬盘可以分为等级1、等级2、等级3,且初始容量等级为等级1的硬盘容量等级时,可以查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘,即所述次高容量等级为等级2的硬盘容量等级对应的硬盘。
S206,当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例;
S207,根据所述迁移比例将低于所述次高容量等级的硬盘容量等级所对应硬盘中的所述虚拟节点,迁移至高于或等于所述次高容量等级的硬盘容量等级所对应的硬盘,所述虚拟节点携带有所存储的数据;
S208,将所述次高容量等级作为初始容量等级以进行虚拟节点的迁移;
具体的,当查找到所述次高容量等级对应的硬盘时,可以根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据。即将低硬盘容量等级的硬盘上的携带有存储数据的虚拟节点迁移至高硬盘容量等级的硬盘上,使得可以同时对所述虚拟节点以及存储于所述虚拟节点中的数据进行迁移。并且迁移后的数据仍可以映射于与原来对应的虚拟节点,从而可以继续正常的对迁移后的数据进行存储和提取。将低硬盘容量等级的硬盘中的虚拟节点以及存储于所述虚拟节点中的数据迁移至高硬盘容量等级的硬盘中,可以减少低硬盘容量等级的硬盘的存储负担,并充分的利用了高硬盘容量等级的硬盘的存储空间。另外,还可以使高硬盘容量等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,硬盘实际容量分别为1TB、2TB、3TB,每种硬盘容量等级对应的硬盘数量相同,在系统初始化时,为每个硬盘容量等级所对应的硬盘分配48个虚拟节点,且所述初始容量等级为等级1的硬盘容量等级。当所述初始容量等级对应的硬盘超限时,将等级2的硬盘容量等级作为次高容量等级,并根据初始容量等级和次高容量等级确定虚拟节点的迁移比例,即等级1、等级2以及等级3的硬盘容量等级对应硬盘的迁移比例为1:2:2。其中高于次高容量等级的硬盘所获得的虚拟节点数量与次高容量等级的硬盘所获得虚拟节点数量相同,此时,等级1所对应硬盘中的虚拟节点按照1:2:2的迁移比例迁移至等级2和等级3的硬盘中。由于每个虚拟节点中携带有相同大小的数据,所以在虚拟节点迁移结束后,等级1、等级2以及等级3对应硬盘中所存储的数据大小比例也为1:2:2。此时,等级1对应硬盘中虚拟节点的数量为29个,等级2对应硬盘中虚拟节点的数量为57个,等级3对应硬盘中虚拟节点的数量为58个。在完成虚拟节点的迁移之后,还可以将所述次高容量等级作为初始容量等级以进行虚拟节点的迁移,即在等级2的硬盘容量等级对应的硬盘超限时,确定等级1至等级3的硬盘的虚拟节点的迁移比例为1:2:3。使得在虚拟节点迁移结束后,等级1至等级3对应的硬盘中所存储的数据大小和虚拟节点的数量的比例均为1:2:3,即等级1对应的硬盘中虚拟节点的数量为24个,等级2对应的硬盘中虚拟节点的数量为48个,等级3对应的硬盘中虚拟节点的数量为64个。
又例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,硬盘实际容量分别为1TB、2TB、3TB,且每种硬盘容量等级对应的硬盘数量不相同,等级1对应的硬盘数量为20个,等级2对应的硬盘数量为30个,等级3对应的硬盘数量为40个,在系统初始化时,为每个硬盘容量等级所对应的硬盘分配48个虚拟节点,当等级1对应的硬盘超限,且等级2为次高容量等级时,所述迁移比例仍然为1:2:2,且在虚拟节点迁移结束后,等级1对应的硬盘中虚拟节点的数量为27个,等级2对应的硬盘中虚拟节点的数量为54个,等级3对应的硬盘中虚拟节点的数量为54个。
又例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,若等级1对应的硬盘容量为1.5TB,等级2对应的硬盘容量为2.5TB,等级3对应的硬盘容量为3.5TB,且等级1对应的硬盘超限、等级2为次高容量等级,则此时根据硬盘实际容量所确定的迁移比例为1.5:2.5:2.5。
本发明实施例通过根据硬盘实际容量划分出不同的硬盘容量等级,并在初始容量等级对应硬盘超限时对各个硬盘中携带有存储数据的虚拟节点进行迁移,使得不仅可以支持在海量存储中的硬盘容量异构,同时由于虚拟节点中的数据是按照迁移比例进行迁移的,所以还可以充分利用不同容量硬盘的存储空间,而且高等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
再请参见图3,为本发明实施例提供的又一种数据存储的方法的流程示意图,所述方法包括:
S301,检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
S302,当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
S303,当未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,发送扩容提示信息;
具体的,当未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,则说明初始容量等级对应的硬盘为硬盘容量等级中的最高等级,为了让存储系统可以继续存储数据,可以进行扩容,即可以发送扩容提示信息到管理员的终端,以提示管理员需要对存储系统进行扩容。
S304,在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移;
具体的,在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移。例如,存储系统中,有1TB、2TB、3TB容量的硬盘,分别对应的硬盘容量等级为等级1、等级2、等级3,硬盘实际容量分别为1TB、2TB、3TB,并且当前的初始容量等级为等级3的硬盘容量等级。当初始容量等级所对应硬盘超限,且增加有4TB容量的硬盘时,将4TB容量的硬盘设置为等级4的硬盘容量等级,并根据1:2:3:4的迁移比例在等级1至等级4的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移。当初始容量等级所对应硬盘没有超限,且增加有4TB容量的硬盘时,将4TB容量的硬盘设置为等级4的硬盘容量等级,并根据1:2:3:3的迁移比例在等级1至等级4的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移。在扩容或更换硬盘时,对携带有存储数据的虚拟节点进行迁移可以使存储系统继续正常存储数据。
其中,步骤S301至S302的具体实现方式可以参见上述图1对应实施例中的S101至S102的具体实现方式,这里不再进行赘述。
本发明实施例通过发送扩容提示信息,可以对存储系统进行扩容,并在扩容或更换硬盘时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移,使得扩容后的存储系统仍然可以充分利用不同容量硬盘的存储空间,同时还可以兼顾性能的平衡性。
再请参见图4,为本发明实施例提供的又一种数据存储的方法的流程示意图,所述方法包括:
S401,检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
S402,当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
S403,当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据;
S404,当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,发送扩容提示信息;
具体的,当所述次高容量等级对应的硬盘超限、且所述次高容量等级不为已配置的等级中最大的硬盘容量等级时,可以将所述次高容量等级作为初始容量等级以进行虚拟节点的迁移。当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,说明存储系统中没有比所述次高容量等级更高的硬盘容量等级所对应的硬盘,为了让存储系统可以继续正常工作则需要进行扩容,即可以发送扩容提示信息到管理员的终端,以提示管理员需要对存储系统进行扩容。
S405,在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移;
具体的,在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移。例如,存储系统中,有1TB、2TB、3TB容量的硬盘,分别对应的硬盘容量等级为等级1、等级2、等级3,并且当前的初始容量等级为等级3的硬盘容量等级,当初始容量等级所对应硬盘超限,且增加有4TB容量的硬盘时,将4TB容量的硬盘设置为等级4的硬盘容量等级,并根据1:2:3:4的迁移比例在等级1至等级4的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移;当初始容量等级所对应硬盘没有超限,且增加有4TB容量的硬盘时,将4TB容量的硬盘设置为等级4的硬盘容量等级,并根据1:2:3:3的迁移比例在等级1至等级4的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移。在扩容或更换硬盘时,对携带有存储数据的虚拟节点进行迁移可以使存储系统继续正常存储数据。
其中,步骤S401至S403的具体实现方式可以参见上述图1对应实施例中的S101至S103的具体实现方式,这里不再进行赘述。
本发明实施例通过发送扩容提示信息,可以对存储系统进行扩容,并在扩容或更换硬盘时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移,使得扩容后的存储系统仍然可以充分利用不同容量硬盘的存储空间,同时还可以兼顾性能的平衡性。
再请参见图5,为本发明实施例提供的其中一种更新容量等级的方法的流程示意图,所述方法包括:
S501,当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,对小于所述比例阈值的硬盘容量等级进行标识;
S502,更新具有标识的硬盘容量等级以便于提升数据迁移性能;
具体的,当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,对小于所述比例阈值的硬盘容量等级进行标识,并更新具有标识的硬盘容量等级以便于提升数据迁移性能,更新的方法可以是将具有标识的硬盘容量等级重新设置为较低级的硬盘容量等级。例如,在存储系统中,可以预设所述比例阈值为20%,即当某种硬盘容量等级对应的硬盘数量低于所有硬盘总数的20%,则将该种硬盘容量等级对应的硬盘视作低等级的硬盘使用,当存储系统中1TB的硬盘数量为40个,2TB的硬盘数量为10个,4TB的硬盘数量为50个时,将2TB的硬盘所对应的硬盘容量等级从等级2降为等级1,以减少系统的抖动和提升数据迁移的性能。由于硬盘容量兼容主要为了兼容高容量硬盘,因此对于数量较少的硬盘种类可以不做考虑。
本发明实施例通过对数量较少的硬盘种类所对应的硬盘容量等级进行更新,以将该种硬盘视作低等级的硬盘使用,可以减少系统的抖动和提升数据迁移的性能。
请参见图6,为本发明实施例提供的一种存储服务器1的结构示意图,所述存储服务器1可以包括:使用量检测模块10、查找模块20、确定迁移模块30;
所述使用量检测模块10,用于检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
具体的,所述使用量检测模块10可以检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量。其中,所述硬盘容量等级是根据硬盘实际容量进行划分的,例如,某个分布式存储系统中有1TB、2TB、3TB这三种容量的硬盘,那么可以配置1TB容量硬盘的硬盘容量等级为等级1,2TB容量硬盘的硬盘容量等级为等级2,3TB容量硬盘的硬盘容量等级为等级3。其中,所述初始容量等级是在已配置的硬盘容量等级中所选择的,例如,在系统初始化时,在已配置的硬盘容量等级中选择最小的硬盘容量等级作为初始容量等级,即在等级1至等级3的硬盘容量等级中,选择等级1的硬盘容量等级作为初始容量等级。在确定了所述初始容量等级后,所述使用量检测模块10可以检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量,例如,若初始容量等级为等级1的硬盘容量等级,则所述使用量检测模块10可以检测等级1的硬盘容量等级所对应的硬盘中已存储数据的容量大小。
所述查找模块20,用于当根据所述使用量检测模块10检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
具体的,当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,所述查找模块20可以查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘。例如,当存储系统中的硬盘可以分为等级1、等级2、等级3,且初始容量等级为等级1的硬盘容量等级时,所述查找模块20可以查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘,即所述次高容量等级为等级2的硬盘容量等级对应的硬盘。
所述确定迁移模块30,用于当所述查找模块20查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据;
具体的,当所述查找模块20查找到所述次高容量等级对应的硬盘时,所述确定迁移模块30可以根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据,即所述确定迁移模块30将低硬盘容量等级的硬盘上的携带有存储数据的虚拟节点迁移至高硬盘容量等级的硬盘上,使得可以同时对所述虚拟节点以及存储于所述虚拟节点中的数据进行迁移。并且迁移后的数据仍可以映射于与原来对应的虚拟节点,从而可以继续正常的对迁移后的数据进行存储和提取。所述确定迁移模块30将低硬盘容量等级的硬盘中的虚拟节点以及存储于所述虚拟节点中的数据迁移至高硬盘容量等级的硬盘中,可以减少低硬盘容量等级的硬盘的存储负担,并充分的利用了高硬盘容量等级的硬盘的存储空间,另外,还可以使高硬盘容量等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,硬盘实际容量分别为1TB、2TB、3TB,每种硬盘容量等级对应的硬盘数量相同,在系统初始化时,为每个硬盘容量等级所对应的硬盘分配48个虚拟节点,且所述初始容量等级为等级1的硬盘容量等级。当所述初始容量等级对应硬盘超限时,将等级2的硬盘容量等级作为次高容量等级,所述确定迁移模块30可以根据初始容量等级和次高容量等级确定虚拟节点的迁移比例,即等级1、等级2以及等级3的硬盘容量等级对应硬盘的迁移比例为1:2:2。其中高于次高容量等级的硬盘所获得的虚拟节点数量与次高容量等级的硬盘所获得虚拟节点数量相同,此时,所述确定迁移模块30将等级1对应硬盘中的虚拟节点按照1:2:2的迁移比例迁移至等级2和等级3的硬盘中。由于每个虚拟节点中携带有相同大小的数据,所以在虚拟节点迁移结束后,等级1、等级2以及等级3对应硬盘中所存储的数据大小比例也为1:2:2。此时,等级1对应硬盘中虚拟节点的数量为29个,等级2对应硬盘中虚拟节点的数量为57个,等级3对应硬盘中虚拟节点的数量为58个。
本发明实施例通过根据硬盘实际容量划分出不同的硬盘容量等级,并在初始容量等级对应硬盘超限时对各个硬盘中携带有存储数据的虚拟节点进行迁移,使得不仅可以支持在海量存储中的硬盘容量异构,同时由于虚拟节点中的数据是按照迁移比例进行迁移的,所以还可以充分利用不同容量硬盘的存储空间,而且高等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
再请参见图7,为本发明实施例提供的另一种存储服务器1的结构示意图,所述存储服务器1可以包括:分配模块40、使用量检测模块10、数量检测模块50、确定模块60、查找模块20、第一发送模块70、确定迁移模块30、次高迁移模块90、第二发送模块80、设置模块100、标识模块110、更新模块120;
所述分配模块40,用于在系统初始化时,对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点;
具体的,在系统初始化时,所述分配模块40可以对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点,使得异构硬盘之间的数据接口尽可能的均衡到各个节点上。其中,所述虚拟节点用于管理所存储的数据。
所述使用量检测模块10,用于检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
具体的,所述使用量检测模块10可以检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量。其中,所述硬盘容量等级是根据硬盘实际容量进行划分的,例如,某个分布式存储系统中有1TB、2TB、3TB这三种容量的硬盘,那么可以配置1TB容量硬盘的硬盘容量等级为等级1,2TB容量硬盘的硬盘容量等级为等级2,3TB容量硬盘的硬盘容量等级为等级3。其中,所述初始容量等级是在已配置的硬盘容量等级中所选择的,例如,在系统初始化时,在已配置的硬盘容量等级中选择最小的硬盘容量等级作为初始容量等级,即在等级1至等级3的硬盘容量等级中,选择等级1的硬盘容量等级作为初始容量等级。在确定了所述初始容量等级后,所述使用量检测模块10可以检测已配置的硬盘容量等级中初始容量等级所对应硬盘的实际使用量,例如,若初始容量等级为等级1的硬盘容量等级,则所述使用量检测模块10可以检测等级1的硬盘容量等级所对应的硬盘中已存储数据的容量大小。
所述数量检测模块50,用于检测在所述初始容量等级对应硬盘的实际使用量超过预置的使用阈值的硬盘数量是否达到预置的数量阈值;
所述确定模块60,用于若检测达到所述数量阈值,则确定所述初始容量等级对应硬盘超限;
当所述数量检测模块50检测到所述初始容量等级对应硬盘中实际使用量超过预置的使用阈值的硬盘数量达到预置的数量阈值时,所述确定模块60可以确定所述初始容量等级对应硬盘超限。例如,初始容量等级为等级1的硬盘容量等级,等级1的硬盘容量等级所对应硬盘的数量为10个,且所述使用阈值为硬盘容量的50%,所述数量阈值为某个硬盘容量等级对应硬盘数量的80%,当所述数量检测模块50检测到所述实际使用量超过硬盘容量50%的硬盘的数量达到8个时,所述确定模块60可确定所述初始容量等级对应硬盘超限。
所述查找模块20,用于当根据所述使用量检测模块10检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
具体的,当根据检测到的所述实际使用量确定出所述初始容量等级对应硬盘超限时,所述查找模块20可以查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘,例如,当存储系统中的硬盘可以分为等级1、等级2、等级3,且初始容量等级为等级1的硬盘容量等级时,所述查找模块20可以查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘,即所述次高容量等级为等级2的硬盘容量等级。
所述第一发送模块70,用于当未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,发送扩容提示信息;
具体的,当所述查找模块20未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,则说明初始容量等级对应的硬盘为硬盘容量等级中的最高等级,为了让存储系统可以继续存储数据,可以进行扩容,即所述第一发送模块70可以发送扩容提示信息到管理员的终端,以提示管理员需要对存储系统进行扩容。
所述确定迁移模块30,用于当所述查找模块20查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据;
所述次高迁移模块90,用于将所述次高容量等级作为初始容量等级以进行虚拟节点的迁移;
具体的,当所述查找模块20查找到所述次高容量等级对应的硬盘时,所述确定迁移模块30可以根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据,即所述确定迁移模块30将低硬盘容量等级的硬盘上的携带有存储数据的虚拟节点迁移至高硬盘容量等级的硬盘上,使得可以同时对所述虚拟节点以及存储于所述虚拟节点中的数据进行迁移。并且迁移后的数据仍可以映射于与原来对应的虚拟节点,从而可以继续正常的对迁移后的数据进行存储和提取。所述确定迁移模块30将低硬盘容量等级的硬盘中的虚拟节点以及存储于所述虚拟节点中的数据迁移至高硬盘容量等级的硬盘中,可以减少低硬盘容量等级的硬盘的存储负担,并充分的利用了高硬盘容量等级的硬盘的存储空间,另外,还可以使高硬盘容量等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
例如,存储系统中硬盘容量等级包括等级1、等级2以及等级3,硬盘实际容量分别为1TB、2TB、3TB,每种硬盘容量等级对应的硬盘数量相同,在系统初始化时,为每个硬盘容量等级所对应的硬盘分配48个虚拟节点,且所述初始容量等级为等级1的硬盘容量等级。当所述初始容量等级对应硬盘超限时,将等级2的硬盘容量等级作为次高容量等级,所述确定迁移模块30可以根据初始容量等级和次高容量等级确定虚拟节点的迁移比例,即等级1、等级2以及等级3的硬盘容量等级对应硬盘的迁移比例为1:2:2。其中高于次高容量等级的硬盘所获得的虚拟节点数量与次高容量等级的硬盘所获得虚拟节点数量相同,此时,所述确定迁移模块30将等级1对应硬盘中的虚拟节点按照1:2:2的迁移比例迁移至等级2和等级3的硬盘中。由于每个虚拟节点中携带有相同大小的数据,所以在虚拟节点迁移结束后,等级1、等级2以及等级3对应硬盘中所存储的数据大小比例也为1:2:2。此时,等级1对应硬盘中虚拟节点的数量为29个,等级2对应硬盘中虚拟节点的数量为57个,等级3对应硬盘中虚拟节点的数量为58个。在完成数据的迁移之后,所述次高迁移模块90还可以将所述次高容量等级作为初始容量等级以进行虚拟节点的迁移,即在等级2的硬盘容量等级对应的硬盘超限时,所述确定迁移模块30可以确定等级1至等级3的硬盘迁移比例为1:2:3,使得在虚拟节点迁移结束后,等级1至等级3对应的硬盘中所存储的数据大小和虚拟节点的数量的比例均为1:2:3,即等级1对应硬盘中虚拟节点的数量为24个,等级2对应硬盘中虚拟节点的数量为48个,等级3对应硬盘中虚拟节点的数量为64个。
所述第二发送模块80,用于当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,发送扩容提示信息;
具体的,当所述次高容量等级对应的硬盘超限、且所述次高容量等级不为已配置的等级中最大的硬盘容量等级时,所述次高迁移模块90可以将所述次高容量等级作为初始容量等级以进行虚拟节点的迁移。当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,说明存储系统中没有比所述次高容量等级更高的硬盘容量等级所对应的硬盘,为了让存储系统可以继续正常工作则需要进行扩容,即所述第二发送模块80可以发送扩容提示信息到管理员的终端,以提示管理员需要对存储系统进行扩容。
所述设置模块100,用于在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移;
具体的,在扩容或硬盘更换时,所述设置模块100可以对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移。例如,存储系统中,有1TB、2TB、3TB容量的硬盘,分别对应的硬盘容量等级为等级1、等级2、等级3,并且当前的初始容量等级为等级3的硬盘容量等级,当初始容量等级所对应硬盘超限,且增加有4TB容量的硬盘时,所述设置模块100将4TB容量的硬盘设置为等级4的硬盘容量等级,并由所述确定迁移模块30根据1:2:3:4的迁移比例在等级1至等级4的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移;当初始容量等级所对应硬盘没有超限,且增加有4TB容量的硬盘时,所述设置模块100将4TB容量的硬盘设置为等级4的硬盘容量等级,并由所述确定迁移模块30根据1:2:3:3的迁移比例在等级1至等级4的硬盘容量等级所对应硬盘之间进行虚拟节点的迁移。在扩容或更换硬盘时,对携带有存储数据的虚拟节点进行迁移可以使存储系统继续正常存储数据。
所述标识模块110,用于当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,对小于所述比例阈值的硬盘容量等级进行标识;
所述更新模块120,用于更新具有标识的硬盘容量等级以便于提升数据迁移性能;
具体的,当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,所述标识模块110可以对小于所述比例阈值的硬盘容量等级进行标识,并由所述更新模块120更新具有标识的硬盘容量等级以便于提升数据迁移性能,更新的方法可以是将具有标识的硬盘容量等级重新设置为较低级的硬盘容量等级。例如,在存储系统中,可以预设所述比例阈值为20%,当某种硬盘容量等级对应的硬盘数量低于所有硬盘总数的20%时,所述标识模块110对该种硬盘容量等级进行标识,并由所述更新模块120将标识后的硬盘容量等级设置为较低级的硬盘容量等级,即将该种硬盘容量等级对应的硬盘视作低等级的硬盘使用,当存储系统中1TB的硬盘数量为40个,2TB的硬盘数量为10个,4TB的硬盘数量为50个时,所述标识模块110可以对2TB的硬盘对应的硬盘容量等级进行标识,并由所述更新模块120将具有标识的硬盘容量等级从等级2降为等级1,即将2TB的硬盘视作1TB的硬盘进行使用,以减少系统的抖动和提升数据迁移的性能。由于硬盘容量兼容主要为了兼容高容量硬盘,因此对于数量较少的硬盘种类可以不做考虑。
进一步的,再请参见图8,为本发明实施例提供的一种确定迁移模块30的结构示意图,所述确定迁移模块30包括:比例确定单元3001、迁移单元3002;
所述比例确定单元3001,用于当所述查找模块20查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例;
所述迁移单元3002,用于根据所述迁移比例将低于所述次高容量等级的硬盘容量等级所对应硬盘中的所述虚拟节点,迁移至高于或等于所述次高容量等级的硬盘容量等级所对应的硬盘,所述虚拟节点携带有所存储的数据;
具体的,当所述查找模块20查找到所述次高容量等级对应的硬盘时,所述比例确定单元3001可以根据所述初始容量等级、所述次高容量等级以及所述硬盘实际容量确定虚拟节点的迁移比例,所述迁移单元3002可以根据所述迁移比例将低于所述次高容量等级的硬盘容量等级所对应硬盘中的所述虚拟节点,迁移至高于或等于所述次高容量等级的硬盘容量等级所对应的硬盘,使得所述迁移单元3002可以同时对所述虚拟节点以及存储于所述虚拟节点中的数据进行迁移,并且迁移后的数据仍可以映射于与原来对应的虚拟节点,从而可以继续正常的对迁移后的数据进行存储和提取。所述迁移单元3002将低等级的硬盘中的虚拟节点以及存储于所述虚拟节点中的数据迁移至高等级的硬盘中,可以减少低等级的硬盘的存储负担,并充分的利用了高等级的硬盘的存储空间,另外,还可以使高等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
本发明实施例通过根据硬盘实际容量划分出不同的硬盘容量等级,并在初始容量等级对应硬盘超限时对各个硬盘中携带有存储数据的虚拟节点进行迁移,使得不仅可以支持在海量存储中的硬盘容量异构,同时由于虚拟节点中的数据是按照迁移比例进行迁移的,所以还可以充分利用不同容量硬盘的存储空间,而且高等级的硬盘可以拥有更多的虚拟节点以分担更多存储工作,从而可以提高性能的平衡性,并进一步的充分利用大容量硬盘的存储空间。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。

Claims (16)

1.一种数据存储的方法,其特征在于,包括:
检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
当根据所述实际使用量超过预置的使用阈值的硬盘数量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级、所述初始容量等级对应的硬盘实际容量以及所述次高容量等级对应的硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据。
2.如权利要求1所述的方法,其特征在于,在所述检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量之前,还包括:
在系统初始化时,对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点;
其中,所述虚拟节点用于管理所存储的数据。
3.如权利要求1或2所述的方法,其特征在于,在所述检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量之后,还包括:
检测在所述初始容量等级对应硬盘的实际使用量超过预置的使用阈值的硬盘数量是否达到预置的数量阈值;
若检测达到所述数量阈值,则确定所述初始容量等级对应硬盘超限。
4.如权利要求1或2所述的方法,其特征在于,所述当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级、所述初始容量等级对应的硬盘实际容量以及所述次高容量等级对应的硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据,包括:
当查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级、所述初始容量等级对应的硬盘实际容量以及所述次高容量等级对应的硬盘实际容量确定虚拟节点的迁移比例;
根据所述迁移比例将低于所述次高容量等级的硬盘容量等级所对应硬盘中的所述虚拟节点,迁移至高于或等于所述次高容量等级的硬盘容量等级所对应的硬盘,所述虚拟节点携带有所存储的数据。
5.如权利要求1或2所述的方法,其特征在于,还包括:
当未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,发送扩容提示信息。
6.如权利要求1或2所述的方法,其特征在于,还包括:
当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,发送扩容提示信息。
7.如权利要求1或2所述的方法,其特征在于,还包括:
在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移。
8.如权利要求1或2所述的方法,其特征在于,还包括:
当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,对小于所述比例阈值的硬盘容量等级进行标识;
更新具有标识的硬盘容量等级以便于提升数据迁移性能。
9.一种存储服务器,其特征在于,包括:
使用量检测模块,用于检测已配置的硬盘容量等级中初始容量等级对应硬盘的实际使用量,所述硬盘容量等级是根据硬盘实际容量进行划分的;
查找模块,用于当根据所述实际使用量超过预置的使用阈值的硬盘数量确定出所述初始容量等级对应硬盘超限时,查找已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级对应的硬盘;
确定迁移模块,用于当所述查找模块查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级、所述初始容量等级对应的硬盘实际容量以及所述次高容量等级对应的硬盘实际容量确定虚拟节点的迁移比例,并根据所述迁移比例在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移,所述虚拟节点携带有所存储的数据。
10.如权利要求9所述的存储服务器,其特征在于,还包括:
分配模块,用于在系统初始化时,对已配置的硬盘容量等级所对应的硬盘分配相同数量的虚拟节点;
其中,所述虚拟节点用于管理所存储的数据。
11.如权利要求9或10所述的存储服务器,其特征在于,还包括:
数量检测模块,用于检测在所述初始容量等级对应硬盘的实际使用量超过预置的使用阈值的硬盘数量是否达到预置的数量阈值;
确定模块,用于若检测达到所述数量阈值,则确定所述初始容量等级对应硬盘超限。
12.如权利要求9或10所述的存储服务器,其特征在于,所述确定迁移模块包括:
比例确定单元,用于当所述查找模块查找到所述次高容量等级对应的硬盘时,根据所述初始容量等级、所述次高容量等级、所述初始容量等级对应的硬盘实际容量以及所述次高容量等级对应的硬盘实际容量确定虚拟节点的迁移比例;
迁移单元,用于根据所述迁移比例将低于所述次高容量等级的硬盘容量等级所对应硬盘中的所述虚拟节点,迁移至高于或等于所述次高容量等级的硬盘容量等级所对应的硬盘,所述虚拟节点携带有所存储的数据。
13.如权利要求9或10所述的存储服务器,其特征在于,还包括:
第一发送模块,用于当未查找到已配置的硬盘容量等级中高于所述初始容量等级的次高容量等级时,发送扩容提示信息。
14.如权利要求9或10所述的存储服务器,其特征在于,还包括:
第二发送模块,用于当所述次高容量等级对应的硬盘超限、且所述次高容量等级为已配置的等级中最大的硬盘容量等级时,发送扩容提示信息。
15.如权利要求9或10所述的存储服务器,其特征在于,还包括:
设置模块,用于在扩容或硬盘更换时,对新增或更换的硬盘设置对应的硬盘容量等级以便于在已配置的硬盘容量等级所对应的硬盘之间进行虚拟节点的迁移。
16.如权利要求9或10所述的存储服务器,其特征在于,还包括:
标识模块,用于当检测到已配置的硬盘容量等级中对应的硬盘数量占总硬盘数量的比例小于比例阈值时,对小于所述比例阈值的硬盘容量等级进行标识;
更新模块,用于更新具有标识的硬盘容量等级以便于提升数据迁移性能。
CN201310611665.1A 2013-11-26 2013-11-26 一种数据存储的方法和存储服务器 Active CN103605484B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201310611665.1A CN103605484B (zh) 2013-11-26 2013-11-26 一种数据存储的方法和存储服务器
EP14866029.3A EP3059670B1 (en) 2013-11-26 2014-04-15 Data storage method and storage server
PCT/CN2014/075411 WO2015078132A1 (zh) 2013-11-26 2014-04-15 一种数据存储的方法和存储服务器
HUE14866029A HUE042885T2 (hu) 2013-11-26 2014-04-15 Adattárolási eljárás és adattároló szerver
US15/162,064 US9733835B2 (en) 2013-11-26 2016-05-23 Data storage method and storage server

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310611665.1A CN103605484B (zh) 2013-11-26 2013-11-26 一种数据存储的方法和存储服务器

Publications (2)

Publication Number Publication Date
CN103605484A CN103605484A (zh) 2014-02-26
CN103605484B true CN103605484B (zh) 2016-10-26

Family

ID=50123716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310611665.1A Active CN103605484B (zh) 2013-11-26 2013-11-26 一种数据存储的方法和存储服务器

Country Status (5)

Country Link
US (1) US9733835B2 (zh)
EP (1) EP3059670B1 (zh)
CN (1) CN103605484B (zh)
HU (1) HUE042885T2 (zh)
WO (1) WO2015078132A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103605484B (zh) * 2013-11-26 2016-10-26 华为技术有限公司 一种数据存储的方法和存储服务器
US9971525B2 (en) * 2015-02-26 2018-05-15 Red Hat, Inc. Peer to peer volume extension in a shared storage environment
CN105516242A (zh) * 2015-11-23 2016-04-20 华为技术有限公司 一种存储资源分配方法及存储资源分配系统
CN106959827B (zh) * 2017-03-30 2020-02-21 联想(北京)有限公司 信息处理方法、信息处理装置及服务器
CN110598473B (zh) * 2019-09-18 2022-08-16 深圳市网心科技有限公司 一种移动存储介质管理方法、装置及设备和存储介质
CN111752489B (zh) * 2020-06-30 2022-06-17 重庆紫光华山智安科技有限公司 Kubernetes中PVC模块的扩容方法及相关装置
CN112463050A (zh) * 2020-11-26 2021-03-09 新华三技术有限公司成都分公司 一种存储系统扩容方法、装置、设备及机器可读存储介质
CN117435328A (zh) 2022-07-15 2024-01-23 锐捷网络股份有限公司 数据盘容量管理方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276867A (en) * 1989-12-19 1994-01-04 Epoch Systems, Inc. Digital data storage system with improved data migration
EP0992913A1 (en) * 1998-04-27 2000-04-12 Sony Corporation Data recording/reproducing apparatus and method therefor
CN1804777A (zh) * 2005-01-13 2006-07-19 国际商业机器公司 管理层次存储系统中的数据的方法和系统
CN101223498A (zh) * 2005-07-15 2008-07-16 国际商业机器公司 用于管理数据存储的方法、系统和计算机程序产品以及虚拟化引擎
CN102968281A (zh) * 2012-11-26 2013-03-13 华为技术有限公司 一种数据迁移的方法及装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050071560A1 (en) * 2003-09-30 2005-03-31 International Business Machines Corp. Autonomic block-level hierarchical storage management for storage networks
EP2645251A1 (en) * 2008-06-06 2013-10-02 Pivot3 Method and system for distributed RAID implementation
WO2010122674A1 (ja) * 2009-04-23 2010-10-28 株式会社日立製作所 計算機システム及びその制御方法
US8806150B2 (en) * 2011-03-28 2014-08-12 Hitachi, Ltd. Computer system and Fibre Channel migration method
JP5767400B2 (ja) * 2011-04-28 2015-08-19 華為技術有限公司Huawei Technologies Co.,Ltd. 仮想ネットワーク移行の方法、関連装置、およびシステム
US9081502B2 (en) * 2012-10-18 2015-07-14 Hitachi, Ltd. Method and apparatus of storage volume migration in cooperation with takeover of storage area network configuration
US9201908B2 (en) * 2013-08-22 2015-12-01 Sap Portals Israel Ltd Multi-layered multi-tenancy database architecture
CN103605484B (zh) * 2013-11-26 2016-10-26 华为技术有限公司 一种数据存储的方法和存储服务器

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276867A (en) * 1989-12-19 1994-01-04 Epoch Systems, Inc. Digital data storage system with improved data migration
EP0992913A1 (en) * 1998-04-27 2000-04-12 Sony Corporation Data recording/reproducing apparatus and method therefor
CN1804777A (zh) * 2005-01-13 2006-07-19 国际商业机器公司 管理层次存储系统中的数据的方法和系统
CN101223498A (zh) * 2005-07-15 2008-07-16 国际商业机器公司 用于管理数据存储的方法、系统和计算机程序产品以及虚拟化引擎
CN102968281A (zh) * 2012-11-26 2013-03-13 华为技术有限公司 一种数据迁移的方法及装置

Also Published As

Publication number Publication date
HUE042885T2 (hu) 2019-07-29
EP3059670B1 (en) 2018-11-14
CN103605484A (zh) 2014-02-26
WO2015078132A1 (zh) 2015-06-04
US9733835B2 (en) 2017-08-15
EP3059670A4 (en) 2016-10-26
US20160266812A1 (en) 2016-09-15
EP3059670A1 (en) 2016-08-24

Similar Documents

Publication Publication Date Title
CN103605484B (zh) 一种数据存储的方法和存储服务器
CN109196459B (zh) 一种去中心化的分布式异构存储系统数据分布方法
CN104462389B (zh) 基于分级存储的分布式文件系统实现方法
CN102177505B (zh) 用于优化闪速拷贝级联中的映射表的清理的方法和系统
CN102156738A (zh) 数据块处理方法、数据块存储设备及系统
CN105787037B (zh) 一种重复数据的删除方法及装置
CN103473298B (zh) 数据归档方法和装置以及存储系统
CN102449607A (zh) 具有多个闪存封装的存储系统
CN103354923A (zh) 一种数据重建方法、装置和系统
CN103150122B (zh) 一种磁盘缓存空间管理方法和装置
CN101268449A (zh) 信息记录媒体访问装置以及数据记录方法
CN109324758A (zh) 数据迁移方法、装置及存储设备
CN111596868B (zh) 基于段单元的分布式存储系统的负载均衡方法和系统
CN102546823A (zh) 一种云存储系统的文件存储管理系统
CN107463342A (zh) 一种cdn边缘节点文件的存储方法及装置
CN106570093A (zh) 一种基于独立元数据组织结构的海量数据迁移方法和装置
CN106326393A (zh) 一种小图片的存储、读取方法和装置
CN104268097B (zh) 一种元数据处理方法及系统
CN106227466B (zh) 一种数据段迁移方法及系统
CN109039939B (zh) 一种负载分担方法及装置
CN108170789A (zh) 一种基于分布式文件系统的分级存储方法以及相关装置
CN108646987A (zh) 一种文件卷的管理方法、装置、存储介质及终端
CN102043589B (zh) 磁盘阵列的扩容方法和系统
CN106951338B (zh) 一种基于GlusterFS的高容错分布式存储方法
JP2016192170A (ja) ストレージ制御装置、ストレージシステムおよびストレージ制御プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant