CN110858122B - 存储数据的方法和装置 - Google Patents

存储数据的方法和装置 Download PDF

Info

Publication number
CN110858122B
CN110858122B CN201810966238.8A CN201810966238A CN110858122B CN 110858122 B CN110858122 B CN 110858122B CN 201810966238 A CN201810966238 A CN 201810966238A CN 110858122 B CN110858122 B CN 110858122B
Authority
CN
China
Prior art keywords
hard disk
data
performance
stored
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810966238.8A
Other languages
English (en)
Other versions
CN110858122A (zh
Inventor
叶敏
林鹏
林起芊
汪渭春
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision System Technology Co Ltd
Original Assignee
Hangzhou Hikvision System Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision System Technology Co Ltd filed Critical Hangzhou Hikvision System Technology Co Ltd
Priority to CN201810966238.8A priority Critical patent/CN110858122B/zh
Publication of CN110858122A publication Critical patent/CN110858122A/zh
Application granted granted Critical
Publication of CN110858122B publication Critical patent/CN110858122B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662—Virtualisation aspects
    • G06F3/0664—Virtualisation aspects at device level, e.g. emulation of a storage device or system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices

Abstract

本公开是关于一种存储数据的方法和装置，属于数据存储技术领域。所述方法包括：接收待存储数据，获取待存储数据对应的硬盘性能需求信息；根据预先存储于性能参数数据库中的各硬盘的性能参数，在各硬盘中，确定性能参数满足硬盘性能需求信息的多个硬盘；基于预设的单元数据量，将待存储数据切分为多个数据单元，将多个数据单元，分别存储于确定出的多个硬盘中。采用本公开，可以根据待存储数据的对应的硬盘性能需求信息，为待存储数据寻找整体性能都能满足待存储数据的需求的多个硬盘，进而可以保障存储处理的可靠性。

Description

存储数据的方法和装置
技术领域
本公开是关于数据存储技术领域，尤其是关于一种存储数据的方法和装置。
背景技术
在进行数据存储时，可以对数据进行分散存储。具体可以将数据进行切分，得到多个数据单元，再将多个数据单元分散存储在存储系统包括的不同存储节点中。其中，存储节点可以是OSD(Object-based Storage Device，对象存储设备)。这样，当存储系统中的一个或者少量的存储节点发生运行故障时，还可以利用未损坏的存储节点中存储的数据单元以及预先存储的校验数据对运行故障的一个或者少量的存储节点中存储的数据单元进行恢复。其中，校验数据可以是数据单元对应的异或运算的结果。
可以将不同的数据单元分别存储于不同的对象块中，这些不同的对象块可以构成一个条带。在对存储系统进行硬件部署时，可以在单个存储节点中设置多个硬盘。当需要存储数据时，可以在多个存储节点中，申请用于存储这些数据的条带。在存储节点足够多且存储节点中的硬盘中的剩余空间足够多的情况下，可以将条带包括的多个对象块分别设置在不同的存储节点中。进而，可以将不同的数据单元分别存储于不同的存储节点中，以达到对数据进行分散存储的目的。
上述存储节点中的硬盘一般是在不同时间点分批次购入的，例如，在2015年购入了100块硬盘，基于这100块硬盘构建了存储系统。由于业务扩展需求，需要提升存储系统的存储容量。因此，在2018年再次购入了100块硬盘，将这100块硬盘补充到存储系统中。再次购入的硬盘可以对已有的存储节点进行扩容，也可以构建新的存储节点。由于在不同时间点分批次购入的硬盘的生产厂家、产品型号很可能会不同，进而导致硬盘的性能也会不同。
如果条带包括的多个对象块处于具有不同性能的硬盘上，则条带的整体性能由性能最差的硬盘所决定。例如，在读写同一条带中的数据时，会同时读写条带包括的多个对象块中的数据单元，处于具有不同性能的硬盘上的对象块能够达到的读写速度不同，条带的整体读写速度与读写速度最慢的对象块的读写速度一致。
在实现本公开的过程中，发明人发现至少存在以下问题：
在存储重要的数据时，需要将重要的数据存储在整体性能较高的条带上。而现有技术中的存储方法，由于需要将同一条带中的数据分散存储在不同的硬盘上，不同的硬盘又有不同的性能，因此不能保证重要的数据被存储在整体性能较高的条带上，进而不能保障存储处理的可靠性。
发明内容
为了克服相关技术中存在的问题，本公开提供了以下技术方案：
根据本公开实施例的第一方面，提供一种存储数据的方法，所述方法包括：
接收待存储数据，获取所述待存储数据对应的硬盘性能需求信息；
根据预先存储于性能参数数据库中的各硬盘的性能参数，在所述各硬盘中，确定性能参数满足所述硬盘性能需求信息的多个硬盘；
基于预设的单元数据量，将所述待存储数据切分为多个数据单元，将所述多个数据单元，分别存储于确定出的多个硬盘中。
可选地，所述方法还包括：
当检测到发生硬盘接入事件时，获取目标硬盘的产品型号信息；
如果预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中存在所述目标硬盘的产品型号信息，则基于所述第一对应关系和所述目标硬盘的产品型号信息，确定所述目标硬盘的目标性能参数；
将所述目标硬盘和对应的目标性能参数，添加到所述性能参数数据库中。
可选地，所述方法还包括：
如果预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中不存在所述目标硬盘的产品型号信息，则获取所述目标硬盘的至少一项硬件配置信息；
基于所述至少一项硬件配置信息，确定所述目标硬盘的目标性能参数。
可选地，所述基于所述至少一项硬件配置信息，确定所述目标硬盘的目标性能参数，包括：
基于预先存储的硬盘的硬件配置信息和性能分数的第二对应关系，分别确定所述目标硬盘的每项硬件配置信息对应的性能分数；
基于所述每项硬件配置信息对应的性能分数，确定所述目标硬盘的目标性能参数。
可选地，所述方法还包括：
每当预设的周期到达时，获取所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，基于所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，分别确定所述各硬盘的更新性能参数，如果已存储至少一个数据单元的硬盘的更新性能参数不满足任一数据单元所属数据对应的硬盘性能需求信息，则在所述各硬盘中，确定更新性能参数满足所述任一数据单元所属数据对应的硬盘性能需求信息的硬盘为数据转存硬盘，将所述任一数据单元转存至所述数据转存硬盘中。
可选地，所述性能参数包括读写速度性能分数和/或数据稳定性能分数。
根据本公开实施例的第二方面，提供一种存储数据的装置，所述装置包括：
接收模块，用于接收待存储数据；
确定模块，用于获取所述待存储数据对应的硬盘性能需求信息，根据预先存储于性能参数数据库中的各硬盘的性能参数，在所述各硬盘中，确定性能参数满足所述硬盘性能需求信息的多个硬盘；
切分模块，用于基于预设的单元数据量，将所述待存储数据切分为多个数据单元；
存储模块，用于将所述多个数据单元，分别存储于确定出的多个硬盘中。
可选地，所述装置还包括：
获取模块，用于当检测到发生硬盘接入事件时，获取目标硬盘的产品型号信息；
所述确定模块，还用于当预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中存在所述目标硬盘的产品型号信息时，基于所述第一对应关系和所述目标硬盘的产品型号信息，确定所述目标硬盘的目标性能参数；
将所述目标硬盘和对应的目标性能参数，添加到所述性能参数数据库中。
可选地，所述获取模块，还用于当预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中不存在所述目标硬盘的产品型号信息时，获取所述目标硬盘的至少一项硬件配置信息；
所述确定模块，还用于基于所述至少一项硬件配置信息，确定所述目标硬盘的目标性能参数。
可选地，所述确定模块，用于：
基于预先存储的硬盘的硬件配置信息和性能分数的第二对应关系，分别确定所述目标硬盘的每项硬件配置信息对应的性能分数；
基于所述每项硬件配置信息对应的性能分数，确定所述目标硬盘的目标性能参数。
可选地，所述装置还包括：
转存模块，用于每当预设的周期到达时，获取所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，基于所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，分别确定所述各硬盘的更新性能参数，如果已存储至少一个数据单元的硬盘的更新性能参数不满足任一数据单元所属数据对应的硬盘性能需求信息，则在所述各硬盘中，确定更新性能参数满足所述任一数据单元所属数据对应的硬盘性能需求信息的硬盘为数据转存硬盘，将所述任一数据单元转存至所述数据转存硬盘中。
可选地，所述性能参数包括读写速度性能分数和/或数据稳定性能分数。
根据本公开实施例的第三方面，提供一种服务器，所述服务器包括处理器、通信接口、存储器和通信总线，其中：
所述处理器、所述通信接口和所述存储器通过所述通信总线完成相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行所述存储器上所存放的程序，以实现上述存储数据的方法。
根据本公开实施例的第四方面，提供一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述存储数据的方法。
本公开的实施例提供的技术方案可以包括以下有益效果：
通过本公开实施例提供的方法，可以根据待存储数据的对应的硬盘性能需求信息，为待存储数据寻找整体性能都能满足待存储数据的需求的多个硬盘，进而可以保障存储处理的可靠性。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。在附图中：
图1是根据一示例性实施例示出的一种存储数据的系统的结构示意图；
图2是根据一示例性实施例示出的一种存储数据的方法的流程示意图；
图3是根据一示例性实施例示出的一种存储数据的方法的流程示意图；
图4是根据一示例性实施例示出的一种存储数据的方法的流程示意图；
图5是根据一示例性实施例示出的一种存储数据的装置的结构示意图；
图6是根据一示例性实施例示出的一种服务器的结构示意图。
通过上述附图，已示出本公开明确的实施例，后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围，而是通过参考特定实施例为本领域技术人员说明本公开的概念。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
本公开实施例提供了一种存储数据的方法，该方法可以由单个服务器实现，或者可以由存储系统实现，存储系统中可以包括多个具有不同功能的服务器。
服务器可以包括处理器、存储器等部件。处理器，可以为CPU(Central ProcessingUnit，中央处理单元)等，可以用于根据预先存储于性能参数数据库中的各硬盘的性能参数，在各硬盘中，确定性能参数满足硬盘性能需求信息的多个硬盘，等处理。存储器，可以为RAM(Random Access Memory，随机存取存储器)，Flash(闪存)等，可以用于存储接收到的数据、处理过程所需的数据、处理过程中生成的数据等，如性能参数数据库中的各硬盘的性能参数等。
服务器还可以包括收发器等。收发器，可以用于与存储系统中的其他服务器进行数据传输，收发器可以包括蓝牙部件、WiFi(Wireless-Fidelity，无线高保真技术)部件、天线、匹配电路、调制解调器等。
如图1所示，存储系统可以由元数据管理服务器(Metadata Controller，简写为MDS)、切片服务器(Slice Server，简写为SS)、对象存储服务器(Object-based StorageDevice，简写为OSD)、审计服务器(AUDITOR)构成。
其中，元数据管理服务器可以进行为待存储数据分配条带、存储条带的相关信息等处理。切片服务器可以进行接收待存储数据、将待存储数据切分为多个数据单元等处理。可以在存储系统中部署多个对象存储服务器，每台对象存储服务器中部署多个硬盘，对象存储服务器可以进行存储数据单元等处理。审计服务器可以进行根据待存储数据对应的校验数据，对待存储数据中丢失的个别数据单元进行恢复等处理。
本公开一示例性实施例提供了一种存储数据的方法，如图2所示，该方法的处理流程可以包括如下的步骤：
步骤S210，接收待存储数据，获取待存储数据对应的硬盘性能需求信息。
其中，硬盘可以是SSD(Solid State Drives，固态硬盘)。SSD是用固态电子存储芯片阵列制成的硬盘，由控制部件和存储部件(闪存、动态随机存取存储器等)组成。
在实施中，在初始使用存储系统时，可以在存储系统中创建多个虚拟存储容器(也可以称为Bucket)。可以为创建的虚拟存储容器设置唯一的标识，还可以为创建的虚拟存储容器配置条带属性。例如条带属性是“4+2”，表示每个条带包括6个对象块，6个对象块中的4个对象块用于存储数据单元，剩下的2个对象块用于存储校验数据。再例如条带属性是“5+1”，表示每个条带包括6个对象块，6个对象块中的5个对象块用于存储数据单元，剩下的1个对象块用于存储校验数据。需要说明的是，虚拟存储容器在创建时，不占用实际存储空间，只有当存入数据时才真正占用存储空间。此外，还可以为创建的虚拟存储容器配置硬盘性能需求信息。硬盘性能需求信息可以用于指示希望使用具有何种性能的硬盘存储数据。
如图3所示，步骤S210可以包括以下处理：
步骤S311，向元数据管理服务器发送数据写入请求，元数据服务器确定用于接收待存储数据的目标切片服务器。
在向存储系统写入待存储数据之前，需要向元数据管理服务器发送数据写入请求。元数据管理服务器在接收到数据写入请求之后，可以根据已维护的各切片服务器的状态，选择一个目标切片服务器用于接收待存储数据。
步骤S312，目标切片服务器接收待存储数据。
步骤S313，目标切片服务器根据待存储数据的数据量，向元数据管理服务器申请条带。
步骤S314，元数据管理服务器确定待存储数据对应的硬盘性能需求信息，根据硬盘性能需求信息分配条带。
元数据管理服务器在接收到申请之后，可以根据之前接收到的数据写入请求中携带的指定虚拟存储容器、以及预先存储的虚拟存储容器、条带属性和硬盘性能需求信息的对应关系，确定与指定虚拟存储容器对应的条带属性和硬盘性能需求信息，可以将与指定虚拟存储容器对应的硬盘性能需求信息作为待存储数据对应的硬盘性能需求信息。例如，在数据写入请求中携带有指定虚拟存储容器为容器BUCKET_TEST，容器BUCKET_TEST的条带属性为“4+2”，容器BUCKET_TEST的硬盘性能需求信息为指示需要具有较高性能的硬盘进行数据存储的信息。
在元数据管理服务器确定出虚拟存储容器对应的条带属性和硬盘性能需求信息之后，可以根据条带属性和硬盘性能需求信息、以及存储系统中各硬盘当前的状态，组织用于存储待存储数据的至少一个条带，元数据管理服务器可以为每个条带分配唯一的条带标识。
步骤S220，根据预先存储于性能参数数据库中的各硬盘的性能参数，在各硬盘中，确定性能参数满足硬盘性能需求信息的多个硬盘。
在实施中，可以预先建立性能参数数据库，在性能参数数据库中存入市面上常见的不同种类的硬盘的性能参数，该性能参数可以是个分数性质的数值，例如0-100分之间的任一数值，性能参数越高代表该种类的硬盘性能越优。这样，元数据管理服务器可以根据预先存储于性能参数数据库中的各硬盘的性能参数，在存储系统中的各硬盘中，确定性能参数满足硬盘性能需求信息的多个硬盘。例如，硬盘性能需求信息记录的性能参数为80，则需要在存储系统中的各硬盘中，找出性能参数大于或者等于80的多个硬盘。
在元数据管理服务器找出性能参数满足硬盘性能需求信息的多个硬盘的同时，还需要尽量保障这些硬盘是分散的。由于需要对待存储数据对应的多个数据单元进行分散存储，因此在元数据管理服务器组织至少一个条带时，要尽量将每个条带中的不同对象块分散在不同的对象存储服务器中的不同硬盘中。当然，这样做的前提是，对象存储服务器足够多且对象存储服务器中的硬盘的剩余空间足够多。如果不能达到上述前提，还可以尽量将每个条带中的不同对象块均匀分散在几个可用的对象存储服务器中，且需要保障每个条带中的不同对象块分散在这几个可用的对象存储服务器中的不同硬盘中。如果还是不能达到上述两种条件，最后还是要尽量将每个条带中的不同对象块均匀分散在几个可用的对象存储服务器中，且需要均匀分散在这几个可用的对象存储服务器中的可用硬盘中。
通过上面介绍的方式，最终元数据管理服务器可以组织好至少一个条带，每个条带中的对象块是尽量分散开的且是处于满足硬盘性能需求信息的硬盘中的。
可以通过下面的描述符标记组织起来的硬盘：
{<stripe_id,OSD_1,wwn_1>,<stripe_id,OSD_2,wwn_2>,<stripe_id,OSD_3,wwn_3>,<stripe_id,OSD_4,wwn_4>,<stripe_id,OSD_5,wwn_5>}。
其中，stripe_id可以表示条带标识，OSD_n可以表示对象存储服务器标识，wwn_n可以表示硬盘标识。需要说明的是，对于元数据管理服务器来说，它只给数据单元要存储的硬盘，不关心具体存储在硬盘中的哪个对象块中，具体数据单元存储在硬盘中的哪个对象块中是由其他服务器确定的。
步骤S230，基于预设的单元数据量，将待存储数据切分为多个数据单元，将多个数据单元，分别存储于确定出的多个硬盘中。
在实施中，如图4所示，步骤S230可以包括以下处理：
步骤S431，切片服务器基于预设的单元数据量，将待存储数据切分为多个数据单元。
在申请好至少一个条带之后，切片服务器可以基于预设的单元数据量如1M，将待存储数据切分为多个数据单元。例如，如果待存储数据为12M的数据，则可以将其切分为12个数据单元。
步骤S432，切片服务器确定每个数据单元对应的五元组信息。
在切片服务器中，可以为单个条带中的每个对象块分配唯一的key标识。这样，每个对象块都可以由一个五元组信息表示，形如<stripe_id,OSD,wwn,key,value>。其中，value表示数据单元中具体的数据。
如果一个条带中有5个对象块，则该条带的条带信息可以通过下面的形式进行表示：
{<stripe_id,OSD_1,wwn_1,key_1,value_1>,<stripe_id,OSD_2,wwn_2,key_2,va lue_2>,<stripe_id,OSD_3,wwn_3,key_3,value_3>,<stripe_id,OSD_4,wwn_4,key_4,value_4>,<stripe_id,OSD_5,wwn_5,key_5,value_5>}。
步骤S433，切片服务器将每个数据单元对应的五元组信息转换为第一三元组信息，将每个数据单元对应的第一三元组信息发送至每个数据单元对应的对象存储服务器。
假如上述5个对象块分布在不同的对象存储服务器中，切片服务器则需要对条带信息进行处理，将处理后得到的不同对象块的信息分别发送至对应的对象存储服务器。
步骤S434，对象存储服务器基于数据单元对应的第一三元组信息，对数据单元进行存储处理，并向切片服务器返回写入成功信息。
对象存储服务器接收到的是三元组信息，形如<wwn_n,key_n,value_n>。对象存储服务器在接收到三元组信息之后，可以将<key_n,value_n>写入到wwn_n对应的硬盘中。对象存储服务器在进行写入处理成功后，会向切片服务器返回写入成功信息。
步骤S435，切片服务器接收到每个数据单元分别对应的写入成功信息之后，向元数据管理服务器返回每个数据单元对应的第二三元组信息。
当切片服务器接收到整个条带中的不同对象块对应的写入成功信息之后，会将不同对象块对应的三元组信息<stripe_id,wwn_n,key_n>返回至元数据管理服务器。
步骤S436，元数据管理服务器对每个数据单元对应的第二三元组信息进行存储。
元数据管理服务器会将接收到的不同对象块对应的三元组信息进行存储。这样，才算作执行完单个条带的存储处理，接着切片服务器会继续处理下一个条带。
在元数据管理服务器中记录的同一条带中不同对象块对应的三元组信息可以以下面的形式进行表示：
{<stripe_id,wwn_1,key_1>,<stripe_id,wwn_2,key_2>,<stripe_id,wwn_3,key_3>,<stripe_id,wwn_4,key_4>,<stripe_id,wwn_5,key_5>}。
元数据管理服务器可以不记录硬盘所属的对象存储服务器标识，因为wwn在整个存储系统中是唯一的。在同一时刻，一个硬盘只能属于一个对象存储服务器，但是随着时间的经过，该硬盘在逻辑上可以漂移到另外一个对象存储服务器。
可选地，本公开实施例提供的方法还包括：当检测到发生硬盘接入事件时，获取目标硬盘的产品型号信息；如果预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中存在目标硬盘的产品型号信息，则基于第一对应关系和目标硬盘的产品型号信息，确定目标硬盘的目标性能参数；将目标硬盘和对应的目标性能参数，添加到性能参数数据库中。
在实施中，无论存储系统中已有大量的硬盘或者是没有一个硬盘，只要检测到目标硬盘接入到存储系统中时，就可以获取目标硬盘的产品型号信息。其中，产品型号信息可以是硬盘生产厂家为硬盘定制的产品型号，如B企业-SAGGEGHS-15787。由于不同企业生产的不同型号的硬盘，在生产技术、生产工艺、产品设计上的不同，会导致不同型号的硬盘的性能参数可能不同。
目标硬盘的产品型号信息可以在硬盘出厂时被固化在目标硬盘内部，存储系统可以直接读取目标硬盘内部的产品型号信息。接着，可以在预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中查找是否存在目标硬盘的产品型号信息。如果存在，则目标硬盘应该属于市场上比较常见的产品，在第一对应关系中已有关于该产品的性能参数的记录，进而可以基于第一对应关系和目标硬盘的产品型号信息，确定目标硬盘的目标性能参数，将目标硬盘和对应的目标性能参数，添加到性能参数数据库中。
可选地，本公开实施例提供的方法还包括：如果预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中不存在目标硬盘的产品型号信息，则获取目标硬盘的至少一项硬件配置信息；基于至少一项硬件配置信息，确定目标硬盘的目标性能参数。
在实施中，如果目标硬盘是刚刚面世的产品，可能在第一对应关系查找不到该产品的相关记录，则需要获取目标硬盘的至少一项硬件配置信息，基于至少一项硬件配置信息，计算目标硬盘的目标性能参数。其中，硬件配置信息与产品型号信息类似，可以是在硬盘出厂时被固化在目标硬盘内部的信息，存储系统可以直接读取目标硬盘内部的至少一项硬件配置信息。至少一项硬件配置信息可以包括硬盘主控芯片型号、硬盘存储颗粒类型(如SLC、MLC、TLC、Optane等类型)、硬盘缓存颗粒类型、硬盘总容量、硬盘数据传输接口类型(如SATA接口、M.2接口、mSATA接口、PCIE接口、U.2接口等接口)、存储颗粒最大可擦写次数、产品生产日期、产品质保期等。可以基于至少一项硬件配置信息，确定目标硬盘的目标性能参数，即对目标硬盘进行打分。
可选地，基于至少一项硬件配置信息，确定目标硬盘的目标性能参数的步骤可以包括：基于预先存储的硬盘的硬件配置信息和性能分数的第二对应关系，分别确定目标硬盘的每项硬件配置信息对应的性能分数；基于每项硬件配置信息对应的性能分数，确定目标硬盘的目标性能参数。
在实施中，可以基于预先存储的硬盘的硬件配置信息和性能分数的第二对应关系，分别确定目标硬盘的每项硬件配置信息对应的性能分数。例如，目标硬盘的存储颗粒类型为Optane，则目标硬盘得到的性能分数为10分。假如按照性能的优劣从前至后进行排序，排序可以为Optane、SLC、MLC、TLC，分别对应的分值可以为10、8、6、4。以此类推，将每项硬件配置信息对应的性能分数都确定出来，可以进一步确定目标硬盘的目标性能参数。
可选地，性能参数包括读写速度性能分数和/或数据稳定性能分数。
可以从两个方面或者更多的方面对硬盘的性能进行考量，例如读写速度、数据稳定性。当读写速度性能分数较高时，说明硬盘读写数据的速度很快。当数据稳定性能分数较高时，说明该硬盘不易丢失数据。在使用时，可以根据待存储数据的特性，选择合适的性能参数的硬盘。例如，不对待存储数据的读写速度作要求，可以将硬盘性能需求信息中对应于读写速度性能分数的项填写为60，对待存储数据的数据稳定性要求很高，可以将硬盘性能需求信息中对应于数据稳定性能分数的项填写为90。
在目标性能参数包括读写速度性能分数和数据稳定性能分数的情况下，在实施中，可以确定每项硬件配置信息对应的性能分数中包含的所有读写速度性能分数的第一和值、以及每项硬件配置信息对应的性能分数中包含的数据稳定性能分数的第二和值，将第一和值和第二和值确定为目标硬盘的目标性能参数。
可以影响硬盘读写速度的硬件配置信息可以包括硬盘主控芯片型号、硬盘存储颗粒类型、硬盘缓存颗粒类型、硬盘总容量、硬盘数据传输接口类型等。其中，对于硬盘数据传输接口类型来说，如果目标硬盘的数据传输接口是PCIE接口，则会相应提高目标硬盘的读写速度，因为PCIE接口的数据传输带宽可以做到很高。
可以影响硬盘的数据稳定性的硬件配置信息可以包括硬盘主控芯片型号、硬盘存储颗粒类型、硬盘缓存颗粒类型、硬盘数据传输接口类型、存储颗粒最大可擦写次数、产品生产日期、产品质保期等。
在目标性能参数包括读写速度性能分数或数据稳定性能分数的情况下，在实施中，可以将每项硬件配置信息对应的性能分数之和，确定为目标硬盘的目标性能参数。
可选地，本公开实施例提供的方法还包括：每当预设的周期到达时，获取各硬盘的使用损耗信息以及各硬盘的硬件配置信息，基于各硬盘的使用损耗信息以及各硬盘的硬件配置信息，分别确定各硬盘的更新性能参数，如果已存储至少一个数据单元的硬盘的更新性能参数不满足任一数据单元所属数据对应的硬盘性能需求信息，则在各硬盘中，确定更新性能参数满足任一数据单元所属数据对应的硬盘性能需求信息的硬盘为数据转存硬盘，将任一数据单元转存至数据转存硬盘中。
在实施中，硬盘的性能参数不是固定不变的，可能是最初对硬盘的打分只是预测值并不准确后期会改动，也可以是随着使用过程中产生的损耗而导致硬盘的性能有所下降，进而性能参数也随之下降。可以每隔一段时间，根据硬盘的使用损耗信息，对硬盘的性能参数重新进行评定。其中，使用损耗信息可以包括已写入的数据量、已对存储颗粒进行的擦写次数、每日整盘写入次数、产品已使用时长等。元数据管理服务器可以基于各硬盘的使用损耗信息以及各硬盘的硬件配置信息，分别确定各硬盘的更新性能参数，如果已存储至少一个数据单元的硬盘的更新性能参数不满足任一数据单元所属数据对应的硬盘性能需求信息，则在各硬盘中，确定更新性能参数满足任一数据单元所属数据对应的硬盘性能需求信息的硬盘为数据转存硬盘。
除了上述情况之外，当存储系统进行扩容之后，旧的硬盘中存有大量的数据，新的硬盘中没有数据，会造成存储系统的数据分布不均的情况，需要将已有的数据全都分散在存储系统中的各个硬盘中。
元数据管理服务器将需要进行转存的数据单元以及数据转存硬盘告知给审计服务器，审计服务器来执行将需要进行转存的数据单元转存到数据转存硬盘中的处理。
元数据管理服务器通过扫描条带中不同对象块对应的三元组信息<stripe_id,wwn_n,key_n>，将需要进行转存的条带查找出来。例如，存在一个条带，该条带中不同对象块对应的三元组信息可以表示为下面的形式：
{<stripe_id,wwn_1,key_1>,<stripe_id,wwn_1,key_2>,<stripe_id,wwn_3,key_3>,<stripe_id,wwn_4,key_4>,<stripe_id,wwn_5,key_5>}。
元数据管理服务器可以根据当前维护的wwn所属的OSD的信息，对上述三元组信息进行补充，将wwn所属的OSD标识添加进去。补充后得到四元组信息，其可以表示为下面的形式：
{<stripe_id,OSD_1,wwn_1,key_1>,<stripe_id,OSD_1,wwn_1,key_2>,<stripe_id,OSD_3,wwn_3,key_3>,<stripe_id,OSD_3,wwn_4,key_4>,<stripe_id,OSD_5,wwn_5,key_5>}。
元数据管理服务器可以将四元组信息发送给审计服务器。
审计服务器可以对四元组信息进行分析，假如确定出<key1,key2>存储在同一硬盘上，key_1需要进行分散，可以从对象存储服务器获取<wwn_1,key_1>对应的<OSD_1,wwn_1,key_1,value_1>信息。
审计服务器可以向元数据管理服务器申请用于转存<wwn_1,key_1>的数据转存硬盘<OSD_x,wwn_x>。接着，可以将<OSD_1,wwn_1,key_1,value_1>信息写入转存硬盘<OSD_x,wwn_x>中，得到<OSD_x,wwn_x,key_1,value_1>信息。随后，可以将原对象块中的数据单元删除。最后，通知元数据管理服务器转存处理已完成。
元数据管理服务器在确定转存处理已完成之后，可以对条带中不同对象块对应的三元组信息进行维护，例如：
{<stripe_id,wwn_x,key_1>,<stripe_id,wwn_2,key_2>,<stripe_id,wwn_3,key_3>,<stripe_id,wwn_4,key_4>,<stripe_id,wwn_5,key_5>}。
通过本公开实施例提供的方法，可以根据待存储数据的对应的硬盘性能需求信息，为待存储数据寻找整体性能都能满足待存储数据的需求的多个硬盘，进而可以保障存储处理的可靠性。
本公开又一示例性实施例提供了一种存储数据的系统，如图5所示，一种存储数据的装置，所述装置包括：
接收模块510，用于接收待存储数据；
确定模块520，用于获取所述待存储数据对应的硬盘性能需求信息，根据预先存储于性能参数数据库中的各硬盘的性能参数，在所述各硬盘中，确定性能参数满足所述硬盘性能需求信息的多个硬盘；
切分模块530，用于基于预设的单元数据量，将所述待存储数据切分为多个数据单元；
存储模块540，用于将所述多个数据单元，分别存储于确定出的多个硬盘中。
可选地，所述装置还包括：
获取模块，用于当检测到发生硬盘接入事件时，获取目标硬盘的产品型号信息；
所述确定模块520，还用于当预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中存在所述目标硬盘的产品型号信息时，基于所述第一对应关系和所述目标硬盘的产品型号信息，确定所述目标硬盘的目标性能参数；
将所述目标硬盘和对应的目标性能参数，添加到所述性能参数数据库中。
可选地，所述获取模块，还用于当预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中不存在所述目标硬盘的产品型号信息时，获取所述目标硬盘的至少一项硬件配置信息；
所述确定模块520，还用于基于所述至少一项硬件配置信息，确定所述目标硬盘的目标性能参数。
可选地，所述确定模块520，用于：
基于预先存储的硬盘的硬件配置信息和性能分数的第二对应关系，分别确定所述目标硬盘的每项硬件配置信息对应的性能分数；
基于所述每项硬件配置信息对应的性能分数，确定所述目标硬盘的目标性能参数。
可选地，所述装置还包括：
转存模块，用于每当预设的周期到达时，获取所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，基于所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，分别确定所述各硬盘的更新性能参数，如果已存储至少一个数据单元的硬盘的更新性能参数不满足任一数据单元所属数据对应的硬盘性能需求信息，则在所述各硬盘中，确定更新性能参数满足所述任一数据单元所属数据对应的硬盘性能需求信息的硬盘为数据转存硬盘，将所述任一数据单元转存至所述数据转存硬盘中。
可选地，所述性能参数包括读写速度性能分数和/或数据稳定性能分数。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。
通过本公开实施例提供的装置，可以根据待存储数据的对应的硬盘性能需求信息，为待存储数据寻找整体性能都能满足待存储数据的需求的多个硬盘，进而可以保障存储处理的可靠性。
需要说明的是：上述实施例提供的存储数据的装置在存储数据时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将服务器的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。或者，可以将不同的功能模块设置在存储系统中不同的服务器上。另外，上述实施例提供的存储数据的装置与存储数据的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
图6示出了本公开一个示例性实施例提供的服务器1900的结构示意图。其中，服务器1900可以为上述公开实施例中的元数据管理服务器、切片服务器、对象存储服务器、审计服务器。该服务器1900可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(central processing units，CPU)1910和一个或一个以上的存储器1920。其中，所述存储器1920中存储有至少一条指令，所述至少一条指令由所述处理器1910加载并执行以实现上述实施例所述的存储数据的方法。
本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (12)

1.一种存储数据的方法，其特征在于，所述方法包括：
接收待存储数据，根据所述待存储数据的指定虚拟存储容器以及预先存储的虚拟存储容器和硬盘性能需求信息的对应关系，获取所述待存储数据的指定虚拟存储容器对应的硬盘性能需求信息，确定为所述待存储数据对应的硬盘性能需求信息；
根据预先存储于性能参数数据库中的各硬盘的性能参数，在所述各硬盘中，确定性能参数满足所述硬盘性能需求信息的多个硬盘；
基于预设的单元数据量，将所述待存储数据切分为多个数据单元，将所述多个数据单元，分别存储于确定出的多个硬盘中；
每当预设的周期到达时，获取所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，基于所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，分别确定所述各硬盘的更新性能参数，如果已存储至少一个数据单元的硬盘的更新性能参数不满足任一数据单元所属数据对应的硬盘性能需求信息，则在所述各硬盘中，确定更新性能参数满足所述任一数据单元所属数据对应的硬盘性能需求信息的硬盘为数据转存硬盘，将所述任一数据单元转存至所述数据转存硬盘中。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
当检测到发生硬盘接入事件时，获取目标硬盘的产品型号信息；
如果预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中存在所述目标硬盘的产品型号信息，则基于所述第一对应关系和所述目标硬盘的产品型号信息，确定所述目标硬盘的目标性能参数；
将所述目标硬盘和对应的目标性能参数，添加到所述性能参数数据库中。
3.根据权利要求2所述的方法，其特征在于，所述方法还包括：
如果预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中不存在所述目标硬盘的产品型号信息，则获取所述目标硬盘的至少一项硬件配置信息；
基于所述至少一项硬件配置信息，确定所述目标硬盘的目标性能参数。
4.根据权利要求3所述的方法，其特征在于，所述基于所述至少一项硬件配置信息，确定所述目标硬盘的目标性能参数，包括：
基于预先存储的硬盘的硬件配置信息和性能分数的第二对应关系，分别确定所述目标硬盘的每项硬件配置信息对应的性能分数；
基于所述每项硬件配置信息对应的性能分数，确定所述目标硬盘的目标性能参数。
5.根据权利要求1-4中任一项所述的方法，其特征在于，所述性能参数包括读写速度性能分数和/或数据稳定性能分数。
6.一种存储数据的装置，其特征在于，所述装置包括：
接收模块，用于接收待存储数据；
确定模块，用于根据所述待存储数据的指定虚拟存储容器以及预先存储的虚拟存储容器和硬盘性能需求信息的对应关系，获取所述待存储数据的指定虚拟存储容器对应的硬盘性能需求信息，确定为所述待存储数据对应的硬盘性能需求信息，根据预先存储于性能参数数据库中的各硬盘的性能参数，在所述各硬盘中，确定性能参数满足所述硬盘性能需求信息的多个硬盘；
切分模块，用于基于预设的单元数据量，将所述待存储数据切分为多个数据单元；
存储模块，用于将所述多个数据单元，分别存储于确定出的多个硬盘中；
转存模块，用于每当预设的周期到达时，获取所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，基于所述各硬盘的使用损耗信息以及所述各硬盘的硬件配置信息，分别确定所述各硬盘的更新性能参数，如果已存储至少一个数据单元的硬盘的更新性能参数不满足任一数据单元所属数据对应的硬盘性能需求信息，则在所述各硬盘中，确定更新性能参数满足所述任一数据单元所属数据对应的硬盘性能需求信息的硬盘为数据转存硬盘，将所述任一数据单元转存至所述数据转存硬盘中。
7.根据权利要求6所述的装置，其特征在于，所述装置还包括：
获取模块，用于当检测到发生硬盘接入事件时，获取目标硬盘的产品型号信息；
所述确定模块，还用于当预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中存在所述目标硬盘的产品型号信息时，基于所述第一对应关系和所述目标硬盘的产品型号信息，确定所述目标硬盘的目标性能参数；
将所述目标硬盘和对应的目标性能参数，添加到所述性能参数数据库中。
8.根据权利要求7所述的装置，其特征在于，所述获取模块，还用于当预先存储的硬盘的产品型号信息和硬盘的性能参数的第一对应关系中不存在所述目标硬盘的产品型号信息时，获取所述目标硬盘的至少一项硬件配置信息；
所述确定模块，还用于基于所述至少一项硬件配置信息，确定所述目标硬盘的目标性能参数。
9.根据权利要求8所述的装置，其特征在于，所述确定模块，用于：
基于预先存储的硬盘的硬件配置信息和性能分数的第二对应关系，分别确定所述目标硬盘的每项硬件配置信息对应的性能分数；
基于所述每项硬件配置信息对应的性能分数，确定所述目标硬盘的目标性能参数。
10.根据权利要求6-9中任一项所述的装置，其特征在于，所述性能参数包括读写速度性能分数和/或数据稳定性能分数。
11.一种服务器，其特征在于，所述服务器包括处理器、通信接口、存储器和通信总线，其中：
所述处理器、所述通信接口和所述存储器通过所述通信总线完成相互间的通信；
所述存储器，用于存放计算机程序；
所述处理器，用于执行所述存储器上所存放的程序，以实现权利要求1-5任一所述的方法步骤。
12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-5任一所述的方法步骤。
CN201810966238.8A 2018-08-23 2018-08-23 存储数据的方法和装置 Active CN110858122B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810966238.8A CN110858122B (zh) 2018-08-23 2018-08-23 存储数据的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810966238.8A CN110858122B (zh) 2018-08-23 2018-08-23 存储数据的方法和装置

Publications (2)

Publication Number Publication Date
CN110858122A CN110858122A (zh) 2020-03-03
CN110858122B true CN110858122B (zh) 2023-10-20

Family

ID=69636044

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810966238.8A Active CN110858122B (zh) 2018-08-23 2018-08-23 存储数据的方法和装置

Country Status (1)

Country Link
CN (1) CN110858122B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112148222B (zh) * 2020-09-21 2023-08-25 浙江大华技术股份有限公司 数据库硬盘的配置方法、装置、存储介质及电子装置
CN114510195A (zh) * 2020-11-17 2022-05-17 华为技术有限公司 数据存储的方法和装置
CN113885798A (zh) * 2021-09-29 2022-01-04 浙江大华技术股份有限公司 一种数据操作方法、装置、设备及介质

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009294901A (ja) * 2008-06-05 2009-12-17 Hitachi Ltd ストレージ装置及び障害復旧方法
CN103513938A (zh) * 2013-09-16 2014-01-15 华为技术有限公司 一种独立磁盘冗余阵列raid系统扩容方法及装置
US8762635B1 (en) * 2005-03-31 2014-06-24 Google Inc. Method and apparatus for selecting and storing data on a hard disk drive
CN106293511A (zh) * 2016-07-26 2017-01-04 北京理工大学 一种面向连续数据存储的动态局部并行数据布局
CN106708433A (zh) * 2016-12-06 2017-05-24 深圳市深信服电子科技有限公司 存储数据的读写方法及装置
CN106844108A (zh) * 2016-12-29 2017-06-13 成都华为技术有限公司 一种数据存储方法、服务器以及存储系统
CN106919342A (zh) * 2015-12-28 2017-07-04 成都华为技术有限公司 基于自动精简配置的存储资源分配方法和装置
CN107678690A (zh) * 2017-09-29 2018-02-09 山东超越数控电子有限公司 一种固态硬盘及其冗余独立磁盘阵列的实现方法
CN107783734A (zh) * 2017-11-17 2018-03-09 北京联想超融合科技有限公司 一种基于超融合存储系统的资源分配方法、装置及终端

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8756387B2 (en) * 2010-03-05 2014-06-17 International Business Machines Corporation Method and apparatus for optimizing the performance of a storage system
CN108897761B (zh) * 2014-05-27 2023-01-13 华为技术有限公司 一种聚簇存储方法及装置

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8762635B1 (en) * 2005-03-31 2014-06-24 Google Inc. Method and apparatus for selecting and storing data on a hard disk drive
JP2009294901A (ja) * 2008-06-05 2009-12-17 Hitachi Ltd ストレージ装置及び障害復旧方法
CN103513938A (zh) * 2013-09-16 2014-01-15 华为技术有限公司 一种独立磁盘冗余阵列raid系统扩容方法及装置
CN106919342A (zh) * 2015-12-28 2017-07-04 成都华为技术有限公司 基于自动精简配置的存储资源分配方法和装置
CN106293511A (zh) * 2016-07-26 2017-01-04 北京理工大学 一种面向连续数据存储的动态局部并行数据布局
WO2018019119A1 (zh) * 2016-07-26 2018-02-01 北京理工大学 一种面向连续数据存储的动态局部并行数据布局方法及装置
CN106708433A (zh) * 2016-12-06 2017-05-24 深圳市深信服电子科技有限公司 存储数据的读写方法及装置
CN106844108A (zh) * 2016-12-29 2017-06-13 成都华为技术有限公司 一种数据存储方法、服务器以及存储系统
WO2018121456A1 (zh) * 2016-12-29 2018-07-05 华为技术有限公司 一种数据存储方法、服务器以及存储系统
CN107678690A (zh) * 2017-09-29 2018-02-09 山东超越数控电子有限公司 一种固态硬盘及其冗余独立磁盘阵列的实现方法
CN107783734A (zh) * 2017-11-17 2018-03-09 北京联想超融合科技有限公司 一种基于超融合存储系统的资源分配方法、装置及终端

Also Published As

Publication number Publication date
CN110858122A (zh) 2020-03-03

Similar Documents

Publication Publication Date Title
US11379142B2 (en) Snapshot-enabled storage system implementing algorithm for efficient reclamation of snapshot storage space
CN110858122B (zh) 存储数据的方法和装置
CN112328168A (zh) 分片管理方法和分片管理装置
US10922276B2 (en) Online file system check
CN103995855A (zh) 存储数据的方法和装置
CN108733306A (zh) 一种文件合并方法及装置
CN105138284A (zh) 虚拟机磁盘镜像同步操作优化的系统及方法
CN111124264A (zh) 用于重建数据的方法、设备和计算机程序产品
CN111158602A (zh) 数据分层存储方法、读取方法、存储主机及存储系统
CN108491290B (zh) 一种数据写入方法及装置
CN111930716A (zh) 一种数据库扩容方法、装置及系统
CN106095331B (zh) 一种固定大文件内部资源的控制方法
CN113434470B (zh) 数据分布方法、装置及电子设备
CN110737389B (zh) 存储数据的方法和装置
CN107526533B (zh) 存储管理方法及设备
CN111159140A (zh) 数据处理方法、装置、电子设备及存储介质
CN112995257B (zh) 基于云存储架构的缓存扩容方法、装置以及存储介质
CN109960662A (zh) 一种内存回收方法及设备
CN109739688B (zh) 快照资源空间管理方法、装置、电子设备
CN109582235B (zh) 管理元数据存储方法及装置
CN115840731A (zh) 文件处理方法、计算设备及计算机存储介质
CN112000289B (zh) 全闪存储服务器系统数据管理方法及相关组件
EP3264254A1 (en) System and method for a simulation of a block storage system on an object storage system
CN105573862B (zh) 一种恢复文件系统的方法和设备
CN111399774B (zh) 分布式存储系统下基于快照的数据处理方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant