CN106919342A - 基于自动精简配置的存储资源分配方法和装置 - Google Patents

基于自动精简配置的存储资源分配方法和装置 Download PDF

Info

Publication number
CN106919342A
CN106919342A CN201511002774.9A CN201511002774A CN106919342A CN 106919342 A CN106919342 A CN 106919342A CN 201511002774 A CN201511002774 A CN 201511002774A CN 106919342 A CN106919342 A CN 106919342A
Authority
CN
China
Prior art keywords
hard disk
space
write
free space
hard
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201511002774.9A
Other languages
English (en)
Inventor
熊国刚
廖智
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Huawei Technology Co Ltd
Original Assignee
Chengdu Huawei Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Huawei Technology Co Ltd filed Critical Chengdu Huawei Technology Co Ltd
Priority to CN201511002774.9A priority Critical patent/CN106919342A/zh
Publication of CN106919342A publication Critical patent/CN106919342A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0644—Management of space entities, e.g. partitions, extents, pools
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/068—Hybrid storage device

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于自动精简配置的存储资源分配方法和装置，属于存储技术领域。所述方法包括：获取主机发送的写IO请求；当该写IO请求未被分配存储空间时，判断第一硬盘是否存在可用空间，所述第一硬盘为所述至少两种硬盘中随机访问性能最好的硬盘；若所述第一硬盘存在可用空间，则从第一硬盘中为所述写IO请求分配元数据存储空间；若所述第一硬盘不存在可用空间，则从第二硬盘中为所述写IO请求分配元数据存储空间，所述第二硬盘的硬盘性能为所述至少两种硬盘中随机访问性能第二好的硬盘。本发明可以优化自动精简配置业务的性能。

Description

基于自动精简配置的存储资源分配方法和装置
技术领域
本发明涉及存储技术领域，特别涉及一种基于自动精简配置技术的存储资源分配方法和装置。
背景技术
自动精简配置技术是一种在存储业界广泛使用的存储虚拟化技术，在自动精简配置技术中，存储系统利用精简池统一管理存储资源，由精简池将存储资源按需分配给精简卷供上层应用使用。
对于应用而言，可以看到的是精简卷中的逻辑空间地址，若想访问该逻辑空间地址对应的数据，则需要根据逻辑空间地址和物理空间地址的映射关系，查找精简池中与该逻辑空间对应的物理空间，然后访问查找到的物理空间中的数据。因此，在自动精简配置技术中，精简池中除了存储业务数据以外，还要存储用于记录逻辑空间地址到物理空间地址的映射关系的元数据。
现有技术中，精简池会将所有的存储资源统一分配给元数据和业务数据，对于元数据而言，其访问频率较高，采用现有的方式存储元数据，限制了元数据的读写速度，从而直接影响了自动精简配置业务的性能。
发明内容
为了解决现有技术的问题，本发明实施例提供了一种基于自动精简配置的存储资源分配方法和装置。所述技术方案如下：
第一方面，本发明实施例提供了一种基于自动精简配置的存储资源分配方法，适用于具有至少两种硬盘的存储系统，所述方法包括：
获取主机发送的写输入输出IO请求；
当所述写IO请求未被分配存储空间时，判断第一硬盘是否存在可用空间，所述第一硬盘为所述至少两种硬盘中随机访问性能最好的硬盘；
若所述第一硬盘存在可用空间，则从第一硬盘中为所述写IO请求分配元数据存储空间；
若所述第一硬盘不存在可用空间，则从第二硬盘中为所述写IO请求分配元数据存储空间，所述第二硬盘的硬盘性能为所述至少两种硬盘中随机访问性能第二好的硬盘。
其中，随机访问性能可以采用每秒进行读写操作的次数(Input Output PerSecond，简称IOPS)来衡量，IOPS越大，随机访问性能越好。
由于在自动精简配置技术的读写过程中，需要大量地对元数据进行读写，所以元数据的读写速度直接影响自动精简配置业务的性能，本发明实施例通过为元数据分配随机访问性能较好的硬盘的存储空间，从而可以提高自动精简配置业务的性能。此外，在随机访问性能最好的第一硬盘不可用的情况下，可以将元数据存储在随机访问性能仅次于第一硬盘的第二硬盘，通常随机访问性能越好的硬盘，价格越昂贵，通过采用此种方式，可以使得可以兼顾成本和容量。
可选地，所述至少两种硬盘选自固态硬盘SSD、串行高级技术附件SATA硬盘、串行连接小型计算机系统接口SAS硬盘和近线串行连接小型计算机系统接口NL-SAS硬盘。
进一步地，所述第一硬盘为SSD，所述第二硬盘为SAS硬盘。
由于SSD不需要寻址，所以SSD的随机访问性能最好，将元数据存储空间优先从SSD中分配，可以最大程度的保证元数据的访问速度，而SAS硬盘为目前随机访问性能最好的机械硬盘，所以采用SAS硬盘作为第二硬盘，也能提高元数据的访问速度。
在第一方面一种可能的实现方式中，每种硬盘对应一棵空间树，每棵空间树用于记录对应类型硬盘的存储空间的信息。每棵空间树可以包括根节点和多个叶子节点。其中，根节点可以用于记录对应类型的硬盘的总信息，例如该类型硬盘的总容量、该类型的硬盘的可用容量、已用容量等。每个叶子节点与该类型硬盘的一个存储单元对应，用于记录对应的存储单元的信息。存储单元的大小可以根据实际需要设置，例如设置为1G、2G或者一个第一硬盘的容量等。
每种类型的硬盘由一个空间树来管理，与所有类型的硬盘采用一颗树来管理相比，可以降低树的深度，进而在查找元数据时，可以显著提高查找效率。
在这种实现方式中，所述判断所述第一硬盘是否还有可用空间，包括：
根据第一硬盘的空间树判断所述第一硬盘是否还有可用空间，所述第一硬盘的空间树用于记录所述第一硬盘的存储空间的信息。
进一步地，所述第一硬盘的空间树包括根节点和多个叶子节点，每个所述叶子节点对应所述第一硬盘的一个存储单元，每个所述节点用于记录对应的所述存储单元的容量、已用空间和可用空间。
在第一方面另一种可能的实现方式中，所述方法还包括：
在分配所述元数据存储空间之后，判断所述第二硬盘是否存在可用空间；
若所述第二硬盘存在可用空间，则在所述第二硬盘中为所述写IO请求分配业务数据存储空间；
若所述第二硬盘不存在可用空间，则在第三硬盘中为所述写IO请求分配业务数据存储空间，所述第三硬盘的随机访问性能弱于所述第二硬盘的随机访问性能。
在该实现方式中，将业务数据优先存储在随机访问性能较好的第二硬盘中，可以优先保证业务数据的访问速度，当第二硬盘无可用空间时，将业务数据存储在随机访问性能较弱的第三硬盘中，使得在访问速度无法保证的情况下，可以至少保存业务数据正常访问。同时，该方式可以兼顾存储容量和成本问题。
在其他实现方式中，也可以优先从第三硬盘为业务数据分配业务数据存储空间，当第三硬盘没有可用空间时，再从第二硬盘为业务数据分配业务数据存储空间。
在第一方面又一种可能的实现方式中，所述方法还包括：
若所述第三硬盘不存在可用空间，则在第四硬盘中为所述写IO请求分配业务数据存储空间，所述第四硬盘属于所述至少两种硬盘中的一种。
可选地，第四硬盘可以为第一硬盘，也可以为除第一硬盘以外类型的硬盘。
第二方面，本发明实施例提供了一种基于自动精简配置的存储资源分配装置，所述装置包括用于实现上述第一方面所述的方法的单元，例如获取单元、判断单元和分配单元等。
第三方面，本发明实施例提供了一种基于自动精简配置的存储资源分配装置，所述装置包括处理器和存储器，所述存储器用于存储软件程序，当所述处理器运行或执行存储在所述存储器内的软件程序时，可以执行第一方面所述的方法。
第四方面，本发明实施例还提供了一种计算机可读介质，用于存储供基于自动精简配置的存储资源分配装置执行的程序代码，所述程序代码包括执行第一方面所述的方法的指令。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的存储系统的结构示意图；
图2是本发明实施例提供的一种基于自动精简配置的存储资源分配方法的流程图；
图3是本发明实施例提供的一种基于自动精简配置的存储资源分配方法的流程图；
图4是本发明实施例提供的一种基于自动精简配置的存储资源分配装置的结构框图；
图5是本发明实施例提供的一种基于自动精简配置的存储资源分配装置的结构框图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
下面先结合图1简单介绍一下本发明适用的存储系统的结构，如图1所示，该存储系统100包括存储器110、处理器120、通信接口130和硬盘140。图1中示出的存储系统100结构并不构成对存储系统的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
处理器120是存储系统100的控制中心，利用各种接口和线路连接整个存储系统100的各个部分，通过运行或执行存储在存储器110内的软件程序，以及调用存储在存储器110内的数据，执行存储系统100的各种功能和处理数据，从而对存储系统100进行整体控制。可选的，处理器120可包括一个或多个处理核心。
存储器110可用于存储各种数据，例如各种配置参数，以及存储软件程序。处理器120通过运行存储在存储器110的软件程序，从而执行各种功能应用以及数据处理。存储器110可主要包括程序存储区和数据存储区，其中，程序存储区可存储操作系统111、获取模块112、判断模块113和分配模块114等；存储数据区可存储根据存储系统100的使用所创建的数据，例如硬盘的信息等。此外，存储器110可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(Static Random Access Memory，简称SRAM)，电可擦除可编程只读存储器(Electrically Erasable Programmable Read-OnlyMemory，简称EEPROM)，可擦除可编程只读存储器(Erasable ProgrammableRead Only Memory，简称EPROM)，可编程只读存储器(Programmable Read-OnlyMemory，简称PROM)，只读存储器(Read Only Memory，简称ROM)，磁存储器，快闪存储器，磁盘或光盘。
通信接口130用于与其他设备例如主机进行通信，例如接收主机的输入输出(Input Output，简称IO)请求，并发送响应消息。
硬盘140可以包括不同类型的硬盘，比如固态硬盘(Solid State Disk，简称SSD)、机械硬盘等，而机械硬盘还可以分为串行高级技术附件(Serial AdvancedTechnology Attachment，简称SATA)硬盘，串行连接小型计算机系统接口(SerialAdvanced小型计算机系统接口(Small Computer System Interface，简称SCSI)，简称SAS)硬盘、近线串行连接小型计算机系统接口(Near Line SAS，简称NL-SAS)等。其中，按照随机访问性能排序，SSD的随机访问性能最好，其次为SAS硬盘，再次为SATA硬盘，最后为NL-SAS硬盘。
在本发明实施例中，存储系统100包括至少两种硬盘，每种硬盘的个数为一个或多个。其中，至少两种硬盘是指硬盘的类型不同。这些硬盘140可以为独立磁盘构成的冗余阵列(Redundant Arrays of Independent Disks，简称RAID)。
硬盘140的存储空间需要对应的数据结构进行管理。在本发明实施例中，对于不同类型的硬盘，采用独立的数据结构进行管理。进一步地，可以采用空间树管理硬盘140的存储空间。
具体地，每种硬盘对应一棵空间树，每棵空间树用于记录一种类型的硬盘的存储空间的信息，包括但不限于一种类型的硬盘的总容量、该类型的硬盘的可用容量、已用容量、空间使用状态等。实现时，空间树可以为B树或B+树。将每种硬盘采用各自独立的空间树进行管理，可以降低树的深度，提高查询效率，并且，可以降低并发IO操作冲突的可能。
每棵空间树均包括根节点和多个叶子节点，每个叶子节点对应该类型硬盘的一个存储单元，用于记录对应的存储单元的信息，叶子节点记录的存储单元的信息包括但不限于硬盘容量、已用容量、已用空间、可用空间、预留空间等。存储单元的大小可以根据实际需要设置，例如设置为1G、2G或者一个第一硬盘的容量等。
实现时，可以采用位图、链表、哈希树等表示硬盘的存储空间的分配情况。例如，将每个存储单元划分为设定大小的存储块，例如，4K、8K等，存储块与位图中的位一一对应，位图中的位为1(或0)时，表示对应的存储块已使用；位图中的位为0(或1)时，表示对应的存储块未使用。需要说明的是，在本发明实施例中，硬盘的存储空间均指物理空间。
各类型的硬盘的空间树可以存储在精简池中某几个硬盘的固定区域或者存储在精简池以外的硬盘中，在系统启动时，会将其加载到缓存中，以提高访问速度。
创建或扩容时，若增加了某种类型的硬盘，只需要增加该类型硬盘对应的空间树的叶子节点，在增加的叶子节点中记录增加的硬盘的存储单元的相关信息，并在该空间树的根节点中更新该类型硬盘的相关信息即可，实现方便。
本发明基于自动精简配置，因此，前述至少两种硬盘采用精简池统一管理，精简池的容量的大小可以等于或者小于存储系统中所有硬盘的总容量。精简池上创建有精简卷，又称精简逻辑单元号(Thin Logical Unit Number，简称ThinLUN)，精简卷的容量可以大于、等于或者小于精简池的总容量，精简卷的容量可以根据实际需要配置。
当该存储系统100接收到主机发送的写IO请求时，通过精简卷为其中的业务数据分配逻辑空间，当分配了逻辑空间后，再从精简池中为该IO请求中的业务数据分配对应的物理空间(即业务数据存储空间)和用于记录元数据的物理空间(即元数据存储空间)，该元数据包括精简卷的逻辑空间的地址到精简池的物理空间的地址的映射关系，最后再将元数据写入元数据存储空间并将业务护具写入业务数据存储空间。
当该存储系统100接收到主机发送的读IO请求时，先访问元数据存储空间，得到读IO请求对应的元数据，然后根据元数据记录的精简卷的逻辑空间的地址到精简池的物理空间的地址的映射关系，得到业务数据所在的物理空间的地址，进而从该物理空间读取业务数据。
元数据具有以下特点：
元数据与业务数据占用物理空间相比，仅占少量空间；
元数据读写非常频繁，且读IO数量大于写IO；
元数据读写请求为随机小IO请求。
基于上述特点，本发明实施例通过优先为元数据分配随机访问性能高的硬盘的存储空间，从而可以提升元数据的访问性能，从而达到提升存储系统的整体读写性能的目的。具体方法见下面的基于自动精简配置的存储资源分配方法的实施例。
本发明实施例提供了一种基于自动精简配置的存储资源分配方法，本实施例以该方法应用于图1所示的存储系统为例说明，如图2所示，该方法包括：
步骤201：获取主机发送的写IO请求。
步骤202：当该写IO请求未被分配存储空间时，判断第一硬盘是否存在可用空间，若所述第一硬盘存在可用空间，则执行步骤203；若第一硬盘不存在可用空间，则执行步骤204。
其中，第一硬盘为所述至少两种硬盘中随机访问性能最好的硬盘。
步骤203：从第一硬盘中为该写IO请求分配元数据存储空间。
步骤204：从第二硬盘中为该写IO请求分配元数据存储空间。
其中，第二硬盘的硬盘性能为至少两种硬盘中随机访问性能第二好的硬盘。
本发明实施例提供了一种基于自动精简配置的存储资源分配方法，本实施例以该方法应用于图1所示的存储系统为例说明，在本实施例中，以存储系统包括三种硬盘为例，对本发明进行详细说明。其中，按照硬盘的随机访问性能排序，第一硬盘为SSD，第二硬盘为SAS硬盘，第三硬盘为SATA硬盘。如图3所示，该方法包括：
步骤301：接收主机发送的写IO请求。
其中，该写IO请求包括LUN的ID和逻辑区块地址(Logical Block Address，LBA)。该写IO请求还包括待写入的业务数据。
当该LUN为Thin LUN时，则执行步骤302，当该LUN不是Thin LUN时，直接根据LBA线性映射到物理空间，从该物理空间读取业务数据。
主机发送的IO请求包括读IO请求和写IO请求，IO请求中可以携带标识位，例如，当该标识位为1(或0)时，表示当前IO请求为写IO请求，当该标识位为0(或1)时，表示当前IO请求为读IO请求。
步骤302：判断该写IO请求是否被分配存储空间，当该写IO请求未被分配存储空间时，执行步骤303；当该写IO请求被分配过存储空间时，执行步骤308。
其中，该步骤302可以包括：
在该LUN对应的元数据存储空间中查找LBA，若在该LUN对应的元数据存储空间中查找到该LBA，表示该写IO请求已被分配过存储空间；若在该LUN对应的元数据存储空间中未查找到该LBA，则表示该写IO请求未被分配过存储空间。
步骤303：判断第一硬盘是否存在可用空间，若第一硬盘存在可用空间，则执行步骤304；若第一硬盘不存在可用空间，则执行步骤305。
该步骤303可以包括：
根据第一硬盘的空间树判断所述第一硬盘是否还有可用空间，该第一硬盘的空间树用于记录所述第一硬盘的存储空间的信息。
如前所述，第一硬盘的空间树包括根节点和多个叶子节点，根节点用于记录第一硬盘的总容量，每个节点对应第一硬盘的一个存储单元，每个节点用于记录对应的存储单元的容量、已用空间和可用空间。
步骤304：从第一硬盘中为写IO请求分配元数据存储空间。
步骤305：判断第二硬盘中是否存在可用空间，若第二硬盘存在可用空间，则执行步骤306；若第二硬盘不存在可用空间，则执行步骤307；
同样地，判断第二硬盘中是否存在可用空间，可以根据第二硬盘的空间树判断第二硬盘是否还有可用空间，该第二硬盘的空间树用于记录第二硬盘的存储空间的信息。
步骤306：从第二硬盘中为写IO请求分配元数据存储空间。
步骤307：向主机发送响应消息。
该响应消息用于指示元数据存储空间不能分配。
在分配元数据存储空间之后，需要将元数据存储空间的索引加载到缓存中，
步骤308：根据写IO请求中的LBA，查找LBA对应的存储空间的地址，并将写IO请求中的业务数据写入查找到的存储空间。
步骤309：在分配元数据存储空间之后，判断第二硬盘是否存在可用空间；若第二硬盘存在可用空间，则执行步骤310；若第二硬盘不存在可用空间，则执行步骤311。
步骤310：在第二硬盘中为写IO请求分配业务数据存储空间。
步骤311：判断第三硬盘是否存在可用空间，若第三硬盘存在可用空间，则执行步骤312；若第三硬盘不存在可用空间，则执行步骤313。
步骤312：在第三硬盘中为写IO请求分配业务数据存储空间。
步骤313：判断第一硬盘是否存在可用空间，若第一硬盘存在可用空间，则执行步骤314；若第一硬盘不存在可用空间，则执行步骤315。
步骤314：从第一硬盘中为写IO请求分配业务数据存储空间。
步骤315：向主机发送响应消息。
其中，该响应消息用于指示业务数据存储空间不能分配。
在分配了业务数据存储空间之后，本实施例的方法还包括：
将写IO请求中的业务数据写入分配到的业务数据存储空间；
将记录业务数据存储空间的地址与Thin LUN的逻辑空间的地址的映射关系的元数据写入分配到的元数据存储空间。
容易知道，当元数据存储空间和业务数据存储空间分配以后，需要修改对应的硬盘的空间树的信息，例如，将分配的空间修改为已用空间。
值得注意的是，在其他实施例中，步骤313和步骤314中的第一硬盘可以由第四硬盘替换，该第四硬盘的随机访问性能比前述第一硬盘、第二硬盘和第三硬盘的随机访问性能差，例如NL-SAS；或者，还可以在步骤313和步骤314之前，增加先判断第四硬盘是否存在可用空间的步骤，当第一硬盘不存在可用空间再执行步骤313。
上述步骤的执行可以通过存储系统根据前述软件程序执行。例如，步骤301由存储系统根据图1中的获取模块112执行，步骤303、305、309、311、313由存储系统根据判断模块113执行，步骤304、306、310、312、314由存储系统根据分配模块114执行。
本发明实施例提供了一种基于自动精简配置的存储资源分配装置，适用于图1所示的存储系统，参见图4，该装置可以通过软件、硬件或者两者的结合实现成为存储系统的全部或者一部分。该装置可以包括：
获取单元401，用于获取主机发送的写IO请求；
判断单元402，用于当获取单元401获得的写IO请求未被分配存储空间时，判断第一硬盘是否存在可用空间，该第一硬盘为所述至少两种硬盘中随机访问性能最好的硬盘；
分配单元403，用于当判断单元402判断第一硬盘存在可用空间时，从第一硬盘中为获取单元401获得的写IO请求分配元数据存储空间；当判断单元403判断所述第一硬盘不存在可用空间时，从第二硬盘中为获取单元401获得的写IO请求分配元数据存储空间，该第二硬盘的硬盘性能为至少两种硬盘中随机访问性能第二好的硬盘。
本发明实施例提供了一种基于自动精简配置的存储资源分配装置，适用于图1所示的存储系统，参见图5，该装置可以通过软件、硬件或者两者的结合实现成为存储系统的全部或者一部分。该装置可以包括：
获取单元501，用于获取主机发送的写IO请求；
判断单元502，用于当获取单元501获得的写IO请求未被分配存储空间时，判断第一硬盘是否存在可用空间，该第一硬盘为所述至少两种硬盘中随机访问性能最好的硬盘；
分配单元503，用于当判断单元502判断第一硬盘存在可用空间时，从第一硬盘中为获取单元501获得的写IO请求分配元数据存储空间；当判断单元503判断所述第一硬盘不存在可用空间时，从第二硬盘中为获取单元501获得的写IO请求分配元数据存储空间，该第二硬盘的硬盘性能为至少两种硬盘中随机访问性能第二好的硬盘。
可选地，至少两种硬盘选自SSD、SATA硬盘、SAS硬盘和NL-SAS硬盘。
优选地，所述第一硬盘可以为SSD，所述第二硬盘可以为SAS硬盘。
在本实施例的一种实现方式中，该判断单元502，具体用于根据第一硬盘的空间树判断所述第一硬盘是否还有可用空间，所述第一硬盘的空间树用于记录所述第一硬盘的存储空间的信息。
所述第一硬盘的空间树包括多个节点，每个节点所述第一硬盘的一个存储单元，每个所述节点用于记录对应的所述存储单元的容量、已用空间和可用空间。
在本实施例的一种实现方式中，所述判断单元502，还用于在所述分配单元分配所述元数据存储空间之后，判断所述第二硬盘是否存在可用空间；
所述分配单元503，还用于当所述判断单元502判断所述第二硬盘存在可用空间时，在所述第二硬盘中为所述写IO请求分配业务数据存储空间；当所述判断单元502判断所述第二硬盘不存在可用空间时，在第三硬盘中为所述写IO请求分配业务数据存储空间，所述第三硬盘的随机访问性能弱于所述第二硬盘的随机访问性能。
实现时，第三硬盘可以为SATA硬盘。
分配单元503，还用于当所述第三硬盘不存在可用空间时，在第四硬盘中为所述写IO请求分配业务数据存储空间，所述第四硬盘属于所述至少两种硬盘中的一种。实现时，第四硬盘可以为SSD也可以为NL-SAS硬盘。
需要说明的是，判断单元502可以根据各类型硬盘对应的空间树判断各类型硬盘是否存在可用空间，分配模块503可以根据判断单元503的判断结果，从各类型硬盘中为写IO请求分配存储空间(元数据存储空间或业务数据存储空间)。在本发明的其他实施例中，也可以优先从随机读写性能最差的硬盘中为业务数据分配存储空间(即业务数据存储空间)，当随机读写性能最差的硬盘的没有可用空间时，再从随机读写性能较好的硬盘中为业务数据分配存储空间。其具体实现可以参见图3所示方法实施例，在此省略详细描述。
需要说明的是：上述实施例提供的基于自动精简配置的存储资源分配装置在存储数据时，仅以上述各功能单元的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元完成，即将装置的内部结构划分成不同的功能单元，以完成以上描述的全部或者部分功能。另外，上述实施例提供的基于自动精简配置的存储资源分配装置与基于自动精简配置的存储资源分配方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (14)

1.一种基于自动精简配置的存储资源分配方法，其特征在于，适用于具有至少两种硬盘的存储系统，所述方法包括：
获取主机发送的写输入输出IO请求；
当所述写IO请求未被分配存储空间时，判断第一硬盘是否存在可用空间，所述第一硬盘为所述至少两种硬盘中随机访问性能最好的硬盘；
若所述第一硬盘存在可用空间，则从第一硬盘中为所述写IO请求分配元数据存储空间；
若所述第一硬盘不存在可用空间，则从第二硬盘中为所述写IO请求分配元数据存储空间，所述第二硬盘的硬盘性能为所述至少两种硬盘中随机访问性能第二好的硬盘。
2.根据权利要求1所述的方法，其特征在于，所述至少两种硬盘选自固态硬盘、串行高级技术附件SATA硬盘、串行连接小型计算机系统接口SAS硬盘和近线串行连接小型计算机系统接口NL-SAS硬盘。
3.根据权利要求2所述的方法，其特征在于，所述第一硬盘为固态硬盘SSD，所述第二硬盘为SAS硬盘。
4.根据权利要求1-3任一项所述的方法，其特征在于，所述判断所述第一硬盘是否还有可用空间，包括：
根据第一硬盘的空间树判断所述第一硬盘是否还有可用空间，所述第一硬盘的空间树用于记录所述第一硬盘的存储空间的信息。
5.根据权利要求4所述的方法，其特征在于，所述第一硬盘的空间树包括根节点和多个叶子节点，每个所述叶子节点对应所述第一硬盘的一个存储单元，每个所述节点用于记录对应的所述存储单元的容量、已用空间和可用空间。
6.根据权利要求1-3任一项所述的方法，其特征在于，所述方法还包括：
在分配所述元数据存储空间之后，判断所述第二硬盘是否存在可用空间；
若所述第二硬盘存在可用空间，则在所述第二硬盘中为所述写IO请求分配业务数据存储空间；
若所述第二硬盘不存在可用空间，则在第三硬盘中为所述写IO请求分配业务数据存储空间，所述第三硬盘的随机访问性能弱于所述第二硬盘的随机访问性能。
7.根据权利要求6所述的方法，其特征在于，所述方法还包括：
若所述第三硬盘不存在可用空间，则在第四硬盘中为所述写IO请求分配业务数据存储空间，所述第四硬盘属于所述至少两种硬盘中的一种。
8.一种基于自动精简配置的存储资源分配装置，其特征在于，适用于具有至少两种硬盘的存储系统，所述装置包括：
获取单元，用于获取主机发送的写输入输出IO请求；
判断单元，用于当所述获取单元获得的写IO请求未被分配存储空间时，判断第一硬盘是否存在可用空间，所述第一硬盘为所述至少两种硬盘中随机访问性能最好的硬盘；
分配单元，用于当所述判断单元判断所述第一硬盘存在可用空间时，从第一硬盘中为所述写IO请求分配元数据存储空间；当所述判断单元判断所述第一硬盘不存在可用空间时，从第二硬盘中为所述写IO请求分配元数据存储空间，所述第二硬盘的硬盘性能为所述至少两种硬盘中随机访问性能第二好的硬盘。
9.根据权利要求8所述的装置，其特征在于，所述至少两种硬盘选自固态硬盘、串行高级技术附件SATA硬盘、串行连接小型计算机系统接口SAS硬盘和近线串行连接小型计算机系统接口NL-SAS硬盘。
10.根据权利要求9所述的装置，其特征在于，所述第一硬盘为固态硬盘，所述第二硬盘为SAS硬盘。
11.根据权利要求8-10任一项所述的装置，其特征在于，所述判断单元，具体用于根据第一硬盘的空间树判断所述第一硬盘是否还有可用空间，所述第一硬盘的空间树用于记录所述第一硬盘的存储空间的信息。
12.根据权利要求11所述的装置，其特征在于，所述第一硬盘的空间树包括根节点和多个叶子节点，每个所述叶子节点对应所述第一硬盘的一个存储单元，每个所述节点用于记录对应的所述存储单元的容量、已用空间和可用空间。
13.根据权利要求8-10任一项所述的装置，其特征在于，
所述判断单元，还用于在所述分配单元分配所述元数据存储空间之后，判断所述第二硬盘是否存在可用空间；
所述分配单元，还用于当所述判断单元判断所述第二硬盘存在可用空间时，在所述第二硬盘中为所述写IO请求分配业务数据存储空间；当所述判断单元判断所述第二硬盘不存在可用空间时，在第三硬盘中为所述写IO请求分配业务数据存储空间，所述第三硬盘的随机访问性能弱于所述第二硬盘的随机访问性能。
14.根据权利要求13所述的装置，其特征在于，所述分配单元，还用于当所述第三硬盘不存在可用空间时，在第四硬盘中为所述写IO请求分配业务数据存储空间，所述第四硬盘属于所述至少两种硬盘中的一种。
CN201511002774.9A 2015-12-28 2015-12-28 基于自动精简配置的存储资源分配方法和装置 Pending CN106919342A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201511002774.9A CN106919342A (zh) 2015-12-28 2015-12-28 基于自动精简配置的存储资源分配方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201511002774.9A CN106919342A (zh) 2015-12-28 2015-12-28 基于自动精简配置的存储资源分配方法和装置

Publications (1)

Publication Number Publication Date
CN106919342A true CN106919342A (zh) 2017-07-04

Family

ID=59455823

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201511002774.9A Pending CN106919342A (zh) 2015-12-28 2015-12-28 基于自动精简配置的存储资源分配方法和装置

Country Status (1)

Country Link
CN (1) CN106919342A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020000735A1 (zh) * 2018-06-28 2020-01-02 平安科技（深圳）有限公司 写数据方法、装置、计算机装置及存储介质
CN110858122A (zh) * 2018-08-23 2020-03-03 杭州海康威视系统技术有限公司 存储数据的方法和装置
CN110989936A (zh) * 2019-12-06 2020-04-10 深信服科技股份有限公司 一种存储空间分配方法、装置及存储介质
CN112068765A (zh) * 2019-06-10 2020-12-11 伊姆西Ip控股有限责任公司 管理存储系统的方法、设备和计算机程序产品

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080049276A1 (en) * 2006-08-24 2008-02-28 Hitachi, Ltd. Storage control apparatus and storage control method
CN102968381A (zh) * 2012-11-19 2013-03-13 浪潮电子信息产业股份有限公司 一种利用固态硬盘提高快照性能的方法
CN102968279A (zh) * 2012-11-13 2013-03-13 浪潮电子信息产业股份有限公司 一种存储系统自动精简配置的方法
CN104216796A (zh) * 2013-06-04 2014-12-17 联想(北京)有限公司 一种数据备份、恢复方法及电子设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080049276A1 (en) * 2006-08-24 2008-02-28 Hitachi, Ltd. Storage control apparatus and storage control method
CN102968279A (zh) * 2012-11-13 2013-03-13 浪潮电子信息产业股份有限公司 一种存储系统自动精简配置的方法
CN102968381A (zh) * 2012-11-19 2013-03-13 浪潮电子信息产业股份有限公司 一种利用固态硬盘提高快照性能的方法
CN104216796A (zh) * 2013-06-04 2014-12-17 联想(北京)有限公司 一种数据备份、恢复方法及电子设备

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020000735A1 (zh) * 2018-06-28 2020-01-02 平安科技（深圳）有限公司 写数据方法、装置、计算机装置及存储介质
CN110858122A (zh) * 2018-08-23 2020-03-03 杭州海康威视系统技术有限公司 存储数据的方法和装置
CN110858122B (zh) * 2018-08-23 2023-10-20 杭州海康威视系统技术有限公司 存储数据的方法和装置
CN112068765A (zh) * 2019-06-10 2020-12-11 伊姆西Ip控股有限责任公司 管理存储系统的方法、设备和计算机程序产品
CN112068765B (zh) * 2019-06-10 2024-04-26 伊姆西Ip控股有限责任公司 管理存储系统的方法、设备和计算机程序产品
CN110989936A (zh) * 2019-12-06 2020-04-10 深信服科技股份有限公司 一种存储空间分配方法、装置及存储介质

Similar Documents

Publication Publication Date Title
US20230315290A1 (en) Namespaces allocation in non-volatile memory devices
US9298384B2 (en) Method and device for storing data in a flash memory using address mapping for supporting various block sizes
CN107122131B (zh) 自动精简配置的方法及装置
EP3617867B1 (en) Fragment management method and fragment management apparatus
CN103514249B (zh) 一种数据自精简方法和系统及存储装置
CN109240938A (zh) 存储系统以及控制非易失性存储器的控制方法
US20140351515A1 (en) Providing data attributes to a storage manager to use to select a storage tier to use for a data set management operation
CN103838853B (zh) 一种基于不同存储介质的混合文件系统
US8326893B2 (en) Allocating data sets to a container data set
CN106970765B (zh) 数据存储方法及装置
US20200349038A1 (en) Storage management method, electronic device, and computer program product
CN106708423A (zh) 多模存储管理系统
CN106708751A (zh) 包括用于多模操作的多分区的存储装置及其操作方法
JP2022500759A (ja) 不揮発性メモリエクスプレスデバイスのネットワークをサニタイズするときに使用する方法および装置
CN113568562A (zh) 一种存储系统、内存管理方法和管理节点
US10365845B1 (en) Mapped raid restripe for improved drive utilization
CN103985393B (zh) 一种多光盘数据并行管理方法及装置
CN107924291A (zh) 存储系统
US10838624B2 (en) Extent pool allocations based on file system instance identifiers
CN104536903A (zh) 一种按数据属性分类存放的混合存储方法及系统
CN106201923A (zh) 读写数据方法及装置
CN108628541A (zh) 一种文件存储的方法、装置及存储系统
CN107562367B (zh) 基于软件化存储系统读写数据的方法以及装置
CN106919342A (zh) 基于自动精简配置的存储资源分配方法和装置
CN104272242A (zh) 创建加密存储体

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170704

RJ01 Rejection of invention patent application after publication