CN117093150A - 一种存储系统、存储系统的配置方法及装置 - Google Patents

一种存储系统、存储系统的配置方法及装置 Download PDF

Info

Publication number
CN117093150A
CN117093150A CN202311074977.3A CN202311074977A CN117093150A CN 117093150 A CN117093150 A CN 117093150A CN 202311074977 A CN202311074977 A CN 202311074977A CN 117093150 A CN117093150 A CN 117093150A
Authority
CN
China
Prior art keywords
interactive
storage
server
queue
type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202311074977.3A
Other languages
English (en)
Other versions
CN117093150B (zh
Inventor
吴佳欢
倪新江
郭跃磊
蔡振江
沈家昌
蒋旭初
陈保文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hexin Technology Co ltd
Hexin Technology Suzhou Co ltd
Original Assignee
Hexin Technology Co ltd
Hexin Technology Suzhou Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hexin Technology Co ltd, Hexin Technology Suzhou Co ltd filed Critical Hexin Technology Co ltd
Priority to CN202311074977.3A priority Critical patent/CN117093150B/zh
Publication of CN117093150A publication Critical patent/CN117093150A/zh
Application granted granted Critical
Publication of CN117093150B publication Critical patent/CN117093150B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0679—Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种存储系统、存储系统的配置方法及装置，系统包括：第一存储机头、第二存储机头、存储池、存储池中包含多个第一类存储单元和第二类存储单元；第一存储机头与第一服务器列表中的服务器建立有关联关系，结合所述第一类存储单元执行所述第一服务器列表中的第一类服务器的任务，第一类服务器执行交互式队列中的任务；第二存储机头与第二服务器列表中的服务器建立有关联关系，结合所述第二类存储单元执行所述第二服务器列表中的第二类服务器的任务，第二类服务器执行非交互式队列中的任务；第一类存储单元与交互式用户建立有关联关系，第二类存储单元与非交互式用户建立有关联关系。本发明在满足高响应需求的同时降低了存储系统的成本。

Description

一种存储系统、存储系统的配置方法及装置
技术领域
本发明涉及数据存储技术领域，具体涉及一种存储系统、存储系统的配置方法及装置。
背景技术
现有的存储系统中，不论是集中式系统还是分布式系统，在遇到流量风暴时都会造成数据流的拥塞，使得存储的用户感知到卡顿的出现。
为了减少用户在使用过程中的卡顿，现有技术中增加提高固态硬盘在存储系统里面的比例，甚至采用全闪的技术路径，来消纳巨大的数据流，全闪的技术路径是指在存储系统中全部采用固态存储器的存储服务器节点，由于固态硬盘的响应速度较快，因此，在存储系统中增加固态硬盘可以提高对数据的处理速度，但是固态硬盘的成本较高，增加固态硬盘会大大提高存储系统的成本。
现有技术中还采用增加多个存储机头的方式，通过多个存储机头共同处理存储任务，提高并行度，扩大带宽和通道，但是随机分配很难预测流量的发生未知，在大流量服务器不可预知的情况下，依然存在聚集式拥塞的可能性。
发明内容
因此，本发明要解决的技术问题在于克服现有技术中无法低成本解决存储系统数据流拥塞问题的缺陷，从而提供一种存储系统、存储系统的配置方法及装置。
本发明第一方面提供了一种存储系统，包括：第一存储机头、第二存储机头、存储池，存储池中包含多个第一类存储单元和多个第二类存储单元，第一类存储单元的响应速度高于第二类存储单元的响应速度；第一存储机头与第一服务器列表中的服务器建立有关联关系，结合第一类存储单元执行第一服务器列表中的服务器的任务，第一服务器列表是根据交互式队列确定的，第一服务器列表中的服务器用于执行交互式队列中的任务；第二存储机头与第二服务器列表中的服务器建立有关联关系，结合第二类存储单元执行第二服务器列表中的服务器的任务，第二服务器列表是根据非交互式列表确定的，第二服务器列表中的服务器用于执行非交互式队列中的任务，交互式队列中的任务的要求响应时间小于非交互式队列中的任务的要求响应时间；第一类存储单元与交互式用户建立有关联关系，第二类存储单元与非交互式用户建立有关联关系，交互式用户和非交互式用户是根据各用户对交互式队列和非交互式队列的使用记录确定的。
可选地，在本发明提供的存储系统中，第一存储机头和第二存储机头与各服务器的关联关系周期性更新。
可选地，在本发明提供的存储系统中，还包括第三存储机头，第三存储机头与虚拟化服务器建立有关联关系，结合第一类存储单元执行虚拟化服务器的任务。
可选地，在本发明提供的存储系统中，还包括第四存储机头，存储池中还包括第三类存储单元，第四存储机头用于结合第三类存储单元执行根目录任务，根目录任务是与各用户的根目录对应的任务。
可选地，在本发明提供的存储系统中，第一类存储单元按照预先设定的转存策略将第一类存储单元中的数据转出至第二类存储单元中，以释放第一类存储单元的存储空间。
本发明第二方面提供了一种存储系统的配置方法，包括如下步骤：根据交互式队列确定第一服务器列表，第一服务器列表中的多个服务器用于执行交互式队列中的任务；根据非交互式队列确定第二服务器列表，第二服务器列表中的多个服务器用于执行非交互式队列中的任务；交互式队列和非交互式队列是将集群队列划分得到的，交互式队列用于执行交互式任务，非交互式队列用于执行非交互式任务；根据各用户对交互式队列和非交互式队列的使用记录，将各用户划分为交互式用户和非交互式用户；建立第一存储机头与第一服务器列表中各服务器的关联关系，以使第一存储机头结合第一类存储单元执行第一服务器列表中的服务器的任务；建立第二存储机头与第二服务器列表中各服务器的关联关系，以使第二存储机头结合第二类存储单元执行第二服务器列表中的服务器的任务；建立交互式用户与第一类存储单元的关联关系，建立非交互式队列与第二类存储单元的关联关系，第一类存储单元的响应速度高于第二类存储单元的响应速度。
可选地，本发明提供的存储系统的配置方法还包括：周期性地根据交互式队列和非交互式队列更新第一服务器列表和第二服务器列表；根据更新后的服务器列表和第二服务器列表更新各服务器与第一存储机头和第二存储机头的关联关系。
可选地，本发明提供的存储系统的配置方法中，根据各用户对交互式队列和非交互式队列的使用记录，将用户划分为交互式用户和非交互式用户的步骤，包括：根据各用户对交互式队列和非交互式队列的使用记录，确定各用户对交互式队列的使用频率和对非交互式队列的使用频率；根据使用频率将用户划分为交互式用户和非交互式用户，交互式用户对交互式队列的使用频率高于交互式用户对非交互式队列的使用频率。
本发明第三方面提供了一种存储系统的配置装置，包括：第一服务器列表确定模块，用于根据交互式队列确定第一服务器列表，第一服务器列表中的多个服务器用于执行交互式队列中的任务；第二服务器列表确定模块，用于根据非交互式队列确定第二服务器列表，第二服务器列表中的多个服务器用于执行非交互式队列中的任务；交互式队列和非交互式队列是将集群队列划分得到的，交互式队列用于执行交互式任务，非交互式队列用于执行非交互式任务；用户划分模块，用于根据各用户对交互式队列和非交互式队列的使用记录，将用户划分为交互式用户和非交互式用户；第一关联关系建立模块，用于建立第一存储机头与第一服务器列表中各服务器的关联关系，以使第一存储机头结合第一类存储单元执行第一服务器列表中的服务器的任务；第二关联关系建立模块，用于建立第二存储机头与第二服务器列表中各服务器的关联关系，以使第二存储机头结合第二类存储单元执行第二服务器列表中的服务器的任务；第三关联关系建立模块，用于建立交互式用户与第一类存储单元的关联关系，建立非交互式队列与第二类存储单元的关联关系，第一类存储单元的响应速度高于第二类存储单元的响应速度。
本发明第四方面提供了一种计算机设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器；其中，存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，从而执行如本发明第二方面提供的存储系统的配置方法。
本发明第五方面提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机指令，计算机指令用于使计算机执行如本发明第二方面提供的存储系统的配置方法。
本发明技术方案，具有如下优点：
本发明提供的存储系统、存储系统的配置方法及装置，设置了两种存储机头，将服务器划分为两类，第一类服务器执行响应要求高的任务，第二类服务器执行响应要求较低的任务，将第一类服务器与第一存储机头11连接，第二类服务器与第二存储机头12连接，第一存储机头11结合第一类存储单元执行第一服务器列表中的服务器的任务，第二存储机头12结合第二类存储单元141执行第二服务器列表中的服务器的任务，还将用户分为了交互式用户和非交互式用户，交互式用户与第一类存储单元131建立关联关系，非交互式用户与第二类存储单元141建立关联关系。本发明实施例按照响应需求将服务器和用户划分类别，按照响应能力将存储机头和存储池划分类别，利用不同的存储机头和存储池服务不同需求的服务器和用户，能够让第一类存储单元131为交互式用户服务充分发挥响应速度快的特征，让第二类存储单元141为非交互式用户服务充分发挥存储容量大成本低的特性，在满足了高响应需求的基础上，降低了存储系统的成本。并且，在本发明实施例中，第一类服务器、第二类服务器、交互式用户、非交互式任务是根据交互式队列和非交互式队列划分的，而交互式队列和非交互式队列是集群队列在对任务进行调度过程中划分的，因此，按照交互式队列和非交互式队列对用户和服务器进行划分，能真实反映各用户是否有高响应需求，各服务器执行的任务中是否含有大量的高响应任务，因此，通过执行本发明实施例，能够精准地满足各用户及各服务器对存储池的使用需求。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例中存储系统给的一个具体示例的原理框图；
图2为常规存储系统运行48小时期间，固态硬盘的存储池空余度变化曲线；
图3为常规存储系统运行48小时期间，固态硬盘的存储池剩余空间变化曲线；
图4为本发明实施例提供的存储系统运行48小时期间，固态硬盘的存储池空余度变化曲线；
图5为本发明实施例提供的存储系统运行48小时期间，固态硬盘的存储池剩余空间变化曲线；
图6为本发明实施例中存储系统的配置方法的一个具体示例的流程图；
图7为本发明实施例中存储系统的配置装置的一个具体示例的原理框图；
图8为本发明实施例中计算机设备的一个具体示例的原理框图。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在本发明的描述中，需要说明的是，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。
在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，还可以是两个元件内部的连通，可以是无线连接，也可以是有线连接。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。
此外，下面所描述的本发明不同实施方式中所涉及的技术特征只要彼此之间未构成冲突就可以相互结合。
本发明实施例提供了一种存储系统，如图1所示，包括：第一存储机头11、第二存储机头12、存储池13，存储池13中包含多个第一类存储单元131和多个第二类存储单元141，第一类存储单元131的响应速度高于第二类存储单元141的响应速度。
在一可选实施例中，第一类存储单元131可以是固态硬盘，第二类存储单元141可以是机械硬盘，固态硬盘的响应速度高于机械硬盘的响应速度，机械硬盘的存储容量大于固态硬盘的存储容量，且机械硬盘的成本较低。
第一存储机头11与第一服务器列表中的服务器建立有关联关系，结合第一类存储单元执行第一服务器列表中的服务器的任务，第一服务器列表是根据交互式队列确定的，第一服务器列表中的服务器用于执行交互式队列中的任务。
在本发明实施例中，对于与第一存储机头11建立有关联关系的服务器，当其需要使用存储服务的时候，将任务挂载至第一存储机头11输出的存储挂载点，第一存储机头11依次执行挂载点中的各项任务，结合各第一类存储单元131完成存储挂载点中所挂载的任务。
第二存储机头12与第二服务器列表中的服务器建立有关联关系，结合第二类存储单元执行第二服务器列表中的服务器的任务，第二服务器列表是根据非交互式列表确定的，第二服务器列表中的服务器用于执行非交互式队列中的任务，交互式队列中的任务的要求响应时间小于非交互式队列中的任务的要求响应时间。
在本发明实施例中，对于与第二存储机头12建立有关联关系的服务器，当其需要使用存储服务的时候，将任务挂载至第二存储机头12输出的存储挂载点，第二存储机头12依次执行挂载点中的各项任务，结合各第二类存储单元141完成存储挂载点中所挂载的任务。
第一类存储单元131与交互式用户建立有关联关系，第二类存储单元141与非交互式用户建立有关联关系，交互式用户和非交互式用户是根据各用户对交互式队列和非交互式队列的使用记录确定的。
在本发明实施例中，交互式用户是指对响应要求较高的用户，非交互式用户对响应时间的要求低于交互式用户对响应时间的要求，因此，交互式用户优先使用第一类存储单元131，非交互式用户优先使用第二类存储单元141。
在一可选实施例中，可以在各第一类存储单元131中配置交互式用户和非交互式用户，但是，交互式用户对第一类存储单元131的使用优先级高于对非交互式用户对第一类存储单元131的使用优先级。
本发明实施例提供的存储系统，设置了两种存储机头，将服务器划分为两类，第一类服务器执行响应要求高的任务，第二类服务器执行响应要求较低的任务，将第一类服务器与第一存储机头11连接，第二类服务器与第二存储机头12连接，第一存储机头11结合第一类存储单元执行第一服务器列表中的服务器的任务，第二存储机头12结合第二类存储单元141执行第二服务器列表中的服务器的任务，还将用户分为了交互式用户和非交互式用户，交互式用户与第一类存储单元131建立关联关系，非交互式用户与第二类存储单元141建立关联关系。本发明实施例按照响应需求将服务器和用户划分类别，按照响应能力将存储机头和存储池划分类别，利用不同的存储机头和存储池服务不同需求的服务器和用户，能够让第一类存储单元131为交互式用户服务充分发挥响应速度快的特征，让第二类存储单元141为非交互式用户服务充分发挥存储容量大成本低的特性，在满足了高响应需求的基础上，降低了存储系统的成本。并且，在本发明实施例中，第一类服务器、第二类服务器、交互式用户、非交互式任务是根据交互式队列和非交互式队列划分的，而交互式队列和非交互式队列是集群队列在对任务进行调度过程中划分的，因此，按照交互式队列和非交互式队列对用户和服务器进行划分，能真实反映各用户是否有高响应需求，各服务器执行的任务中是否含有大量的高响应任务，因此，通过执行本发明实施例，能够精准地满足各用户及各服务器对存储池的使用需求。
在一可选实施例中，在本发明实施例提供的存储系统中，第一存储机头11和第二存储机头12与各服务器的关联关系周期性更新。
由于服务器所执行的任务不是一成不变的，即使在某一个时间段内，一个处理器执行的高响应需求的任务较多，但是随着上层系统对服务器的调度，该处理器可能会逐渐处理更多的低响应需求的任务，因此，为了避免造成数据流的堵塞，本发明实施例中周期性地对存储机头与各服务器的关联关系进行更新。
在一可选实施例中，本发明实施例提供的存储系统还包括第三存储机头，第三存储机头与虚拟化服务器建立有关联关系，结合第一类存储单元执行虚拟化服务器的任务。
由于虚拟化服务器对于响应速度有着极高的要求，因此，本发明实施例中为虚拟化服务器匹配了单独的第三存储机头，第三存储机头结合第一类存储单元执行虚拟化服务器的任务。
面向虚拟化的高响应需要进行单独的输出在虚拟化服务器的使用场景中，对于存储有着高响应的要求，按传统的混合部署，会因为系统有大流量，导致虚拟机的卡顿和死机，本发明实施例中通过单独的机头，实现高响应的输出。
在一可选实施例中，本发明实施例提供的存储系统还包括第四存储机头，存储池中还包括第三类存储单元，第四存储机头用于结合第三类存储单元执行根目录任务，根目录任务是与各用户的根目录对应的任务。
用户的根目录对用户的影响较大，因此，根目录对应的任务对响应性的要求极高，无论是交互式用户还是非交互式用户，该用户的根目录对应的任务都应该被及时执行，保障用户的正常运行，从而在本发明实施例中，为根目录任务单独设置了第四存储机头和第三类存储单元，第四存储机头和第三类存储单元只用于处理根目录任务，为跟目录任务的及时处理提供了保障。
操作系统中，通常会分为个人文件夹和项目文件夹。不同的项目或项目中的不同阶段有高响应和大流量的需求。个人的根目录具有容量小高响应的需求，存储池如果出现卡顿，会造成所有用户的卡顿。本发明实施例中通过对存储池的分层，在有限的资源下获得更高的感知性能。
在一可选实施例中，本发明实施例提供的存储系统中，第一类存储单元按照预先设定的转存策略将第一类存储单元中的数据转出至第二类存储单元中，以释放第一类存储单元的存储空间。
由于第一类存储单元的存储容量较小，当第一类存储单元的容量被大量占用时，第一类存储单元无法为交互式任务提供快速的相应，因此，本发明实施例提供的存储系统中，第一类存储单元会按照转存策略将部分数据转出至第二类存储单元中，以释放第一类存储单元的存储空间，使得第一类存储单元能够为交互式用户和第一服务器列表中的服务器提供更快的服务。
在一可选实施例中，转存策略可以为周期性地在第一类存储单元中锁定待转出数据，然后将待转出数据转出至第二类存储单元，其中，待转出数据可以为长时间未使用的数据。转存策略可以根据实际需求设定，在此不做限定。
在一可选实施例中，本发明实施例提供的存储系统还包括至少一个备用存储机头，当服务器提出存储需求时，会将存储任务挂载至存储机头，各存储机头依次执行挂载点中挂载的各项任务，但是，当挂载点中挂载的任务数量过多时，任务不能及时被处理，会导致数据流的拥塞，此处可以将部分任务分配至存储机头，由存储机头共同处理存储任务，提高并行度，扩大了带宽和通道，避免了数据流的拥塞。
在一具体实施例中，如图2所示为常规存储系统运行48小时期间，固态硬盘的存储池空余度变化曲线，如图3所示为常规存储系统运行48小时期间，固态硬盘的存储池剩余空间变化曲线。如图4所示为本发明实施例提供的存储系统运行48小时期间，固态硬盘的存储池空余度变化曲线，如图5所示为本发明实施例提供的存储系统运行48小时期间，固态硬盘的存储池剩余空间变化曲线，其中，本发明实施例提供的存储系统运行的业务与常规存储系统运行的业务基本相同，常规存储系统中，也包含了固态硬盘和机械硬盘。
由图2和图3可知，常规存储系统运行48小时后，固态硬盘容量池消耗75TB，固态硬盘和机械硬盘共同使用的策略无法有效维持固态硬盘的容量。
但是由图4和图5可知，本发明实施例提供的存储系统运行48小时后，固态存储硬盘容量池消耗0TB，可见，本发明实施例提供的存储系统能够有效维持固态硬盘的容量。
本发明实施例提供了一种存储系统的配置方法，如图6所示，包括如下步骤：
步骤S21：根据交互式队列确定第一服务器列表，第一服务器列表中的多个服务器用于执行交互式队列中的任务。详细内容参见上述实施例中的描述，在此不再赘述。
步骤S22：根据非交互式队列确定第二服务器列表，第二服务器列表中的多个服务器用于执行非交互式队列中的任务；交互式队列和非交互式队列是将集群队列划分得到的，交互式队列用于执行交互式任务，非交互式队列用于执行非交互式任务。详细内容参见上述实施例中的描述，在此不再赘述。
步骤S23：根据各用户对交互式队列和非交互式队列的使用记录，将各用户划分为交互式用户和非交互式用户。详细内容参见上述实施例中的描述，在此不再赘述。
步骤S24：建立第一存储机头11与第一服务器列表中各服务器的关联关系，以使第一存储机头11结合第一类存储单元131执行第一服务器列表中的服务器的任务。详细内容参见上述实施例中的描述，在此不再赘述。
步骤S25：建立第二存储机头12与第二服务器列表中各服务器的关联关系，以使第二存储机头12结合第二类存储单元141执行第二服务器列表中的服务器的任务。详细内容参见上述实施例中的描述，在此不再赘述。
步骤S26：建立交互式用户与第一类存储单元131的关联关系，建立非交互式队列与第二类存储单元141的关联关系，第一类存储单元131的响应速度高于第二类存储单元141的响应速度。详细内容参见上述实施例中的描述，在此不再赘述。
在一可选实施例中，本发明实施例提供的存储系统的配置方法还包括：
周期性地根据交互式队列和非交互式队列更新第一服务器列表和第二服务器列表；根据更新后的服务器列表和第二服务器列表更新各服务器与第一存储机头11和第二存储机头12的关联关系。详细内容参见上述实施例中的描述，在此不再赘述。
在一可选实施例中，上述步骤S23具体包括：
首先，根据各用户对交互式队列和非交互式队列的使用记录，确定各用户对交互式队列的使用频率和对非交互式队列的使用频率。
然后，根据使用频率将用户划分为交互式用户和非交互式用户，交互式用户对交互式队列的使用频率高于交互式用户对非交互式队列的使用频率。
交互式队列对应第一服务器列表，第一服务器列表中的服务器具有快速响应的能力，因此，当用户在发出任务后，需要快速得到响应时，需要使用交互式队列，非交互式队列对应第二服务器列表，第二服务器列表中的服务器具有处理大流量任务的能力，但是其响应速度较慢，因此，当用户在发出任务后，对响应时间的要求较低时，使用非交互式队列。在此基础上，本发明实施例中可以采用用户对交互式列表的使用频率和对非交互式队列的使用频率将用户划分为交互式用户和非交互式用户。
在一可选实施例中，第一存储机头11还建立有与第二类存储单元141的关联关系，与第一存储机头11建立有关联关系的服务器对第一类存储单元131的使用优先级高于对第二类存储单元141的使用优先级。详细内容参见上述实施例中的描述，在此不再赘述。
本发明实施例提供了一种存储系统的配置装置，如图7所示，包括：
第一服务器列表确定模块21，用于根据交互式队列确定第一服务器列表，第一服务器列表中的多个服务器用于执行交互式队列中的任务。详细内容参见上述实施例中的描述，在此不再赘述。
第二服务器列表确定模块22，用于根据非交互式队列确定第二服务器列表，第二服务器列表中的多个服务器用于执行非交互式队列中的任务。交互式队列和非交互式队列是将集群队列划分得到的，交互式队列用于执行交互式任务，非交互式队列用于执行非交互式任务。详细内容参见上述实施例中的描述，在此不再赘述。
用户划分模块23，用于根据各用户对交互式队列和非交互式队列的使用记录，将用户划分为交互式用户和非交互式用户。详细内容参见上述实施例中的描述，在此不再赘述。
第一关联关系建立模块24，用于建立第一存储机头11与第一服务器列表中各服务器的关联关系，以使第一存储机头11结合第一类存储单元131执行第一服务器列表中的服务器的任务。详细内容参见上述实施例中的描述，在此不再赘述。
第二关联关系建立模块25，用于建立第二存储机头12与第二服务器列表中各服务器的关联关系，以使第二存储机头12结合第二类存储单元141执行第二服务器列表中的服务器的任务。详细内容参见上述实施例中的描述，在此不再赘述。
第三关联关系建立模块26，用于建立交互式用户与第一类存储单元131的关联关系，建立非交互式队列与第二类存储单元141的关联关系，第一类存储单元131的响应速度高于第二类存储单元141的响应速度。详细内容参见上述实施例中的描述，在此不再赘述。
本发明实施例提供了一种计算机设备，如图8所示，该计算机设备主要包括一个或多个处理器31以及存储器32，图8中以一个处理器31为例。
该计算机设备还可以包括：输入装置33和输出装置34。
处理器31、存储器32、输入装置33和输出装置34可以通过总线或者其他方式连接，图8中以通过总线连接为例。
处理器31可以为中央处理器(Central Processing Unit，CPU)。处理器31还可以为其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片，或者上述各类芯片的组合。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。存储器32可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据存储系统，和/或，存储系统的配置装置的使用所创建的数据等。此外，存储器32可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中，存储器32可选包括相对于处理器31远程设置的存储器，这些远程存储器可以通过网络连接至存储系统，和/或，存储系统的配置装置。输入装置33可接收用户输入的计算请求(或其他数字或字符信息)，以及产生与存储系统，和/或，存储系统的配置装置有关的键信号输入。输出装置34可包括显示屏等显示设备，用以输出计算结果。
本发明实施例提供了一种计算机可读存储介质，该计算机可读存储介质存储计算机指令，计算机存储介质存储有计算机可执行指令，该计算机可执行指令可执行上述任意方法实施例中的存储系统的配置方法。其中，存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)、随机存储记忆体(Random Access Memory，RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive，缩写：HDD)或固态硬盘(Solid-State Drive，SSD)等；所述存储介质还可以包括上述种类的存储器的组合。
显然，上述实施例仅仅是为清楚地说明所作的举例，而并非对实施方式的限定。对于所属领域的普通技术人员来说，在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引伸出的显而易见的变化或变动仍处于本发明创造的保护范围之中。

Claims (11)

1.一种存储系统，其特征在于，包括：第一存储机头、第二存储机头、存储池，所述存储池中包含多个第一类存储单元和多个第二类存储单元，所述第一类存储单元的响应速度高于所述第二类存储单元的响应速度；
所述第一存储机头与第一服务器列表中的服务器建立有关联关系，结合所述第一类存储单元执行所述第一服务器列表中的服务器的任务，所述第一服务器列表是根据交互式队列确定的，所述第一服务器列表中的服务器用于执行所述交互式队列中的任务；
所述第二存储机头与第二服务器列表中的服务器建立有关联关系，结合所述第二类存储单元执行所述第二服务器列表中的服务器的任务，所述第二服务器列表是根据非交互式列表确定的，所述第二服务器列表中的服务器用于执行所述非交互式队列中的任务，所述交互式队列中的任务的要求响应时间小于所述非交互式队列中的任务的要求响应时间；
所述第一类存储单元与交互式用户建立有关联关系，所述第二类存储单元与非交互式用户建立有关联关系，所述交互式用户和非交互式用户是根据各用户对所述交互式队列和非交互式队列的使用记录确定的。
2.根据权利要求1所述的系统，其特征在于，
所述第一存储机头和第二存储机头与各服务器的关联关系周期性更新。
3.根据权利要求1所述的系统，其特征在于，还包括第三存储机头，
所述第三存储机头与虚拟化服务器建立有关联关系，结合所述第一类存储单元执行所述虚拟化服务器的任务。
4.根据权利要求1所述的系统，其特征在于，还包括第四存储机头，所述存储池中还包括第三类存储单元，
所述第四存储机头用于结合所述第三类存储单元执行根目录任务，所述根目录任务是与各用户的根目录对应的任务。
5.根据权利要求1所述的系统，其特征在于，
所述第一类存储单元按照预先设定的转存策略将所述第一类存储单元中的数据转出至所述第二类存储单元中，以释放所述第一类存储单元的存储空间。
6.一种存储系统的配置方法，其特征在于，包括如下步骤：
根据交互式队列确定第一服务器列表，所述第一服务器列表中的多个服务器用于执行所述交互式队列中的任务；
根据非交互式队列确定第二服务器列表，所述第二服务器列表中的多个服务器用于执行所述非交互式队列中的任务；所述交互式队列和所述非交互式队列是将集群队列划分得到的，所述交互式队列用于执行交互式任务，所述非交互式队列用于执行非交互式任务；
根据各用户对所述交互式队列和所述非交互式队列的使用记录，将各所述用户划分为交互式用户和非交互式用户；
建立第一存储机头与所述第一服务器列表中各服务器的关联关系，以使所述第一存储机头结合第一类存储单元执行所述第一服务器列表中的服务器的任务；
建立第二存储机头与所述第二服务器列表中各服务器的关联关系，以使所述第二存储机头结合第二类存储单元执行所述第二服务器列表中的服务器的任务；
建立所述交互式用户与所述第一类存储单元的关联关系，建立所述非交互式队列与所述第二类存储单元的关联关系，所述第一类存储单元的响应速度高于所述第二类存储单元的响应速度。
7.根据权利要求6所述的方法，其特征在于，还包括：
周期性地根据所述交互式队列和非交互式队列更新所述第一服务器列表和所述第二服务器列表；
根据更新后的服务器列表和所述第二服务器列表更新各服务器与所述第一存储机头和第二存储机头的关联关系。
8.根据权利要求6所述的方法，其特征在于，根据各用户对所述交互式队列和所述非交互式队列的使用记录，将所述用户划分为交互式用户和非交互式用户的步骤，包括：
根据各用户对交互式队列和所述非交互式队列的使用记录，确定各用户对所述交互式队列的使用频率和对非交互式队列的使用频率；
根据所述使用频率将所述用户划分为交互式用户和非交互式用户，所述交互式用户对所述交互式队列的使用频率高于所述交互式用户对所述非交互式队列的使用频率。
9.一种存储系统的配置装置，其特征在于，包括：
第一服务器列表确定模块，用于根据交互式队列确定第一服务器列表，所述第一服务器列表中的多个服务器用于执行所述交互式队列中的任务；
第二服务器列表确定模块，用于根据非交互式队列确定第二服务器列表，所述第二服务器列表中的多个服务器用于执行所述非交互式队列中的任务；所述交互式队列和所述非交互式队列是将集群队列划分得到的，所述交互式队列用于执行交互式任务，所述非交互式队列用于执行非交互式任务；
用户划分模块，用于根据各用户对所述交互式队列和所述非交互式队列的使用记录，将所述用户划分为交互式用户和非交互式用户；
第一关联关系建立模块，用于建立第一存储机头与所述第一服务器列表中各服务器的关联关系，以使所述第一存储机头结合第一类存储单元执行所述第一服务器列表中的服务器的任务；
第二关联关系建立模块，用于建立第二存储机头与所述第二服务器列表中各服务器的关联关系，以使所述第二存储机头结合第二类存储单元执行所述第二服务器列表中的服务器的任务；
第三关联关系建立模块，用于建立所述交互式用户与所述第一类存储单元的关联关系，建立所述非交互式队列与所述第二类存储单元的关联关系，所述第一类存储单元的响应速度高于所述第二类存储单元的响应速度。
10.一种计算机设备，其特征在于，包括：
至少一个处理器；以及与所述至少一个处理器通信连接的存储器；其中，所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，从而执行如权利要求6-8中任一项所述的存储系统的配置方法。
11.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使所述计算机执行如权利要求6-8中任一项所述的存储系统的配置方法。
CN202311074977.3A 2023-08-24 2023-08-24 一种存储系统、存储系统的配置方法及装置 Active CN117093150B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311074977.3A CN117093150B (zh) 2023-08-24 2023-08-24 一种存储系统、存储系统的配置方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311074977.3A CN117093150B (zh) 2023-08-24 2023-08-24 一种存储系统、存储系统的配置方法及装置

Publications (2)

Publication Number Publication Date
CN117093150A true CN117093150A (zh) 2023-11-21
CN117093150B CN117093150B (zh) 2024-02-09

Family

ID=88769531

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311074977.3A Active CN117093150B (zh) 2023-08-24 2023-08-24 一种存储系统、存储系统的配置方法及装置

Country Status (1)

Country Link
CN (1) CN117093150B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210019057A1 (en) * 2019-07-19 2021-01-21 EMC IP Holding Company LLC Dynamic balancing of input/output (io) operations for a storage system
CN113672161A (zh) * 2020-05-13 2021-11-19 深圳市茁壮网络股份有限公司 一种存储系统及其建立方法
CN114489475A (zh) * 2021-12-01 2022-05-13 阿里巴巴（中国）有限公司 分布式存储系统及其数据存储方法
WO2023142513A1 (zh) * 2022-01-28 2023-08-03 苏州浪潮智能科技有限公司 一种分布式存储系统的存储优化方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210019057A1 (en) * 2019-07-19 2021-01-21 EMC IP Holding Company LLC Dynamic balancing of input/output (io) operations for a storage system
CN113672161A (zh) * 2020-05-13 2021-11-19 深圳市茁壮网络股份有限公司 一种存储系统及其建立方法
CN114489475A (zh) * 2021-12-01 2022-05-13 阿里巴巴（中国）有限公司 分布式存储系统及其数据存储方法
WO2023142513A1 (zh) * 2022-01-28 2023-08-03 苏州浪潮智能科技有限公司 一种分布式存储系统的存储优化方法及装置

Also Published As

Publication number Publication date
CN117093150B (zh) 2024-02-09

Similar Documents

Publication Publication Date Title
US9483187B2 (en) Quality of service implementation in a networked storage system with hierarchical schedulers
US9582305B2 (en) Virtualization congestion control framework for modifying execution of applications on virtual machine based on mass congestion indicator in host computing system
CN110120915B (zh) 三级分解网络架构系统、装置以及用于确保三级分解网络架构中的服务质量的方法
US20120278587A1 (en) Dynamic Data Partitioning For Optimal Resource Utilization In A Parallel Data Processing System
JP6190969B2 (ja) マルチテナントリソース調停方法
EP2725862A1 (en) Resource allocation method and resource management platform
US9389921B2 (en) System and method for flexible device driver resource allocation
US10394606B2 (en) Dynamic weight accumulation for fair allocation of resources in a scheduler hierarchy
CN105446653B (zh) 一种数据合并方法和设备
EP3087483B1 (en) System and method for supporting asynchronous invocation in a distributed data grid
US10521258B2 (en) Managing test services in a distributed production service environment
US8301805B2 (en) Managing I/O request in a storage system
WO2019056771A1 (zh) 分布式存储系统升级管理的方法、装置及分布式存储系统
US20160154676A1 (en) Method of Resource Allocation in a Server System
US20170132040A1 (en) Methods to apply iops and mbps limits independently using cross charging and global cost synchronization
KR101626279B1 (ko) 트래픽 저장 장치 및 방법, 그리고 컴퓨터로 판독 가능한 기록 매체
US11362949B2 (en) Path count management
CN113994321A (zh) 使用虚拟输出队列映射结构上nvme分组
US10171572B2 (en) Server pool management
CN117093150B (zh) 一种存储系统、存储系统的配置方法及装置
CN116069493A (zh) 一种数据处理方法、装置、设备以及可读存储介质
CN115809072A (zh) 一种升级进程的方法、装置、设备及存储介质
CN107153570B (zh) 一种虚拟机的数量控制方法及装置
US9503353B1 (en) Dynamic cross protocol tuner
US20240015110A1 (en) Intelligent packet distribution control for optimizing system performance and cost

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant