CN114115702B - 存储控制方法、装置、存储系统和存储介质 - Google Patents
存储控制方法、装置、存储系统和存储介质 Download PDFInfo
- Publication number
- CN114115702B CN114115702B CN202010905535.9A CN202010905535A CN114115702B CN 114115702 B CN114115702 B CN 114115702B CN 202010905535 A CN202010905535 A CN 202010905535A CN 114115702 B CN114115702 B CN 114115702B
- Authority
- CN
- China
- Prior art keywords
- parameters
- performance
- strategy
- configuration parameters
- resource
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003860 storage Methods 0.000 title claims abstract description 165
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000033228 biological regulation Effects 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 238000012544 monitoring process Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 13
- 238000013468 resource allocation Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 238000004364 calculation method Methods 0.000 description 3
- 238000013500 data storage Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000001276 controlling effect Effects 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 241001290266 Sciaenops ocellatus Species 0.000 description 1
- 238000009825 accumulation Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
- Debugging And Monitoring (AREA)
Abstract
本公开提出一种存储控制方法、装置、存储系统和存储介质,涉及计算机技术领域。本公开的一种存储控制方法包括:获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数;根据初始的各个逻辑单元的服务质量策略参数,以及当前时刻的性能和资源参数生成目标配置参数;将目标配置参数发送给存储装置,以便更新存储装置对各个逻辑单元的配置参数。通过这样的方法,能够根据存储装置的各个逻辑单元的实时参数生成配置参数,对存储装置的参数进行调节,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
Description
技术领域
本公开涉及计算机技术领域,特别是一种存储控制方法、装置、存储系统和存储介质。
背景技术
在存储设备应用过程中,不同业务系统的应用程序、文件及数据库通常集中放在同一存储系统中。各业务系统使用存储资源时存在竞争关系,不同等级的业务需要不同的服务质量。存储系统通过配置系统资源如高速缓存、CPU(Central Processing Unit,中央处理器)和队列等,从而使业务系统访问各存储时具备不同的带宽、IOPS(Input/OutputOperations Per Second,每秒进行读写操作的次数)。存储系统的服务质量是指各业务系统的访问存储时具有不同的带宽、IOPS和时延等。
发明内容
本公开的一个目的在于提高存储资源的利用率。
根据本公开的一些实施例的一个方面,提出一种存储控制方法,包括:获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数;根据初始的各个逻辑单元的服务质量策略参数,以及当前时刻的性能和资源参数生成目标配置参数;将目标配置参数发送给存储装置,以便更新存储装置对各个逻辑单元的配置参数。
在一些实施例中,存储控制方法还包括:利用目标配置参数更新存储的当前配置参数。
在一些实施例中,每间隔预定时长执行获取存储装置中各个逻辑单元在当前时刻的性能和资源参数、生成目标配置参数并发送给存储装置的操作。
在一些实施例中,存储控制方法还包括:从策略配置单元中获取当前时刻对应的服务质量策略参数,其中,策略配置单元中存储有初始的各个逻辑单元的服务质量策略参数,不同时间段对应的服务质量策略参数不同。
在一些实施例中,根据初始的各个逻辑单元的服务质量策略参数,以及当前时刻的性能和资源参数生成目标配置参数包括:根据当前时刻的性能和资源参数,从预定的性能模式策略、能效模式策略和平衡模式策略中确定调节策略;根据确定的调节策略下性能与配置参数的对应关系,获取在不影响关键业务执行的情况下,调节策略下最优的性能对应的配置参数,作为目标配置参数。
在一些实施例中,根据当前时刻的性能和资源参数,从预定的性能模式策略、能效模式策略和平衡模式策略中确定调节策略包括:若逻辑单元中的关键节点空闲,非关键节点繁忙,则确定调节模式为平衡模式策略;若逻辑单元中的关键节点繁忙,则确定调节模式为性能模式策略;若逻辑单元中的关键节点和非关键节点均空闲,则确定调节模式为能效模式策略。
在一些实施例中,获取不影响关键业务执行的情况下的预定调节策略下最优的性能对应的配置参数包括:根据当前时刻的性能和资源参数确定关键业务的第一资源需求量;根据服务质量策略参数确定关键业务的第二资源需求量;根据第一资源需求量和第二资源需求量,确定的调节策略下性能与配置参数的对应关系确定目标配置参数。
在一些实施例中,根据第一资源需求量和第二资源需求量,确定的调节策略下性能与配置参数的对应关系确定目标配置参数包括:若调节策略为平衡模式策略或能效模式策略,则在第一资源需求量和第二资源需求量中取较大值作为目标配置参数的下限,根据性能与配置参数的对应关系确定的对于关键节点的目标配置参数不小于配置参数的下限。
通过这样的方法,能够根据存储装置的各个逻辑单元的实时参数生成配置参数,对存储装置的参数进行调节,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
根据本公开的一些实施例的一个方面,提出一种存储控制装置,包括:监控单元,被配置为获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数;控制单元,被配置为根据初始的各个逻辑单元的服务质量策略参数,以及当前时刻的性能和资源参数生成目标配置参数;发送单元,被配置为将目标配置参数发送给存储装置,以便更新存储装置对各个逻辑单元的配置参数。
在一些实施例中,存储控制装置还包括:策略配置单元,被配置为利用目标配置参数更新存储的当前配置参数。
在一些实施例中,策略配置单元还被配置为存储有初始的各个逻辑单元的服务质量策略参数,不同时间段对应的服务质量策略参数不同;控制单元被配置为获取当前时刻对应的服务质量策略参数。
根据本公开的一些实施例的一个方面,提出一种存储控制装置,包括:存储器;以及耦接至存储器的处理器,处理器被配置为基于存储在存储器的指令执行上文中任意一种存储控制方法。
这样的存储控制装置能够根据存储装置的各个逻辑单元的实时参数生成配置参数,对存储装置的参数进行调节,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
根据本公开的一些实施例的一个方面,提出一种计算机可读存储介质,其上存储有计算机程序指令,该指令被处理器执行时实现上文中提到的任意一种存储控制方法的步骤。
通过执行这样的存储介质上的指令,能够根据存储装置的各个逻辑单元的实时参数生成配置参数,对存储装置的参数进行调节,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
根据本公开的一些实施例的一个方面,提出一种存储系统,包括:上文中提到的任意一种存储控制装置;和存储装置,被配置为存储获取的数据,并根据来自存储控制装置的配置参数调整自身参数,其中,存储装置包括多个逻辑单元。
这样的存储系统中,能够根据存储装置的各个逻辑单元的实时参数生成配置参数,存储装置及时调节自身参数以符合业务变化需求,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
附图说明
此处所说明的附图用来提供对本公开的进一步理解,构成本公开的一部分,本公开的示意性实施例及其说明用于解释本公开,并不构成对本公开的不当限定。在附图中:
图1为本公开的存储控制方法的一些实施例的流程图。
图2为本公开的存储控制方法的另一些实施例的流程图。
图3为本公开的存储控制方法的又一些实施例的流程图。
图4为本公开的存储控制装置的一些实施例的示意图。
图5为本公开的存储控制装置的另一些实施例的示意图。
图6为本公开的存储控制装置的又一些实施例的示意图。
图7为本公开的存储系统的一些实施例的示意图。
具体实施方式
下面通过附图和实施例,对本公开的技术方案做进一步的详细描述。
发明人发现,相关技术中存储系统的服务质量控制采用静态方式,例如设置LUN(Logical Unit Number,逻辑单元号)1的QoS指标的IOPS不超过1000,带宽不超过200MB/s等。静态QoS控制方式存在资源浪费及服务质量下降情况,可以包括如下几个方面:
1)存储系统资源利用率下降:设置静态的QoS指标后,一部分LUN获得较多资源,非业务高峰阶段存在资源利用低的问题,导致存储资源利用率下降。
2)服务质量低:存储系统资源是有限的,为了保证关键业务的性能,部分逻辑单元获得较多资源后,必然影响其他逻辑单元的数据访问质量,导致整体服务质量下降。
3)QoS指标固定:策略指标数据不能随着业务变化而调整,难以保持QoS的稳定。
本公开的存储控制方法的一些实施例的流程图如图1所示。
在步骤101中,获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数。在一些实施例中,可以定时从存储装置采集各个LUN的性能和资源参数。存储装置为LUN分配QoS控制的系统资源,性能和资源参数可以包括CPU、CACHE(高速缓冲存储器)资源、I(Input,输入)/O(Output,输出)优先级。
在步骤102中,根据初始的各个逻辑单元的服务质量策略参数,以及当前时刻的性能和资源参数,生成目标配置参数。在一些实施例中,存储的配置参数包括队列深度、队列数量、并发大小等。通过调整上述资源对QoS指标进行控制。
在一些实施例中,可以根据策略配置QoS数据,分析存储系统资源和性能状况,计算出最优的资源配置数据。最优的资源配置模式可以包括三种:
1)性能模式:例如CPU利用率约为90%,内存约为80%;
2)能效模式:例如CPU利用率约为80%,内存CACHE约为80%;
2)平衡模式:例如CPU利用率约为70%,内存约为70%。
在步骤103中,将目标配置参数发送给存储装置,以便更新存储装置对各个逻辑单元的配置参数。
通过这样的方法,能够根据存储装置的各个逻辑单元的实时参数生成配置参数,对存储装置的参数进行调节,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
在一些实施例中,可以设置策略配置单元,存储有初始的各个逻辑单元的QoS策略参数。在一些实施例中,可以针对LUN的用户预设配置QoS策略参数,QoS策略参数可以分时间段配置,每个时间段对应的参数不同;QoS策略参数可以包括性能参数,例如IOPS、带宽、时延等。例如,设置LUN1在每天10:00~18:00的QoS策略参数为:IOPS不超过1000,24:00~10:00带宽不超过200MB/s。当需要生成目标调节策略时,以当前时刻为索引,在策略配置单元中获取当前时刻归属的时间段的服务质量策略参数,从而使动态配置存储装置的参数的同时,兼顾预设参数,提高调节后的性能适用程度,也降低后续需要调节的概率。
本公开的存储控制方法的另一些实施例的流程图如图2所示。
在步骤201中,获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数。在一些实施例中,可以通过SNMP(Simple Network Management Protocol,简单网络管理协议)或者SMI-S(Storage Management Initiative Specification,存储管理主动)协议收集存储装置的控制器的系统资源数据,如CPU、CACHE和I/O,以及收集各LUN的实际性能数据,包括IOPS、带宽、数据存储时延。
在一些实施例中,可以采集一段时间内(如5分钟内)的参数,取平均值,从而避免突发的参数变化干扰后续判断,提高准确度。
在步骤202中,从策略配置单元中获取当前时刻对应的服务质量策略参数。在一些实施例中,可以根据当前时刻,在策略配置单元中获取当前时刻归属的时间段的服务质量策略参数。在一些实施例中,可以通过有SNMP、IPMI(Intelligent Platform ManagementInterface智能平台管理接口)、Redfish协议收集QoS配置参数,可以包括I/O优先级、线程数、队列深度、队列数量、并发大小等。
在步骤203中,根据当前时刻的性能和资源参数确定调节策略。在一些实施例中,可以从预定的性能模式策略、能效模式策略和平衡模式策略中选择调节策略。
在一些实施例中,若逻辑单元中的关键节点空闲,非关键节点繁忙,则确定调节模式为平衡模式策略,保证关键节点的性能满足需求,同时将资源向非关键节点倾斜。
在一些实施例中,若逻辑单元中的关键节点繁忙,则确定调节模式为性能模式策略,提高关键节点的性能,保证关键节点的任务顺利进行。
在一些实施例中,若逻辑单元中的关键节点和非关键节点均空闲,则确定调节模式为能效模式策略,优先考虑能效比。
在一些实施例中,可以通过CPU占用率、IOPS值确定关键节点是否繁忙。若CPU占用率较低,且关键节点的IOPS低于最大IOPS,则说明关键节点空闲,可以通过调节配置参数提高非关键节点的性能,例如降低分配给关键节点的线程数,提高分配给非关键节点的线程数、并发大小、队列参数等。
在步骤204中,根据确定的调节策略下性能与配置参数的对应关系,获取在不影响关键业务执行的情况下,调节策略下最优的性能对应的配置参数,作为目标配置参数。
在一些实施例中,根据当前时刻的性能和资源参数确定关键业务的第一资源需求量;根据服务质量策略参数确定关键业务的第二资源需求量;根据第一资源需求量和第二资源需求量,确定的调节策略下性能与配置参数的对应关系确定目标配置参数。在一些实施例中,若调节策略为平衡模式策略或能效模式策略,则在第一资源需求量和第二资源需求量中取较大值作为目标配置参数的下限,根据性能与配置参数的对应关系确定的对于关键节点的目标配置参数不小于配置参数的下限。通过这样的方法,能够保证需要缩减对关键节点的资源分配的情况下,缩减后的资源能够满足关键业务初始设定QoS要求,也保证关键节点当前业务需求。
在步骤205中,利用目标配置参数更新存储的当前配置参数。
在步骤206中,将目标配置参数发送给存储装置,以便更新存储装置对各个逻辑单元的配置参数。在一些实施例中,可以读取更新存储的当前配置参数并发送给存储装置。
在步骤207中,判断离步骤201中的探测是否达到预定时长。若达到预定时长,则执行步骤201,进行新一轮的探测和参数调节。
通过这样的方法,能够通过定期采集、分析存储系统资源和性能状况,计算出最优的资源配置数据,动态的调节QoS参数,从而提高存储装置资源利用率和整体服务质量。
本公开的存储控制方法的又一些实施例的流程图如图3所示。
在步骤301中,获取资源数据,可以包括CPU占用率,内存占用率等。
在步骤302中,获取性能数据,以及从策略配置单元中获取策略参数,可以包括IOPS、带宽、时延等参数。
在步骤303中,判断CPU的占用率是否已大于预定第一比例(例如80%)。若已大于预定第一比例,则执行步骤306;否则,执行步骤304。
在步骤304中,判断各个逻辑单元的性能数据是否低于服务质量上限。若低于服务质量上限,则执行步骤306;否则,执行步骤305。
在步骤305中,判断是否存在逻辑单元的性能数据低于服务质量的预定第一比例(如10%),且其他的逻辑单元的性能数据接近服务质量上限。若存在逻辑单元的性能数据低于服务质量的预定第一比例,且其他的逻辑单元的性能数据接近服务质量上限,则执行步骤306;否则执行步骤307。
在步骤306中,不调整参数。
在步骤307中,计算要调整的最优策略及资源配置参数。
在步骤308中,存储装置执行配置参数。
通过这样的方法,能够通过对于CPU参数、以及LUN性能的双向(上限、下限)的比较,判断是否进行调节,以及调节的策略,从而及时对存储装置状态、业务状态的变化做出相应的反应,使存储装置能够应对各种业务状态需求。
在一些实施例中,可以按照业务优先级,建立算力(算力参数可以包括I/O级别和带宽级别)与资源配置参数的对照表,如下表1和表2所示。对照表为经验值,需要事先测试估算得出。采用算力等级(I/O级别或者是带宽级别)匹配算法,通过级别对照确定目标配置参数。
表1算力(IO等级)和资源参数匹配表
表2算力(带宽等级)和资源参数匹配表
在另一些实施例中,也可以采用自动逐渐调节的方式。在触发调整参数后,以预定单次调节量调节分别包括线程、并发数、队列参数等,其中,每项参数具有不同的预定单次调节量。每完成一次调节后通过采集的当前时刻的性能和资源参数判断是否发生变化。若发生了变化,且变化效果达到预定效果,则完成调节,否则进行下一次调节。这样的方式无需前期经验积累,提高了调节的智能化程度。
通过这样的方法,能够在不影响关键业务服务质量情况下,释放或者回收相应的算力和通道参数,包括线程数和队列参数、并发参数的调整,即调整QoS策略配置IOPS和带宽的参数;匹配计算出最优的资源参数和存储的配置参数,实现存储装置资源的合理利用,提高整体性能。
在一些实施例中,目标配置参数的设置还可以考虑逻辑单元的业务特征,进而配置该逻辑单元所需的资源,有针对性的提高存储装置的业务能力,使资源分配达到的优化效果最大化。
在一些实施例中,存储装置的状态、当前参数和目标配置参数等如下表所示:
表3资源和参数调节示例
该存储装置包括三个LUN,其中LUN1存储关键业务节点数据,LUN2和LUN3存储非关键业务节点数据,LUN1和LUN2主要用于4K以下的数据存储,侧重于关注IOPS;LUN3用于32K以上的数据存储,侧重于关注带宽数据。系统首先必须保证关键节点性能满足需求。
假设在获得监控数据时,监控数据显示CPU为40%,且关键节点IOPS低于最大IOPS,说明关键节点空闲。如果此刻非关键业务繁忙,可以通过调节资源配置参数(比如通过减低分配给关键节点1的线程数、提高分配给节点2的线程数和并发大小、提高节点3的队列参数),提高非关键节点性能。
继续监控系统资源,调整资源配置参数,至CPU和内存满足模式要求,如平衡模式CPU和内存都为70%,或者LUN2和LUN3的性能参数不再继续增长。
继续监控系统资源,如果关键节点LUN1的IOPS增加,说明关键节点开始繁忙,即性能需求增加,此时需要调节非关键节点LUN2和LUN3的的资源配置参数,从而满足关键节点1的性能需求。
本公开的存储控制装置的一些实施例的示意图如图4所示。
监控单元401能够获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数。在一些实施例中,可以定时从存储装置采集各个LUN的性能和资源参数。
控制单元402能够根据初始的各个逻辑单元的服务质量策略参数,以及当前时刻的性能和资源参数,生成目标配置参数。在一些实施例中,存储的配置参数包括队列深度、队列数量、并发大小等。通过调整上述资源对QoS指标进行控制。
发送单元403能够将目标配置参数发送给存储装置,以便更新存储装置对各个逻辑单元的配置参数。
这样的装置能够根据存储装置的各个逻辑单元的实时参数生成配置参数,对存储装置的参数进行调节,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
在一些实施例中,存储控制装置还可以包括策略配置单元404,能够存储初始的各个逻辑单元的QoS策略参数。在一些实施例中,可以针对LUN的用户预设配置QoS策略参数,QoS策略参数可以分时间段配置,每个时间段对应的参数不同。当需要生成目标调节策略时,控制单元402以当前时刻为索引,在策略配置单元404中获取当前时刻归属的时间段的服务质量策略参数,从而使动态配置存储装置的参数的同时,兼顾预设参数,提高调节后的性能适用程度,也降低后续需要调节的概率。
在一些实施例中,控制单元402在生成目标配置参数后,可以先存储至策略配置单元404以更新策略配置单元404存储的当前的参数。发送单元403从策略配置单元404中读取更新后的当前的参数并发送给存储装置,从而实现对存储装置的配置参数的记录,提高对存储装置的控制能力。
本公开存储控制装置的一个实施例的结构示意图如图5所示。存储控制装置包括存储器501和处理器502。其中:存储器501可以是磁盘、闪存或其它任何非易失性存储介质。存储器用于存储上文中存储控制方法的对应实施例中的指令。处理器502耦接至存储器501,可以作为一个或多个集成电路来实施,例如微处理器或微控制器。该处理器502用于执行存储器中存储的指令,能够实现存储装置能力的动态分配,提高存储资源的利用率。
在一个实施例中,还可以如图6所示,存储控制装置600包括存储器601和处理器602。处理器602通过BUS总线603耦合至存储器601。该存储控制装置600还可以通过存储接口604连接至外部存储装置605以便调用外部数据,还可以通过网络接口606连接至网络或者另外一台计算机系统(未标出)。此处不再进行详细介绍。
在该实施例中,通过存储器存储数据指令,再通过处理器处理上述指令,能够实现存储装置能力的动态分配,提高存储资源的利用率。
在另一个实施例中,一种计算机可读存储介质,其上存储有计算机程序指令,该指令被处理器执行时实现存储控制方法对应实施例中的方法的步骤。本领域内的技术人员应明白,本公开的实施例可提供为方法、装置、或计算机程序产品。因此,本公开可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本公开可采用在一个或多个其中包含有计算机可用程序代码的计算机可用非瞬时性存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本公开的存储系统的一些实施例的示意图如图7所示。存储系统包括:
存储控制装置71,可以为上文中提到的任意一种。存储控制装置71与存储装置72连接,能够监控存储装置的性能和资源参数,生成目标配置参数并发送给存储装置72。存储装置72能够存储获取的数据,并根据来自存储控制装置的配置参数调整自身参数,其中,存储装置包括多个逻辑单元。存储装置72中还可以包括控制器,控制来自业务系统的数据存储至那个逻辑单元。
这样的存储系统中,能够根据存储装置的各个逻辑单元的实时参数生成配置参数,存储装置及时调节自身参数以符合业务变化需求,从而实现存储装置能力的动态分配,随业务变化动态调整,提高存储资源的利用率。
本公开是参照根据本公开实施例的方法、设备(系统)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
至此,已经详细描述了本公开。为了避免遮蔽本公开的构思,没有描述本领域所公知的一些细节。本领域技术人员根据上面的描述,完全可以明白如何实施这里公开的技术方案。
可能以许多方式来实现本公开的方法以及装置。例如,可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本公开的方法以及装置。用于所述方法的步骤的上述顺序仅是为了进行说明,本公开的方法的步骤不限于以上具体描述的顺序,除非以其它方式特别说明。此外,在一些实施例中,还可将本公开实施为记录在记录介质中的程序,这些程序包括用于实现根据本公开的方法的机器可读指令。因而,本公开还覆盖存储用于执行根据本公开的方法的程序的记录介质。
最后应当说明的是:以上实施例仅用以说明本公开的技术方案而非对其限制;尽管参照较佳实施例对本公开进行了详细的说明,所属领域的普通技术人员应当理解:依然可以对本公开的具体实施方式进行修改或者对部分技术特征进行等同替换;而不脱离本公开技术方案的精神,其均应涵盖在本公开请求保护的技术方案范围当中。
Claims (12)
1.一种存储控制方法,包括:
获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数;
根据初始的各个逻辑单元的服务质量策略参数,以及所述当前时刻的性能和资源参数生成目标配置参数,包括:
根据所述当前时刻的性能和资源参数,从预定的性能模式策略、能效模式策略和平衡模式策略中确定调节策略;
根据确定的所述调节策略下性能与配置参数的对应关系,获取在不影响关键业务执行的情况下,所述调节策略下最优的性能对应的配置参数,作为所述目标配置参数,包括:根据所述当前时刻的性能和资源参数确定关键业务的第一资源需求量;根据所述服务质量策略参数确定关键业务的第二资源需求量,其中,不同时间段对应的所述服务质量策略参数不同;根据所述第一资源需求量和所述第二资源需求量,确定的所述调节策略下性能与配置参数的对应关系确定所述目标配置参数;
将所述目标配置参数发送给所述存储装置,以便更新所述存储装置对各个逻辑单元的配置参数。
2.根据权利要求1所述的方法,还包括:
利用所述目标配置参数更新存储的当前配置参数。
3.根据权利要求1所述的方法,其中,每间隔预定时长执行获取存储装置中各个逻辑单元在当前时刻的性能和资源参数、生成目标配置参数并发送给所述存储装置的操作。
4.根据权利要求1所述的方法,还包括:
从策略配置单元中获取当前时刻对应的所述服务质量策略参数,其中,所述策略配置单元中存储有初始的各个逻辑单元的服务质量策略参数。
5.根据权利要求1所述的方法,其中,所述根据所述当前时刻的性能和资源参数,从预定的性能模式策略、能效模式策略和平衡模式策略中确定调节策略包括:
若所述逻辑单元中的关键节点空闲,非关键节点繁忙,则确定所述调节策略为所述平衡模式策略;
若所述逻辑单元中的关键节点繁忙,则确定所述调节策略为所述性能模式策略;
若所述逻辑单元中的关键节点和非关键节点均空闲,则确定所述调节策略为所述能效模式策略。
6.根据权利要求1所述的方法,其中,所述根据所述第一资源需求量和所述第二资源需求量,确定的所述调节策略下性能与配置参数的对应关系确定所述目标配置参数包括:
若所述调节策略为所述平衡模式策略或所述能效模式策略,则在所述第一资源需求量和所述第二资源需求量中取较大值作为目标配置参数的下限,根据所述性能与配置参数的对应关系确定的对于关键节点的目标配置参数不小于所述配置参数的下限。
7.一种存储控制装置,包括:
监控单元,被配置为获取运行中的存储装置的各个逻辑单元在当前时刻的性能和资源参数;
控制单元,被配置为根据初始的各个逻辑单元的服务质量策略参数,以及所述当前时刻的性能和资源参数生成目标配置参数,包括:
根据所述当前时刻的性能和资源参数,从预定的性能模式策略、能效模式策略和平衡模式策略中确定调节策略;
根据确定的所述调节策略下性能与配置参数的对应关系,获取在不影响关键业务执行的情况下,所述调节策略下最优的性能对应的配置参数,作为所述目标配置参数,包括:根据所述当前时刻的性能和资源参数确定关键业务的第一资源需求量;根据所述服务质量策略参数确定关键业务的第二资源需求量,其中,不同时间段对应的所述服务质量策略参数不同;根据所述第一资源需求量和所述第二资源需求量,确定的所述调节策略下性能与配置参数的对应关系确定所述目标配置参数;
发送单元,被配置为将所述目标配置参数发送给所述存储装置,以便更新所述存储装置对各个逻辑单元的配置参数。
8.根据权利要求7所述的装置,还包括:
策略配置单元,被配置为利用所述目标配置参数更新存储的当前配置参数。
9.根据权利要求8所述的装置,其中,
所述策略配置单元还被配置为存储有初始的各个逻辑单元的服务质量策略参数,不同时间段对应的所述服务质量策略参数不同;
所述控制单元被配置为获取当前时刻对应的所述服务质量策略参数。
10.一种存储控制装置,包括:
存储器;以及
耦接至所述存储器的处理器,所述处理器被配置为基于存储在所述存储器的指令执行如权利要求1至6任一项所述的方法。
11.一种计算机可读存储介质,其上存储有计算机程序指令,该指令被处理器执行时实现权利要求1至6任意一项所述的方法的步骤。
12.一种存储系统,包括:
权利要求7~10任意一项所述的存储控制装置;和
存储装置,被配置为存储获取的数据,并根据来自所述存储控制装置的配置参数调整自身参数,其中,所述存储装置包括多个逻辑单元。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010905535.9A CN114115702B (zh) | 2020-09-01 | 2020-09-01 | 存储控制方法、装置、存储系统和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010905535.9A CN114115702B (zh) | 2020-09-01 | 2020-09-01 | 存储控制方法、装置、存储系统和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114115702A CN114115702A (zh) | 2022-03-01 |
CN114115702B true CN114115702B (zh) | 2024-04-30 |
Family
ID=80360387
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010905535.9A Active CN114115702B (zh) | 2020-09-01 | 2020-09-01 | 存储控制方法、装置、存储系统和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114115702B (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8095764B1 (en) * | 2008-06-30 | 2012-01-10 | Emc Corporation | Dynamic application aware storage configuration |
CN104679589A (zh) * | 2013-11-27 | 2015-06-03 | 中兴通讯股份有限公司 | 系统资源均衡调整方法及装置 |
CN106775803A (zh) * | 2016-11-14 | 2017-05-31 | 努比亚技术有限公司 | 一种参数值调整装置、终端及方法 |
US10379739B1 (en) * | 2018-03-23 | 2019-08-13 | Western Digital Technologies, Inc. | Data storage device read threshold adjustment according to environmental parameters |
CN110752941A (zh) * | 2019-09-06 | 2020-02-04 | 深圳平安通信科技有限公司 | 一种云存储系统的qos控制方法、装置、存储介质和服务器 |
CN111506425A (zh) * | 2020-04-14 | 2020-08-07 | 星辰天合(北京)数据科技有限公司 | 服务质量数据处理方法和装置 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20130035934A (ko) * | 2011-09-30 | 2013-04-09 | 삼성전자주식회사 | 저장 장치에서 동적 자원 구성 방법과 그 저장 장치 및 저장 매체 |
-
2020
- 2020-09-01 CN CN202010905535.9A patent/CN114115702B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8095764B1 (en) * | 2008-06-30 | 2012-01-10 | Emc Corporation | Dynamic application aware storage configuration |
CN104679589A (zh) * | 2013-11-27 | 2015-06-03 | 中兴通讯股份有限公司 | 系统资源均衡调整方法及装置 |
CN106775803A (zh) * | 2016-11-14 | 2017-05-31 | 努比亚技术有限公司 | 一种参数值调整装置、终端及方法 |
US10379739B1 (en) * | 2018-03-23 | 2019-08-13 | Western Digital Technologies, Inc. | Data storage device read threshold adjustment according to environmental parameters |
CN110752941A (zh) * | 2019-09-06 | 2020-02-04 | 深圳平安通信科技有限公司 | 一种云存储系统的qos控制方法、装置、存储介质和服务器 |
CN111506425A (zh) * | 2020-04-14 | 2020-08-07 | 星辰天合(北京)数据科技有限公司 | 服务质量数据处理方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN114115702A (zh) | 2022-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10185592B2 (en) | Network storage device using dynamic weights based on resource utilization | |
US11601512B2 (en) | System and method for throttling service requests having non-uniform workloads | |
US9419904B2 (en) | System and method for throttling service requests using work-based tokens | |
EP3117335B1 (en) | Coordinated admission control for network-accessible block storage | |
US8909868B2 (en) | Quality of service control method for storage system | |
CN108196788B (zh) | QoS指标监测方法、装置、存储介质 | |
US20140173620A1 (en) | Resource allocation method and resource management platform | |
US20080271030A1 (en) | Kernel-Based Workload Management | |
US20120221730A1 (en) | Resource control system and resource control method | |
WO2011139281A1 (en) | Workload performance control | |
US20190109799A1 (en) | Adaptive network input-output control in virtual environments | |
WO2016122662A1 (en) | Memory network to prioritize processing of a memory access request | |
US11220688B2 (en) | Oversubscription scheduling | |
CN110018781B (zh) | 磁盘流控方法、装置以及电子设备 | |
US20190028407A1 (en) | Quality of service compliance of workloads | |
US20040122938A1 (en) | Method and apparatus for dynamically allocating storage array bandwidth | |
CN112711479A (zh) | 服务器集群的负载均衡系统、方法、装置和存储介质 | |
WO2015184612A1 (zh) | 一种资源调度方法,及装置 | |
CN114115702B (zh) | 存储控制方法、装置、存储系统和存储介质 | |
CN113448716A (zh) | 一种资源调整方法、计算机设备及存储介质 | |
KR20130067900A (ko) | 네트워크 자원 제어 방법 및 그 장치 | |
Zheng et al. | CLIBE: Precise Cluster-Level I/O Bandwidth Enforcement in Distributed File System | |
CN114153561A (zh) | 资源配置方法、装置、设备和可读存储介质 | |
CN116301567A (zh) | 一种数据处理系统、方法及设备 | |
CN117331688A (zh) | 作业分配方法及服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |