CN112269535A - 存储系统的空间资源分配方法、装置及可读存储介质 - Google Patents
存储系统的空间资源分配方法、装置及可读存储介质 Download PDFInfo
- Publication number
- CN112269535A CN112269535A CN202011109493.4A CN202011109493A CN112269535A CN 112269535 A CN112269535 A CN 112269535A CN 202011109493 A CN202011109493 A CN 202011109493A CN 112269535 A CN112269535 A CN 112269535A
- Authority
- CN
- China
- Prior art keywords
- space
- storage system
- host
- garbage collection
- memory usage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000000034 method Methods 0.000 title claims abstract description 49
- 238000013468 resource allocation Methods 0.000 title claims abstract description 27
- 230000008859 change Effects 0.000 claims abstract description 9
- 238000004590 computer program Methods 0.000 claims description 6
- 230000007423 decrease Effects 0.000 claims description 4
- 238000012217 deletion Methods 0.000 claims description 2
- 230000037430 deletion Effects 0.000 claims description 2
- 238000011084 recovery Methods 0.000 description 11
- 238000012545 processing Methods 0.000 description 7
- 238000004064 recycling Methods 0.000 description 7
- 238000003491 array Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 238000013473 artificial intelligence Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000005055 memory storage Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
- G06F3/0644—Management of space entities, e.g. partitions, extents, pools
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Memory System (AREA)
Abstract
本申请公开了一种存储系统的空间资源分配方法、装置及计算机可读存储介质。其中,方法包括在存储系统初始化时,分别为主机IO和垃圾回收分配满足预设第一比例关系的初始内存使用空间资源;主机IO的初始内存使用空间大于垃圾回收的初始内存使用空间。随着存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整主机IO的内存使用空间和垃圾回收的内存使用空间,在存储系统的存储空间资源减小时增加垃圾回收的内存使用空间,而在存储系统的存储空间资源增大时减小垃圾回收的内存使用空间,直至主机IO和垃圾回收的当前内存使用空间满足预设最小比例关系,从而在保证存储系统可靠性的基础上,有效提高存储系统的IO效率及稳定性。
Description
技术领域
本申请涉及存储技术领域,特别是涉及一种存储系统的空间资源分配方法、装置及计算机可读存储介质。
背景技术
随着存储技术的快速发展,全闪存阵列在诞生之初便由于其在高性能方面的优势而被广泛应用。全闪存阵列是完全由固态存储介质通常是NAND闪存构成的独立的存储阵列或设备,这些系统是用于增强可能包含磁盘阵列的环境的性能,或者用于取代所有传统的硬盘存储阵列。当前很多全闪存存储系统都会使用LSA(日志追加写)的结构方式进行实现,LSA即是指所有的新数据和已经修改的数据都会一直不断的往后进行数据的追加写,而垃圾回收功能会将前边的空洞进行资源回收,把有效数据进行迁移,清掉前边的块数据以供新数据写入。
全闪存存储系统之所以会采用LSA方式进行追加写的目的是为了可以实现随机转顺序,即上层的随机小块数据在下层也可以是大块的顺序数据,这样在把数据传递给RAID(Redundant Arrays of Independent Disks,独立冗余磁盘阵列)的时候,可以凑RAID的满条带从而减小写惩罚。
可见,LSA方式是依赖垃圾回收功能不断进行数据搬迁腾空来实现的,而垃圾回收与正常主机IO(Input Output,输入输出)在资源的使用方面势必会出现竞争。如果垃圾回收占用较大资源,主机IO占用资源较少一些,尽管可以实现LSA,但是极有可能会影响主机的IO效率乃至整个存储设备的正常运行。而如果垃圾回收占用资源不足,则无法及时写入新数据,影响用户使用存储设备。所以如果不能很好地协调垃圾回收与正常主机IO的资源使用情况,可能会出现较大程度的存储性能波动甚至会一定程度上影响主机的IO效率及整个存储系统的稳定性。
鉴于此,如何在保证存储系统可靠性的基础上,提高存储系统的IO效率及稳定性,是所属领域技术人员需要解决的技术问题。
发明内容
本申请提供了一种存储系统的空间资源分配方法、装置及计算机可读存储介质,在保证存储系统可靠性的基础上,有效提高存储系统的IO效率及稳定性。
为解决上述技术问题,本发明实施例提供以下技术方案:
本发明实施例一方面提供了一种存储系统的空间资源分配方法,包括:
预先在存储系统初始化时,分别为主机IO和垃圾回收分配满足预设第一比例关系的初始内存使用空间资源;所述主机IO的初始内存使用空间大于所述垃圾回收的初始内存使用空间;
随着所述存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整所述主机IO的当前内存使用空间和所述垃圾回收的当前内存使用空间,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设最小比例关系,以在所述存储系统的存储空间资源减小时增加所述垃圾回收的内存使用空间,在所述存储系统的存储空间资源增大时减小所述垃圾回收的内存使用空间。
可选的,所述随着所述存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整所述主机IO的当前内存使用空间和所述垃圾回收的当前内存使用空间,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设最小比例关系包括:
随着所述存储系统写入的空间容量的增长,按照第一空间释放比例关系将所述主机IO的内存使用空间释放给所述垃圾回收使用,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第二比例关系;
当所述存储系统进行数据删除释放空间时,按照第二空间释放比例关系将所述垃圾回收的内存使用空间释放给所述主机IO使用,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第三比例关系。
可选的,所述按照第一空间释放比例关系将所述主机IO的内存使用空间释放给所述垃圾回收使用为:
每当检测到所述存储系统的占用存储空间值相比上一时刻的占用存储空间值增大10%,释放所述主机IO的5%的内存使用空间给所述垃圾回收。
可选的,所述按照第二空间释放比例关系将所述垃圾回收的内存使用空间释放给所述主机IO使用为:
每当检测到所述存储系统的剩余存储空间值相比上一时刻的剩余存储空间值增长10%,释放所述垃圾回收的5%的内存使用空间给所述主机IO。
可选的,所述预设第三比例关系与所述预设第一比例关系的数值相同。
本发明实施例另一方面提供了一种存储系统的空间资源分配装置,包括:
资源初始分配模块,用于预先在存储系统初始化时,分别为主机IO和垃圾回收分配满足预设第一比例关系的初始内存使用空间资源;所述主机IO的初始内存使用空间大于所述垃圾回收的初始内存使用空间;
资源动态调整模块,用于随着所述存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整所述主机IO的当前内存使用空间和所述垃圾回收的当前内存使用空间,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设最小比例关系,以在所述存储系统的存储空间资源减小时增加所述垃圾回收的内存使用空间,在所述存储系统的存储空间资源增大时减小所述垃圾回收的内存使用空间。
可选的,所述资源动态调整模块包括:
主机IO空间释放子模块,用于随着所述存储系统写入的空间容量的增长,按照第一空间释放比例关系将所述主机IO的内存使用空间释放给所述垃圾回收使用,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第二比例关系;
垃圾回收空间释放子模块,用于当所述存储系统进行数据删除释放空间时,按照第二空间释放比例关系将所述垃圾回收的内存使用空间释放给所述主机IO使用,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第三比例关系。
可选的,所述主机IO空间释放子模块为每当检测到所述存储系统的占用存储空间值相比上一时刻的占用存储空间值增大10%,释放所述主机IO的5%的内存使用空间给所述垃圾回收的模块。
本发明实施例还提供了一种存储系统的空间资源分配装置,包括处理器,所述处理器用于执行存储器中存储的计算机程序时实现如前任一项所述存储系统的空间资源分配方法的步骤。
本发明实施例最后还提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有存储系统的空间资源分配程序,所述存储系统的空间资源分配程序被处理器执行时实现如前任一项所述存储系统的空间资源分配方法的步骤。
本申请提供的技术方案的优点在于,根据当前存储系统空间的剩余容量动态地调整用于垃圾回收的资源量和用于主机IO的资源量,在存储系统的存储空间资源减小或称为占用空间容量越来越大时意味着存储系统中被写入的数据越来越多,增加垃圾回收的内存使用空间,可以更加快速的回收旧数据块,保证新数据块及时被写入;在存储系统的可用存储空间资源增大或者剩余存储空间资源增大时意味着存储系统中被删除的数据越来越多,无需使用太多资源进行垃圾回收也可保证新数据被及时写入,将垃圾回收的内存使用空间释放还给主机IO,很好地协调了垃圾回收与正常主机IO的资源使用情况,不会造成存储性能波动,也不会影响主机的IO效率,可以在保证存储系统可靠性的情况下有效增强存储系统的整体稳定性。
此外,本发明实施例还针对存储系统的空间资源分配方法提供了相应的实现装置及计算机可读存储介质,进一步使得所述方法更具有实用性,所述装置及计算机可读存储介质具有相应的优点。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性的,并不能限制本公开。
附图说明
为了更清楚的说明本发明实施例或相关技术的技术方案,下面将对实施例或相关技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种存储系统的空间资源分配方法的流程示意图;
图2为本发明实施例提供的另一种存储系统的空间资源分配方法的流程示意图;
图3为本发明实施例提供的存储系统的空间资源分配装置的一种具体实施方式结构图;
图4为本发明实施例提供的存储系统的空间资源分配装置的另一种具体实施方式结构图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面结合附图和具体实施方式对本发明作进一步的详细说明。显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可包括没有列出的步骤或单元。
在介绍了本发明实施例的技术方案后,下面详细的说明本申请的各种非限制性实施方式。
首先参见图1,图1为本发明实施例提供的一种存储系统的空间资源分配方法的流程示意图,本发明实施例可包括以下内容:
S101:预先在存储系统初始化时,分别为主机IO和垃圾回收分配满足预设第一比例关系的初始内存使用空间资源。
本申请在存储系统初始化的时候按照一定的比例进行主机IO资源及垃圾回收资源的分配。考虑到最开始无需垃圾回收也会有足够的可用空间供新数据块写入,所以主机IO的初始内存使用空间要大于垃圾回收的初始内存使用空间,所属领域技术人员可根据时间情况选择二者的比例关系,也即预设第一比例关系的具体值可基于实际应用场景进行选择,本申请对此不作任何限定,举例来说,存储系统初始化的时候划定一定比例的内存空间作为主机IO的内存使用空间,一定比例的内存空间作为GC的内存使用空间,此时主机IO的使用空间和GC的使用空间例如可以为8:2。
S102:随着存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整主机IO的当前内存使用空间和垃圾回收的当前内存使用空间,直至主机IO和垃圾回收的当前内存使用空间满足预设最小比例关系,以在存储系统的存储空间资源减小时增加垃圾回收的内存使用空间,在存储系统的存储空间资源增大时减小垃圾回收的内存使用空间。
可以理解的是,存储系统随着被写入数据越来越多,可用空间也就越来越少,那么为了保证有足够空间可以写入新的数据,就需要垃圾回收旧数据块,也就是说,随着存储系统的可以空间容量越来越小,分配给主机IO的内存空间会释放给垃圾回收使用,使得垃圾回收尽可能快的保证存储系统中有足够可用空间,但是为了保证主机IO不受影响,也即用户可一直高效写入数据,分配给主机IO的使用空间也不能太少,垃圾回收使用空间在增长到一定程度后就稳定不变了,这就需要预先根据实际应用场景确定一个最小比例关系,保证不影响主机IO效率。同样的,随着垃圾回收的一直推进,主机IO也进行了一定限制,存储系统的可用空间容量又在不断地增长,那么就需要将垃圾回收的内存使用空间逐渐还给主机IO了,当然,垃圾回收也是需要一直进行,所以需要预先根据实际应用场景再确定一个最小比例关系,保证存储系统始终有足够可用空间,主机IO使用空间在逐渐增长到一定程度后也就稳定不变了,本实施例的主机IO资源和垃圾回收资源会随着存储空间的变化而变化,这种优化的存储系统动态资源调整的策略,可以有效提高存储系统的性能及稳定性。
在本发明实施例提供的技术方案中,根据当前存储系统空间的剩余容量动态地调整用于垃圾回收的资源量和用于主机IO的资源量,在存储系统的存储空间资源减小时意味着存储系统中被写入的数据越来越多,增加垃圾回收的内存使用空间,可以更加快速的回收旧数据块,保证新数据块及时被写入;在存储系统的存储空间资源增大时意味着存储系统中被删除的数据越来越多,无需使用太多资源进行垃圾回收也可保证新数据被及时写入,将垃圾回收的内存使用空间释放还给主机IO,很好地协调了垃圾回收与正常主机IO的资源使用情况,不会造成存储性能波动,也不会影响主机的IO效率,可以在保证存储系统可靠性的情况下有效增强存储系统的整体稳定性。
在上述实施例中,对于如何执行步骤S102并不做限定,本实施例中给出空间资源的动态调整方式,如图2所示,S12包括如下步骤:
S1021:随着存储系统写入的空间容量的增长,按照第一空间释放比例关系将主机IO的内存使用空间释放给垃圾回收使用,直至主机IO和垃圾回收的当前内存使用空间满足预设第二比例关系。
S1022:当存储系统进行数据删除释放空间时,按照第二空间释放比例关系将垃圾回收的内存使用空间释放给主机IO使用,直至主机IO和垃圾回收的当前内存使用空间满足预设第三比例关系。
其中,预设第二比例关系、预设第三比例关系和预设第一比例关系可根据实际情况进行选择,预设第三比例关系与预设第一比例关系的数值可相同,也可不相同,为了便于管理,使得技术方案更加简单、易于实施,预设第三比例关系与预设第一比例关系的数值可设置为相同值。同理,第一空间释放比例关系和第二空间释放比例关系可根据实际情况进行选择,第一空间释放比例关系和第二空间释放比例关系的数值可相同,也可不相同,为了便于管理,使得技术方案更加简单、易于实施,第一空间释放比例关系和第二空间释放比例关系的数值可设置为相同值,例如每当检测到所述存储系统的占用存储空间值也即写入数据所占用空间值相比上一时刻的占用存储空间值增大10%,释放主机IO的5%的内存使用空间给垃圾回收。同样,每当检测到存储系统的剩余存储空间值或者是可用空间容量值相比上一时刻的剩余存储空间值或者是可用空间容量值增长10%,释放垃圾回收的5%的内存使用空间给主机IO。
举例来说,随着存储系统写入的空间容量的增长,可逐步将主机IO的使用空间释放给垃圾回收来使用,释放的比例可以是每增大10%的使用空间就释放5%的内存给垃圾回收使用,直到4:6为止,垃圾回收的内存空间不再随使用空间的增大而增大;当存储系统进行数据删除释放空间的时候,在按照原先增长的比例进行资源的释放,直到8:2为止,垃圾回收的内存空间不再随时用空间的减小而减小。
由上可知,本实施例通过对存储系统进行动态资源调整,有效提高存储系统的性能及稳定性。
需要说明的是,本申请中各步骤之间没有严格的先后执行顺序,只要符合逻辑上的顺序,则这些步骤可以同时执行,也可按照某种预设顺序执行,图1-图2只是一种示意方式,并不代表只能是这样的执行顺序。
本发明实施例还针对存储系统的空间资源分配方法提供了相应的装置,进一步使得所述方法更具有实用性。其中,装置可从功能模块的角度和硬件的角度分别说明。下面对本发明实施例提供的存储系统的空间资源分配装置进行介绍,下文描述的存储系统的空间资源分配装置与上文描述的存储系统的空间资源分配方法可相互对应参照。
基于功能模块的角度,参见图3,图3为本发明实施例提供的存储系统的空间资源分配装置在一种具体实施方式下的结构图,该装置可包括:
资源初始分配模块301,用于预先在存储系统初始化时,分别为主机IO和垃圾回收分配满足预设第一比例关系的初始内存使用空间资源;主机IO的初始内存使用空间大于垃圾回收的初始内存使用空间。
资源动态调整模块302,用于随着存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整主机IO的当前内存使用空间和垃圾回收的当前内存使用空间,直至主机IO和垃圾回收的当前内存使用空间满足预设最小比例关系,以在存储系统的存储空间资源减小时增加垃圾回收的内存使用空间,在存储系统的存储空间资源增大时减小垃圾回收的内存使用空间。
可选的,在本实施例的一些实施方式中,所述资源动态调整模块302可以包括:
主机IO空间释放子模块,用于随着存储系统写入的空间容量的增长,按照第一空间释放比例关系将主机IO的内存使用空间释放给垃圾回收使用,直至主机IO和垃圾回收的当前内存使用空间满足预设第二比例关系;
垃圾回收空间释放子模块,用于当存储系统进行数据删除释放空间时,按照第二空间释放比例关系将垃圾回收的内存使用空间释还给主机IO,直至主机IO和垃圾回收的当前内存使用空间满足预设第三比例关系。
作为本实施例的一种实施方式中,所述主机IO空间释放子模块可为每当检测到存储系统的占用存储空间值相比上一时刻的占用存储空间值增大10%,释放主机IO的5%的内存使用空间给垃圾回收的模块。
作为本实施例的另一种实施方式中,所述垃圾回收空间释放子模块可为每当检测到存储系统的剩余存储空间值相比上一时刻的剩余存储空间值增长10%,释放垃圾回收的5%的内存使用空间给主机IO的模块。
本发明实施例所述存储系统的空间资源分配装置的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例在保证存储系统可靠性的基础上,有效提高存储系统的IO效率及稳定性。
上文中提到的存储系统的空间资源分配装置是从功能模块的角度描述,进一步的,本申请还提供一种存储系统的空间资源分配装置,是从硬件角度描述。图4为本申请实施例提供的另一种存储系统的空间资源分配装置的结构图。如图4所示,该装置包括存储器40,用于存储计算机程序;
处理器41,用于执行计算机程序时实现如上述任一实施例提到的存储系统的空间资源分配方法的步骤。
其中,处理器41可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器41可以采用DSP(Digital Signal Processing,数字信号处理)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)、PLA(Programmable Logic Array,可编程逻辑阵列)中的至少一种硬件形式来实现。处理器41也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称CPU(Central ProcessingUnit,中央处理器);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器41可以在集成有GPU(Graphics Processing Unit,图像处理器),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器41还可以包括AI(Artificial Intelligence,人工智能)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器40可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器40还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。本实施例中,存储器40至少用于存储以下计算机程序401,其中,该计算机程序被处理器41加载并执行之后,能够实现前述任一实施例公开的存储系统的空间资源分配方法的相关步骤。另外,存储器40所存储的资源还可以包括操作系统402和数据403等,存储方式可以是短暂存储或者永久存储。其中,操作系统402可以包括Windows、Unix、Linux等。数据403可以包括但不限于测试结果对应的数据等。
在一些实施例中,存储系统的空间资源分配装置还可包括有显示屏42、输入输出接口43、通信接口44、电源45以及通信总线46。
本领域技术人员可以理解,图4中示出的结构并不构成对存储系统的空间资源分配装置的限定,可以包括比图示更多或更少的组件,例如还可包括传感器47。
本发明实施例所述存储系统的空间资源分配装置的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例在保证存储系统可靠性的基础上,有效提高存储系统的IO效率及稳定性。
可以理解的是,如果上述实施例中的存储系统的空间资源分配方法以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、磁碟或者光盘等各种可以存储程序代码的介质。
基于此,本发明实施例还提供了一种计算机可读存储介质,存储有存储系统的空间资源分配程序,所述存储系统的空间资源分配程序被处理器执行时如上任意一实施例所述存储系统的空间资源分配方法的步骤。
本发明实施例所述计算机可读存储介质的各功能模块的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
由上可知,本发明实施例在保证存储系统可靠性的基础上,有效提高存储系统的IO效率及稳定性。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
以上对本申请所提供的一种存储系统的空间资源分配方法、装置及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。
Claims (10)
1.一种存储系统的空间资源分配方法,其特征在于,包括:
预先在存储系统初始化时,分别为主机IO和垃圾回收分配满足预设第一比例关系的初始内存使用空间资源;所述主机IO的初始内存使用空间大于所述垃圾回收的初始内存使用空间;
随着所述存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整所述主机IO的当前内存使用空间和所述垃圾回收的当前内存使用空间,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设最小比例关系,以在所述存储系统的存储空间资源减小时增加所述垃圾回收的内存使用空间,在所述存储系统的存储空间资源增大时减小所述垃圾回收的内存使用空间。
2.根据权利要求1所述的存储系统的空间资源分配方法,其特征在于,所述随着所述存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整所述主机IO的当前内存使用空间和所述垃圾回收的当前内存使用空间,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设最小比例关系包括:
随着所述存储系统写入的空间容量的增长,按照第一空间释放比例关系将所述主机IO的内存使用空间释放给所述垃圾回收使用,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第二比例关系;
当所述存储系统进行数据删除释放空间时,按照第二空间释放比例关系将所述垃圾回收的内存使用空间释还给所述主机IO,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第三比例关系。
3.根据权利要求2所述的存储系统的空间资源分配方法,其特征在于,所述按照第一空间释放比例关系将所述主机IO的内存使用空间释放给所述垃圾回收使用为:
每当检测到所述存储系统的占用存储空间值相比上一时刻的占用存储空间值增大10%,释放所述主机IO的5%的内存使用空间给所述垃圾回收。
4.根据权利要求2所述的存储系统的空间资源分配方法,其特征在于,所述按照第二空间释放比例关系将所述垃圾回收的内存使用空间释还给所述主机IO为:
每当检测到所述存储系统的剩余存储空间值相比上一时刻的剩余存储空间值增长10%,释放所述垃圾回收的5%的内存使用空间给所述主机IO。
5.根据权利要求2所述的存储系统的空间资源分配方法,其特征在于,所述预设第三比例关系与所述预设第一比例关系的数值相同。
6.一种存储系统的空间资源分配装置,其特征在于,包括:
资源初始分配模块,用于预先在存储系统初始化时,分别为主机IO和垃圾回收分配满足预设第一比例关系的初始内存使用空间资源;所述主机IO的初始内存使用空间大于所述垃圾回收的初始内存使用空间;
资源动态调整模块,用于随着所述存储系统的存储空间资源的变化,按照预设空间释放比例关系动态调整所述主机IO的当前内存使用空间和所述垃圾回收的当前内存使用空间,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设最小比例关系,以在所述存储系统的存储空间资源减小时增加所述垃圾回收的内存使用空间,在所述存储系统的存储空间资源增大时减小所述垃圾回收的内存使用空间。
7.根据权利要求6所述的存储系统的空间资源分配装置,其特征在于,所述资源动态调整模块包括:
主机IO空间释放子模块,用于随着所述存储系统写入的空间容量的增长,按照第一空间释放比例关系将所述主机IO的内存使用空间释放给所述垃圾回收使用,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第二比例关系;
垃圾回收空间释放子模块,用于当所述存储系统进行数据删除释放空间时,按照第二空间释放比例关系将所述垃圾回收的内存使用空间释放给所述主机IO使用,直至所述主机IO和所述垃圾回收的当前内存使用空间满足预设第三比例关系。
8.根据权利要求7所述的存储系统的空间资源分配装置,其特征在于,所述主机IO空间释放子模块为每当检测到所述存储系统的占用存储空间值相比上一时刻的占用存储空间值增大10%,释放所述主机IO的5%的内存使用空间给所述垃圾回收的模块。
9.一种存储系统的空间资源分配装置,其特征在于,包括处理器,所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1至5任一项所述存储系统的空间资源分配方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有存储系统的空间资源分配程序,所述存储系统的空间资源分配程序被处理器执行时实现如权利要求1至5任一项所述存储系统的空间资源分配方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011109493.4A CN112269535A (zh) | 2020-10-16 | 2020-10-16 | 存储系统的空间资源分配方法、装置及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011109493.4A CN112269535A (zh) | 2020-10-16 | 2020-10-16 | 存储系统的空间资源分配方法、装置及可读存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112269535A true CN112269535A (zh) | 2021-01-26 |
Family
ID=74337565
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011109493.4A Withdrawn CN112269535A (zh) | 2020-10-16 | 2020-10-16 | 存储系统的空间资源分配方法、装置及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112269535A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115826886A (zh) * | 2023-02-24 | 2023-03-21 | 浪潮电子信息产业股份有限公司 | 追加写模式的数据垃圾回收方法、装置、系统及存储介质 |
-
2020
- 2020-10-16 CN CN202011109493.4A patent/CN112269535A/zh not_active Withdrawn
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115826886A (zh) * | 2023-02-24 | 2023-03-21 | 浪潮电子信息产业股份有限公司 | 追加写模式的数据垃圾回收方法、装置、系统及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2022062537A1 (zh) | 数据压缩方法、装置及计算机可读存储介质 | |
CN102567215B (zh) | 用于精简供应的空间分配的方法和系统 | |
CN110895492B (zh) | 设备控制方法、装置、存储介质及电子设备 | |
CN110688256B (zh) | 一种元数据上电恢复方法、装置、电子设备及存储介质 | |
CN109669640A (zh) | 一种数据存储方法、装置、电子设备及介质 | |
CN110515917B (zh) | 一种控制重构速度的方法、装置及介质 | |
CN107533435A (zh) | 存储空间的分配方法及存储设备 | |
CN111857966A (zh) | 虚拟机快照创建方法、装置及计算机可读存储介质 | |
CN116719484A (zh) | 一种磁盘阵列的写数据处理方法、装置、设备和介质 | |
CN115061634A (zh) | 一种系统业务负载分配方法、装置、介质 | |
CN115576505A (zh) | 一种数据存储方法、装置、设备及可读存储介质 | |
CN114328281A (zh) | 固态硬盘异常掉电处理方法、装置、电子设备及介质 | |
CN114968839A (zh) | 硬盘垃圾回收方法、装置、设备及计算机可读存储介质 | |
CN112269535A (zh) | 存储系统的空间资源分配方法、装置及可读存储介质 | |
US11385814B2 (en) | Method and device for allocating resource of hard disk in distributed storage system | |
CN113703678B (zh) | 一种存储桶索引重分裂的方法、装置、设备和介质 | |
CN115543859A (zh) | 多分区ssd的磨损均衡优化方法、装置、设备及介质 | |
CN107018163B (zh) | 一种资源配置方法和装置 | |
CN113609082B (zh) | 一种文件系统碎片整理方法、装置及存储介质 | |
CN114816766A (zh) | 一种计算资源分配方法及其相关组件 | |
CN114610243A (zh) | 一种精简卷转换方法、系统、存储介质及设备 | |
CN113111013A (zh) | 一种闪存数据块绑定方法、装置及介质 | |
CN111176571A (zh) | 一种本地对象的管理方法、装置、设备及介质 | |
CN113806142A (zh) | 一种数据恢复方法、装置及相关设备 | |
CN110989936A (zh) | 一种存储空间分配方法、装置及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20210126 |