CN109739688A - 快照资源空间管理方法、装置、电子设备 - Google Patents

快照资源空间管理方法、装置、电子设备 Download PDF

Info

Publication number
CN109739688A
CN109739688A CN201811548118.2A CN201811548118A CN109739688A CN 109739688 A CN109739688 A CN 109739688A CN 201811548118 A CN201811548118 A CN 201811548118A CN 109739688 A CN109739688 A CN 109739688A
Authority
CN
China
Prior art keywords
space
volume
mapping
simplify configuration
snapshot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811548118.2A
Other languages
English (en)
Other versions
CN109739688B (zh
Inventor
上官应兰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Sequoia Polytron Technologies Inc
Original Assignee
Hangzhou Sequoia Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Sequoia Polytron Technologies Inc filed Critical Hangzhou Sequoia Polytron Technologies Inc
Priority to CN201811548118.2A priority Critical patent/CN109739688B/zh
Publication of CN109739688A publication Critical patent/CN109739688A/zh
Application granted granted Critical
Publication of CN109739688B publication Critical patent/CN109739688B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请提供快照资源空间的管理方法、装置、电子设备及机器可读存储介质。在本申请中,创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,实现了对快照资源空间灵活按需提前映射分配及动态回收,提升了存储空间利用效率以及快照资源对存储IO的响应速度。

Description

快照资源空间管理方法、装置、电子设备
技术领域
本申请涉及存储技术领域,尤其涉及快照资源空间管理方法、装置、电子设备及机器可读存储介质。
背景技术
在大数据时代,数据量越来越大,数据也越来越重要,把数据保存在专门的存储设备中,并通过存储设备的数据保护特性提高数据可靠性已经成为主流方式。
快照是存储设备的数据保护特性之一,也是应对“软灾难”的常用方案。软灾难,故名思议,指“软”的灾难,通常指由于误操作、软件Bug、病毒等导致生产数据逻辑上损坏或者不能读取。通过快照技术,在写入新数据前,可以把旧数据保存起来,这样当数据发生软灾难时,可以采用之前保存的旧数据来恢复,使数据回退到一个可用的时间平面。
发明内容
本申请提供一种快照资源空间的管理方法,所述方法包括:
创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;
为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;
监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
可选的,还包括:
若所述已映射空间使用率不大于第二阈值时,则为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间。
可选的,所述自动精简配置卷的用途至少包括:可用于快照资源。
可选的,还包括:
若所述自动精简配置卷的用途是可用于快照资源,则在为所述自动精简配置卷分配物理空间时,优先在所述生产卷所属RAID上分配。
可选的,所述为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,包括:
获取所述自动精简配置卷的未使用的物理空间容量;
计算待提前映射逻辑空间的容量,其中所述待提前映射逻辑空间的容量为所述自动精简配置卷的未使用的物理空间容量乘以预设第一百分比;
依据所述待提前映射的逻辑空间容量,为所述自动精简配置卷的逻辑空间中地址最小的未映射空间执行提前映射。
可选的,所述为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间,包括:
获取所述快照资源的已映射未使用的空间容量;
计算所述自动精简配置卷待取消映射逻辑空间的容量,其中所述待取消映射逻辑空间的容量为所述快照资源的已映射未使用的空间容量乘以预设第二百分比;
依据所述待取消映射逻辑空间的容量,针对所述自动精简配置卷中的地址最大的已映射未使用的逻辑空间下发unmap命令,释放所述逻辑空间对应占用的物理空间。
本申请还提出一种快照资源空间的管理装置,所述装置包括:
创建模块,用于创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;
处理模块,用于为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
可选的,还包括:
所述处理模块进一步,若所述已映射空间使用率不大于第二阈值时,则为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间。
可选的,所述自动精简配置卷的用途至少包括:可用于快照资源。
可选的,还包括:
所述创建模块进一步,若所述自动精简配置卷的用途是可用于快照资源,则在为所述自动精简配置卷分配物理空间时,优先在所述生产卷所属RAID上分配。
可选的,所述为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,所述处理模块进一步,包括:
获取所述自动精简配置卷的未使用的物理空间容量;
计算待提前映射逻辑空间的容量,其中所述待提前映射逻辑空间的容量为所述自动精简配置卷的未使用的物理空间容量乘以预设第一百分比;
依据所述待提前映射的逻辑空间容量,为所述自动精简配置卷的逻辑空间中地址最小的未映射空间执行提前映射。
可选的,所述为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间,所述处理模块进一步,包括:
获取所述快照资源的已映射未使用的空间容量;
计算所述自动精简配置卷待取消映射逻辑空间的容量,其中所述待取消映射逻辑空间的容量为所述快照资源的已映射未使用的空间容量乘以预设第二百分比;
依据所述待取消映射逻辑空间的容量,针对所述自动精简配置卷中的地址最大的已映射未使用的逻辑空间下发unmap命令,释放所述逻辑空间对应占用的物理空间。
本申请还提供一种电子设备,包括通信接口、处理器、存储器和总线,所述通信接口、所述处理器和所述存储器之间通过总线相互连接;
所述存储器中存储机器可读指令,所述处理器通过调用所述机器可读指令,执行上述的方法。
本申请还提供一种机器可读存储介质,所述机器可读存储介质存储有机器可读指令,所述机器可读指令在被处理器调用和执行时,实现上述方法。
通过以上实施例,存储设备创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,实现了对快照资源空间灵活按需提前映射分配及动态回收,提升了存储空间利用效率以及快照资源对存储IO的响应速度。
附图说明
图1是一示例性实施例提供的一种快照资源空间的管理方法的流程图。
图2是一示例性实施例提供的一种快照资源对应的自动精简配置卷执行提前映射逻辑空间的流程图。
图3是一示例性实施例提供的一种快照资源空间的管理装置的框图。
图4是一示例性实施例提供的一种电子设备的硬件结构图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本申请可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本申请范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为了使本技术领域的人员更好地理解本申请实施例中的技术方案,下面先对本申请实施例涉及的快照相关技术,进行简单说明。
写拷贝即COW(Copy On Write)是目前常用的快照技术,其做法是在创建了新的快照后,当生产数据卷(简称为生产卷)的数据首次发生变化时,在向所述生产卷写入新数据前,把旧数据拷贝到其他的区域中,然后再覆盖原来的区域中旧数据;已拷贝的旧数据被提供给最新的快照使用,也称为快照数据,通常保存在不属于生产卷的额外的快照资源中。
基于写拷贝技术创建了一个新的快照后,生产卷中某个地址段首次写入新数据时,一个写IO将变为1读(生产卷)+1写(快照资源)+1写(生产卷),这三个操作只能顺序执行。即,快照资源的性能将影响生产卷上写入新数据的整体时间,从而影响生产卷的性能。因此,写拷贝技术对快照资源性能有较高的要求。
在一些场景下,上述快照资源实际对应一个存储卷,该存储卷的卷类型可以是普通卷或自动精简配置卷。若快照资源对应自动精简配置卷,其优点是:自动精简配置卷真实占用的物理容量支持按需分配和动态回收,即,随着时间推移,生产卷的快照数据越来越多,自动精简配置卷真实占用的物理空间将随之变多,同时,生产卷还存在动态删除快照等情况,自动精简配置卷可动态释放已删除快照对应的快照数据真实占用的存储空间;其缺点是:首次写入数据到自动精简配置卷的某个逻辑地址段时,如果写入地址段未映射或者部分未映射,需要在写入数据前为写入地址段映射物理空间并更新空间映射表,然后再写入数据,影响了写入数据的效率,即,将进一步影响生产卷的性能。若快照资源对应普通卷,其优点是:无需实时映射逻辑空间,对生产卷的性能无额外的影响;其缺点是:预估生产卷的快照资源的空间容量变得相当重要,然而,快照数据量和生产卷上数据变化情况相关,很难准确预估。一旦预估小了,将导致快照数据存储空间不能保存预期时间范围内快照数据;一旦预估大了,将会出现存储空间浪费,比如:生产卷A、生产卷B均预估了相同存储容量的快照数据存储空间,生产卷A的业务发生变化,变成了冷业务,数据变化量小,快照数据也随之变小;生产卷B是热点业务,需要更多的快照资源空间;但是生产卷A预分配的快照资源空间无法提供给生产卷B使用,从而致使存储空间利用效率低下。
基于此,本申请提出一种快照资源空间的管理技术方案,该方案包括:
创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,实现了对快照资源空间灵活按需提前映射分配及动态回收,提升了存储空间利用效率以及快照资源对存储IO的响应速度。
下面通过具体实施例并结合具体的应用场景对本申请进行描述。
请参考图1,图1是本申请一实施例提供的一种快照资源空间的管理方法,应用于存储设备;上述方法执行以下步骤:
步骤102、创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据。
这里的快照资源是指用于存放所述生产卷根据预设策略生成的一系列快照对应的快照数据的存储卷,在一种优选的方式中,所述存储卷为自动精简配置卷。所述自动精简配置卷包括:第一容量的逻辑空间以及真实占用存储设备容量的第二容量的物理空间,其中所述第二容量不大于第一容量。在本发明中,基于所述自动精简配置卷的应用为快照资源,所述快照资源的用于存储快照数据的容量等于所述自动精简配置卷的逻辑空间对应的第一容量。
具体地,在示出的一种实施方式中,所述自动精简配置卷的用途至少包括:可用于快照资源。创建所述自动精简配置卷时,若所述自动精简配置卷的用途是可用于快照资源,则存储设备执行以下步骤:
a)根据预设策略计算所述自动精简配置卷待分配的初始物理空间容量。
在一种可选的实现方案中,所述预设策略可以是所述自动精简配置卷的所述第一容量乘预设百分比,比如,所述自动精简配置卷的逻辑空间对应的第一容量是100GB,所述预设百分比为10%,则所述自动精简配置卷待分配的初始物理空间容量为10GB,也即所述自动精简配置卷的物理空间对应的第二容量的初始值是10GB。所述预设策略还可以是其他方案,上述为自动精简配置卷的现有实现方案,在本申请中不作赘述。
b)基于所述自动精简配置卷待分配的初始物理空间容量,优先在所述生产卷所属RAID上分配初始物理空间。
为避免多个生产卷的分别对应的多个快照资源位于同一个RAID(RedundantArrays of Independent Drives,独立冗余磁盘阵列)中,在所述多个生产卷上分别创建了多个新快照后,当需要同时分别写入多个快照数据到所述多个生产卷对应的多个快照资源时,即多个快照资源可能位于同一个RAID,导致该RAID成为所述多个生产卷的性能瓶颈,所以在为所述自动精简配置卷分配物理空间时,优先在所述生产卷所属RAID上分配,即存储设备进一步查询所述生产卷所属RAID的剩余容量,优先在所述生产卷所属RAID的剩余空间中为所述自动精简配置卷的分配初始物理空间,如果所属RAID的剩余空间不足,则继续从其他RAID的剩余空间中分配。比如,所述自动精简配置卷待分配的物理空间容量为10GB,所述生产卷所述RAID的剩余容量为200GB,则存储设备从所述生产卷所述RAID中分配10GB空间作为所述自动精简配置卷的初始物理空间。再比如,所述自动精简配置卷待分配的物理空间容量为10GB,所述生产卷所属RAID的剩余容量为5GB,即所述生产卷所属RAID的剩余容量不足,则存储设备优先从生产卷所属RAID中分配5GB空间,再从其他RAID的剩余空间中分配5GB空间,总计10GB空间作为所述自动精简配置卷的初始物理空间。
步骤104、为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
这里的所述快照资源对应的自动精简配置卷是指步骤102中创建的自动精简配置卷。在自动精简配置卷的现有实现方案中,所述自动精简配置卷维护一个对应的空间映射表,所述空间映射表用于记录所述自动精简配置卷的逻辑空间和真实的物理空间的映射关系,通过所述空间映射表可以找到所述逻辑空间中某个逻辑子空间真实对应的物理子空间。对于新创建的自动精简配置卷,其空间映射表的内容为空,即所述新创建的自动精简配置卷中未写入过数据。当所述新创建的自动精简配置卷接收到写命令时,根据所述空间映射表检查所述写命令中携带的对应待写地址段对应的1个或多个逻辑子空间是否已映射,若所述空间映射表中待写地址段对应的1个或多个逻辑子空间为未映射,则立即在所述自动精简配置卷的物理空间的未映射空间中为所述写命令中携带的地址段对应的1个或多个逻辑子空间分配物理子空间,分配完成后,更新空间映射表,增加逻辑子空间和物理子空间的映射关系,然后执行所述写命令;若所述空间映射表中待写地址段对应的1个或多个逻辑子空间为部分映射,则按照上述方法为所述写命令中携带的待写地址段对应的1个或多个逻辑子空间中未映射的逻辑子空间映射物理空间,然后执行所述写命令;若所述空间映射表中待写地址段对应的1个或多个逻辑子空间为全部已映射,则执行所述写命令。上述过程为自动精简配置卷的现有实现方案,在本申请中不作赘述。
在本申请中,上述步骤102中存储设备创建了所述快照资源对应的自动精简配置卷,并为所述自动精简配置卷分配了初始物理空间,存储设备将立即为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,如图2所示例,执行如下步骤:
步骤202、获取所述自动精简配置卷的未使用的物理空间容量。
具体地,所述自动精简配置卷记录了其物理空间中的所有物理子空间是否已映射,存储设备可以获取所述自动精简配置卷的未映射的物理子空间总容量,即未映射的物理空间容量,上述为自动精简配置卷现有的实现方案,在本申请中不作赘述。比如,对于新创建的所述自动精简配置卷,所述未使用的物理空间容量为初始物理容量,即10GB。
步骤204、计算待提前映射逻辑空间的容量,其中所述待提前映射逻辑空间的容量为所述自动精简配置卷的未使用的物理空间容量乘以预设第一百分比。
具体地,快照数据有时间特征,随着时间推移,快照数据一直累加,因此,快照数据将从快照资源的头部开始写入,并持续增加,存储设备将提前为所述自动精简配置卷的逻辑空间映射物理空间。所述需提前映射的逻辑空间容量可以是所述自动精简配置卷的未映射的物理空间容量乘预设百分比,还可以是所述自动精简配置卷的未映射的物理空间容量,在本申请中不作具体限定。比如,对于新创建的所述自动精简配置卷,所述本次需提前映射的逻辑空间容量为等于所述自动精简配置卷的未使用的物理空间容量10GB乘以第一百分比100%,即所述本次需提前映射的逻辑空间容量为10GB。
步骤206、依据所述待提前映射的逻辑空间容量,为所述自动精简配置卷的逻辑空间中地址最小的未映射空间执行提前映射。
所述地址最小未映射空间是指依据所述自动精简配置卷的空间映射表,获取的所述自动精简配置卷的逻辑空间中地址最小的未映射的1个或多个逻辑子空间,所述1个或多个逻辑子空间的容量之和等于所述本次需提前映射的逻辑空间容量,比如:10GB。存储设备为所述自动精简配置卷的逻辑空间中地址最小未映射空间执行提前映射,执行以下步骤:
a)获取所述自动精简配置卷的逻辑空间中地址最小的未映射的1个或多个逻辑子空间。
具体地,在一种可选的实现方案中,可以按照所述自动精简配置卷的逻辑空间的地址,从小到大顺序查询逻辑子空间是否已映射,如果未映射,则作为本次需提前映射的逻辑子空间,直到本次需提前映射的1个或多个逻辑子空间的容量之和等于所述本次需提前映射的逻辑空间容量。
b)为所述1个或多个逻辑子空间映射物理子空间。
具体地,在一种可选的实现方案中,可以在所述自动精简配置卷的物理空间的未映射空间中为所述1个或多个逻辑子空间分配物理子空间,分配完成后,更新所述自动精简配置卷的空间映射表,增加所述逻辑子空间和所述物理子空间的映射关系。
对于自动精简配置卷而言,一旦增加了逻辑子空间和物理子空间的映射关系,所述自动精简配置卷将认为该物理子空间已经被使用,所述自动精简配置卷将实时监测其自身物理空间的使用情况,一旦其自身物理空间使用率达到预设阈值,立即扩容物理空间,扩容时,仅扩容少量物理空间,从而实现了按需分配真实的物理空间。所述物理空间扩容策略和扩容方式为自动精简配置卷现有的实现方案,在本申请中不作赘述。
至此,完成了为所述自动精简配置卷的逻辑空间中地址最小未映射空间执行提前映射的过程,比如,对于新创建的自动精简配置卷,其逻辑空间中第0GB到第10GB的空间已映射了真实的物理空间。当该自动精简配置卷接收到针对已映射的逻辑空间的写命令时,直接执行写命令即可,无需在执行写命令前实时为所述写命令中携带的地址段对应的1个或多个逻辑子空间映射物理子空间,对生产卷的性能无额外的影响,即兼顾了自动精简配置卷空间管理的灵活性,也保证了性能。
步骤106、监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
具体地,所述已映射空间使用率是指快照资源中已写入数据量和所述快照资源对应的自动精简配置卷中已映射逻辑空间容量的比值,其中所述已映射逻辑空间容量由所述自动精简配置卷自行统计,为自动精简配置卷的现有的实现方案,在本申请中不作赘述。比如:若所述已映射空间使用率不小于90%(第一阈值)时,存储设备执行如步骤104所述的过程,再次为所述自动精简配置卷执行提前映射逻辑空间到对应的物理子空间,具体过程不作赘述。
至此,完成图1所示的流程,通过图1所示的流程可以看出,存储设备创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
应用本申请实施例,本申请中存储设备选择通常不会使用的自动精简配置卷作为快照资源,并按预设策略提前映射好所述自动精简配置卷的物理空间;一方面,使得快照资源的写入性能不受自动精简配置卷由于每次物理空间扩容触发的首次映射而导致的IO较慢的影响,即提高了快照资源对存储IO的响应速度,兼顾了自动精简配置卷空间管理的灵活性,也保证了性能;另一方面,实现对快照资源空间灵活按需提前映射分配及动态回收,提升了存储空间利用效率。
可选地,存储设备监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不大于第二阈值时,则为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间。
具体地,所述已映射空间使用率是指快照资源中已写入数据量和所述快照资源对应的自动精简配置卷中已映射逻辑空间容量的比值,其中所述已映射逻辑空间容量由所述自动精简配置卷自行统计。比如:若所述已映射空间使用率不大于30%(第二阈值)时,为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间,执行以下步骤:
a)获取所述快照资源的已映射未使用的空间容量。
具体地,在一种可选的实现方案中,比如:所述已映射空间使用率为30%,所述,存储设备获取快照资源中已写入数据量为30GB,所述快照资源对应的自动精简配置卷中已映射逻辑空间容量为100GB,而所述快照资源的已映射未使用的空间容量等于所述自动精简配置卷中已映射逻辑空间容量100GB减去所述快照资源中已写入数据量30GB,即所述快照资源的已映射未使用的空间容量为70GB。
b)计算所述自动精简配置卷待取消映射逻辑空间的容量,其中所述待取消映射逻辑空间的容量为所述快照资源的已映射未使用的空间容量乘以预设第二百分比。
具体地,比如:本次所述自动精简配置卷待取消映射逻辑空间的容量等于为所述自动精简配置卷的未使用的物理空间容量70GB乘以所述第二百分比20%,即所述本次需提前映射的逻辑空间容量为14GB。
c)依据所述待取消映射逻辑空间的容量,针对所述自动精简配置卷中的地址最大的已映射未使用的逻辑空间下发unmap命令,释放所述逻辑空间对应占用的物理空间。
具体地,所述地址最大的已映射未使用的逻辑空间是指依据所述自动精简配置卷的空间映射表,获取的所述自动精简配置卷的逻辑空间中地址最大的已映射未使用的1个或多个逻辑子空间,所述1个或多个逻辑子空间的容量之和等于所述本次需提前取消映射的逻辑空间容量,比如:14GB;存储设备针对所述自动精简配置卷中的地址最大的已映射未使用的1个或多个逻辑子空间下发unmap命令,取消映射地址最大的已映射未使用的14GB逻辑空间;所述自动精简配置卷收到unmap命令后,将修改空间映射表,去掉所述1个或多个逻辑子空间和对应的物理子空间的映射关系,所述对应的物理子空间将作为未映射物理子空间,所述自动精简配置卷进一步把未映射物理子空间归还给存储池。所述unmap命令的处理过程为自动精简配置卷现有的实现方案,在本申请中不作赘述。
基于上述方案,针对业务热点发现变化的情况,当业务变成冷点业务时,即某个生产卷对应快照资源中的早期的数据量较大的快照被删除后,快照资源中已映射空间使用率变低,存储设备将触发快照资源空间回收,使得快照资源可以主动释放多映射的物理空间,使得快照资源对应的自动精简配置卷进一步把多分配的物理空间归还给存储池,以便其它存储卷使用,使得存储空间得到高效的利用,实现了对快照资源空间灵活按需提前映射分配及动态回收。
图3是本申请一示例性实施例提供的一种快照资源空间的管理装置的框图。与上述方法实施例相对应,本申请还提供了一种快照资源空间的管理装置的实施例,请参考图3所示例的一种快照资源空间的管理装置30,所述装置包括:
创建模块301,用于创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;
处理模块302,用于为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
在本实施例中,还包括:
所述处理模块302进一步,若所述已映射空间使用率不大于第二阈值时,则为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间。
在本实施例中,所述自动精简配置卷的用途至少包括:可用于快照资源。
在本实施例中,还包括:
所述创建模块301进一步,若所述自动精简配置卷的用途是可用于快照资源,则在为所述自动精简配置卷分配物理空间时,优先在所述生产卷所属RAID上分配。
在本实施例中,所述为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,所述处理模块302进一步,包括:
获取所述自动精简配置卷的未使用的物理空间容量;
计算待提前映射逻辑空间的容量,其中所述待提前映射逻辑空间的容量为所述自动精简配置卷的未使用的物理空间容量乘以预设第一百分比;
依据所述待提前映射的逻辑空间容量,为所述自动精简配置卷的逻辑空间中地址最小的未映射空间执行提前映射。
在本实施例中,所述为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间,所述处理模块302进一步,包括:
获取所述快照资源的已映射未使用的空间容量;
计算所述自动精简配置卷待取消映射逻辑空间的容量,其中所述待取消映射逻辑空间的容量为所述快照资源的已映射未使用的空间容量乘以预设第二百分比;
依据所述待取消映射逻辑空间的容量,针对所述自动精简配置卷中的地址最大的已映射未使用的逻辑空间下发unmap命令,释放所述逻辑空间对应占用的物理空间。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本申请方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
上述实施例阐明的系统、装置、模块或模块,具体可以由计算机芯片或实体实现,或者由具有某种功能的产品来实现。一种典型的实现设备为计算机,计算机的具体形式可以是个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件收发设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任意几种设备的组合。
本申请的快照资源空间的管理装置的实施例可以应用在图4所示的电子设备上。装置实施例可以通过软件实现,也可以通过硬件或者软硬件结合的方式实现。以软件实现为例,作为一个逻辑意义上的装置,是通过其所在电子设备的处理器将机器可读存储介质中对应的计算机程序指令读取后运行形成的机器可执行指令。从硬件层面而言,如图4所示,为本申请的快照资源空间的管理装置所在电子设备的一种硬件结构图,除了图4所示的处理器、通信接口、总线以及机器可读存储介质之外,实施例中装置所在的电子设备通常根据该电子设备的实际功能,还可以包括其他硬件,对此不再赘述。
对应地,本申请实施例还提供了图3所示装置的一种电子设备的硬件结构,请参见图4,图4为本申请实施例提供的一种电子设备的硬件结构示意图。该设备包含:通信接口401、处理器402、机器可读存储介质403和总线404;其中,通信接口401、处理器402、机器可读存储介质403通过总线404完成相互间的通信。其中,通信接口401,用于进行网络通信。处理器402可以是一个中央处理器(CPU),处理器402可以执行机器可读存储介质403中存储的机器可读指令,以实现上述图1所示的方法。
本文中提到的机器可读存储介质403可以是任何电子、磁性、光学或其它物理存储装置,可以包含或存储信息,如可执行指令、数据,等等。例如,机器可读存储介质可以是:易失存储器、非易失性存储器或者类似的存储介质。具体地,机器可读存储介质403可以是RAM(Radom Access Memory,随机存取存储器)、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、DVD等),或者类似的存储介质,或者它们的组合。
至此,完成图4所示的硬件结构描述。
此外,本申请实施例还提供了一种包括机器可执行指令的机器可读存储介质,例如图4中的机器可读机器可读存储介质403,所述机器可执行指令可由数据处理装置中的处理器402执行以实现以上描述的上述图1所示的方法。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。

Claims (14)

1.一种快照资源空间的管理方法,其特征在于,包括:
创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;
为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;
监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
2.根据权利要求1所述的方法,其特征在于,还包括:
若所述已映射空间使用率不大于第二阈值时,则为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间。
3.根据权利要求1所述的方法,其特征在于,所述自动精简配置卷的用途至少包括:可用于快照资源。
4.根据权利要求3所述的方法,其特征在于,还包括:
若所述自动精简配置卷的用途是可用于快照资源,则在为所述自动精简配置卷分配物理空间时,优先在所述生产卷所属RAID上分配。
5.根据权利要求1所述的方法,其特征在于,所述为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,包括:
获取所述自动精简配置卷的未使用的物理空间容量;
计算待提前映射逻辑空间的容量,其中所述待提前映射逻辑空间的容量为所述自动精简配置卷的未使用的物理空间容量乘以预设第一百分比;
依据所述待提前映射的逻辑空间容量,为所述自动精简配置卷的逻辑空间中地址最小的未映射空间执行提前映射。
6.根据权利要求2所述的方法,其特征在于,所述为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间,包括:
获取所述快照资源的已映射未使用的空间容量;
计算所述自动精简配置卷待取消映射逻辑空间的容量,其中所述待取消映射逻辑空间的容量为所述快照资源的已映射未使用的空间容量乘以预设第二百分比;
依据所述待取消映射逻辑空间的容量,针对所述自动精简配置卷中的地址最大的已映射未使用的逻辑空间下发unmap命令,释放所述逻辑空间对应占用的物理空间。
7.一种快照资源空间的管理装置,其特征在于,所述装置包括:
创建模块,用于创建与生产卷对应的快照资源,其中所述快照资源对应为自动精简配置卷,用于存放所述生产卷的快照数据;
处理模块,用于为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间;监测所述快照资源的已映射空间使用率,若所述已映射空间使用率不小于第一阈值时,则为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间。
8.根据权利要求7所述的装置,其特征在于,还包括:
所述处理模块进一步,若所述已映射空间使用率不大于第二阈值时,则为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间。
9.根据权利要求7所述的装置,其特征在于,所述自动精简配置卷的用途至少包括:可用于快照资源。
10.根据权利要求9所述的装置,其特征在于,还包括:
所述创建模块进一步,若所述自动精简配置卷的用途是可用于快照资源,则在为所述自动精简配置卷分配物理空间时,优先在所述生产卷所属RAID上分配。
11.根据权利要求7所述的装置,其特征在于,所述为所述快照资源对应的自动精简配置卷执行提前映射逻辑空间,所述处理模块进一步,包括:
获取所述自动精简配置卷的未使用的物理空间容量;
计算待提前映射逻辑空间的容量,其中所述待提前映射逻辑空间的容量为所述自动精简配置卷的未使用的物理空间容量乘以预设第一百分比;
依据所述待提前映射的逻辑空间容量,为所述自动精简配置卷的逻辑空间中地址最小的未映射空间执行提前映射。
12.根据权利要求8所述的装置,其特征在于,所述为所述快照资源对应的自动精简配置卷执行取消映射逻辑空间,所述处理模块进一步,包括:
获取所述快照资源的已映射未使用的空间容量;
计算所述自动精简配置卷待取消映射逻辑空间的容量,其中所述待取消映射逻辑空间的容量为所述快照资源的已映射未使用的空间容量乘以预设第二百分比;
依据所述待取消映射逻辑空间的容量,针对所述自动精简配置卷中的地址最大的已映射未使用的逻辑空间下发unmap命令,释放所述逻辑空间对应占用的物理空间。
13.一种电子设备,其特征在于,包括通信接口、处理器、存储器和总线,所述通信接口、所述处理器和所述存储器之间通过总线相互连接;
所述存储器中存储机器可读指令,所述处理器通过调用所述机器可读指令,执行如权利要求1至6任一项所述的方法。
14.一种机器可读存储介质,其特征在于,所述机器可读存储介质存储有机器可读指令,所述机器可读指令在被处理器调用和执行时,实现权利要求1至6任一项所述的方法。
CN201811548118.2A 2018-12-18 2018-12-18 快照资源空间管理方法、装置、电子设备 Active CN109739688B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811548118.2A CN109739688B (zh) 2018-12-18 2018-12-18 快照资源空间管理方法、装置、电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811548118.2A CN109739688B (zh) 2018-12-18 2018-12-18 快照资源空间管理方法、装置、电子设备

Publications (2)

Publication Number Publication Date
CN109739688A true CN109739688A (zh) 2019-05-10
CN109739688B CN109739688B (zh) 2021-01-26

Family

ID=66360459

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811548118.2A Active CN109739688B (zh) 2018-12-18 2018-12-18 快照资源空间管理方法、装置、电子设备

Country Status (1)

Country Link
CN (1) CN109739688B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112559243A (zh) * 2019-09-25 2021-03-26 阿里巴巴集团控股有限公司 数据快照方法、装置、电子设备及计算机可读存储介质
CN113419672A (zh) * 2021-06-04 2021-09-21 济南浪潮数据技术有限公司 一种存储容量管理方法、系统及存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102073464A (zh) * 2011-01-14 2011-05-25 南开大学 一种按需分配增量卷的创建方法
CN103514249A (zh) * 2013-06-20 2014-01-15 易乐天 一种数据自精简方法和系统及存储装置
CN103838524A (zh) * 2014-03-13 2014-06-04 深圳市迪菲特科技股份有限公司 一种自适应精简配置的实现方法与存储系统
CN103942011A (zh) * 2014-03-04 2014-07-23 中国科学院计算技术研究所 一种差量快照系统及其使用方法
CN105487826A (zh) * 2015-12-22 2016-04-13 国云科技股份有限公司 一种云存储资源超量分配使用的方法
CN107122131A (zh) * 2017-04-18 2017-09-01 杭州宏杉科技股份有限公司 自动精简配置的方法及装置
CN107436727A (zh) * 2016-05-26 2017-12-05 中兴通讯股份有限公司 精简卷的存储空间管理方法和装置
CN107526656A (zh) * 2017-08-31 2017-12-29 郑州云海信息技术有限公司 一种云复原方法及装置
CN107533549A (zh) * 2015-05-13 2018-01-02 华为技术有限公司 用于创建数据库的选择性快照的系统和方法
CN107728949A (zh) * 2017-10-20 2018-02-23 郑州云海信息技术有限公司 一种自动精简卷测试方法、系统、装置及计算机存储介质
WO2018182061A1 (ko) * 2017-03-27 2018-10-04 (주)판도라티비 적응적 비트레이트 영상 서비스 방법
CN108762678A (zh) * 2018-05-30 2018-11-06 郑州云海信息技术有限公司 一种存储空间回收方法、系统、装置及可读存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102073464A (zh) * 2011-01-14 2011-05-25 南开大学 一种按需分配增量卷的创建方法
CN103514249A (zh) * 2013-06-20 2014-01-15 易乐天 一种数据自精简方法和系统及存储装置
CN103942011A (zh) * 2014-03-04 2014-07-23 中国科学院计算技术研究所 一种差量快照系统及其使用方法
CN103838524A (zh) * 2014-03-13 2014-06-04 深圳市迪菲特科技股份有限公司 一种自适应精简配置的实现方法与存储系统
CN107533549A (zh) * 2015-05-13 2018-01-02 华为技术有限公司 用于创建数据库的选择性快照的系统和方法
CN105487826A (zh) * 2015-12-22 2016-04-13 国云科技股份有限公司 一种云存储资源超量分配使用的方法
CN107436727A (zh) * 2016-05-26 2017-12-05 中兴通讯股份有限公司 精简卷的存储空间管理方法和装置
WO2018182061A1 (ko) * 2017-03-27 2018-10-04 (주)판도라티비 적응적 비트레이트 영상 서비스 방법
CN107122131A (zh) * 2017-04-18 2017-09-01 杭州宏杉科技股份有限公司 自动精简配置的方法及装置
CN107526656A (zh) * 2017-08-31 2017-12-29 郑州云海信息技术有限公司 一种云复原方法及装置
CN107728949A (zh) * 2017-10-20 2018-02-23 郑州云海信息技术有限公司 一种自动精简卷测试方法、系统、装置及计算机存储介质
CN108762678A (zh) * 2018-05-30 2018-11-06 郑州云海信息技术有限公司 一种存储空间回收方法、系统、装置及可读存储介质

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112559243A (zh) * 2019-09-25 2021-03-26 阿里巴巴集团控股有限公司 数据快照方法、装置、电子设备及计算机可读存储介质
CN113419672A (zh) * 2021-06-04 2021-09-21 济南浪潮数据技术有限公司 一种存储容量管理方法、系统及存储介质
CN113419672B (zh) * 2021-06-04 2023-06-13 济南浪潮数据技术有限公司 一种存储容量管理方法、系统及存储介质

Also Published As

Publication number Publication date
CN109739688B (zh) 2021-01-26

Similar Documents

Publication Publication Date Title
CN103797770B (zh) 一种共享存储资源的方法和系统
US9081702B2 (en) Working set swapping using a sequentially ordered swap file
EP3617867B1 (en) Fragment management method and fragment management apparatus
US20180232314A1 (en) Method for storing data by storage device and storage device
CN103514249B (zh) 一种数据自精简方法和系统及存储装置
US20140129758A1 (en) Wear leveling in flash memory devices with trim commands
CN105339910B (zh) 在混合驱动器中的虚拟nand容量扩展
CN106227621B (zh) 基于逻辑卷管理精简卷的数据备份方法及系统
CN106716395B (zh) 事务处理的方法、装置及计算机系统
US20180107601A1 (en) Cache architecture and algorithms for hybrid object storage devices
CN103678149B (zh) 数据处理的方法及设备
JP2013509658A (ja) 将来の使用推量に基づく記憶メモリの割り当て
CN102279712A (zh) 一种适用于互联网存储系统的存储控制方法、系统和装置
CN103761053A (zh) 一种数据处理方法和装置
CN104679668B (zh) 存储系统及其控制方法
CN103761190A (zh) 数据处理方法及装置
CN109902034A (zh) 快照创建方法、装置、电子设备及机器可读存储介质
CN113495889B (zh) 一种分布式对象存储方法、装置、电子设备及存储介质
CN101504594A (zh) 一种数据存储方法和装置
JP2008090657A (ja) ストレージシステム及び制御方法
CN103218305B (zh) 存储空间的分配方法
CN110858122B (zh) 存储数据的方法和装置
CN109684271A (zh) 快照数据管理方法、装置、电子设备及机器可读存储介质
CN102567225A (zh) 一种管理系统内存的方法及装置
CN114840148B (zh) 在Kubernetes中基于linux内核bcache技术实现磁盘加速的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant