CN102521152A - 一种分级存储方法及系统 - Google Patents

一种分级存储方法及系统 Download PDF

Info

Publication number
CN102521152A
CN102521152A CN2011103881040A CN201110388104A CN102521152A CN 102521152 A CN102521152 A CN 102521152A CN 2011103881040 A CN2011103881040 A CN 2011103881040A CN 201110388104 A CN201110388104 A CN 201110388104A CN 102521152 A CN102521152 A CN 102521152A
Authority
CN
China
Prior art keywords
data
level
storer
characteristic
resource pool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011103881040A
Other languages
English (en)
Other versions
CN102521152B (zh
Inventor
付忠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Huawei Technology Co Ltd
Original Assignee
Huawei Symantec Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Symantec Technologies Co Ltd filed Critical Huawei Symantec Technologies Co Ltd
Priority to CN201110388104.0A priority Critical patent/CN102521152B/zh
Publication of CN102521152A publication Critical patent/CN102521152A/zh
Application granted granted Critical
Publication of CN102521152B publication Critical patent/CN102521152B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及数据存储技术领域,公开了一种分级存储方法及系统,该方法包括:将存储器划分为至少两个不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;当逻辑卷被访问时,确定被访问数据的I/O特性;根据所述数据的I/O特性,将所述数据在不同层级对应的存储器上迁移,用以使顺序存取的数据存储在高层级,随机存取特性的数据存储在低层级。利用本发明,可以提高数据访问性能。

Description

一种分级存储方法及系统
技术领域
本发明涉及数据存储技术领域,具体涉及一种分级存储方法及系统。
背景技术
自动分层存储是存储领域的一项热门技术,它根据存储介质的特点划分出不同性能的层级,然后根据业务需求将数据存放到对应存储层级中,从而充分发挥了各个存储层级的作用,在满足用户的性能要求的同时有效地降低了系统成本。
在现有技术中,主要有以下两种分层存储方式:
1.根据硬盘类型进行分层存储
由于不同类型硬盘的I/O(Input/Output,输入/输出)性能不同,因此,在现有技术中,通常会采用虚拟化的技术将硬盘分为多个小块,以这些小块为单位来存放数据。如果按照现有方式对数据进行分层存储,则当数据在不同的层级进行多次迁移后,会导致一些逻辑地址连续的数据离散地分布在不同层级的小块上,当连续访问数据时,硬盘磁头会有跳动,不仅会影响访问性能,比如访问速度下降,而且还会降低硬盘的使用寿命。
2.采用RAID(Redundant Array of Inexpensive Disks,独立磁盘冗余阵列)技术进行分层存储
RAID是通过磁盘阵列与数据条块化方法相结合,以提高数据可用率的一种结构。RAID按照实现原理的不同分为多种不同的级别,使用多种不同的存储技术来实现不同等级的冗余、错误恢复和性能。
采用RAID技术后,考虑到数据的可靠性,会使不同RAID级别硬盘的利用率不同,导致硬盘的利用率降低。而且,当数据在不同的层级进行多次迁移后,同样会导致一些逻辑地址连续的数据离散地分布在不同RAID级别硬盘上,当连续访问数据时,硬盘磁头会有跳动,不仅会影响访问性能,比如访问速度下降,而且还会降低硬盘的使用寿命。
发明内容
本发明实施例针对上述现有技术存在的问题,提供一种分级存储方法及系统,提高数据访问性能。
为此,本发明实施例提供如下技术方案:
一种分级存储方法,包括:
将存储器划分为至少两个不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;
当逻辑卷被访问时,确定被访问数据的I/O特性,所述I/O特性包括顺序存取特性和随机存取特性;
根据所述数据的I/O特性,将所述数据在不同层级对应的存储器上迁移,用以使顺序存取的数据存储在高层级,随机存取特性的数据存储在低层级。
一种分级存储系统,包括:
配置单元,用于将存储器划分为不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;
数据特性确定单元,用于当逻辑卷被访问时,确定所述数据的I/O特性,所述I/O特性包括顺序存取特性和随机存取特性;
迁移处理单元,用于根据所述数据的I/O特性将所述数据在不同层级对应的存储器上迁移,用以将顺序存取的数据迁移至高层级,随机存取特性的数据迁移至低层级。
本发明实施例分级存储方法及系统,将存储器划分为至少两个不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;当逻辑卷被访问时,确定被访问数据的I/O特性,所述I/O特性包括顺序存取特性和随机存取特性;根据所述数据的I/O特性,将所述数据在不同层级对应的存储器上迁移,用以使顺序存取的数据存储在高层级,随机存取特性的数据存储在低层级。由于基于数据的I/O特性对数据进行迁移,因此,可以有效地提高数据访问性能。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1是本发明实施例分级存储方法的流程图;
图2是本发明实施例中通过逻辑卷访问硬盘的过程示意图;
图3是本发明实施例中数据迁移过程示意图;
图4是本发明实施例分级存储系统的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明实施例的方案,下面结合附图和实施方式对本发明实施例作进一步的详细说明。
本发明实施例分级存储方法及系统,将存储器划分为至少两个不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;当逻辑卷被访问时,确定被访问数据的I/O特性;根据所述数据的I/O特性,将所述数据在不同层级对应的存储器上迁移由于基于数据的I/O特性对数据进行迁移,因此,在保证数据可靠性的同时,可以有效地提高数据访问性能。
本发明实施例中所指的存储器,包括硬盘、闪存、软盘、半导体存储器、RAM(random access memory,随机存取存储器)等。
如图1所示,是本发明实施例分级存储方法的流程图,包括以下步骤:
步骤101,将存储器划分为至少两个不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小。
比如,可以将存储器划分为三个不同的层级,由低到高分别为:层级0、层级1和层级2。
可选地,在本发明实施例中,在存储器均为硬盘的场景下,可以根据不同类型硬盘的I/O性能对其进行层级的划分。比如,将硬盘划分为三个不同的层级,对应所述I/O性能由高到低分别为:层级0、层级1和层级2。如SSD(SolidState Disk/Driver,固态硬盘)的性能较高,SAS(Serial Attached Small ComputerSystem Interface,串行连接小型计算机系统接口)、FC(Fiber Channel,光纤通道)硬盘的性能其次,SATA(Serial Advanced Technology Attachment,串行高级技术附件)类型硬盘的性能最低,因此当这几种类型的硬盘混插时,就可以将SSD类型的硬盘作为层级0、FC或SAS类型的硬盘作为层级1、SATA类型的硬盘作为层级2,也就是说,性能越高,所属的层级越低,层级高低的顺序与硬盘I/O性能高低的顺序相反。
可选地,若硬盘I/O性能所差无几,也可以无需依据硬盘的I/O性能对其进行层级的划分,例如存储系统中的硬盘均为SAS或SATA,则可以将其分为三个层级,三个层级的大小可以相同也可以不同。
当然,还可以有其它的分层方式,例如,将其他类型的硬盘划分为2个、4个、5个等其他数目的层级,对此本发明实施例不做限定。
进一步,将各层级的存储器虚拟化为数据块时,将各层级的存储器虚拟化为与其他层级存储器的数据块不同大小的数据块,从而生成该层级对应的资源池,即每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同。在本发明实施例中,不同层级的存储器上的数据块大小不同,层级越低,其对应的数据块越小,存储具有随机I/O特性的数据性能较高;层级越高,其对应的数据块越大,存储具有顺序I/O特性的数据性能较高。
可选地,虚拟化时可以将高层级存储器对应的数据块的大小设定为与所述高层级存储器相邻的低层级存储器对应的数据块的整数倍。比如,层级1的存储器对应的数据块的大小是层级0的存储器对应的数据块的2倍,层级2的存储器对应的数据块的大小是层级1的存储器对应的数据块的2倍。当然,也可以采用其它分块方式,只要保证层级越高对应的数据块越大即可。
步骤102,当逻辑卷被访问时,确定被访问数据的I/O特性。
所述I/O特性包括顺序存取特性和随机存取特性。
所述逻辑卷是指由逻辑磁盘形成的虚拟盘,也可称为磁盘分区。在实际应用中,可以通过逻辑卷管理各存储器上存储的数据。
通过逻辑卷访问存储器的过程如图2所示。
其中,第一层描述的是一个逻辑卷由多个逻辑块组成;第二层描述的是一个逻辑块由多个物理块组成,如图中所示的物理块D、P;第三层描述的是存储器,表示将一个存储器分成了多个物理块。
当一个I/O操作通过逻辑卷访问存储器时,该I/O操作会携带Volume ID(卷标识)、LBA(逻辑块地址)、长度信息,用于指示要访问的逻辑卷、该逻辑卷的逻辑块、以及该逻辑块上的位置及长度。
根据上述信息及逻辑卷中逻辑块与物理块的映射关系表,就可以确定需要访问的数据在存储器及其存储器上的物理位置。上述逻辑块与物理块的映射关系表存储在系统存储器,通过系统文件可以知道其存储地址。
在本发明实施例中,可以通过一个I/O识别模块来确定数据的I/O特性。当逻辑卷被访问时,该模块记录I/O操作对应的LBA和长度信息,并且将当前I/O操作的LBA地址和长度信息与记录的之前I/O操作的LAB地址和长度信息进行比较,如果当前I/O操作的逻辑存储空间与之前I/O操作的逻辑存储空间有重叠或者连续,则表明当前I/O操作相应的数据块中的数据为顺序存取特性的数据,否则,表明相应的数据块中的数据为随机存取特性的数据。这里需要说明的是在实际应用中,“之前I/O操作”不仅指前一次I/O操作,应该被理解为前n次I/O操作,例如5次,以免因访问地址的抖动造成不合理地将连续存取特性判定为随机存取特性。如何设置n的值可以根据经验或测试结果来设定。
本发明实施例还提供了另一种I/O识别模块确定数据I/O特性的方式:当逻辑卷被访问时,该模块记录I/O操作对应的LBA,并且将当前I/O操作的LBA地址与记录的之前I/O操作的LAB地址相比较,若当前I/O操作的LBA与之前I/O操作的LAB地址之间的距离(即差值)小于设定阈值,则表明当前I/O操作相应的数据块中的数据为顺序存取特性的数据,否则,表明相应的数据块中的数据为随机存取特性的数据。可以根据经验来设定阈值。
确定数据I/O特性的方式不限于上述列举的两种。
步骤103,根据所述数据的I/O特性将所述数据在不同层级对应的存储器上迁移,用以使顺序存取的数据存储在高层级,随机存取特性的数据存储在低层级。
在本发明实施例中,不同层级的存储器上的数据块大小不同,层级越低,其对应的数据块越小,存储具有随机I/O特性的数据性能较高;层级越高,其对应的数据块越大,存储具有顺序I/O特性的数据性能较高。因此,可以根据数据的I/O特性,将随机存取特性的数据迁移到低层级的存储器,并将顺序存取特性的数据迁移到高层级的存储器。
具体地,可以根据I/O识别模块的识别结果,确定待迁移的数据。若数据为顺序存取特性的数据,并且在低层级对应的存储器上,则该数据需要迁移到高层级的存储器。若数据为随机存取特性的数据,并且在高层级对应的存储器上,则该数据也需要迁移到低层级的存储器。也就是说,对于顺序存取特性的数据,将其迁移到高层级对应的存储器上,对于随机存取特性的数据,将其迁移到低层级对应的存储器上。
在具体实现上述迁移过程时,可以通过迁移列表的方式来实现,即将每个需要迁移的数据对应的源地址和目的地址组成一个迁移项,将所有迁移项写到一个迁移列表中,然后,对该迁移列表中的每个迁移项按照其对应的源地址读取源数据,然后将读取的源数据写到该迁移项对应的目的地址,最后,根据上述源地址和目的地址,修改逻辑卷中逻辑块与物理块的映射关系表,从而完成数据的迁移过程。
由于不同层级的存储器中数据的分块大小不同,低层级的存储器中数据的分块较小,高层级的存储器中数据的分块较大,因此,在数据迁移过程中,可以将低层级存储器中多个数据块的数据组合后迁移到高层级存储器中的一个空闲块中,反之,将高层级存储器中一个数据块拆分为多个小块,然后将这些小块分别迁移到低层级存储器中的多个空闲块中。
如图3所示,可以将层级0上的第0、2、n个分块中具有顺序存取特性的数据组合后,从层级0迁移到层级1;也可以将层级1上的第n个分块中具有随机存取特性的数据拆分后,从层级1迁移到层级0上的第0、2、n个分块中。此时,将高层级存储器对应的数据块的大小设定为与所述高层级存储器相邻的低层级存储器对应的数据块的整数倍的优势在于,可以节约组合或拆分后需要为不足一个分块的数据分配一个分块时浪费的存储资源。
需要说明的是,上述图3仅仅是一个示意图,具体需要迁移哪些数据,以及对需要迁移的数据如何组合、拆分,需要根据识别出的该数据的I/O特性、所在的层级,以及不同层级的存储器上的数据块大小来确定。
可见,本发明实施例分级存储方法,将存储器划分为不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同;当逻辑卷被访问时,确定数据的I/O特性;根据所述数据的I/O特性将所述数据在不同层级对应的存储器上迁移。由于基于数据的I/O特性对数据进行迁移,从而使得具有顺序存取特性的数据尽可能存储在物理连续的大分块中,减少了I/O操作中数据迁移的次数,从而减轻了存储器磁头频繁跳动的现象,不但提高了访问性能,还可以延长存储器的使用寿命;对于具有随机存取特性的数据来说,尽可能存储在低层级的、具有小分块的高性能存储器中,从而保证了这类数据的访问性能。
相应地,本发明实施例还提供一种分级存储系统,如图4所示,是该系统的一种结构示意图。
所述系统包括:多个存储器21、22、23,以及配置单元31、数据特性确定单元32和迁移处理单元33。其中:
配置单元31,用于将所述存储器划分为不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;
数据特性确定单元32,用于当逻辑卷10被访问时,确定所述数据的I/O特性,所述I/O特性包括顺序存取特性和随机存取特性;
迁移处理单元33,用于根据所述数据的I/O特性将所述数据在不同层级对应的存储器上迁移,用以将顺序存取的数据迁移至高层级,随机存取特性的数据迁移至低层级。
在实际应用中,上述配置单元31可以根据硬盘的I/O性能将硬盘划分为三个不同的层级,对应所述I/O性能由高到低分别为:层级0、层级1和层级2。其中,层级0包括SSD;层级1包括SAS类型硬盘和FC类型硬盘;层级2包括SATA类型硬盘。
而且,为了方便对这些不同存储器上数据的管理,可以将高层级对应的数据块设定为与所述高层级相邻的低层级对应的数据块的整数倍。
上述数据特性确定单元32的一种具体结构包括:记录子单元和检查子单元(未图示),其中,记录子单元用于当逻辑卷被访问时,记录I/O操作对应的逻辑块地址和长度信息;检查子单元用于根据当前I/O操作的逻辑块地址和长度与所述记录子单元记录的之前I/O操作的逻辑块地址和长度,判断当前I/O操作的逻辑存储空间与之前I/O操作的逻辑存储空间是否有重叠或者连续,如果有重叠或者连续,则确定所述逻辑块地址对应的数据为顺序存取特性的数据,否则,确定所述逻辑块地址对应的数据为随机存取特性的数据。
上述迁移处理单元33的一种具体结构包括:第一迁移子单元和第二迁移子单元。其中:
具体地,第一迁移子单元,用于如果所述数据为顺序存取特性的数据,并且在低层级的存储器上,则所述数据需要迁移到高层级的存储器;第二迁移子单元,用于如果所述数据为随机存取特性的数据,并且在高层级对应的存储器上,则所述数据需要迁移到低层级的存储器。
迁移处理单元33在根据待访问数据的I/O特性确定需要迁移的数据之后,具体迁移时,可以采用迁移列表的方式来迁移数据,即还包括:
列表生成子单元,用于将所述数据的源地址和目的地址组成一个迁移项写到迁移列表中。
迁移子单元,用于对所述迁移列表中的每个迁移项按照该迁移项中的源地址读取数据,将读取的数据写到该迁移项中的目的地址,然后根据该迁移项中的源地址和目的地址修改所述逻辑卷中逻辑块与物理块的映射关系表。
由于不同层级的存储器中数据的分块不同,低层级的存储器中数据的分块较小,高层级的存储器中数据的分块较大,因此,所述迁移子单元在对数据进行迁移的过程中,可以将低层级存储器中多个数据块的数据组合后迁移到高层级存储器中的一个空闲块中,反之,将高层级存储器中一个数据块拆分为多个小块,然后将这些小块分别迁移到低层级存储器中的多个空闲块中。
数据的具体迁移过程可参照前面本发明实施例分级存储方法中的描述,在此不再赘述。
本发明实施例分级存储系统,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;当逻辑卷被访问时,确定数据的I/O特性;根据所述数据的I/O特性将所述数据在不同层级对应的存储器上迁移。由于基于数据的I/O特性对数据进行迁移,从而使得具有顺序存取特性的数据尽可能存储在物理连续的大分块中,减少了I/O操作中数据迁移的次数,从而减轻了存储器磁头频繁跳动的现象,不但提高了访问性能,还可以延长存储器的使用寿命;对于具有随机存取特性的数据来说,尽可能存储在低层级的、具有小分块的高性能存储器中,从而保证了这类数据的访问性能。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于系统实施例而言,由于其基本相似于方法实施例,所以描述得比较简单,相关之处参见方法实施例的部分说明即可。以上所描述的系统实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
以上对本发明实施例进行了详细介绍,本文中应用了具体实施方式对本发明进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及设备;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种分级存储方法,其特征在于,包括:
将存储器划分为至少两个不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;
当逻辑卷被访问时,确定被访问数据的I/O特性,所述I/O特性包括顺序存取特性和随机存取特性;
根据所述数据的I/O特性,将所述数据在不同层级对应的存储器上迁移,用以使顺序存取的数据存储在高层级,随机存取特性的数据存储在低层级。
2.根据权利要求1所述的方法,其特征在于,所述将存储器划分为不同的层级包括:
根据存储器的I/O性能将存储器划分为三个不同的层级,对应所述I/O性能由高到低分别为:层级0、层级1和层级2。
3.根据权利要求2所述的方法,其特征在于,
所述层级0的存储器包括SSD;
所述层级1的存储器包括SAS类型硬盘和FC类型硬盘;
所述层级2的存储器包括SATA类型硬盘。
4.如权利要求1所述的方法,其特征在于,所述高层级对应的数据块的大小为与所述高层级相邻的低层级对应的数据块的整数倍。
5.如权利要求1至4任一项所述的方法,其特征在于,所述当逻辑卷被访问时,确定被访问数据的I/O特性包括:
当逻辑卷被访问时,记录I/O操作对应的逻辑块地址和长度信息;
根据当前I/O操作的逻辑块地址和长度与记录的之前I/O操作的逻辑块地址和长度,判断当前I/O操作的逻辑存储空间与之前I/O操作的逻辑存储空间是否有重叠或者连续;
若有重叠或者连续,则确认所述当前I/O操作对应的数据为顺序存取特性的数据,否则,所述逻辑块地址对应的数据为随机存取特性的数据。
6.根据权利要求1所述的方法,其特征在于,所述根据所述数据的I/O特性将所述数据在不同层级对应的存储器上迁移包括:
如果所述数据为顺序存取特性的数据,并且在低层级的存储器上,则所述数据需要迁移到高层级的存储器;
如果所述数据为随机存取特性的数据,并且在高层级对应的存储器上,则所述数据需要迁移到低层级的存储器。
7.一种分级存储系统,其特征在于,包括:
配置单元,用于将存储器划分为不同的层级,每个层级对应的资源池中数据块的大小与其他层级对应的资源池中数据块的大小不同,高层级对应的资源池中数据块的大小大于低层级对应的资源池中数据块的大小;
数据特性确定单元,用于当逻辑卷被访问时,确定所述数据的I/O特性,所述I/O特性包括顺序存取特性和随机存取特性;
迁移处理单元,用于根据所述数据的I/O特性将所述数据在不同层级对应的存储器上迁移,用以将顺序存取的数据迁移至高层级,随机存取特性的数据迁移至低层级。
8.根据权利要求7所述的系统,其特征在于,
所述配置单元,具体用于根据存储器的I/O性能将所述存储器划分为三个不同的层级,对应所述I/O性能由高到低分别为:层级0、层级1和层级2。
9.根据权利要求7或8所述的系统,其特征在于,所述数据特性确定单元包括:
记录子单元,用于当逻辑卷被访问时,记录I/O操作对应的逻辑块地址和长度信息;
检查子单元,用于根据当前I/O操作的逻辑块地址和长度与所述记录子单元记录的之前I/O操作的逻辑块地址和长度,判断当前I/O操作的逻辑存储空间与之前I/O操作的逻辑存储空间是否有重叠或者连续,如果有重叠或者连续,则确定所述逻辑块地址对应的数据为顺序存取特性的数据,否则,确定所述逻辑块地址对应的数据为随机存取特性的数据。
10.根据权利要求8所述的系统,其特征在于,所述迁移处理单元包括:
第一迁移子单元,用于如果所述数据为顺序存取特性的数据,并且在低层级的存储器上,则所述数据需要迁移到高层级的存储器;
第二迁移子单元,如果所述数据为随机存取特性的数据,并且在高层级对应的存储器上,则所述数据需要迁移到低层级的存储器。
CN201110388104.0A 2011-11-29 2011-11-29 一种分级存储方法及系统 Active CN102521152B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110388104.0A CN102521152B (zh) 2011-11-29 2011-11-29 一种分级存储方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110388104.0A CN102521152B (zh) 2011-11-29 2011-11-29 一种分级存储方法及系统

Publications (2)

Publication Number Publication Date
CN102521152A true CN102521152A (zh) 2012-06-27
CN102521152B CN102521152B (zh) 2014-12-24

Family

ID=46292082

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110388104.0A Active CN102521152B (zh) 2011-11-29 2011-11-29 一种分级存储方法及系统

Country Status (1)

Country Link
CN (1) CN102521152B (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103020255A (zh) * 2012-12-21 2013-04-03 华为技术有限公司 分级存储方法和装置
CN103268203A (zh) * 2013-05-20 2013-08-28 深圳市京华科讯科技有限公司 存储虚拟化处理方法
CN103500147A (zh) * 2013-09-27 2014-01-08 浪潮电子信息产业股份有限公司 一种嵌入分层存储的pb级集群存储系统的方法
CN103631537A (zh) * 2013-11-29 2014-03-12 华为技术有限公司 一种虚拟磁盘的管理方法及装置
CN103631729A (zh) * 2013-12-06 2014-03-12 浪潮(北京)电子信息产业有限公司 一种基于块级的分级存储方法及系统
CN103942157A (zh) * 2013-01-22 2014-07-23 国际商业机器公司 用于计算存储环境中的数据处理的方法和系统
CN104317742A (zh) * 2014-11-17 2015-01-28 浪潮电子信息产业股份有限公司 一种优化空间管理的自动精简配置方法
CN104583929A (zh) * 2012-10-12 2015-04-29 株式会社日立制作所 存储装置和数据管理方法
CN104679589A (zh) * 2013-11-27 2015-06-03 中兴通讯股份有限公司 系统资源均衡调整方法及装置
CN106406759A (zh) * 2016-09-13 2017-02-15 郑州云海信息技术有限公司 一种数据存储方法及装置
CN107203479A (zh) * 2016-03-16 2017-09-26 株式会社东芝 层级化存储系统、存储控制器及层级化控制方法
WO2018113029A1 (zh) * 2016-12-21 2018-06-28 广州炒米信息科技有限公司 接口兼容装置
CN108509147A (zh) * 2017-02-28 2018-09-07 慧与发展有限责任合伙企业 数据块迁移
CN108874316A (zh) * 2018-06-06 2018-11-23 郑州云海信息技术有限公司 存储资源集中管理的方法、装置、设备及可读存储介质
CN112379841A (zh) * 2020-11-16 2021-02-19 北京金山云网络技术有限公司 数据处理方法、装置和电子设备
CN112445425A (zh) * 2019-08-29 2021-03-05 国际商业机器公司 多层级存储
CN112799585A (zh) * 2019-11-14 2021-05-14 百度在线网络技术(北京)有限公司 数据处理方法、装置、电子设备及可读存储介质
CN117149098A (zh) * 2023-10-31 2023-12-01 苏州元脑智能科技有限公司 一种条带单元分配方法、装置、计算机设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63211040A (ja) * 1987-02-27 1988-09-01 Hitachi Ltd 記憶装置
EP0757317A2 (en) * 1995-07-31 1997-02-05 Kabushiki Kaisha Toshiba Hierarchical data storage device and storage method
CN1311328C (zh) * 2003-03-27 2007-04-18 株式会社日立制作所 存储装置系统
TW201103016A (en) * 2009-07-07 2011-01-16 Lsi Corp Systems and methods for tiered non-volatile storage

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS63211040A (ja) * 1987-02-27 1988-09-01 Hitachi Ltd 記憶装置
EP0757317A2 (en) * 1995-07-31 1997-02-05 Kabushiki Kaisha Toshiba Hierarchical data storage device and storage method
CN1311328C (zh) * 2003-03-27 2007-04-18 株式会社日立制作所 存储装置系统
TW201103016A (en) * 2009-07-07 2011-01-16 Lsi Corp Systems and methods for tiered non-volatile storage

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104583929A (zh) * 2012-10-12 2015-04-29 株式会社日立制作所 存储装置和数据管理方法
CN103020255B (zh) * 2012-12-21 2016-03-02 华为技术有限公司 分级存储方法和装置
CN103020255A (zh) * 2012-12-21 2013-04-03 华为技术有限公司 分级存储方法和装置
CN103942157B (zh) * 2013-01-22 2017-06-23 国际商业机器公司 用于计算存储环境中的数据处理的方法和系统
CN103942157A (zh) * 2013-01-22 2014-07-23 国际商业机器公司 用于计算存储环境中的数据处理的方法和系统
US9430404B2 (en) 2013-01-22 2016-08-30 International Business Machines Corporation Thinly provisioned flash cache with shared storage pool
CN103268203A (zh) * 2013-05-20 2013-08-28 深圳市京华科讯科技有限公司 存储虚拟化处理方法
CN103500147A (zh) * 2013-09-27 2014-01-08 浪潮电子信息产业股份有限公司 一种嵌入分层存储的pb级集群存储系统的方法
CN104679589A (zh) * 2013-11-27 2015-06-03 中兴通讯股份有限公司 系统资源均衡调整方法及装置
CN103631537B (zh) * 2013-11-29 2016-09-14 华为技术有限公司 一种虚拟磁盘的管理方法及装置
CN103631537A (zh) * 2013-11-29 2014-03-12 华为技术有限公司 一种虚拟磁盘的管理方法及装置
CN103631729A (zh) * 2013-12-06 2014-03-12 浪潮(北京)电子信息产业有限公司 一种基于块级的分级存储方法及系统
CN104317742A (zh) * 2014-11-17 2015-01-28 浪潮电子信息产业股份有限公司 一种优化空间管理的自动精简配置方法
CN104317742B (zh) * 2014-11-17 2017-05-03 浪潮电子信息产业股份有限公司 一种优化空间管理的自动精简配置方法
CN107203479B (zh) * 2016-03-16 2020-09-22 株式会社东芝 层级化存储系统、存储控制器及层级化控制方法
CN107203479A (zh) * 2016-03-16 2017-09-26 株式会社东芝 层级化存储系统、存储控制器及层级化控制方法
CN106406759A (zh) * 2016-09-13 2017-02-15 郑州云海信息技术有限公司 一种数据存储方法及装置
CN106406759B (zh) * 2016-09-13 2019-12-31 苏州浪潮智能科技有限公司 一种数据存储方法及装置
WO2018113029A1 (zh) * 2016-12-21 2018-06-28 广州炒米信息科技有限公司 接口兼容装置
CN108509147A (zh) * 2017-02-28 2018-09-07 慧与发展有限责任合伙企业 数据块迁移
CN108874316A (zh) * 2018-06-06 2018-11-23 郑州云海信息技术有限公司 存储资源集中管理的方法、装置、设备及可读存储介质
CN112445425A (zh) * 2019-08-29 2021-03-05 国际商业机器公司 多层级存储
CN112799585A (zh) * 2019-11-14 2021-05-14 百度在线网络技术(北京)有限公司 数据处理方法、装置、电子设备及可读存储介质
CN112799585B (zh) * 2019-11-14 2024-05-24 百度在线网络技术(北京)有限公司 数据处理方法、装置、电子设备及可读存储介质
CN112379841A (zh) * 2020-11-16 2021-02-19 北京金山云网络技术有限公司 数据处理方法、装置和电子设备
CN117149098A (zh) * 2023-10-31 2023-12-01 苏州元脑智能科技有限公司 一种条带单元分配方法、装置、计算机设备及存储介质
CN117149098B (zh) * 2023-10-31 2024-02-06 苏州元脑智能科技有限公司 一种条带单元分配方法、装置、计算机设备及存储介质

Also Published As

Publication number Publication date
CN102521152B (zh) 2014-12-24

Similar Documents

Publication Publication Date Title
CN102521152B (zh) 一种分级存储方法及系统
KR102438308B1 (ko) 구역화된 네임스페이스들에 대한 내구성 그룹들의 적용
CN108021510A (zh) 操作对多重名称空间进行管理的存储装置的方法
CN102156738B (zh) 数据块处理方法、数据块存储设备及系统
KR102533207B1 (ko) 데이터 저장 장치 및 동작 방법, 이를 포함하는 스토리지 시스템
US8650379B2 (en) Data processing method for nonvolatile memory system
EP3511814B1 (en) Storage device storing data in order based on barrier command
TWI432965B (zh) 具有複數個結構之記憶體系統及其操作方法
US10866741B2 (en) Extending SSD longevity
US20190004739A1 (en) Managing Shingled Magnetic Recording (SMR) Zones in a Hybrid Storage Device
US10776268B2 (en) Priority addresses for storage cache management
US10365845B1 (en) Mapped raid restripe for improved drive utilization
CN103761053A (zh) 一种数据处理方法和装置
CN102779096A (zh) 一种基于页块面三维的闪存地址映射方法
CN109582219A (zh) 存储系统、计算系统及其方法
US20110307660A1 (en) Redundant array of independent disks system, method for writing data into redundant array of independent disks system, and method and system for creating virtual disk
US11537303B1 (en) Dissimilar write prioritization in ZNS devices
KR101070511B1 (ko) Ssd 컨트롤러 및 ssd 컨트롤러의 동작 방법
US20160299698A1 (en) Realm partitioning in hard drives
US9658964B2 (en) Tiered data storage system
US10268386B2 (en) Data storage device including temporary storage locations
CN114730291A (zh) 具有分区的ssd的数据停放
US10915262B2 (en) Hybrid storage device partitions with storage tiers
KR100970537B1 (ko) Ssd 관리 장치 및 방법
US11947803B2 (en) Effective utilization of different drive capacities

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: 611731 Chengdu high tech Zone, Sichuan, West Park, Qingshui River

Applicant after: HUAWEI DIGITAL TECHNOLOGIES (CHENG DU) Co.,Ltd.

Address before: 611731 Chengdu high tech Zone, Sichuan, West Park, Qingshui River

Applicant before: CHENGDU HUAWEI SYMANTEC TECHNOLOGIES Co.,Ltd.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: CHENGDU HUAWEI SYMANTEC TECHNOLOGY CO., LTD. TO: HUAWEI DIGITAL TECHNOLOGY (CHENGDU) CO., LTD.

C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220921

Address after: No. 1899 Xiyuan Avenue, high tech Zone (West District), Chengdu, Sichuan 610041

Patentee after: Chengdu Huawei Technologies Co.,Ltd.

Address before: 611731 Qingshui River District, Chengdu hi tech Zone, Sichuan, China

Patentee before: HUAWEI DIGITAL TECHNOLOGIES (CHENG DU) Co.,Ltd.

TR01 Transfer of patent right