CN101576833A - 一种独立磁盘冗余阵列raid数据重建方法和装置 - Google Patents

一种独立磁盘冗余阵列raid数据重建方法和装置 Download PDF

Info

Publication number
CN101576833A
CN101576833A CNA200910148523XA CN200910148523A CN101576833A CN 101576833 A CN101576833 A CN 101576833A CN A200910148523X A CNA200910148523X A CN A200910148523XA CN 200910148523 A CN200910148523 A CN 200910148523A CN 101576833 A CN101576833 A CN 101576833A
Authority
CN
China
Prior art keywords
data
hotspare disk
disks
raid
disk
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA200910148523XA
Other languages
English (en)
Other versions
CN101576833B (zh
Inventor
余剑声
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
New H3C Technologies Co Ltd
Original Assignee
Hangzhou H3C Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou H3C Technologies Co Ltd filed Critical Hangzhou H3C Technologies Co Ltd
Priority to CN200910148523XA priority Critical patent/CN101576833B/zh
Publication of CN101576833A publication Critical patent/CN101576833A/zh
Application granted granted Critical
Publication of CN101576833B publication Critical patent/CN101576833B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种独立磁盘冗余阵列RAID数据重建方法，应用于RAID中，用来对所述RAID进行数据重建，所述RAID包括多个数据盘和至少一个热备盘，所述热备盘的数量小于所述数据盘的数量，所述方法包括以下步骤：在所述RAID正常工作时，将每个数据盘中的一部分数据复制到所述热备盘中；在某个数据盘发生故障时，根据所述热备盘中保存的所述故障数据盘的部分数据以及其他数据盘的数据对所述RAID进行数据重建。本发明在RAID正常时将数据盘中的数据复制到热备盘中，减少了RAID重建的数据量，缩短了RAID重建的时间，降低了数据损坏的风险。本发明同样公开了一种应用上述方法的装置。

Description

一种独立磁盘冗余阵列RAID数据重建方法和装置
技术领域
本发明涉及数据存储技术领域，尤其涉及一种独立磁盘冗余阵列RAID数据重建方法和装置。
背景技术
随着科学技术的飞速发展和计算机技术的普遍应用，人们对存储设备的性能要求越来越高。作为一项成熟的技术，RAID(Redundant Array ofIndependent Disk，独立冗余磁盘阵列)技术已经广泛应用于数据存储的各种场合。RAID是一种通过磁盘阵列与数据条块化相结合，以提高数据可用率的结构，通过数据镜像实现数据冗余，可直接从镜像拷贝中读取数据，并将多个数据磁盘通过RAID控制器结合成虚拟的单台大容量硬盘使用，通过同时使用多个磁盘提高数据的传输速率，通过在多个磁盘上同时存储和读取数据提高存储系统的数据吞吐量。同时，RAID还可以通过数据校验提供容错功能，以提高系统的稳定冗余性。此外，根据应用场合的不同，RAID可以划分为多种规范，包括RAID0、RAID1、RAID2、RAID3、RAID4、RAID5和RAID6等，每种规范分别具有各自的强项和弱项。
如图1所示，为存储系统的分层架构的结构示意图，该分层架构自下而上包括物理资源层、RAID控制层、逻辑资源层和用户应用层。其中，物理资源层包括RAID中的数据盘和热备盘，构成整个存储系统的分层架构中的底层；RAID控制层用于向上层提供存储空间，使用该存储空间的用户通过RAID控制层获取存储空间，而不需要了解底层RAID的分布；逻辑资源层为RAID控制层之上为用户划分的逻辑资源，该逻辑资源由分布在RAID上的一系列连续或者非连续的地址组成，可以分配给上层的应用客户端，为用户可以实际使用的资源，也称为SAN(Storage Area Network，存储域网络)资源或LUN(Logical Unit Number，逻辑单元号)，可以映射到RAID上的物理空间，该映射操作由SAN管理程序来完成，上述映射关系的改变对于外部I/O(Input/Output，输入/输出)来说是透明的。
RAID中的一个(如RAID5)或多个(如RAID6)数据盘失效后，仍然可以向外界提供正常的读写服务，此时RAID处于降级或临界状态，如果再有一个数据盘失效，则整个阵列将处于不可用的状态。为避免不可用状态的出现，RAID一般会添加一块或多块额外的磁盘作为备用盘，当某个数据盘失效后，可以启动数据重建过程，根据正常数据盘中的数据计算失效数据盘中的数据并存储到备用盘中，在数据重建之后，热备盘会自动顶替失效数据盘的工作，达到与原阵列一样的状态。
如图2和图3为现有技术中的RAID数据重建示意图，RAID包括3块数据盘和1块热备盘，其中，3块数据盘分别为Disk1、Disk2和Disk3。当RAID正常时，热备盘上没有数据，处于空闲状态；当RAID中的一块数据盘发生损坏后，例如，Disk3失效后，热备盘才会顶替Disk3工作，并重建阵列，即重新计算Disk3中的数据并校验正确后，将数据重新写入热备盘中。
发明人在实现本发明的过程中，发现现有技术至少存在以下缺陷：
现有技术中，当RAID正常工作时，热备盘处于空闲状态，且存储的数据为空，当RAID中的某块数据盘故障后，热备盘才开始工作，并且需要经过很长的重建过程，才能根据RAID中的正常数据盘中的数据重新计算故障数据盘中原有的数据，并将计算得到的数据写入到热备盘中。由于在数据的重建过程中，RAID阵列不能再经受任意一块数据盘的损坏，且数据重建时间越长，数据损坏的风险就越大，因此，现有的RAID数据重建方法存在很大的数据损坏风险。
发明内容
本发明提供了一种RAID数据重建方法和装置，用于降低RAID数据重建过程中的数据损坏风险。
本发明提供了一种独立磁盘冗余阵列RAID数据重建方法，应用于RAID中，用来对所述RAID进行数据重建，所述RAID包括多个数据盘和至少一个热备盘，所述热备盘的数量小于所述数据盘的数量，所述方法包括以下步骤：
在所述RAID正常工作时，将每个数据盘中的一部分数据复制到所述热备盘中；
在某个数据盘发生故障时，根据所述热备盘中保存的所述故障数据盘的部分数据以及其他数据盘的数据对所述RAID进行数据重建。
优选地，所述将每个数据盘中的一部分数据复制到热备盘中之前，还包括：
建立复制内容表项，所述复制内容表项包括需要复制到所述热备盘的数据在数据盘中的地址和数据复制成功标志位，所述数据复制成功标志位用于标识所述地址对应的数据是否成功复制到所述热备盘中。
优选地，所述根据热备盘中保存的故障数据盘的部分数据以及其他数据盘的数据对RAID进行数据重建，具体为：
查询所述复制内容表项，确定已经复制到所述热备盘的所述故障数据盘的数据和需要进行重建的所述故障数据盘的数据；
根据所述已经复制到热备盘的故障数据盘的数据和其他数据盘的数据，获取所述需要进行重建的故障数据盘的数据；
对所述获取的数据进行校验，并在校验正确后将所述数据复制到所述热备盘中。
优选地，所述将每个数据盘中的一部分数据复制到热备盘中之前，还包括：
创建包含多个数据盘的阵列，为所述阵列分配热备盘，并对所述热备盘和所述数据盘划分条带。
优选地，所述将每个数据盘中的一部分数据复制到热备盘中，具体为：
从所述数据盘中选择需要复制的数据，所述选择原则为每个条带中只选择一个分块，所述选择的分块均匀分布在不同的数据盘中；
将所述选择的分块复制到所述热备盘中的相应位置，使复制后所述热备盘和数据盘中内容相同的分块位于同一条带中。
优选地，所述复制过程与所述RAID的初始化同步过程异步执行。
优选地，所述将数据盘中的数据复制到热备盘中之后，还包括：
在所述数据盘中的数据被修改后，对所述热备盘中对应的数据进行异步修改。
优选地，所述RAID处于空闲状态的时候，异步执行复制过程或者进行异步修改，其中所述空闲状态是指RAID负载低于一个预设的阈值。
本发明还提供了一种独立磁盘冗余阵列RAID数据重建装置，具有对自身进行数据重建的功能，包括多个数据盘和至少一个热备盘，所述热备盘的数量小于所述数据盘的数量，还包括：
复制模块，用于在正常工作时，将每个数据盘中的一部分数据复制到所述热备盘中；
重建模块，与所述复制模块连接，用于在某个数据盘发生故障时，根据所述复制模块复制到所述热备盘中的所述故障数据盘的部分数据以及其他数据盘的数据进行数据重建。
优选地，所述的RAID数据重建装置，还包括：
设置模块，与所述复制模块连接，用于建立复制内容表项，所述复制内容表项包括需要复制到所述热备盘的数据在数据盘中的地址和数据复制成功标志位，在所述复制模块将数据盘中的数据复制到热备盘中之后，对所述复制到热备盘中的数据对应的数据复制成功标志位进行置位。
优选地，所述重建模块，包括：
查询子模块，用于查询所述复制内容表项，确定已经复制到所述热备盘的所述故障数据盘的数据和需要进行重建的所述故障数据盘的数据；
获取子模块，与所述查询子模块连接，用于根据所述查询子模块查询到的所述已经复制到热备盘的故障数据盘的数据和其他数据盘的数据，获取所述需要进行重建的故障数据盘的数据；
复制子模块，与所述获取子模块连接，用于对所述获取子模块获取的数据进行校验，并在校验正确后将所述数据复制到所述热备盘中。
优选地，所述的RAID数据重建装置，还包括：
创建模块，用于创建包含多个数据盘的阵列，为所述阵列分配热备盘，并对所述热备盘和所述数据盘划分条带。
优选地，所述复制模块，具体用于按照所述创建模块划分的条带从所述数据盘中选择需要复制的数据，并将所述选择的数据复制到所述热备盘中的相应位置，所述选择原则为每个条带中只选择一个分块，所述选择的分块均匀分布在不同的数据盘中，且复制后所述热备盘和数据盘中内容相同的分块位于同一条带中。
优选地，所述复制模块，还用于在所述数据盘中的数据被修改后，对所述热备盘中对应的数据进行异步修改。
与现有技术相比，本发明具有以下优点：通过在RAID正常时将数据盘中的数据复制到热备盘中，减少了RAID重建的数据量，缩短了RAID重建的时间。
附图说明
图1为存储系统的分层架构的结构示意图；
图2为现有技术中的RAID数据重建示意图；
图3为现有技术中的RAID数据重建示意图；
图4为本发明中的一种RAID数据重建方法流程图；
图5为本发明中的一种RAID数据重建的应用场景流程图；
图6为本发明中的向热备盘复制数据的过程示意图；
图7为本发明中的使用热备盘顶替数据盘的过程示意图；
图8为本发明中的一种RAID数据重建装置结构示意图。
具体实施方式
本发明在RAID正常时将数据盘中的数据均匀地复制到热备盘中，当RAID中的某块数据盘发生故障后，可以根据已经复制到热备盘中的数据对RAID进行数据重建，减少了RAID重建的数据量，缩短了RAID重建的时间。
下面将结合本发明中的附图，对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
如图4所示，为本发明中的一种RAID数据重建方法流程图，应用于RAID中，用来对RAID进行数据重建，该RAID包括多个数据盘和至少一个热备盘，该热备盘的数量小于数据盘的数量，该方法包括以下步骤：
步骤101，在RAID正常时，将每个数据盘中的一部分数据复制到热备盘中。
具体地，在RAID正常时，可以对热备盘进行存储数据的操作，将RAID中的每块数据盘中的数据分别复制一部分到热备盘中，由于热备盘的数量是有限的，因此，热备盘可以拥有每个数据盘上的一部分数据。
在RAID正常的情况下，对RAID的写入操作和对热备盘的写入操作可以采取异步的方式，即当有数据写入阵列中时，不需要对热备盘进行同步写入，而是在数据写入完成之后的某个时刻再将该数据写入到热备盘中；此外，热备盘平时根本不工作，只有当阵列业务压力较小时，才根据数据盘中的数据进行写入操作，以规避潜在的性能问题。
步骤102，在某个数据盘发生故障时，根据热备盘中保存的该故障数据盘的部分数据以及其他数据盘的数据对RAID进行数据重建。
具体地，以3+1(3块数据盘和1块热备盘)的RAID为例，阵列正常时，3块数据盘各复制1/3的数据到热备盘上，热备盘就拥有了3块数据盘各1/3的数据，一旦数据盘发生故障需要由热备盘顶替时，只需要重建该故障数据盘的2/3的数据，节省了1/3的重建时间。
本发明具有以下优点，通过在RAID正常时将数据盘中的数据复制到热备盘中，减少了RAID重建的数据量，缩短了RAID重建的时间，且热备盘越多，节省的重建数据和重建时间就越多。
本发明通过以上实施方式提供了一种RAID数据重建方法，以下以RAID5为例，结合具体的应用场景，对该方法进行详细、具体的描述。需要说明的是，本发明提供的技术方案的应用场景并不仅限于RAID5。
如图5所示，为本发明中的一种RAID数据重建的应用场景流程图，包括以下步骤：
步骤201，创建包含多个数据盘的阵列，为该阵列分配热备盘，并对热备盘和数据盘划分条带。
具体地，在RAID的使用过程中，可以将所有热备盘和数据盘分成多个大小相等、地址相邻的分块，并将不同物理磁盘上的分块组织成条带，其中，分块为地址分配的最小粒度，也称为条带深度；条带为RAID中的不同物理磁盘上的位置相关的分块的集合，均匀地分布在各个物理磁盘上。
步骤202，对RAID进行初始化同步过程。
其中，RAID的初始化同步过程即为对每个条带进行校验计算，并把校验值写入校验位的过程。在阵列创建完成之后，可以对阵列包含的全部物理磁盘进行重新编址，可以认为每个分块拥有一个阵列中唯一的地址。
步骤203，在初始化同步之后或者初始化同步的过程中，将每个数据盘中的一部分数据复制到热备盘中。
如图6所示，为本发明中的向热备盘复制数据的过程示意图，RAID可以划分为N个条带，每个条带大小相等，stripe1-6都是划分出来的条带。
具体地，首先按照数据均匀复制的原则从数据盘中选择需要复制的数据，该选择原则为每个条带只选择一个分块，且选择的分块均匀分布在不同的数据盘中；然后将选择的分块复制到热备盘中的相应位置，使复制后热备盘和数据盘中内容相同的分块位于同一条带中。
另外，在将数据盘中的数据复制到热备盘中之前，可以建立复制内容表项，该复制内容表项包括需要复制到热备盘的数据在数据盘中的地址和数据复制成功标志位，该数据复制成功标志位用于标识该地址对应的数据是否成功复制到热备盘中。如表1所示，为复制内容表项。
表1复制内容表项
  地址1   1
  地址2   1
  地址3   0
其中，复制内容表项的第一列为需要复制到热备盘的数据在数据盘中的地址，即该数据的阵列内地址，在创建阵列时进行设置，将需要复制的阵列内地址放入第一列中；复制内容表项的第二列为数据复制成功标志位，该数据复制成功标志位用于标识数据复制是否成功，其中，1表示复制成功，0表示复制失败。如果在将数据复制到热备盘时，阵列发生故障，热备盘需要顶替数据盘，可以根据复制内容表项判断出已备份的数据和未备份的数据，并在对未备份的数据进行重建，以免引起数据混乱。
如图6所示，可以将校验位数据P1-P6复制到热备盘上，该复制过程可以与初始化同步过程分开进行的(即异步执行)，即当校验位数据写入阵列后的某个时刻再将该校验位数据复制到热备盘中，比如在RAID处于空闲状态的时候，异步执行复制过程，以减少对阵列同步的影响，其中空闲状态是指RAID负载低于一个预设的阈值的时候。
步骤204，更新复制内容表项。
具体地，在将数据盘中的数据复制到热备盘后，可以对复制到热备盘中的数据对应的数据复制成功标志位进行置位，例如，将数据复制完成的地址对应的数据复制成功标志位置1。
需要说明的是，本发明还可以使用其他的置位方式实现对数据复制成功标志位的置位，置位方式的不同并不影响本发明的保护范围。
在将数据盘中的数据复制到热备盘后，如果有新的数据写入阵列或者数据盘中的数据被修改，需要对热备盘中对应的数据进行修改，对热备盘的修改过程与对数据盘中的数据的修改过程可以是异步的。对热备盘的数据进行修改时，RAID处于空闲状态。
步骤205，当Disk3损坏时，使用热备盘接管Disk3的工作，并根据热备盘中的数据进行数据重建。
具体地，可以查询复制内容表项，确定已经复制到热备盘的故障数据盘的数据和需要进行重建的故障数据盘的数据，并根据已经复制到热备盘的故障数据的数据和其他数据盘的数据，获取需要进行重建的故障数据盘的数据，对获取的数据进行校验，并在校验正确后将该数据复制到热备盘中。
如图7所示，为本发明中的使用热备盘顶替数据盘的过程示意图，由于热备盘中的P1和P4位置已经是完整的数据，所以，只需要获取D4、D6、D10、D12的数据并校验正确即可，在RAID5中，获取D4位置的数据的方法可以为： D 4 = D 3 ⊕ P 2 .
上述获取D4位置的数据的过程中，由于热备盘在stripe2位置的原数据为P2，因此，可直接从该位置读取P2，而无需从Disk2中读取P2。
需要说明的是，本发明方法可以根据实际需要对各个步骤顺序进行调整。
本发明具有以下优点，通过在RAID正常时将数据盘中的数据复制到热备盘中，减少了RAID重建的数据量，缩短了RAID重建的时间，降低了数据损坏的风险；另外，通过建立复制内容表项可以避免数据重建中的数据混乱。
如图8所示为本发明中的一种RAID数据重建装置结构示意图，具有对自身进行数据重建的功能，包括多个数据盘310和至少一个热备盘320，热备盘320的数量小于数据盘310的数量，还包括：
创建模块330，用于创建包含多个数据盘310的阵列，为该阵列分配热备盘320，并对热备盘320和数据盘310划分条带。
复制模块340，用于在正常工作时，将每个数据盘310中的一部分数据复制到热备盘320中。
具体地，复制模块340可以对热备盘320进行存储数据的操作，将RAID中的每块数据盘310上的数据各复制一部分到热备盘320中，由于热备盘320数量是有限的，热备盘320可以拥有每个数据盘310上的一部分数据。
在正常工作的情况下，对RAID的写入操作和对热备盘320的写入操作可以采取异步的方式，即当有数据写入阵列中时，不需要对热备盘320进行同步写入，而是在数据写入完成之后的某个时刻再将该数据写入到热备盘320中；此外，热备盘320平时根本不工作，只有在阵列业务压力较小时，才根据数据盘310中的数据进行写入操作，以规避潜在的性能问题。
上述复制模块340，具体用于按照创建模块330划分的条带从数据盘310中选择需要复制的数据，并将该选择的数据复制到热备盘320中的相应位置，该选择原则为每个条带中只选择一个分块，选择的分块均匀分布在不同的数据盘中，且复制后热备盘320和数据盘310中内容相同的分块位于同一条带中。
上述复制模块340，还用于在数据盘310中的数据被修改后，对热备盘320中对应的数据进行异步修改。
如图6所示，复制模块340可以将校验位数据P1-P6复制到热备盘320上，该复制过程可以与初始化同步过程分开进行的(即异步执行)，当校验位数据写入阵列后的某个时刻再将该校验位数据复制到热备盘320中，以减少对阵列同步的影响。
重建模块350，与复制模块340连接，用于在某个数据盘310发生故障时，根据复制模块340复制到热备盘320中的故障数据盘的部分数据以及其他数据盘的数据进行数据重建。
具体地，以3+1(3块数据盘310和1块热备盘320)的RAID为例，阵列正常时，3块数据盘310各复制1/3的数据到热备盘320上，热备盘320就拥有了3块数据盘310各1/3的数据，一旦数据盘310发生故障需要由热备盘320顶替时，只需要重建该数据盘310的2/3的数据，节省了1/3的重建时间。
上述重建模块350，包括：
查询子模块351，用于查询复制内容表项，确定已经复制到热备盘320的故障数据盘的数据和需要进行重建的故障数据盘的数据。
获取子模块352，与查询子模块351连接，用于根据查询子模块351查询到的已经复制到热备盘的故障数据盘的数据和其他数据盘的数据，获取需要进行重建的故障数据盘的数据。
复制子模块353，与获取子模块352连接，用于对获取子模块352获取的数据进行校验，并在校验正确后将该数据复制到热备盘320中。
设置模块360，用于建立复制内容表项，该复制内容表项包括需要复制到热备盘320的数据在数据盘310中的地址和数据复制成功标志位。
复制内容表项如表1所示，其中，第一列为需要复制到热备盘320的数据的地址，即该数据的阵列内地址，在创建阵列时进行设置；第二列为数据复制成功标志位，1表示复制成功，0表示复制失败。
上述设置模块360，与复制模块340连接，还用于在复制模块340将数据盘310中的数据复制到热备盘320中之后，对复制到热备盘320中的数据对应的数据复制成功标志位进行置位。
如果在将数据复制到热备盘320时，阵列发生故障，热备盘320需要顶替数据盘310，可以根据复制内容表项判断出已备份的数据和未备份的数据，并对未备份数据进行重建，以免引起数据混乱。
本发明具有以下优点，通过在RAID正常时将数据盘310中的数据复制到热备盘320中，减少了RAID重建的数据量，缩短了RAID重建的时间，降低了数据损坏的风险。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台终端设备(可以是手机，个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视本发明的保护范围。

Claims (14)

1、一种独立磁盘冗余阵列RAID数据重建方法，应用于RAID中，用来对所述RAID进行数据重建，所述RAID包括多个数据盘和至少一个热备盘，所述热备盘的数量小于所述数据盘的数量，其特征在于，所述方法包括以下步骤：
在所述RAID正常工作时，将每个数据盘中的一部分数据复制到所述热备盘中；
在某个数据盘发生故障时，根据所述热备盘中保存的所述故障数据盘的部分数据以及其他数据盘的数据对所述RAID进行数据重建。
2、如权利要求1所述的方法，其特征在于，所述将每个数据盘中的一部分数据复制到热备盘中之前，还包括：
建立复制内容表项，所述复制内容表项包括需要复制到所述热备盘的数据在数据盘中的地址和数据复制成功标志位，所述数据复制成功标志位用于标识所述地址对应的数据是否成功复制到所述热备盘中。
3、如权利要求2所述的方法，其特征在于，所述根据热备盘中保存的故障数据盘的部分数据以及其他数据盘的数据对RAID进行数据重建，具体为：
查询所述复制内容表项，确定已经复制到所述热备盘的所述故障数据盘的数据和需要进行重建的所述故障数据盘的数据；
根据所述已经复制到热备盘的故障数据盘的数据和其他数据盘的数据，获取所述需要进行重建的故障数据盘的数据；
对所述获取的数据进行校验，并在校验正确后将所述数据复制到所述热备盘中。
4、如权利要求1所述的方法，其特征在于，所述将每个数据盘中的一部分数据复制到热备盘中之前，还包括：
创建包含多个数据盘的阵列，为所述阵列分配热备盘，并对所述热备盘和所述数据盘划分条带。
5、如权利要求4所述的方法，其特征在于，所述将每个数据盘中的一部分数据复制到热备盘中，具体为：
从所述数据盘中选择需要复制的数据，所述选择原则为每个条带中只选择一个分块，所述选择的分块均匀分布在不同的数据盘中；
将所述选择的分块复制到所述热备盘中的相应位置，使复制后所述热备盘和数据盘中内容相同的分块位于同一条带中。
6、如权利要求1所述的方法，其特征在于，所述复制过程与所述RAID的初始化同步过程异步执行。
7、如权利要求1所述的方法，其特征在于，所述将数据盘中的数据复制到热备盘中之后，还包括：
在所述数据盘中的数据被修改后，对所述热备盘中对应的数据进行异步修改。
8、如权利要求6或7所述的方法，其特征在于，所述RAID处于空闲状态的时候，异步执行复制过程或者进行异步修改，其中所述空闲状态是指RAID负载低于一个预设的阈值。
9、一种独立磁盘冗余阵列RAID数据重建装置，具有对自身进行数据重建的功能，包括多个数据盘和至少一个热备盘，所述热备盘的数量小于所述数据盘的数量，其特征在于，还包括：
复制模块，用于在正常工作时，将每个数据盘中的一部分数据复制到所述热备盘中；
重建模块，与所述复制模块连接，用于在某个数据盘发生故障时，根据所述复制模块复制到所述热备盘中的所述故障数据盘的部分数据以及其他数据盘的数据进行数据重建。
10、如权利要求9所述的RAID数据重建装置，其特征在于，还包括：
设置模块，与所述复制模块连接，用于建立复制内容表项，所述复制内容表项包括需要复制到所述热备盘的数据在数据盘中的地址和数据复制成功标志位，在所述复制模块将数据盘中的数据复制到热备盘中之后，对所述复制到热备盘中的数据对应的数据复制成功标志位进行置位。
11、如权利要求10所述的RAID数据重建装置，其特征在于，所述重建模块，包括：
查询子模块，用于查询所述复制内容表项，确定已经复制到所述热备盘的所述故障数据盘的数据和需要进行重建的所述故障数据盘的数据；
获取子模块，与所述查询子模块连接，用于根据所述查询子模块查询到的所述已经复制到热备盘的故障数据盘的数据和其他数据盘的数据，获取所述需要进行重建的故障数据盘的数据；
复制子模块，与所述获取子模块连接，用于对所述获取子模块获取的数据进行校验，并在校验正确后将所述数据复制到所述热备盘中。
12、如权利要求9所述的RAID数据重建装置，其特征在于，还包括：
创建模块，用于创建包含多个数据盘的阵列，为所述阵列分配热备盘，并对所述热备盘和所述数据盘划分条带。
13、如权利要求12所述的RAID数据重建装置，其特征在于，
所述复制模块，具体用于按照所述创建模块划分的条带从所述数据盘中选择需要复制的数据，并将所述选择的数据复制到所述热备盘中的相应位置，所述选择原则为每个条带中只选择一个分块，所述选择的分块均匀分布在不同的数据盘中，且复制后所述热备盘和数据盘中内容相同的分块位于同一条带中。
14、如权利要求9所述的RAID数据重建装置，其特征在于，
所述复制模块，还用于在所述数据盘中的数据被修改后，对所述热备盘中对应的数据进行异步修改。
CN200910148523XA 2009-06-26 2009-06-26 一种独立磁盘冗余阵列raid数据重建方法和装置 Expired - Fee Related CN101576833B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN200910148523XA CN101576833B (zh) 2009-06-26 2009-06-26 一种独立磁盘冗余阵列raid数据重建方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN200910148523XA CN101576833B (zh) 2009-06-26 2009-06-26 一种独立磁盘冗余阵列raid数据重建方法和装置

Publications (2)

Publication Number Publication Date
CN101576833A true CN101576833A (zh) 2009-11-11
CN101576833B CN101576833B (zh) 2012-05-23

Family

ID=41271770

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200910148523XA Expired - Fee Related CN101576833B (zh) 2009-06-26 2009-06-26 一种独立磁盘冗余阵列raid数据重建方法和装置

Country Status (1)

Country Link
CN (1) CN101576833B (zh)

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101833422A (zh) * 2010-03-08 2010-09-15 成都市华为赛门铁克科技有限公司 磁盘阵列的数据处理方法及设备
CN102081559A (zh) * 2011-01-11 2011-06-01 成都市华为赛门铁克科技有限公司 一种独立磁盘冗余阵列的数据恢复方法和装置
CN102364940A (zh) * 2011-09-13 2012-02-29 杭州华三通信技术有限公司 一种基于raid阵列的信息处理方法和设备
CN102508747A (zh) * 2011-12-01 2012-06-20 浪潮电子信息产业股份有限公司 一种加快失效盘恢复的方法
CN102508620A (zh) * 2011-12-01 2012-06-20 浪潮电子信息产业股份有限公司 一种处理raid5坏扇区的方法
CN102789370A (zh) * 2012-06-29 2012-11-21 浙江宇视科技有限公司 一种raid阵列同步方法及装置
CN102902602A (zh) * 2012-09-19 2013-01-30 华为技术有限公司 数据热备份的方法、装置及存储系统
CN102945191A (zh) * 2012-11-15 2013-02-27 浪潮电子信息产业股份有限公司 一种raid5数据转移的方法
CN102981930A (zh) * 2012-11-15 2013-03-20 浪潮电子信息产业股份有限公司 一种磁盘阵列多级数据自动修复的方法
CN103207761A (zh) * 2013-04-17 2013-07-17 浪潮(北京)电子信息产业有限公司 一种raid5系统热备盘的数据备份方法和重构方法
CN103246480A (zh) * 2012-02-08 2013-08-14 Lsi公司 用于raid中改善重建的系统和方法
CN103348326A (zh) * 2010-09-28 2013-10-09 净睿存储股份有限公司 Ssd环境中的适配raid
CN103365742A (zh) * 2012-03-30 2013-10-23 伊姆西公司 加快快照服务重新上线速度的方法、设备和计算机程序
CN103389918A (zh) * 2013-07-24 2013-11-13 北京鲸鲨软件科技有限公司 一种适用于raid系统中假性故障的修复方法
CN104035886A (zh) * 2014-06-23 2014-09-10 华为技术有限公司 磁盘重映射方法、装置及电子设备
CN104461781A (zh) * 2014-12-01 2015-03-25 华中科技大学 一种基于纠删码的数据块重建方法
CN107870730A (zh) * 2016-09-23 2018-04-03 伊姆西Ip控股有限责任公司 用于管理存储系统的方法和系统
CN108334280A (zh) * 2017-12-28 2018-07-27 创新科存储技术（深圳）有限公司 一种raid5磁盘组快速重建方法和装置
CN108491162A (zh) * 2018-03-13 2018-09-04 山东超越数控电子股份有限公司 一种提高存储系统性能的方法及装置
CN108733314A (zh) * 2017-04-17 2018-11-02 伊姆西Ip控股有限责任公司 用于独立冗余阵列（raid）重建的方法、设备和计算机可读存储介质
CN109799953A (zh) * 2018-12-14 2019-05-24 创新科存储技术（深圳）有限公司 一种快速重建raid的方法和装置
CN110058965A (zh) * 2018-01-18 2019-07-26 伊姆西Ip控股有限责任公司 存储系统中的数据重建方法及设备
CN112558882A (zh) * 2020-12-23 2021-03-26 联想(北京)有限公司 确定磁盘重构信息的方法和装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2513377A (en) 2013-04-25 2014-10-29 Ibm Controlling data storage in an array of storage devices

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101833422A (zh) * 2010-03-08 2010-09-15 成都市华为赛门铁克科技有限公司 磁盘阵列的数据处理方法及设备
CN103348326A (zh) * 2010-09-28 2013-10-09 净睿存储股份有限公司 Ssd环境中的适配raid
CN103348326B (zh) * 2010-09-28 2016-03-30 净睿存储股份有限公司 Ssd环境中的适配raid
CN102081559A (zh) * 2011-01-11 2011-06-01 成都市华为赛门铁克科技有限公司 一种独立磁盘冗余阵列的数据恢复方法和装置
CN102081559B (zh) * 2011-01-11 2013-06-05 华为数字技术（成都）有限公司 一种独立磁盘冗余阵列的数据恢复方法和装置
CN102364940B (zh) * 2011-09-13 2016-05-04 杭州华三通信技术有限公司 一种基于raid阵列的信息处理方法和设备
CN102364940A (zh) * 2011-09-13 2012-02-29 杭州华三通信技术有限公司 一种基于raid阵列的信息处理方法和设备
CN102508620A (zh) * 2011-12-01 2012-06-20 浪潮电子信息产业股份有限公司 一种处理raid5坏扇区的方法
CN102508747A (zh) * 2011-12-01 2012-06-20 浪潮电子信息产业股份有限公司 一种加快失效盘恢复的方法
CN102508620B (zh) * 2011-12-01 2014-08-13 浪潮电子信息产业股份有限公司 一种处理raid5坏扇区的方法
CN103246480B (zh) * 2012-02-08 2017-06-09 安华高科技通用Ip(新加坡)公司 用于raid中改善重建的系统和方法
CN103246480A (zh) * 2012-02-08 2013-08-14 Lsi公司 用于raid中改善重建的系统和方法
CN103365742B (zh) * 2012-03-30 2017-06-23 伊姆西公司 加快快照服务重新上线速度的方法、设备和计算机程序
CN103365742A (zh) * 2012-03-30 2013-10-23 伊姆西公司 加快快照服务重新上线速度的方法、设备和计算机程序
CN102789370A (zh) * 2012-06-29 2012-11-21 浙江宇视科技有限公司 一种raid阵列同步方法及装置
CN102789370B (zh) * 2012-06-29 2015-11-25 浙江宇视科技有限公司 一种raid阵列同步方法及装置
CN102902602B (zh) * 2012-09-19 2015-08-19 华为技术有限公司 数据热备份的方法、装置及存储系统
CN102902602A (zh) * 2012-09-19 2013-01-30 华为技术有限公司 数据热备份的方法、装置及存储系统
CN102945191B (zh) * 2012-11-15 2016-02-24 浪潮电子信息产业股份有限公司 一种raid5数据转移的方法
CN102981930A (zh) * 2012-11-15 2013-03-20 浪潮电子信息产业股份有限公司 一种磁盘阵列多级数据自动修复的方法
CN102945191A (zh) * 2012-11-15 2013-02-27 浪潮电子信息产业股份有限公司 一种raid5数据转移的方法
CN103207761A (zh) * 2013-04-17 2013-07-17 浪潮(北京)电子信息产业有限公司 一种raid5系统热备盘的数据备份方法和重构方法
CN103389918A (zh) * 2013-07-24 2013-11-13 北京鲸鲨软件科技有限公司 一种适用于raid系统中假性故障的修复方法
CN104035886A (zh) * 2014-06-23 2014-09-10 华为技术有限公司 磁盘重映射方法、装置及电子设备
CN104461781A (zh) * 2014-12-01 2015-03-25 华中科技大学 一种基于纠删码的数据块重建方法
CN104461781B (zh) * 2014-12-01 2017-10-31 华中科技大学 一种基于纠删码的数据块重建方法
CN107870730B (zh) * 2016-09-23 2020-11-20 伊姆西Ip控股有限责任公司 用于管理存储系统的方法和系统
CN107870730A (zh) * 2016-09-23 2018-04-03 伊姆西Ip控股有限责任公司 用于管理存储系统的方法和系统
US11163472B2 (en) 2016-09-23 2021-11-02 EMC IP Holding Company LLC Method and system for managing storage system
CN108733314A (zh) * 2017-04-17 2018-11-02 伊姆西Ip控股有限责任公司 用于独立冗余阵列（raid）重建的方法、设备和计算机可读存储介质
US10922177B2 (en) 2017-04-17 2021-02-16 EMC IP Holding Company LLC Method, device and computer readable storage media for rebuilding redundant array of independent disks
CN108733314B (zh) * 2017-04-17 2021-06-29 伊姆西Ip控股有限责任公司 用于独立冗余阵列(raid)重建的方法、设备和计算机可读存储介质
CN108334280A (zh) * 2017-12-28 2018-07-27 创新科存储技术（深圳）有限公司 一种raid5磁盘组快速重建方法和装置
CN108334280B (zh) * 2017-12-28 2021-01-08 深圳创新科技术有限公司 一种raid5磁盘组快速重建方法和装置
CN110058965A (zh) * 2018-01-18 2019-07-26 伊姆西Ip控股有限责任公司 存储系统中的数据重建方法及设备
CN108491162A (zh) * 2018-03-13 2018-09-04 山东超越数控电子股份有限公司 一种提高存储系统性能的方法及装置
CN109799953A (zh) * 2018-12-14 2019-05-24 创新科存储技术（深圳）有限公司 一种快速重建raid的方法和装置
CN112558882A (zh) * 2020-12-23 2021-03-26 联想(北京)有限公司 确定磁盘重构信息的方法和装置

Also Published As

Publication number Publication date
CN101576833B (zh) 2012-05-23

Similar Documents

Publication Publication Date Title
CN101576833B (zh) 一种独立磁盘冗余阵列raid数据重建方法和装置
US7000069B2 (en) Apparatus and method for providing very large virtual storage volumes using redundant arrays of disks
CN111158587B (zh) 基于存储池虚拟化管理的分布式存储系统及数据读写方法
KR100392382B1 (ko) 동적 크기 변경 및 메타 데이터 양의 최소화를 위한 논리볼륨 관리 방법
US8839028B1 (en) Managing data availability in storage systems
US6647460B2 (en) Storage device with I/O counter for partial data reallocation
US8543761B2 (en) Zero rebuild extensions for raid
CN102207895B (zh) 一种独立磁盘冗余阵列数据重建方法和装置
US11144396B1 (en) Raid reliability with a provisional spare disk
CN108733326B (zh) 一种磁盘处理方法及装置
CN101984400B (zh) 一种raid控制方法、装置及系统
US20100037023A1 (en) System and method for transferring data between different raid data storage types for current data and replay data
CN106227731A (zh) 一种数据处理方法、装置及分布式文件系统
CN103699457A (zh) 基于条带化的磁盘阵列修复方法及装置
US10678641B2 (en) Techniques for optimizing metadata resiliency and performance
US10409682B1 (en) Distributed RAID system
CN111090394A (zh) 一种基于卷级别raid的磁阵管理方法及装置
US7716519B2 (en) Method and system for repairing partially damaged blocks
CN104461373B (zh) 一种raid数据处理方法及装置
WO2016112824A1 (zh) 存储的处理方法、装置和存储设备
US7024585B2 (en) Method, apparatus, and program for data mirroring with striped hotspare
CN116204137B (zh) 基于dpu的分布式存储系统、控制方法、装置及设备
CN114415968B (zh) 存储系统及其数据写入方法
CN111897676A (zh) 一种基于数据库索引的文件备份方法及装置
CN111427516A (zh) Raid重建方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: 310052 Binjiang District Changhe Road, Zhejiang, China, No. 466, No.

Patentee after: Xinhua three Technology Co., Ltd.

Address before: 310053 Hangzhou hi tech Industrial Development Zone, Zhejiang province science and Technology Industrial Park, No. 310 and No. six road, HUAWEI, Hangzhou production base

Patentee before: Huasan Communication Technology Co., Ltd.

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20120523

Termination date: 20200626