CN104881242A - 数据写入方法及装置 - Google Patents
数据写入方法及装置 Download PDFInfo
- Publication number
- CN104881242A CN104881242A CN201410074021.8A CN201410074021A CN104881242A CN 104881242 A CN104881242 A CN 104881242A CN 201410074021 A CN201410074021 A CN 201410074021A CN 104881242 A CN104881242 A CN 104881242A
- Authority
- CN
- China
- Prior art keywords
- write
- writing
- data
- stripe information
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
本发明公开了一种数据写入方法及装置,在上述方法中,在执行写I/O操作将数据写入磁盘之前,对写条带信息进行存储,其中,写条带信息包括:条带的位置信息、RAID写模式、数据的地址信息以及数据;在将数据写入磁盘的过程中发生异常时,采用写条带信息对条带的校验一致性进行恢复。根据本发明提供的技术方案,提高了在执行写I/O操作过程中写入磁盘数据的准确性。
Description
技术领域
本发明涉及计算机领域,具体而言,涉及一种数据写入方法及装置。
背景技术
目前,在相关技术中,RAID5或RAID6采用异或校验值来确保条带的数据冗余性。在一个冗余条带中既可以包含用户的有效数据又可以包含上述有效数据的校验值,每次写操作都需要同时更新条带的数据和校验值。如果在执行写操作时突然发生掉电情况导致写操作失败,那么会破坏该条带的校验一致性。而如果不对这种错误采取任何补救措施,仍然假设条带是一致的,那么后面陆续写入的数据将会使得条带的数据越写越坏。当一块磁盘失效导致RAID5降级后,若希望读取该失效磁盘上的数据,则必须利用RAID5的条带校验规则计算出上述数据。RAID5的条带校验通常建立在条带一致的基础上,而如果该条带缺乏一致性,将会导致计算出的数据与期望不符,这就是所谓的RAID5、RAID6的write-hole问题。
图1是根据相关技术的RAID5发生write-hole问题的示意图。如图1所示,初始时条带具有冗余性,即P1=D1⊕D2⊕D3⊕D4,然而在写入A1和P2的过程中,系统发生掉电,从而导致仅写入了部分数据,此时,Y!=X⊕D2⊕D3⊕D4,条带就此失去了校验一致性。
在当前情况下,如果其中一块磁盘发生故障,例如:D2盘发生故障,那么在对D2盘访问时,需要通过D2=X⊕D3⊕D4⊕Y的计算得出结果。而由于之前发生的异常导致X⊕D2⊕D3⊕D4⊕Y!=0,因而,计算出的D2与期望不符,即读取的数据是错误的。
对于上述问题,相关技术中提供了如下解决方案:
Linux内核可以通过位图记录正在访问的条带信息,采用先写入位图再写入数据的方式。在掉电后系统恢复上电时,读取位图信息,对可能存在不一致的条带进行恢复操作。使图1中所示的Y=X⊕D2⊕D3⊕D4。
然而,采用上述Linux内核的解决方案,仅能减少RAID5、RAID6数据发生错误的概率,但却不能完全解决因为掉电而产生的write-hole问题。
综上所述,在系统发生掉电后,在RAID条带尚未完成修复之前,如果其中一块成员磁盘发生故障或者被拔走,那么条带修复将会因为缺少一块数据磁盘而无法进行。此时,若执行重构读取操作,则读取出的数据就是错误的。另外,在其中一块磁盘发生故障后,若执行降级写入操作,而恰巧在写入的过程中发生掉电,由于对发生故障的磁盘进行了更换,因此将无法重构出正确的数据。
发明内容
本发明提供了一种数据写入方法及装置,以至少解决相关技术中因RAID5或RAID6中的write-hole问题会导致条带校验不一致,从而影响后续操作的问题。
根据本发明的一个方面,提供了一种数据写入方法。
根据本发明实施例的包括:在执行写输入/输出(I/O)操作将数据写入磁盘之前,对写条带信息进行存储,其中,写条带信息包括:条带的位置信息、RAID写模式、数据的地址信息以及数据;在将数据写入磁盘的过程中发生异常时,采用写条带信息对条带的校验一致性进行恢复。
优选地,在采用写条带信息对条带的校验一致性进行恢复之后,还包括:在执行写I/O操作成功后,对存储的写条带信息进行删除。
优选地,对写条带信息进行存储包括:将写条带信息存储在第一节点的内存中;经由在第一节点与第二节点之间的数据镜像通道将写条带信息镜像至第二节点中。
优选地,对写条带信息进行存储包括:在本地磁盘上划分存储空间;将写条带信息保存至存储空间。
优选地,采用写条带信息对条带的校验一致性进行恢复包括:确定在将数据写入磁盘的过程中发生异常;读取已经存储的写条带信息,并根据位置信息、RAID写模式、地址信息以及数据对条带的校验一致性进行恢复;继续执行写I/O操作。
优选地,对存储的写条带信息进行删除包括:向上层主机返回成功执行写I/O操作的结果;删除在第一节点上保存的写条带信息;经由数据镜像通道删除在第二节点上存储的写条带信息。
优选地,对存储的写条带信息进行删除包括:向上层主机返回成功执行写I/O操作的结果;删除在存储空间上保存的写条带信息。
根据本发明的另一方面,提供了一种数据写入装置。
根据本发明实施例的数据写入装置包括:存储模块,用于在执行写输入输出I/O操作将数据写入磁盘之前,对写条带信息进行存储,其中,写条带信息包括:条带的位置信息、RAID写模式、数据的地址信息以及数据;恢复模块,用于在将数据写入磁盘的过程中发生异常时,采用写条带信息对条带的校验一致性进行恢复。
优选地,上述装置还包括:删除模块,用于在执行写I/O操作成功后,对存储的写条带信息进行删除。
优选地,存储模块包括:第一存储单元,用于将写条带信息存储在第一节点的内存中;第二存储单元,用于经由在第一节点与第二节点之间的数据镜像通道将写条带信息镜像至第二节点中。
优选地,存储模块包括:划分单元,用于在本地磁盘上划分存储空间;第三存储单元,用于将写条带信息保存至存储空间。
优选地,恢复模块包括:确定单元,用于确定在将数据写入磁盘的过程中发生异常;读取单元,用于读取已经存储的写条带信息,并根据位置信息、RAID写模式、地址信息以及数据对条带的校验一致性进行恢复;执行单元,用于继续执行写I/O操作。
优选地,删除模块包括:第一反馈单元,用于向上层主机返回成功执行写I/O操作的结果;第一删除单元,用于删除在第一节点上保存的写条带信息;第二删除单元,用于经由数据镜像通道删除在第二节点上存储的写条带信息。
优选地,删除模块包括:第二反馈单元,用于向上层主机返回成功执行写I/O操作的结果;第三删除单元,用于删除在存储空间上保存的写条带信息。
通过本发明实施例,采用在执行写I/O操作将数据写入磁盘之前,对写条带信息(包括:数据在条带上写入的位置信息、RAID写模式、数据的地址信息以及数据)进行存储;在将数据写入磁盘的过程中发生异常时,可以采用该写条带信息对条带的校验一致性进行恢复,由此解决了相关技术中因RAID5或RAID6中的write-hole问题会导致条带校验不一致,从而影响后续操作的问题,进而提高了在执行写I/O操作过程中写入磁盘数据的准确性。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据相关技术的RAID5发生write-hole问题的示意图;
图2是根据本发明实施例的数据写入方法的流程图;
图3是根据本发明优选实施例一的RAID5的条带写入操作示意图;
图4是根据本发明优选实施例二的RAID5的条带写入操作示意图;
图5是根据本发明优选实施例三的RAID5的条带写入操作示意图;
图6是根据本发明实施例的数据写入装置的结构框图;
图7是根据本发明优选实施例的数据写入装置的结构框图;
图8是根据本发明优选实施例一的存储系统架构的示意图;
图9是根据本发明优选实施例一的write-hole恢复流程的示意图;
图10是根据本发明优选实施例二的存储系统架构的示意图;
图11是根据本发明优选实施例二的write-hole恢复流程的示意图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。
图2是根据本发明实施例的数据写入方法的流程图。如图2所示,该方法可以包括以下处理步骤:
步骤S202:在执行写I/O操作将数据写入磁盘之前,对写条带信息进行存储,其中,写条带信息包括:条带的位置信息、RAID写模式、数据的地址信息以及数据;
步骤S204:在将数据写入磁盘的过程中发生异常时,采用写条带信息对条带的校验一致性进行恢复。
相关技术中,因RAID5或RAID6中的write-hole问题会导致条带校验不一致,从而影响后续操作的问题。采用如图2所示的方法,在执行写I/O操作将数据写入磁盘之前,对写条带信息(包括:数据在条带上写入的位置信息、RAID写模式、数据的地址信息以及数据)进行存储;在将数据写入磁盘的过程中发生异常时,采用该写条带信息对条带的校验一致性进行恢复,因为在执行写I/O操作的过程中始终保持条带的校验一致性,由此解决了相关技术中因RAID5或RAID6中的write-hole问题会导致条带校验不一致,从而影响后续操作的问题,进而提高了在执行写I/O操作过程中写入磁盘数据的准确性。
需要说明的是,RAID5处理上层下发的写入数据I/O,最终都是分布到条带上完成的。条带上各子I/O在向磁盘写入数据期间,RAID5不会再处理上层下发的分配至同一条带的I/O,直到条带上的全部子I/O均处理完成,即条带的处理可以看作是在条带锁的保护情况下完成的。条带子I/O在向磁盘写入数据的过程中,与条带对应的磁盘数据不满足RAID的校验一致性,此时如果系统发生掉电,即会产生write-hole问题。而当系统再次上电后,首先需要恢复上述条带的一致性,然后才能够向上层提供服务。
在优选实施过程中,本发明实施例所提供的技术方案需要遵循以下设计原则:
(1)必须保护条带中未被修改的数据,而修改失败的数据可以不对其进行保护。
(2)在每执行一次数据写入操作后,条带均需要满足校验一致性。如果不满足校验一致性,则首先需要对条带不满足校验一致性进行修复而后再执行下一次写I/O操作。
RAID5的条带写入操作可以根据写I/O的模式不同具体分为以下三种方式:
方式一、满条带写入数据(FULL):
图3是根据本发明优选实施例一的RAID5的条带写入操作示意图。如图3所示,上层的母I/O被拆分成的子I/O,全部覆盖到条带上的各个磁盘。对于此种满条带写入数据的方式,条带中的所有磁盘都将被写入数据,从而不存在未被修改的数据,因此,只需要保护条带的一致性即可。当需要对write-hole问题进行修复时,首先读取各个磁盘(在图3中包括:1号、2号、3号以及4号磁盘)的数据,然后重新计算校验值P并将计算结果写入校验盘。存储系统只需要持久化存储该条带的信息,而不需要存储任何数据信息。
方式二、重构写入数据(RCW):
图4是根据本发明优选实施例二的RAID5的条带写入操作示意图。如图4所示,上层的母I/O被拆分成的子I/O,需要将数据写入磁盘1、2和3,此时,需要读取磁盘4的数据D4,然后与磁盘1的数据D1、磁盘2的数据D2以及磁盘3的数据D3计算得到校验值P,最后重新向磁盘1写入数据D1、向磁盘2写入数据D2、向磁盘3写入数据D3以及向存储校验值的磁盘写入校验值P。
对于RCW这种方式,需要保护未修改的D4数据,当需要对write-hole问题进行修复时,读取磁盘1的数据D1、磁盘2的数据D2以及磁盘3的数据D3,与持久化保护的D4计算出新的校验值P写入校验盘。存储系统不仅需要持久化保存该条带的信息,还需要持久化保存D4数据信息。
需要说明的是,满条带写入数据可以看做是一种特殊的RCW。
方式三、读改写(RMW):
图5是根据本发明优选实施例三的RAID5的条带写入操作示意图。如图5所示,上层的母I/O被拆分成的子I/O,需要将数据写入磁盘1,这时首先需要读取磁盘1和校验盘原先存储的数据D1和P,与当前待写入的数据D1’计算校验值P’,然后将D1’写入磁盘1以及将P’写入校验盘。
对于RMW这种方式,需要保护未修改的D2、D3、D4数据,但这种保护需要通过持久化原先存储的数据D1和校验值P来完成,当需要对write-hole问题进行修复时,将已持久化的原先存储的数据D1和校验值P写入磁盘中即可。存储系统不仅需要持久化保存该条带的信息,还需要持久化保存D1和P的数据信息。
在此种方式中需要持久化两种数据:其一是条带信息,用来记录条带在其所属RAID中的位置,写入数据的方式以及条带磁盘数据的页面地址等;其二是页面数据,这些页面数据用于在对write-hole问题进行修复时使用。
优选地,在步骤S204,采用写条带信息对条带的校验一致性进行恢复之后,还可以包括以下处理:
步骤S1:在执行写I/O操作成功后,对存储的写条带信息进行删除。即在执行写I/O操作成功后,写条带信息就将无效,因此,为了节省存储空间有必要将其删除。
优选地,在步骤S202中,对写条带信息进行存储可以包括以下操作:
步骤S2:将写条带信息存储在第一节点的内存中;
步骤S3:经由在第一节点与第二节点之间的数据镜像通道将写条带信息镜像至第二节点中。
在优选实施例中,为了解决RAID的write-hole问题,可以采用双控存储系统,在双控存储系统之间存在用于内存的镜像数据保护的数据通道,其中,在创建RAID时,第一节点为RAID处理的主节点,并在主节点上下发写入数据请求。而在执行写I/O操作将数据写入磁盘之前,可以将与写I/O对应的条带位置信息、写I/O的RAID写模式、需要保存的页面地址(即数据在内存中的地址信息)和页面数据(即内存中的数据)存储在第一节点的内存中,并通过节点间的数据镜像通道镜像至第二节点。
优选地,在步骤S202中,对写条带信息进行存储可以包括以下步骤:
步骤S4:在本地磁盘上划分存储空间;
步骤S5:将写条带信息保存至存储空间。
在优选实施例中,为了解决RAID的write-hole问题,还可以采用基于单节点存储系统或者双节点存储系统运行在单节点状态。在本存储系统管理的磁盘上专门划分出一部分空间用来保存write-hole信息。在执行写I/O操作将数据写入磁盘之前,可以先将write-hole信息保存至特意为write-hole保留的空间上。然后将写I/O操作对应的条带位置信息,写I/O操作的RAID写模式,需要保存的页面地址和页面数据存储在存储节点管理的磁盘上。
优选地,在步骤S204中,采用写条带信息对条带的校验一致性进行恢复可以包括以下操作:
步骤S6:确定在将数据写入磁盘的过程中发生异常;
步骤S7:读取已经存储的写条带信息,并根据位置信息、RAID写模式、地址信息以及数据对条带的校验一致性进行恢复;
步骤S8:继续执行写I/O操作。
优选地,在步骤S1中,对存储的写条带信息进行删除可以包括以下步骤:
步骤S11:向上层主机返回成功执行写I/O操作的结果;
步骤S12:删除在第一节点上保存的写条带信息;
步骤S13:经由数据镜像通道删除在第二节点上存储的写条带信息。
在优选实施例中,当将数据写入磁盘的写I/O操作执行完毕后,删除在第一节点上存储的write-hole信息,向主机返回写I/O操作成功,然后,异步删除镜像节点(即第二节点)上存储的write-hole信息。
优选地,在步骤S1中,对存储的写条带信息进行删除可以包括以下操作:
步骤S14:向上层主机返回成功执行写I/O操作的结果;
步骤S15:删除在存储空间上保存的写条带信息。
在优选实施例中,当将数据写入磁盘的写I/O操作执行完毕后,向主机返回写I/O操作成功。然后异步删除保留空间上存储的write-hole信息。
图6是根据本发明实施例的数据写入装置的结构框图。如图6所示,该数据写入装置可以包括:存储模块10,用于在执行写输入输出I/O操作将数据写入磁盘之前,对写条带信息进行存储,其中,写条带信息包括:条带的位置信息、RAID写模式、数据的地址信息以及数据,恢复模块20,用于在将数据写入磁盘的过程中发生异常时,采用写条带信息对条带的校验一致性进行恢复。
采用如图6所示的装置,解决了相关技术中因RAID5或RAID6中的write-hole问题会导致条带校验不一致,从而影响后续操作的问题,进而提高了在执行写I/O操作过程中写入磁盘数据的准确性。
优选地,如图7所示,上述装置还可以包括:删除模块30,用于在执行写I/O操作成功后,对存储的写条带信息进行删除。
优选地,如图7所示,存储模块10可以包括:第一存储单元100,用于将写条带信息存储在第一节点的内存中;第二存储单元102,用于经由在第一节点与第二节点之间的数据镜像通道将写条带信息镜像至第二节点中。
优选地,如图7所示,存储模块10可以包括:划分单元104,用于在本地磁盘上划分存储空间;第三存储单元106,用于将写条带信息保存至存储空间。
优选地,如图7所示,上述恢复模块20可以包括:确定单元200,用于确定在将数据写入磁盘的过程中发生异常;读取单元202,用于读取已经存储的写条带信息,并根据位置信息、RAID写模式、地址信息以及数据对条带的校验一致性进行恢复;执行单元204,用于继续执行写I/O操作。
优选地,如图7所示,删除模块30可以包括:第一反馈单元300,用于向上层主机返回成功执行写I/O操作的结果;第一删除单元302,用于删除在第一节点上保存的写条带信息;第二删除单元304,用于经由数据镜像通道删除在第二节点上存储的写条带信息。
优选地,如图7所示,删除模块30可以包括:第二反馈单元306,用于向上层主机返回成功执行写I/O操作的结果;第三删除单元308,用于删除在存储空间上保存的写条带信息。
下面将结合以下两个优选实施方式对上述优选实施过程作进一步的描述。
优选实施例一、
本发明优选实施例提供了一种针对RAID的write-hole问题的解决方案,其基于双控存储系统,在双控存储系统之间存在用于内存的镜像数据保护的数据通道,其中,在创建RAID时,第一节点为RAID处理的主节点,并在主节点上下发写入数据请求。而在执行写I/O操作将数据写入磁盘之前,可以将与写I/O对应的条带位置信息、写I/O的RAID写模式、需要保存的页面地址和页面数据存储在第一节点的内存中,并通过节点间的数据镜像通道镜像至第二节点。当将数据写入磁盘的写I/O操作执行完毕后,删除在第一节点上存储的write-hole信息,向主机返回写I/O操作成功,然后,异步删除镜像节点(即第二节点)上存储的write-hole信息。
在该优选实施例中,上述解决方案的实现依赖于图8所示的存储系统架构。图8是根据本发明优选实施例一的存储系统架构的示意图。如图8所示,互为备份的双控节点上均设置有RAID处理模块、write-hole处理模块(相当于上述存储模块和删除模块)以及磁盘管理模块,其中,RAID处理模块与write-hole处理模块可以合并为同一个模块。
下面将结合图8和图9所示的优选实施方式对上述优选实施过程做进一步的描述。
执行一次写I/O操作可以包括以下处理步骤:
(1)RAID处理模块接收到执行写I/O操作的请求。
(2)RAID处理模块确定写I/O操作的写模式(FULL、RCW或RMW),申请RAID处理需要申请的页面资源,并进行RAID的异或校验计算。在RAID处理完毕后,将写I/O操作交给Write-hole处理模块加以处理。Write-hole处理模块将写I/O操作对应的条带位置信息,写I/O操作的RAID写模式,需要保存的页面地址和页面数据存储在第一节点的内存中。
(3)Write-hole处理模块将写I/O操作的RAID写模式,需要保存的页面地址和页面数据通过节点间的镜像通道镜像至第二节点的内存中。
(4)第二节点对上述信息进行存储,然后向第一节点回复响应。
(5)Write-hole模块在接收到回复响应后,向RAID处理模块返回write-hole的处理结果。
(6)RAID处理模块调用磁盘管理模块的接口,执行I/O写盘操作。
(7)磁盘管理模块向RAID处理模块返回I/O写盘结果。
(8)RAID处理模块向上层业务模块返回I/O写盘结果。
(9)RAID处理模块通知write-hole处理模块删除其存储的write-hole信息。
(10)write-hole处理模块通过镜像通道通知第二节点删除对应的镜像write-hole信息。
图9是根据本发明优选实施例一的write-hole恢复流程的示意图。如图9所示,当控制器发生掉电后,write-hole恢复流程可以包括以下处理步骤:
(1)write-hole处理模块进行掉电后的恢复处理,将记录的write-hole对应的页面写盘。
(2)磁盘管理模块返回写盘结果。
(3)write-hole处理模块通知RAID处理模块write-hole掉电恢复处理已经完成。
(4)RAID模块开始处理主机I/O。
(5)write-hole处理模块异步通知第二节点删除已经处理的write-hole数据。
优选实施例二、
本发明优选实施例提供了一种针对RAID的write-hole问题的解决方案,其基于单节点存储系统或者双节点存储系统运行在单节点状态。在本存储系统管理的磁盘(尽量选择高性能磁盘)上专门划分出一部分空间用来保存write-hole信息。在执行写I/O操作将数据写入磁盘之前,可以先将write-hole信息保存至特意为write-hole保留的空间上。然后将写I/O操作对应的条带位置信息,写I/O操作的RAID写模式,需要保存的页面地址和页面数据存储在存储节点管理的磁盘上。当将数据写入磁盘的写I/O操作执行完毕后,向主机返回写I/O操作成功。然后异步删除保留空间上存储的write-hole信息。
下面将结合图10和图11所示的优选实施方式对上述优选实施过程做进一步的描述。
图10是根据本发明优选实施例二的存储系统架构的示意图。如图10所示,执行一次写I/O操作可以包括以下处理步骤:
(1)RAID处理模块接收到执行写I/O操作的请求。
(2)RAID处理模块确定写I/O操作的写模式(FULL、RCW或RMW),申请RAID处理需要申请的页面资源,并进行RAID的异或校验计算。在RAID处理完毕后,将写I/O操作交给Write-hole处理模块加以处理。
(3)Write-hole处理模块将写I/O操作的RAID写模式,需要保存的页面地址和页面数据存储在write-hole的保留空间。
(4)磁盘管理模块返回写处理结果。
(5)Write-hole模块在接收到回复响应后,向RAID处理模块返回write-hole的处理结果。
(6)RAID处理模块调用磁盘管理模块的接口,执行I/O写盘操作。
(7)磁盘管理模块向RAID处理模块返回I/O写盘结果。
(8)RAID处理模块向上层业务模块返回I/O写盘结果。
(9)write-hole处理模块异步删除保留空间上记录的write-hole信息。
图11是根据本发明优选实施例二的write-hole恢复流程的示意图。如图11所示,当控制器发生掉电后,write-hole恢复流程可以包括以下处理步骤:
(1)write-hole处理模块进行掉电后的恢复处理,首先从磁盘中write-hole的保留空间读取write-hole信息。
(2)磁盘管理模块返回读盘结果。
(3)write-hole处理模块根据读取的write-hole信息将记录的write-hole对应的页面写盘。
(4)磁盘管理模块返回写盘结果。
(5)write-hole处理模块通知RAID处理模块write-hole掉电恢复处理已经完成。
(6)RAID模块开始处理主机I/O。
(7)write-hole处理模块异步删除已经处理的write-hole数据。
从以上的描述中,可以看出,上述实施例实现了如下技术效果(需要说明的是这些效果是某些优选实施例可以达到的效果):采用本发明实施例所提供的技术方案,在执行写I/O操作将数据写入磁盘之前,对写条带信息(包括:数据在条带上写入的位置信息、RAID写模式、数据在内存中的地址信息以及数据)进行存储,该写条带信息用于在将数据写入磁盘的过程中发生异常时,对条带的校验一致性进行恢复;在执行写I/O操作成功后,对存储的写条带信息进行删除,因为在执行写I/O操作的过程中始终保持条带的校验一致性,由此解决了相关技术中因RAID5或RAID6中的write-hole问题会导致条带校验不一致,从而影响后续操作的问题,进而提高了在执行写I/O操作过程中写入磁盘数据的准确性。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (14)
1.一种数据写入方法,其特征在于,包括:
在执行写输入/输出I/O操作将数据写入磁盘之前,对写条带信息进行存储,其中,所述写条带信息包括:条带的位置信息、RAID写模式、所述数据的地址信息以及所述数据;
在将所述数据写入所述磁盘的过程中发生异常时,采用所述写条带信息对所述条带的校验一致性进行恢复。
2.根据权利要求1所述的方法,其特征在于,在采用所述写条带信息对所述条带的校验一致性进行恢复之后,还包括:
在执行所述写I/O操作成功后,对存储的所述写条带信息进行删除。
3.根据权利要求1所述的方法,其特征在于,对所述写条带信息进行存储包括:
将所述写条带信息存储在第一节点的内存中;
经由在所述第一节点与第二节点之间的数据镜像通道将所述写条带信息镜像至所述第二节点中。
4.根据权利要求1所述的方法,其特征在于,对所述写条带信息进行存储包括:
在本地磁盘上划分存储空间;
将所述写条带信息保存至所述存储空间。
5.根据权利要求3或4所述的方法,其特征在于,采用所述写条带信息对所述条带的校验一致性进行恢复包括:
确定在将所述数据写入所述磁盘的过程中发生异常;
读取已经存储的所述写条带信息,并根据所述位置信息、所述RAID写模式、所述地址信息以及所述数据对所述条带的校验一致性进行恢复;
继续执行所述写I/O操作。
6.根据权利要求3所述的方法,其特征在于,对存储的所述写条带信息进行删除包括:
向上层主机返回成功执行所述写I/O操作的结果;
删除在所述第一节点上保存的所述写条带信息;
经由所述数据镜像通道删除在所述第二节点上存储的所述写条带信息。
7.根据权利要求4所述的方法,其特征在于,对存储的所述写条带信息进行删除包括:
向上层主机返回成功执行所述写I/O操作的结果;
删除在所述存储空间上保存的所述写条带信息。
8.一种数据写入装置,其特征在于,包括:
存储模块,用于在执行写输入/输出I/O操作将数据写入磁盘之前,对写条带信息进行存储,其中,所述写条带信息包括:条带的位置信息、RAID写模式、所述数据的地址信息以及所述数据;
恢复模块,用于在将所述数据写入所述磁盘的过程中发生异常时,采用所述写条带信息对所述条带的校验一致性进行恢复。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
删除模块,用于在执行所述写I/O操作成功后,对存储的所述写条带信息进行删除。
10.根据权利要求8所述的装置,其特征在于,所述存储模块包括:
第一存储单元,用于将所述写条带信息存储在第一节点的内存中;
第二存储单元,用于经由在所述第一节点与第二节点之间的数据镜像通道将所述写条带信息镜像至所述第二节点中。
11.根据权利要求8所述的装置,其特征在于,所述存储模块包括:
划分单元,用于在本地磁盘上划分存储空间;
第三存储单元,用于将所述写条带信息保存至所述存储空间。
12.根据权利要求10或11所述的装置,其特征在于,所述恢复模块包括:
确定单元,用于确定在将所述数据写入所述磁盘的过程中发生异常;
读取单元,用于读取已经存储的所述写条带信息,并根据所述位置信息、所述RAID写模式、所述地址信息以及所述数据对所述条带的校验一致性进行恢复;
执行单元,用于继续执行所述写I/O操作。
13.根据权利要求10所述的装置,其特征在于,所述删除模块包括:
第一反馈单元,用于向上层主机返回成功执行所述写I/O操作的结果;
第一删除单元,用于删除在所述第一节点上保存的所述写条带信息;
第二删除单元,用于经由所述数据镜像通道删除在所述第二节点上存储的所述写条带信息。
14.根据权利要求11所述的装置,其特征在于,所述删除模块包括:
第二反馈单元,用于向上层主机返回成功执行所述写I/O操作的结果;
第三删除单元,用于删除在所述存储空间上保存的所述写条带信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410074021.8A CN104881242A (zh) | 2014-02-28 | 2014-02-28 | 数据写入方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410074021.8A CN104881242A (zh) | 2014-02-28 | 2014-02-28 | 数据写入方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104881242A true CN104881242A (zh) | 2015-09-02 |
Family
ID=53948753
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410074021.8A Pending CN104881242A (zh) | 2014-02-28 | 2014-02-28 | 数据写入方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104881242A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105892950A (zh) * | 2016-04-01 | 2016-08-24 | 浪潮电子信息产业股份有限公司 | 一种磁盘阵列的重建方法及系统 |
CN111143117A (zh) * | 2018-11-06 | 2020-05-12 | 浙江宇视科技有限公司 | 数据存储方法及装置 |
CN111399780A (zh) * | 2020-03-19 | 2020-07-10 | 支付宝(杭州)信息技术有限公司 | 一种数据的写入方法、装置以及设备 |
CN111666046A (zh) * | 2020-05-20 | 2020-09-15 | 西安奥卡云数据科技有限公司 | 一种数据存储方法、装置及设备 |
WO2021072917A1 (zh) * | 2019-10-18 | 2021-04-22 | 苏州浪潮智能科技有限公司 | 一种raid的写洞保护方法、系统及存储介质 |
CN115599607A (zh) * | 2022-11-29 | 2023-01-13 | 苏州浪潮智能科技有限公司(Cn) | 一种raid阵列的数据恢复方法及相关装置 |
CN115629714A (zh) * | 2022-12-06 | 2023-01-20 | 苏州浪潮智能科技有限公司 | Raid卡的写方法、raid卡的写系统及相关装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080010502A1 (en) * | 2006-06-20 | 2008-01-10 | Korea Advanced Institute Of Science And Technology | Method of improving input and output performance of raid system using matrix stripe cache |
CN101236482A (zh) * | 2008-02-26 | 2008-08-06 | 杭州华三通信技术有限公司 | 降级状态下处理数据的方法及独立冗余磁盘阵列系统 |
CN101916173A (zh) * | 2010-08-27 | 2010-12-15 | 杭州华三通信技术有限公司 | 一种基于raid的数据读写方法及其系统 |
CN102122236A (zh) * | 2011-03-21 | 2011-07-13 | 成都市华为赛门铁克科技有限公司 | 写请求的处理方法及装置 |
CN102184079A (zh) * | 2011-04-29 | 2011-09-14 | 华中科技大学 | 一种raid5级别磁盘阵列的写性能优化方法 |
-
2014
- 2014-02-28 CN CN201410074021.8A patent/CN104881242A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20080010502A1 (en) * | 2006-06-20 | 2008-01-10 | Korea Advanced Institute Of Science And Technology | Method of improving input and output performance of raid system using matrix stripe cache |
CN101236482A (zh) * | 2008-02-26 | 2008-08-06 | 杭州华三通信技术有限公司 | 降级状态下处理数据的方法及独立冗余磁盘阵列系统 |
CN101916173A (zh) * | 2010-08-27 | 2010-12-15 | 杭州华三通信技术有限公司 | 一种基于raid的数据读写方法及其系统 |
CN102122236A (zh) * | 2011-03-21 | 2011-07-13 | 成都市华为赛门铁克科技有限公司 | 写请求的处理方法及装置 |
CN102184079A (zh) * | 2011-04-29 | 2011-09-14 | 华中科技大学 | 一种raid5级别磁盘阵列的写性能优化方法 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105892950A (zh) * | 2016-04-01 | 2016-08-24 | 浪潮电子信息产业股份有限公司 | 一种磁盘阵列的重建方法及系统 |
CN111143117A (zh) * | 2018-11-06 | 2020-05-12 | 浙江宇视科技有限公司 | 数据存储方法及装置 |
WO2021072917A1 (zh) * | 2019-10-18 | 2021-04-22 | 苏州浪潮智能科技有限公司 | 一种raid的写洞保护方法、系统及存储介质 |
US11650880B2 (en) | 2019-10-18 | 2023-05-16 | Inspur Suzhou Intelligent Technology Co., Ltd. | Write hole protection method and system for raid, and storage medium |
CN111399780A (zh) * | 2020-03-19 | 2020-07-10 | 支付宝(杭州)信息技术有限公司 | 一种数据的写入方法、装置以及设备 |
CN111399780B (zh) * | 2020-03-19 | 2021-08-24 | 蚂蚁金服(杭州)网络技术有限公司 | 一种数据的写入方法、装置以及设备 |
CN111666046A (zh) * | 2020-05-20 | 2020-09-15 | 西安奥卡云数据科技有限公司 | 一种数据存储方法、装置及设备 |
CN115599607A (zh) * | 2022-11-29 | 2023-01-13 | 苏州浪潮智能科技有限公司(Cn) | 一种raid阵列的数据恢复方法及相关装置 |
CN115629714A (zh) * | 2022-12-06 | 2023-01-20 | 苏州浪潮智能科技有限公司 | Raid卡的写方法、raid卡的写系统及相关装置 |
WO2024119774A1 (zh) * | 2022-12-06 | 2024-06-13 | 苏州元脑智能科技有限公司 | Raid卡的写方法、raid卡的写系统及相关装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109725822B (zh) | 用于管理存储系统的方法、设备和计算机程序产品 | |
CN104881242A (zh) | 数据写入方法及装置 | |
US7779294B2 (en) | Power-safe disk storage apparatus, systems, and methods | |
US10324810B2 (en) | Method and apparatus for redundant array of independent disks with raid metadata and sub-raid metadata stored using different raid algorithms | |
US10353787B2 (en) | Data stripping, allocation and reconstruction | |
US20100037091A1 (en) | Logical drive bad block management of redundant array of independent disks | |
US7363532B2 (en) | System and method for recovering from a drive failure in a storage array | |
US20110029728A1 (en) | Methods and apparatus for reducing input/output operations in a raid storage system | |
CN104035830A (zh) | 一种数据恢复方法和装置 | |
US20060242540A1 (en) | System and method for handling write commands to prevent corrupted parity information in a storage array | |
CN102981927A (zh) | 分布式独立冗余磁盘阵列存储方法及分布式集群存储系统 | |
CN101916173A (zh) | 一种基于raid的数据读写方法及其系统 | |
US10860423B2 (en) | Method and apparatus for performing dynamic recovery management regarding redundant array of independent disks | |
US20120198195A1 (en) | Data storage system and method | |
CN111124266A (zh) | 数据管理方法、设备和计算机程序产品 | |
CN113377569B (zh) | 用于恢复数据的方法、设备和计算机程序产品 | |
CN103678025A (zh) | 一种磁盘阵列中的磁盘故障处理方法 | |
CN106933707B (zh) | 基于raid技术的数据存储设备数据恢复方法及系统 | |
CN104461373A (zh) | 一种raid数据处理方法及装置 | |
CN105630417A (zh) | 一种raid5系统及在raid5系统失效后继续写数据的方法 | |
CN109791472B (zh) | 冷存储系统的数据保护 | |
US20100169572A1 (en) | Data storage method, apparatus and system for interrupted write recovery | |
CN109814810A (zh) | 一种raid阵列中硬盘故障扇区的处理方法及装置 | |
US20230333929A1 (en) | Method, electronic device, and computer program product for accessing data of raid | |
CN113742132B (zh) | 一种存储系统故障修复方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150902 |
|
RJ01 | Rejection of invention patent application after publication |