CN115167787B - 一种数据转存方法、系统、设备及计算机可读存储介质 - Google Patents

一种数据转存方法、系统、设备及计算机可读存储介质 Download PDF

Info

Publication number
CN115167787B
CN115167787B CN202211081688.1A CN202211081688A CN115167787B CN 115167787 B CN115167787 B CN 115167787B CN 202211081688 A CN202211081688 A CN 202211081688A CN 115167787 B CN115167787 B CN 115167787B
Authority
CN
China
Prior art keywords
data
target
check code
raid6
bit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211081688.1A
Other languages
English (en)
Other versions
CN115167787A (zh
Inventor
吴睿振
陈静静
张永兴
张旭
王小伟
王凛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Inspur Intelligent Technology Co Ltd
Original Assignee
Suzhou Inspur Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Inspur Intelligent Technology Co Ltd filed Critical Suzhou Inspur Intelligent Technology Co Ltd
Priority to CN202211081688.1A priority Critical patent/CN115167787B/zh
Publication of CN115167787A publication Critical patent/CN115167787A/zh
Application granted granted Critical
Publication of CN115167787B publication Critical patent/CN115167787B/zh
Priority to PCT/CN2023/079095 priority patent/WO2024051114A1/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0689Disk arrays, e.g. RAID, JBOD
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Detection And Correction Of Errors (AREA)

Abstract

本申请公开了一种数据转存方法、系统、设备及计算机可读存储介质,确定经TP‑RAID方法落盘后的待转移的目标条带数据;确定目标条带数据中预设类型的基准校验码的目标位置信息;若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算目标条带数据中数据块的RAID6校验码;若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据,对目标运算数据进行运算得到RAID6校验码;对数据块及RAID6校验码进行落盘;能够快速将TP‑RAID存储数据按RAID6方式转存。

Description

一种数据转存方法、系统、设备及计算机可读存储介质
技术领域
本申请涉及RAID技术领域,更具体地说,涉及一种数据转存方法、系统、设备及计算机可读存储介质。
背景技术
随着技术的发展,磁盘的寿命增长,组建的服务器存储的数据量更大,RAID(Redundant Arrays of Independent Disks,磁盘阵列)技术已经逐渐无法满足当前的存储需求,因此有了TP-RAID的需求,相比于RAID5,6,TP-RAID顾名思义就是能够同时支持三个错误的RAID算法。
虽然TP-RAID的核心是支持同时三个错误的RAID算法,但是考虑到产品实现需要向客户支持多种方案,各个方案之间需要可以互相快速迁移,比如TP-RAID方案需要迁移为RAID6方案,在此过程中,只能按照RAID6方案对TP-RAID方案中的数据进行运算并落盘,然而此种方式需要读取所有的数据并进行运算,运算量大且耗时长,影响数据转存效率。
综上所述,如何快速将TP-RAID存储数据按RAID6方式转存是目前本领域技术人员亟待解决的问题。
发明内容
本申请的目的是提供一种数据转存方法,其能在一定程度上解决如何快速将TP-RAID存储数据按RAID6方式转存的技术问题。本申请还提供了一种数据转存系统、设备及计算机可读存储介质。
为了实现上述目的,本申请提供如下技术方案:
一种数据转存方法,包括:
确定经TP-RAID方法左旋不对齐方式落盘后的待转移的目标条带数据,所述TP-RAID方法包括生成三个校验码的RAID方法;
确定所述目标条带数据中P类型的基准校验码的目标位置信息;
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算所述目标条带数据中数据块的RAID6校验码;
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码;
对所述数据块及所述RAID6校验码进行落盘;
其中,所述若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第二位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;
通过第一运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第一运算公式包括:
Figure DEST_PATH_IMAGE002
其中,
Figure DEST_PATH_IMAGE004
Figure DEST_PATH_IMAGE006
表示所述RAID6校验码;
Figure DEST_PATH_IMAGE008
Figure DEST_PATH_IMAGE010
Figure DEST_PATH_IMAGE012
表示所述目标运算数据;
Figure DEST_PATH_IMAGE014
表示所述数据块的总个数;
其中,所述若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第三位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;
通过第二运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第二运算公式包括:
Figure DEST_PATH_IMAGE016
其中,
Figure DEST_PATH_IMAGE018
Figure DEST_PATH_IMAGE020
表示所述RAID6校验码;
Figure DEST_PATH_IMAGE022
Figure DEST_PATH_IMAGE024
Figure DEST_PATH_IMAGE026
表示所述目标运算数据;
其中,所述若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第四位中的任一位,则将所述目标条带数据中的三个校验码及
Figure DEST_PATH_IMAGE028
Figure DEST_PATH_IMAGE030
所对应的所述数据块作为所述目标运算数据,其中,
Figure DEST_PATH_IMAGE032
表示所述目标位置信息在所述目标条带数据中的倒数位数的值;
通过第三运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第三运算公式包括:
Figure DEST_PATH_IMAGE034
其中,
Figure DEST_PATH_IMAGE036
Figure DEST_PATH_IMAGE038
表示所述RAID6校验码;
Figure DEST_PATH_IMAGE040
Figure DEST_PATH_IMAGE042
Figure DEST_PATH_IMAGE044
Figure DEST_PATH_IMAGE046
Figure DEST_PATH_IMAGE048
表示所述目标运算数据,且
Figure DEST_PATH_IMAGE049
的值为4时,
Figure DEST_PATH_IMAGE050
Figure DEST_PATH_IMAGE051
所对应的所述数据块为
Figure DEST_PATH_IMAGE052
Figure DEST_PATH_IMAGE054
表示所述数据块的总个数。
优选的,所述对所述数据块及所述RAID6校验码进行落盘,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则按照所述左旋不对齐方式对所述数据块及所述RAID6校验码进行落盘。
优选的,所述对所述数据块及所述RAID6校验码进行落盘,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第一位或第二位或第三位,则基于所述左旋不对齐方式对对应的所述数据块及所述RAID6校验码进行落盘;
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的最后一位,则基于负载均衡需求对对应的所述数据块及所述RAID6校验码进行落盘。
一种数据转存系统,包括:
第一确定模块,用于确定经TP-RAID方法及左旋不对齐方式落盘后的待转移的目标条带数据,所述TP-RAID方法包括生成三个校验码的RAID方法;
第二确定模块,用于确定所述目标条带数据中P类型的基准校验码的目标位置信息;
第一处理模块,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算所述目标条带数据中数据块的RAID6校验码;
第二处理模块,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码;
第一存储模块,用于对所述数据块及所述RAID6校验码进行落盘;
其中,所述第二处理模块包括:
第一处理单元,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第二位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;通过第一运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第一运算公式包括:
Figure DEST_PATH_IMAGE055
其中,
Figure DEST_PATH_IMAGE056
Figure DEST_PATH_IMAGE057
表示所述RAID6校验码;
Figure DEST_PATH_IMAGE058
Figure DEST_PATH_IMAGE059
Figure 651443DEST_PATH_IMAGE012
表示所述目标运算数据;
Figure DEST_PATH_IMAGE060
表示所述数据块的总个数;
其中,所述第二处理模块包括:
第二处理单元,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第三位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;通过第二运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第二运算公式包括:
Figure DEST_PATH_IMAGE061
其中,
Figure DEST_PATH_IMAGE062
Figure DEST_PATH_IMAGE063
表示所述RAID6校验码;
Figure DEST_PATH_IMAGE064
Figure DEST_PATH_IMAGE065
Figure DEST_PATH_IMAGE066
表示所述目标运算数据;
其中,所述第二处理模块包括:
第三处理单元,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第四位中的任一位,则将所述目标条带数据中的三个校验码及
Figure DEST_PATH_IMAGE067
Figure 463804DEST_PATH_IMAGE030
所对应的所述数据块作为所述目标运算数据,其中,
Figure DEST_PATH_IMAGE068
表示所述目标位置信息在所述目标条带数据中的倒数位数的值;通过第三运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第三运算公式包括:
Figure DEST_PATH_IMAGE069
其中,
Figure DEST_PATH_IMAGE070
Figure DEST_PATH_IMAGE071
表示所述RAID6校验码;
Figure DEST_PATH_IMAGE072
Figure 999958DEST_PATH_IMAGE042
Figure DEST_PATH_IMAGE073
Figure DEST_PATH_IMAGE074
Figure 611068DEST_PATH_IMAGE052
表示所述目标运算数据,且
Figure DEST_PATH_IMAGE075
的值为4时,
Figure DEST_PATH_IMAGE076
Figure DEST_PATH_IMAGE077
所对应的所述数据块为
Figure 798643DEST_PATH_IMAGE052
Figure DEST_PATH_IMAGE078
表示所述数据块的总个数。
一种数据转存设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上任一所述数据转存方法的步骤。
一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现如上任一所述数据转存方法的步骤。
本申请提供的一种数据转存方法,确定经TP-RAID方法落盘后的待转移的目标条带数据,TP-RAID方法包括生成三个校验码的RAID方法;确定目标条带数据中预设类型的基准校验码的目标位置信息;若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算目标条带数据中数据块的RAID6校验码;若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据,对目标运算数据进行运算得到RAID6校验码;对数据块及RAID6校验码进行落盘。本申请中,可以按照目标条带数据中基准校验码的目标位置信息,对目标条带得到RAID6校验码的方式进行区分,且在目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位时,只需在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据,对目标运算数据进行运算即可得到RAID6校验码,无需对目标条带数据中的所有数据块进行读取、RAID6计算,能够提高RAID6校验码的生成效率,进而可以快速将TP-RAID存储数据按RAID6方式转存。本申请提供的一种数据转存系统、设备及计算机可读存储介质也解决了相应技术问题。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种数据转存方法的第一流程图;
图2为三块磁盘的用户数据所组建的TP-RAID场景示意图;
图3为现有重新编码的实现示意图;
图4为本申请中条带的处理示意图;
图5为本申请实施例提供的数据转存方法的具体示意图;
图6为本申请实施例提供的一种数据转存系统的结构示意图;
图7为本申请实施例提供的一种数据转存设备的结构示意图;
图8为本申请实施例提供的一种数据转存设备的另一结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
伴随着通讯技术和网络科技的迅速发展,数字化信息呈指数爆炸式增长,数据存储技术也因此迎来了巨大的挑战。存储系统中数据的可靠性问题以及存储系统的能耗问题越来越被人们所关注。现如今面对如此庞大的数据规模,存储系统中数据的可靠性和存储系统中包含的组件数量成反比关系,即存储系统组件数越多,那么存储系统中数据的可靠性就越低。根据相关调查显示,在一个由600个磁盘构成的互联网数据中心中,每月大约会有30个磁盘出现损坏的情况,在大规模存储系统中,磁盘故障造成的数据可靠性下降是相当严重的问题,对此人们展开了相关容错技术的研究。
在1988年,加州大学伯克利分校的D. A. Patterson等教授提出的RAID结构成为了提升存储空间的一个关键技术,RAID(Redundant Arrays of Independent Disks,磁盘阵列)即具有冗余能力的磁盘阵列,磁盘阵列是通过将多个独立磁盘组合一起,从而得到一个容量巨大的磁盘组。采用RAID存储技术,可以大大提高存储容量,提高系统输入输出的请求处理能力并且通过数据的分布式存储技术,并行访问手段和信息冗余技术提高数据的可靠性。RAID的设计思想被提出之后,很快就被业界所接纳,RAID 技术作为高性能、高可靠的存储技术,目前已经在人们的生产和生活中得到了极其广泛的应用。RAID主要利用数据条带、数据校验和镜像技术来获得较强的性能、更高的可靠性、较好的容错能力和较强的扩展性。根据不同的数据应用需求,可以运用或者组合运用这三种技术的策略和架构,所以按照不同的策略和架构,RAID可以被分为不同的等级:RAID 0,1,5,6,10。
且随着技术的发展,磁盘的寿命增长,组建的服务器存储的数据量更大,RAID技术已经逐渐无法满足当前的存储需求,因此有了TP-RAID的需求,相比于RAID5,6,TP-RAID顾名思义就是能够同时支持三个错误的RAID算法。虽然TP-RAID的核心是支持同时三个错误的RAID算法,但是考虑到产品实现需要向客户支持多种方案,各个方案之间需要可以互相快速迁移,比如TP-RAID方案需要迁移为RAID6方案,在此过程中,只能按照RAID6方案对TP-RAID方案中的数据进行运算并落盘,然而此种方式需要读取所有的数据并进行运算,运算量大且耗时长,影响数据转存效率。而本申请提供的数据转存方法可以快速将TP-RAID存储数据按RAID6方式转存。
请参阅图1,图1为本申请实施例提供的一种数据转存方法的第一流程图。
本申请实施例提供的一种数据转存方法,可以包括以下步骤:
步骤S101:确定经TP-RAID方法落盘后的待转移的目标条带数据,TP-RAID方法包括生成三个校验码的RAID方法。
实际应用中,可以先确定经TP-RAID方法落盘后的待转移的目标条带数据,目标条带数据中数据块的数量及类型等可以根据实际需要确定,本申请在此不做具体限定。
需要说明的是,本申请中的TP-RAID方法包括生成三个校验码的RAID方法,传统的三个校验码的生成公式可以如下:
Figure DEST_PATH_IMAGE080
其中,
Figure DEST_PATH_IMAGE081
表示TP-RAID编码时所需的参数;
Figure DEST_PATH_IMAGE082
表示数据块;
Figure DEST_PATH_IMAGE083
Figure DEST_PATH_IMAGE084
Figure DEST_PATH_IMAGE085
表示三个校验码。
考虑到TP-RAID与RAID6之间的切换,上述生成公式的前两行需满足RAID6特性,因此基于RS(Reed-Solomon Code,里德所罗门码)同等扩展性第三行也需要使用相类似的RS构建方法,基于上述要求,可得到的TP-RAID具体实现关系为:
Figure DEST_PATH_IMAGE087
其中,
Figure DEST_PATH_IMAGE088
表示
Figure DEST_PATH_IMAGE090
在条带中的位置信息;
Figure DEST_PATH_IMAGE091
表示
Figure DEST_PATH_IMAGE093
在条带中的位置信息;
Figure DEST_PATH_IMAGE094
表示
Figure DEST_PATH_IMAGE096
在条带中的位置信息;换言之,具体应用场景中,可以基于该TP-RAID具体实现关系得到目标条带数据。
具体应用场景中,实际的落盘时,需要考虑负载均衡问题,比如用左旋不对齐,左旋对齐,右旋不对齐和右旋对齐四种算法进行落盘位置计算,本申请中,在确定经TP-RAID方法落盘后的待转移的目标条带数据的过程中,可以确定经TP-RAID方法及左旋不对齐方式落盘后的待转移的目标条带数据,相应的,后续对经TP-RAID方法及左旋不对齐方式落盘后的待转移的目标条带数据进行RAID6转存。为了便于理解,假设三块磁盘的用户数据所组建的TP-RAID场景如图2所示,其以左旋不对齐方式落盘,且p1p2p3,p4p5p6,p7p8p9分别为条带123运算得到的校验块,此时,受到负载均衡的左旋不对齐的影响,p1p2p3对应的如TP-RAID具体实现关系中的x、y、z的选择则是4、5、6,相应的p4、p5、p6对应的x、y、z的选择为3、4、5。
步骤S102:确定目标条带数据中预设类型的基准校验码的目标位置信息。
实际应用中,在确定经TP-RAID方法落盘后的待转移的目标条带数据之后,便可以确定目标条带数据中预设类型的基准校验码的目标位置信息,以便后续基于该目标位置信息确定生成目标条带数据中的数据块的RAID6校验码的方式。
具体应用场景中,基准校验码的类型可以根据实际需要确定,比如在确定目标条带数据中预设类型的基准校验码的目标位置信息的过程中,可以确定目标条带数据中P类型的基准校验码的目标位置信息。
步骤S103:若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算目标条带数据中数据块的RAID6校验码。
实际应用中,在确定目标条带数据中预设类型的基准校验码的目标位置信息之后,若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位或最后一位,则可以基于RAID6方法计算目标条带数据中数据块的RAID6校验码。
步骤S104:若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据,对目标运算数据进行运算得到RAID6校验码。
实际应用中,在确定目标条带数据中预设类型的基准校验码的目标位置信息之后,若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则可以在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据,对目标运算数据进行运算得到RAID6校验码。需要说明的是,由于目标位置信息的数值小于等于所有数据块的总数量值,所以此时读取的目标运算数据为部分或全部的数据块,可以降低读取数据块带来的IO延迟。
步骤S105:对数据块及RAID6校验码进行落盘。
实际应用中,在得到数据块的RAID6校验码之后,便可以对数据块及RAID6校验码进行落盘。
实际应用中,若在目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据的过程中,若目标位置信息表征基准校验码位于目标条带数据的倒数第二位,则可以将目标条带数据中的三个校验码作为目标运算数据。相应的,在对目标运算数据进行运算得到RAID6校验码的过程中,可以通过第一运算公式,对目标运算数据进行运算得到RAID6校验码。相应的,在对数据块及RAID6校验码进行落盘的过程中,可以按照左旋不对齐方式对数据块及RAID6校验码进行落盘。其中,第一运算公式包括:
Figure DEST_PATH_IMAGE097
其中,
Figure DEST_PATH_IMAGE003
Figure DEST_PATH_IMAGE005
表示RAID6校验码;
Figure DEST_PATH_IMAGE007
Figure DEST_PATH_IMAGE009
Figure DEST_PATH_IMAGE011
表示目标运算数据;
Figure DEST_PATH_IMAGE013
表示数据块的总个数。
具体应用场景中,在若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据的过程中,若目标位置信息表征基准校验码位于目标条带数据的倒数第三位,则可以将目标条带数据中的三个校验码作为目标运算数据。相应的,在对目标运算数据进行运算得到RAID6校验码的过程中,可以通过第二运算公式,对目标运算数据进行运算得到RAID6校验码。相应的,在对数据块及RAID6校验码进行落盘的过程中,可以按照左旋不对齐方式对数据块及RAID6校验码进行落盘。其中,第二运算公式包括:
Figure DEST_PATH_IMAGE098
其中,
Figure DEST_PATH_IMAGE017
Figure DEST_PATH_IMAGE019
表示RAID6校验码;
Figure DEST_PATH_IMAGE021
Figure DEST_PATH_IMAGE023
Figure DEST_PATH_IMAGE025
表示目标运算数据。
具体应用场景中,在若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据的过程中,若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第四位中的任一位,则可以将目标条带数据中的三个校验码及
Figure DEST_PATH_IMAGE099
Figure DEST_PATH_IMAGE100
所对应的数据块作为目标运算数据,其中,
Figure DEST_PATH_IMAGE031
表示目标位置信息在目标条带数据中的倒数位数的值。相应的,在对目标运算数据进行运算得到RAID6校验码的过程中,可以通过第三运算公式,对目标运算数据进行运算得到RAID6校验码。相应的,在对数据块及RAID6校验码进行落盘的过程中,可以按照左旋不对齐方式对数据块及RAID6校验码进行落盘。其中,第三运算公式包括:
Figure DEST_PATH_IMAGE101
其中,
Figure DEST_PATH_IMAGE035
Figure DEST_PATH_IMAGE037
表示RAID6校验码;
Figure DEST_PATH_IMAGE039
Figure DEST_PATH_IMAGE041
Figure DEST_PATH_IMAGE043
Figure DEST_PATH_IMAGE102
Figure DEST_PATH_IMAGE047
表示目标运算数据,且
Figure 537448DEST_PATH_IMAGE031
的值为4时,
Figure 1927DEST_PATH_IMAGE099
Figure DEST_PATH_IMAGE029
所对应的数据块为
Figure 467543DEST_PATH_IMAGE047
Figure DEST_PATH_IMAGE053
表示数据块的总个数。
具体应用场景中,在对数据块及RAID6校验码进行落盘的过程中,若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位,则可以基于左旋不对齐方式对对应的数据块及RAID6校验码进行落盘;若目标位置信息表征基准校验码位于目标条带数据的最后一位,则可以基于负载均衡需求对对应的数据块及RAID6校验码进行落盘。
需要说明的是,在将TP-RAID降至RAID6的过程中,现有方式是通过数据迁移,将一块磁盘空出做其他用处,且实现起来大多以直接重新编码实现,重新编码的实现如图3所示,首先抛弃所有的校验信息,然后进行数据迁移,再重新读取所有的数据进行RAID6编码,这样的运算操作需要对所有的数据进行两次的读写,速度很慢,损耗极大;且无论如何迁移均需要对部分数据块进行移位,当条带数据量足够大时,需要移位的数据块平均为所有数据块的一半,会严重影响数据转存效率。而本申请无需对目标条带数据中的所有数据块进行读取、RAID6计算,能够提高RAID6校验码的生成效率,进而可以快速将TP-RAID存储数据按RAID6方式转存。
本申请提供的一种数据转存方法,确定经TP-RAID方法落盘后的待转移的目标条带数据,TP-RAID方法包括生成三个校验码的RAID方法;确定目标条带数据中预设类型的基准校验码的目标位置信息;若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算目标条带数据中数据块的RAID6校验码;若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定与目标位置信息对应的目标运算数据,对目标运算数据进行运算得到RAID6校验码;对数据块及RAID6校验码进行落盘。本申请中,可以按照目标条带数据中基准校验码的目标位置信息,对目标条带得到RAID6校验码的方式进行区分,且在目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位时,只需在目标条带数据中确定与目标位置信息对应的目标运算数据,对目标运算数据进行运算即可得到RAID6校验码,无需对目标条带数据中的所有数据块进行读取、RAID6计算,能够提高RAID6校验码的生成效率,进而可以快速将TP-RAID存储数据按RAID6方式转存。
为了便于理解本申请提供的数据转存方案,现对本申请方案与现有技术进行对比分析,过程如下:
假设总共有K个数据块的条带组件的TP-RAID落盘方式如表1所示,当需要降级为RAID6时,固定空出最右边的磁盘,则表1示例下降级后所组成的RAID6如表2所示;
表1 左旋不对齐下TP-RAID落盘方式
Figure DEST_PATH_IMAGE104
表2左旋不对齐下TP-RAID降为RAID6的落盘方式
Figure DEST_PATH_IMAGE106
其中,在同一个系统架构下,为了固件的编解码参数减少出错几率,以及数据盘数据不出错,一般要求负载均衡算法保持不变,也即也需以左旋不对齐方式来对RAID6方案进行落盘,在此过程中,默认空出的磁盘为最右侧磁盘,则为了满足左旋不对齐的负载均衡下,顺序迁移时所有涉及移动的用户数据全部在图中用灰色标出。换言之,不管使用怎样的降级算法,为了保持同样的负载均衡,降低错误几率,表2中的灰色部分的数据块都要完成读取和写入,从而达成迁移。表1和表2在假设K个数据块的前提下,将受到负载均衡影响的条带情况进行了完全的罗列,因此可知在K个数据块下的前提下,按照左旋不对齐从起始位开始计算直至回到起始位置的所有可能条带场景中,每种场景涉及移动的数据块数量统计如表3所示;
表3 左旋不对齐下TP-RAID降为RAID6的所有场景下数据块迁移量
Figure DEST_PATH_IMAGE108
需要说明的是,表1中TP-RAID的编码实现的校验码块是PQR,表2、表3中降级为RAID6的校验码块标注为P’Q’。表3中对各种场景进行了标号,因为左旋不对齐基于P的位置计算Q的位置或QR的位置,因此,在K个数据盘的前提下,TP-RAID左旋不对齐一共有K+3种条带场景,RAID6的左旋不对齐如表3所示,一共有K+2种条带场景,直接映射的移动一定会有一个条带轮空无法映射。基于上述描述可知,TP-RAID共有K+3个场景,降为RAID6后,同样使用的是左旋不对齐的形式,会有K+2个场景。基于左旋不对齐P所在的位置,当P在条带最右侧时,编号为1,随后K+3种情况为其每次左移一位的情况,具体如图4所示。
相应的,本申请提供的数据转存方法中,确定经TP-RAID方法及左旋不对齐方式落盘后的待转移的目标条带数据,确定目标条带数据中P类型的基准校验码的目标位置信息,若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算目标条带数据中数据块的RAID6校验码;若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据,对目标运算数据进行运算得到RAID6校验码;对数据块及RAID6校验码进行落盘。假设目标条带数据的划分过程如图4所示,其中,条带1为重算组1,也即目标位置信息表征基准校验码位于目标条带数据最后一位时,将该目标条带数据标记为重算组1;条带K+1、K+2、K+3为重算组2,也即目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位时,将该目标条带标记为重算组2;条带2~K标记为移动组,也即目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位时,将该目标条带数据标记为移动组。
对于重算组2,在本申请中,在条带K+1,K+2,K+3中直接取K个数据,按照RAID6的标准编码方式,给参数进入编码运算模块直接计算新的P’Q’即可得到相应的RAID6校验码;对于移动组,需按照下述运算公式选取目标运算数据并计算得到相应的RAID6校验码,其中,运算公式为:
Figure DEST_PATH_IMAGE110
由上式可知,在条带场景2下,只需要读取PQR3个数据块即可运算得到RAID校验码,因此减少了K-3个数据块的读取需求;在场景3下,同理减少了K-3个数据块的读取需求;在场景4下,减少了K-2个数据块的读取需求;依次递增,到场景K下读取了K个数据块,和传统方法一样。而其中所有涉及需要读取的数据块,全是迁移工作必须读取的数据块,因此减少的数据块读取量为实际减少的数据量,能够平均提升一半以上的转换效率。
由以上分析过程可知,在具体应用场景下,运行本申请提供的数据转存方法时,本申请可以将TP-RAID中每K+3个条带数据划分为一个组,假设总共有n个组,其中组1到组(n-1)都满足条带数各自为K+3,则前n-1个符合本申请上述操作,对重算组2和移动组分别进行运算,直到第n个组,此时条带数不满足K+3,对其满足条件的移动组分别进行运算,然后将上面其他组里的重算组1依次按照负载均衡的实际要求依次落盘,并完成相关的校验运算即可,整个过程可以如图5所示。
请参阅图6,图6为本申请实施例提供的一种数据转存系统的结构示意图。
本申请实施例提供的一种数据转存系统,可以包括:
第一确定模块101,用于确定经TP-RAID方法落盘后的待转移的目标条带数据,TP-RAID方法包括生成三个校验码的RAID方法;
第二确定模块102,用于确定目标条带数据中预设类型的基准校验码的目标位置信息;
第一处理模块103,用于若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算目标条带数据中数据块的RAID6校验码;
第二处理模块104,用于若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第二位中的任一位,则在目标条带数据中确定数量与目标位置信息的数值相对应的目标运算数据,对目标运算数据进行运算得到RAID6校验码;
第一存储模块105,用于对数据块及RAID6校验码进行落盘。
本申请实施例提供的一种数据转存系统,第一确定模块可以包括:
第一确定单元,用于确定经TP-RAID方法及左旋不对齐方式落盘后的待转移的目标条带数据。
本申请实施例提供的一种数据转存系统,第二确定模块可以包括:
第二确定单元,用于确定目标条带数据中P类型的基准校验码的目标位置信息。
本申请实施例提供的一种数据转存系统,第二处理模块可以包括:
第一处理单元,用于若目标位置信息表征基准校验码位于目标条带数据的倒数第二位,则将目标条带数据中的三个校验码作为目标运算数据。
本申请实施例提供的一种数据转存系统,第一处理单元可以具体用于:
通过第一运算公式,对目标运算数据进行运算得到RAID6校验码;
第一运算公式包括:
Figure 116699DEST_PATH_IMAGE097
其中,
Figure 871029DEST_PATH_IMAGE003
Figure 404778DEST_PATH_IMAGE005
表示RAID6校验码;
Figure 193743DEST_PATH_IMAGE007
Figure 889166DEST_PATH_IMAGE009
Figure 396371DEST_PATH_IMAGE011
表示目标运算数据;
Figure 218965DEST_PATH_IMAGE013
表示数据块的总个数。
本申请实施例提供的一种数据转存系统,第一存储模块可以包括:
第一存储单元,用于按照左旋不对齐方式对数据块及RAID6校验码进行落盘。
本申请实施例提供的一种数据转存系统,第二处理模块可以包括:
第二处理单元,用于若目标位置信息表征基准校验码位于目标条带数据的倒数第三位,则将目标条带数据中的三个校验码作为目标运算数据。
本申请实施例提供的一种数据转存系统,第二处理单元可以具体用于:
通过第二运算公式,对目标运算数据进行运算得到RAID6校验码;
第二运算公式包括:
Figure DEST_PATH_IMAGE111
其中,
Figure 393594DEST_PATH_IMAGE017
Figure 259919DEST_PATH_IMAGE019
表示RAID6校验码;
Figure 254420DEST_PATH_IMAGE021
Figure 382169DEST_PATH_IMAGE023
Figure 411305DEST_PATH_IMAGE025
表示目标运算数据。
本申请实施例提供的一种数据转存系统,第一存储模块可以包括:
第二存储单元,用于按照左旋不对齐方式对数据块及RAID6校验码进行落盘。
本申请实施例提供的一种数据转存系统,第二处理模块可以包括:
第三处理单元,用于若目标位置信息表征基准校验码位于目标条带数据的第四位至倒数第四位中的任一位,则将目标条带数据中的三个校验码及
Figure 182952DEST_PATH_IMAGE099
Figure 930328DEST_PATH_IMAGE029
所对应的数据块作为目标运算数据,其中,
Figure 94724DEST_PATH_IMAGE031
表示目标位置信息在目标条带数据中的倒数位数的值。
本申请实施例提供的一种数据转存系统,第三处理单元可以具体用于:通过第三运算公式,对目标运算数据进行运算得到RAID6校验码;
第三运算公式包括:
Figure DEST_PATH_IMAGE112
其中,
Figure 243946DEST_PATH_IMAGE035
Figure 186494DEST_PATH_IMAGE037
表示RAID6校验码;
Figure 155587DEST_PATH_IMAGE039
Figure 107363DEST_PATH_IMAGE041
Figure 94779DEST_PATH_IMAGE043
Figure DEST_PATH_IMAGE045
Figure 4966DEST_PATH_IMAGE047
表示目标运算数据,且
Figure 461355DEST_PATH_IMAGE031
的值为4时,
Figure DEST_PATH_IMAGE027
Figure 233133DEST_PATH_IMAGE029
所对应的数据块为
Figure 825789DEST_PATH_IMAGE047
Figure 641298DEST_PATH_IMAGE053
表示数据块的总个数。
本申请实施例提供的一种数据转存系统,第一存储模块可以包括:
第三存储单元,用于按照左旋不对齐方式对数据块及RAID6校验码进行落盘。
本申请实施例提供的一种数据转存系统,第一存储模块可以包括:
第四存储单元,用于若目标位置信息表征基准校验码位于目标条带数据的第一位或第二位或第三位,则基于左旋不对齐方式对对应的数据块及RAID6校验码进行落盘;
第五存储单元,用于若目标位置信息表征基准校验码位于目标条带数据的最后一位,则基于负载均衡需求对对应的数据块及RAID6校验码进行落盘。
本申请还提供了一种数据转存设备及计算机可读存储介质,其均具有本申请实施例提供的一种数据转存方法具有的对应效果。请参阅图7,图7为本申请实施例提供的一种数据转存设备的结构示意图。
本申请实施例提供的一种数据转存设备,包括存储器201和处理器202,存储器201中存储有计算机程序,处理器202执行计算机程序时实现如上任一实施例所描述数据转存方法的步骤。
请参阅图8,本申请实施例提供的另一种数据转存设备中还可以包括:与处理器202连接的输入端口203,用于传输外界输入的命令至处理器202;与处理器202连接的显示单元204,用于显示处理器202的处理结果至外界;与处理器202连接的通信模块205,用于实现数据转存设备与外界的通信。显示单元204可以为显示面板、激光扫描使显示器等;通信模块205所采用的通信方式包括但不局限于移动高清链接技术(HML)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线连接:无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术。
本申请实施例提供的一种计算机可读存储介质,计算机可读存储介质中存储有计算机程序,计算机程序被处理器执行时实现如上任一实施例所描述数据转存方法的步骤。
本申请所涉及的计算机可读存储介质包括随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质。
本申请实施例提供的数据转存系统、设备及计算机可读存储介质中相关部分的说明请参见本申请实施例提供的数据转存方法中对应部分的详细说明,在此不再赘述。另外,本申请实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明,以免过多赘述。
还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种数据转存方法,其特征在于,包括:
确定经TP-RAID方法及左旋不对齐方式落盘后的待转移的目标条带数据,所述TP-RAID方法包括生成三个校验码的RAID方法;
确定所述目标条带数据中P类型的基准校验码的目标位置信息;
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算所述目标条带数据中数据块的RAID6校验码;
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码;
对所述数据块及所述RAID6校验码进行落盘;
其中,所述若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第二位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;
通过第一运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第一运算公式包括:
Figure 196808DEST_PATH_IMAGE001
其中,
Figure 865687DEST_PATH_IMAGE002
Figure 655789DEST_PATH_IMAGE003
表示所述RAID6校验码;
Figure 941276DEST_PATH_IMAGE004
Figure 694600DEST_PATH_IMAGE005
Figure 749144DEST_PATH_IMAGE006
表示所述目标运算数据;
Figure 710146DEST_PATH_IMAGE007
表示所述数据块的总个数;
其中,所述若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第三位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;
通过第二运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第二运算公式包括:
Figure 951772DEST_PATH_IMAGE008
其中,
Figure 23633DEST_PATH_IMAGE009
Figure 181951DEST_PATH_IMAGE010
表示所述RAID6校验码;
Figure 48276DEST_PATH_IMAGE011
Figure 42776DEST_PATH_IMAGE012
Figure 183908DEST_PATH_IMAGE013
表示所述目标运算数据;
其中,所述若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第四位中的任一位,则将所述目标条带数据中的三个校验码及
Figure 963776DEST_PATH_IMAGE014
Figure 735423DEST_PATH_IMAGE015
所对应的所述数据块作为所述目标运算数据,其中,
Figure 482799DEST_PATH_IMAGE016
表示所述目标位置信息在所述目标条带数据中的倒数位数的值;
通过第三运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第三运算公式包括:
Figure 630884DEST_PATH_IMAGE017
其中,
Figure 514526DEST_PATH_IMAGE018
Figure 228711DEST_PATH_IMAGE019
表示所述RAID6校验码;
Figure 932225DEST_PATH_IMAGE020
Figure 884001DEST_PATH_IMAGE021
Figure 622149DEST_PATH_IMAGE022
Figure 1178DEST_PATH_IMAGE023
Figure 208300DEST_PATH_IMAGE024
表示所述目标运算数据,且
Figure 698187DEST_PATH_IMAGE016
的值为4时,
Figure 556421DEST_PATH_IMAGE014
Figure 371931DEST_PATH_IMAGE015
所对应的所述数据块为
Figure 50037DEST_PATH_IMAGE024
Figure 592882DEST_PATH_IMAGE025
表示所述数据块的总个数。
2.根据权利要求1所述的方法,其特征在于,所述对所述数据块及所述RAID6校验码进行落盘,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则按照所述左旋不对齐方式对所述数据块及所述RAID6校验码进行落盘。
3.根据权利要求1所述的方法,其特征在于,所述对所述数据块及所述RAID6校验码进行落盘,包括:
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第一位或第二位或第三位,则基于所述左旋不对齐方式对对应的所述数据块及所述RAID6校验码进行落盘;
若所述目标位置信息表征所述基准校验码位于所述目标条带数据的最后一位,则基于负载均衡需求对对应的所述数据块及所述RAID6校验码进行落盘。
4.一种数据转存系统,其特征在于,包括:
第一确定模块,用于确定经TP-RAID方法及左旋不对齐方式落盘后的待转移的目标条带数据,所述TP-RAID方法包括生成三个校验码的RAID方法;
第二确定模块,用于确定所述目标条带数据中P类型的基准校验码的目标位置信息;
第一处理模块,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第一位或第二位或第三位或最后一位,则基于RAID6方法计算所述目标条带数据中数据块的RAID6校验码;
第二处理模块,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第二位中的任一位,则在所述目标条带数据中确定数量与所述目标位置信息的数值相对应的目标运算数据,对所述目标运算数据进行运算得到所述RAID6校验码;
第一存储模块,用于对所述数据块及所述RAID6校验码进行落盘;
其中,所述第二处理模块包括:
第一处理单元,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第二位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;通过第一运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第一运算公式包括:
Figure 305623DEST_PATH_IMAGE001
其中,
Figure 26455DEST_PATH_IMAGE002
Figure 457436DEST_PATH_IMAGE003
表示所述RAID6校验码;
Figure 305438DEST_PATH_IMAGE004
Figure 872685DEST_PATH_IMAGE005
Figure 764418DEST_PATH_IMAGE006
表示所述目标运算数据;
Figure 682695DEST_PATH_IMAGE007
表示所述数据块的总个数;
其中,所述第二处理模块包括:
第二处理单元,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的倒数第三位,则将所述目标条带数据中的三个校验码作为所述目标运算数据;通过第二运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第二运算公式包括:
Figure 52497DEST_PATH_IMAGE008
其中,
Figure 992027DEST_PATH_IMAGE009
Figure 320240DEST_PATH_IMAGE010
表示所述RAID6校验码;
Figure 194655DEST_PATH_IMAGE011
Figure 899306DEST_PATH_IMAGE012
Figure 175567DEST_PATH_IMAGE013
表示所述目标运算数据;
其中,所述第二处理模块包括:
第三处理单元,用于若所述目标位置信息表征所述基准校验码位于所述目标条带数据的第四位至倒数第四位中的任一位,则将所述目标条带数据中的三个校验码及
Figure 425414DEST_PATH_IMAGE014
Figure 787125DEST_PATH_IMAGE015
所对应的所述数据块作为所述目标运算数据,其中,
Figure 264110DEST_PATH_IMAGE016
表示所述目标位置信息在所述目标条带数据中的倒数位数的值;通过第三运算公式,对所述目标运算数据进行运算得到所述RAID6校验码;
所述第三运算公式包括:
Figure 722773DEST_PATH_IMAGE026
其中,
Figure 644986DEST_PATH_IMAGE018
Figure 25152DEST_PATH_IMAGE019
表示所述RAID6校验码;
Figure 806026DEST_PATH_IMAGE020
Figure 338770DEST_PATH_IMAGE021
Figure 179687DEST_PATH_IMAGE022
Figure 47149DEST_PATH_IMAGE023
Figure 366134DEST_PATH_IMAGE024
表示所述目标运算数据,且
Figure 986340DEST_PATH_IMAGE016
的值为4时,
Figure 732580DEST_PATH_IMAGE014
Figure 556179DEST_PATH_IMAGE015
所对应的所述数据块为
Figure 944435DEST_PATH_IMAGE024
Figure 904301DEST_PATH_IMAGE025
表示所述数据块的总个数。
5.一种数据转存设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至3任一项所述数据转存方法的步骤。
6.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至3任一项所述数据转存方法的步骤。
CN202211081688.1A 2022-09-06 2022-09-06 一种数据转存方法、系统、设备及计算机可读存储介质 Active CN115167787B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202211081688.1A CN115167787B (zh) 2022-09-06 2022-09-06 一种数据转存方法、系统、设备及计算机可读存储介质
PCT/CN2023/079095 WO2024051114A1 (zh) 2022-09-06 2023-03-01 一种数据转存方法、系统、设备及非易失性可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211081688.1A CN115167787B (zh) 2022-09-06 2022-09-06 一种数据转存方法、系统、设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN115167787A CN115167787A (zh) 2022-10-11
CN115167787B true CN115167787B (zh) 2023-01-24

Family

ID=83481031

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211081688.1A Active CN115167787B (zh) 2022-09-06 2022-09-06 一种数据转存方法、系统、设备及计算机可读存储介质

Country Status (2)

Country Link
CN (1) CN115167787B (zh)
WO (1) WO2024051114A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115167787B (zh) * 2022-09-06 2023-01-24 苏州浪潮智能科技有限公司 一种数据转存方法、系统、设备及计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011008583A (ja) * 2009-06-26 2011-01-13 Toshiba Corp ディスクアレイ制御装置及びディスクアレイ装置
CN102081559A (zh) * 2011-01-11 2011-06-01 成都市华为赛门铁克科技有限公司 一种独立磁盘冗余阵列的数据恢复方法和装置
CN111857552A (zh) * 2019-04-30 2020-10-30 伊姆西Ip控股有限责任公司 存储管理方法、电子设备和计算机程序产品
CN114415982A (zh) * 2022-03-30 2022-04-29 苏州浪潮智能科技有限公司 一种数据存储方法、装置、设备及可读存储介质
CN114442950A (zh) * 2022-01-21 2022-05-06 山东云海国创云计算装备产业创新中心有限公司 一种数据恢复方法、系统、装置及计算机可读存储介质

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8145941B2 (en) * 2006-10-31 2012-03-27 Hewlett-Packard Development Company, L.P. Detection and correction of block-level data corruption in fault-tolerant data-storage systems
US8327250B1 (en) * 2009-04-21 2012-12-04 Network Appliance, Inc. Data integrity and parity consistency verification
US10481979B2 (en) * 2017-09-28 2019-11-19 Intel Corporation Storage system, computing system, and methods thereof
CN109725831B (zh) * 2017-10-27 2022-06-10 伊姆西Ip控股有限责任公司 管理存储系统的方法、系统和计算机可读介质
CN113297000B (zh) * 2021-05-20 2022-12-23 山东云海国创云计算装备产业创新中心有限公司 一种raid编码电路及编码方法
CN114546272B (zh) * 2022-02-18 2024-04-26 山东云海国创云计算装备产业创新中心有限公司 快速通用的raid降级为raid5的方法、系统、设备和存储介质
CN114610244A (zh) * 2022-03-25 2022-06-10 山东云海国创云计算装备产业创新中心有限公司 一种独立冗余磁盘阵列降级方法、系统及设备
CN114895842A (zh) * 2022-03-29 2022-08-12 山东云海国创云计算装备产业创新中心有限公司 一种tp-raid编解码方法、系统、设备及存储介质
CN114415983B (zh) * 2022-03-30 2022-06-07 苏州浪潮智能科技有限公司 一种raid编解码方法、装置、设备及可读存储介质
CN114756402A (zh) * 2022-04-15 2022-07-15 山东云海国创云计算装备产业创新中心有限公司 Raid组更新数据时保障数据安全的方法、系统、设备及介质
CN114756175A (zh) * 2022-04-18 2022-07-15 山东云海国创云计算装备产业创新中心有限公司 一种用于磁盘阵列的解码方法、系统、设备及介质
CN115167787B (zh) * 2022-09-06 2023-01-24 苏州浪潮智能科技有限公司 一种数据转存方法、系统、设备及计算机可读存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011008583A (ja) * 2009-06-26 2011-01-13 Toshiba Corp ディスクアレイ制御装置及びディスクアレイ装置
CN102081559A (zh) * 2011-01-11 2011-06-01 成都市华为赛门铁克科技有限公司 一种独立磁盘冗余阵列的数据恢复方法和装置
CN111857552A (zh) * 2019-04-30 2020-10-30 伊姆西Ip控股有限责任公司 存储管理方法、电子设备和计算机程序产品
CN114442950A (zh) * 2022-01-21 2022-05-06 山东云海国创云计算装备产业创新中心有限公司 一种数据恢复方法、系统、装置及计算机可读存储介质
CN114415982A (zh) * 2022-03-30 2022-04-29 苏州浪潮智能科技有限公司 一种数据存储方法、装置、设备及可读存储介质

Also Published As

Publication number Publication date
WO2024051114A1 (zh) 2024-03-14
CN115167787A (zh) 2022-10-11

Similar Documents

Publication Publication Date Title
US9104790B2 (en) Arranging data handling in a computer-implemented system in accordance with reliability ratings based on reverse predictive failure analysis in response to changes
CN115080303B (zh) Raid6磁盘阵列的编码方法、解码方法、装置及介质
CN102122235B (zh) 一种raid4系统及其数据读写方法
US8489916B2 (en) Multi-disk fault-tolerant system, method for generating a check block, and method for recovering a data block
US20150089328A1 (en) Flex Erasure Coding of Controllers of Primary Hard Disk Drives Controller
CN116501553B (zh) 数据恢复方法、装置、系统、电子设备及存储介质
CN115167787B (zh) 一种数据转存方法、系统、设备及计算机可读存储介质
WO2023151290A1 (zh) 一种数据编码方法、装置、设备及介质
Qiu et al. Ec-fusion: An efficient hybrid erasure coding framework to improve both application and recovery performance in cloud storage systems
CN114546272A (zh) 快速通用的raid降级为raid5的方法、系统、设备和存储介质
CN101984400A (zh) 一种raid控制方法、装置及系统
CN114610244A (zh) 一种独立冗余磁盘阵列降级方法、系统及设备
WO2023184911A1 (zh) 一种数据存储方法、装置、设备及非易失性可读存储介质
CN111831223A (zh) 提高数据去重系统可扩展性的容错编码方法、装置及系统
WO2024001494A1 (zh) 一种数据存储的方法、单节点服务器及设备
CN114442950A (zh) 一种数据恢复方法、系统、装置及计算机可读存储介质
CN114115729B (zh) 一种raid下的高效数据迁移方法
CN116501537B (zh) 磁盘阵列切换方法、系统、电子设备及存储介质
CN114895842A (zh) 一种tp-raid编解码方法、系统、设备及存储介质
CN110600070B (zh) 一种提升固态硬盘阵列系统修复性能的编码和修复方法
CN116450048A (zh) Raid6磁盘阵列降级为raid5磁盘阵列的方法
Song et al. A Low complexity design of reed solomon code algorithm for advanced RAID system
CN114756175A (zh) 一种用于磁盘阵列的解码方法、系统、设备及介质
WO2023082629A1 (zh) 数据存储方法及装置、电子设备和存储介质
Yuan et al. SS6: online short-code RAID-6 scaling by optimizing new disk location and data migration

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant