CN115543217B - 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 - Google Patents
独立冗余磁盘阵列数据组织方法、装置、服务器和介质 Download PDFInfo
- Publication number
- CN115543217B CN115543217B CN202211507733.5A CN202211507733A CN115543217B CN 115543217 B CN115543217 B CN 115543217B CN 202211507733 A CN202211507733 A CN 202211507733A CN 115543217 B CN115543217 B CN 115543217B
- Authority
- CN
- China
- Prior art keywords
- mark
- data
- formatting
- response
- bitmap
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 84
- 230000008520 organization Effects 0.000 title claims description 28
- 238000011084 recovery Methods 0.000 claims abstract description 208
- 230000004044 response Effects 0.000 claims abstract description 165
- 238000001514 detection method Methods 0.000 claims abstract description 16
- 238000004590 computer program Methods 0.000 claims description 42
- 230000008569 process Effects 0.000 abstract description 6
- 230000002085 persistent effect Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/0674—Disk device
- G06F3/0676—Magnetic disk device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0652—Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请涉及一种独立冗余磁盘阵列数据组织方法、装置、服务器和介质。所述方法包括:获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;依次将设置格式化完成标志的条带进行数据恢复。采用本方法能够通过格式化进行中允许进行读写操作并优先进行读写条带的格式化工作,通过元数据进行记录避免重复的格式化,保证重构可以在线进行读写操作,降低RAID的持久化内存空间占用。
Description
技术领域
本申请涉及服务器技术领域,特别是涉及一种独立冗余磁盘阵列数据组织方法、独立冗余磁盘阵列数据组织装置、计算机装置、服务器和存储介质。
背景技术
RAID(Redundant Array of Independent Disks)即独立磁盘冗余阵列,简称为磁盘阵列,用多个独立的磁盘组成在一起形成一个大的磁盘系统,实现比单块磁盘更好的存储性能和更高的可靠性。文中元数据代指RAID运行中产生的中间数据(区别于需用户的数据),基于具有掉电保护功能的内存或者非易失性内存进行存储。
目前,RAID的重构需要元数据描述条带的状态,区分条带处于已重构还是没有重构,该种方式保证RAID的重构可以在线进行,而且通过该记录使得条带的重构仅进行一次,相比的从头到尾进行重构的方式,极大的提高重构、RAID系统的性能。方式的缺陷在于重构需要巨量的元数据进行上述的工作,具有掉电保护功能的内存或者非易失性内存进行存储的元数据严重限制了支持的规格,具有很高的成本。RAID的格式化亦是采用上述的方式,相比于重构的元数据RAID的格式化的元数据由于单位更小,数据量更大。
重构技术大部分是通过bitmap(一块连续的内存区域)来实现的。使用bitmap中的一个bit位代表故障盘中的一个数据块(chunk)或者条带。如果该bit为1表示这块区域还没有重构,如果为零,表示该区域已经重构。如果bitmap中的有效位全部清零,表示整个故障盘已经重构完毕。Bitmap作为元数据保存到磁盘的元数据区。这种重构方式需要把磁盘的数据从头到尾都重构出来,耗时长且重构效率低。而且在重构过程中通常不进行数据读写,只有在RAID重构完成之后才允许数据读写,避免数据丢失。但这种方式会导致RAID重构及数据读写分别占用一个内存空间。
发明内容
基于此,有必要针对上述技术问题,提供一种独立冗余磁盘阵列数据组织方法、独立冗余磁盘阵列数据组织装置、计算机装置、服务器和存储介质,该数据组织形式利用重构的元数据实际为格式化元数据的子集的特性,利用格式化的元数据内存空间与数据形式进行重构,保证重构可以在线进行,尽可能的使得条带仅重构一次,格式化进行中允许进行读写操作,解决了目前在RAID重构完成之后才允许数据读写,会导致RAID重构及数据读写分别占用一个内存空间的技术问题。
一方面,提供一种独立冗余磁盘阵列数据组织方法,所述方法包括:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
依次将设置格式化完成标志的条带进行数据恢复。
在其中一个实施例中,对所述独立冗余磁盘阵列以条带为单位进行格式化的步骤,包括:
依次将设置待格式化标志的条带进行格式化,在位图中对进行格式化的条带修改为进行格式化标志;
响应于检测到条带完成格式化,则在位图中将进行格式化标志修改为格式化完成标志。
在其中一个实施例中,在依次将设置待格式化标志的条带进行格式化步骤中,还包括:
响应于检测到条带无法完成格式化,则在位图中将进行格式化标志修改为格式化完成标志,并设置存在故障标志。
在其中一个实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤中,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复;
响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志。
在其中一个实施例中,所述响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复步骤,包括:
在位图中将待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志。
在其中一个实施例中,所述响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志步骤,包括:
在位图中将具有故障标志的待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志,并删除故障标志。
在其中一个实施例中,在进行数据写操作时,包括:
识别待写入数据的条带在位图中的标志信息;
响应于检测到识别的标志信息为待格式化标志,则直接写入数据;
响应于检测到识别的标志信息为格式化完成标志,则直接写入数据;
响应于检测到识别的标志信息为进行格式化标志,则等待其标志信息修改为格式化完成标志后,进行写入数据;
响应于检测到识别的标志信息为待恢复标志及进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行写入数据。
在其中一个实施例中,在进行数据写操作时,包括:
响应于检测到所述独立冗余磁盘阵列的条带中未写入用户数据,则在位图中对未写入用户数据的条带设置未使用标志;
响应于检测到所述独立冗余磁盘阵列的条带中写入用户数据,则在位图中对写入用户数据的条带修改为已使用标志。
在其中一个实施例中,响应于检测到所述独立冗余磁盘阵列的条带中仅存在元数据,则判定在该条带中未写入用户数据;响应于检测到所述独立冗余磁盘阵列的条带中存在用户数据,则判定在该条带中写入用户数据。
在其中一个实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤中,响应于检测到识别的标志信息为格式化完成标志和存在故障标志后,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为未使用标志,则对所述条带重新写入元数据;
响应于检测到识别的标志信息为已使用标志,则通过重构算法进行数据恢复。
在其中一个实施例中,在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
在其中一个实施例中,在进行数据读操作时,包括步骤:
在位图中获取待读出数据的存储位置编号,根据所述存储位置编号获取对应的条带;
识别获取的条带在位图中的标志信息;
响应于检测到识别的标志信息为已使用标志和格式化完成标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和待格式化标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和进行格式化标志,则等待其标志信息修改为完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和待恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据。
在其中一个实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤之后,还包括:
删除所述独立冗余磁盘阵列的所有条带在位图中的恢复完成标志。
在其中一个实施例中,所述依次将设置待恢复标志的条带进行数据恢复步骤,包括:
以条带为单位进行调度,通过从头部到尾部的方式识别逐个条带在位图中的标志信息;
响应于检测到当前的条带具有格式化完成标志,则通过重构算法进行数据恢复,扫描下一个条带;否则直接扫描下一个条带。
另一方面,提供了一种独立冗余磁盘阵列数据组织装置,所述装置包括:
识别模块,用于获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
数据组织模块,用于对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
位图模块,用于响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
数据恢复模块,用于依次将设置格式化完成标志的条带进行数据恢复。
在其中一个实施例中,所述数据组织模块用于在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
在其中一个实施例中,所述数据组织模块包括控制器、驱动器;所述控制器配置所述驱动器作为成员,对所述独立冗余磁盘阵列启动后台格式化任务;所述识别模块用于在条带无法完成格式化时,判定对应的条带为故障条带;所述位图模块在位图中对故障条带设置存在故障标志。
另一方面,提供了一种服务器,其包括独立冗余磁盘阵列,所述独立冗余磁盘阵列在使用时实现以下步骤:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
依次将设置格式化完成标志的条带进行数据恢复。
又一方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
依次将设置格式化完成标志的条带进行数据恢复。
再一方面,提供了一种计算机装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现以下步骤:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
依次将设置格式化完成标志的条带进行数据恢复。
又一方面,提供了一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现以下步骤:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
依次将设置格式化完成标志的条带进行数据恢复。
上述独立冗余磁盘阵列数据组织方法、独立冗余磁盘阵列数据组织装置、计算机装置、服务器和存储介质,通过格式化进行中允许进行读写操作并优先进行读写条带的格式化工作,通过元数据进行记录避免重复的格式化,保证重构可以在线进行,满足服务器在线读写操作,且尽可能的使得条带仅重构一次,降低RAID的持久化内存空间占用。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中独立冗余磁盘阵列数据组织方法的应用环境图;
图2为一个实施例中独立冗余磁盘阵列数据组织方法的流程示意图;
图3为一个实施例中对所述独立冗余磁盘阵列以条带为单位进行格式化步骤的流程示意图;
图4为一个实施例中在依次将设置格式化完成标志的条带进行数据恢复步骤的流程示意图;
图5为一个实施例中响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复步骤的流程示意图;
图6为一个实施例中响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志步骤的流程示意图;
图7为一个实施例中在进行数据写操作时步骤的流程示意图;
图8为一个实施例中在进行数据恢复步骤中,响应于检测到识别的标志信息为格式化完成标志和存在故障标志时的流程示意图;
图9为一个实施例中依次将设置待恢复标志的条带进行数据恢复步骤的流程示意图;
图10为一个实施例中独立冗余磁盘阵列数据组织装置的结构框图;
图11为一个实施例中计算机装置的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应响应于检测到理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的独立冗余磁盘阵列数据组织方法,可以应用于如图1所示的应用环境中。其中,终端102通过网络与服务器104通过网络进行通信。其中,终端102可以但不限于是各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴装置,服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种独立冗余磁盘阵列数据组织方法,以该方法应用于图1中的服务器104为例进行说明,包括以下步骤:
步骤S1,获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
步骤S2,对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
步骤S3,响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
步骤S4,依次将设置格式化完成标志的条带进行数据恢复。
如图3所示,在本实施例中,对所述独立冗余磁盘阵列以条带为单位进行格式化的步骤,包括:
步骤S21,依次将设置待格式化标志的条带进行格式化,在位图中对进行格式化的条带修改为进行格式化标志;
步骤S22,响应于检测到条带完成格式化,则在位图中将进行格式化标志修改为格式化完成标志。
如图3所示,在本实施例中,在依次将设置待格式化标志的条带进行格式化步骤中,还包括:
步骤S23,响应于检测到条带无法完成格式化,则在位图中将进行格式化标志修改为格式化完成标志,并设置存在故障标志。
如图4所示,在本实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤中,还包括:
步骤S41,识别待进行数据恢复的条带在位图中的标志信息;
步骤S42,响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复;
步骤S43,响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志。
如图5所示,在本实施例中,所述响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复步骤,包括:
步骤S421,在位图中将待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
步骤S422,依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
步骤S423,响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志。
如图6所示,在本实施例中,所述响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志步骤,包括:
步骤S431,在位图中将具有故障标志的待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
步骤S432,依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
步骤S433,响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志,并删除故障标志。
在本实施例中,在进行数据写操作时,包括:
识别待写入数据的条带在位图中的标志信息;
响应于检测到识别的标志信息为待格式化标志,则直接写入数据;
响应于检测到识别的标志信息为格式化完成标志,则直接写入数据;
响应于检测到识别的标志信息为进行格式化标志,则等待其标志信息修改为格式化完成标志后,进行写入数据;
响应于检测到识别的标志信息为待恢复标志及进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行写入数据。
如图7所示,在本实施例中,在进行数据写操作时,包括:
步骤S11,响应于检测到所述独立冗余磁盘阵列的条带中未写入用户数据,则在位图中对未写入用户数据的条带设置未使用标志;
步骤S12,响应于检测到所述独立冗余磁盘阵列的条带中写入用户数据,则在位图中对写入用户数据的条带修改为已使用标志。
在本实施例中,响应于检测到所述独立冗余磁盘阵列的条带中仅存在元数据,则判定在该条带中未写入用户数据;响应于检测到所述独立冗余磁盘阵列的条带中存在用户数据,则判定在该条带中写入用户数据。
如图8所示,在本实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤中,响应于检测到识别的标志信息为格式化完成标志和存在故障标志后,还包括:
步骤S31,识别待进行数据恢复的条带在位图中的标志信息;
步骤S32,响应于检测到识别的标志信息为未使用标志,则对所述条带重新写入元数据;
步骤S33,响应于检测到识别的标志信息为已使用标志,则通过重构算法进行数据恢复。
在本实施例中,在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
在本实施例中,在进行数据读操作时,包括步骤:
在位图中获取待读出数据的存储位置编号,根据所述存储位置编号获取对应的条带;
识别获取的条带在位图中的标志信息;
响应于检测到识别的标志信息为已使用标志和格式化完成标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和待格式化标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和进行格式化标志,则等待其标志信息修改为完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和待恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据。
如图5、图6所示,在本实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤之后,还包括:
步骤S424,删除所述独立冗余磁盘阵列的所有条带在位图中的恢复完成标志。
如图9所示,在本实施例中,所述依次将设置待恢复标志的条带进行数据恢复步骤,包括:
步骤S51,以条带为单位进行调度,通过从头部到尾部的方式识别逐个条带在位图中的标志信息;
步骤S52,响应于检测到当前的条带具有格式化完成标志,则通过重构算法进行数据恢复,扫描下一个条带;否则直接扫描下一个条带。
上述独立冗余磁盘阵列数据组织方法中,通过格式化进行中允许进行读写操作并优先进行读写条带的格式化工作,通过元数据进行记录避免重复的格式化,保证重构可以在线进行,满足服务器在线读写操作,且尽可能的使得条带仅重构一次,降低RAID的持久化内存空间占用。
应该理解的是,虽然图2-图9的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-图9中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图10所示,提供了一种独立冗余磁盘阵列数据组织装置10,包括:识别模块1、数据组织模块2、位图模块3、数据恢复模块4。
所述识别模块1用于获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志。
所述数据组织模块2用于对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作。
所述位图模块3用于响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志。
所述数据恢复模块4,用于依次将设置格式化完成标志的条带进行数据恢复。
在本实施例中,对所述独立冗余磁盘阵列以条带为单位进行格式化的步骤,包括:
依次将设置待格式化标志的条带进行格式化,在位图中对进行格式化的条带修改为进行格式化标志;
响应于检测到条带完成格式化,则在位图中将进行格式化标志修改为格式化完成标志。
在本实施例中,所述数据组织模块2包括控制器、驱动器;所述控制器配置所述驱动器作为成员,对所述独立冗余磁盘阵列启动后台格式化任务;所述识别模块1用于在条带无法完成格式化时,判定对应的条带为故障条带;所述位图模块3在位图中对故障条带设置存在故障标志。
在本实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤中,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复;
响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志。
在本实施例中,所述响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复步骤,包括:
在位图中将待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志。
在本实施例中,所述响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志步骤,包括:
在位图中将具有故障标志的待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志,并删除故障标志。
在本实施例中,在进行数据写操作时,包括:
识别待写入数据的条带在位图中的标志信息;
响应于检测到识别的标志信息为待格式化标志,则直接写入数据;
响应于检测到识别的标志信息为格式化完成标志,则直接写入数据;
响应于检测到识别的标志信息为进行格式化标志,则等待其标志信息修改为格式化完成标志后,进行写入数据;
响应于检测到识别的标志信息为待恢复标志及进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行写入数据。
在本实施例中,在进行数据写操作时,包括:
响应于检测到所述独立冗余磁盘阵列的条带中未写入用户数据,则在位图中对未写入用户数据的条带设置未使用标志;
响应于检测到所述独立冗余磁盘阵列的条带中写入用户数据,则在位图中对写入用户数据的条带修改为已使用标志。
在本实施例中,响应于检测到所述独立冗余磁盘阵列的条带中仅存在元数据,则判定在该条带中未写入用户数据;响应于检测到所述独立冗余磁盘阵列的条带中存在用户数据,则判定在该条带中写入用户数据。
在本实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤中,响应于检测到识别的标志信息为格式化完成标志和存在故障标志后,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为未使用标志,则对所述条带重新写入元数据;
响应于检测到识别的标志信息为已使用标志,则通过重构算法进行数据恢复。
在本实施例中,所述数据组织模块2用于在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
在本实施例中,在进行数据读操作时,包括步骤:
在位图中获取待读出数据的存储位置编号,根据所述存储位置编号获取对应的条带;
识别获取的条带在位图中的标志信息;
响应于检测到识别的标志信息为已使用标志和格式化完成标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和待格式化标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和进行格式化标志,则等待其标志信息修改为完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和待恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据。
在本实施例中,在依次将设置格式化完成标志的条带进行数据恢复步骤之后,还包括:
删除所述独立冗余磁盘阵列的所有条带在位图中的恢复完成标志。
在本实施例中,所述依次将设置待恢复标志的条带进行数据恢复步骤,包括:
以条带为单位进行调度,通过从头部到尾部的方式识别逐个条带在位图中的标志信息;
响应于检测到当前的条带具有格式化完成标志,则通过重构算法进行数据恢复,扫描下一个条带;否则直接扫描下一个条带。
上述独立冗余磁盘阵列数据组织装置中,通过格式化进行中允许进行读写操作并优先进行读写条带的格式化工作,通过元数据进行记录避免重复的格式化,保证重构可以在线进行,满足服务器在线读写操作,且尽可能的使得条带仅重构一次,降低RAID的持久化内存空间占用。
关于独立冗余磁盘阵列数据组织装置的具体限定可以参见上文中对于独立冗余磁盘阵列数据组织方法的限定,在此不再赘述。上述独立冗余磁盘阵列数据组织装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机装置中的处理器中,也可以以软件形式存储于计算机装置中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机装置,该计算机装置可以是服务器,其内部结构图可以如图11所示。该计算机装置包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机装置的处理器用于提供计算和控制能力。该计算机装置的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机装置的数据库用于存储独立冗余磁盘阵列数据组织数据。该计算机装置的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种独立冗余磁盘阵列数据组织方法。
本领域技术人员可以理解,图11中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机装置的限定,具体的计算机装置可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现以下步骤:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
依次将设置格式化完成标志的条带进行数据恢复。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
对所述独立冗余磁盘阵列以条带为单位进行格式化的步骤,包括:
依次将设置待格式化标志的条带进行格式化,在位图中对进行格式化的条带修改为进行格式化标志;
响应于检测到条带完成格式化,则在位图中将进行格式化标志修改为格式化完成标志。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在依次将设置待格式化标志的条带进行格式化步骤中,还包括:
响应于检测到条带无法完成格式化,则在位图中将进行格式化标志修改为格式化完成标志,并设置存在故障标志。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在依次将设置格式化完成标志的条带进行数据恢复步骤中,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复;
响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
所述响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复步骤,包括:
在位图中将待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
所述响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志步骤,包括:
在位图中将具有故障标志的待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志,并删除故障标志。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在进行数据写操作时,包括:
识别待写入数据的条带在位图中的标志信息;
响应于检测到识别的标志信息为待格式化标志,则直接写入数据;
响应于检测到识别的标志信息为格式化完成标志,则直接写入数据;
响应于检测到识别的标志信息为进行格式化标志,则等待其标志信息修改为格式化完成标志后,进行写入数据;
响应于检测到识别的标志信息为待恢复标志及进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行写入数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在进行数据写操作时,包括:
响应于检测到所述独立冗余磁盘阵列的条带中未写入用户数据,则在位图中对未写入用户数据的条带设置未使用标志;
响应于检测到所述独立冗余磁盘阵列的条带中写入用户数据,则在位图中对写入用户数据的条带修改为已使用标志。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
响应于检测到所述独立冗余磁盘阵列的条带中仅存在元数据,则判定在该条带中未写入用户数据;响应于检测到所述独立冗余磁盘阵列的条带中存在用户数据,则判定在该条带中写入用户数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在依次将设置格式化完成标志的条带进行数据恢复步骤中,响应于检测到识别的标志信息为格式化完成标志和存在故障标志后,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为未使用标志,则对所述条带重新写入元数据;
响应于检测到识别的标志信息为已使用标志,则通过重构算法进行数据恢复。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在进行数据读操作时,包括步骤:
在位图中获取待读出数据的存储位置编号,根据所述存储位置编号获取对应的条带;
识别获取的条带在位图中的标志信息;
响应于检测到识别的标志信息为已使用标志和格式化完成标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和待格式化标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和进行格式化标志,则等待其标志信息修改为完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和待恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
在依次将设置格式化完成标志的条带进行数据恢复步骤之后,还包括:
删除所述独立冗余磁盘阵列的所有条带在位图中的恢复完成标志。
在一个实施例中,处理器执行计算机程序时还实现以下步骤:
所述依次将设置待恢复标志的条带进行数据恢复步骤,包括:
以条带为单位进行调度,通过从头部到尾部的方式识别逐个条带在位图中的标志信息;
响应于检测到当前的条带具有格式化完成标志,则通过重构算法进行数据恢复,扫描下一个条带;否则直接扫描下一个条带。
关于处理器执行计算机程序时实现步骤的具体限定可以参见上文中对于独立冗余磁盘阵列数据组织的方法的限定,在此不再赘述。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;
依次将设置格式化完成标志的条带进行数据恢复。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
对所述独立冗余磁盘阵列以条带为单位进行格式化的步骤,包括:
依次将设置待格式化标志的条带进行格式化,在位图中对进行格式化的条带修改为进行格式化标志;
响应于检测到条带完成格式化,则在位图中将进行格式化标志修改为格式化完成标志。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在依次将设置待格式化标志的条带进行格式化步骤中,还包括:
响应于检测到条带无法完成格式化,则在位图中将进行格式化标志修改为格式化完成标志,并设置存在故障标志。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在依次将设置格式化完成标志的条带进行数据恢复步骤中,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复;
响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
所述响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复步骤,包括:
在位图中将待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
所述响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志步骤,包括:
在位图中将具有故障标志的待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志,并删除故障标志。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在进行数据写操作时,包括:
识别待写入数据的条带在位图中的标志信息;
响应于检测到识别的标志信息为待格式化标志,则直接写入数据;
响应于检测到识别的标志信息为格式化完成标志,则直接写入数据;
响应于检测到识别的标志信息为进行格式化标志,则等待其标志信息修改为格式化完成标志后,进行写入数据;
响应于检测到识别的标志信息为待恢复标志及进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行写入数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在进行数据写操作时,包括:
响应于检测到所述独立冗余磁盘阵列的条带中未写入用户数据,则在位图中对未写入用户数据的条带设置未使用标志;
响应于检测到所述独立冗余磁盘阵列的条带中写入用户数据,则在位图中对写入用户数据的条带修改为已使用标志。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
响应于检测到所述独立冗余磁盘阵列的条带中仅存在元数据,则判定在该条带中未写入用户数据;响应于检测到所述独立冗余磁盘阵列的条带中存在用户数据,则判定在该条带中写入用户数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在依次将设置格式化完成标志的条带进行数据恢复步骤中,响应于检测到识别的标志信息为格式化完成标志和存在故障标志后,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为未使用标志,则对所述条带重新写入元数据;
响应于检测到识别的标志信息为已使用标志,则通过重构算法进行数据恢复。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在进行数据读操作时,包括步骤:
在位图中获取待读出数据的存储位置编号,根据所述存储位置编号获取对应的条带;
识别获取的条带在位图中的标志信息;
响应于检测到识别的标志信息为已使用标志和格式化完成标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和待格式化标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和进行格式化标志,则等待其标志信息修改为完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和待恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在依次将设置格式化完成标志的条带进行数据恢复步骤之后,还包括:
删除所述独立冗余磁盘阵列的所有条带在位图中的恢复完成标志。
在一个实施例中,计算机程序被处理器执行时还实现以下步骤:
所述依次将设置待恢复标志的条带进行数据恢复步骤,包括:
以条带为单位进行调度,通过从头部到尾部的方式识别逐个条带在位图中的标志信息;
响应于检测到当前的条带具有格式化完成标志,则通过重构算法进行数据恢复,扫描下一个条带;否则直接扫描下一个条带。
关于计算机程序被处理器执行时实现步骤的具体限定可以参见上文中对于独立冗余磁盘阵列数据组织的方法的限定,在此不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行,则可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink) DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应响应于检测到认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应响应于检测到指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出响应于检测到干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (17)
1.一种独立冗余磁盘阵列数据组织方法,其特征在于,包括:
获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
对所述独立冗余磁盘阵列以条带为单位进行格式化,依次将设置待格式化标志的条带进行格式化,在位图中对进行格式化的条带修改为进行格式化标志,并允许进行数据写操作;
响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;响应于检测到条带无法完成格式化,则在位图中将进行格式化标志修改为格式化完成标志,并设置存在故障标志;
依次将设置格式化完成标志的条带进行数据恢复,其包括:识别待进行数据恢复的条带在位图中的标志信息;响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复;响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志。
2.根据权利要求1所述的独立冗余磁盘阵列数据组织方法,其特征在于,所述响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复步骤,包括:
在位图中将待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志。
3.根据权利要求1所述的独立冗余磁盘阵列数据组织方法,其特征在于,所述响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志步骤,包括:
在位图中将具有故障标志的待进行数据恢复的条带的格式化完成标志修改为待恢复标志;
依次将设置待恢复标志的条带进行数据恢复,在位图中对进行数据恢复的条带修改为进行恢复标志;
响应于检测到条带完成数据恢复,则在位图中对数据恢复后的条带修改为恢复完成标志,并删除故障标志。
4.根据权利要求2或3所述的独立冗余磁盘阵列数据组织方法,其特征在于,在进行数据写操作时,包括:
识别待写入数据的条带在位图中的标志信息;
响应于检测到识别的标志信息为待格式化标志,则直接写入数据;
响应于检测到识别的标志信息为格式化完成标志,则直接写入数据;
响应于检测到识别的标志信息为进行格式化标志,则等待其标志信息修改为格式化完成标志后,进行写入数据;
响应于检测到识别的标志信息为待恢复标志及进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行写入数据。
5.根据权利要求4所述的独立冗余磁盘阵列数据组织方法,其特征在于,在进行数据写操作时,包括:
响应于检测到所述独立冗余磁盘阵列的条带中未写入用户数据,则在位图中对未写入用户数据的条带设置未使用标志;
响应于检测到所述独立冗余磁盘阵列的条带中写入用户数据,则在位图中对写入用户数据的条带修改为已使用标志。
6.根据权利要求5所述的独立冗余磁盘阵列数据组织方法,其特征在于,响应于检测到所述独立冗余磁盘阵列的条带中仅存在元数据,则判定在该条带中未写入用户数据;响应于检测到所述独立冗余磁盘阵列的条带中存在用户数据,则判定在该条带中写入用户数据。
7.根据权利要求6所述的独立冗余磁盘阵列数据组织方法,其特征在于,在依次将设置格式化完成标志的条带进行数据恢复步骤中,响应于检测到识别的标志信息为格式化完成标志和存在故障标志后,还包括:
识别待进行数据恢复的条带在位图中的标志信息;
响应于检测到识别的标志信息为未使用标志,则对所述条带重新写入元数据;
响应于检测到识别的标志信息为已使用标志,则通过重构算法进行数据恢复。
8.根据权利要求7所述的独立冗余磁盘阵列数据组织方法,其特征在于,在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
9.根据权利要求8所述的独立冗余磁盘阵列数据组织方法,其特征在于,在进行数据读操作时,包括步骤:
在位图中获取待读出数据的存储位置编号,根据所述存储位置编号获取对应的条带;
识别获取的条带在位图中的标志信息;
响应于检测到识别的标志信息为已使用标志和格式化完成标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和待格式化标志,则直接读取数据;
响应于检测到识别的标志信息为已使用标志和进行格式化标志,则等待其标志信息修改为完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和待恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据;
响应于检测到识别的标志信息为已使用标志和进行恢复标志,则等待其标志信息修改为恢复完成标志后,进行读取数据。
10.根据权利要求2或3所述的独立冗余磁盘阵列数据组织方法,其特征在于,在依次将设置格式化完成标志的条带进行数据恢复步骤之后,还包括:
删除所述独立冗余磁盘阵列的所有条带在位图中的恢复完成标志。
11.根据权利要求2或3所述的独立冗余磁盘阵列数据组织方法,其特征在于,所述依次将设置待恢复标志的条带进行数据恢复步骤,包括:
以条带为单位进行调度,通过从头部到尾部的方式识别逐个条带在位图中的标志信息;
响应于检测到当前的条带具有格式化完成标志,则通过重构算法进行数据恢复,扫描下一个条带;否则直接扫描下一个条带。
12.一种独立冗余磁盘阵列数据组织装置,其特征在于,所述装置包括:
识别模块,用于获取所述独立冗余磁盘阵列的所有条带,在每一条带对应的位图上设置待格式化标志;
数据组织模块,用于对所述独立冗余磁盘阵列以条带为单位进行格式化,依次将设置待格式化标志的条带进行格式化,在位图中对进行格式化的条带修改为进行格式化标志,并允许进行数据写操作;
位图模块,用于响应于检测到设置待格式化标志的条带完成格式化,则在位图中对完成格式化的条带修改为格式化完成标志;响应于检测到条带无法完成格式化,则在位图中将进行格式化标志修改为格式化完成标志,并设置存在故障标志;
数据恢复模块,用于依次将设置格式化完成标志的条带进行数据恢复,其包括:识别待进行数据恢复的条带在位图中的标志信息;响应于检测到识别的标志信息为格式化完成标志,则对所述独立冗余磁盘阵列以条带为单位进行数据恢复;响应于检测到识别的标志信息为格式化完成标志和存在故障标志,则通过重构算法进行数据恢复并删除该条带的故障标志。
13.根据权利要求12所述的独立冗余磁盘阵列数据组织装置,其特征在于,所述数据组织模块用于在对所述独立冗余磁盘阵列以条带为单位进行格式化时,允许进行数据读操作。
14.根据权利要求12所述的独立冗余磁盘阵列数据组织装置,其特征在于,所述数据组织模块包括控制器、驱动器;所述控制器配置所述驱动器作为成员,对所述独立冗余磁盘阵列启动后台格式化任务;所述识别模块用于在条带无法完成格式化时,判定对应的条带为故障条带;所述位图模块在位图中对故障条带设置存在故障标志。
15.一种服务器,其特征在于,包括独立冗余磁盘阵列,所述独立冗余磁盘阵列在使用时实现权利要求1至11中任一项所述方法的步骤。
16.一种计算机装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至11中任一项所述方法的步骤。
17.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至11中任一项所述的方法的步骤。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211507733.5A CN115543217B (zh) | 2022-11-29 | 2022-11-29 | 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 |
PCT/CN2023/134448 WO2024114599A1 (zh) | 2022-11-29 | 2023-11-27 | 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211507733.5A CN115543217B (zh) | 2022-11-29 | 2022-11-29 | 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115543217A CN115543217A (zh) | 2022-12-30 |
CN115543217B true CN115543217B (zh) | 2023-03-14 |
Family
ID=84722110
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211507733.5A Active CN115543217B (zh) | 2022-11-29 | 2022-11-29 | 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN115543217B (zh) |
WO (1) | WO2024114599A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115543217B (zh) * | 2022-11-29 | 2023-03-14 | 苏州浪潮智能科技有限公司 | 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 |
CN116991328B (zh) * | 2023-09-25 | 2024-01-16 | 苏州元脑智能科技有限公司 | 磁盘阵列的卷格式化控制方法、装置、系统、设备及介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5655344B2 (ja) * | 2010-03-31 | 2015-01-21 | 富士通株式会社 | ストレージ装置、ストレージ装置制御プログラムおよびストレージ装置制御方法 |
CN107229422B (zh) * | 2017-05-31 | 2020-05-26 | 苏州浪潮智能科技有限公司 | 数据处理方法和装置 |
CN108874321A (zh) * | 2018-06-29 | 2018-11-23 | 郑州云海信息技术有限公司 | 一种独立冗余磁盘阵列数据重构方法、装置及设备 |
CN110187830A (zh) * | 2019-04-22 | 2019-08-30 | 中国科学院计算技术研究所 | 一种加速磁盘阵列重建的方法及系统 |
CN114995771B (zh) * | 2022-08-02 | 2022-12-13 | 苏州浪潮智能科技有限公司 | 独立磁盘冗余阵列格式化调度方法、装置、设备及介质 |
CN115309348B (zh) * | 2022-10-11 | 2023-03-10 | 苏州浪潮智能科技有限公司 | 元数据的管理方法、装置和计算机设备和存储介质 |
CN115543217B (zh) * | 2022-11-29 | 2023-03-14 | 苏州浪潮智能科技有限公司 | 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 |
-
2022
- 2022-11-29 CN CN202211507733.5A patent/CN115543217B/zh active Active
-
2023
- 2023-11-27 WO PCT/CN2023/134448 patent/WO2024114599A1/zh unknown
Also Published As
Publication number | Publication date |
---|---|
WO2024114599A1 (zh) | 2024-06-06 |
CN115543217A (zh) | 2022-12-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN115543217B (zh) | 独立冗余磁盘阵列数据组织方法、装置、服务器和介质 | |
CN110704337B (zh) | 基于固态硬盘的映射表重建方法、装置和计算机设备 | |
US10572335B2 (en) | Metadata recovery method and apparatus | |
CN115309348B (zh) | 元数据的管理方法、装置和计算机设备和存储介质 | |
CN112632643A (zh) | 防止闪存数据丢失的方法、固态硬盘控制器、固态硬盘 | |
US9098396B2 (en) | Enhancement of efficiency in power failure handling in flash memory | |
TWI779707B (zh) | 用於快閃記憶體中進行故障區塊管理的方法與裝置 | |
US20230385155A1 (en) | Data Snapshot Method and Apparatus, Computer Device, and Storage Medium | |
CN111581024A (zh) | Ssd日志的动态备份恢复方法、装置和计算机设备 | |
CN113741811A (zh) | 一种存储系统的磁盘阵列的重构方法、系统、设备及介质 | |
CN115543215B (zh) | 数据写操作、数据读操作方法、装置 | |
CN111897495B (zh) | 提高ssd写性能的实现方法、装置、计算机设备及存储介质 | |
CN115359828A (zh) | 一种服务器固件刷新方法、装置、终端及存储介质 | |
CN115291803A (zh) | 磁盘阵列重构方法、装置和计算机设备和存储介质 | |
CN115878041A (zh) | 固态硬盘raid写性能提升的实现方法、装置和计算机设备 | |
CN108874318A (zh) | 固态硬盘的数据恢复方法以及固态硬盘 | |
CN111581007A (zh) | Ssd上电后快速重建响应方法、装置和计算机设备 | |
CN113312309B (zh) | 快照链的管理方法、装置和存储介质 | |
CN109960611B (zh) | 数据恢复的方法、装置、电子设备及机器可读存储介质 | |
CN110389724B (zh) | 基于固态硬盘的parity page识别方法和装置 | |
CN112596679B (zh) | 固态硬盘的raid实现方法、装置、计算机设备及存储介质 | |
CN111090542A (zh) | 基于异常掉电的异常块识别方法、装置及计算机设备 | |
CN111522679A (zh) | 基于主机内存的ssd日志记录方法、系统和计算机设备 | |
CN110795275A (zh) | 基于异常掉电过程中的异常块识别方法和装置 | |
CN114047880B (zh) | 多Pass编程的NAND写入功耗优化方法、装置及计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |