CN106843765A - 一种磁盘管理方法及装置 - Google Patents
一种磁盘管理方法及装置 Download PDFInfo
- Publication number
- CN106843765A CN106843765A CN201710047035.4A CN201710047035A CN106843765A CN 106843765 A CN106843765 A CN 106843765A CN 201710047035 A CN201710047035 A CN 201710047035A CN 106843765 A CN106843765 A CN 106843765A
- Authority
- CN
- China
- Prior art keywords
- disk
- storage address
- managed
- service data
- address
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000007726 management method Methods 0.000 title claims abstract description 26
- 238000000034 method Methods 0.000 claims abstract description 71
- 230000008569 process Effects 0.000 claims abstract description 60
- 238000010276 construction Methods 0.000 claims description 3
- 238000001514 detection method Methods 0.000 claims description 2
- 239000002184 metal Substances 0.000 description 5
- 230000004044 response Effects 0.000 description 5
- 230000000717 retained effect Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/0674—Disk device
- G06F3/0676—Magnetic disk device
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种磁盘管理方法及装置,方法包括:预先设置缓存单元;接收并解析访问请求,以获取业务数据及存储地址,并将业务数据及存储地址存储至缓存单元;确定缓存单元中存储的存储地址的当前数量,在当前数量达到预设数量时,检测是否存在重建进程重建待管理磁盘;当存在重建进程重建待管理磁盘时,对重建进程进行挂起处理,并确定待管理磁盘中正在重建的数据对应的重建区域;从各个存储地址中,确定出至少一个距离重建区域的地址偏移量不大于预设阈值的目标存储地址;将各个目标存储地址分别对应的业务数据写入待管理磁盘,并重启重建进程。通过本发明的技术方案,可提高磁盘重建效率。
Description
技术领域
本发明涉及计算机技术领域,特别涉及一种磁盘管理方法及装置。
背景技术
为了提高业务数据的安全性,通常采用冗余磁盘阵列存储业务数据,当存储业务数据的磁盘故障时,可根据冗余磁盘阵列中未发生故障的磁盘中存储的数据将故障磁盘中存储的业务数据重建至一块新的磁盘中。为了确保上层应用能够正常使用磁盘,在磁盘重建过程中,内部重建请求和上层应用提供的业务数据需要共享磁盘带宽。
目前,在磁盘的各个存储地址下分别写入对应的业务数据时,通常根据接收各个业务数据的时间顺序,依次将各个业务数据写入对应的存储地址。但是,当磁盘处于重建状态,且重建区域和各个存储地址之间的位置距离较远时,磁头在重建区域以及各个存储地址之间发生移动,需要占用较长的响应时间,使得磁盘无法在较短的时间内完成重建,磁盘重建效率极低。
发明内容
本发明实施例提供了一种磁盘管理方法及装置,可提高磁盘重建的效率。
第一方面,本发明提供了一种磁盘管理方法,包括:
预先设置缓存单元;
接收并解析访问请求,以获取业务数据及存储地址,并将所述业务数据及存储地址存储至所述缓存单元;
确定所述缓存单元中存储的所述存储地址的当前数量,在所述当前数量达到预设数量时,检测是否存在重建进程重建待管理磁盘;
当存在重建进程重建所述待管理磁盘时,对所述重建进程进行挂起处理,并确定所述待管理磁盘中正在重建的数据对应的重建区域;
从各个所述存储地址中,确定出至少一个距离所述重建区域的地址偏移量不大于预设阈值的目标存储地址;
将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,并重启所述重建进程。
优选地,
所述将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,包括:
按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列;
根据所述第一顺序队列,依次将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘。
优选地
当不存在重建进程重建所述待管理磁盘时,利用各个所述存储地址形成第二顺序队列;
根据所述第二顺序队列,依次将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中。
优选地,
所述待管理磁盘包括:设定数量个独立存储区域,且每一个所述存储区域分别对应一个顺序号;
所述存储地址,包括:顺序号。
优选地,
所述独立存储区域的大小,包括:128K;
和/或,
所述预设阈值,包括:800。
第二方面,本发明实施例提供了一种磁盘管理装置,包括:
设置模块,用于预先设置缓存单元;
缓存处理模块,用于接收并解析访问请求,以获取业务数据及存储地址,并将所述业务数据及存储地址存储至所述缓存单元;
检测模块,用于确定所述缓存单元中存储的所述存储地址的当前数量,在所述当前数量达到预设数量时,检测是否存在重建进程重建待管理磁盘;
重建处理模块,用于当存在重建进程重建所述待管理磁盘时,对所述重建进程进行挂起处理,并确定所述待管理磁盘中正在重建的数据对应的重建区域;
确定模块,用于从各个所述存储地址中,确定出至少一个距离所述重建区域的地址偏移量不大于预设阈值的目标存储地址;
第一数据处理模块,用于将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,并重启所述重建进程。
优选地,
所述第一数据处理模块,包括:队列构建单元和数据处理单元;其中,
所述队列构建单元,用于按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列;
所述数据处理单元,用于根据所述第一顺序队列,依次将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘。
优选地,
还包括:队列构建模块和第二数据处理模块,其中,
所述队列构建模块,用于当不存在重建进程重建所述待管理磁盘时,利用各个所述存储地址形成第二顺序队列;
所述第二数据处理模块,用于根据所述第二顺序队列,依次将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中。
第三方面,本发明实施例提供了一种可读介质,包括执行指令,当存储控制器的处理器执行所述执行指令时,所述存储控制器执行第一方面中任一项所述的方法。
第四方面,本发明实施例提供了一种存储控制器,包括:处理器、存储器和总线;
所述处理器和所述存储器通过所述总线连接;
所述存储器,当所述存储控制器运行时,所述处理器执行所述存储器存储的所述执行指令,以使所述存储控制器执行第一方面中任一项所述的方法。
本发明实施例提供了一种磁盘管理方法及装置,通过缓存单元缓存多个业务数据及每一个业务数据分别对应的存储地址,当存在重建进程正在重建待管理磁盘时,对重建进程进行挂起处理,并确定出正在重建的数据对应的重建区域,然后从缓存单元存储的各个存储地址中确定出至少一个距离重建区域的地址偏移量不大于预设阈值的目标存储地址,进而将各个目标存储地址分别对应的业务数据写入待管理磁盘,然后再重启重建进程。如此,通过将缓存单元存储的多个业务数据中,距离重建区域较近的各个目标存储地址分别对应的业务数据优先写入磁盘,磁头在重建区域以及各个目标存储地址之间发生移动,移动距离较近,不会占用较长的响应时间,可提高磁盘重建效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一实施例提供的一种磁盘管理方法的流程图;
图2是本发明一实施例提供的另一种磁盘管理方法的流程图;
图3是本发明一实施例提供的一种磁盘管理装置的结构示意图;
图4是本发明一实施例提供的磁盘管理装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例,基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本发明实施例提供了一种磁盘管理方法,包括:
步骤101,预先设置缓存单元;
步骤102,接收并解析访问请求,以获取业务数据及存储地址,并将所述业务数据及存储地址存储至所述缓存单元;
步骤103,确定所述缓存单元中存储的所述存储地址的当前数量,在所述当前数量达到预设数量时,检测是否存在重建进程重建待管理磁盘;
步骤104,当存在重建进程重建所述待管理磁盘时,对所述重建进程进行挂起处理,并确定所述待管理磁盘中正在重建的数据对应的重建区域;
步骤105,从各个所述存储地址中,确定出至少一个距离所述重建区域的地址偏移量不大于预设阈值的目标存储地址;
步骤106,将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,并重启所述重建进程。
本发明上述实施例中,通过缓存单元缓存多个业务数据及每一个业务数据分别对应的存储地址,当存在重建进程正在重建待管理磁盘时,对重建进程进行挂起处理,并确定出正在重建的数据对应的重建区域,然后从缓存单元存储的各个存储地址中确定出至少一个距离重建区域的地址偏移量不大于预设阈值的目标存储地址,进而将各个目标存储地址分别对应的业务数据写入待管理磁盘,然后再重启重建进程。如此,通过将缓存单元存储的多个业务数据中,距离重建区域较近的各个目标存储地址分别对应的业务数据优先写入磁盘,磁头在重建区域以及各个目标存储地址之间发生移动,移动距离较近,不会占用较长的响应时间,可提高磁盘重建效率。
相应的,当缓存单元中存储的预设数量n个业务数据中,仅存在m(m为小于n的整数)个业务数据对应的存储地址与重建区域之间的地址偏移量不大于预设阈值时,剩余的n-m个业务数据可继续保留在缓存单元中,m个业务数据及对应的目标存储地址可作清除处理。如此,直到缓存单元中累计的业务数据或存储地址的个数再次达到预设数量时,执行与上述步骤103至步骤106的技术方案,直到检测出不存在重建进程重建待管理磁盘时,才以相应的处理规则将缓存单元中存储的各个业务数据全部写入磁盘。
具体地,当检测出不存在重建进程重建待管理磁盘时,为了节约移动磁头时占用的时间开销,具体可以通过如下方式实现将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中:利用各个所述存储地址形成第二顺序队列;根据所述第二顺序队列,依次将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中。
同时,所述待管理磁盘可以包括:设定数量个独立存储区域,且每一个所述存储区域分别对应一个顺序号;所述存储地址,包括:顺序号。
例如,缓存单元中存储有业务数据A、业务数据B和业务数据C,存储区域有6个独立存储区域,其顺序号分别为1-6,且三个业务数据A、B、C分别对应的存储地址为顺序号1、顺序号6和顺序号3,则根据其顺序号,将业务数据A-业务数据C-业务数据B依次写入待管理磁盘中,磁头根据此顺序,从顺序号1对应的独立存储区域移动至顺序号3对应的独立存储区域,然后再移动至顺序号6对应的独立存储区域,从而使磁头移动距离最短,节约移动磁头时占用的时间开销,提高数据处理速度。
进一步的,为了避免磁头在各个目标存储地址之间发生往复运动,进一步节约移动磁头时占用的时间开销,以进一步提高磁盘重建效率,本发明一个实施例中,步骤106的具体实施方式,可以包括:
按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列;
根据所述第一顺序队列,依次将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘。
这里以待管理磁盘包括设定数量个独立存储区域,且每一个独立存储区域分别对应一个顺序号;且存储地址包括顺序号为例。举例来说,待管理磁盘中设定有20个独立存储区域,其中,第10个独立存储区域为重建区域,在缓存单元中,业务数据包括:业务数据A、业务数据B、业务数据C、业务数据D和业务数据E,其分别对应的存储地址为顺序号17、顺序号7、顺序号5、顺序号13和顺序号6,这里以预设位置为5进行举例,则目标存储地址包括:顺序号7、顺序号5、顺序号13和顺序号6,根据各个目标存储地址的地址先后顺序,形成第一顺序队列为:业务数据C-业务数据E-业务数据B-业务数据D,在根据此顺序队列依次将各个业务数据写入待管理磁盘时,磁头根据此顺序,从重建区域出发,在按照对应顺序号顺序为5-6-7-13的各个独立存储区域中顺序移动,从而避免磁头在各个目标存储地址之间发生往复运动,进一步节约移动磁头时占用的时间开销,进而进一步提高了磁盘重建效率。应当理解的是,业务数据A及其对应的存储地址(顺序号17)可暂时保留在缓存单元中,业务数据B、业务数据C、业务数据D和业务数据E及其分别对应的存储地址均可做删除处理。
应当理解的是,每一个独立存储区域的大小可结合实际业务需求进行合理设置,比如,各个独立存储区域的大小均设置为128K,或各个独立存储区域的大小均设置为256K。
应当理解的是,预设阈值也可根据实际业务需求进行合理设置,比如将预设阈值设置为800。
为了更加清楚的说明本发明的技术方案及优点,如图2所示,本发明实施例提供了一种磁盘管理方法,该方法可以包括以下步骤:
步骤201,设置缓存单元。
步骤202,接收并解析访问请求,以获取业务数据及存储地址,并将业务数据及存储地址存储至缓存单元。
本发明实施例以待管理磁盘被划分为20个独立存储区域,每一个独立村存储区域按照地址先后顺序分别对应一个顺序号为例,则当前业务数据对应的存储地址为当前业务数据被写入待管理磁盘时对应的独立存储区域的顺序号。
举例来说,依次接收五个访问请求,对每一个访问请求分别进行解析后,可获取到业务数据A、业务数据B、业务数据C、业务数据D和业务数据E,且业务数据A对应的存储地址为顺序号10、业务数据B对应的存储地址为顺序号5、业务数据C对应的存储地址为顺序号3、业务数据D对应的存储地址为顺序号7、业务数据E对应的存储地址为顺序号8。
步骤203,确定缓存单元中存储的存储地址的当前数量。
步骤204,判断所述当前数量是否不小于预设数量,如果是,则执行步骤205,否则执行步骤202。
本发明实施例以设定数量是5为例。
步骤205,判断是否存在重建进程重建待管理磁盘,如果是,则执行步骤206,否则执行步骤210。
步骤206,对重建进程进行挂起处理,并确定待管理磁盘中正在重建的数据对应的重建区域。
本发明实施例以重建区域为对应的独立存储区域的顺序号是4为例。
步骤207,从各个所述存储地址中,确定出至少一个距离所述重建区域的地址偏移量不大于预设阈值的目标存储地址。
本发明实施例以预设阈值为3个顺序号为例,则可确定出偏移量不大于3个顺序的各个目标存储地址分别为:顺序号3、顺序号5、顺序号7。
应当理解的是,本发明实施例为了方便举例说明,仅以预设阈值为3个顺序号为例,在实际业务场景中,可结合实际业务需求进行合理设置,比如,预设阈值为800。
步骤208,按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列。
即按照顺序号的大小顺序,形成第一顺序队列为:顺序号3-顺序号5-和顺序号7。
步骤209,根据第一顺序队列,依次将各个目标存储地址分别对应的业务数据写入所述待管理磁盘,并重启所述重建进程。
这里,即依次将顺序号3对应的业务数据C、顺序号5对应的业务数据B和顺序号7对应的业务数据D写入待管理磁盘中顺序号3、顺序号5和顺序号7分别对应的独立存储区域中。
之后,则可删除缓存单元中业务数据C、B、D及其对应的存储地址。
步骤210,利用各个存储地址形成第二顺序队列,并根据第二顺序队列,依次将各个存储地址分别对应的业务数据写入待管理磁盘中。
举例来说,可形成第一顺序队列为:顺序号3、顺序号5、顺序号7、顺序号8、顺序号10。磁头依次在顺序号3、顺序号5、顺序号7、顺序号8、顺序号10之间移动以将业务数据C、业务数据B、业务数据D、业务数据E和业务数据A写入待管理磁盘中对应顺序号分别为顺序号3、顺序号5、顺序号7、顺序号8、顺序号10的独立存储区域。
如图3所示,本发明实施例提供了一种磁盘管理装置,包括:
设置模块301,用于预先设置缓存单元;
缓存处理模块302,用于接收并解析访问请求,以获取业务数据及存储地址,并将所述业务数据及存储地址存储至所述缓存单元;
检测模块303,用于确定所述缓存单元中存储的所述存储地址的当前数量,在所述当前数量达到预设数量时,检测是否存在重建进程重建待管理磁盘;
重建处理模块304,用于当存在重建进程重建所述待管理磁盘时,对所述重建进程进行挂起处理,并确定所述待管理磁盘中正在重建的数据对应的重建区域;
确定模块305,用于从各个所述存储地址中,确定出至少一个距离所述重建区域的地址偏移量不大于预设阈值的目标存储地址;
第一数据处理模块306,用于将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,并重启所述重建进程。
上述实施例中,通过缓存单元缓存多个业务数据及每一个业务数据分别对应的存储地址,当存在重建进程正在重建待管理磁盘时,对重建进程进行挂起处理,并确定出正在重建的数据对应的重建区域,然后从缓存单元存储的各个存储地址中确定出至少一个距离重建区域的地址偏移量不大于预设阈值的目标存储地址,进而将各个目标存储地址分别对应的业务数据写入待管理磁盘,然后再重启重建进程。如此,通过将缓存单元存储的多个业务数据中,距离重建区域较近的各个目标存储地址分别对应的业务数据优先写入磁盘,磁头在重建区域以及各个目标存储地址之间发生移动,移动距离较近,不会占用较长的响应时间,可提高磁盘重建效率。
相应的,当缓存单元中存储的预设数量n个业务数据中,仅存在m(m为小于n的整数)个业务数据对应的存储地址与重建区域之间的地址偏移量不大于预设阈值时,剩余的n-m个业务数据可继续保留在缓存单元中,m个业务数据及对应的目标存储地址可作清除处理。如此,直到缓存单元中累计的业务数据或存储地址的个数再次达到预设数量时,执行与上述步骤103至步骤106的技术方案,直到检测出不存在重建进程重建待管理磁盘时,才以相应的处理规则将缓存单元中存储的各个业务数据全部写入磁盘。
具体地,如图4所示,当检测出不存在重建进程重建待管理磁盘时,为了节约移动磁头时占用的时间开销,该磁盘管理装置可进一步包括:队列构建模块401和第二数据处理模块402,其中,
所述队列构建模块401,用于当不存在重建进程重建所述待管理磁盘时,利用各个所述存储地址形成第二顺序队列;
所述第二数据处理模块402,用于根据所述第二顺序队列,依次将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中。
同时,所述待管理磁盘可以包括:设定数量个独立存储区域,且每一个所述存储区域分别对应一个顺序号;所述存储地址,包括:顺序号。
例如,缓存单元中存储有业务数据A、业务数据B和业务数据C,存储区域有6个独立存储区域,其顺序号分别为1-6,且三个业务数据A、B、C分别对应的存储地址为顺序号1、顺序号6和顺序号3,则根据其顺序号,将业务数据A-业务数据C-业务数据B依次写入待管理磁盘中,磁头根据此顺序,从顺序号1对应的独立存储区域移动至顺序号3对应的独立存储区域,然后再移动至顺序号6对应的独立存储区域,从而使磁头移动距离最短,节约移动磁头时占用的时间开销,提高数据处理速度。
进一步的,为了避免磁头在各个目标存储地址之间发生往复运动,进一步节约移动磁头时占用的时间开销,以进一步提高磁盘重建效率,本发明一个实施例中,所述第一数据处理模块306,包括:队列构建单元(附图中未示出)和数据处理单元(附图中未示出);其中,
所述队列构建单元,用于按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列;
所述数据处理单元,用于根据所述第一顺序队列,依次将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘。
这里以待管理磁盘包括设定数量个独立存储区域,且每一个独立存储区域分别对应一个顺序号;且存储地址包括顺序号为例。举例来说,待管理磁盘中设定有20个独立存储区域,其中,第10个独立存储区域为重建区域,在缓存单元中,业务数据包括:业务数据A、业务数据B、业务数据C、业务数据D和业务数据E,其分别对应的存储地址为顺序号17、顺序号7、顺序号5、顺序号13和顺序号6,这里以预设位置为5进行举例,则目标存储地址包括:顺序号7、顺序号5、顺序号13和顺序号6,根据各个目标存储地址的地址先后顺序,形成第一顺序队列为:业务数据C-业务数据E-业务数据B-业务数据D,在根据此顺序队列依次将各个业务数据写入待管理磁盘时,磁头根据此顺序,从重建区域出发,在按照对应顺序号顺序为5-6-7-13的各个独立存储区域中顺序移动,从而避免磁头在各个目标存储地址之间发生往复运动,进一步节约移动磁头时占用的时间开销,进而进一步提高了磁盘重建效率。应当理解的是,业务数据A及其对应的存储地址(顺序号17)可暂时保留在缓存单元中,业务数据B、业务数据C、业务数据D和业务数据E及其分别对应的存储地址均可做删除处理。
进一步节约移动磁头时占用的时间开销,进而进一步提高了磁盘重建效率。
上述装置内的各单元之间的信息交互、执行过程等内容,由于与本发明方法实施例基于同一构思,具体内容可参见本发明方法实施例中的叙述,此处不再赘述。
另外,本发明实施例提供了一种可读介质,包括执行指令,当存储控制器的处理器执行所述执行指令时,所述存储控制器执行本发明任一实施例提供的磁盘管理方法。
本发明实施例还提供了一种存储控制器,包括:处理器、存储器和总线;
所述处理器和所述存储器通过所述总线连接;
所述存储器,当所述存储控制器运行时,所述处理器执行所述存储器存储的所述执行指令,以使所述存储控制器执行本发明任一实施例提供的磁盘管理方法。
综上所述,本发明各个实施例至少具有如下有益效果:
1、本发明一实施例中,通过缓存单元缓存多个业务数据及每一个业务数据分别对应的存储地址,当存在重建进程正在重建待管理磁盘时,对重建进程进行挂起处理,并确定出正在重建的数据对应的重建区域,然后从缓存单元存储的各个存储地址中确定出至少一个距离重建区域的地址偏移量不大于预设阈值的目标存储地址,进而将各个目标存储地址分别对应的业务数据写入待管理磁盘,然后再重启重建进程。如此,通过将缓存单元存储的多个业务数据中,距离重建区域较近的各个目标存储地址分别对应的业务数据优先写入磁盘,磁头在重建区域以及各个目标存储地址之间发生移动,移动距离较近,不会占用较长的响应时间,可提高磁盘重建效率。
2、本发明一实施例中,按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列,并根据所述第一顺序队列,依次将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘。从而避免磁头在各个目标存储地址之间发生往复运动,节约移动磁头时占用的时间开销,进一步提高了磁盘重建效率。
3、本发明一实施例中,当检测出不存在重建进程重建待管理磁盘时,利用各个所述存储地址形成第二顺序队列,并根据所述第二顺序队列,依次将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中,从而使磁头移动距离最短,节约移动磁头时占用的时间开销,提高数据处理速度。
需要说明的是,在本文中,诸如第一和第二之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个······”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同因素。
最后需要说明的是:以上所述仅为本发明的较佳实施例,仅用于说明本发明的技术方案,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所做的任何修改、等同替换、改进等,均包含在本发明的保护范围内。
Claims (10)
1.一种磁盘管理方法,其特征在于,预先设置缓存单元,包括:
接收并解析访问请求,以获取业务数据及存储地址,并将所述业务数据及存储地址存储至所述缓存单元;
确定所述缓存单元中存储的所述存储地址的当前数量,在所述当前数量达到预设数量时,检测是否存在重建进程重建待管理磁盘;
当存在重建进程重建所述待管理磁盘时,对所述重建进程进行挂起处理,并确定所述待管理磁盘中正在重建的数据对应的重建区域;
从各个所述存储地址中,确定出至少一个距离所述重建区域的地址偏移量不大于预设阈值的目标存储地址;
将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,并重启所述重建进程。
2.根据权利要求1所述的磁盘管理方法,其特征在于,
所述将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,包括:
按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列;
根据所述第一顺序队列,依次将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘。
3.根据权利要求1所述的磁盘管理方法,其特征在于,还包括:
当不存在重建进程重建所述待管理磁盘时,利用各个所述存储地址形成第二顺序队列;
根据所述第二顺序队列,依次将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中。
4.根据权利要求1所述的磁盘管理方法,其特征在于,
所述待管理磁盘包括:设定数量个独立存储区域,且每一个所述存储区域分别对应一个顺序号;
所述存储地址,包括:顺序号。
5.根据权利要求4中所述的磁盘管理方法,其特征在于,
所述独立存储区域的大小,包括:128K;
和/或,
所述预设阈值,包括:800。
6.一种磁盘管理装置,其特征在于,包括:
设置模块,用于预先设置缓存单元;
缓存处理模块,用于接收并解析访问请求,以获取业务数据及存储地址,并将所述业务数据及存储地址存储至所述缓存单元;
检测模块,用于确定所述缓存单元中存储的所述存储地址的当前数量,在所述当前数量达到预设数量时,检测是否存在重建进程重建待管理磁盘;
重建处理模块,用于当存在重建进程重建所述待管理磁盘时,对所述重建进程进行挂起处理,并确定所述待管理磁盘中正在重建的数据对应的重建区域;
确定模块,用于从各个所述存储地址中,确定出至少一个距离所述重建区域的地址偏移量不大于预设阈值的目标存储地址;
第一数据处理模块,用于将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘,并重启所述重建进程。
7.根据权利要求6所述的磁盘管理装置,其特征在于,
所述第一数据处理模块,包括:队列构建单元和数据处理单元;其中,
所述队列构建单元,用于按照地址先后顺序,利用各个所述目标存储地址形成第一顺序队列;
所述数据处理单元,用于根据所述第一顺序队列,依次将各个所述目标存储地址分别对应的业务数据写入所述待管理磁盘。
8.根据权利要求6所述的磁盘管理装置,其特征在于,
还包括:队列构建模块和第二数据处理模块,其中,
所述队列构建模块,用于当不存在重建进程重建所述待管理磁盘时,利用各个所述存储地址形成第二顺序队列;
所述第二数据处理模块,用于根据所述第二顺序队列,依次将各个所述存储地址分别对应的业务数据写入所述待管理磁盘中。
9.一种可读介质,其特征在于,包括执行指令,当存储控制器的处理器执行所述执行指令时,所述存储控制器执行权利要求1至5中任一项所述的方法。
10.一种存储控制器,其特征在于,包括:处理器、存储器和总线;
所述处理器和所述存储器通过所述总线连接;
所述存储器,当所述存储控制器运行时,所述处理器执行所述存储器存储的所述执行指令,以使所述存储控制器执行权利要求1至5中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710047035.4A CN106843765A (zh) | 2017-01-22 | 2017-01-22 | 一种磁盘管理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710047035.4A CN106843765A (zh) | 2017-01-22 | 2017-01-22 | 一种磁盘管理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106843765A true CN106843765A (zh) | 2017-06-13 |
Family
ID=59121087
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710047035.4A Pending CN106843765A (zh) | 2017-01-22 | 2017-01-22 | 一种磁盘管理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106843765A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109962857A (zh) * | 2017-12-26 | 2019-07-02 | 中国电信股份有限公司 | 流量控制方法、装置及计算机可读存储介质 |
CN114461139A (zh) * | 2021-12-29 | 2022-05-10 | 天津中科曙光存储科技有限公司 | 业务处理方法、装置、计算机设备和存储介质 |
WO2024148871A1 (zh) * | 2023-01-10 | 2024-07-18 | 苏州元脑智能科技有限公司 | 一种存储数据处理方法、装置、电子设备和存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060236149A1 (en) * | 2005-04-14 | 2006-10-19 | Dell Products L.P. | System and method for rebuilding a storage disk |
CN101241420A (zh) * | 2008-03-20 | 2008-08-13 | 杭州华三通信技术有限公司 | 用于提高写地址非连续的数据存储效率的方法和存储设备 |
CN101539842A (zh) * | 2009-04-27 | 2009-09-23 | 杭州华三通信技术有限公司 | 磁盘阵列系统的数据写入方法及磁盘阵列系统 |
CN101540173A (zh) * | 2009-04-27 | 2009-09-23 | 杭州华三通信技术有限公司 | 一种磁盘阵列重建中的数据存储方法和装置 |
-
2017
- 2017-01-22 CN CN201710047035.4A patent/CN106843765A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060236149A1 (en) * | 2005-04-14 | 2006-10-19 | Dell Products L.P. | System and method for rebuilding a storage disk |
CN101241420A (zh) * | 2008-03-20 | 2008-08-13 | 杭州华三通信技术有限公司 | 用于提高写地址非连续的数据存储效率的方法和存储设备 |
CN101539842A (zh) * | 2009-04-27 | 2009-09-23 | 杭州华三通信技术有限公司 | 磁盘阵列系统的数据写入方法及磁盘阵列系统 |
CN101540173A (zh) * | 2009-04-27 | 2009-09-23 | 杭州华三通信技术有限公司 | 一种磁盘阵列重建中的数据存储方法和装置 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109962857A (zh) * | 2017-12-26 | 2019-07-02 | 中国电信股份有限公司 | 流量控制方法、装置及计算机可读存储介质 |
CN109962857B (zh) * | 2017-12-26 | 2022-08-30 | 中国电信股份有限公司 | 流量控制方法、装置及计算机可读存储介质 |
CN114461139A (zh) * | 2021-12-29 | 2022-05-10 | 天津中科曙光存储科技有限公司 | 业务处理方法、装置、计算机设备和存储介质 |
CN114461139B (zh) * | 2021-12-29 | 2024-07-09 | 天津中科曙光存储科技有限公司 | 业务处理方法、装置、计算机设备和存储介质 |
WO2024148871A1 (zh) * | 2023-01-10 | 2024-07-18 | 苏州元脑智能科技有限公司 | 一种存储数据处理方法、装置、电子设备和存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10101930B2 (en) | System and method for supporting atomic writes in a flash translation layer | |
US9892005B2 (en) | System and method for object-based continuous data protection | |
US8838936B1 (en) | System and method for efficient flash translation layer | |
US9547591B1 (en) | System and method for cache management | |
US9507732B1 (en) | System and method for cache management | |
CN108459826B (zh) | 一种处理io请求的方法及装置 | |
US9921955B1 (en) | Flash write amplification reduction | |
US9201803B1 (en) | System and method for caching data | |
US9164676B2 (en) | Storing multi-stream non-linear access patterns in a flash based file-system | |
US10824362B2 (en) | File migration to persistent memory | |
US9372743B1 (en) | System and method for storage management | |
US9330105B1 (en) | Systems, methods, and computer readable media for lazy compression of data incoming to a data storage entity | |
WO2019000950A1 (zh) | 分片管理方法和分片管理装置 | |
KR101574451B1 (ko) | 트랜잭션 메모리 시스템 내구성 부여 | |
US9411519B2 (en) | Implementing enhanced performance flash memory devices | |
CN106843765A (zh) | 一种磁盘管理方法及装置 | |
CN102662799B (zh) | 数据备份的方法、服务器及热备份系统 | |
CN113867645A (zh) | 数据迁移和数据读写方法、装置、计算机设备及存储介质 | |
US9378151B2 (en) | System and method of hinted cache data removal | |
US8914381B2 (en) | Correlation filter | |
CN113835624A (zh) | 基于异构内存的数据迁移方法及装置 | |
CN108021562B (zh) | 应用于分布式文件系统的存盘方法、装置及分布式文件系统 | |
US20080189495A1 (en) | Method for reestablishing hotness of pages | |
US9400723B2 (en) | Storage system and data management method | |
US10268594B2 (en) | Implementing paging device selection based on wear-level data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170613 |
|
RJ01 | Rejection of invention patent application after publication |