CN109002253B - 一种损坏条带的处理方法及装置 - Google Patents
一种损坏条带的处理方法及装置 Download PDFInfo
- Publication number
- CN109002253B CN109002253B CN201710419968.1A CN201710419968A CN109002253B CN 109002253 B CN109002253 B CN 109002253B CN 201710419968 A CN201710419968 A CN 201710419968A CN 109002253 B CN109002253 B CN 109002253B
- Authority
- CN
- China
- Prior art keywords
- stripe
- block
- damaged
- data
- normal
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
- G06F3/0619—Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/08—Error detection or correction by redundancy in data representation, e.g. by using checking codes
- G06F11/10—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's
- G06F11/1076—Parity data used in redundant arrays of independent storages, e.g. in RAID systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computer Security & Cryptography (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请实施例提供了一种损坏条带的处理方法及装置,方法包括:元数据服务器将损坏条带的条带信息发送给存储服务器,损坏条带的条带信息包括正常块的标识和异常块的标识,异常块的标识对应的数据块为坏块;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块重新进行EC计算,获得预设个数目标校验块的校验数据,预设个数为一条带中包括的校验块的个数,根据正常块的标识和异常块的标识对应的数据块以及目标校验块,构建与损坏条带的标识相同的新正常条带。应用本申请实施例,使得损坏条带对应的正常数据块再损坏时,该再损坏的正常数据块中存储的流式数据能够被修复和读取。
Description
技术领域
本申请涉及数据处理技术领域,特别是涉及一种损坏条带的处理方法及装置。
背景技术
随着互联网的普及与发展,用户数据(如视频数据)越来越多,在人类生活中起着的作用越来越重要。为节约本地客户端的存储空间,人们常常将用户数据存储至存储服务器的网络硬盘(IP(Internet Protocol,网络协议)硬盘)。
目前,一般采用EC(Erasure Code,纠删码)将用户数据存储至存储服务器。具体为,参考图1所示条带,一个条带中可以对应多个条带块,如图1中N+M个条带块,其中,一部分条带块(如图1中N个条带块)作为数据块存储用户数据,另一部分条带块(如图1中M个条带块)作为校验块存储校验数据,校验块中存储的校验数据是对数据块中存储的用户数据进行EC计算得到的。当条带对应的数据块损坏(下称为“坏块”),导致该坏块中的用户数据丢失时,可以根据校验块中的校验数据进行EC计算,修复该坏块中存储的用户数据。
现有技术中,基于EC修复条带对应的坏块中存储的用户数据,需要该条带对应的坏块的个数不大于该条带对应的校验块的个数;若该条带对应的坏块的个数大于该条带对应的校验块的个数,则无法修复该条带对应的坏块中存储的用户数据,此时,该条带可以确定为损坏条带。这种情况下,若损坏条带对应的正常数据块(下称为“正常块”)中再出现损坏的正常块时,该再损坏的正常块中存储的用户数据将无法被修复,也就无法读取到该再损坏的正常块中存储的用户数据。
发明内容
本申请实施例的目的在于提供一种损坏条带的处理方法及装置,以使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。具体技术方案如下:
一方面,本申请实施例公开了一种损坏条带的处理方法,应用于存储服务器,所述方法包括:
从元数据服务器获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
将所述异常块的标识对应的数据块中存储的数据置为预设数据;
对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据;所述预设个数为一条条带中包括的校验块的个数;
根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带。
可选的,所述从元数据服务器获取损坏条带的条带信息的步骤,包括:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;所述重新计算校验数据任务为所述元数据服务器根据重新计算校验数据任务列表中包括的所述损坏条带的标识生成的。
可选的,在构建与所述损坏条带的标识相同的新正常条带之后,所述方法还包括:
向所述元数据服务器发送删除消息;所述删除消息用于指示所述元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
可选的,在构建与所述损坏条带的标识相同的新正常条带之后,所述方法还包括:
获取所述新正常条带的条带信息;
向所述元数据服务器发送携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示所述元数据服务器更新所述损坏条带的标识对应的条带信息。
可选的,在从元数据服务器中获取损坏条带的条带信息之前,所述方法还包括:
检测本地是否存在坏块;
如果是,将所述坏块的标识发送给所述元数据服务器,以使所述元数据服务器确定所述坏块的标识对应的正常条带的条带信息,将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块,当所述正常条带的条带信息中标记为坏块的数据块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
二方面,本申请实施例公开了一种损坏条带的处理方法,应用于元数据服务器,所述方法包括:
获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
向存储服务器发送所述损坏条带的条带信息,以使所述存储服务器将所述异常块的标识对应的数据块中存储的数据置为预设数据,对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据,并根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带;所述预设个数为一条条带中包括的校验块的个数。
可选的,在获取损坏条带的条带信息之前,所述方法还包括:
将损坏条带的标识添加至重新计算校验数据任务列表中;
所述获取损坏条带的条带信息的步骤,包括:
根据所述重新计算校验数据任务列表中包括的所述损坏条带的标识,获取包括所述损坏条带的标识的损坏条带的条带信息;
所述向存储服务器发送所述损坏条带的条带信息的步骤,包括:
根据获取的所述损坏条带的条带信息,生成携带所述损坏条带的条带信息的重新计算校验数据任务;
向存储服务器发送所述重新计算校验数据任务。
可选的,在向所述存储服务器发送所述重新计算校验数据任务之后,所述方法还包括:
接收所述存储服务器发送的删除消息;所述删除消息用于指示所述元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识;
根据所述删除消息,删除所述重新计算校验数据任务和所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
可选的,在向存储服务器发送所述损坏条带的条带信息之后,所述方法还包括:
接收所述存储服务器发送的携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示所述元数据服务器更新所述损坏条带的标识对应的条带信息;
根据所述更新消息,更新所述损坏条带的标识对应的条带信息。
可选的,在获取损坏条带的条带信息之前,所述方法还包括:
接收所述存储服务器发送的坏块的标识;
确定所述坏块的标识对应的正常条带的条带信息;
将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块;
当所述正常条带的条带信息中标记为坏块的正常块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
三方面,本申请实施例公开了一种损坏条带的处理装置,所述装置包括:
第一获取单元,用于从元数据服务器获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
设置单元,用于将所述异常块的标识对应的数据块中存储的数据置为预设数据;
计算单元,用于对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据;所述预设个数为一条条带中包括的校验块的个数;
构建单元,用于根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带。
可选的,所述第一获取单元,具体用于:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;所述重新计算校验数据任务为所述元数据服务器根据重新计算校验数据任务列表中包括的所述损坏条带的标识生成的。
可选的,所述装置还包括:
第一发送单元,用于在构建与所述损坏条带的标识相同的新正常条带之后,向所述元数据服务器发送删除消息;所述删除消息用于指示所述元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
可选的,所述装置还包括:
第二获取单元,用于在构建与所述损坏条带的标识相同的新正常条带之后,获取所述新正常条带的条带信息;
第二发送单元,用于向所述元数据服务器发送携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示所述元数据服务器更新所述损坏条带的标识对应的条带信息。
可选的,所述装置还包括:
检测单元,用于在从元数据服务器中获取损坏条带的条带信息之前,检测本地是否存在坏块;
第三发送单元,用于当检测到坏块时,将所述坏块的标识发送给所述元数据服务器,以使所述元数据服务器确定所述坏块的标识对应的正常条带的条带信息,将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块,当所述正常条带的条带信息中标记为坏块的数据块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
四方面,本申请实施例公开了一种损坏条带的处理装置,所述装置包括:
获取单元,用于获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
发送单元,用于向存储服务器发送所述损坏条带的条带信息,以使所述存储服务器将所述异常块的标识对应的数据块中存储的数据置为预设数据,对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据,并根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带;所述预设个数为一条条带中包括的校验块的个数。
可选的,所述装置还包括:
添加单元,用于在获取损坏条带的条带信息之前,将损坏条带的标识添加至重新计算校验数据任务列表中;
所述获取单元,具体用于根据所述重新计算校验数据任务列表中包括的所述损坏条带的标识,获取包括所述损坏条带的标识的损坏条带的条带信息;
所述发送单元,具体用于根据获取的所述损坏条带的条带信息,生成携带所述损坏条带的条带信息的重新计算校验数据任务;向存储服务器发送所述重新计算校验数据任务。
可选的,所述装置还包括:
第一接收单元,用于在向所述存储服务器发送所述重新计算校验数据任务之后,接收所述存储服务器发送的删除消息;所述删除消息用于指示所述元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识;
删除单元,用于根据所述删除消息,删除所述重新计算校验数据任务和所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
可选的,所述装置还包括:
第二接收单元,用于在向存储服务器发送所述损坏条带的条带信息之后,接收所述存储服务器发送的携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示所述元数据服务器更新所述损坏条带的标识对应的条带信息;
更新单元,用于根据所述更新消息,更新所述损坏条带的标识对应的条带信息。
可选的,所述装置还包括:
第三接收单元,用于在获取损坏条带的条带信息之前,接收所述存储服务器发送的坏块的标识;
确定单元,用于确定所述坏块的标识对应的正常条带的条带信息;
第一标记单元,用于将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块;
第二标识单元,用于当所述正常条带的条带信息中标记为坏块的正常块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
五方面,本申请实施例公开了一种存储服务器,包括处理器、通信接口、存储器和通信总线,其中,处理器、通信接口、存储器通过总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序,实现上述应用于存储服务器的损坏条带的处理方法步骤。
六方面,本申请实施例公开了一种元数据服务器,包括处理器、通信接口、存储器和通信总线,其中,处理器、通信接口、存储器通过总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序,实现上述应用于元数据服务器的损坏条带的处理方法步骤。
七方面,本申请实施例公开了一种存储介质,所述存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述应用于存储服务器的损坏条带的处理方法步骤。
八方面,本申请实施例公开了一种存储介质,所述存储介质内存储有计算机程序,所述计算机程序被处理器执行时实现上述应用于元数据服务器的损坏条带的处理方法步骤。
本申请实施例中,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块在损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块、异常块的标识对应的数据块中存储的数据,以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。当然,实施本申请的任一产品或方法必不一定需要同时达到以上所述的所有优点。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为条带的第一种示意图;
图2为条带的第二种示意图;
图3为基于图2所示条带存在坏块的一种示意图;
图4为基于图2所示条带存在坏块的另一种示意图;
图5为基于图4所示条带存在再次损坏的数据块的另一种示意图;
图6为本申请实施例提供的损坏条带的处理方法的第一种流程示意图;
图7为本申请实施例提供的损坏条带的处理方法的第二种流程示意图;
图8为本申请实施例提供的损坏条带的处理方法的第三种流程示意图;
图9为本申请实施例提供的损坏条带的处理方法的第四种流程示意图;
图10为本申请实施例提供的损坏条带的处理方法的第五种流程示意图;
图11为本申请实施例提供的损坏条带的处理方法的第六种流程示意图;
图12为本申请实施例中使用的组网的一种流程示意图;
图13为本申请实施例中使用基于图4所示条带的坏块标记的一种示意图;
图14为本申请实施例中使用基于图13所示条带的异常块标记的一种示意图;
图15为本申请实施例中使用基于图14所示条带的新正常条带的一种示意图;
图16为本申请实施例提供的损坏条带的处理装置的第一种结构示意图;
图17为本申请实施例提供的损坏条带的处理装置的第二种结构示意图;
图18为本申请实施例提供的存储服务器的一种结构示意图;
图19为本申请实施例提供的元数据服务器的一种结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
为便于说明本申请,下面对本申请实施例中出现的词进行定义说明:
条带块:可以作为数据块,存储用户数据(如流式数据、对象数据等);也可以作为校验快,存储校验数据;
正常块:为正常数据块,存储服务器可以正常地从正常块中读取数据。
坏块:为损坏数据块,也就是损坏的正常块,存储服务器无法从坏块中读取到数据。
其中,正常块和坏块统称为数据块。
目前,如图2所示的条带,条带1对应数据块11、数据块12、数据块13和数据块14这4个正常块和校验块15这1个校验块;如图3所示的条带,若数据块11损坏,变为坏块,存储服务器可以对数据块12、数据块13、数据块14这三个正常块和校验块11中存储的数据进行EC计算,修复数据块11中存储的用户数据,以保证对数据块11中用户数据的读取;
如图4所示的条带,若数据块11和数据块12这2个数据块损坏,变为坏块,此时,坏块个数(2个)大于校验块的个数(1个),条带1为损坏条带,数据块11和数据块12中存储的用户数据无法被修复;这种情况下,如图5所示的条带,若数据块13再损坏,数据块13也无法被修复,也就无法读取到数据块13中存储的用户数据。
为了保证损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的数据能够被修复和读取,本申请实施例提供了一种损坏条带的处理方法及装置。.下面通过具体实施例,对本申请进行详细说明。
参考图6,图6为本申请实施例提供的损坏条带的处理方法的第一种流程示意图,应用于存储服务器,该方法包括:
S601:从元数据服务器获取损坏条带的条带信息;
其中,损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块。这里,正常块的标识对应的数据块和异常块的标识对应的数据块的个数和等于一个条带对应的数据块的个数。
在本申请的一个实施例中,存储服务器获取的损坏条带的条带信息可以为:元数据服务器中当前存储的所有损坏条带的条带信息。一般的,元数据服务器可以每确定一条损坏条带,就将该损坏条带的条带信息发送给存储服务器,也可以定时地将当前存储的所有损坏条带的条带信息发送给存储服务器,还可以在该元数据服务器中确定了预设数量个损坏条带时,再将当前存储的这预设数量个损坏条带的条带信息都发送给存储服务器。
在本申请的一个实施例中,参考图7所示的损坏条带的处理方法的第二种流程示意图,基于图6,在S601从元数据服务器获取损坏条带的条带信息之前,还可以包括:
S6001:检测本地是否存在坏块;如果是,执行S6002;
一般的,存储服务器可以定时地检测本地是否存在坏块。在本申请的一个实施例中,若读取一个正常块中存储的用户数据失败,则再次读取该正常块中存储的用户数据,若还是失败,则可以将该正常块确定为坏块。
S6002:将坏块的标识发送给元数据服务器。
元数据服务器存储有条带的元数据,条带的元数据即条带信息,可以包括:条带的标识、网络硬盘标识、条带块在网络硬盘中的偏移量、条带块的长度、条带块的存储状态等信息,如表1所示。
表1
上述表1中,条带块包括数据块和校验块,条带块集合为一个条带对应的数据块和校验块的集合;
wwn(World Wide Name,全球唯一名字)为网络硬盘的标识,wwn是由权威的组织分配的唯一的48位或64位数字,专门制定为公认的名称授权(通常通过区域分配给制造商),以区分一个或一组网络连接;为了减少出现损坏条带的概率,一个条带对应的每一条带块对应一个不同的硬盘,例如一个条带对应5个条带块,则该条带对应5个不同的硬盘;
条带块状态可以理解为条带块的存储状态,这里,条带块的存储状态,可以包括正常状态、损坏状态和异常状态。例如,当数据块中存储了用户数据时,将该数据块的存储状态设置为正常状态,也就是,将该数据块标记为正常块;当数据块出现损坏,导致该数据块中存储的用户数据丢失时,将该数据块的存储状态设置为损坏状态,也就是,将正常块标记为坏块;当确定条带为损坏条带时,将该条带对应的数据块中存储状态为损坏状态的数据块标记为异常状态,即将标记为坏块的正常块标记为异常块。
这种情况下,当元数据服务器接收到存储服务器发送的坏块的标识后,确定坏块的标识对应的正常条带的条带信息,将该正常条带的条带信息中坏块的标识对应的正常块标记为坏块,也就是,将该坏块的标识对应的正常块的“条带块状态”设置为损坏状态;若该正常条带中的被标记为坏块的正常块的个数大于该正常条带中校验块的个数,则确定该正常条带为损坏条带,将该正常条带的条带信息中标记为坏块的正常块标记为异常块,也就是,将该坏块的标识对应的正常块的“条带块状态”设置为异常状态。
S602:将异常块的标识对应的数据块中存储的数据置为预设数据;
这里,预设数据可以为0(或其他已知数据)。
S603:对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;
这里,预设个数为一条条带中包括的校验块的个数。目标校验块可以为该损坏条带对应的校验块,也可以不是该损坏条带对应的校验块,本申请实施例对此不进行限定。
S604:根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。
这里,构建的新正常条带为一条伪正常条带,包括:正常块的标识对应的数据块、异常块的标识对应的数据块和预设个数目标校验块,其中,异常块的标识对应的数据块为坏块,进行数据读取时不进行读取,直接默认为预设数据。
在本申请的一个实施例中,存储服务器可以从元数据服务器下发的重新计算校验数据任务中获取到损坏条带的条带信息。具体地,元数据服务器在确定损坏条带后,将该损坏条带的标识加入重新计算校验数据任务列表中,如表2所示;
表2
字段 | Key(键) | 备注 |
strip_id | Primary Key(主键) | 表示条带的标识 |
元数据服务器根据如表2所示重新计算校验数据任务列表中包括的条带的标识(即损坏条带的标识),获取损坏条带的条带信息,生成重新计算校验数据任务,进而将携带损坏条带的条带信息的重新计算校验数据任务发送给存储服务器。
这种情况下,为了避免元数据服务器重复下发包括同一损坏条带的条带信息的重新计算校验数据任务,使存储服务器重复执行相同的重新计算校验数据任务,存储服务器在构建了新正常条带后,也就是,存储服务器在执行重新计算校验数据任务后,向元数据服务器发送删除消息,该删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识;这样,元数据服务器在接收到删除消息后,删除包括上述损坏条带的条带信息的重新计算校验数据任务,并删除重新计算校验数据任务列表中包括的上述损坏条带的标识。
在本申请的一个实施例中,目标校验块可以为该损坏条带对应的校验块,也可以不是该损坏条带对应的校验块,损坏条带的标识对应的条带信息就可能发生了变化。为了保证元数据服务器存储的条带信息的准确可靠,参考图8所示的损坏条带的处理方法的第三种流程示意图,基于图6,存储服务器在构建与损坏条带的标识相同的新正常条带之后,还可以包括:
S605:获取新正常条带的条带信息;
S606:向元数据服务器发送携带新正常条带的条带信息的更新消息。
其中,更新消息用于指示元数据服务器更新损坏条带的标识对应的条带信息。这样,元数据服务器接收到更新消息后,就可以根据更新消息中携带的新正常条带的条带信息,更新新正常条带的条带信息,即更新损坏条带的标识对应的条带信息。例如,更新损坏条带的标识对应的条带信息中的网络硬盘的标识wwn、条带块在网络硬盘中的偏移量等。
值的一提的是,元数据服务器接收到更新消息后,除根据更新消息中携带的新正常条带的条带信息,更新新正常条带的条带信息外,还可以删除包括上述损坏条带的条带信息的重新计算校验数据任务,并删除重新计算校验数据任务列表中包括的上述损坏条带的标识,本申请实施例对此不进行限定。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
参考图9,图9为本申请实施例提供的损坏条带的处理方法的第四种流程示意图,应用于元数据服务器,该方法包括:
S901:获取损坏条带的条带信息;
其中,损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块。
在本申请的一个实施例中,存储服务器获取的损坏条带的条带信息可以为:元数据服务器中当前存储的所有损坏条带的条带信息。一般的,元数据服务器可以每确定一条损坏条带,就将该损坏条带的条带信息发送给存储服务器,也可以定时地将当前存储的所有损坏条带的条带信息发送给存储服务器,还可以在该元数据服务器中确定了预设数量个损坏条带时,再将当前存储的这预设数量个损坏条带的条带信息都发送给存储服务器。
在本申请的一个实施例中,参考图10所示的损坏条带的处理方法的第五种流程示意图,在图9的基础上,元数据服务器在获取损坏条带的条带信息之前,还可以包括:
S9001:接收存储服务器发送的坏块的标识;
一般的,存储服务器可以定时地检测本地是否存在坏块,当检测到存在时,将坏块的标识发送给元数据服务器。
S9002:确定坏块的标识对应的正常条带的条带信息;
S9003:将该正常条带的条带信息中坏块的标识对应的正常块标记为坏块;
S9004:当该正常条带的条带信息中标记为坏块的正常块的个数大于预设个数时,确定该正常条带为损坏条带,将该正常条带的条带信息中标记为坏块的正常块标记为异常块。
这里,预设个数为一条条带中包括的校验块的个数。
S902:向存储服务器发送损坏条带的条带信息。
这样,存储服务器在接收到损坏条带的条带信息后,将损坏条带的条带信息中包括的异常块的标识对应的数据块中存储的数据置为预设数据,对损坏条带的条带信息中包括的正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据,并根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。
在本申请的一个实施例中,为了便于获取损坏条带的条带信息,元数据服务器确定一条损坏条带,则将这条损坏条带的标识添加至重新计算校验数据任务列表中;这样,元数据服务器就可以从重新计算校验数据任务列表中获取到损坏条带的标识,进而根据损坏条带的标识,获取到包括该损坏条带的标识的损坏条带的条带信息;
这种情况下,元数据服务器就可以根据获取的损坏条带的条带信息,生成携带损坏条带的条带信息的重新计算校验数据任务,并向存储服务器发送该重新计算校验数据任务。
在本申请的一个实施例中,为了避免元数据服务器重复下发包括同一损坏条带的条带信息的重新计算校验数据任务,使存储服务器重复执行重新计算校验数据任务,元数据服务器在向存储服务器发送重新计算校验数据任务之后,还可以接收存储服务器发送的删除消息,该删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识;这样,元数据服务器可以根据删除消息,删除重新计算校验数据任务和重新计算校验数据任务列表中包括的损坏条带的标识。
在本申请的一个实施例中,目标校验块可以为该损坏条带对应的校验块,也可以不是该损坏条带对应的校验块,损坏条带的标识对应的条带信息就可能发生了变化。为了保证元数据服务器存储的条带信息的准确可靠,参考图11所示的损坏条带的处理方法的第六种流程示意图,在图9的基础上,在向存储服务器发送损坏条带的条带信息之后,还可以包括:
S903:接收存储服务器发送的携带新正常条带的条带信息的更新消息;
其中,更新消息用于指示所述元数据服务器更新所述损坏条带的标识对应的条带信息
S904:根据更新消息,更新损坏条带的标识对应的条带信息。
值的一提的是,元数据服务器接收到更新消息后,除根据更新消息中携带的新正常条带的条带信息,更新损坏条带的标识对应的条带信息外,还可以删除包括上述损坏条带的条带信息的重新计算校验数据任务,删除重新计算校验数据任务列表中包括的上述损坏条带的标识,本申请实施例对此不进行限定。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
下面结合图12所示组网,对本申请进行说明。
假设,如图2所示,存储服务器100中有1个正常条带,即条带1,条带1的标识为id1,条带1对应的数据块11、数据块12、数据块13和数据块14这4个正常数据块和1个校验块15;
1、存储服务器100检测网络硬盘中是否存在坏块;
2、如图4所示,存储服务器100若检测到数据块11和数据块12为坏块,则将数据块11和数据块12的标识发送给元数据服务器200;
3、元数据服务器200确定数据块11和数据块12的标识对应的正常条带的条带信息,即条带1的条带信息,如图13所示,将条带1的条带信息中数据块11和数据块12标记为坏块;
4、此时,条带1的条带信息中标记为坏块的正常块的个数大于条带1中校验块的个数,即2>1,元数据服务器200确定条带1为损坏条带,如图14所示,将条带1的条带信息中标记为坏块的数据块11和数据块12标记为异常块,并将条带1的标识id1添加至重新计算校验数据任务列表中;
5、元数据服务器200从重新计算校验数据任务列表中获取到id1,进而获取id1对应的条带1的条带信息;
其中,条带1的条带信息中正常块的标识有数据块13的标识和数据块14的标识,条带1的条带信息中异常块的标识有数据块11的标识和数据块12的标识;
6、元数据服务器200生成携带条带1的条带信息的重新计算校验数据任务1,将该重新计算校验数据任务1发送给存储服务器100;
7、存储服务器100获取到重新计算校验数据任务1,也就获取到了条带1的条带信息;
8、存储服务器100将条带1的条带信息中异常块的标识对应的数据块(即数据块11和数据块12)中存储的数据置为预设数据(如0);
9、存储服务器100读取条带1的条带信息中正常块的标识对应的数据块(即数据块13和数据块14)中的用户数据,结合数据块11和数据块12中的预设数据,进行EC计算,获取1个校验块16的校验数据;
10、如图15所示,存储服务器100根据数据块11、数据块12、数据块13、数据块14和校验块16构建一个新的正常条带1,该新的正常条带1的标识为id1;
这种情况下,当数据块13或数据块14损坏时,以数据块13损坏为例,存储服务器100就可以读取数据块14和校验块16中存储的数据,这里,数据块11和数据块12为异常块,可以不用读取,直接确定为预设数据,再通过EC计算得到数据块13中存储的数据,有效地保证了损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
11、存储服务器100获取新的正常条带1的条带信息,将新的正常条带1的条带信息发送给元数据服务器200;
12、元数据服务器200接收到新的正常条带1的条带信息,更新id1对应的条带信息,并删除重新计算校验数据任务1,删除重新计算校验数据任务列表中条带1的标识id1。
这有效地避免了元数据服务器重复下发包括同一损坏条带的条带信息的重新计算校验数据任务,使存储服务器重复执行重新计算校验数据任务。
与方法实施例对应,本申请实施例还提供了一种损坏条带的处理装置。
参考图16,图16为本申请实施例提供的损坏条带的处理装置的第一种结构示意图,该装置包括:
第一获取单元1601,用于从元数据服务器获取损坏条带的条带信息;损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块;
设置单元1602,用于将异常块的标识对应的数据块中存储的数据置为预设数据;
计算单元1603,用于对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;预设个数为一条条带中包括的校验块的个数;
构建单元1604,用于根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。
在本申请的一个实施例中,第一获取单元1601,具体可以用于:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;重新计算校验数据任务为元数据服务器根据重新计算校验数据任务列表中包括的损坏条带的标识生成的。
在本申请的一个实施例中,上述损坏条带的处理装置还可以包括:
第一发送单元(图16中未示出),用于在构建与损坏条带的标识相同的新正常条带之后,向元数据服务器发送删除消息;删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识。
在本申请的一个实施例中,上述损坏条带的处理装置还可以包括:
第二获取单元(图16中未示出),用于在构建与损坏条带的标识相同的新正常条带之后,获取新正常条带的条带信息;
第二发送单元(图16中未示出),用于向元数据服务器发送携带新正常条带的条带信息的更新消息;更新消息用于指示元数据服务器更新损坏条带的标识对应的条带信息。
在本申请的一个实施例中,上述损坏条带的处理装置还可以包括:
检测单元(图16中未示出),用于在从元数据服务器中获取损坏条带的条带信息之前,检测本地是否存在坏块;
第三发送单元(图16中未示出),用于当检测到坏块时,将坏块的标识发送给元数据服务器,以使元数据服务器确定坏块的标识对应的正常条带的条带信息,将正常条带的条带信息中坏块的标识对应的正常块标记为坏块,当正常条带的条带信息中标记为坏块的数据块的个数大于预设个数时,确定正常条带为损坏条带,将正常条带的条带信息中标记为坏块的正常块标记为异常块。
值得一提的是,损坏条带的处理装置可以应用于存储服务器。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
参考图17,图17为本申请实施例提供的损坏条带的处理装置的第二种结构示意图,该装置包括:
获取单元1701,用于获取损坏条带的条带信息;损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块;
发送单元1702,用于向存储服务器发送损坏条带的条带信息,以使存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据,并根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带;预设个数为一条条带中包括的校验块的个数。
在本申请的一个实施例中,上述损坏条带的处理装置还可以包括:
添加单元(图17中未示出),用于在获取损坏条带的条带信息之前,将损坏条带的标识添加至重新计算校验数据任务列表中;
这种情况下,获取单元1701,具体可以用于根据重新计算校验数据任务列表中包括的损坏条带的标识,获取包括损坏条带的标识的损坏条带的条带信息;
发送单元1702,具体可以用于根据获取的损坏条带的条带信息,生成携带损坏条带的条带信息的重新计算校验数据任务;向存储服务器发送重新计算校验数据任务。
在本申请的一个实施例中,上述损坏条带的处理装置还可以包括:
第一接收单元(图17中未示出),用于在向存储服务器发送重新计算校验数据任务之后,接收存储服务器发送的删除消息;删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识;
删除单元(图17中未示出),用于根据删除消息,删除重新计算校验数据任务和重新计算校验数据任务列表中包括的损坏条带的标识。
在本申请的一个实施例中,上述损坏条带的处理装置还可以包括:
第二接收单元(图17中未示出),用于在向存储服务器发送损坏条带的条带信息之后,接收存储服务器发送的携带新正常条带的条带信息的更新消息;更新消息用于指示元数据服务器更新损坏条带的标识对应的条带信息;
更新单元(图17中未示出),用于根据更新消息,更新损坏条带的标识对应的条带信息。
在本申请的一个实施例中,上述损坏条带的处理装置还可以包括:
第三接收单元(图17中未示出),用于在获取损坏条带的条带信息之前,接收存储服务器发送的坏块的标识;
确定单元(图17中未示出),用于确定坏块的标识对应的正常条带的条带信息;
第一标记单元(图17中未示出),用于将正常条带的条带信息中坏块的标识对应的正常块标记为坏块;
第二标识单元(图17中未示出),用于当正常条带的条带信息中标记为坏块的正常块的个数大于预设个数时,确定正常条带为损坏条带,将正常条带的条带信息中标记为坏块的正常块标记为异常块。
值得一提的是,损坏条带的处理装置可以应用于元数据服务器。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
本申请实施例还提供了一种存储服务器,如图18所示,包括处理器1801、通信接口1802、存储器1803和通信总线1804,其中,处理器1801、通信接口1802、存储器1803通过通信总线1804完成相互间的通信;
存储器1803,用于存放计算机程序;
处理器1801,用于执行存储器1803上所存放的程序时,实现如下步骤:
从元数据服务器获取损坏条带的条带信息;损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块;
将异常块的标识对应的数据块中存储的数据置为预设数据;
对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;预设个数为一条条带中包括的校验块的个数;
根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。
在本申请的一个实施例中,处理器1801,具体可以用于:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;重新计算校验数据任务为元数据服务器根据重新计算校验数据任务列表中包括的损坏条带的标识生成的。
在本申请的一个实施例中,处理器1801,还用于:
在构建与损坏条带的标识相同的新正常条带之后,向元数据服务器发送删除消息;删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识。
在本申请的一个实施例中,处理器1801,还用于:
在构建与损坏条带的标识相同的新正常条带之后,获取新正常条带的条带信息;
向元数据服务器发送携带新正常条带的条带信息的更新消息;更新消息用于指示元数据服务器更新损坏条带的标识对应的条带信息。
在本申请的一个实施例中,处理器1801,还用于:
在从元数据服务器中获取损坏条带的条带信息之前,检测本地是否存在坏块;
当检测到坏块时,将坏块的标识发送给元数据服务器,以使元数据服务器确定坏块的标识对应的正常条带的条带信息,将正常条带的条带信息中坏块的标识对应的正常块标记为坏块,当正常条带的条带信息中标记为坏块的数据块的个数大于预设个数时,确定正常条带为损坏条带,将正常条带的条带信息中标记为坏块的正常块标记为异常块。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
上述存储服务器提到的通信总线可以是PCI(Peripheral ComponentInterconnect,外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture,扩展工业标准结构)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图18中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述存储服务器与其他设备之间的通信。
存储器可以包括RAM(Random Access Memory,随机存取存储器),也可以包括NVM(Non-Volatile Memory,非易失性存储器),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器,包括CPU(Central Processing Unit,中央处理器)、NP(Network Processor,网络处理器)等;还可以是DSP(Digital Signal Processing,数字信号处理器)、ASIC(Application Specific Integrated Circuit,专用集成电路)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
本申请实施例还提供了一种元数据服务器,如图19所示,包括处理器1901、通信接口1902、存储器1903和通信总线1904,其中,处理器1901、通信接口1902、存储器1903通过通信总线1904完成相互间的通信;
存储器1903,用于存放计算机程序;
处理器1901,用于执行存储器1903上所存放的程序时,实现如下步骤:
获取损坏条带的条带信息;损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块;
向存储服务器发送损坏条带的条带信息,以使存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据,并根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带;预设个数为一条条带中包括的校验块的个数。
在本申请的一个实施例中,处理器1901,还可以用于:
在获取损坏条带的条带信息之前,将损坏条带的标识添加至重新计算校验数据任务列表中;
处理器1901,具体用于根据重新计算校验数据任务列表中包括的损坏条带的标识,获取包括损坏条带的标识的损坏条带的条带信息;
处理器1901,具体用于根据获取的损坏条带的条带信息,生成携带损坏条带的条带信息的重新计算校验数据任务;向存储服务器发送重新计算校验数据任务。
在本申请的一个实施例中,处理器1901,还可以用于:
在向存储服务器发送重新计算校验数据任务之后,接收存储服务器发送的删除消息;删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识;
根据删除消息,删除重新计算校验数据任务和重新计算校验数据任务列表中包括的损坏条带的标识。
在本申请的一个实施例中,处理器1901,还可以用于:
在向存储服务器发送损坏条带的条带信息之后,接收存储服务器发送的携带新正常条带的条带信息的更新消息;更新消息用于指示元数据服务器更新损坏条带的标识对应的条带信息;
根据更新消息,更新损坏条带的标识对应的条带信息。
在本申请的一个实施例中,处理器1901,还可以用于:
在获取损坏条带的条带信息之前,接收存储服务器发送的坏块的标识;
确定坏块的标识对应的正常条带的条带信息;
将正常条带的条带信息中坏块的标识对应的正常块标记为坏块;
当正常条带的条带信息中标记为坏块的正常块的个数大于预设个数时,确定正常条带为损坏条带,将正常条带的条带信息中标记为坏块的正常块标记为异常块。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
上述元数据服务器提到的通信总线可以是PCI(Peripheral ComponentInterconnect,外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture,扩展工业标准结构)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示,图19中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述元数据服务器与其他设备之间的通信。
存储器可以包括RAM(Random Access Memory,随机存取存储器),也可以包括NVM(Non-Volatile Memory,非易失性存储器),例如至少一个磁盘存储器。可选的,存储器还可以是至少一个位于远离前述处理器的存储装置。
上述处理器可以是通用处理器,包括CPU(Central Processing Unit,中央处理器)、NP(Network Processor,网络处理器)等;还可以是DSP(Digital Signal Processing,数字信号处理器)、ASIC(Application Specific Integrated Circuit,专用集成电路)、FPGA(Field-Programmable Gate Array,现场可编程门阵列)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
本申请实施例还提供了一种存储介质,该存储介质内存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
从元数据服务器获取损坏条带的条带信息;损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块;
将异常块的标识对应的数据块中存储的数据置为预设数据;
对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;预设个数为一条条带中包括的校验块的个数;
根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。
在本申请的一个实施例中,从元数据服务器获取损坏条带的条带信息的步骤,包括:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;重新计算校验数据任务为元数据服务器根据重新计算校验数据任务列表中包括的损坏条带的标识生成的。
在本申请的一个实施例中,在构建与损坏条带的标识相同的新正常条带之后,还可以包括:
向元数据服务器发送删除消息;删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识。
在本申请的一个实施例中,在构建与损坏条带的标识相同的新正常条带之后,还可以包括:
获取新正常条带的条带信息;
向元数据服务器发送携带新正常条带的条带信息的更新消息;更新消息用于指示元数据服务器更新损坏条带的标识对应的条带信息。
在本申请的一个实施例中,在从元数据服务器中获取损坏条带的条带信息之前,还可以包括:
检测本地是否存在坏块;
如果是,将坏块的标识发送给元数据服务器,以使元数据服务器确定坏块的标识对应的正常条带的条带信息,将正常条带的条带信息中坏块的标识对应的正常块标记为坏块,当正常条带的条带信息中标记为坏块的数据块的个数大于预设个数时,确定正常条带为损坏条带,将正常条带的条带信息中标记为坏块的正常块标记为异常块。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
本申请实施例还提供了一种存储介质,该存储介质内存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取损坏条带的条带信息;损坏条带的条带信息包括:正常块的标识和异常块的标识;异常块的标识对应的数据块为坏块;
向存储服务器发送损坏条带的条带信息,以使存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据,并根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带;预设个数为一条条带中包括的校验块的个数。
在本申请的一个实施例中,在获取损坏条带的条带信息之前,还可以包括:
将损坏条带的标识添加至重新计算校验数据任务列表中;
这种情况下,获取损坏条带的条带信息的步骤,包括:
根据重新计算校验数据任务列表中包括的损坏条带的标识,获取包括损坏条带的标识的损坏条带的条带信息;
向存储服务器发送损坏条带的条带信息的步骤,包括:
根据获取的损坏条带的条带信息,生成携带损坏条带的条带信息的重新计算校验数据任务;
向存储服务器发送重新计算校验数据任务。
在本申请的一个实施例中,在向存储服务器发送重新计算校验数据任务之后,还可以包括:
接收存储服务器发送的删除消息;删除消息用于指示元数据服务器删除重新计算校验数据任务以及重新计算校验数据任务列表中包括的损坏条带的标识;
根据删除消息,删除重新计算校验数据任务和重新计算校验数据任务列表中包括的损坏条带的标识。
在本申请的一个实施例中,在向存储服务器发送损坏条带的条带信息之后,还可以包括:
接收存储服务器发送的携带新正常条带的条带信息的更新消息;更新消息用于指示元数据服务器更新损坏条带的标识对应的条带信息;
根据更新消息,更新损坏条带的标识对应的条带信息。
在本申请的一个实施例中,在获取损坏条带的条带信息之前,还可以包括:
接收存储服务器发送的坏块的标识;
确定坏块的标识对应的正常条带的条带信息;
将正常条带的条带信息中坏块的标识对应的正常块标记为坏块;
当正常条带的条带信息中标记为坏块的正常块的个数大于预设个数时,确定正常条带为损坏条带,将正常条带的条带信息中标记为坏块的正常块标记为异常块。
应用上述各个实施例,元数据服务器将损坏条带的条带信息发送给存储服务器,该损坏条带的条带信息中包括正常块的标识和异常块的标识;存储服务器将异常块的标识对应的数据块中存储的数据置为预设数据,对正常块的标识对应的数据块和异常块的标识对应的数据块中存储的数据重新进行EC计算,获得预设个数目标校验块的校验数据;根据正常块的标识对应的数据块、异常块的标识对应的数据块以及预设个数目标校验块,构建与损坏条带的标识相同的新正常条带。这样,当正常块的标识对应的数据块再损坏时,即损坏条带对应的正常块再损坏时,就可以对其他正常块和异常块的标识对应的数据块中存储的数据、以及预设个数目标校验块中存储的校验数据进行EC计算,修复该再损坏的正常块中存储的用户数据,使得损坏条带对应的正常块再损坏时,该再损坏的正常块中存储的用户数据能够被修复和读取。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。尤其,对于装置、存储服务器、元数据服务器和存储介质实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
以上所述仅为本申请的较佳实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内所作的任何修改、等同替换、改进等,均包含在本申请的保护范围内。
Claims (22)
1.一种损坏条带的处理方法,其特征在于,应用于存储服务器,所述方法包括:
从元数据服务器获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
将所述异常块的标识对应的数据块中存储的数据置为预设数据,所述异常块的标识对应的数据块不进行读取,默认所述异常块的标识对应的数据块中存储的数据为所述预设数据;
对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据;所述预设个数为一条条带中包括的校验块的个数;
根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带。
2.根据权利要求1所述的方法,其特征在于,所述从元数据服务器获取损坏条带的条带信息的步骤,包括:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;所述重新计算校验数据任务为所述元数据服务器根据重新计算校验数据任务列表中包括的所述损坏条带的标识生成的。
3.根据权利要求2所述的方法,其特征在于,在构建与所述损坏条带的标识相同的新正常条带之后,所述方法还包括:
向所述元数据服务器发送删除消息;所述删除消息用于指示所述元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
4.根据权利要求1所述的方法,其特征在于,在构建与所述损坏条带的标识相同的新正常条带之后,所述方法还包括:
获取所述新正常条带的条带信息;
向所述元数据服务器发送携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示所述元数据服务器更新所述损坏条带的标识对应的条带信息。
5.根据权利要求1-4任一项所述的方法,其特征在于,在从元数据服务器中获取损坏条带的条带信息之前,所述方法还包括:
检测本地是否存在坏块;
如果是,将所述坏块的标识发送给所述元数据服务器,以使所述元数据服务器确定所述坏块的标识对应的正常条带的条带信息,将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块,当所述正常条带的条带信息中标记为坏块的数据块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
6.一种损坏条带的处理方法,其特征在于,应用于元数据服务器,所述方法包括:
获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
向存储服务器发送所述损坏条带的条带信息,以使所述存储服务器将所述异常块的标识对应的数据块中存储的数据置为预设数据,所述异常块的标识对应的数据块不进行读取,默认所述异常块的标识对应的数据块中存储的数据为所述预设数据,对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据,并根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带;所述预设个数为一条条带中包括的校验块的个数。
7.根据权利要求6所述的方法,其特征在于,在获取损坏条带的条带信息之前,所述方法还包括:
将损坏条带的标识添加至重新计算校验数据任务列表中;
所述获取损坏条带的条带信息的步骤,包括:
根据所述重新计算校验数据任务列表中包括的所述损坏条带的标识,获取包括所述损坏条带的标识的损坏条带的条带信息;
所述向存储服务器发送所述损坏条带的条带信息的步骤,包括:
根据获取的所述损坏条带的条带信息,生成携带所述损坏条带的条带信息的重新计算校验数据任务;
向存储服务器发送所述重新计算校验数据任务。
8.根据权利要求7所述的方法,其特征在于,在向所述存储服务器发送所述重新计算校验数据任务之后,所述方法还包括:
接收所述存储服务器发送的删除消息;所述删除消息用于指示元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识;
根据所述删除消息,删除所述重新计算校验数据任务和所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
9.根据权利要求6所述的方法,其特征在于,在向存储服务器发送所述损坏条带的条带信息之后,所述方法还包括:
接收所述存储服务器发送的携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示元数据服务器更新所述损坏条带的标识对应的条带信息;
根据所述更新消息,更新所述损坏条带的标识对应的条带信息。
10.根据权利要求6-9任一项所述的方法,其特征在于,在获取损坏条带的条带信息之前,所述方法还包括:
接收所述存储服务器发送的坏块的标识;
确定所述坏块的标识对应的正常条带的条带信息;
将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块;
当所述正常条带的条带信息中标记为坏块的正常块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
11.一种损坏条带的处理装置,其特征在于,所述装置包括:
第一获取单元,用于从元数据服务器获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
设置单元,用于将所述异常块的标识对应的数据块中存储的数据置为预设数据,所述异常块的标识对应的数据块不进行读取,默认所述异常块的标识对应的数据块中存储的数据为所述预设数据;
计算单元,用于对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据;所述预设个数为一条条带中包括的校验块的个数;
构建单元,用于根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带。
12.根据权利要求11所述的装置,其特征在于,所述第一获取单元,具体用于:
接收元数据服务器发送的包括损坏条带的条带信息的重新计算校验数据任务;所述重新计算校验数据任务为所述元数据服务器根据重新计算校验数据任务列表中包括的所述损坏条带的标识生成的。
13.根据权利要求12所述的装置,其特征在于,所述装置还包括:
第一发送单元,用于在构建与所述损坏条带的标识相同的新正常条带之后,向所述元数据服务器发送删除消息;所述删除消息用于指示所述元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
14.根据权利要求11所述的装置,其特征在于,所述装置还包括:
第二获取单元,用于在构建与所述损坏条带的标识相同的新正常条带之后,获取所述新正常条带的条带信息;
第二发送单元,用于向所述元数据服务器发送携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示所述元数据服务器更新所述损坏条带的标识对应的条带信息。
15.根据权利要求11-14任一项所述的装置,其特征在于,所述装置还包括:
检测单元,用于在从元数据服务器中获取损坏条带的条带信息之前,检测本地是否存在坏块;
第三发送单元,用于当检测到坏块时,将所述坏块的标识发送给所述元数据服务器,以使所述元数据服务器确定所述坏块的标识对应的正常条带的条带信息,将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块,当所述正常条带的条带信息中标记为坏块的数据块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
16.一种损坏条带的处理装置,其特征在于,所述装置包括:
获取单元,用于获取损坏条带的条带信息;所述损坏条带的条带信息包括:正常块的标识和异常块的标识;所述异常块的标识对应的数据块为坏块;
发送单元,用于向存储服务器发送所述损坏条带的条带信息,以使所述存储服务器将所述异常块的标识对应的数据块中存储的数据置为预设数据,所述异常块的标识对应的数据块不进行读取,默认所述异常块的标识对应的数据块中存储的数据为所述预设数据,对所述正常块的标识对应的数据块和所述异常块的标识对应的数据块中存储的数据重新进行纠删码EC计算,获得预设个数目标校验块的校验数据,并根据所述正常块的标识对应的数据块、所述异常块的标识对应的数据块以及所述预设个数目标校验块,构建与所述损坏条带的标识相同的新正常条带;所述预设个数为一条条带中包括的校验块的个数。
17.根据权利要求16所述的装置,其特征在于,所述装置还包括:
添加单元,用于在获取损坏条带的条带信息之前,将损坏条带的标识添加至重新计算校验数据任务列表中;
所述获取单元,具体用于根据所述重新计算校验数据任务列表中包括的所述损坏条带的标识,获取包括所述损坏条带的标识的损坏条带的条带信息;
所述发送单元,具体用于根据获取的所述损坏条带的条带信息,生成携带所述损坏条带的条带信息的重新计算校验数据任务;向存储服务器发送所述重新计算校验数据任务。
18.根据权利要求17所述的装置,其特征在于,所述装置还包括:
第一接收单元,用于在向所述存储服务器发送所述重新计算校验数据任务之后,接收所述存储服务器发送的删除消息;所述删除消息用于指示元数据服务器删除所述重新计算校验数据任务以及所述重新计算校验数据任务列表中包括的所述损坏条带的标识;
删除单元,用于根据所述删除消息,删除所述重新计算校验数据任务和所述重新计算校验数据任务列表中包括的所述损坏条带的标识。
19.根据权利要求16所述的装置,其特征在于,所述装置还包括:
第二接收单元,用于在向存储服务器发送所述损坏条带的条带信息之后,接收所述存储服务器发送的携带所述新正常条带的条带信息的更新消息;所述更新消息用于指示元数据服务器更新所述损坏条带的标识对应的条带信息;
更新单元,用于根据所述更新消息,更新所述损坏条带的标识对应的条带信息。
20.根据权利要求16-19任一项所述的装置,其特征在于,所述装置还包括:
第三接收单元,用于在获取损坏条带的条带信息之前,接收所述存储服务器发送的坏块的标识;
确定单元,用于确定所述坏块的标识对应的正常条带的条带信息;
第一标记单元,用于将所述正常条带的条带信息中所述坏块的标识对应的正常块标记为坏块;
第二标识单元,用于当所述正常条带的条带信息中标记为坏块的正常块的个数大于所述预设个数时,确定所述正常条带为损坏条带,将所述正常条带的条带信息中标记为坏块的正常块标记为异常块。
21.一种存储服务器,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器、通信接口、存储器通过总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序,实现权利要求1-5任一所述的方法步骤。
22.一种元数据服务器,其特征在于,包括处理器、通信接口、存储器和通信总线,其中,处理器、通信接口、存储器通过总线完成相互间的通信;
存储器,用于存放计算机程序;
处理器,用于执行存储器上所存放的程序,实现权利要求6-10任一所述的方法步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710419968.1A CN109002253B (zh) | 2017-06-06 | 2017-06-06 | 一种损坏条带的处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710419968.1A CN109002253B (zh) | 2017-06-06 | 2017-06-06 | 一种损坏条带的处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109002253A CN109002253A (zh) | 2018-12-14 |
CN109002253B true CN109002253B (zh) | 2021-06-04 |
Family
ID=64573715
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710419968.1A Active CN109002253B (zh) | 2017-06-06 | 2017-06-06 | 一种损坏条带的处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109002253B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111382007B (zh) * | 2018-12-28 | 2024-04-30 | 深圳市茁壮网络股份有限公司 | 一种数据恢复方法、装置及电子设备 |
CN110096402B (zh) * | 2019-05-06 | 2023-08-22 | 苏州盛科通信股份有限公司 | 对芯片数据异常处理逻辑的验证装置和方法 |
CN112100150A (zh) * | 2019-06-17 | 2020-12-18 | 深圳市茁壮网络股份有限公司 | 一种数据读取方法及系统 |
CN111858126B (zh) * | 2020-07-29 | 2022-07-22 | 苏州浪潮智能科技有限公司 | 一种基于k+m纠删集群的数据处理方法及装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103914402A (zh) * | 2014-04-17 | 2014-07-09 | 华中科技大学 | 一种基于纠删码缓存的重构优化方法 |
CN105573872A (zh) * | 2014-10-09 | 2016-05-11 | 腾讯科技(深圳)有限公司 | 数据存储系统的硬盘维护方法和装置 |
CN106598489A (zh) * | 2016-11-28 | 2017-04-26 | 深圳市中博睿存科技有限公司 | 一种基于纠删码存储的文件修改算法优化方法 |
CN106788468A (zh) * | 2016-11-28 | 2017-05-31 | 北京三快在线科技有限公司 | 一种纠删码更新方法及装置,电子设备 |
-
2017
- 2017-06-06 CN CN201710419968.1A patent/CN109002253B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103914402A (zh) * | 2014-04-17 | 2014-07-09 | 华中科技大学 | 一种基于纠删码缓存的重构优化方法 |
CN105573872A (zh) * | 2014-10-09 | 2016-05-11 | 腾讯科技(深圳)有限公司 | 数据存储系统的硬盘维护方法和装置 |
CN106598489A (zh) * | 2016-11-28 | 2017-04-26 | 深圳市中博睿存科技有限公司 | 一种基于纠删码存储的文件修改算法优化方法 |
CN106788468A (zh) * | 2016-11-28 | 2017-05-31 | 北京三快在线科技有限公司 | 一种纠删码更新方法及装置,电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN109002253A (zh) | 2018-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109002253B (zh) | 一种损坏条带的处理方法及装置 | |
CN108446407B (zh) | 基于区块链的数据库审计方法和装置 | |
CN108089893B (zh) | 冗余资源的确定方法、装置、终端设备与存储介质 | |
WO2018000607A1 (zh) | 一种识别测试用例失败原因的方法及电子设备 | |
CN110851308A (zh) | 一种测试方法、装置、电子设备及存储介质 | |
CN110413439B (zh) | 用于检测数据的不完整写入的方法、设备和计算机可读介质 | |
CN112737856B (zh) | 链路追踪方法和装置、存储介质及电子装置 | |
EP3522040A1 (en) | Method and device for file storage | |
CN106713032B (zh) | 一种实现网管业务管理的方法及装置 | |
CN110516752A (zh) | 聚类簇质量评估方法、装置、设备及存储介质 | |
US10205813B2 (en) | Method and system for detecting abnormal contact information and server | |
CN110048899B (zh) | 一种日志检测方法、装置、终端及服务器 | |
CN112202633A (zh) | 区块链网络的测试方法、装置、电子设备及可读存储介质 | |
EP3822763B1 (en) | Data reading method, device, system, and distributed system | |
CN111159160A (zh) | 一种版本回滚方法、装置、电子设备及存储介质 | |
CN113642311A (zh) | 一种数据对比方法、装置、电子设备及存储介质 | |
CN110727895B (zh) | 一种敏感词发送方法、装置、电子设备及存储介质 | |
CN109976828B (zh) | 一种配置文件的方法及装置 | |
CN110489416B (zh) | 一种基于数据处理的信息存储方法及相关设备 | |
CN111413952A (zh) | 机器人故障检测方法、装置、电子设备及可读存储介质 | |
CN111399754B (zh) | 存储空间的释放方法、装置及分布式系统 | |
CN112910936B (zh) | 数据处理方法、装置、系统、电子设备及可读存储介质 | |
CN108614670B (zh) | 一种信息处理方法及装置 | |
CN113946515A (zh) | 代码覆盖率测试方法、装置、计算机设备及存储介质 | |
CN108573018B (zh) | Ip库生成方法、装置、电子设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |