CN109003643A - 一种数据处理方法及装置 - Google Patents

一种数据处理方法及装置 Download PDF

Info

Publication number
CN109003643A
CN109003643A CN201810799703.3A CN201810799703A CN109003643A CN 109003643 A CN109003643 A CN 109003643A CN 201810799703 A CN201810799703 A CN 201810799703A CN 109003643 A CN109003643 A CN 109003643A
Authority
CN
China
Prior art keywords
block
data
storage device
failure
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810799703.3A
Other languages
English (en)
Inventor
董海廷
王孝鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201810799703.3A priority Critical patent/CN109003643A/zh
Publication of CN109003643A publication Critical patent/CN109003643A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11CSTATIC STORES
    • G11C29/00Checking stores for correct operation ; Subsequent repair; Testing stores during standby or offline operation
    • G11C29/04Detection or location of defective memory elements, e.g. cell constructio details, timing of test signals
    • G11C29/08Functional testing, e.g. testing during refresh, power-on self testing [POST] or distributed testing
    • G11C29/12Built-in arrangements for testing, e.g. built-in self testing [BIST] or interconnection details
    • G11C29/44Indication or identification of errors, e.g. for repair

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

本发明实施例提供了一种数据处理方法及装置,用于提高NVM中存储的数据的安全性。该方法包括:获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;获取所述目标存储设备的第二诊断数据;对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。

Description

一种数据处理方法及装置
技术领域
本发明涉及存储领域,特别涉及一种数据处理方法及装置。
背景技术
随着云计算时代的到来,固态存储的发展突飞猛进,NVM(Non-volatile memory,非易失存储器)得到广泛的应用。
在云计算、大数据时代,数据成为一种无形的重要资产,其重要程度是无法估量的,所以怎样保护好数据便成为了一个值得研究的方向。非易失存储器作为一种重要的存储介质广泛应用于计算机、存储器等多个存储领域,是一种新型的存储介质。NVM具有非易失、按字节存取、存储密度高、低能耗、读写性能接近DRAM,但读写速度不对称,读远快于写,但由于内部磨损情况其寿命有限。如果出现存储块损坏,其保存的数据有可能丢失,这将会造成不可挽回的损失。
因此迫切需要一种管理方法对NVM中的故障盘块信息进行管理,以保证NVM中存储数据的安全性。
发明内容
本发明实施例提供了一种数据处理方法及装置,用于提高NVM中存储数据的安全性。
本发明实施例第一方面提供了一种数据处理方法,具体包括:
获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
获取所述目标存储设备的第二诊断数据;
对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
可选地,所述获取目标存储设备的第一诊断数据包括:
通过scrub巡检所述目标存储设备中的各个盘块,以得到目标故障块集合,所述目标故障块集合中包括可修复的故障块和/或不可修复的故障块和/或已修复过的故障块;
对所述故障块集合中可修复的故障块进行修复,以记录第一故障块信息;
获取所述故障块集合中不可修复的故障块的第二故障块信息,所述第二故障块信息包括所述目标故障块集合中不可修复的故障块的数量以及逻辑地址;
获取所述目标故障块集合中已修复过的故障块的第三故障块信息,所述第三故障块信息包括所述目标集合中已修复过的故障块的数量以及逻辑地址;
将所述第一故障块信息、所述第二故障块信息以及第三故障块信息确定为所述第一诊断数据。
可选地,所述基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果包括:
对所述目标故障块集合中故障频率高于第一预设阈值的盘块进行预警;
和/或,
当所述目标存储设备的温度高于第二预设阈值时,调节所述目标存储设备的温度;
和/或,
发出提示信息,所述提示信息用于指示所述目标故障块集合中不可修复的故障块信息,和/或,所述提示信息用于指示所述目标存储设备中的剩余空间少于第三预设阈值或,和/或,所述提示信息用于指示所述目标存储设备的存储性能。
可选地,所述基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果之后,所述方法还包括:
展示所述处理结果。
本发明实施例第二方面提供了一种数据处理装置,包括:
第一获取单元,用于获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
第二获取单元,用于获取所述目标存储设备的第二诊断数据;
解析单元,用于对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
处理单元,用于基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
可选地,所述第一获取单元具体用于:
通过scrub巡检所述目标存储设备中的各个盘块,以得到目标故障块集合,所述目标故障块集合中包括可修复的故障块和/或不可修复的故障块和/或已修复过的故障块;
对所述故障块集合中可修复的故障块进行修复,以记录第一故障块信息;
获取所述故障块集合中不可修复的故障块的第二故障块信息,所述第二故障块信息包括所述目标故障块集合中不可修复的故障块的数量以及逻辑地址;
获取所述目标故障块集合中已修复过的故障块的第三故障块信息,所述第三故障块信息包括所述目标集合中已修复过的故障块的数量以及逻辑地址;
将所述第一故障块信息、所述第二故障块信息以及第三故障块信息确定为所述第一诊断数据。
可选地,所述处理单元具体用于:
对所述目标故障块集合中故障频率高于第一预设阈值的盘块进行预警;
和/或,
当所述目标存储设备的温度高于第二预设阈值时,调节所述目标存储设备的温度;
和/或,
发出提示信息,所述提示信息用于指示所述目标故障块集合中不可修复的故障块信息,和/或,所述提示信息用于指示所述目标存储设备中的剩余空间少于第三预设阈值或,和/或,所述提示信息用于指示所述目标存储设备的存储性能。
可选地,所述装置还包括:
展示单元,用于展示所述处理结果。
本发明实施例第三方面提供了一种处理器,所述处理器用于运行计算机程序,所述计算机程序运行时执行如上述各方面所述方法的步骤。
本发明实施例第四方面提供了一种计算机可读存储介质,其上存储有计算机程序,其特征在于:所述计算机程序被处理器执行时上述各方面所述方法的步骤。
从以上技术方案可以看出,本发明实施例中,获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;获取所述目标存储设备的第二诊断数据;对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;基于所述第一诊断数据以及所述目标存储设备的健康数据对所述目标存储设备进行处理,以得到处理结果。由此可以看出,本申请实施例中,可以收集非易失存储器的健康状态信息,对收集到的NVM的健康状态信息进行解析,诊断出故障信息。然后根据收集到的NVM的健康状态信息对NVM的故障信息区进行处理,这样便可以尽可能的保证NVM的可用性,进而保证NVM中存储数据的安全性。
附图说明
图1为本发明实施例提供的数据处理方法的实施例示意图;
图2为本发明实施例提供的数据处理装置的实施例示意图;
图3为本发明实施例提供的数据处理设备的硬件结构示意图;
图4为本发明实施例提供的一种电子设备的实施例示意图;
图5为本发明实施例提供的一种计算机可读存储介质的实施例示意图。
具体实施方式
本发明实施例提供了一种数据处理方法及数据处理装置,用于提高NVM中存储数据的安全性。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面从数据处理装置的角度对数据处理方法进行描述,该数据处理装置可以为服务器,也可以为服务器中的服务单元,具体不做限定。
请参阅图1,图1为本发明实施例提供的数据处理方法的一个实施例示意图,包括:
101、获取目标存储设备的第一诊断数据。
本实施例,数据处理装置可以获取目标存储设备的第一健康诊断信息,其中,该目标存储设备即为NVM非易失性存储器,该第一将康诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息。
需要说明的是,数据处理装置可以通过如下方式获取NVM的第一诊断数据:
通过scrub巡检所述目标存储设备中的各个盘块,以得到目标故障块集合,所述目标故障块集合中包括可修复的故障块和/或不可修复的故障块和/或已修复过的故障块;
对所述故障块集合中可修复的故障块进行修复,以记录第一故障块信息;
获取所述故障块集合中不可修复的故障块的第二故障块信息,所述第二故障块信息包括所述目标故障块集合中不可修复的故障块的数量以及逻辑地址;
获取所述目标故障块集合中已修复过的故障块的第三故障块信息,所述第三故障块信息包括所述目标集合中已修复过的故障块的数量以及逻辑地址;
将所述第一故障块信息、所述第二故障块信息以及第三故障块信息确定为所述第一诊断数据。
需要说明的是,在基于第一诊断数据以及目标诊断数据对目标存储设备进行处理,得到处理结果之后,还可以展示该处理结果。
本实施例中,数据处理装置会通过驱动scrub定时巡检NVM中的故障盘块信息,以得到第一诊断数据,通过驱动scrub定时巡检NVM中的各个盘块,确定出NVM中的故障块集合,对故障块集合中的可自动修复的故障块进行自动修复,并记录故障块信息,作为第一故障块信息;获取NVM中不可修复的故障块地址列表以及在当次巡检过程之前已经发生过故障且已经修复的故障块,统计两种故障盘块个数和对应盘块等信息,作为第二故障块信息以及第三故障块信息,进而得到第一诊断数据。
需要说明的是,由于NVM使用程度的不同,NVM中可能会单独存在只有一种故障类型,例如可修复的故障块或已修复的故障块或不可修复的故障块,上述对三种故障块分别进行说明,当存在不同情况时,获取NVM故障盘块的故障信息可以采用上述方式进行获取,具体不做限定。
102、获取目标存储设备的第二诊断数据。
本实施例中,数据处理装置可以获取目标存储设备的第二诊断数据,具体的,数据处理装置可以通过SMBUS(System Management Bus,系统管理总线)获取NVM的健康状态信息,即第二诊断数据,其中,第二诊断数据包括smart info,media error info,Uncorrectable/Poison error Info,Performance info等数据中的至少一个。
103、对第二诊断数据进行解析,以得到目标存储设备的目标诊断数据。
本实施例中,数据处理装置在得到第二诊断数据之后,可以对第二诊断数据进行解析,以得到目标存储设备的目标诊断数据,其中,目标诊断数据与第二诊断数据具有关联关系,也就是说,目标诊断数据中的各个数据与第二诊断数据中的各个数据一一对应。具体的,可以通过对smart info数据进行解析得到NVM中各个盘块的温度,NVM已经使用时间,NVM中的剩余空间等信息;通过对media error info数据进行解析得到media error个数;通过对Uncorrectable/Poison error Info数据进行解析得到Uncorrectable/Poisonerror个数;通过对Performance info数据进行解析得到NVM的性能信息。
104、基于第一诊断数据以及目标诊断数据对目标存储设备进行处理,以得到处理结果。
本实施例中,数据处理装置在得到第一诊断数据以及目标诊断数据之后,可以基于第一诊断数据以及目标诊断数据对目标存储设备进行处理,以得到处理结果。具体处理过程如下:
对所述目标故障块集合中故障频率高于第一预设阈值的盘块进行预警;
和/或,
当所述目标存储设备的温度高于第二预设阈值时,调节所述目标存储设备的温度;
和/或,
发出提示信息,所述提示信息用于指示所述目标故障块集合中不可修复的故障块信息,和/或,所述提示信息用于指示所述目标存储设备中的剩余空间少于第三预设阈值或,和/或,所述提示信息用于指示所述目标存储设备的存储性能。
本实施例中,数据处理装置可以结合第一诊断数据以及目标诊断数据做出相应的处理措施,通过第一诊断数据中的故障盘块的信息和目标诊断数据中的使用时间信息进行分析,得到NVM中故障频率高于第一预设阈值的盘块进行预警;根据目标诊断数据中的smart info数据进行解析得到NVM的温度大于第二预设阈值时,可以动态调整风扇转速,以降低NVM的温度;通过解析smart info数据得到NVM的使用寿命,对寿命的预估发出提示信息,该提示信息指示用户更换NVM;通过解析smart info数据得到NVM的剩余空间信息,且当NVM的剩余空间少于第三预设阈值时,并发出提示信息,提示用户增加NVM中的盘块或删除NVM中的无用数据;通过解析media error info,Uncorrectable/Poison error Info,Performance info数据,得到media error、Uncorrectable error以及Poison error个数,当解析得到的edia error、Uncorrectable error以及Poison error个数过多时,例如大于一个预设的阈值,可能预示着NVM已经存在问题,可以发出提示信息,提示用户对NVM进行相应的检查,同样的还可以解析media error info,Uncorrectable/Poison error Info,Performance info数据解析得到NVM中不可修复的故障块,并发出提示信息,指示用户对NVM中不可修复的故障块进行提示更换或其他处理;根据performance info数据计算出NVM的性能信息,如果得出的性能信息是NVM的性能下降,也同样会发出提示信息,提示信息中,携带有NVM性能下降信息,用户可以根据该NVM性能下降信息决定更换NVM或手动修复NVM。
综上所述,本发明实施例中,可以收集非易失存储器的健康状态信息,对收集到的NVM的健康状态信息进行解析,诊断出故障信息。然后根据收集到的NVM的健康状态信息对NVM的故障信息区进行处理,这样便可以尽可能的保证NVM的可用性,进而保证NVM中存储数据的安全性。
上面从数据处理方法的角度对本发明实施例进行说明,下面从数据处理装置的角度对本发明实施例进行说明。
请参阅图2,图2为本发明实施例提供的数据处理装置的实施例示意图,该数据处理装置包括:
第一获取单元201,用于获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
第二获取单元202,用于获取所述目标存储设备的第二诊断数据;
解析单元203,用于对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
处理单元204,用于基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
可选地,所述第一获取单元201具体用于:
通过scrub巡检所述目标存储设备中的各个盘块,以得到目标故障块集合,所述目标故障块集合中包括可修复的故障块和/或不可修复的故障块和/或已修复过的故障块;
对所述故障块集合中可修复的故障块进行修复,以记录第一故障块信息;
获取所述故障块集合中不可修复的故障块的第二故障块信息,所述第二故障块信息包括所述目标故障块集合中不可修复的故障块的数量以及逻辑地址;
获取所述目标故障块集合中已修复过的故障块的第三故障块信息,所述第三故障块信息包括所述目标集合中已修复过的故障块的数量以及逻辑地址;
将所述第一故障块信息、所述第二故障块信息以及第三故障块信息确定为所述第一诊断数据。
可选地,所述处理单元204具体用于:
对所述目标故障块集合中故障频率高于第一预设阈值的盘块进行预警;
和/或,
当所述目标存储设备的温度高于第二预设阈值时,调节所述目标存储设备的温度;
和/或,
发出提示信息,所述提示信息用于指示所述目标故障块集合中不可修复的故障块信息,和/或,所述提示信息用于指示所述目标存储设备中的剩余空间少于第三预设阈值或,和/或,所述提示信息用于指示所述目标存储设备的存储性能。
可选地,所述装置还包括:
展示单元205,用于展示所述处理结果。
本实施例中的数据处理装置的各单元之间的交互方式如前述图1所示实施例中的描述,具体此处不再赘述。
综上所述,本发明实施例中,可以收集非易失存储器的健康状态信息,对收集到的NVM的健康状态信息进行解析,诊断出故障信息。然后根据收集到的NVM的健康状态信息对NVM的故障信息区进行处理,这样便可以尽可能的保证NVM的可用性,进而保证NVM中存储数据的安全性。
上面从模块化功能实体的角度对本发明实施例中的数据处理装置进行了描述,下面从硬件处理的角度对本发明实施例中的数据处理装置进行描述。
请参阅图3,本发明实施例中的数据处理设备300一个实施例,包括:
输入装置301、输出装置302、处理器303和存储器304(其中处理器303的数量可以一个或多个,图3中以一个处理器303为例)。在本发明的一些实施例中,输入装置301、输出装置302、处理器303和存储器304可通过总线或其它方式连接,其中,图3中以通过总线连接为例。
其中,通过调用存储器304存储的操作指令,处理器303,用于执行如下步骤:
获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
获取所述目标存储设备的第二诊断数据;
对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
在具体实施过程中,调用存储器304存储的操作指令,处理器303可以实现图1对应的实施例中任一实施方式。
请参阅图4,图4为本发明实施例提供的电子设备的实施例示意图。
如图4所示,本发明实施例提供了一种电子设备400,包括存储器410、处理器420及存储在存储器410上并可在处理器420上运行的计算机程序411,处理器420执行计算机程序411时实现以下步骤:
获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
获取所述目标存储设备的第二诊断数据;
对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
在具体实施过程中,处理器420执行计算机程序411时,可以实现图1对应的实施例中任一实施方式。
由于本实施例所介绍的电子设备为实施本发明实施例中数据处理方法所采用的设备,故而基于本发明实施例中所介绍的方法,本领域所属技术人员能够了解本实施例的电子设备的具体实施方式以及其各种变化形式,所以在此对于该电子设备如何实现本发明实施例中的方法不再详细介绍,只要本领域所属技术人员实施本发明实施例中的方法所采用的设备,都属于本发明所欲保护的范围。
请参阅图5,图5为本发明实施例提供的一种计算机可读存储介质的实施例示意图。
如图5所示,本实施例提供了一种计算机可读存储介质500,其上存储有计算机程序511,该计算机程序511被处理器执行时实现如下步骤:
获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
获取所述目标存储设备的第二诊断数据;
对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
在具体实施过程中,该计算机程序511被处理器执行时可以实现图1对应的实施例中任一实施方式。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、块闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相匹配要素。
本领域技术人员应明白,本发明的实施例可提供为方法、系统或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本发明的实施例而已,并不用于限制本发明。对于本领域技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本发明的权利要求范围之内。

Claims (10)

1.一种数据处理方法,其特征在于,包括:
获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
获取所述目标存储设备的第二诊断数据;
对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
2.根据权利要求1所述的方法,其特征在于,所述获取目标存储设备的第一诊断数据包括:
通过scrub巡检所述目标存储设备中的各个盘块,以得到目标故障块集合,所述目标故障块集合中包括可修复的故障块和/或不可修复的故障块和/或已修复过的故障块;
对所述故障块集合中可修复的故障块进行修复,以记录第一故障块信息;
获取所述故障块集合中不可修复的故障块的第二故障块信息,所述第二故障块信息包括所述目标故障块集合中不可修复的故障块的数量以及逻辑地址;
获取所述目标故障块集合中已修复过的故障块的第三故障块信息,所述第三故障块信息包括所述目标集合中已修复过的故障块的数量以及逻辑地址;
将所述第一故障块信息、所述第二故障块信息以及第三故障块信息确定为所述第一诊断数据。
3.根据权利要求2所述的方法,其特征在于,所述基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果包括:
对所述目标故障块集合中故障频率高于第一预设阈值的盘块进行预警;
和/或,
当所述目标存储设备的温度高于第二预设阈值时,调节所述目标存储设备的温度;
和/或,
发出提示信息,所述提示信息用于指示所述目标故障块集合中不可修复的故障块信息,和/或,所述提示信息用于指示所述目标存储设备中的剩余空间少于第三预设阈值或,和/或,所述提示信息用于指示所述目标存储设备的存储性能。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果之后,所述方法还包括:
展示所述处理结果。
5.一种数据处理装置,其特征在于,包括:
第一获取单元,用于获取目标存储设备的第一诊断数据,所述第一诊断数据包括可修复的故障块信息和/或不可修复的故障块信息和/或已修复过的故障块信息;
第二获取单元,用于获取所述目标存储设备的第二诊断数据;
解析单元,用于对所述第二诊断数据进行解析,以得到所述目标存储设备的目标诊断数据,所述目标诊断数据与所述第二诊断数据具有关联关系;
处理单元,用于基于所述第一诊断数据以及所述目标诊断数据对所述目标存储设备进行处理,以得到处理结果。
6.根据权利要求5所述的装置,其特征在于,所述第一获取单元具体用于:
通过scrub巡检所述目标存储设备中的各个盘块,以得到目标故障块集合,所述目标故障块集合中包括可修复的故障块和/或不可修复的故障块和/或已修复过的故障块;
对所述故障块集合中可修复的故障块进行修复,以记录第一故障块信息;
获取所述故障块集合中不可修复的故障块的第二故障块信息,所述第二故障块信息包括所述目标故障块集合中不可修复的故障块的数量以及逻辑地址;
获取所述目标故障块集合中已修复过的故障块的第三故障块信息,所述第三故障块信息包括所述目标集合中已修复过的故障块的数量以及逻辑地址;
将所述第一故障块信息、所述第二故障块信息以及第三故障块信息确定为所述第一诊断数据。
7.根据权利要求6所述的装置,其特征在于,所述处理单元具体用于:
对所述目标故障块集合中故障频率高于第一预设阈值的盘块进行预警;
和/或,
当所述目标存储设备的温度高于第二预设阈值时,调节所述目标存储设备的温度;
和/或,
发出提示信息,所述提示信息用于指示所述目标故障块集合中不可修复的故障块信息,和/或,所述提示信息用于指示所述目标存储设备中的剩余空间少于第三预设阈值或,和/或,所述提示信息用于指示所述目标存储设备的存储性能。
8.根据权利要求5至7中任一项所述的装置,其特征在于,所述装置还包括:
展示单元,用于展示所述处理结果。
9.一种处理器,其特征在于,所述处理器用于运行计算机程序,所述计算机程序运行时执行如权利要求1至4中任意一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于:所述计算机程序被处理器执行时实现如权利要求1至4中任意一项所述方法的步骤。
CN201810799703.3A 2018-07-20 2018-07-20 一种数据处理方法及装置 Pending CN109003643A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810799703.3A CN109003643A (zh) 2018-07-20 2018-07-20 一种数据处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810799703.3A CN109003643A (zh) 2018-07-20 2018-07-20 一种数据处理方法及装置

Publications (1)

Publication Number Publication Date
CN109003643A true CN109003643A (zh) 2018-12-14

Family

ID=64596418

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810799703.3A Pending CN109003643A (zh) 2018-07-20 2018-07-20 一种数据处理方法及装置

Country Status (1)

Country Link
CN (1) CN109003643A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112217691A (zh) * 2020-02-19 2021-01-12 杜义平 基于云平台的网络诊断处理方法及装置
CN115295061A (zh) * 2022-10-09 2022-11-04 江苏华存电子科技有限公司 一种存储器固件检修方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1851826A (zh) * 2006-01-25 2006-10-25 华为技术有限公司 随机存储器失效的检测处理方法及其系统
CN104951383A (zh) * 2014-03-31 2015-09-30 伊姆西公司 用于监测硬盘的健康状况的方法和装置
CN105097045A (zh) * 2014-04-15 2015-11-25 爱德万测试公司 用于nand闪存器件中的缺陷修复的方法和装置
CN105575434A (zh) * 2014-10-31 2016-05-11 英飞凌科技股份有限公司 非易失性存储器的健康状态

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1851826A (zh) * 2006-01-25 2006-10-25 华为技术有限公司 随机存储器失效的检测处理方法及其系统
CN104951383A (zh) * 2014-03-31 2015-09-30 伊姆西公司 用于监测硬盘的健康状况的方法和装置
CN105097045A (zh) * 2014-04-15 2015-11-25 爱德万测试公司 用于nand闪存器件中的缺陷修复的方法和装置
CN105575434A (zh) * 2014-10-31 2016-05-11 英飞凌科技股份有限公司 非易失性存储器的健康状态

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112217691A (zh) * 2020-02-19 2021-01-12 杜义平 基于云平台的网络诊断处理方法及装置
CN115295061A (zh) * 2022-10-09 2022-11-04 江苏华存电子科技有限公司 一种存储器固件检修方法及系统
CN115295061B (zh) * 2022-10-09 2022-12-16 江苏华存电子科技有限公司 一种存储器固件检修方法及系统

Similar Documents

Publication Publication Date Title
US11087329B2 (en) Method and apparatus of identifying a transaction risk
CN109725822B (zh) 用于管理存储系统的方法、设备和计算机程序产品
US9612953B1 (en) Data placement based on data properties in a tiered storage device system
US9811457B2 (en) Data placement based on data retention in a tiered storage device system
CN106844108B (zh) 一种数据存储方法、服务器以及存储系统
CN107391301A (zh) 存储系统的数据管理方法、装置、计算设备及存储介质
CN108846749A (zh) 一种基于区块链技术的分片化的交易执行系统及方法
CN109189602A (zh) 一种PCIE Slot故障定位方法、装置以及设备
CN107273195A (zh) 一种大数据的批处理方法、装置及计算机系统
CN108540315A (zh) 分布式存储系统、方法和装置
US11270227B2 (en) Method for managing a machine learning model
CN113220540B (zh) 业务管理方法、装置、计算机设备和存储介质
US20130110785A1 (en) System and method for backing up test data
CN107832446B (zh) 一种配置项信息的搜索方法及计算设备
CN109003643A (zh) 一种数据处理方法及装置
CN109905261A (zh) 故障诊断方法及装置
CN112579327A (zh) 一种故障检测方法、装置及设备
CN110008056A (zh) 内存管理方法、装置、电子设备及计算机可读存储介质
CN108920326A (zh) 确定系统耗时异常的方法、装置及电子设备
CN108958665A (zh) 一种历史记录信息的存储方法及装置
CN107193679A (zh) 一种容灾方法及系统
CN115442262B (zh) 一种资源评估方法、装置、电子设备及存储介质
US20160055211A1 (en) Apparatus and method for memory storage and analytic execution of time series data
CN106708445A (zh) 链路选择方法及装置
CN110780815A (zh) 日志的删除方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181214