CN107291398A - 一种数据存储的保护方法及装置 - Google Patents

一种数据存储的保护方法及装置 Download PDF

Info

Publication number
CN107291398A
CN107291398A CN201710517139.7A CN201710517139A CN107291398A CN 107291398 A CN107291398 A CN 107291398A CN 201710517139 A CN201710517139 A CN 201710517139A CN 107291398 A CN107291398 A CN 107291398A
Authority
CN
China
Prior art keywords
bit number
data
band
threshold value
default
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710517139.7A
Other languages
English (en)
Inventor
汪之伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201710517139.7A priority Critical patent/CN107291398A/zh
Publication of CN107291398A publication Critical patent/CN107291398A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/062—Securing storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/1658—Data re-synchronization of a redundant component, or initial sync of replacement, additional or spare unit
    • G06F11/1662—Data re-synchronization of a redundant component, or initial sync of replacement, additional or spare unit the resynchronized component or unit being a persistent storage device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • G06F3/0689—Disk arrays, e.g. RAID, JBOD

Abstract

本发明公开了一种数据存储的保护方法及装置，读取固态硬盘第一条带中的数据时，获取读取失败的比特数；判断所述读取失败的比特数是否达到了最大的出错阈值；若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。因此，通过对读取失败的比特数的限定，可以数据损坏之前，将数据转移到安全的位置，而且，通过阈值的限定，也可以表面过度频繁的数据搬移，减小写放大，从而提到了固态硬盘的存储性能。

Description

一种数据存储的保护方法及装置
技术领域
本发明涉及数据存储的领域，尤其涉及一种数据存储的保护方法及装置。
背景技术
随着计算机技术的发展，固态硬盘作为新一代的存储广泛被应用。在通过固态硬盘对数据进行存储时，非常重要的一点是，保证数据的安全性，保证数据不被丢失。
现有技术中，通常采用RAID(英文全称：Redundant Arrays of IndependentDisks，中文全称：独立磁盘构成的具有冗余能力的阵列)方式保证磁盘数据的安全性。RAID是一种把多块独立的硬盘按不同的方式组合起来形成一个硬盘组，从而提供比单个硬盘更高的存储性能和提供数据备份技术。RAID对磁盘阵列的操作与单个硬盘一模一样。不同的是，磁盘阵列的存储速度要比单个硬盘高很多，而且可以提供自动数据备份。数据备份的功能是在用户数据一旦发生损坏后，利用备份信息可以使损坏数据得以恢复，从而保障了用户数据的安全性。
但是，仅仅是通过RAID方式也不能完全保证数据存储的安全性，当RAID阵列中两个单元上的数据出现损坏，RAID条带上的数据就失去了完整性并导致数据无法恢复。
发明内容
有鉴于此，本发明实施例公开了一种数据存储的保护方法及装置，通过对读取失败的比特数的限定，可以数据损坏之前，将数据转移到安全的位置，而且，通过阈值的限定，也可以表面过度频繁的数据搬移，减小写放大，从而提到了固态硬盘的存储性能。
本发明实施例提供的一种数据存储的保护方法，该方法包括：
读取固态硬盘第一条带中的数据时，获取读取失败的比特数；
判断所述读取失败的比特数是否达到了最大的出错阈值；
若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；
若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。
可选的，还包括：
从所述磁盘中获取小于预设擦除阈值的条带；
从小于预设擦除阈值的条带中，随机选取一个条带作为第二条带。
可选的，还包括：
若所述读取失败的比特数未达到预设的错误阈值，则不搬移所述第一条带中的数据
本发明实施例提供的一种数据存储的保护装置，所述装置包括：
第一获取单元，用于读取固态硬盘第一条带中的数据时，获取读取失败的比特数；
第一判断单元，用于判断所述读取失败的比特数是否达到了最大的出错阈值；
第二判断单元，用于若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；
数据搬移单元，用于若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。
可选的，还包括：
第二获取单元，用于从所述磁盘中获取小于预设擦除阈值的条带；
选取单元，用于从小于预设擦除阈值的条带中，随机选取一个条带作为第二条带。
可选的，还包括：
拒绝搬移单元，用于若所述读取失败的比特数未达到预设的错误阈值，则不搬移所述第一条带中的数据。
本实施例中，读取固态硬盘第一条带中的数据时，获取读取失败的比特数；判断所述读取失败的比特数是否达到了最大的出错阈值；若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。因此，通过对读取失败的比特数的限定，可以数据损坏之前，将数据转移到安全的位置，而且，通过阈值的限定，也可以表面过度频繁的数据搬移，减小写放大，从而提到了固态硬盘的存储性能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1示出了本发明实施例提供的一种数据存储的保护方法的流程示意图；
图2示出了本发明实施例提供的一种数据存储的保护装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参考图1，示出了本发明实施例提供的一种数据存储的保护方法的流程示意图，在本实施例中，所述方法可以包括：
S101：读取固态硬盘第一条带中的数据时，获取读取失败的比特数；
本实施例中，S101中固态硬盘可以通过采用RAID的方式保证数据存储的安全性能。本实施例中的固态硬盘，是通过条带化的方式存储的，条带化技术就是一种自动的将I/O的负载均衡到多个物理磁盘上的技术，条带化技术就是将一块连续的数据分成很多小部分并把他们分别存储到不同磁盘上去。每一个条带的存储容量是相同的。因此，对数据读取时，也可以是一个条带的读取数据。
当用户需要查看保存在固态硬盘中的数据时，可以向主机发送读取固态硬盘的指令，当主机在读取固态硬盘中某个条带的数据时，可能会出现数据读取失败的情况，每读取一次数据，主机会反馈数据读取失败的比特数。
S102：判断所述读取失败的比特数是否达到了最大出错阈值；
本实施例中，主机每次读取固态硬盘中保存的数据时，读取失败的比特数存在一个最大的出错范围，即读取失败的比特数若在该最大的出错范围内，纠错码可以将这些读取失败的数据纠正为正确的数据。其中，最大出错阈值为最大的出错范围。
举例说明：假设最大出错阈值为20bit,假设此时读取的数据包括100bit，读取失败的数据包括10bit，则这10bit读取失败的数据可以通过纠错码纠正为正确的数据。
S103：若所述读取失败的比特数未达到预设的最大出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；
S104：若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。
本实施例中，预设的错误阈值小于最大出错阈值，为了保证固态硬盘中数据的安全性，若读取失败的比特数达到了预设的错误阈值，将该第一条带中的数据搬移到一个新的存储性能较好的条带中。
举例说明：假设最大出错阈值为20bit，错误阈值为18bit，若获取到的读取失败的比特数达到18bit时，将本次读取的数据搬移到一个新的存储性能较好的条带中。
本实施例中，在将所述第一条带中的数据搬移到预设的第一条带之前，还需要：确定第二条带。其中，确定第二条带的过程可以包括：
从所述磁盘中获取小于预设擦除阈值的条带；
从小于预设擦除阈值的条带中，随机选取一个条带作为第二条带。
本实施例中，每个条带总的擦除次数是一定的，不同条带总的擦除总量可能不同，擦除阈值可以是每个条带总的擦除次数的占比。例如：对于一个擦除次数为3000的条带，擦出阈值可以是总的擦擦除次数的2/3,及擦出阈值为1000。
本实施例中，还需要说明的是，若读取失败的比特数未达到预设的错误阈值，则不搬移该数据。
本实施例中，通过对读取失败的比特数的限定，可以数据损坏之前，将数据转移到安全的位置，而且，通过阈值的限定，也可以表面过度频繁的数据搬移，减小写放大，从而提到了固态硬盘的存储性能。
参考图2，示出了本发明实施例提供的一种数据存储的保护装置，所述装置包括：
第一获取单元201，用于读取固态硬盘第一条带中的数据时，获取读取失败的比特数；
第一判断单元202，用于判断所述读取失败的比特数是否达到了最大的出错阈值；
第二判断单元203，用于若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；
数据搬移单元204，用于若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。
可选的，还包括：
第二获取单元，用于从所述磁盘中获取小于预设擦除阈值的条带；
选取单元，用于从小于预设擦除阈值的条带中，随机选取一个条带作为第二条带。
可选的，还包括：
拒绝搬移单元，用于若所述读取失败的比特数未达到预设的错误阈值，则不搬移所述第一条带中的数据。
通过本实施例的装置，读取固态硬盘第一条带中的数据时，获取读取失败的比特数；判断所述读取失败的比特数是否达到了最大的出错阈值；若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。因此，通过对读取失败的比特数的限定，可以数据损坏之前，将数据转移到安全的位置，而且，通过阈值的限定，也可以表面过度频繁的数据搬移，减小写放大，从而提到了固态硬盘的存储性能。
需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种数据存储的保护方法，其特征在于，所述方法包括：
读取固态硬盘第一条带中的数据时，获取读取失败的比特数；
判断所述读取失败的比特数是否达到了最大的出错阈值；
若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；
若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。
2.根据权利要求1所述的方法，其特征在于，还包括：
从所述磁盘中获取小于预设擦除阈值的条带；
从小于预设擦除阈值的条带中，随机选取一个条带作为第二条带。
3.根据权利要求1所述的方法，其特征在于，还包括：
若所述读取失败的比特数未达到预设的错误阈值，则不搬移所述第一条带中的数据。
4.一种数据存储的保护装置，其特征在于，所述装置包括：
第一获取单元，用于读取固态硬盘第一条带中的数据时，获取读取失败的比特数；
第一判断单元，用于判断所述读取失败的比特数是否达到了最大的出错阈值；
第二判断单元，用于若所述读取失败的比特数未达到最大的出错阈值，判断读取失败的比特数是否达到了预设的错误阈值；
数据搬移单元，用于若所述读取失败的比特数达到了预设的错误阈值，将所述第一条带中的数据搬移到预设的第二条带中。
5.根据权利要求4所述的装置，其特征在于，还包括：
第二获取单元，用于从所述磁盘中获取小于预设擦除阈值的条带；
选取单元，用于从小于预设擦除阈值的条带中，随机选取一个条带作为第二条带。
6.根据权利要求4所述的装置，其特征在于，还包括：
拒绝搬移单元，用于若所述读取失败的比特数未达到预设的错误阈值，则不搬移所述第一条带中的数据。
CN201710517139.7A 2017-06-29 2017-06-29 一种数据存储的保护方法及装置 Pending CN107291398A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710517139.7A CN107291398A (zh) 2017-06-29 2017-06-29 一种数据存储的保护方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710517139.7A CN107291398A (zh) 2017-06-29 2017-06-29 一种数据存储的保护方法及装置

Publications (1)

Publication Number Publication Date
CN107291398A true CN107291398A (zh) 2017-10-24

Family

ID=60099251

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710517139.7A Pending CN107291398A (zh) 2017-06-29 2017-06-29 一种数据存储的保护方法及装置

Country Status (1)

Country Link
CN (1) CN107291398A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110209517A (zh) * 2019-04-25 2019-09-06 深圳市金泰克半导体有限公司 一种固态硬盘工作方法、系统、电子设备及存储介质
CN110209550A (zh) * 2019-05-24 2019-09-06 新华三技术有限公司成都分公司 存储介质的故障处理方法、装置、电子设备及存储介质
CN110265083A (zh) * 2018-03-12 2019-09-20 旺宏电子股份有限公司 存储器装置的数据探测方法
CN110321058A (zh) * 2018-03-29 2019-10-11 杭州海康威视数字技术股份有限公司 一种数据处理方法及其装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080195837A1 (en) * 2007-02-09 2008-08-14 Fujitsu Limited Data access method, channel adapter, and data access control device
CN101631322A (zh) * 2008-07-14 2010-01-20 大唐移动通信设备有限公司 一种失步检测的方法和装置
CN101645026A (zh) * 2008-08-07 2010-02-10 创惟科技股份有限公司 根据错误更正码更新闪存页面的储存装置与方法
CN101739306A (zh) * 2008-11-12 2010-06-16 成都市华为赛门铁克科技有限公司 数据错误处理方法、数据错误检查和纠正装置及系统
CN102043639A (zh) * 2009-10-12 2011-05-04 珠海全志科技有限公司 一种从nand flash启动处理系统的方法及装置
CN102073563A (zh) * 2011-02-23 2011-05-25 深圳市江波龙电子有限公司 闪存设备、闪存设备中存储块的管理方法及系统
CN104572489A (zh) * 2013-10-23 2015-04-29 深圳市腾讯计算机系统有限公司 磨损均衡方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080195837A1 (en) * 2007-02-09 2008-08-14 Fujitsu Limited Data access method, channel adapter, and data access control device
CN101631322A (zh) * 2008-07-14 2010-01-20 大唐移动通信设备有限公司 一种失步检测的方法和装置
CN101645026A (zh) * 2008-08-07 2010-02-10 创惟科技股份有限公司 根据错误更正码更新闪存页面的储存装置与方法
CN101739306A (zh) * 2008-11-12 2010-06-16 成都市华为赛门铁克科技有限公司 数据错误处理方法、数据错误检查和纠正装置及系统
CN102043639A (zh) * 2009-10-12 2011-05-04 珠海全志科技有限公司 一种从nand flash启动处理系统的方法及装置
CN102073563A (zh) * 2011-02-23 2011-05-25 深圳市江波龙电子有限公司 闪存设备、闪存设备中存储块的管理方法及系统
CN104572489A (zh) * 2013-10-23 2015-04-29 深圳市腾讯计算机系统有限公司 磨损均衡方法及装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110265083A (zh) * 2018-03-12 2019-09-20 旺宏电子股份有限公司 存储器装置的数据探测方法
CN110321058A (zh) * 2018-03-29 2019-10-11 杭州海康威视数字技术股份有限公司 一种数据处理方法及其装置
CN110321058B (zh) * 2018-03-29 2023-08-25 杭州海康威视数字技术股份有限公司 一种数据处理方法及其装置
CN110209517A (zh) * 2019-04-25 2019-09-06 深圳市金泰克半导体有限公司 一种固态硬盘工作方法、系统、电子设备及存储介质
CN110209517B (zh) * 2019-04-25 2024-01-23 深圳市金泰克半导体有限公司 一种固态硬盘工作方法、系统、电子设备及存储介质
CN110209550A (zh) * 2019-05-24 2019-09-06 新华三技术有限公司成都分公司 存储介质的故障处理方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN107291398A (zh) 一种数据存储的保护方法及装置
US9535802B2 (en) Management and recovery of distributed storage of replicas
US7017107B2 (en) Storage array employing scrubbing operations at the disk-controller level
US7062704B2 (en) Storage array employing scrubbing operations using multiple levels of checksums
US8438455B2 (en) Error correction in a solid state disk
US8812902B2 (en) Methods and systems for two device failure tolerance in a RAID 5 storage system
US8082465B1 (en) Auto-adapting cache memory system and method
CN104881370B (zh) 协同使用纠删码和纠错码的可靠闪存存储系统构建方法
US10521304B1 (en) Multidimensional RAID
US20120278679A1 (en) Iterating Inner and Outer Codes for Data Recovery
CN103034458B (zh) 固态硬盘中实现独立磁盘冗余阵列的方法及装置
CN102043685A (zh) 独立磁盘冗余阵列系统及其数据恢复方法
US20120089799A1 (en) Data backup processing method, data storage node apparatus and data storage device
CN104035830A (zh) 一种数据恢复方法和装置
CN103699337B (zh) 一种基于独立磁盘冗余阵列raid的写控制方法及系统
US20100205372A1 (en) Disk array control apparatus
US10177791B1 (en) Syndrome update and maintenance
US20150089328A1 (en) Flex Erasure Coding of Controllers of Primary Hard Disk Drives Controller
CN102508733A (zh) 一种基于磁盘阵列的数据处理方法及磁盘阵列管理器
CN103530069A (zh) 一种raid5磁盘阵列坏扇区处理方法
CN109032513B (zh) 基于ssd和hdd的raid架构及其备份、重建方法
CN103678025B (zh) 一种磁盘阵列中的磁盘故障处理方法
CN102226892B (zh) 一种磁盘容错处理方法及设备
CN105630417A (zh) 一种raid5系统及在raid5系统失效后继续写数据的方法
RU2502124C1 (ru) Способ восстановления записей в запоминающем устройстве и система для его осуществления

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20171024

RJ01 Rejection of invention patent application after publication