CN107025066A - 在基于闪存的存储介质中写入存储数据的方法和装置 - Google Patents

在基于闪存的存储介质中写入存储数据的方法和装置 Download PDF

Info

Publication number
CN107025066A
CN107025066A CN201610827195.6A CN201610827195A CN107025066A CN 107025066 A CN107025066 A CN 107025066A CN 201610827195 A CN201610827195 A CN 201610827195A CN 107025066 A CN107025066 A CN 107025066A
Authority
CN
China
Prior art keywords
accumulative
total degree
main frame
erasing
physical store
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610827195.6A
Other languages
English (en)
Inventor
张海鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Oceanbase Technology Co Ltd
Original Assignee
Alibaba Group Holding Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alibaba Group Holding Ltd filed Critical Alibaba Group Holding Ltd
Priority to CN201610827195.6A priority Critical patent/CN107025066A/zh
Priority to TW106124168A priority patent/TWI676992B/zh
Publication of CN107025066A publication Critical patent/CN107025066A/zh
Priority to BR112019004916A priority patent/BR112019004916A2/pt
Priority to RU2019110993A priority patent/RU2735407C2/ru
Priority to AU2017325886A priority patent/AU2017325886B2/en
Priority to EP17850208.4A priority patent/EP3514674B1/en
Priority to MX2019002948A priority patent/MX2019002948A/es
Priority to PCT/CN2017/100570 priority patent/WO2018050006A1/zh
Priority to MYPI2019001345A priority patent/MY188873A/en
Priority to CA3036415A priority patent/CA3036415C/en
Priority to KR1020197010643A priority patent/KR102275094B1/ko
Priority to JP2019514207A priority patent/JP2019532413A/ja
Priority to US16/351,904 priority patent/US11099744B2/en
Priority to PH12019500555A priority patent/PH12019500555A1/en
Priority to ZA2019/02298A priority patent/ZA201902298B/en
Priority to AU2019101583A priority patent/AU2019101583A4/en
Priority to US17/375,033 priority patent/US11287984B2/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • G06F3/0616Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647Migration mechanisms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0652Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0673Single storage device
    • G06F3/0679Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0688Non-volatile semiconductor memory arrays

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Techniques For Improving Reliability Of Storages (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Read Only Memory (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请提供一种在基于闪存的存储介质中写入存储数据的方法,应用在对至少两个物理存储单位进行写入控制的中控功能模块上,包括:获取每个物理存储单位内所有块的累计擦除总次数;在满足预定写入条件的物理存储单位中,将存储数据写入到累计擦除总次数最少的至少一个物理存储单位上。本申请的技术方案在不同的物理存储单位之间实现了均衡擦写,避免了对单个物理存储单位擦写过多导致的该物理存储单位的提前损坏,在高可用性场景中能够提高所在系统的稳定性。

Description

在基于闪存的存储介质中写入存储数据的方法和装置
技术领域
本申请涉及计算机及网络技术领域,尤其涉及一种在基于闪存的存储介质中写入存储数据的方法和装置。
背景技术
使用闪存作为存储介质,并采用电子读写的SSD(Solid State Drives,固态硬盘)有着优异的读写性能,已经成为个人电脑以及服务器存储的主流硬件。SSD的存储介质是Nand Flash闪存颗粒,其每一位(bit)的物理特性是可以通过对晶体管充电使该位的值由1变为0,而只能通过擦除来将其值由0重置为1。擦除操作以Block(块)为单位进行。
而Nand Flash闪存颗粒的寿命通过其擦写次数来衡量,某个Block达到了这个擦写次数后,该Block无法再用来存储数据,成为坏块。随着坏块的增多,SSD的使用寿命就会锐减。
因此,现有技术中采用FTL(Flash Translation Level,闪存转换层)均衡擦写算法或具有均衡擦写功能的文件系统层,来尽可能实现对同一个SSD上各个块的均衡擦写,以延长单个SSD的使用寿命。例如,FTL层动态均衡策略、FTL层的静态均衡策略、JAFF2(Journalling Flash File System Version2,日志闪存文件系统第2版)、YAFFS(YetAnother Flash File System,另一种闪存文件系统)等。
但是,对于有多个SSD可供使用的系统,常常会发生对某个或某些SSD的擦写次数过多,远超过对另外某个或某些SSD的情形,从而导致使用过多的SSD提前损坏。如果该SSD上存储的数据没有采用高可用性方案,可能造成数据丢失;对采用了高可用性存储方案的系统来说,则会因额外的数据迁移降低系统的稳定性。
发明内容
有鉴于此,本申请提供一种在基于闪存的存储介质中写入存储数据的方法,应用在对至少两个物理存储单位进行写入控制的中控功能模块上,包括:
获取每个物理存储单位内所有块的累计擦除总次数;
在满足预定写入条件的物理存储单位中,将存储数据写入到累计擦除总次数最少的至少一个物理存储单位上。
本申请还提供了一种在基于闪存的存储介质中写入存储数据的装置,应用在对至少两个物理存储单位进行写入控制的中控功能模块上,包括:
累计擦除总次数单元,用于获取每个物理存储单位内所有块的累计擦除总次数;
物理存储单位单元,用于在满足预定写入条件的物理存储单位中,将存储数据写入到累计擦除总次数最少的至少一个物理存储单位上。
由以上技术方案可见,本申请的实施例中,由中控功能模块基于各个物理存储单位内所有块的累计擦除总次数,在满足预定写入条件的物理存储单位中选择累计擦除总次数最少的进行存储数据的写入,从而在不同的物理存储单位之间实现了均衡擦写,避免了对单个物理存储单位擦写过多导致的该物理存储单位的提前损坏,在非高可用性场景中能够降低丢失数据的可能性,在高可用性场景中能够提高所在系统的稳定性。
附图说明
图1是本申请实施例第一种应用场景示例的一种主机结构组成结构示意图;
图2是本申请实施例第二种应用场景示例的一种集群组成结构示意图;
图3是本申请实施例一中一种写入存储数据的方法的流程图;
图4是本申请实施例二中一种在集群中写入存储数据的方法的流程图;
图5是本申请实施例所在设备的一种硬件结构图;
图6是本申请实施例中一种写入存储数据的装置的逻辑结构图;
图7是本申请实施例中一种集群的逻辑结构图。
具体实施方式
本申请的实施例提出一种新的在基于闪存的存储介质中写入存储数据的方法,以每个物理存储单位内所有块的累计擦除总次数的统计数据为依据,在满足预定写入条件的物理存储单位中,选择具有最小累计擦除总次数的一个到多个物理存储单位,来写入存储数据,实现了不同物理存储单位之间的均衡擦写,使得不同物理存储单位的使用寿命更为接近,降低了因单个物理存储单位的提前损坏造成的丢失数据、或影响系统稳定的可能性,以解决现有技术存在的问题。
本申请的实施例中,两个或两个以上的物理存储单位由一个中控功能模块来进行写入控制,即由该中控功能模块决定将存储数据写入到哪个或哪些物理存储单位上。其中,物理存储单位是在物理上独立于其他物理存储单位、采用基于闪存的存储介质的实体,可以是一个独立的基于闪存的物理存储部件(如Flash闪存芯片、硬盘等)、一个包括至少一个独立的基于闪存的物理存储部件的主机(如一个磁盘阵列柜、一台个人电脑、一台服务器)等等;中控功能模块采用软件、或软件和硬件相结合的方式实现,可以运行在某个物理存储单位上,也可以运行在独立于其控制的所有物理存储单位的其他主机上。
图1所示为本申请实施例应用场景的一个例子,一台主机上安装有若干个硬盘(本应用场景中的物理存储单位),并且在该主机上运行有存储控制模块(本应用场景中的中控功能模块),用来对所有硬盘进行读写控制,包括确定将哪些数据存放在哪个硬盘上。
图2所示为本申请实施例应用场景的另一个例子,在一个以若干台主机(本应用场景中的物理存储单位)组成的集群中,其中一台主机是主控节点,其他主机是工作节点。集群的集群控制模块(本应用场景中的中控功能模块)运行在主控节点上,对若干台服务器的数据存储进行分配和管理。当作为主控节点的主机发生故障时,其他的某台主机能够升级为主控节点继续集群的运行。
本申请实施例应用的中控功能模块可以运行在任何具有计算和存储能力的设备上,例如可以是平板电脑、PC(Personal Computer,个人电脑)、笔记本、服务器等设备。
本申请的实施例一中,写入存储数据的方法的流程如图3所示。
步骤310,获取每个物理存储单位内所有块的累计擦除总次数。
块是数据存储中存储空间分配的最小单位,当某个块被分配后会对该块进行擦除操作,以便得到该块空间的应用程序(或线程、进程等)能够使用该块写入数据。因此,块被分配的次数就是该块的累计擦除次数。
对物理上独立的存储部件(如硬盘、闪存芯片等)而言,块的分割通常在对该存储部件进行初始化时进行,以硬盘为例,在绝大多数文件系统中,管理员可以在硬盘初始化时指定块的大小。假设由该硬盘所在主机的存储控制模块对该硬盘进行存储管理,在完成初始化后,存储控制模块可以用该硬盘范围内唯一的块标识来代表硬盘上的每个块,并且维护该硬盘的每个块标识与累计擦除次数的对应关系,每次将某个块分配后则在该块块标识的累计擦除次数上加1;当该硬盘作为应用场景中的物理存储单位时,可以将所有块的累计擦除次数相加,得到该硬盘的累计擦除总次数。或者,存储控制模块也可以在该硬盘的超级块(Super Block)中维护所有块的累计擦除总次数,每次有块分配时,则在累计擦除总次数上增加该次分配的块数量;换言之,在每个块被分配后都在累计擦除总次数上加1。通过上述方式,可以得到物理上独立的存储部件的所有块的累计擦除总次数。
对物理存储单位是包括至少一块独立物理存储部件的主机的情形,可以由每个主机上的存储控制模块统计其控制的物理存储部件的累计擦除总次数,并上报给中控功能模块。具体的上报方式可以根据应用场景的实现来确定,例如,假设所有主机组成一个集群,该集群的集群控制模块为该应用场景中的中控功能模块,则可以由每个主机以预定周期主动向集群控制模块上报该主机上所有块的累计擦除总次数,或者也可以由集群控制模块以预定周期向各个主机轮询所有块的累计擦除总次数,集群控制模块即可以预定周期收到每个主机的所有块的累计擦除总次数。
步骤320,在满足预定写入条件的物理存储单位中,将存储数据写入到累计擦除总次数最少的至少一个物理存储单位上。
假设存储数据需要写入到N(N为自然数)个物理存储单位上,现有技术中,如果有两个或两个以上物理存储单位可以用来写入存储数据,会采用某个或某些条件来确定将存储数据写入哪个或哪几个物理存储单位。例如,要满足的条件通常包括剩余存储空间足以容纳要写入的存储数据。本申请的实施例中,可以根据上述某个或某些条件的可接受范围来生成预定写入条件,以下用两个例子说明:
第一个例子,在若干个硬盘中选择剩余存储空间最大的N个来用作写入存储数据的硬盘,则本申请实施例中,可以将剩余存储空间不小于预定值或不小于硬盘容量的预定比例来作为预定写入条件。
第二个例子,在若干个主机中,选择剩余存储空间足以容纳要写入的存储数据、并且对主机上已保存数据的访问量最小的N个主机来写入存储数据,则本申请实施例中,可以将剩余存储空间足以容纳要写入的存储数据、并且对主机上已保存数据的访问量不超过某个阈值来作为预定写入条件。
要写入物理存储单位的存储数据可以是在进行文件保存时需要写入的存储数据,也可以是在进行文件迁移时需要写入的存储数据。对中控功能模块而言,在进行文件保存时需要写入的存储数据通常是新增加的存储数据,而文件迁移时需要写入的存储数据则是对已保存的存储数据的维护。根据应用场景的具体实现,进行文件保存时需要写入的存储数据可能是一份,也可能是两份或两份以上、并且通常要将每份写入到不同的物理存储单位上。文件迁移包括两种情形,一种是更换保存文件的物理存储单位,即将已保存的文件写入新的物理存储单位并从原来保存该文件的物理存储单位上删除;另一种是在保存两份以上文件的应用场景中,当其中某一份文件损坏或其中某一份文件所在的物理存储单位故障时,需要将该文件拷贝一份到工作正常的物理存储单位上,以满足整个系统高可用性的要求。在进行文件迁移时,可以采用预定写入条件来排除已保存有该文件拷贝的物理存储单位、和/或发生故障的物理存储单位。
可见,不论是在文件保存还是在文件迁移中,需要用来写入存储数据的物理存储单位都可能超过1个。因此,中控功能模块在得到各个物理存储单位的所有块的累计擦除总次数后,在有存储数据需要进行写入操作时,基于预定写入条件确定可供选择的若干个物理存储单位,并在其中选择累计擦除总次数最小的N(N为自然数)个物理存储单位来写入存储数据。这样,可以在不同的物理存储单位之间实现均衡擦写。
本申请的实施例中,中控功能模块除了在有存储数据写入时进行各物理存储单位之间的均衡擦写外,还可以在各物理存储单位的擦写差异较大时,主动进行文件迁移,以平衡各个物理存储单位的使用情况。具体而言,中控功能模块可以对各个物理存储单位的擦写情况进行监测,在出现某两个物理存储单位的累计擦除总次数的差异超过预定偏差范围的情形时,将存储数据从上述两个物理存储单位中累计擦除总次数较高的物理存储单位迁移到累计擦除总次数较低的物理存储单位。
可以根据实际应用场景中存储文件的大小、对擦写均衡的要求等因素来确定物理存储单位间的预定偏差范围。在一种应用场景中,可以根据所有物理存储单位的累计擦除总次数的平均值来确定预定偏差范围,例如,将该平均值的20%作为预定偏差范围。
可见,本申请的实施例一中,由中控功能模块以每个物理存储单位内所有块的累计擦除总次数的统计数据为依据,在满足预定写入条件的物理存储单位中,选择累计擦除总次数最少的物理存储单位进行存储数据的写入,实现了不同物理存储单位之间的均衡擦写,避免了对单个物理存储单位擦写过多导致的该物理存储单位的提前损坏,使得不同物理存储单位的使用寿命更为接近,在非高可用性场景中能够降低丢失数据的可能性,在高可用性场景中能够提高所在系统的稳定性。
需要说明的是,在一个由若干主机组成的集群中,如果至少部分主机带有两个以上的硬盘或其他独立的物理存储部件,则可以在集群层面和主机层面分别应用本申请的实施例,即:在集群层面实现不同主机之间的擦写均衡,在主机层面实现单个主机上不同硬盘或其他物理存储部件的擦写均衡。此外,还可以在单个硬盘或其他物理存储部件上采用现有技术中的FTL均衡擦写算法或采用具有均衡擦写功能的文件系统层,来在物理存储部件的层面实现擦写均衡,从而在整个集群系统的各个层面都达到均衡擦写,延长集群系统中存储设备的使用寿命,同时提高集群系统的稳定性。
本申请的实施例二中,一种在集群中写入存储数据的方法的流程如图4所示。本实施例中的集群包括至少两台主机,这些主机由集群控制模块进行存储管理;每台主机包括至少两个采用闪存作为存储介质的硬盘,每台主机上的硬盘由该主机上的存储控制模块进行存储管理。实施例二给出了一种在两个层面(集群层面和主机层面)同时应用实施例一的具体实现,其中对各个步骤的详细说明请参见实施例一中的描述,不再重复。
步骤410,由集群控制模块获取每台主机上所有块的累计擦除总次数。
步骤420,由每台主机的存储控制模块分别获取所在主机上每个硬盘的累计擦除总次数。
步骤430,在满足主机预定写入条件的主机中,集群控制器选择主机的累计擦除总次数最少的至少一台主机作为目标主机。
当集群有需要写入的存储数据时,例如当有进行文件迁移时、和/或进行文件保存时需要写入的存储数据时,假设存储数据需要写入到N台主机上,集群控制器在满足主机预定写入条件的主机中,选择主机的累计擦除总次数最少的N台主机作为目标主机,即要写入存储数据的主机。
步骤440,在每台目标主机上,该主机的存储控制器将存储数据写入到满足硬盘预定写入条件、硬盘的累计擦除总次数最少的至少一个硬盘上。
当某台主机被选择作为目标主机后,假设存储数据需要写入该主机上的M(M为自然数)个硬盘中,该主机上的存储控制器在满足硬盘预定写入条件的硬盘中,选择M个硬盘的累计擦除总次数最少的硬盘作为目标硬盘,将存储数据写入到目标硬盘中。
可以由集群控制器对各台主机间累计擦除总次数的差异进行监测,当某两台主机的累计擦除总次数的差异超过主机预定偏差范围时,集群控制器将存储数据从这两台主机中累计擦除总次数较高的主机上,迁移到累计擦除总次数较低的主机上。作为写入迁移存储数据的主机,可以由其上的存储控制器将数据写入到满足硬盘预定写入条件、硬盘的累计擦除总次数最少的硬盘上。
可以各台主机的存储控制器对该主机上各个硬盘间累计擦除总次数的差异进行监测,当某台主机上的某两个硬盘的累计擦除总次数的差异超过硬盘预定偏差范围时,该主机的存储控制器可以将存储数据从这两个硬盘中累计擦除总次数较高的硬盘上,迁移到累计擦除总次数较低的硬盘上。
可见,本申请实施例二通过在集群层面(各个主机之间)和主机层面(每台主机上的各个硬盘之间)分别应用实施例一中的方法,使得整个集群系统的物理存储部件都达到均衡擦写,延长集群系统中存储设备的使用寿命,同时提高集群系统的稳定性。
在本申请的一个应用示例中,一个高可用性集群系统包括K(K为大于3的自然数)台主机,每台主机包括至少3块采用闪存作为存储介质的硬盘。存储在该集群中的每个文件应该在3个不同的主机上分别保存一份。该集群的集群控制器运行在集群的主控节点(其中一台主机)上,用来控制文件存储在哪3台主机上;每台主机上运行有存储控制器,用来控制文件存储在该主机的哪块硬盘上。
在每台主机上,存储控制器在每个硬盘的超级块中维护有该硬盘上每个块的累计擦除次数block_wear_count和该硬盘所有块的累计擦除总次数disk_wear_count。当该硬盘上的某个块被分配后,在该块的块标识block_num对应的累计擦除次数block_wear_count上加1,并且在该硬盘所有块的累计擦除总次数disk_wear_count上加1。
另外,存储控制器维护有该主机上所有块的累计擦除总次数server_wear_count,server_wear_count等于该主机上每个硬盘的disk_wear_count的总和。集群中每台工作节点要定时向主控节点发送心跳信号,工作节点所在主机的server_wear_count可以在周期性的心跳信号中上报给集群控制器,主控节点上的存储控制器也以与心跳信号相同的周期将主控节点所在主机的server_wear_count上报给集群控制器。
当集群中有新文件写入时,集群控制器在K个主机中确定符合主机预定写入条件的若干个主机,本应用示例中写入新文件的主机预定写入条件为:剩余存储容量超过主机存储总容量的15%、并且对已保存数据的访问量不超过既定阈值。在符合写入新文件的主机预定写入条件的主机中,集群控制器选择server_wear_count数目最小的3台主机作为写入新文件的主机。
在被选中的3台主机上,每台主机的存储控制器在该主机上的硬盘中确定符合硬盘预定写入条件的若干个硬盘,本应用示例中硬盘预定写入条件为:剩余存储容量超过硬盘存储总容量的10%。在符合硬盘写入条件的硬盘中,存储控制器选择disk_wear_count最小的硬盘,来写入新的文件。
当集群中某台主机、或某台主机上的某个硬盘发生故障时,集群控制器认为该主机或该硬盘上保存的文件已不可使用,这样集群中对这些文件的存储份数不足3份。设迁移文件的主机预定写入条件为:剩余存储容量超过主机存储总容量的15%、对已保存数据的访问量不超过既定阈值、并且尚未保存有要写入的文件,则集群控制器在符合迁移文件的主机预定写入条件的主机中,选择server_wear_count数目最小的主机作为写入迁移文件的主机。在被选中的主机上,存储控制器在符合硬盘写入条件的硬盘中,选择disk_wear_count最小的硬盘,来写入迁移的文件。
集群控制器以一定的主机监测周期来检查各个主机的累计擦除总次数server_wear_count之间的差异程度,如果集群中server_wear_count的最大值与最小值的差异超过所有server_wear_count的平均值的20%,则将server_wear_count最大的主机上的文件迁移到server_wear_count最小的主机上,直到集群中server_wear_count的最大值与最小值的差异在所有server_wear_count的平均值的20%之内。对迁移文件的选择可参照现有技术实现,不再赘述。
在每台主机上,存储控制器以一定的硬盘监测周期来检查该主机上各个硬盘的累计擦除总次数disk_wear_count之间的差异程度,如果该主机上disk_wear_count的最大值与最小值的差异超过所有disk_wear_count的平均值的15%,则将disk_wear_count最大的硬盘上的文件迁移到disk_wear_count最小的硬盘上,直到该主机上disk_wear_count的最大值与最小值的差异在所有disk_wear_count的平均值的15%之内。对迁移文件的选择同样可参照现有技术实现。
与上述流程实现对应,本申请的实施例还提供了一种写入存储数据的装置。该装置可以通过软件实现,也可以通过硬件或者软硬件结合的方式实现。以软件实现为例,作为逻辑意义上的装置,是通过所在设备的CPU(Central Process Unit,中央处理器)将对应的计算机程序指令读取到内存中运行形成的。从硬件层面而言,除了图5所示的CPU、内存以及非易失性存储器之外,写入存储数据的装置所在的设备通常还包括用于进行无线信号收发的芯片等其他硬件,和/或用于实现网络通信功能的板卡等其他硬件。
图6所示为本申请实施例提供的一种写入存储数据的装置,应用在对至少两个物理存储单位进行写入控制的中控功能模块上,包括累计擦除总次数单元和物理存储单位单元,其中:累计擦除总次数单元用于获取每个物理存储单位内所有块的累计擦除总次数;物理存储单位单元用于在满足预定写入条件的物理存储单位中,将存储数据写入到累计擦除总次数最少的至少一个物理存储单位上。
一个例子中,所述装置还包括偏差迁移单元,用于当某两个物理存储单位的累计擦除总次数的差异超过预定偏差范围时,将存储数据从所述两个物理存储单位中累计擦除总次数较高的物理存储单位迁移到累计擦除总次数较低的物理存储单位。
上述例子中,所述预定偏差范围可以根据所有物理存储单位的累计擦除总次数的平均值确定。
可选的,所述存储数据包括:进行文件迁移时需要写入的存储数据、和/或进行文件保存时需要写入的存储数据。
可选的,所述物理存储单位包括:主机;所述中控功能模块包括:包括所有主机的集群的集群控制模块;所述累计擦除总次数单元具体用于:接收每个主机以预定周期上报的累计擦除总次数。
可选的,所述物理存储单位包括:硬盘;所述中控功能模块包括:主机的存储控制模块;所述累计擦除总次数单元具体用于:读取每个硬盘的超级块中维护的累计擦除总次数,所述累计擦除总次数在所述硬盘的每个块被分配后加1。
图7所示为本申请实施例提供的一种集群,包括至少两台主机,每台主机包括至少两个采用闪存作为存储介质的硬盘,还包括集群控制模块和每台主机上的存储控制模块,其中:集群控制模块用于获取每台主机上所有块的累计擦除总次数,以及在需要写入存储数据时,在满足主机预定写入条件的主机中,选择主机的累计擦除总次数最少的至少一台主机作为目标主机;每台主机上的存储控制模块用于获取所在主机上每个硬盘的累计擦除总次数,以及当所在主机作为目标主机时,将存储数据写入到满足硬盘预定写入条件、硬盘的累计擦除总次数最少的至少一个硬盘上。
可选的,所述集群控制模块还用于:当某两台主机的的累计擦除总次数的差异超过主机预定偏差范围时,将存储数据从所述两台主机中累计擦除总次数较高的主机迁移到累计擦除总次数较低的主机;所述每条主机上的存储控制模块还用于:当某台主机上的某两个硬盘的累计擦除总次数的差异超过硬盘预定偏差范围时,将存储数据从所述两个硬盘中累计擦除总次数较高的硬盘迁移到累计擦除总次数较低的硬盘。
可选的,所述存储数据包括:进行文件迁移时需要写入的存储数据。
以上所述仅为本申请的较佳实施例而已,并不用以限制本申请,凡在本申请的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本申请保护的范围之内。
在一个典型的配置中,计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。按照本文中的界定,计算机可读介质不包括暂存电脑可读媒体(transitory media),如调制的数据信号和载波。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白,本申请的实施例可提供为方法、系统或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

Claims (18)

1.一种在基于闪存的存储介质中写入存储数据的方法,应用在对至少两个物理存储单位进行写入控制的中控功能模块上,其特征在于,包括:
获取每个物理存储单位内所有块的累计擦除总次数;
在满足预定写入条件的物理存储单位中,将存储数据写入到累计擦除总次数最少的至少一个物理存储单位上。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:当某两个物理存储单位的累计擦除总次数的差异超过预定偏差范围时,将存储数据从所述两个物理存储单位中累计擦除总次数较高的物理存储单位迁移到累计擦除总次数较低的物理存储单位。
3.根据权利要求2所述的方法,其特征在于,所述预定偏差范围根据所有物理存储单位的累计擦除总次数的平均值确定。
4.根据权利要求1所述的方法,其特征在于,所述存储数据包括:进行文件迁移时需要写入的存储数据、和/或进行文件保存时需要写入的存储数据。
5.根据权利要求1至4任意一项所述的方法,其特征在于,所述物理存储单位包括:主机;所述中控功能模块包括:包括所有主机的集群的集群控制模块;
所述获取每个物理存储单位内所有块的累计擦除总次数,包括:接收每个主机以预定周期上报的累计擦除总次数。
6.根据权利要求1至4任意一项所述的方法,其特征在于,所述物理存储单位包括:硬盘;所述中控功能模块包括:主机的存储控制模块;
所述获取每个物理存储单位内所有块的累计擦除总次数,包括:读取每个硬盘的超级块中维护的累计擦除总次数,所述累计擦除总次数在所述硬盘的每个块被分配后加1。
7.一种写入存储数据的装置,应用在对至少两个物理存储单位进行写入控制的中控功能模块上,其特征在于,包括:
累计擦除总次数单元,用于获取每个物理存储单位内所有块的累计擦除总次数;
物理存储单位单元,用于在满足预定写入条件的物理存储单位中,将存储数据写入到累计擦除总次数最少的至少一个物理存储单位上。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:偏差迁移单元,用于当某两个物理存储单位的累计擦除总次数的差异超过预定偏差范围时,将存储数据从所述两个物理存储单位中累计擦除总次数较高的物理存储单位迁移到累计擦除总次数较低的物理存储单位。
9.根据权利要求8所述的装置,其特征在于,所述预定偏差范围根据所有物理存储单位的累计擦除总次数的平均值确定。
10.根据权利要求7所述的装置,其特征在于,所述存储数据包括:进行文件迁移时需要写入的存储数据、和/或进行文件保存时需要写入的存储数据。
11.根据权利要求7至10任意一项所述的装置,其特征在于,所述物理存储单位包括:主机;所述中控功能模块包括:包括所有主机的集群的集群控制模块;
所述累计擦除总次数单元具体用于:接收每个主机以预定周期上报的累计擦除总次数。
12.根据权利要求7至10任意一项所述的装置,其特征在于,所述物理存储单位包括:硬盘;所述中控功能模块包括:主机的存储控制模块;
所述累计擦除总次数单元具体用于:读取每个硬盘的超级块中维护的累计擦除总次数,所述累计擦除总次数在所述硬盘的每个块被分配后加1。
13.一种在集群中写入存储数据的方法,所述集群包括至少两台主机,每台主机包括至少两个采用闪存作为存储介质的硬盘,所述方法包括:
由集群控制模块获取每台主机上所有块的累计擦除总次数;
由每台主机的存储控制模块分别获取所在主机上每个硬盘的累计擦除总次数;
在满足主机预定写入条件的主机中,集群控制器选择主机的累计擦除总次数最少的至少一台主机作为目标主机;
在每台目标主机上,所述主机的存储控制器将存储数据写入到满足硬盘预定写入条件、硬盘的累计擦除总次数最少的至少一个硬盘上。
14.根据权利要求13所述的方法,其特征在于,所述方法还包括:
当某两台主机的累计擦除总次数的差异超过主机预定偏差范围时,集群控制器将存储数据从所述两台主机中累计擦除总次数较高的主机迁移到累计擦除总次数较低的主机;
当某台主机上的某两个硬盘的累计擦除总次数的差异超过硬盘预定偏差范围时,所述主机的存储控制器将存储数据从所述两个硬盘中累计擦除总次数较高的硬盘迁移到累计擦除总次数较低的硬盘。
15.根据权利要求13所述的方法,其特征在于,所述存储数据包括:进行文件迁移时需要写入的存储数据。
16.一种集群,包括至少两台主机,每台主机包括至少两个采用闪存作为存储介质的硬盘,其特征在于,还包括:
集群控制模块,用于获取每台主机上所有块的累计擦除总次数,以及在需要写入存储数据时,在满足主机预定写入条件的主机中,选择主机的累计擦除总次数最少的至少一台主机作为目标主机;
每台主机上的存储控制模块,用于获取所在主机上每个硬盘的累计擦除总次数,以及当所在主机作为目标主机时,将存储数据写入到满足硬盘预定写入条件、硬盘的累计擦除总次数最少的至少一个硬盘上。
17.根据权利要求16所述的集群,其特征在于,所述集群控制模块还用于:当某两台主机的的累计擦除总次数的差异超过主机预定偏差范围时,将存储数据从所述两台主机中累计擦除总次数较高的主机迁移到累计擦除总次数较低的主机;
所述每条主机上的存储控制模块还用于:当某台主机上的某两个硬盘的累计擦除总次数的差异超过硬盘预定偏差范围时,将存储数据从所述两个硬盘中累计擦除总次数较高的硬盘迁移到累计擦除总次数较低的硬盘。
18.根据权利要求16所述的集群,其特征在于,所述存储数据包括:进行文件迁移时需要写入的存储数据。
CN201610827195.6A 2016-09-14 2016-09-14 在基于闪存的存储介质中写入存储数据的方法和装置 Pending CN107025066A (zh)

Priority Applications (17)

Application Number Priority Date Filing Date Title
CN201610827195.6A CN107025066A (zh) 2016-09-14 2016-09-14 在基于闪存的存储介质中写入存储数据的方法和装置
TW106124168A TWI676992B (zh) 2016-09-14 2017-07-19 在基於快閃記憶體的儲存媒體中寫入儲存資料的方法和裝置
JP2019514207A JP2019532413A (ja) 2016-09-14 2017-09-05 記憶対象のデータをフラッシュメモリベースの記憶媒体に書き込む方法及びデバイス
MYPI2019001345A MY188873A (en) 2016-09-14 2017-09-05 Method and device for writing stored data into storage medium based on flash memory
CA3036415A CA3036415C (en) 2016-09-14 2017-09-05 Method and device for writing stored data into storage medium based on flash memory
AU2017325886A AU2017325886B2 (en) 2016-09-14 2017-09-05 Method and device for writing stored data into storage medium based on flash memory
EP17850208.4A EP3514674B1 (en) 2016-09-14 2017-09-05 Method and device for writing stored data into storage medium based on flash memory
MX2019002948A MX2019002948A (es) 2016-09-14 2017-09-05 Metodo y dispositivo para escribir datos almacenados en un medio de almacenamiento basado en memoria flash.
PCT/CN2017/100570 WO2018050006A1 (zh) 2016-09-14 2017-09-05 在基于闪存的存储介质中写入存储数据的方法和装置
BR112019004916A BR112019004916A2 (pt) 2016-09-14 2017-09-05 método e dispositivo para gravar dados armazenados no meio de armazenamento com base na memória flash
RU2019110993A RU2735407C2 (ru) 2016-09-14 2017-09-05 Способ и устройство для записи сохраненных данных на носитель данных на основе флэш-памяти
KR1020197010643A KR102275094B1 (ko) 2016-09-14 2017-09-05 저장된 데이터를 플래시 메모리에 기초한 저장 매체에 기입하기 위한 방법 및 디바이스
US16/351,904 US11099744B2 (en) 2016-09-14 2019-03-13 Method and device for writing stored data into storage medium based on flash memory
PH12019500555A PH12019500555A1 (en) 2016-09-14 2019-03-14 Method and device for writing stored data into storage medium based on flash memory
ZA2019/02298A ZA201902298B (en) 2016-09-14 2019-04-11 Method and device for writing stored data into storage medium based on flash memory
AU2019101583A AU2019101583A4 (en) 2016-09-14 2019-12-13 Method and device for writing stored data into storage medium based on flash memory
US17/375,033 US11287984B2 (en) 2016-09-14 2021-07-14 Method and device for writing stored data into storage medium based on flash memory

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610827195.6A CN107025066A (zh) 2016-09-14 2016-09-14 在基于闪存的存储介质中写入存储数据的方法和装置

Publications (1)

Publication Number Publication Date
CN107025066A true CN107025066A (zh) 2017-08-08

Family

ID=59524718

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610827195.6A Pending CN107025066A (zh) 2016-09-14 2016-09-14 在基于闪存的存储介质中写入存储数据的方法和装置

Country Status (15)

Country Link
US (2) US11099744B2 (zh)
EP (1) EP3514674B1 (zh)
JP (1) JP2019532413A (zh)
KR (1) KR102275094B1 (zh)
CN (1) CN107025066A (zh)
AU (2) AU2017325886B2 (zh)
BR (1) BR112019004916A2 (zh)
CA (1) CA3036415C (zh)
MX (1) MX2019002948A (zh)
MY (1) MY188873A (zh)
PH (1) PH12019500555A1 (zh)
RU (1) RU2735407C2 (zh)
TW (1) TWI676992B (zh)
WO (1) WO2018050006A1 (zh)
ZA (1) ZA201902298B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018050006A1 (zh) * 2016-09-14 2018-03-22 阿里巴巴集团控股有限公司 在基于闪存的存储介质中写入存储数据的方法和装置
CN112162934A (zh) * 2020-09-29 2021-01-01 深圳市时创意电子有限公司 存储块异常磨损处理方法、装置、电子设备及存储介质
CN112947862A (zh) * 2021-03-10 2021-06-11 歌尔科技有限公司 设备、Flash存储器及其数据存储方法
CN113452867A (zh) * 2021-06-25 2021-09-28 珠海奔图电子有限公司 数据清除方法、主机、图像形成装置、系统及存储介质
CN115374065A (zh) * 2022-10-25 2022-11-22 山东捷瑞数字科技股份有限公司 一种基于云平台日志记录监控的文件清理方法及系统

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102611566B1 (ko) * 2018-07-06 2023-12-07 삼성전자주식회사 솔리드 스테이트 드라이브 및 그의 메모리 할당 방법
KR20210039872A (ko) * 2019-10-02 2021-04-12 삼성전자주식회사 프리 블록의 할당을 관리하는 호스트 시스템, 이를 포함하는 데이터 처리 시스템 및 호스트 시스템의 동작방법
CN111143238B (zh) * 2019-12-27 2022-03-15 无锡融卡科技有限公司 基于eFlash存储芯片的数据擦写方法及系统
KR20210101973A (ko) 2020-02-11 2021-08-19 에스케이하이닉스 주식회사 메모리 시스템 및 그것의 동작 방법
US11561729B2 (en) * 2020-08-19 2023-01-24 Micron Technology, Inc. Write determination counter
TWI808384B (zh) * 2021-02-23 2023-07-11 慧榮科技股份有限公司 儲存裝置、快閃記憶體控制器及其控制方法
TWI821152B (zh) * 2021-02-23 2023-11-01 慧榮科技股份有限公司 儲存裝置、快閃記憶體控制器及其控制方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046771A (zh) * 2006-03-29 2007-10-03 株式会社日立制作所 使用闪存的存储系统及其平均读写方法和平均读写程序
CN101364437A (zh) * 2007-08-07 2009-02-11 芯邦科技(深圳)有限公司 一种可使闪存损耗均衡的方法及其应用
CN101419842A (zh) * 2008-11-07 2009-04-29 成都市华为赛门铁克科技有限公司 硬盘的损耗均衡方法、装置及系统
CN101441599A (zh) * 2008-11-28 2009-05-27 成都市华为赛门铁克科技有限公司 一种固态硬盘的均衡方法和固态硬盘
CN102981970A (zh) * 2012-11-23 2013-03-20 深圳市江波龙电子有限公司 闪存管理方法和系统
CN103116549A (zh) * 2013-01-04 2013-05-22 苏州懿源宏达知识产权代理有限公司 基于最大可擦除次数的闪存存储方法
CN104360957A (zh) * 2014-11-26 2015-02-18 上海爱信诺航芯电子科技有限公司 一种维持闪存损耗均衡的方法
CN105159601A (zh) * 2015-08-07 2015-12-16 杭州海兴电力科技股份有限公司 一种提高Flash擦写寿命的方法

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6990667B2 (en) 2001-01-29 2006-01-24 Adaptec, Inc. Server-independent object positioning for load balancing drives and servers
US7096313B1 (en) 2002-10-28 2006-08-22 Sandisk Corporation Tracking the least frequently erased blocks in non-volatile memory systems
JP4651913B2 (ja) 2003-02-17 2011-03-16 株式会社日立製作所 記憶装置システム
US20050055495A1 (en) * 2003-09-05 2005-03-10 Nokia Corporation Memory wear leveling
US7280353B2 (en) 2003-12-29 2007-10-09 Sherwood Information Partners, Inc. System and method for reduced vibration interaction in a multiple-hard-disk-drive enclosure
US7411757B2 (en) 2006-07-27 2008-08-12 Hitachi Global Storage Technologies Netherlands B.V. Disk drive with nonvolatile memory having multiple modes of operation
US20080140918A1 (en) * 2006-12-11 2008-06-12 Pantas Sutardja Hybrid non-volatile solid state memory system
US9153337B2 (en) 2006-12-11 2015-10-06 Marvell World Trade Ltd. Fatigue management system and method for hybrid nonvolatile solid state memory system
US8751755B2 (en) * 2007-12-27 2014-06-10 Sandisk Enterprise Ip Llc Mass storage controller volatile memory containing metadata related to flash memory storage
US8872940B2 (en) 2008-03-03 2014-10-28 Videoiq, Inc. Content aware storage of video data
US8554983B2 (en) 2008-05-27 2013-10-08 Micron Technology, Inc. Devices and methods for operating a solid state drive
US9123422B2 (en) 2012-07-02 2015-09-01 Super Talent Technology, Corp. Endurance and retention flash controller with programmable binary-levels-per-cell bits identifying pages or blocks as having triple, multi, or single-level flash-memory cells
US8959280B2 (en) 2008-06-18 2015-02-17 Super Talent Technology, Corp. Super-endurance solid-state drive with endurance translation layer (ETL) and diversion of temp files for reduced flash wear
US8010738B1 (en) 2008-06-27 2011-08-30 Emc Corporation Techniques for obtaining a specified lifetime for a data storage device
JP5242264B2 (ja) 2008-07-07 2013-07-24 株式会社東芝 データ制御装置、ストレージシステムおよびプログラム
US8024442B1 (en) 2008-07-08 2011-09-20 Network Appliance, Inc. Centralized storage management for multiple heterogeneous host-side servers
US8244995B2 (en) * 2008-10-30 2012-08-14 Dell Products L.P. System and method for hierarchical wear leveling in storage devices
US20100125696A1 (en) * 2008-11-17 2010-05-20 Prasanth Kumar Memory Controller For Controlling The Wear In A Non-volatile Memory Device And A Method Of Operation Therefor
US9164689B2 (en) * 2009-03-30 2015-10-20 Oracle America, Inc. Data storage system and method of processing a data access request
US8429373B2 (en) 2009-07-15 2013-04-23 International Business Machines Corporation Method for implementing on demand configuration changes
EP2413245B1 (en) 2009-07-22 2017-08-23 Hitachi, Ltd. Storage system provided with a plurality of flash packages
US8402242B2 (en) 2009-07-29 2013-03-19 International Business Machines Corporation Write-erase endurance lifetime of memory storage devices
CN102483686B (zh) 2009-08-21 2015-03-25 国际商业机器公司 数据存储系统和用于操作数据存储系统的方法
US8464106B2 (en) 2009-08-24 2013-06-11 Ocz Technology Group, Inc. Computer system with backup function and method therefor
US8234520B2 (en) 2009-09-16 2012-07-31 International Business Machines Corporation Wear leveling of solid state disks based on usage information of data and parity received from a raid controller
US8621141B2 (en) * 2010-04-01 2013-12-31 Intel Corporations Method and system for wear leveling in a solid state drive
US8725951B2 (en) 2010-04-12 2014-05-13 Sandisk Enterprise Ip Llc Efficient flash memory-based object store
US8737141B2 (en) 2010-07-07 2014-05-27 Stec, Inc. Apparatus and method for determining an operating condition of a memory cell based on cycle information
US10157002B2 (en) 2010-08-26 2018-12-18 International Business Machines Corporation Migrating an encoded data slice based on an end-of-life memory level of a memory device
US8775720B1 (en) 2010-08-31 2014-07-08 Western Digital Technologies, Inc. Hybrid drive balancing execution times for non-volatile semiconductor memory and disk
US8825977B1 (en) 2010-09-28 2014-09-02 Western Digital Technologies, Inc. Hybrid drive writing copy of data to disk when non-volatile semiconductor memory nears end of life
US9195588B2 (en) 2010-11-02 2015-11-24 Hewlett-Packard Development Company, L.P. Solid-state disk (SSD) management
CN102135942B (zh) * 2010-12-31 2013-04-24 北京握奇数据系统有限公司 一种存储设备中实现损耗均衡的方法及存储设备
FR2977047B1 (fr) * 2011-06-22 2013-08-16 Starchip Procede de gestion de l'endurance de memoires non volatiles.
KR101938210B1 (ko) * 2012-04-18 2019-01-15 삼성전자주식회사 낸드 플래시 메모리, 가변 저항 메모리 및 컨트롤러를 포함하는 메모리 시스템의 동작 방법
US9443591B2 (en) 2013-01-23 2016-09-13 Seagate Technology Llc Storage device out-of-space handling
US8601347B1 (en) * 2012-06-21 2013-12-03 Hitachi, Ltd. Flash memory device and storage control method
KR20140006299A (ko) * 2012-07-03 2014-01-16 삼성전자주식회사 낸드 플래시 메모리 기반의 저장부에 데이터 기록을 제어하는 방법 및 장치
CN102880556B (zh) * 2012-09-12 2015-05-20 浙江大学 一种实现Nand Flash磨损均衡的方法及其系统
US8862810B2 (en) * 2012-09-27 2014-10-14 Arkologic Limited Solid state device write operation management system
US20150143021A1 (en) 2012-12-26 2015-05-21 Unisys Corporation Equalizing wear on storage devices through file system controls
US9652376B2 (en) 2013-01-28 2017-05-16 Radian Memory Systems, Inc. Cooperative flash memory control
JP6005566B2 (ja) * 2013-03-18 2016-10-12 株式会社東芝 情報処理システム、制御プログラムおよび情報処理装置
JP2015014963A (ja) 2013-07-05 2015-01-22 富士通株式会社 ストレージ制御装置、制御プログラム及び制御方法
TWI515736B (zh) 2013-07-25 2016-01-01 慧榮科技股份有限公司 資料儲存裝置以及快閃記憶體控制方法
US9336129B2 (en) * 2013-10-02 2016-05-10 Sandisk Technologies Inc. System and method for bank logical data remapping
US9442662B2 (en) * 2013-10-18 2016-09-13 Sandisk Technologies Llc Device and method for managing die groups
CN104572489B (zh) * 2013-10-23 2019-12-24 深圳市腾讯计算机系统有限公司 磨损均衡方法及装置
CN104731515B (zh) * 2013-12-18 2018-02-23 华为技术有限公司 控制存储设备机群磨损均衡的方法及设备
US9619381B2 (en) 2013-12-24 2017-04-11 International Business Machines Corporation Collaborative health management in a storage system
JP5858081B2 (ja) * 2014-03-27 2016-02-10 Tdk株式会社 メモリコントローラ、メモリシステム及びメモリ制御方法
US9292210B1 (en) 2014-08-29 2016-03-22 International Business Machines Corporation Thermally sensitive wear leveling for a flash memory device that includes a plurality of flash memory modules
US10725668B1 (en) * 2014-08-29 2020-07-28 SK Hynix Inc. Data separation during garbage collection and wear leveling
US9368218B2 (en) * 2014-10-03 2016-06-14 HGST Netherlands B.V. Fast secure erase in a flash system
JP6107802B2 (ja) 2014-12-15 2017-04-05 コニカミノルタ株式会社 不揮発性メモリ制御装置、不揮発性メモリ制御方法及びプログラム
JP6283771B2 (ja) * 2015-04-28 2018-02-21 株式会社日立製作所 ストレージ装置
TWI563509B (en) * 2015-07-07 2016-12-21 Phison Electronics Corp Wear leveling method, memory storage device and memory control circuit unit
TWI601059B (zh) * 2015-11-19 2017-10-01 慧榮科技股份有限公司 資料儲存裝置與資料儲存方法
US9886324B2 (en) * 2016-01-13 2018-02-06 International Business Machines Corporation Managing asset placement using a set of wear leveling data
US10334334B2 (en) * 2016-07-22 2019-06-25 Intel Corporation Storage sled and techniques for a data center
CN107678906B (zh) * 2016-08-01 2021-01-29 杭州海康威视数字技术股份有限公司 硬盘管理方法和系统
CN107025066A (zh) * 2016-09-14 2017-08-08 阿里巴巴集团控股有限公司 在基于闪存的存储介质中写入存储数据的方法和装置
KR20200053965A (ko) * 2018-11-09 2020-05-19 에스케이하이닉스 주식회사 메모리 시스템 및 그것의 동작방법

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101046771A (zh) * 2006-03-29 2007-10-03 株式会社日立制作所 使用闪存的存储系统及其平均读写方法和平均读写程序
CN101364437A (zh) * 2007-08-07 2009-02-11 芯邦科技(深圳)有限公司 一种可使闪存损耗均衡的方法及其应用
CN101419842A (zh) * 2008-11-07 2009-04-29 成都市华为赛门铁克科技有限公司 硬盘的损耗均衡方法、装置及系统
CN101441599A (zh) * 2008-11-28 2009-05-27 成都市华为赛门铁克科技有限公司 一种固态硬盘的均衡方法和固态硬盘
CN102981970A (zh) * 2012-11-23 2013-03-20 深圳市江波龙电子有限公司 闪存管理方法和系统
CN103116549A (zh) * 2013-01-04 2013-05-22 苏州懿源宏达知识产权代理有限公司 基于最大可擦除次数的闪存存储方法
CN104360957A (zh) * 2014-11-26 2015-02-18 上海爱信诺航芯电子科技有限公司 一种维持闪存损耗均衡的方法
CN105159601A (zh) * 2015-08-07 2015-12-16 杭州海兴电力科技股份有限公司 一种提高Flash擦写寿命的方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018050006A1 (zh) * 2016-09-14 2018-03-22 阿里巴巴集团控股有限公司 在基于闪存的存储介质中写入存储数据的方法和装置
CN112162934A (zh) * 2020-09-29 2021-01-01 深圳市时创意电子有限公司 存储块异常磨损处理方法、装置、电子设备及存储介质
CN112947862A (zh) * 2021-03-10 2021-06-11 歌尔科技有限公司 设备、Flash存储器及其数据存储方法
CN113452867A (zh) * 2021-06-25 2021-09-28 珠海奔图电子有限公司 数据清除方法、主机、图像形成装置、系统及存储介质
CN115374065A (zh) * 2022-10-25 2022-11-22 山东捷瑞数字科技股份有限公司 一种基于云平台日志记录监控的文件清理方法及系统

Also Published As

Publication number Publication date
US11287984B2 (en) 2022-03-29
CA3036415C (en) 2021-07-06
AU2019101583A4 (en) 2020-01-23
PH12019500555A1 (en) 2019-11-18
TWI676992B (zh) 2019-11-11
EP3514674B1 (en) 2023-07-19
KR20190052083A (ko) 2019-05-15
EP3514674A1 (en) 2019-07-24
AU2017325886A1 (en) 2019-04-04
MX2019002948A (es) 2019-07-18
RU2735407C2 (ru) 2020-10-30
AU2017325886B2 (en) 2020-11-19
WO2018050006A1 (zh) 2018-03-22
TW201818401A (zh) 2018-05-16
ZA201902298B (en) 2021-06-30
BR112019004916A2 (pt) 2019-06-04
EP3514674A4 (en) 2020-05-06
JP2019532413A (ja) 2019-11-07
RU2019110993A (ru) 2020-10-15
CA3036415A1 (en) 2018-03-22
US11099744B2 (en) 2021-08-24
RU2019110993A3 (zh) 2020-10-15
US20210342073A1 (en) 2021-11-04
MY188873A (en) 2022-01-12
US20190212922A1 (en) 2019-07-11
KR102275094B1 (ko) 2021-07-08

Similar Documents

Publication Publication Date Title
CN107025066A (zh) 在基于闪存的存储介质中写入存储数据的方法和装置
US20210182166A1 (en) Zoned namespace management of non-volatile storage devices
US10365845B1 (en) Mapped raid restripe for improved drive utilization
US9313270B2 (en) Adaptive asynchronous data replication in a data storage system
US10545683B2 (en) Asymmetric storage data distribution
CN103064765A (zh) 数据恢复方法、装置及集群存储系统
CN112328168A (zh) 分片管理方法和分片管理装置
US20140181042A1 (en) Information processor, distributed database system, and backup method
CN112148525A (zh) 实现更快且经过调节的装置初始化时间
CN111124264A (zh) 用于重建数据的方法、设备和计算机程序产品
CN107422989A (zh) 一种Server SAN系统多副本读取方法及存储架构
US11922019B2 (en) Storage device read-disturb-based block read temperature utilization system
CN110858122A (zh) 存储数据的方法和装置
US8990524B2 (en) Management of data elements of subgroups
CN112748848A (zh) 用于存储管理的方法、设备和计算机程序产品
US11868223B2 (en) Read-disturb-based read temperature information utilization system
US11922035B2 (en) Read-disturb-based read temperature adjustment system
US11928354B2 (en) Read-disturb-based read temperature determination system
US20230229342A1 (en) Read-disturb-based read temperature identification system
US20230229336A1 (en) Read-disturb-based read temperature time-based attenuation system
CN112748860B (zh) 用于存储管理的方法、电子设备和计算机程序产品
CN117609195A (zh) 一种分布式存储系统的对象管理方法、装置及设备和介质
CN103902226B (zh) 数据写入方法与系统
Bell et al. Solving Intel IT’s Data Storage Growth Challenges

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20191209

Address after: P.O. Box 31119, grand exhibition hall, hibiscus street, 802 West Bay Road, Grand Cayman, Cayman Islands

Applicant after: Innovative advanced technology Co.,Ltd.

Address before: A four-storey 847 mailbox in Grand Cayman Capital Building, British Cayman Islands

Applicant before: ALIBABA GROUP HOLDING Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210219

Address after: 801-10, Section B, 8th floor, 556 Xixi Road, Xihu District, Hangzhou City, Zhejiang Province 310000

Applicant after: Ant financial (Hangzhou) Network Technology Co.,Ltd.

Address before: Ky1-1205 P.O. Box 31119, hibiscus street, 802 Sai Wan Road, Grand Cayman Islands, ky1-1205

Applicant before: Innovative advanced technology Co.,Ltd.

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20210908

Address after: 100020 unit 02, 901, floor 9, unit 1, building 1, No.1, East Third Ring Middle Road, Chaoyang District, Beijing

Applicant after: Beijing Aoxing Beisi Technology Co.,Ltd.

Address before: 801-10, Section B, 8th floor, 556 Xixi Road, Xihu District, Hangzhou City, Zhejiang Province 310000

Applicant before: Ant financial (Hangzhou) Network Technology Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170808