CN106897022B - 一种管理存储设备的方法及装置 - Google Patents

一种管理存储设备的方法及装置 Download PDF

Info

Publication number
CN106897022B
CN106897022B CN201510946978.1A CN201510946978A CN106897022B CN 106897022 B CN106897022 B CN 106897022B CN 201510946978 A CN201510946978 A CN 201510946978A CN 106897022 B CN106897022 B CN 106897022B
Authority
CN
China
Prior art keywords
unit time
storage device
data
network traffic
threshold value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510946978.1A
Other languages
English (en)
Other versions
CN106897022A (zh
Inventor
许浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Tencent Cloud Computing Beijing Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201510946978.1A priority Critical patent/CN106897022B/zh
Priority to PCT/CN2016/084479 priority patent/WO2017101263A1/zh
Priority to JP2017562727A priority patent/JP6522168B2/ja
Priority to EP16874327.6A priority patent/EP3392754B1/en
Priority to KR1020187000330A priority patent/KR102100571B1/ko
Publication of CN106897022A publication Critical patent/CN106897022A/zh
Priority to US15/707,860 priority patent/US10198180B2/en
Application granted granted Critical
Publication of CN106897022B publication Critical patent/CN106897022B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0616—Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/0223—User address space allocation, e.g. contiguous or non contiguous base addressing
    • G06F12/023—Free address space management
    • G06F12/0238—Memory management in non-volatile memory, e.g. resistive RAM or ferroelectric memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/0223—User address space allocation, e.g. contiguous or non contiguous base addressing
    • G06F12/023—Free address space management
    • G06F12/0238—Memory management in non-volatile memory, e.g. resistive RAM or ferroelectric memory
    • G06F12/0246—Memory management in non-volatile memory, e.g. resistive RAM or ferroelectric memory in block erasable memory, e.g. flash memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F12/00—Accessing, addressing or allocating within memory systems or architectures
    • G06F12/02—Addressing or allocation; Relocation
    • G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
    • G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
    • G06F12/0866—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches for peripheral storage systems, e.g. disk cache
    • G06F12/0873—Mapping of cache memory to specific storage devices or parts thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/064—Management of blocks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0644—Management of space entities, e.g. partitions, extents, pools
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0652—Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653—Monitoring storage devices or systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0679—Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/22—Employing cache memory using specific memory technology
    • G06F2212/222—Non-volatile memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/72—Details relating to flash memory management
    • G06F2212/7202—Allocation control and policies
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/72—Details relating to flash memory management
    • G06F2212/7204—Capacity control, e.g. partitioning, end-of-life degradation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/72—Details relating to flash memory management
    • G06F2212/7205—Cleaning, compaction, garbage collection, erase control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
    • G06F2212/72—Details relating to flash memory management
    • G06F2212/7206—Reconfiguration of flash memory system

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明实施例公开了一种管理存储设备的方法及装置，属于计算机技术领域。所述方法包括：检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。采用本发明，可以延长目标存储设备的使用寿命。

Description

一种管理存储设备的方法及装置
技术领域
本发明涉及计算机技术领域，特别涉及一种管理存储设备的方法及装置。
背景技术
随着计算机技术和互联网技术的发展，大存储量的存储设备在网络侧得到了广泛的应用，固态硬盘以其读取速度快、低功耗等特点逐渐成为网络业务存储设备的最佳选择。
现有技术中，在存储设备中，技术人员会分别为每个网络业务设置相应的基础空间和冗余空间。
在实现本发明的过程中，发明人发现现有技术至少存在以下问题：
每个网络业务分配的固态硬盘的基础空间容量和冗余空间容量是一定的，对于业务量比较大的网络业务，固态硬盘的存储空间很容易被写满，导致无效数据清理的频率比较高，清理过程会一定程度的损伤固态硬盘的存储块，从而会缩短目标存储设备的使用寿命。
发明内容
为了解决现有技术的问题，本发明实施例提供了一种管理存储设备的方法。所述技术方案如下：
第一方面，提供了一种管理存储设备的方法，所述方法包括：
检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；
根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；
根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。
可选的，所述单位时长写入量包括：单位时长写入次数，或单位时长写入数据量。
可选的，所述冗余空间量包括：冗余空间容量，或冗余空间容量相对于所述目标网络业务在所述目标存储设备中的基础空间容量的比值。
可选的，所述方法还包括：
根据预先存储的单位时长写入量的数值范围与数据清理阈值的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一数据清理阈值，所述数据清理阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中的总数据量值；
将所述目标网络业务在目标存储设备中的数据清理阈值，设置为所述第一数据清理阈值。
这样，可以按照单位时长写入量的变化，动态的调整数据清理阈值。
可选的，所述方法还包括：
根据预先存储的冗余空间量与无效数据阈值的对应关系，确定所述第一冗余空间量对应的第一无效数据阈值，所述无效数据阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中无效数据量与总数据量的比值；
将所述目标网络业务在所述目标存储设备中的无效数据阈值，设置为所述第一无效数据阈值。
这样，可以根据确定的冗余空间量，动态的调整无效数据阈值。
可选的，所述根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，包括：
检测所述目标网络业务在所述目标存储设备中的基础空间容量；
根据预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间的对应关系，确定所述目标网络业务在所述目标存储设备中的基础空间容量、所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。
这样，可以更准确的确定第一冗余空间量。
第二方面，提供了一种管理存储设备的装置，所述装置包括：
检测模块，用于检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；
确定模块，用于根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；
设置模块，用于根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。
可选的，所述单位时长写入量包括：单位时长写入次数，或单位时长写入数据量。
可选的，所述冗余空间量包括：冗余空间容量，或冗余空间容量相对于所述目标网络业务在所述目标存储设备中的基础空间容量的比值。
可选的，所述确定模块还用于：
根据预先存储的单位时长写入量的数值范围与数据清理阈值的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一数据清理阈值，所述数据清理阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中的总数据量值；
所述设置模块还用于：
将所述目标网络业务在所述目标存储设备中的数据清理阈值，设置为所述第一数据清理阈值。
可选的，所述确定模块还用于：
根据预先存储的冗余空间量与无效数据阈值的对应关系，确定所述第一冗余空间量对应的第一无效数据阈值，所述无效数据阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中无效数据量与总数据量的比值；
所述设置模块还用于：
将所述目标网络业务在目标存储设备中的无效数据阈值，设置为所述第一无效数据阈值。
可选的，所述确定模块包括检测子模块和确定子模块，其中：
所述检测子模块，用于检测所述目标网络业务在所述目标存储设备中的基础空间容量；
所述确定子模块，用于根据预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间的对应关系，确定所述目标网络业务在所述目标存储设备中的基础空间容量、所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。
本发明实施例提供的技术方案带来的有益效果是：
本发明实施例中，检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。这样，可以基于目标网络业务的业务数据单位时长写入量，动态调整冗余空间量，这样，单位时长写入量增加时，可以自动增加冗余空间量，降低数据清理的频率，从而延长目标存储设备的使用寿命。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种管理存储设备的方法流程图；
图2是本发明实施例提供的一种管理存储设备的装置的结构示意图；
图3是本发明实施例提供的一种管理存储设备的装置的结构示意图；
图4是本发明实施例提供的一种管理存储设备的装置的结构示意图；
图5是本发明实施例提供的一种管理存储设备的装置的结构示意图；
图6是本发明实施例提供的一种存储管理设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明实施方式作进一步地详细描述。
实施例一
本发明实施例提供了一种管理存储设备的方法，该方法的执行主体为存储管理设备。其中，该存储管理设备可以是服务器，存储管理设备中可以设置有处理器、存储器，收发器等。处理器可以用于管理存储设备的过程处理，存储器可以用于存储处理过程中需要的数据以及产生的数据，收发器可以用于接收以及发送数据。
如图1所示，该方法的处理流程可以包括如下的步骤：
步骤101，检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量。
其中，目标存储设备可以为多个网络业务的业务数据提供存储空间，可以是固态硬盘，目标网络业务可以是应用程序的业务，如微信应用程序的业务、滴滴打车应用程序的业务，可以安装在存储管理设备上，也可以安装在其他服务端设备上。
在实施中，存储管理设备可以持续检测目标网络业务的业务数据在目标存储设备中的写入量，每隔预设时长(如10分钟等)，确定预设时长的历史时段内，目标网络业务的业务数据在目标存储设备中的写入量，得到目标网络业务的业务数据在目标存储设备中的第一单位时长写入量。例如，对于微信应用程序，微信应用程序的业务数据需要存储至目标存储设备，存储管理设备检测到10分钟内，在目标存储设备中业务数据的写入量为200M，则可以确定微信应用程序的业务数据的第一单位时长写入量为20M。
可选的，单位时长写入量包括：单位时长写入次数，或单位时长写入数据量。
在实施中，单位时长写入量可以是单位时长写入次数，如每分钟内目标网络业务在目标存储设备中的写入次数为20万次、每分钟内目标网络业务在目标存储设备中的写入次数为50万次等。
或者，单位时长写入量可以是单位时长写入数据量，如每分钟内目标网络业务在目标存储设备中写入的业务数据的数据量为200M，每分钟内目标网络业务在目标存储设备中写入的业务数据的数据量为1G等。
步骤102，根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定第一单位时长写入量所属的第一数值范围对应的第一冗余空间量,其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大。
其中，冗余空间量包括：冗余空间容量，或冗余空间容量相对于目标网络业务在目标存储设备中的基础空间容量的比值。
在实施中，如表二所示，冗余空间量可以是目标存储设备为目标网络业务提供的固定存储空间容量(也可以称为基础空间容量)以外的存储空间容量，可以称为冗余空间容量，如目标存储设备为目标网络业务提供的固定存储空间容量为1T，额外给目标网络业务提供100G的存储空间容量。
或者，如表一所示，冗余空间量可以是目标存储设备额外提供的存储空间容量与目标网络业务在目标存储设备中的基础空间容量的比值，如目标存储设备为目标网络业务提供的基础空间容量为10T，额外给目标网络业务提供1T的存储空间容量，则冗余空间量为10％。
存储管理设备中可以存储单位时长写入量的数值范围与冗余空间量的对应关系，在对应关系中，冗余空间量可以随着单位时长写入量的增大而增大，这样，目标网络业务的单位时长写入量增加时，动态的增加冗余空间量，可以推迟数据清理的时间，使数据清理时清理到的无效数据(也可以称为脏数据)比例比较多，降低了写放大，如表一、表二所示。存储管理设备确定目标网络业务的业务数据的第一单位时长写入量后，可以确定第一单位时长所属的单位时长写入量的数值范围为第一数值范围，然后可以从单位时长写入量的数值范围与冗余空间量的对应关系中，确定第一数值范围对应的第一冗余空间量。例如，目标网络业务可以是微信应用程序的业务，存储管理设备确定第一单位时长写入量为500M，可以确定第一单位时长写入量为500M所属的第一数值范围为300M～600M，然后可以查找第一数值范围为300M～600M对应的第一冗余空间量为100M，这样，当第一单位时长写入量大时，可以将冗余空间量设置的大一些，可以推迟数据清理的时间，在清理数据时清理到无效数据的比例比较高。
表一
单位时长写入量 冗余空间量
0～300M 10％
300～600M 20％
… …
表二
单位时长写入量 冗余空间容量
0～300M 200M
300～600M 500M
… …
可选的，还可以根据目标网络业务在目标存储设备中的基础空间容量与单位时长写入量确定第一冗余空间量，相应的处理可以为：检测目标网络业务在目标存储设备中的基础空间容量；根据预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间的对应关系，确定目标网络业务在目标存储设备中的基础空间容量、第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。
在实施中，存储管理设备中可以存储基础空间容量、单位时长写入量的数值范围与冗余空间的对应关系，如表三所示。存储管理设备检测到在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量，还可以确定目标网络业务在目标存储设备中的基础空间容量，然后可以从预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间的对应关系中，确定目标网络业务在目标存储设备中的基础空间容量、第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。例如，目标网络业务可以是微信应用程序的业务，存储管理设备确定第一单位时长写入量为500M，然后确定目标存储设备为目标网络业务提供的基础空间容量为10T，则可以查找基础空间容量为10T，第一单位时长写入量为500M对应的冗余空间量为1T，这样第一冗余空间量为1T。
表三
单位时长写入量 基础空间容量 冗余空间量
0～300M 1T 500M
300～600M 10T 1T
… …
步骤103，根据第一冗余空间量，对目标网络业务在目标存储设备中的冗余空间进行设置。
在实施中，存储管理设备在确定第一冗余空间量后，可以将目标网络业务在目标存储设备中的冗余空间量设置为第一冗余空间量。
本发明实施例，还可以根据单位时长写入量确定数据清理阈值，相应的处理可以为：根据预先存储的单位时长写入量的数值范围与数据清理阈值的对应关系，确定第一单位时长写入量所属的第一数值范围对应的第一数据清理阈值，数据清理阈值是用于触发目标存储设备对目标网络业务进行无效数据清理的目标网络业务在目标存储设备中的总数据量值；将目标网络业务在目标存储设备中的数据清理阈值，设置为第一数据清理阈值。
在实施中，数据清理阈值也可以称为垃圾回收阈值，可以是目标存储设备对目标网络业务的无效数据进行清理时，目标网络业务在目标存储设备中存储的目标网络业务的业务数据量值。
存储管理设备中可以存储有单位时长写入量的数值范围与数据清理阈值的对应关系，目标网络业务的业务数据单位时长写入量越大，数据清理阈值可以越小，这样可以保证目标存储设备有足够空间容量写入目标网络业务的业务数据，如表四所示。存储管理设备在确定第一单位时长写入量后，可以根据第一单位时长写入量所属的第一数值范围，然后可以从单位时长写入量的数值范围与数据清理阈值的对应关系中，确定第一数值范围对应的第一数据清理阈值，然后可以将目标网络业务在目标存储设备中的数据清理阈值，设置为第一数据清理阈值。例如，目标存储设备为微信应用程序提供的基础空间容量为100T，当存储管理设备检测到微信应用程序的第一单位时长写入量为500M，存储管理设备可以确定第一单位时长写入量的数值范围为300M～600M，则可以查找数值范围为300M～600M对应的垃圾回收阈值为95T，然后可以将微信应用程序在目标存储设备中的垃圾回收阈值设置为95T，也就是当微信应用程序的业务数据在目标存储设备中的数据量值为95T时，可以触发目标存储设备对微信应用程序的业务数据进行清理。
表四
单位时长写入量 数据清理阈值
0～300M 97T
300～600M 95T
… …
本发明实施例，还可以根据冗余空间量确定无效数据阈值，相应的处理可以为：根据预先存储的冗余空间量与无效数据阈值的对应关系，确定第一冗余空间量对应的第一无效数据阈值，无效数据阈值是用于触发目标存储设备对目标网络业务进行无效数据清理的目标网络业务在目标存储设备中无效数据量与总数据量的比值；将目标网络业务在目标存储设备中的无效数据阈值，设置为第一无效数据阈值。
在实施中，无效数据阈值也可以称为脏数据阈值，可以是当目标存储设备对目标网络业务进行无效数据清理时，目标网络业务在目标存储设备中无效数据量与总数据量的比值。
存储管理设备中可以存储冗余空间量与无效数据阈值的对应关系，在对应关系中，冗余空间比较大时，对应的无效数据阈值也比较大，这样，可以等到无效数据比较多时进行清理，需要复制的有效数据比较少，降低了写放大。如表五所示。存储管理设备在确定目标网络业务的第一冗余空间量后，可以从冗余空间量与无效数据阈值的对应关系中，确定第一冗余空间量对应的第一无效数据阈值，然后可以将目标网络业务在目标存储设备中的无效数据阈值设置为第一无效数据阈值，这样，当目标网络业务往目标存储设备中存储业务数据时，当业务数据的无效数据与目标网络业务在目标存储设备中的总存储量的比值为第一无效数据阈值时，触发目标存储设备对目标网络业务的无效数据进行清理，进行无效数据清理时优先清理无效数据比例相对比较大的存储块(目标存储设备为该网络业务提供的存储空间可以分为多个存储块，写入数据时可以往多个存储块上同时写入)。
表五
冗余空间量 无效数据阈值
50M 80％
100M 87％
… …
本发明实施例，还提供了存储目标网络业务的业务数据的过程，相应的处理可以如下：
如图2所示，目标网络业务可以安装在存储管理设备上，也可以设置在其他服务端设备上，存储管理设备中可以设置有虚拟磁盘、闪存转换层、底层驱动等，虚拟磁盘可以用于给目标网络业务的业务数据提供逻辑存储空间、闪存转换层可以用于存储目标网络业务存储业务数据时需要的对应关系(如单位时长写入量的数值范围与冗余空间量的对应关系等)等、底层驱动可以用于驱动目标存储设备。
如图3所示，多个网络业务(如目标网络业务、网络业务A等)可以安装在一个存储管理设备上，或者多个网络业务设置在不同的服务端设备上，但是多个网络业务可以共用存储管理设备的闪存转换层，并且可以共用一个目标存储设备，每个网络业务都有自身对应的虚拟磁盘，虚拟磁盘个数可以由单位时长写入量决定(虚拟磁盘个数可以与单位时长写入量成正比)。技术人员可以按照经验值设置单位时长写入量与对应的冗余空间量、数据清理阈值的对应关系等，并且存储至闪存转换层，还可以在闪存转换层中设置注册接口、控制接口、状态查询接口等，注册接口可以用于网络业务查询单位时长写入量对应的冗余空间量、数据清理阈值等，控制接口可以用于根据单位时长写入量确定虚拟磁盘个数，状态查询接口可以用于网络业务检测单位时长写入量。并且还可以在闪存转换层中设置执行部分、并发访问部分等，执行部分可以用于确定地址映射关系(逻辑地址(网络业务记录的存储地址)与物理地址(目标存储设备记录的存储地址)的映射关系)，并发访问部分可以用于同时访问目标存储设备的多个存储块(目标存储设备为该网络业务提供的存储空间可以分为多个存储块，写入数据时可以往多个存储块上同时写入)。
当目标网络业务往目标存储设备中存储业务数据时，目标网络业务可以检测预设时长的历史时段内的单位时长写入量，然后根据单位时长写入量，确定该单位时长写入量对应的冗余空间量、数据清理阈值等，然后将业务数据发送至虚拟磁盘，虚拟磁盘可以将该业务数据发送至闪存转换层，执行部分可以接收业务数据，并且确定业务数据的逻辑地址与物理地址的映射关系，然后并发访问部分可以通过底层驱动，将业务数据按照地址映射关系存储至目标存储设备中相应的存储块。
另外，存储管理设备在控制目标网络业务往目标存储设备存储业务数据时，还可以按照该业务数据的优先级进行存储，也就是当前的业务数据的优先级比较高时，可以先写入该业务数据，该业务数据写入完成后，再写入其他业务数据。
本发明实施例中，检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量；根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。这样，单位时长写入量增加时，可以自动增加冗余空间量，降低数据清理的频率，从而延长目标存储设备的使用寿命。
实施例二
基于相同的技术构思，本发明实施例还提供了一种管理存储设备的装置，如图4所示，所述装置包括：
检测模块410，用于检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；
确定模块420，用于根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量,其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；
设置模块430，用于根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。
可选的，所述单位时长写入量包括：单位时长写入次数，或单位时长写入数据量。
可选的，所述冗余空间量包括：冗余空间容量，或冗余空间容量相对于所述目标网络业务在所述目标存储设备中的基础空间容量的比值。
可选的，所述确定模块420还用于：
根据预先存储的单位时长写入量的数值范围与数据清理阈值的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一数据清理阈值，所述数据清理阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中的总数据量值；
所述设置模块430还用于：
将所述目标网络业务在所述目标存储设备中的数据清理阈值，设置为所述第一数据清理阈值。
可选的，所述确定模块420还用于：
根据预先存储的冗余空间量与无效数据阈值的对应关系，确定所述第一冗余空间量对应的第一无效数据阈值，所述无效数据阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中无效数据量与总数据量的比值；
所述设置模块430还用于：
将所述目标网络业务在目标存储设备中的无效数据阈值，设置为所述第一无效数据阈值。
可选的，如图5所示，所述确定模块420包括检测子模块421和确定子模块422，其中：
所述检测子模块421，用于检测所述目标网络业务在所述目标存储设备中的基础空间容量；
所述确定子模块422，用于根据预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间的对应关系，确定所述目标网络业务在所述目标存储设备中的基础空间容量、所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。
本发明实施例中，检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。这样，单位时长写入量增加时，可以自动增加冗余空间量，降低数据清理的频率，从而延长目标存储设备的使用寿命。
需要说明的是：上述实施例提供的管理存储设备的装置在管理存储设备时，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将管理存储设备的装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。另外，上述实施例提供的管理存储设备的装置与管理存储设备的方法实施例属于同一构思，其具体实现过程详见方法实施例，这里不再赘述。
实施例三
请参考图6，其示出了本发明实施例所涉及的存储管理设备的结构示意图，该存储管理设备可以用于实施上述实施例中提供的管理存储设备的方法。具体来讲：
该任务执行服务器600可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上中央处理器(central processing units，CPU)1922(例如，一个或一个以上处理器)和存储器1932，一个或一个以上存储应用程序1942或数据1944的存储介质1930(例如一个或一个以上海量存储设备)。其中，存储器1932和存储介质1930可以是短暂存储或持久存储。存储在存储介质1930的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对任务执行服务器中的一系列指令操作。更进一步地，中央处理器1922可以设置为与存储介质1930通信，在任务执行服务器600上执行存储介质1930中的一系列指令操作。
任务执行服务器600还可以包括一个或一个以上电源1926，一个或一个以上有线或无线网络接口1950，一个或一个以上输入输出接口1958，一个或一个以上键盘1956，和/或，一个或一个以上操作系统1941，例如Windows ServerTM，Mac OS XTM，UnixTM，LinuxTM，FreeBSDTM等等。
任务执行服务器600可以包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行所述一个或者一个以上程序包含用于进行以下操作的指令：
检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；
根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量,其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；
根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。
可选的，所述单位时长写入量包括：单位时长写入次数，或单位时长写入数据量。
可选的，所述冗余空间量包括：冗余空间容量，或冗余空间容量相对于所述目标网络业务在所述目标存储设备中的基础空间容量的比值。
可选的，所述方法还包括：
根据预先存储的单位时长写入量的数值范围与数据清理阈值的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一数据清理阈值，所述数据清理阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中的总数据量值；
将所述目标网络业务在目标存储设备中的数据清理阈值，设置为所述第一数据清理阈值。
可选的，所述方法还包括：
根据预先存储的冗余空间量与无效数据阈值的对应关系，确定所述第一冗余空间量对应的第一无效数据阈值，所述无效数据阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中无效数据量与总数据量的比值；
将所述目标网络业务在所述目标存储设备中的无效数据阈值，设置为所述第一无效数据阈值。
可选的，所述根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，包括：
检测所述目标网络业务在所述目标存储设备中的基础空间容量；
根据预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间的对应关系，确定所述目标网络业务在所述目标存储设备中的基础空间容量、所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。
本发明实施例中，检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。这样，单位时长写入量增加时，可以自动增加冗余空间量，降低数据清理的频率，从而延长目标存储设备的使用寿命。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
以上仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (12)

1.一种管理存储设备的方法，其特征在于，所述方法包括：
检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；
根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；
根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。
2.根据权利要求1所述的方法，其特征在于，所述单位时长写入量包括：单位时长写入次数，或单位时长写入数据量。
3.根据权利要求1所述的方法，其特征在于，所述冗余空间量包括：冗余空间容量，或冗余空间容量相对于所述目标网络业务在所述目标存储设备中的基础空间容量的比值。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
根据预先存储的单位时长写入量的数值范围与数据清理阈值的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一数据清理阈值，所述数据清理阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中的总数据量值；
将所述目标网络业务在目标存储设备中的数据清理阈值，设置为所述第一数据清理阈值。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
根据预先存储的冗余空间量与无效数据阈值的对应关系，确定所述第一冗余空间量对应的第一无效数据阈值，所述无效数据阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中无效数据量与总数据量的比值；
将所述目标网络业务在所述目标存储设备中的无效数据阈值，设置为所述第一无效数据阈值。
6.根据权利要求1所述的方法，其特征在于，所述根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，包括：
检测所述目标网络业务在所述目标存储设备中的基础空间容量；
根据预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间量的对应关系，确定所述目标网络业务在所述目标存储设备中的基础空间容量、所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。
7.一种管理存储设备的装置，其特征在于，所述装置包括：
检测模块，用于检测在预设时长的历史时段内，在目标存储设备中，目标网络业务的业务数据的第一单位时长写入量；
确定模块，用于根据预先存储的单位时长写入量的数值范围与冗余空间量的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量，其中，在所述对应关系中，冗余空间量随单位时长写入量的增大而变大；
设置模块，用于根据所述第一冗余空间量，对所述目标网络业务在目标存储设备中的冗余空间进行设置。
8.根据权利要求7所述的装置，其特征在于，所述单位时长写入量包括：单位时长写入次数，或单位时长写入数据量。
9.根据权利要求7所述的装置，其特征在于，所述冗余空间量包括：冗余空间容量，或冗余空间容量相对于所述目标网络业务在所述目标存储设备中的基础空间容量的比值。
10.根据权利要求7所述的装置，其特征在于，所述确定模块还用于：
根据预先存储的单位时长写入量的数值范围与数据清理阈值的对应关系，确定所述第一单位时长写入量所属的第一数值范围对应的第一数据清理阈值，所述数据清理阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中的总数据量值；
所述设置模块还用于：
将所述目标网络业务在所述目标存储设备中的数据清理阈值，设置为所述第一数据清理阈值。
11.根据权利要求7所述的装置，其特征在于，所述确定模块还用于：
根据预先存储的冗余空间量与无效数据阈值的对应关系，确定所述第一冗余空间量对应的第一无效数据阈值，所述无效数据阈值是用于触发所述目标存储设备对所述目标网络业务进行无效数据清理的所述目标网络业务在所述目标存储设备中无效数据量与总数据量的比值；
所述设置模块还用于：
将所述目标网络业务在目标存储设备中的无效数据阈值，设置为所述第一无效数据阈值。
12.根据权利要求7所述的装置，其特征在于，所述确定模块包括检测子模块和确定子模块，其中：
所述检测子模块，用于检测所述目标网络业务在所述目标存储设备中的基础空间容量；
所述确定子模块，用于根据预先存储的基础空间容量、单位时长写入量的数值范围与冗余空间量的对应关系，确定所述目标网络业务在所述目标存储设备中的基础空间容量、所述第一单位时长写入量所属的第一数值范围对应的第一冗余空间量。
CN201510946978.1A 2015-12-17 2015-12-17 一种管理存储设备的方法及装置 Active CN106897022B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201510946978.1A CN106897022B (zh) 2015-12-17 2015-12-17 一种管理存储设备的方法及装置
PCT/CN2016/084479 WO2017101263A1 (zh) 2015-12-17 2016-06-02 管理存储设备的方法及装置
JP2017562727A JP6522168B2 (ja) 2015-12-17 2016-06-02 ストレージデバイスを管理するための方法および装置
EP16874327.6A EP3392754B1 (en) 2015-12-17 2016-06-02 Method and apparatus for managing storage device
KR1020187000330A KR102100571B1 (ko) 2015-12-17 2016-06-02 스토리지 디바이스를 관리하는 방법 및 장치
US15/707,860 US10198180B2 (en) 2015-12-17 2017-09-18 Method and apparatus for managing storage device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510946978.1A CN106897022B (zh) 2015-12-17 2015-12-17 一种管理存储设备的方法及装置

Publications (2)

Publication Number Publication Date
CN106897022A CN106897022A (zh) 2017-06-27
CN106897022B true CN106897022B (zh) 2019-05-31

Family

ID=59055650

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510946978.1A Active CN106897022B (zh) 2015-12-17 2015-12-17 一种管理存储设备的方法及装置

Country Status (6)

Country Link
US (1) US10198180B2 (zh)
EP (1) EP3392754B1 (zh)
JP (1) JP6522168B2 (zh)
KR (1) KR102100571B1 (zh)
CN (1) CN106897022B (zh)
WO (1) WO2017101263A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107943605B (zh) * 2017-11-14 2021-03-19 青岛海信移动通信技术股份有限公司 一种存储卡处理方法及装置
CN108733320A (zh) * 2018-04-03 2018-11-02 郑州云海信息技术有限公司 一种ssd性能和容量配置方法
CN110058810B (zh) * 2019-01-17 2022-06-17 创新先进技术有限公司 分布式系统的磁盘清理方法和装置、分布式系统
CN111078588B (zh) * 2019-12-17 2022-03-25 北京三快在线科技有限公司 垃圾回收方法、装置、设备及存储介质
CN111194055B (zh) * 2019-12-30 2022-09-09 广东博智林机器人有限公司 数据存储频率处理方法、装置、电子设备以及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103379156A (zh) * 2012-04-24 2013-10-30 深圳市腾讯计算机系统有限公司 实现存储空间动态均衡的方法、系统和装置
CN103838524A (zh) * 2014-03-13 2014-06-04 深圳市迪菲特科技股份有限公司 一种自适应精简配置的实现方法与存储系统
WO2014101086A1 (zh) * 2012-12-28 2014-07-03 华为技术有限公司 存储空间的处理方法、装置及非易失性计算机可读存储介质

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005242897A (ja) * 2004-02-27 2005-09-08 Oki Electric Ind Co Ltd フラッシュディスク装置
KR101089150B1 (ko) * 2005-08-03 2011-12-02 쌘디스크 코포레이션 스케쥴링된 리클레임 작동들을 갖는 비휘발성 메모리
JP2008171103A (ja) * 2007-01-10 2008-07-24 Seiko Epson Corp 半導体記憶装置管理システム、半導体記憶装置、半導体記憶装置管理システムの制御方法およびプログラム
US8214580B2 (en) * 2009-10-23 2012-07-03 International Business Machines Corporation Solid state drive with adjustable drive life and capacity
US8677203B1 (en) * 2010-01-11 2014-03-18 Apple Inc. Redundant data storage schemes for multi-die memory systems
JP2011192260A (ja) * 2010-02-16 2011-09-29 Toshiba Corp 半導体記憶装置
CN102053802B (zh) * 2010-12-31 2012-09-05 中国科学院计算技术研究所 网络独立冗余磁盘阵列系统
US9678676B2 (en) 2011-05-24 2017-06-13 Marvell World Trade Ltd. Method for storage devices to achieve low write amplification with low over provision
US8671249B2 (en) * 2011-07-22 2014-03-11 Fusion-Io, Inc. Apparatus, system, and method for managing storage capacity recovery
US9645917B2 (en) 2012-05-22 2017-05-09 Netapp, Inc. Specializing I/O access patterns for flash storage
JP5788369B2 (ja) 2012-09-12 2015-09-30 株式会社東芝 メモリシステム、コンピュータシステム、およびメモリ管理方法
US9852058B2 (en) 2012-09-28 2017-12-26 International Business Machines Corporation NVS thresholding for efficient data management
GB2511325A (en) * 2013-02-28 2014-09-03 Ibm Cache allocation in a computerized system
US9645924B2 (en) * 2013-12-16 2017-05-09 International Business Machines Corporation Garbage collection scaling
US9632702B2 (en) * 2014-10-15 2017-04-25 International Business Machines Corporation Efficient initialization of a thinly provisioned storage array

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103379156A (zh) * 2012-04-24 2013-10-30 深圳市腾讯计算机系统有限公司 实现存储空间动态均衡的方法、系统和装置
WO2014101086A1 (zh) * 2012-12-28 2014-07-03 华为技术有限公司 存储空间的处理方法、装置及非易失性计算机可读存储介质
CN103838524A (zh) * 2014-03-13 2014-06-04 深圳市迪菲特科技股份有限公司 一种自适应精简配置的实现方法与存储系统

Also Published As

Publication number Publication date
EP3392754A1 (en) 2018-10-24
WO2017101263A1 (zh) 2017-06-22
JP2018516410A (ja) 2018-06-21
JP6522168B2 (ja) 2019-05-29
KR20180015730A (ko) 2018-02-13
EP3392754A4 (en) 2019-06-26
US20180004409A1 (en) 2018-01-04
KR102100571B1 (ko) 2020-04-13
CN106897022A (zh) 2017-06-27
EP3392754B1 (en) 2022-10-19
US10198180B2 (en) 2019-02-05

Similar Documents

Publication Publication Date Title
CN106897022B (zh) 一种管理存储设备的方法及装置
CN105283855B (zh) 一种寻址方法及装置
US8782324B1 (en) Techniques for managing placement of extents based on a history of active extents
CN103995855B (zh) 存储数据的方法和装置
CN107526546B (zh) 一种Spark分布式计算数据处理方法及系统
CN103440207A (zh) 缓存方法及装置
CN103064797B (zh) 数据处理方法和虚拟机管理平台
CN110837513B (zh) 一种缓存更新方法、装置、服务器及存储介质
CN102156738A (zh) 数据块处理方法、数据块存储设备及系统
CN103761190A (zh) 数据处理方法及装置
CN104216796B (zh) 一种数据备份、恢复方法及电子设备
CN109194707A (zh) 分布式图嵌入的方法及装置
CN101488919B (zh) 存储地址分配方法和装置
CN101799832A (zh) 巨量数据一次性快速写入数据库的方法
CN108664217A (zh) 一种降低固态盘存储系统写性能抖动的缓存方法及系统
CN105868023B (zh) 一种分布式系统中的数据处理方法及计算节点
Kumar et al. An extended approach to Non-Replicated dynamic fragment allocation in distributed database systems
CN105912404B (zh) 一种基于磁盘的大规模图数据中寻找强连通分量的方法
CN113867641B (zh) 主机内存缓冲管理方法、装置、以及固态硬盘
US11803469B2 (en) Storing data in a log-structured format in a two-tier storage system
CN105359116A (zh) 缓存器、共享缓存管理方法及控制器
CN105095105B (zh) 一种Cache分区的方法及装置
CN107168892A (zh) 一种数据的写入方法及装置
CN103218249B (zh) 一种虚拟化集群控制方法及设备、虚拟化集群系统
US8793459B2 (en) Implementing feedback directed NUMA mitigation tuning

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190729

Address after: Shenzhen Futian District City, Guangdong province 518000 Zhenxing Road, SEG Science Park 2 East Room 403

Co-patentee after: Tencent cloud computing (Beijing) limited liability company

Patentee after: Tencent Technology (Shenzhen) Co., Ltd.

Address before: Shenzhen Futian District City, Guangdong province 518000 Zhenxing Road, SEG Science Park 2 East Room 403

Patentee before: Tencent Technology (Shenzhen) Co., Ltd.