CN108920107B - 筛选冷数据的方法、装置、计算机设备及存储介质 - Google Patents

筛选冷数据的方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN108920107B
CN108920107B CN201810771157.2A CN201810771157A CN108920107B CN 108920107 B CN108920107 B CN 108920107B CN 201810771157 A CN201810771157 A CN 201810771157A CN 108920107 B CN108920107 B CN 108920107B
Authority
CN
China
Prior art keywords
data
page
solid state
state disk
moving
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810771157.2A
Other languages
English (en)
Other versions
CN108920107A (zh
Inventor
杨学森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Union Memory Information System Co Ltd
Original Assignee
Shenzhen Union Memory Information System Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Union Memory Information System Co Ltd filed Critical Shenzhen Union Memory Information System Co Ltd
Priority to CN201810771157.2A priority Critical patent/CN108920107B/zh
Publication of CN108920107A publication Critical patent/CN108920107A/zh
Application granted granted Critical
Publication of CN108920107B publication Critical patent/CN108920107B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0616—Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G06F3/0649—Lifecycle management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0679—Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]

Abstract

本发明涉及筛选冷数据的方法、装置、计算机设备及存储介质，其中，该方法包括在数据所在页的元区记录数据的搬移次数；判断所述搬移次数是否不小于阈值；若是，则将搬移次数不小于阈值所在页内的数据标记为冷数据。本发明通过以页为单元，在页的元区内记录该页的数据搬移次数，将该数据搬移次数与阈值进行对比，当数据搬移次数达到或超过阈值时，将该页内的所有数据标记为冷数据，存储到冷数据块内，以使得当最后冷数据沉淀下来后，块内部只含有冷数据，含有的无效数据比较少，提升固态硬盘的性能和保证寿命。

Description

筛选冷数据的方法、装置、计算机设备及存储介质
技术领域
本发明涉及筛选数据的方法，更具体地说是指筛选冷数据的方法、装置、计算机设备及存储介质。
背景技术
在固态硬盘中，需要对写入闪存(NAND)上的数据进行区分，划分出冷数据和热数据，其中，写入之后很长时间不被使用的数据称为冷数据，经常被使用的数据称为热数据；合理地区分出冷数据会对固态硬盘的性能和寿命产生正向的影响。
目前，如图1所示，对数据进行筛选是通过按写入时间先后对块进行标识，每个块被写入数据时会分配一个具有时间意义的标识，这个标识是严格递增的，一般用一个整型来存储，在不断地把数据写入到块的过程中，携带有效数据的块数量一直在增长，标识一直在增加，当前正在写入块A的标识减去块B的标识得到的差值大于等于阈值时，含有效数据的块B被认为仅含有冷数据和无效数据的冷数据块。这种筛选的方法是以块为单位，颗粒度比较大，筛选出来的冷数据块含有的无效数据可能较多，会造成一个块内部可能同时存在冷热数据的情况，最后当冷数据沉淀下来时，块内部不再存在热数据，此时有效数据全是冷数据，块内部同时存在冷数据和无效数据，但存在冷数据与无效数据的比例较小的情况，导致固态硬盘的性能和寿命受到影响。
因此，有必要设计一种新的方法，以使得当最后冷数据沉淀下来后，块内部只含有冷数据，含有的无效数据比较少，提升固态硬盘的性能和保证寿命。
发明内容
本发明的目的在于克服现有技术的缺陷，提供筛选冷数据的方法、装置、计算机设备及存储介质。
为实现上述目的，本发明采用以下技术方案：筛选冷数据的方法，包括：
数据所在页的元区记录数据搬移次数；
判断所述数据搬移次数是否不小于阈值；
若是，则将数据搬移次数不小于阈值所在页内的数据标记为冷数据。
其进一步技术方案为：所述数据所在页的元区记录数据搬移次数步骤之前，还包括：
将数据写入固态硬盘的闪存内。
其进一步技术方案为：判断所述数据搬移次数是否不小于阈值的步骤之后，还包括：
若否，则返回所述将数据写入固态硬盘的闪存内步骤。
其进一步技术方案为：所述在数据所在页的元区记录数据搬移次数步骤，包括以下具体步骤：
判断数据是否是第一次写入固态硬盘的闪存内；
若是，则将数据搬移次数标记为零，记录于数据所在页的元区内，并进入下一步骤，若否，则进入下一步骤；
判断固态硬盘是否触发数据搬移操作；
若是，则搬移写入固态硬盘的闪存内的数据；
将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数；
并进入判断所述数据搬移次数是否不小于阈值的步骤；
若否，则返回将数据写入固态硬盘的闪存内的步骤。
其进一步技术方案为：所述将数据搬移次数不小于阈值的数据标记为冷数据步骤之后，还包括：
将冷数据存储于冷数据块内。
本发明还提供了筛选冷数据的装置，包括：
记录单元，用于数据所在页的元区记录数据搬移次数；
次数判断单元，用于判断所述数据搬移次数是否不小于阈值；
标记单元，用于若是，则将数据搬移次数不小于阈值所在页内的数据标记为冷数据。
其进一步技术方案为：所述装置还包括：
数据写入单元，用于将数据写入固态硬盘的闪存内。
其进一步技术方案为：所述记录单元包括：
数据写入判断模块，用于判断数据是否是第一次写入固态硬盘的闪存内；
初始化模块，用于若是，则将数据搬移次数标记为零，记录于数据所在页的元区内；
搬移触发模块，用于判断固态硬盘是否触发数据搬移操作；
搬移模块，用于若是，则搬移写入固态硬盘的闪存内的数据；
次数更新模块，用于将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数。
本发明还提供了一种计算机设备，其特征在于，所述计算机设备包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现上述的筛选冷数据的方法。
本发明提供了一种存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时可实现上述的筛选冷数据的方法。
本发明与现有技术相比的有益效果是：本发明通过以页为单元，在页的元区内记录该页的数据搬移次数，将该数据搬移次数与阈值进行对比，当数据搬移次数达到或超过阈值时，将该页内的所有数据标记为冷数据，存储到冷数据块内，以使得当最后冷数据沉淀下来后，块内部只含有冷数据，含有的无效数据比较少，提升固态硬盘的性能和保证寿命。
下面结合附图和具体实施例对本发明作进一步描述。
附图说明
图1为现有数据的筛选冷数据方法的示意流程图；
图2为本发明一具体实施例提供的筛选冷数据的方法的应用场景图；
图3为本发明一具体实施例提供的筛选冷数据的方法的示意流程图一；
图4为本发明一具体实施例提供的筛选冷数据的方法的子步骤示意流程图；
图5为本发明一具体实施例提供的筛选冷数据的方法的示意流程图二；
图6为本发明另一具体实施例提供的筛选冷数据的方法的示意流程图；
图7为本发明一具体实施例提供的筛选冷数据的装置的示意性框图；
图8为本发明一具体实施例提供的记录单元的示意性框图；
图9为本发明另一具体实施例提供的筛选冷数据的装置的示意性框图；
图10为本发明一具体实施例提供的一种计算机设备的示意性框图。
具体实施方式
为了更充分理解本发明的技术内容，下面结合具体实施例对本发明的技术方案进一步介绍和说明，但不局限于此。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本申请说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本申请。如在本申请说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
请参阅图2和图3，图2为本发明一具体实施例提供的筛选冷数据的方法的应用场景图；图3为本发明一具体实施例提供的筛选冷数据的方法的示意流程图，该方法应用于服务器，以筛选平台形式存在，该服务器可与用户终端进行数据交互，其中用户终端的使用者通常为企业的数据管理人员，可通过用户终端内的筛选APP向服务器发起筛选数据需求，服务器向移动终端反馈与需求相对应的数据。
如图3所示，该方法包括步骤S110～S140。
S110、将数据写入固态硬盘的闪存内。
以页为单位，将一个页的数据写入到固态硬盘的闪存内，页是数据搬移的最小单位，以页为单位筛选冷数据最为灵活，当冷数据沉淀下来后，整个块内的数据基本上只含有冷数据，也就是由若干个被标记为冷数据的页组成的块，可提升固态硬盘的性能和保证其寿命。
S120、数据所在页的元区记录数据搬移次数。
固态硬盘一般囊括有若干个块，块由若干个页组成，数据分别存储在页内，页的物理分布一般包括用于存储数据的数据区以及用于管理数据的区域(即元区)，该元区是指记录块的元信息(数据区大小、空闲标志位、指针等等)的区域。
在本实施例中，页是数据搬移的最小单位，以页为单位筛选冷数据最为灵活，数据所在页的元区的数据段记录该数据搬移次数，只需要判断每个页元区内的对应数据段内登记的次数，即可分辨出冷数据，将冷数据的级别缩小至页级别，这样处理冷数据更灵活，最后冷数据沉淀下来后，剩下的块内部有效数据与无效数据的比例较大。
具体地，必须约定在每个页的元区同一数据段记录数据搬移次数，譬如，选择每个页的元区的第三个数据段作为记录数据搬移次数的数据段，服务器自动挑选出每个页的元区第三个数据段内的数据，与阈值进行对比，从而筛选出冷数据，方便快捷。
在一实施例中，如图4所示，上述的S120可包括有S121～S125。
S121、判断数据是否是第一次写入固态硬盘的闪存内；
S122、若是，则将数据搬移次数标记为零，记录于数据所在页的元区内，并进入S123，若否，则进入S123；
S123、判断固态硬盘是否触发数据搬移操作；
S124、若是，则搬移写入固态硬盘的闪存内的数据；
S125、将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数；
并进入S130；
若否，则返回S110。
对于首次将某一页的数据写入到固态硬盘的闪存内时，将数据搬移次数标记为0，记录在数据所在页的元区指定数据段内，比如，页0内的数据第一次写入固态硬盘的闪存内，则在页0的第三个数据段内记录数据搬移次数为0。
当若干个页的数据写入到固态硬盘的闪存内，以使固态硬盘触发数据搬移机制，对数据进行搬移，每次搬移都会对搬移的数据搬移次数进行加一，并更新该数据所在页的元区指定数据段中记录的数据搬移次数。譬如：页0的数据被搬移了一次，则将页0的数据搬移次数更改为1，并更新到页0元区第三个数据段内记录的数据搬移次数，此后，若页0的数据搬移一次，则在原来的数据搬移次数上加一，更新数据所在页元区的指定数据段内记录的数据搬移次数。
S130、判断所述数据搬移次数是否不小于阈值。
若否，则返回所述步骤S110；
S140、若是，则将数据搬移次数不小于阈值的数据标记为冷数据。
在本实施例中，写入固态硬盘的闪存之后很长时间不被使用的数据称为冷数据。
当页内元区所记录数据搬移次数中存在达到阈值的数据搬移次数，将该页内的数据标记为冷数据。譬如：页0元区内记录的数据搬移次数达到或超过阈值，页0的数据就是冷数据。
请参阅图6，图6为本发明另一具体实施例提供的筛选冷数据的方法的示意流程图；在该实施例中，该方法包括步骤S210～S250。其中步骤S210-S240与上述实施例中的步骤S110-S140类似，在此不再赘述。下面详细说明本实施例中所增加的步骤S250。
S250、将冷数据存储于冷数据块内。
在本实施例中，上述的冷数据块是一个专门用于存储冷数据的块。将上述标记为冷数据以页为单位存储到冷数据块的对应页内，该冷数据块存储的都是冷数据，可以提升固态硬盘的性能且保证固态硬盘的寿命。
上述的筛选冷数据的方法，通过以页为单元，在页的元区内记录该页的数据搬移次数，将该数据搬移次数与阈值进行对比，当数据搬移次数达到或超过阈值时，将该页内的所有数据标记为冷数据，存储到冷数据块内，以使得当最后冷数据沉淀下来后，块内部只含有冷数据，含有的无效数据比较少，提升固态硬盘的性能和保证寿命。
请参阅图7，图7为本发明一具体实施例提供的筛选冷数据的装置300的示意性框图；如图7所示，对应于以上筛选冷数据的方法，本发明还提供一种筛选冷数据的装置300。该筛选冷数据的装置300包括用于执行上述筛选冷数据的方法的单元，该装置可以被配置于服务器中。具体地，请参阅图7，该筛选冷数据的装置300包括：
记录单元320，用于数据所在页的元区记录数据搬移次数。
次数判断单元330，用于判断所述数据搬移次数是否不小于阈值。
标记单元340，用于若是，则将数据搬移次数不小于阈值所在页内的数据标记为冷数据。
在一实施例中，上述的装置还包括：
数据写入单元310，用于将数据写入固态硬盘的闪存内。
在一实施例中，如图8所示，记录单元320包括：
数据写入判断模块321，用于判断数据是否是第一次写入固态硬盘的闪存内。
初始化模块322，用于若是，则将数据搬移次数标记为零，记录于数据所在页的元区内。
搬移触发模块323，用于判断固态硬盘是否触发数据搬移操作。
搬移模块324，用于若是，则搬移写入固态硬盘的闪存内的数据。
次数更新模块325，用于将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数。
图9是本发明另一实施例提供的一种筛选冷数据的装置300的示意性框图。如图9所示，本实施例的筛选冷数据的装置300是上述实施例的基础上增加了存储单元350。
存储单元350，用于将冷数据存储于冷数据块内。
需要说明的是，所属领域的技术人员可以清楚地了解到，上述筛选冷数据的装置300和各单元的具体实现过程，可以参考前述方法实施例中的相应描述，为了描述的方便和简洁，在此不再赘述。
上述筛选冷数据的装置300可以实现为一种计算机程序的形式，该计算机程序可以在如图10所示的计算机设备上运行。
请参阅图10，图10是本申请实施例提供的一种计算机设备的示意性框图。该计算机设备500可以是终端，也可以是服务器，其中，终端可以是智能手机、平板电脑、笔记本电脑、台式电脑、个人数字助理和穿戴式设备等具有通信功能的电子设备。服务器可以是独立的服务器，也可以是多个服务器组成的服务器集群。
参阅图10，该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括非易失性存储介质503和内存储器504。
该非易失性存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032包括程序指令，该程序指令被执行时，可使得处理器502执行一种筛选冷数据的方法。
该处理器502用于提供计算和控制能力，以支撑整个计算机设备500的运行。
该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行一种筛选冷数据的方法。
该网络接口505用于与其它设备进行网络通信。本领域技术人员可以理解，图10中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现如下步骤：
数据所在页的元区记录数据搬移次数；
判断所述数据搬移次数是否不小于阈值；
若是，则将数据搬移次数不小于阈值所在页内的数据标记为冷数据。
在一实施例中，处理器502在实现所述数据所在页的元区记录数据搬移次数步骤之前，还实现如下步骤：
将数据写入固态硬盘的闪存内。
在一实施例中，处理器502在实现判断所述数据搬移次数是否不小于阈值的步骤之后，还实现如下步骤：
若否，则返回所述将数据写入固态硬盘的闪存内步骤。
在一实施例中，处理器502在实现所述在数据所在页的元区记录数据搬移次数步骤时，具体实现如下步骤：
判断数据是否是第一次写入固态硬盘的闪存内；
若是，则将数据搬移次数标记为零，记录于数据所在页的元区内，并进入下一步骤，若否，则进入下一步骤；
判断固态硬盘是否触发数据搬移操作；
若是，则搬移写入固态硬盘的闪存内的数据；
将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数；
并进入判断所述数据搬移次数是否不小于阈值的步骤；
若否，则返回将数据写入固态硬盘的闪存内的步骤。
在一实施例中，处理器502在实现所述将数据搬移次数不小于阈值的数据标记为冷数据步骤之后，还实现如下步骤：
将冷数据存储于冷数据块内。
应当理解，在本申请实施例中，处理器502可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本领域普通技术人员可以理解的是实现上述实施例的方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成。该计算机程序包括程序指令，计算机程序可存储于一存储介质中，该存储介质为计算机可读存储介质。该程序指令被该计算机系统中的至少一个处理器执行，以实现上述方法的实施例的流程步骤。
因此，本发明还提供一种存储介质。该存储介质可以为计算机可读存储介质。该存储介质存储有计算机程序，其中计算机程序包括程序指令。该程序指令被处理器执行时使处理器执行如下步骤：
数据所在页的元区记录数据搬移次数；
判断所述数据搬移次数是否不小于阈值；
若是，则将数据搬移次数不小于阈值所在页内的数据标记为冷数据。
在一实施例中，所述处理器在执行所述程序指令而实现所述数据所在页的元区记录数据搬移次数步骤之前，还实现如下步骤：
将数据写入固态硬盘的闪存内。
在一实施例中，所述处理器在执行所述程序指令而实现判断所述数据搬移次数是否不小于阈值的步骤之后，还实现如下步骤：
若否，则返回所述将数据写入固态硬盘的闪存内步骤。
在一实施例中，所述处理器在执行所述程序指令而实现所述在数据所在页的元区记录数据搬移次数步骤时，具体实现如下步骤：
判断数据是否是第一次写入固态硬盘的闪存内；
若是，则将数据搬移次数标记为零，记录于数据所在页的元区内，并进入下一步骤，若否，则进入下一步骤；
判断固态硬盘是否触发数据搬移操作；
若是，则搬移写入固态硬盘的闪存内的数据；
将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数；
并进入判断所述数据搬移次数是否不小于阈值的步骤；
若否，则返回将数据写入固态硬盘的闪存内的步骤。
在一实施例中，所述处理器在执行所述程序指令而实现所述将数据搬移次数不小于阈值的数据标记为冷数据步骤之后，还实现如下步骤：
将冷数据存储于冷数据块内。
所述存储介质可以是U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、磁碟或者光盘等各种可以存储程序代码的计算机可读存储介质。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的。例如，各个单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。
本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。本发明实施例装置中的单元可以根据实际需要进行合并、划分和删减。另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。
该集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，终端，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。
上述仅以实施例来进一步说明本发明的技术内容，以便于读者更容易理解，但不代表本发明的实施方式仅限于此，任何依本发明所做的技术延伸或再创造，均受本发明的保护。本发明的保护范围以权利要求书为准。

Claims (10)

1.筛选冷数据的方法，其特征在于，包括：
数据所在页的元区记录数据搬移次数；
判断所述数据搬移次数是否不小于阈值；
若是，则将数据搬移次数不小于阈值所在页内的数据标记为冷数据；
在每个页的元区同一数据段记录数据搬移次数；以页为单位，将一个页的数据写入到固态硬盘的闪存内。
2.根据权利要求1所述的筛选冷数据的方法，其特征在于，所述数据所在页的元区记录数据搬移次数步骤之前，还包括：
将数据写入固态硬盘的闪存内。
3.根据权利要求2所述的筛选冷数据的方法，其特征在于，判断所述数据搬移次数是否不小于阈值的步骤之后，还包括：
若否，则返回所述将数据写入固态硬盘的闪存内步骤。
4.根据权利要求2所述的筛选冷数据的方法，其特征在于，所述在数据所在页的元区记录数据搬移次数步骤，包括以下具体步骤：
判断数据是否是第一次写入固态硬盘的闪存内；
若是，则将数据搬移次数标记为零，记录于数据所在页的元区内，并进入下一步骤，若否，则进入下一步骤；
判断固态硬盘是否触发数据搬移操作；
若是，则搬移写入固态硬盘的闪存内的数据；
将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数；
并进入判断所述数据搬移次数是否不小于阈值的步骤；
若否，则返回将数据写入固态硬盘的闪存内的步骤。
5.根据权利要求1所述的筛选冷数据的方法，其特征在于，所述将数据搬移次数不小于阈值的数据标记为冷数据步骤之后，还包括：
将冷数据存储于冷数据块内。
6.筛选冷数据的装置，其特征在于，包括：
记录单元，用于数据所在页的元区记录数据搬移次数；
次数判断单元，用于判断所述数据搬移次数是否不小于阈值；
标记单元，用于若是，则将数据搬移次数不小于阈值所在页内的数据标记为冷数据；
在每个页的元区同一数据段记录数据搬移次数；以页为单位，将一个页的数据写入到固态硬盘的闪存内。
7.根据权利要求6所述的筛选冷数据的装置，其特征在于，所述装置还包括：
数据写入单元，用于将数据写入固态硬盘的闪存内。
8.根据权利要求7所述的筛选冷数据的装置，其特征在于，所述记录单元包括：
数据写入判断模块，用于判断数据是否是第一次写入固态硬盘的闪存内；
初始化模块，用于若是，则将数据搬移次数标记为零，记录于数据所在页的元区内；
搬移触发模块，用于判断固态硬盘是否触发数据搬移操作；
搬移模块，用于若是，则搬移写入固态硬盘的闪存内的数据；
次数更新模块，用于将数据搬移次数加一，并更新数据所在页元区内的数据搬移次数。
9.一种计算机设备，其特征在于，所述计算机设备包括存储器及处理器，所述存储器上存储有计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至5中任一项所述的筛选冷数据的方法。
10.一种存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序包括程序指令，所述程序指令当被处理器执行时可实现如权利要求1至5中任一项所述的筛选冷数据的方法。
CN201810771157.2A 2018-07-13 2018-07-13 筛选冷数据的方法、装置、计算机设备及存储介质 Active CN108920107B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810771157.2A CN108920107B (zh) 2018-07-13 2018-07-13 筛选冷数据的方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810771157.2A CN108920107B (zh) 2018-07-13 2018-07-13 筛选冷数据的方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN108920107A CN108920107A (zh) 2018-11-30
CN108920107B true CN108920107B (zh) 2022-02-01

Family

ID=64411956

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810771157.2A Active CN108920107B (zh) 2018-07-13 2018-07-13 筛选冷数据的方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN108920107B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109802684B (zh) * 2018-12-26 2022-03-25 华为技术有限公司 进行数据压缩的方法和装置
CN110531927B (zh) * 2019-08-06 2023-05-09 深圳大普微电子科技有限公司 一种基于块分级的垃圾回收方法及非易失性的存储设备

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102576293A (zh) * 2009-09-08 2012-07-11 国际商业机器公司 固态存储设备和分层存储系统中的数据管理
CN102841850A (zh) * 2012-06-19 2012-12-26 记忆科技(深圳)有限公司 减小固态硬盘写放大的方法及系统
CN104375944A (zh) * 2013-08-14 2015-02-25 联想(北京)有限公司 一种数据存储方法和装置
CN105183386A (zh) * 2015-09-14 2015-12-23 联想(北京)有限公司 一种信息处理方法及电子设备
CN105677242A (zh) * 2015-12-31 2016-06-15 杭州华为数字技术有限公司 冷热数据的分离方法和装置
CN107357535A (zh) * 2017-07-20 2017-11-17 郑州云海信息技术有限公司 一种确定数据冷热等级的方法及装置
CN107562381A (zh) * 2017-08-30 2018-01-09 紫光华山信息技术有限公司 一种数据处理方法及装置
CN108108128A (zh) * 2017-12-19 2018-06-01 深圳忆联信息系统有限公司 一种混合ssd的磨损均衡方法及ssd
CN108255419A (zh) * 2017-12-19 2018-07-06 深圳忆联信息系统有限公司 一种用于tlc类型ssd的磨损均衡方法及ssd

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101498673B1 (ko) * 2007-08-14 2015-03-09 삼성전자주식회사 반도체 드라이브, 그것의 데이터 저장 방법, 그리고 그것을포함한 컴퓨팅 시스템
JP4292225B2 (ja) * 2007-12-17 2009-07-08 株式会社東芝 情報記録装置および情報記録方法
CN102968385B (zh) * 2011-08-31 2016-01-20 群联电子股份有限公司 数据写入方法、存储器控制器与储存装置
KR20180031289A (ko) * 2016-09-19 2018-03-28 삼성전자주식회사 스토리지 장치 및 상기 스토리지 장치의 동작 방법

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102576293A (zh) * 2009-09-08 2012-07-11 国际商业机器公司 固态存储设备和分层存储系统中的数据管理
CN102841850A (zh) * 2012-06-19 2012-12-26 记忆科技(深圳)有限公司 减小固态硬盘写放大的方法及系统
CN104375944A (zh) * 2013-08-14 2015-02-25 联想(北京)有限公司 一种数据存储方法和装置
CN105183386A (zh) * 2015-09-14 2015-12-23 联想(北京)有限公司 一种信息处理方法及电子设备
CN105677242A (zh) * 2015-12-31 2016-06-15 杭州华为数字技术有限公司 冷热数据的分离方法和装置
CN107357535A (zh) * 2017-07-20 2017-11-17 郑州云海信息技术有限公司 一种确定数据冷热等级的方法及装置
CN107562381A (zh) * 2017-08-30 2018-01-09 紫光华山信息技术有限公司 一种数据处理方法及装置
CN108108128A (zh) * 2017-12-19 2018-06-01 深圳忆联信息系统有限公司 一种混合ssd的磨损均衡方法及ssd
CN108255419A (zh) * 2017-12-19 2018-07-06 深圳忆联信息系统有限公司 一种用于tlc类型ssd的磨损均衡方法及ssd

Also Published As

Publication number Publication date
CN108920107A (zh) 2018-11-30

Similar Documents

Publication Publication Date Title
CN110674053B (zh) Ssd数据存储节点管理方法、装置、计算机设备及存储介质
CN104040516A (zh) 用于数据去重的方法、设备和系统
CN108205498B (zh) 内存回收方法及装置、计算机装置及计算机可读存储介质
CN111324303A (zh) Ssd垃圾回收方法、装置、计算机设备及存储介质
US11960396B2 (en) Method and computer program product for performing data writes into a flash memory
CN109213450B (zh) 一种基于闪存阵列的关联元数据删除方法、装置及设备
CN108920107B (zh) 筛选冷数据的方法、装置、计算机设备及存储介质
CN112182010B (zh) 脏页刷新方法和装置、存储介质和电子设备
US20150089097A1 (en) I/o processing control apparatus and i/o processing control method
CN111563052A (zh) 降低读延时的缓存方法、装置、计算机设备及存储介质
CN108920108B (zh) 冷数据的筛选方法、装置、计算机设备及存储介质
CN108205501B (zh) 内存回收方法及装置、计算机装置及计算机可读存储介质
CN108984124B (zh) 减少写放大的方法、装置、计算机设备及存储介质
KR20140042431A (ko) 컴퓨팅 시스템 및 컴퓨팅 시스템의 데이터 관리 방법
CN105653539A (zh) 索引分布式存储的实现方法和装置
CN114020193A (zh) 跨页勾选确定方法、装置、电子设备及存储介质
CN111459413A (zh) 提升ssd性能的方法、装置、计算机设备及存储介质
CN111143236A (zh) 一种内存映射实现队列及其数据读取和写入方法
CN110609660A (zh) Ssd阵列的主机端映射方法、装置、计算机设备及存储介质
CN113253939B (zh) 数据处理方法、装置、电子设备及存储介质
CN111597127B (zh) 混合slc缓存的方法、装置、计算机设备及存储介质
CN110287064B (zh) 一种磁盘数据的还原方法、装置及电子设备
US11243844B2 (en) Method for enhancing speed of incremental backup, bridge device, and storage system
CN109144399B (zh) 一种数据存储方法、装置及电子设备
CN111125715A (zh) 基于固态硬盘的tcg数据处理加速方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant