CN107491272B - 一种数据迁移的方法、装置、设备及存储介质 - Google Patents

一种数据迁移的方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN107491272B
CN107491272B CN201710909899.2A CN201710909899A CN107491272B CN 107491272 B CN107491272 B CN 107491272B CN 201710909899 A CN201710909899 A CN 201710909899A CN 107491272 B CN107491272 B CN 107491272B
Authority
CN
China
Prior art keywords
target data
data
threshold
preset
access type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710909899.2A
Other languages
English (en)
Other versions
CN107491272A (zh
Inventor
苏楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Wave Intelligent Technology Co Ltd
Original Assignee
Suzhou Wave Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Wave Intelligent Technology Co Ltd filed Critical Suzhou Wave Intelligent Technology Co Ltd
Priority to CN201710909899.2A priority Critical patent/CN107491272B/zh
Publication of CN107491272A publication Critical patent/CN107491272A/zh
Application granted granted Critical
Publication of CN107491272B publication Critical patent/CN107491272B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614—Improving the reliability of storage systems
    • G06F3/0616—Improving the reliability of storage systems in relation to life time, e.g. increasing Mean Time Between Failures [MTBF]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0656—Data buffering arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Read Only Memory (AREA)
  • Memory System Of A Hierarchy Structure (AREA)

Abstract

本发明公开了一种数据迁移的方法、装置、设备及存储介质，所述方法包括：判断目标数据的访问类型；若目标数据的访问类型为读写操作，则判断预测的目标数据的热度持续的时间是否小于预设的第一阈值；若是，则将目标数据添加至高速缓冲区；若否，则判断所述时间是否大于预设的第二阈值；若是，则将目标数据迁移至高速存储区，并添加至高速缓冲区；若否，则随机选择目标数据的存储位置。如此，保证了数据访问的速率，避免了数据在高速存储区的频繁擦写，均衡了存储系统内不同存储区的数据存储，同时提高了存储系统及高速存储区的使用寿命，节约了存储成本。相应地，本发明公开的一种数据迁移的装置、设备及存储介质，也同样具有上述技术效果。

Description

一种数据迁移的方法、装置、设备及存储介质
技术领域
本发明涉及数据存储技术领域，更具体地说，涉及一种数据迁移的方法、装置、设备及存储介质。
背景技术
随着移动互联网和大数据概念的迅速发展崛起，需要存储的数据量正以几何级数增长，数据量的爆炸式增长以及数据类型的日益细化，使得数据分级和冷热数据分治成为降低单位容量数据成本、提升数据存储效率和密度的有效方式。
目前，现有技术根据数据的访问需求，将读写频繁的数据，即热度高的数据存储至缓存或者高速存储区，将读写不频繁的数据，即热度低的数据存储至低速存储区。以此将具有不同访问需求的数据存储至不同存储区，提高了读写频繁的数据的访问速率，给用户提供了优质的服务。但是，此种实现方式只考虑到用户访问的需求，没有考虑到存储系统的使用寿命。由于数据的热度是随机变化的，所以数据需要根据其热度的变化在各个存储区重复迁移、存储，而存储系统中的高速存储区的擦写次数有限，频繁的顺序写，会降低高速存储区的使用寿命，进而影响存储系统的使用寿命，造成存储成本的增加和浪费。
因此，如何在保证数据访问速率的同时，减少数据在存储系统中的高速存储区的读写次数，从而提高其使用寿命，是本领域技术人员需要解决的问题。
发明内容
本发明的目的在于提供一种数据迁移的方法、装置、设备及存储介质，以实现在保证数据访问速率的同时，减少数据在存储系统中的高速存储区的读写次数，从而提高存储系统和高速存储区的使用寿命。
为实现上述目的，本发明实施例提供了如下技术方案：
一种数据迁移的方法，包括：
判断目标数据的访问类型；
若所述目标数据的访问类型为读写操作，则判断预测的所述目标数据的热度持续的时间是否小于预设的第一阈值；
若是，则将所述目标数据添加至高速缓冲区；
若否，则判断所述时间是否大于预设的第二阈值；若是，则将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区；若否，则随机选择所述目标数据的存储位置。
其中，所述第一阈值小于所述第二阈值。
其中，若所述目标数据的访问类型为读操作，则所述方法还包括：
判断预测的所述目标数据的热度持续的时间是否小于所述第一阈值；
若是，则将所述目标数据添加至所述高速缓冲区；
若否，则将所述目标数据迁移至所述高速存储区。
其中，所述判断目标数据的访问类型之前，还包括：
根据所述目标数据的访问信息计算所述目标数据的访问规律；
根据所述访问规律预测并获取所述目标数据的热度持续的时间。
其中，若所述目标数据的访问类型为写操作，则所述方法还包括：
将所述目标数据添加至所述高速缓冲区。
一种数据迁移的装置，包括：
第一判断模块，用于判断目标数据的访问类型；
第二判断模块，用于当所述目标数据的访问类型为读写操作时，判断预测的所述目标数据的热度持续的时间是否小于预设的第一阈值；
第一执行模块，用于当预测的所述目标数据的热度持续的时间小于预设的第一阈值时，将所述目标数据添加至高速缓冲区；
第三判断模块，用于当预测的所述目标数据的热度持续的时间不小于预设的第一阈值时，判断所述时间是否大于预设的第二阈值；
第二执行模块，用于当所述时间大于预设的第二阈值时，将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区；
第三执行模块，用于当所述时间大于预设的第一阈值且小于预设的第二阈值时，随机选择所述目标数据的存储位置。
其中，所述第一阈值小于所述第二阈值。
其中，还包括：
第四判断模块，用于当所述目标数据的访问类型为读操作时，判断预测的所述目标数据的热度持续的时间是否小于所述第一阈值；
第四执行模块，用于当所述目标数据的访问类型为读操作，且预测的所述目标数据的热度持续的时间小于所述第一阈值时，将所述目标数据添加至所述高速缓冲区；
第五执行模块，用于当所述目标数据的访问类型为读操作，且预测的所述目标数据的热度持续的时间不小于所述第一阈值时，将所述目标数据迁移至所述高速存储区。
其中，还包括：
计算模块，用于根据所述目标数据的访问信息计算所述目标数据的访问规律；
获取模块，用于根据所述访问规律预测并获取所述目标数据的热度持续的时间。
其中，还包括：
第六执行模块，用于当所述目标数据的访问类型为写操作时，将所述目标数据添加至所述高速缓冲区。
一种数据迁移的设备，包括：
存储器，用于存储数据迁移程序；
处理器，用于执行所述数据迁移程序时实现上述任意一项所述的数据迁移的方法的步骤。
一种计算机可读存储介质，所述计算机可读存储介质上存储有数据迁移程序，所述数据迁移程序被处理器执行时实现上述任意一项所述的数据迁移的方法的步骤。
通过以上方案可知，本发明实施例提供的一种数据迁移的方法，所述方法包括：判断目标数据的访问类型；若所述目标数据的访问类型为读写操作，则判断预测的所述目标数据的热度持续的时间是否小于预设的第一阈值；若是，则将所述目标数据添加至高速缓冲区；若否，则判断所述时间是否大于预设的第二阈值；若是，则将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区；若否，则随机选择所述目标数据的存储位置。其中，所述第一阈值小于所述第二阈值。
可见，上述方法通过判断目标数据的访问类型，确定所述目标数据的访问类型为读写操作，并确定预测的所述目标数据的热度持续的时间小于预设的第一阈值时，将热度持续时间短的目标数据添加至高速缓冲区，在高速缓冲区完成所述目标数据的读写操作；由于高速缓冲区可反复进行数据擦写，所以在高速缓冲区完成热度持续时间短的数据的读写操作。当预测的所述目标数据的热度持续的时间大于预设的第二阈值时，通过将热度持续时间长的目标数据迁移至高速存储区，并添加至所述高速缓冲区，既保证了数据访问的速率，又减少了数据由于热度变化在不同存储区之间的迁移，当预测的所述目标数据的热度持续的时间大于预设的第一阈值且小于预设的第二阈值时，随机选择所述目标数据的存储位置，可以均衡存储系统内不同存储区的数据存储。同时，通过上述方法能够避免在存储系统中的不同存储区内频繁擦写数据，也提高了高速存储区的使用寿命，进而提高了存储系统的使用寿命，节约了存储成本。
相应地，本发明实施例提供的一种数据迁移的装置、设备及存储介质，也同样具有上述技术效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种数据迁移的方法流程图；
图2为本发明实施例公开的另一种数据迁移的方法流程图；
图3为本发明实施例公开的一种数据迁移的装置示意图；
图4为本发明实施例公开的另一种数据迁移的装置示意图；
图5为本发明实施例公开的一种数据迁移的设备示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例公开了一种数据迁移的方法、装置、设备及存储介质，以实现在保证数据访问速率的同时，减少数据在存储系统中的高速存储区的读写次数，从而提高存储系统和高速存储区的使用寿命。
参见图1，本发明实施例提供的一种数据迁移的方法，包括：
S101、判断目标数据的访问类型；
具体的，对于存储系统中的数据，其访问类型有多种，如：读、写、删、查等。本实施例着重介绍对于目标数据既读又写的访问类型。具体而言，则是针对目标数据读和写的访问次数频繁，使得目标数据的热度增加。
S102、若所述目标数据的访问类型为读写操作，则判断预测的所述目标数据的热度持续的时间是否小于预设的第一阈值；
具体的，当目标数据的访问类型为读写操作时，根据以往目标数据的访问规律预测未来一段时间内目标数据的热度持续的时间。其中，所述访问规律可以依照节日、节气、社会热点舆论等，例如：若目标数据为关于国庆的数据，那么在十一国庆将至的时间，根据往年关于国庆的数据的热度持续的时间预测目标数据的热度持续的时间，即根据真实的访问规律，预测目标数据的访问规律。
具体的，所述第一阈值是根据实际情况预先设置的热度持续的时间较短的时间段，即为热度持续的时间的下限。具体而言，则是判断预测而得的目标数据的热度持续的时间是否小于热度持续的时间的下限，即判断预测而得的目标数据的热度持续的时间是否较短。
S103、若是，则将所述目标数据添加至高速缓冲区；
具体的，当所述目标数据的访问类型为读写操作，确定预测的所述目标数据的热度持续的时间小于预设的第一阈值，即目标数据的热度持续的时间很短，那么将所述目标数据添加至高速缓冲区，而目标数据仍然存储在原来的存储位置中，避免了数据热度变化后，在不同存储区域之间的迁移和擦写。
需要说明的是，所述高速缓冲区是设置在存储系统中的大容量闪存，可反复进行数据的擦写，不影响存储系统的使用寿命。
S104、若否，则判断所述时间是否大于预设的第二阈值；
具体的，当所述目标数据的访问类型为读写操作，确定预测的所述目标数据的热度持续的时间不小于预设的第一阈值时，则判断所述时间是否大于预设的第二阈值。其中，所述第二阈值是根据实际情况预先设置的热度持续的时间较长的时间段，即为热度持续的时间的上限。具体而言，则是判断预测而得的目标数据的热度持续的时间是否大于热度持续的时间的上限，即判断预测而得的目标数据的热度持续的时间是否较长。
S105、若是，则将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区；
具体的，当所述目标数据的访问类型为读写操作，确定预测的所述目标数据的热度持续的时间不小于预设的第一阈值时，并确定所述时间大于预设的第二阈值时，将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区。其中，所述高速存储区为存储系统中存储热度持续的时间较长的数据的存储位置，即SSD；当目标数据的热度持续的时间较长时，将目标数迁移至高速存储区存储，可以提高目标数据的访问速率，同时，将目标数据添加至高速缓冲区，避免了数据在高速存储区的反复擦写，不影响高速存储区的使用寿命，保护了存储系统中的存储设备，节约了存储成本。
S106、若否，则随机选择所述目标数据的存储位置。
具体的，当所述目标数据的访问类型为读写操作，确定预测的所述目标数据的热度持续的时间不小于预设的第一阈值时，并确定所述时间不大于预设的第二阈值时，随机选择所述目标数据的存储位置。其中，可以通过随机函数选择目标数据存储于高速存储区或者低速存储区；也可以根据存储系统不同存储区域的使用率灵活分配目标数据的存储位置，例如：当存储系统中高速存储区的使用率较高，此时，再将目标数据存储至高速存储区，必然影响高速存储区的数据的访问速率，所以，就可以将目标数据存储至低速存储区，由此，均衡了存储系统内不同存储区的数据存储。依据上述思想，技术人员可以灵活选择目标数据的存储位置，在此本发明实施例并不具体限定。
其中，所述第一阈值小于所述第二阈值。由于第一阈值是根据实际情况预先设置的热度持续的时间较短的时间段，为热度持续的时间的下限；第二阈值是根据实际情况预先设置的热度持续的时间较长的时间段，为热度持续的时间的上限，所以，第一阈值小于第二阈值。
可见，本实施例提供了一种数据迁移的方法，所述方法通过判断目标数据的访问类型，确定所述目标数据的访问类型为读写操作，并确定预测的所述目标数据的热度持续的时间小于预设的第一阈值时，将热度持续时间短的目标数据添加至高速缓冲区，在高速缓冲区完成所述目标数据的读写操作；由于高速缓冲区可反复进行数据擦写，所以在高速缓冲区完成热度持续时间短的数据的读写操作。当预测的所述目标数据的热度持续的时间大于预设的第二阈值时，通过将热度持续时间长的目标数据迁移至高速存储区，并添加至所述高速缓冲区，既保证了数据访问的速率，又减少了数据由于热度变化在不同存储区之间的迁移。当预测的所述目标数据的热度持续的时间大于预设的第一阈值且小于预设的第二阈值时，随机选择所述目标数据的存储位置，可以均衡存储系统内不同存储区的数据存储。采用本实施例提供的数据迁移方法能够避免在存储系统中的不同存储区内频繁擦写数据，也提高了高速存储区的使用寿命，进而提高了存储系统的使用寿命，节约了存储成本。
本发明实施例公开了另一种数据迁移的方法，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。
参见图2，本发明实施例提供的另一种数据迁移的方法，包括：
S201、判断目标数据的访问类型；
S202、若所述目标数据的访问类型为读操作，则判断预测的所述目标数据的热度持续的时间是否小于所述第一阈值；
在本实施例中，所述目标数据的访问类型为读操作，具体实现方式与上述实施例类似，故在此不再赘述。
S203、若是，则将所述目标数据添加至所述高速缓冲区；
具体的，当所述目标数据的访问类型为读操作，并确定预测的所述目标数据的热度持续的时间小于所述第一阈值时，将所述目标数据添加至所述高速缓冲区，而目标数据仍然存储在原来的存储位置中，由此，避免了数据热度变化后，在不同存储区域之间的迁移和擦写。
S204、若否，则将所述目标数据迁移至所述高速存储区。
具体的，当所述目标数据的访问类型为读操作，并确定预测的所述目标数据的热度持续的时间不小于所述第一阈值时，通过将所述目标数据迁移至所述高速存储区，提高了目标数据的访问速率，由于对目标数据进行只读操作，所以不用考虑目标数据在高速存储区的反复擦写问题，也不影响高速存储区的使用寿命，进而保护了存储系统中的存储设备，节约了存储成本。
可见，本实施例提供了一种数据迁移的方法，所述方法通过判断目标数据的访问类型，确定所述目标数据的访问类型为读操作，并确定预测的所述目标数据的热度持续的时间小于预设的第一阈值时，将热度持续时间短的目标数据添加至高速缓冲区，在高速缓冲区完成所述目标数据的读操作，提高了目标数据的访问速率；当预测的所述目标数据的热度持续的时间不小于预设的第一阈值时，通过将热度持续时间长的目标数据迁移至高速存储区，均衡了存储系统内不同存储区的数据存储，保证了数据访问的速率，同时，由于对目标数据进行只读操作，不影响存储系统中高速存储区的使用寿命，节约了存储成本。
基于上述任意实施例，需要说明的是，所述判断目标数据的访问类型之前，还包括：
根据所述目标数据的访问信息计算所述目标数据的访问规律；
根据所述访问规律预测并获取所述目标数据的热度持续的时间。
具体的，所述目标数据已存储至存储系统中，其访问信息会有记录，所以根据目标数据的以往的访问信息，可以计算其访问规律，确认其访问类型；根据计算而得的访问规律预测未来一段时间内目标数据的访问规律，进而预测其热度持续的时间，以便提前将目标数据存储至相应的存储位置，方便用户访问目标数据。
基于上述任意实施例，需要说明的是，若所述目标数据的访问类型为写操作，则所述方法还包括：将所述目标数据添加至所述高速缓冲区。
具体的，当所述目标数据的访问类型为写操作时，为了避免写操作给高速存储区带来的影响，便将所述目标数据添加至所述高速缓冲区，而目标数据仍然存储在原来的存储位置中。由此，既提高了目标数据的访问速率，又不影响高速存储区的使用寿命，均衡了存储系统内不同存储区的数据存储，也避免了数据在存储系统中的不同存储区之间的频繁迁移，节约了存储成本。
基于上述任意实施例，需要说明的是，对于存储系统中热度较低的数据，其仍然存储于低速存储区，当预测到某一数据的热度即将变化，便依据本发明任意实施例提供的数据迁移方法改变数据的存储位置，以应对即将到来的访问频繁的情况。
下面对本发明实施例提供的一种数据迁移的装置进行介绍，下文描述的一种数据迁移的装置与上文描述的一种数据迁移的方法可以相互参照。
参见图3，本发明实施例提供的一种数据迁移的装置，包括：
第一判断模块301，用于判断目标数据的访问类型；
第二判断模块302，用于当所述目标数据的访问类型为读写操作时，判断预测的所述目标数据的热度持续的时间是否小于预设的第一阈值；
第一执行模块303，用于当预测的所述目标数据的热度持续的时间小于预设的第一阈值时，将所述目标数据添加至高速缓冲区；
第三判断模块304，用于当预测的所述目标数据的热度持续的时间不小于预设的第一阈值时，判断所述时间是否大于预设的第二阈值；
第二执行模块305，用于当所述时间大于预设的第二阈值时，将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区；
第三执行模块306，用于当所述时间大于预设的第一阈值且小于预设的第二阈值时，随机选择所述目标数据的存储位置。
其中，所述第一阈值小于所述第二阈值。
参见图4，本发明实施例提供的另一种数据迁移的装置，包括：
第一判断模块401，用于判断目标数据的访问类型；
第四判断模块402，用于当所述目标数据的访问类型为读操作时，判断预测的所述目标数据的热度持续的时间是否小于所述第一阈值；
第四执行模块403，用于当所述目标数据的访问类型为读操作，且预测的所述目标数据的热度持续的时间小于所述第一阈值时，将所述目标数据添加至所述高速缓冲区；
第五执行模块404，用于当所述目标数据的访问类型为读操作，且预测的所述目标数据的热度持续的时间不小于所述第一阈值时，将所述目标数据迁移至所述高速存储区。
其中，还包括：
计算模块，用于根据所述目标数据的访问信息计算所述目标数据的访问规律；
获取模块，用于根据所述访问规律预测并获取所述目标数据的热度持续的时间。
其中，还包括：
第六执行模块，用于当所述目标数据的访问类型为写操作时，将所述目标数据添加至所述高速缓冲区。
下面对本发明实施例提供的一种数据迁移的设备及存储介质进行介绍，下文描述的一种数据迁移的设备及存储介质与上文描述的一种数据迁移的方法、装置可以相互参照。
参见图5，本发明实施例提供的一种数据迁移的设备，包括：
存储器501，用于存储数据迁移程序；
处理器502，用于执行所述数据迁移程序时实现上述任意实施例所述的数据迁移的方法的步骤。
一种计算机可读存储介质，所述计算机可读存储介质上存储有数据迁移程序，所述数据迁移程序被处理器执行时实现上述任意实施例所述的数据迁移的方法的步骤。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明，使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种数据迁移的方法，其特征在于，包括：
判断目标数据的访问类型；
若所述目标数据的访问类型为读写操作，则判断预测的所述目标数据的热度持续的时间是否小于预设的第一阈值；
若是，则将所述目标数据添加至高速缓冲区；
若否，则判断所述时间是否大于预设的第二阈值；若是，则将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区；若否，则随机选择所述目标数据的存储位置；所述存储位置为所述高速存储区或低速存储区；
其中，所述第一阈值小于所述第二阈值。
2.根据权利要求1所述的数据迁移的方法，其特征在于，若所述目标数据的访问类型为读操作，则所述方法还包括：
判断预测的所述目标数据的热度持续的时间是否小于所述第一阈值；
若是，则将所述目标数据添加至所述高速缓冲区；
若否，则将所述目标数据迁移至所述高速存储区。
3.根据权利要求1或2所述的数据迁移方法，其特征在于，所述判断目标数据的访问类型之前，还包括：
根据所述目标数据的访问信息计算所述目标数据的访问规律；
根据所述访问规律预测并获取所述目标数据的热度持续的时间。
4.根据权利要求1所述的数据迁移的方法，其特征在于，若所述目标数据的访问类型为写操作，则所述方法还包括：
将所述目标数据添加至所述高速缓冲区。
5.一种数据迁移的装置，其特征在于，包括：
第一判断模块，用于判断目标数据的访问类型；
第二判断模块，用于当所述目标数据的访问类型为读写操作时，判断预测的所述目标数据的热度持续的时间是否小于预设的第一阈值；
第一执行模块，用于当预测的所述目标数据的热度持续的时间小于预设的第一阈值时，将所述目标数据添加至高速缓冲区；
第三判断模块，用于当预测的所述目标数据的热度持续的时间不小于预设的第一阈值时，判断所述时间是否大于预设的第二阈值；
第二执行模块，用于当所述时间大于预设的第二阈值时，将所述目标数据迁移至高速存储区，并添加至所述高速缓冲区；
第三执行模块，用于当所述时间大于预设的第一阈值且小于预设的第二阈值时，随机选择所述目标数据的存储位置；所述存储位置为所述高速存储区或低速存储区；
其中，所述第一阈值小于所述第二阈值。
6.根据权利要求5所述的数据迁移的装置，其特征在于，还包括：
第四判断模块，用于当所述目标数据的访问类型为读操作时，判断预测的所述目标数据的热度持续的时间是否小于所述第一阈值；
第四执行模块，用于当所述目标数据的访问类型为读操作，且预测的所述目标数据的热度持续的时间小于所述第一阈值时，将所述目标数据添加至所述高速缓冲区；
第五执行模块，用于当所述目标数据的访问类型为读操作，且预测的所述目标数据的热度持续的时间不小于所述第一阈值时，将所述目标数据迁移至所述高速存储区。
7.根据权利要求5或6所述的数据迁移装置，其特征在于，还包括：
计算模块，用于根据所述目标数据的访问信息计算所述目标数据的访问规律；
获取模块，用于根据所述访问规律预测并获取所述目标数据的热度持续的时间。
8.根据权利要求5所述的数据迁移的装置，其特征在于，还包括：
第六执行模块，用于当所述目标数据的访问类型为写操作时，将所述目标数据添加至所述高速缓冲区。
9.一种数据迁移的设备，其特征在于，包括：
存储器，用于存储数据迁移程序；
处理器，用于执行所述数据迁移程序时实现如权利要求1-4任意一项所述的数据迁移的方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有数据迁移程序，所述数据迁移程序被处理器执行时实现如权利要求1-4任意一项所述的数据迁移的方法的步骤。
CN201710909899.2A 2017-09-29 2017-09-29 一种数据迁移的方法、装置、设备及存储介质 Active CN107491272B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710909899.2A CN107491272B (zh) 2017-09-29 2017-09-29 一种数据迁移的方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710909899.2A CN107491272B (zh) 2017-09-29 2017-09-29 一种数据迁移的方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN107491272A CN107491272A (zh) 2017-12-19
CN107491272B true CN107491272B (zh) 2020-03-06

Family

ID=60653906

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710909899.2A Active CN107491272B (zh) 2017-09-29 2017-09-29 一种数据迁移的方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN107491272B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111198874B (zh) * 2018-11-16 2023-07-04 中国电信股份有限公司 数据处理方法、装置、系统和计算机可读存储介质
CN109558337B (zh) * 2018-11-30 2023-09-19 北京同有飞骥科技股份有限公司 高速缓存的动态访问方法、装置及存储介质
CN112015102A (zh) * 2020-08-14 2020-12-01 深圳市欧瑞博科技股份有限公司 智能控制开关的升级方法、装置、智能控制开关以及存储介质
CN113867645B (zh) * 2021-09-30 2023-08-18 苏州浪潮智能科技有限公司 数据迁移和数据读写方法、装置、计算机设备及存储介质
CN115629715B (zh) * 2022-12-06 2023-05-05 江苏华存电子科技有限公司 一种提高闪存中块类型判断准确率的方法及系统
CN117270794B (zh) * 2023-11-22 2024-02-23 成都大成均图科技有限公司 一种基于Redis的数据存储方法、介质及设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103616944A (zh) * 2013-10-18 2014-03-05 杭州电子科技大学 云存储系统中基于预判性绿色数据分类策略的降耗方法
CN106547476A (zh) * 2015-09-22 2017-03-29 伊姆西公司 用于数据存储系统的方法和装置
CN106681668A (zh) * 2017-01-12 2017-05-17 郑州云海信息技术有限公司 一种基于固态盘缓存的混合式存储系统及存储方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9318154B2 (en) * 2012-09-20 2016-04-19 Dell Products L.P. Method and system for preventing unreliable data operations at cold temperatures

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103616944A (zh) * 2013-10-18 2014-03-05 杭州电子科技大学 云存储系统中基于预判性绿色数据分类策略的降耗方法
CN106547476A (zh) * 2015-09-22 2017-03-29 伊姆西公司 用于数据存储系统的方法和装置
CN106681668A (zh) * 2017-01-12 2017-05-17 郑州云海信息技术有限公司 一种基于固态盘缓存的混合式存储系统及存储方法

Also Published As

Publication number Publication date
CN107491272A (zh) 2017-12-19

Similar Documents

Publication Publication Date Title
CN107491272B (zh) 一种数据迁移的方法、装置、设备及存储介质
CN103425600B (zh) 一种固态盘闪存转换层中的地址映射方法
KR101894625B1 (ko) 데이터 저장 시스템들에 대한 우선순위 기반 가비지 수집
CN102622309B (zh) 数据安全擦除方法及装置
US9846641B2 (en) Variability aware wear leveling
CN108776614B (zh) 存储块的回收方法和装置
CN109753443B (zh) 一种数据处理方法、装置及电子设备
CN110673789B (zh) 固态硬盘的元数据存储管理方法、装置、设备及存储介质
CN104572491A (zh) 一种基于固态硬盘的读缓存管理方法及装置
CN103092766A (zh) 一种用于nand flash的均衡损耗实现方法
CN108897492B (zh) 一种数据写入方法和装置
CN108874309B (zh) 一种管理固态硬盘中物理块的方法和装置
TWI608350B (zh) 儲存裝置及其控制單元、可用於儲存裝置的資料搬移方 法
CN106445832A (zh) 闪存存储系统的地址映射方法及装置
CN108073359B (zh) 数据储存装置的操作方法
CN115421651A (zh) 固态硬盘的数据处理方法、固态硬盘、电子设备及介质
CN102135943B (zh) 闪存数据的存储、访问方法及装置
CN104156173A (zh) 一种实现磁盘碎片整理的方法及装置
CN114968839A (zh) 硬盘垃圾回收方法、装置、设备及计算机可读存储介质
CN115129262A (zh) 一种固态硬盘垃圾回收方法、装置、设备及介质
US10083117B2 (en) Filtering write request sequences
CN103677893B (zh) 开机的映像文件的大小缩减方法及运算装置
CN102981972A (zh) 一种相变存储器的损耗均衡方法
US20130138910A1 (en) Information Processing Apparatus and Write Control Method
KR101026634B1 (ko) 하이브리드 플래시 메모리의 데이터 저장 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20200110

Address after: 215100 No. 1 Guanpu Road, Guoxiang Street, Wuzhong Economic Development Zone, Suzhou City, Jiangsu Province

Applicant after: Suzhou Wave Intelligent Technology Co., Ltd.

Address before: 450018 Henan province Zheng Dong New District of Zhengzhou City Xinyi Road No. 278 16 floor room 1601

Applicant before: Zhengzhou Yunhai Information Technology Co. Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant