CN112269758A - 一种基于文件分级的文件迁移方法及相关装置 - Google Patents
一种基于文件分级的文件迁移方法及相关装置 Download PDFInfo
- Publication number
- CN112269758A CN112269758A CN202011079074.0A CN202011079074A CN112269758A CN 112269758 A CN112269758 A CN 112269758A CN 202011079074 A CN202011079074 A CN 202011079074A CN 112269758 A CN112269758 A CN 112269758A
- Authority
- CN
- China
- Prior art keywords
- data pool
- file
- migrated
- migration
- level data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000005012 migration Effects 0.000 title claims abstract description 99
- 238000013508 migration Methods 0.000 title claims abstract description 99
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000004590 computer program Methods 0.000 claims description 11
- 230000004044 response Effects 0.000 claims description 8
- 230000008569 process Effects 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008447 perception Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/119—Details of migration of file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/13—File access structures, e.g. distributed indices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/182—Distributed file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种基于文件分级的文件迁移方法，包括查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。该方法能够避免快速池被写穿，提升存储系统整体的性能。本申请还公开了一种基于文件分级的文件迁移装置、设备及计算机可读存储介质，均具有上述技术效果。
Description
技术领域
本申请涉及分布式存储技术领域，特别涉及一种基于文件分级的文件迁移方法；还涉及一种基于文件分级的文件迁移装置、设备以及计算机可读存储介质。
背景技术
分布式存储系统是多个文件存储节点服务器构成的集群，文件切块存储，以对象为基本单位，支持一份数据存储在多个节点上，每个节点通过节点间通信都可以获取到完整的数据。当节点出现宕机时根据配置的策略可以进行完整数据的恢复，具有高可用、高性能、高扩展性等特点。每个节点都提供元数据服务器，用于元数据的各种访问操作，均衡业务压力。一个分布式存储系统会配置快速池如固态硬盘与慢速池如机械硬盘，且为了实现更快的读写性能，一般数据读写时使用快速池，并在没有数据访问时使用文件分级功能将访问频率低的数据由快速池迁移至慢速池。快速池价格昂贵，因此快速池的空间比较小。由于数据优先写入快速池，因此当快速池水位很高，即快速池中写入的数据很多时，如果不能及时将快速池中的数据迁移出去，那么新创建的数据就无法写入快速池，从而产生快速池被写穿的风险，影响存储系统整体的性能。
有鉴于此，如何避免快速池被写穿，提升存储系统整体的性能已成为本领域技术人员亟待解决的技术问题。
发明内容
本申请的目的是提供一种基于文件分级的文件迁移方法，能够避免快速池被写穿，提升存储系统整体的性能。本申请的另一个目的是提供一种基于文件分级的文件迁移装置、设备以及计算机可读存储介质，均具有上述技术效果。
为解决上述技术问题，本申请提供了一种基于文件分级的文件迁移方法，包括：
查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；
当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；
当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
可选的，查询是否存在高水位数据池包括：
读取各数据池当前存储的数据量；
判断所述数据池的当前存储的数据量是否达到所述预设百分比；
若达到，则所述数据池为所述高水位数据池。
可选的，迁移所述待迁移文件的过程为：
将所述待迁移文件发送给迁移客户端，以使所述迁移客户端将所述待迁移文件的数据复制到目标数据池；
当接收到所述迁移客户端在将所述待迁移文件的数据复制到所述目标数据池后发送的数据池更新请求后，更新所述待迁移文件的原数据池的属性；
完成更新所述待迁移文件的原数据池的属性后，向所述迁移客户端发送应答信息，以使所述迁移客户端将所述原数据池中的所述待迁移文件的数据删除。
可选的，还包括：
配置所述预设百分比。
可选的，还包括：
从所述索引表中将已完成迁移的待迁移文件删除。
为解决上述技术问题，本申请还提供了一种基于文件分级的文件迁移装置，包括：
查询模块，用于查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；
第一迁移模块，用于当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；
第二迁移模块，用于当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
可选的，所述查询模块包括：
读取单元，用于读取各数据池当前存储的数据量；
判断单元，用于判断所述数据池的当前存储的数据量是否达到所述预设百分比；
确定单元，用于若所述数据池的当前存储的数据量达到所述预设百分比，则确定所述数据池为所述高水位数据池。
可选的，所述第一迁移模块与所述第二迁移模块均包括：
第一发送单元，用于将所述待迁移文件发送给迁移客户端，以使所述迁移客户端将所述待迁移文件的数据复制到目标数据池；
更新单元，用于当接收到所述迁移客户端在将所述待迁移文件的数据复制到所述目标数据池后发送的数据池更新请求后，更新所述待迁移文件的原数据池的属性；
第二发送单元，用于完成更新所述待迁移文件的原数据池的属性后，向所述迁移客户端发送应答信息，以使所述迁移客户端将所述原数据池中的所述待迁移文件的数据删除。
为解决上述技术问题，本申请还提供了一种基于文件分级的文件迁移设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上所述的基于文件分级的文件迁移方法的步骤。
为解决上述技术问题，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述的基于文件分级的文件迁移方法的步骤。
本申请所提供的基于文件分级的文件迁移方法，包括：查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。可见，本申请所提供的基于文件分级的文件迁移方法，在存在高水位数据池的情况下，优先迁移索引表中位于高水位数据池的待迁移文件，由此能够保障在快速池的数据量较多时，能够将快速池的数据及时迁移出去，避免快速池被写穿，可以有效提升存储系统的整体性能。
本申请所提供的基于文件分级的文件迁移装置、设备以及计算机可读存储介质均具有上述技术效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案，下面将对现有技术和实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例所提供的一种基于文件分级的文件迁移方法的流程示意图；
图2为本申请实施例所提供的一种基于文件分级的文件迁移装置的示意图；
图3为本申请实施例所提供的一种基于文件分级的文件迁移设备的示意图。
具体实施方式
本申请的核心是提供一种基于文件分级的文件迁移方法，能够避免快速池被写穿，提升存储系统整体的性能。本申请的另一个目的是提供一种基于文件分级的文件迁移装置、设备以及计算机可读存储介质，均具有上述技术效果。
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
请参考图1，图1为本申请实施例所提供的一种基于文件分级的文件迁移方法的流程示意图，参考图1所示，该方法包括：
S101：查询是否存在高水位数据池；高水位数据池为数据量达到预设百分比的数据池；
具体的，本申请提供了一种基于文件分级的文件迁移方法。文件分级特性要求实现数据在用户无感知的情况下在多种存储介质之间流转即迁移。数据迁移需要支持用户多种策略，对于符合迁移要求的数据，在不影响正常业务的条件下，进行无感知的文件数据搬迁处理，能够满足用户对性能分层、数据冷热分层的存储方案需要。
本申请旨在在存在高水位数据池的情况下，优先迁移索引表中位于高水位数据池的待迁移文件，因此在迁移文件前首先查询是否存在高水位数据池，即是否存在数据量达到预设百分比的数据池，以针对存在高水位数据池与不存在高水位数据池采取不同的迁移方案。
其中，上述查询是否存在高水位数据池的方式可以为：读取各数据池当前存储的数据量；并在已配置预设百分比的基础上，判断数据池当前存储的数据量是否达到预设百分比；若达到，则数据池为高水位数据池。相反，若数据池房当前存储的数据量未达到预设百分比，则数据池不是高水位数据池。
另外，对于上述预设百分比的具体数据本申请不做限定，可以根据实际需要进行差异性设置，例如设置为80％，若数据池的数据量达到80％，则该数据池为高水位数据池。
S102：当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；
具体的，所谓索引表是指存储在磁盘上的待迁移文件列表，为二级结构。文件在业务访问过程中匹配迁移策略，匹配上迁移策略后表示待迁移，并写入索引表中。在不存在高水位数据池的情况下，元数据服务器的分级扫描线程从磁盘加载扫描索引表，依次将索引表中的各待迁移文件迁移出去。在此情况下，元数据服务器在一次扫描周期扫描索引表一次。
S103：当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
具体的，在存在高水位数据池的情况下，元数据服务器分级扫描索引表，针对索引表中的每一个待迁移文件，在迁移前，首先判断待迁移文件是否位于高水位数据池，若位于高水位数据池，则将待迁移文件迁移出去，若不位于高水位数据池，则暂时不迁移此待迁移文件，继续判断下一个待迁移文件是否位于高水位数据池，如此当发现待迁移文件位于高水位数据池时，便将位于高水位数据池的待迁移文件迁移出去。当将位于高水位数据池的待迁移文件迁移出去后，高水位数据池存储的数据量减少，可能在某一次迁移完成后，高水位数据池存储的数据量会低于预设百分比，高水位数据池会变为非高水位数据池。故每次在将位于高水位数据池的待迁移文件迁移出去后，首先判断迁移后是否仍存在高水位数据，并当仍存在高水位数据池时，继续迁移下一个位于高水位数据池的待迁移数据。直到不存在高水位数据池后，元数据服务器再次扫描索引表，依次将索引表中剩余的待迁移文件迁移出去。进一步，将待迁移文件迁移出去后，从索引表中将已迁移完成的待迁移文件从索引表中删除。
以索引表中包括10个待迁移文件为例：
元数据服务器扫描索引表，判断出第一个待迁移文件位于高水位数据池，则将第一个待迁移文件迁移出去，在将第一个待迁移文件迁移出去后，判断是否仍存在高水位数据池，若高水位数据池仍存在，则元数据服务器继续判断第二个待迁移文件是否位于高水位数据池，由于第二个待迁移文件不在高水位数据池，所以暂时不迁移第二个待迁移文件，如此当判断出第五个待迁移文件位于高水位数据池时，将第五个待迁移文件迁移出去，并在将第五个待迁移文件迁移出去后，判断是否仍存在高水位数据池，若在将第五个待迁移文件迁移出去后不存在高水位数据池，则元数据服务器再次扫描索引表，将索引表中之前未迁移出去的第二个待迁移文件、第三个待迁移文件、第四个待迁移文件以及第六个迁移文件至第十个待迁移文件依次迁移出去。
其中，元数据服务器迁移待迁移文件的过程为：将所述待迁移文件发送给迁移客户端，以使所述迁移客户端将所述待迁移文件的数据复制到目标数据池；当接收到所述迁移客户端在将所述待迁移文件的数据复制到所述目标数据池后发送的数据池更新请求后，更新所述待迁移文件的原数据池的属性；完成更新所述待迁移文件的原数据池的属性后，向所述迁移客户端发送应答信息，以使所述迁移客户端将所述原数据池中的所述待迁移文件的数据删除。
具体而言，元数据服务器将待迁移文件发送给迁移客户端，迁移客户端收到后将待迁移文件的数据由原数据池复制到目标数据池，并在完成复制后，向元数据服务器发送数据池更新请求，进而元数据服务器更新数据池属性，并在更新完成后，向迁移客户端发送应答信息，最后迁移客户端在接收到应答信息后将原数据池中的待迁移文件的数据删除，由此完成文件迁移。
综上所述，本申请所提供的基于文件分级的文件迁移方法，包括：查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。该文件迁移方法，在存在高水位数据池的情况下，优先迁移索引表中位于高水位数据池的待迁移文件，由此能够保障在快速池的数据量较多时，能够将快速池的数据及时迁移出去，避免快速池被写穿，可以有效提升存储系统的整体性能。
本申请还提供了一种基于文件分级的文件迁移装置，下文描述的该装置可以与上文描述的方法相互对应参照。请参考图2，图2为本申请实施例所提供的一种基于文件分级的文件迁移装置的示意图，结合图2所示，该装置包括：
查询模块10，用于查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；
第一迁移模块20，用于当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；
第二迁移模块30，用于当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
在上述实施例的基础上，可选的，所述查询模块10包括：
读取单元，用于读取各数据池当前存储的数据量；
判断单元，用于判断所述数据池的当前存储的数据量是否达到所述预设百分比；
确定单元，用于若所述数据池的当前存储的数据量达到所述预设百分比，则确定所述数据池为所述高水位数据池。
在上述实施例的基础上，可选的，所述第一迁移模块20与所述第二迁移模块30均包括：
第一发送单元，用于将所述待迁移文件发送给迁移客户端，以使所述迁移客户端将所述待迁移文件的数据复制到目标数据池；
更新单元，用于当接收到所述迁移客户端在将所述待迁移文件的数据复制到所述目标数据池后发送的数据池更新请求后，更新所述待迁移文件的原数据池的属性；
第二发送单元，用于完成更新所述待迁移文件的原数据池的属性后，向所述迁移客户端发送应答信息，以使所述迁移客户端将所述原数据池中的所述待迁移文件的数据删除。
在上述实施例的基础上，可选的，还包括：
配置模块，用于配置所述预设百分比。
在上述实施例的基础上，可选的，还包括：
删除模块，用于从所述索引表中将已完成迁移的待迁移文件删除。
本申请还提供了一种基于文件分级的文件迁移设备，参考图3所示，该设备包括存储器1和处理器2。
存储器1，用于存储计算机程序；
处理器2，用于执行计算机程序实现如下的步骤：
查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
对于本申请所提供的设备的介绍请参照上述方法实施例，本申请在此不做赘述。
本申请还提供了一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时可实现如下的步骤：
查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
该计算机可读存储介质可以包括：U盘、移动硬盘、只读存储器(Read-OnlyMemory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
对于本申请所提供的计算机可读存储介质的介绍请参照上述方法实施例，本申请在此不做赘述。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置、设备以及计算机可读存储介质而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本申请所提供的基于文件分级的文件迁移方法、装置、设备以及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围。
Claims (10)
1.一种基于文件分级的文件迁移方法，其特征在于，包括：
查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；
当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；
当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
2.根据权利要求1所述的基于文件分级的文件迁移方法，其特征在于，查询是否存在高水位数据池包括：
读取各数据池当前存储的数据量；
判断所述数据池的当前存储的数据量是否达到所述预设百分比；
若达到，则所述数据池为所述高水位数据池。
3.根据权利要求2所述的基于文件分级的文件迁移方法，其特征在于，迁移所述待迁移文件的过程为：
将所述待迁移文件发送给迁移客户端，以使所述迁移客户端将所述待迁移文件的数据复制到目标数据池；
当接收到所述迁移客户端在将所述待迁移文件的数据复制到所述目标数据池后发送的数据池更新请求后，更新所述待迁移文件的原数据池的属性；
完成更新所述待迁移文件的原数据池的属性后，向所述迁移客户端发送应答信息，以使所述迁移客户端将所述原数据池中的所述待迁移文件的数据删除。
4.根据权利要求3所述的基于文件分级的文件迁移方法，其特征在于，还包括：
配置所述预设百分比。
5.根据权利要求4所述的基于文件分级的文件迁移方法，其特征在于，还包括：
从所述索引表中将已完成迁移的待迁移文件删除。
6.一种基于文件分级的文件迁移装置，其特征在于，包括：
查询模块，用于查询是否存在高水位数据池；所述高水位数据池为数据量达到预设百分比的数据池；
第一迁移模块，用于当不存在高水位数据池时，依次迁移索引表中的各待迁移文件；
第二迁移模块，用于当存在高水位数据池时，逐一迁移所述索引表中位于所述高水位数据池的所述待迁移文件，且在每次将位于所述高水位数据池的所述待迁移文件迁移后，查询是否仍存在高水位数据池，直到不存在高水位数据池时再依次迁移所述索引表中剩余的所述待迁移文件。
7.根据权利要求6所述的基于文件分级的文件迁移装置，其特征在于，所述查询模块包括：
读取单元，用于读取各数据池当前存储的数据量；
判断单元，用于判断所述数据池的当前存储的数据量是否达到所述预设百分比；
确定单元，用于若所述数据池的当前存储的数据量达到所述预设百分比，则确定所述数据池为所述高水位数据池。
8.根据权利要求7所述的基于文件分级的文件迁移装置，其特征在于，所述第一迁移模块与所述第二迁移模块均包括：
第一发送单元，用于将所述待迁移文件发送给迁移客户端，以使所述迁移客户端将所述待迁移文件的数据复制到目标数据池；
更新单元，用于当接收到所述迁移客户端在将所述待迁移文件的数据复制到所述目标数据池后发送的数据池更新请求后，更新所述待迁移文件的原数据池的属性；
第二发送单元，用于完成更新所述待迁移文件的原数据池的属性后，向所述迁移客户端发送应答信息，以使所述迁移客户端将所述原数据池中的所述待迁移文件的数据删除。
9.一种基于文件分级的文件迁移设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至5任一项所述的基于文件分级的文件迁移方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述的基于文件分级的文件迁移方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011079074.0A CN112269758B (zh) | 2020-10-10 | 2020-10-10 | 一种基于文件分级的文件迁移方法及相关装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011079074.0A CN112269758B (zh) | 2020-10-10 | 2020-10-10 | 一种基于文件分级的文件迁移方法及相关装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112269758A true CN112269758A (zh) | 2021-01-26 |
| CN112269758B CN112269758B (zh) | 2022-07-22 |
Family
ID=74338825
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011079074.0A Active CN112269758B (zh) | 2020-10-10 | 2020-10-10 | 一种基于文件分级的文件迁移方法及相关装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112269758B (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103077082A (zh) * | 2013-01-08 | 2013-05-01 | 中国科学院深圳先进技术研究院 | 一种数据中心负载分配及虚拟机迁移节能方法及系统 |
| CN103106047A (zh) * | 2013-01-29 | 2013-05-15 | 浪潮(北京)电子信息产业有限公司 | 一种基于对象的存储系统及其存储方法 |
| CN105227645A (zh) * | 2015-09-15 | 2016-01-06 | 齐鲁工业大学 | 一种云数据迁移方法 |
| CN106502576A (zh) * | 2015-09-06 | 2017-03-15 | 中兴通讯股份有限公司 | 迁移策略调整方法、容量变更建议方法及装置 |
-
2020
- 2020-10-10 CN CN202011079074.0A patent/CN112269758B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103077082A (zh) * | 2013-01-08 | 2013-05-01 | 中国科学院深圳先进技术研究院 | 一种数据中心负载分配及虚拟机迁移节能方法及系统 |
| CN103106047A (zh) * | 2013-01-29 | 2013-05-15 | 浪潮(北京)电子信息产业有限公司 | 一种基于对象的存储系统及其存储方法 |
| CN106502576A (zh) * | 2015-09-06 | 2017-03-15 | 中兴通讯股份有限公司 | 迁移策略调整方法、容量变更建议方法及装置 |
| CN105227645A (zh) * | 2015-09-15 | 2016-01-06 | 齐鲁工业大学 | 一种云数据迁移方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112269758B (zh) | 2022-07-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110222030B (zh) | 数据库动态扩容的方法、存储介质 | |
| CN103577483B (zh) | 数据存储方法和系统以及数据访问的方法和系统 | |
| CN110888837B (zh) | 对象存储小文件归并方法及装置 | |
| CN111475506B (zh) | 数据存储、查询的方法、装置、系统、设备、存储介质 | |
| CN105704218B (zh) | 云计算平台中数据存储与管理方法 | |
| CN111475483A (zh) | 数据库迁移方法、装置及计算设备 | |
| CN110633378A (zh) | 一种支持超大规模关系网络的图数据库构建方法 | |
| US11151081B1 (en) | Data tiering service with cold tier indexing | |
| CN110399096B (zh) | 分布式文件系统元数据缓存重删的方法、装置以及设备 | |
| CN107918527B (zh) | 存储空间分配方法及装置以及文件存储方法及装置 | |
| CN111444157A (zh) | 分布式文件系统及数据访问方法 | |
| CN113392089B (zh) | 一种数据库索引优化方法及可读存储介质 | |
| US11429311B1 (en) | Method and system for managing requests in a distributed system | |
| JP4536034B2 (ja) | 文書管理システム、計算機、文書管理方法、及びプログラム | |
| CN112000971B (zh) | 一种文件权限记录方法、系统及相关装置 | |
| CN112269758B (zh) | 一种基于文件分级的文件迁移方法及相关装置 | |
| US20220365905A1 (en) | Metadata processing method and apparatus, and a computer-readable storage medium | |
| CN102915324A (zh) | 数据存储与检索装置和数据存储与检索方法 | |
| CN114415977A (zh) | 访问存储池的方法以及分布式存储系统 | |
| CN114297196A (zh) | 元数据存储方法、装置、电子设备及存储介质 | |
| CN113626382A (zh) | 分布式文件系统中聚合对象的索引方法、系统及相关装置 | |
| CN109299067B (zh) | 页面访问方法、装置和存储介质 | |
| CN108241640B (zh) | 一种分布式的文件存储方法 | |
| CN108123924B (zh) | 一种资源管理方法及系统 | |
| CN111565211A (zh) | 一种cdn配置分发网络系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |