CN110007872A

CN110007872A - 一种存储系统的文件移动方法、系统及装置

Info

Publication number: CN110007872A
Application number: CN201910295183.7A
Authority: CN
Inventors: 杨朔
Original assignee: Suzhou Wave Intelligent Technology Co Ltd
Current assignee: Suzhou Wave Intelligent Technology Co Ltd
Priority date: 2019-04-12
Filing date: 2019-04-12
Publication date: 2019-07-12

Abstract

本申请公开了一种存储系统的文件移动方法、系统和装置，包括：判断源目录或目标目录是否具有配额属性；如果是，则统计源目录所属的源客户端中待移动文件的文件数目；通过源客户端，向元数据服务器发起对应文件数目的空间预申请；如果空间预申请反馈成功，则执行文件移动步骤；文件移动步骤具体包括：通过源客户端，向元数据服务器发起对应待移动文件的文件移动请求；利用元数据服务器执行文件移动请求，以将待移动文件移动至目标目录的目标客户端。本发明中通过元数据服务器发起空间预申请，减少客户端与元数据服务器之间的交互频率，如果反馈成功，直接进行文件移动，不需要内核的遍历拷贝和原文件删除操作，提高了文件移动效率。

Description

一种存储系统的文件移动方法、系统及装置

技术领域

本发明涉及存储系统领域，特别涉及一种存储系统的文件移动方法、系统及装置。

背景技术

存储系统中，如果客户端在同一目录下传入、创建的文件过大或文件个数过多将会影响其他用户的创建和移动操作，给存储系统稳定性和可维护性带来严峻的挑战。为了防止这类事件的发生，需要对特定的目录添加配额功能，也即设置目录文件个数配额，以此来限制该目录所能容纳的最大文件量。跨配额目录间的文件移动是常见的客户端操作之一，利用常规方法在不同的配额目录间进行文件移动操作时，会被认为是跨设备操作，返回标准错误码-EXDEV，然后由内核将文件遍历拷贝到目标目录，最后删除源目录包含的文件，这对文件的移动效率造成很大的负面影响。

因此，如何提供一种解决上述技术问题的方案是目前本领域技术人员需要解决的问题。

发明内容

有鉴于此，本发明的目的在于提供一种存储系统的文件移动方法、系统及装置。其具体方案如下：

一种存储系统的文件移动方法，包括：

如果是，则统计所述源目录所属的源客户端中待移动文件的文件数目；

通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请；

如果所述空间预申请反馈成功，则执行文件移动步骤；

所述文件移动步骤具体包括：

通过所述源客户端，向所述元数据服务器发起对应所述待移动文件的文件移动请求；

利用所述元数据服务器执行所述文件移动请求，以将所述待移动文件移动至所述目标目录所属的目标客户端。

优选的，所述文件移动方法还包括：

根据所述文件数目，更新所述源目录和所述目标目录的文件个数配额值。

优选的，所述统计所述源目录所属的源客户端中待移动文件的文件数目的过程，具体包括：

通过递归遍历，统计所述源目录所属的源客户端中待移动文件的文件数目。

优选的，所述统计所述源目录所属的源客户端中待移动文件的文件数目之后，还包括：

判断所述文件数目是否小于或等于第一预设值；

如果是，则直接执行所述文件移动步骤；

如果否，则执行通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请的步骤。

优选的，所述文件移动方法还包括：

更新所述元数据服务器中的文件个数配额值。

优选的，所述更新所述元数据服务器中的文件个数配额值的过程，具体包括：

当所述源客户端或所述目标客户端累计的所述文件数目超过第二预设值，更新所述元数据服务器中的文件个数配额值。

相应的，本发明公开了一种存储系统的文件移动系统，包括：

判断模块，用于判断源目录或目标目录是否具有配额属性；如果是，则触发统计模块；

所述统计模块，用于统计所述源目录所属的源客户端中待移动文件的文件数目；

预申请模块，用于通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请；如果所述空间预申请反馈成功，则触发执行模块；

所述执行模块，用于执行文件移动步骤；

所述文件移动步骤具体包括：

优选的，所述文件移动系统还包括：

信息更新模块，用于根据所述文件数目，更新所述源目录和所述目标目录的文件个数配额值。

优选的，所述信息更新模块还用于：

更新所述元数据服务器中的文件个数配额值。

相应的，本发明还公开了一种存储系统的文件移动装置，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如上文任一项所述存储系统的文件移动方法的步骤。

本发明公开了一种存储系统的文件移动方法，包括：判断源目录或目标目录是否具有配额属性；如果是，则统计所述源目录所属的源客户端中待移动文件的文件数目；通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请；如果所述空间预申请反馈成功，则执行文件移动步骤；所述文件移动步骤具体包括：通过所述源客户端，向所述元数据服务器发起对应所述待移动文件的文件移动请求；利用所述元数据服务器执行所述文件移动请求，以将所述待移动文件移动至所述目标目录所属的目标客户端。本发明中对文件进行移动时并没有经过内核，而是通过元数据服务器发起空间预申请，减少客户端与元数据服务器之间的交互频率，如果反馈成功，直接进行文件移动，不需要内核的遍历拷贝和原文件删除操作，提高了文件移动效率。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例中一种存储系统的文件移动方法的步骤流程图；

图2为本发明实施例中一种存储系统的文件移动系统的结构分布图；

图3为本发明实施例中一种存储系统的文件移动装置的结构分布图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

利用常规方法在不同的配额目录间进行文件移动操作时，会被认为是跨设备操作，返回标准错误码-EXDEV，然后由内核将文件遍历拷贝到目标目录，最后删除源目录包含的文件，这对文件的移动效率造成很大的负面影响。本发明中对文件进行移动时并没有经过内核，而是通过元数据服务器发起空间预申请，减少客户端与元数据服务器之间的交互频率，如果反馈成功，直接进行文件移动，不需要内核的遍历拷贝和原文件删除操作，提高了文件移动效率。

本发明实施例公开了一种存储系统的文件移动方法，参见图1所示，包括：

S1：判断源目录或目标目录是否具有配额属性；

可以理解的是，只要源目录或目标目录中有一个具有配额属性，就需要执行步骤S2，如果源目录和目标目录均不具有配额属性，那么直接执行常规的文件移动操作即可。

S2：如果是，则统计所述源目录所属的源客户端中待移动文件的文件数目；

S3：通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请；

此时，元数据服务器会将空间预申请对应的文件数目、个数空间从对应的目标目录中减去，并且将空间预申请发送给目标目录对应的目标客户端。

实际上，源客户端向元数据服务器发送的空间预申请完成了源客户端和元数据服务器之间的信息交互，从而不需要在每一个文件移动时都向元数据服务器发送移动请求，降低了源客户端和元数据服务器的交互频率。

S4：如果所述空间预申请反馈成功，则执行文件移动步骤；

所述文件移动步骤具体包括：

S41：通过所述源客户端，向所述元数据服务器发起对应所述待移动文件的文件移动请求；

S42：利用所述元数据服务器执行所述文件移动请求，以将所述待移动文件移动至所述目标目录所属的目标客户端。

更具体的，通过文件元数据管理实现文件的移动操作。

本发明实施例公开了一种存储系统的文件移动方法，包括：判断源目录或目标目录是否具有配额属性；如果是，则统计所述源目录所属的源客户端中待移动文件的文件数目；通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请；如果所述空间预申请反馈成功，则执行文件移动步骤；所述文件移动步骤具体包括：通过所述源客户端，向所述元数据服务器发起对应所述待移动文件的文件移动请求；利用所述元数据服务器执行所述文件移动请求，以将所述待移动文件移动至所述目标目录所属的目标客户端。本发明中对文件进行移动时并没有经过内核，而是通过元数据服务器发起空间预申请，减少客户端与元数据服务器之间的交互频率，如果反馈成功，直接进行文件移动，不需要内核的遍历拷贝和原文件删除操作，提高了文件移动效率。

本发明实施例公开了一种具体的存储系统的文件移动方法，相对于上一实施例，本实施例对技术方案作了进一步的说明和优化。

具体的，所述文件移动方法还包括：

进一步的，步骤S2中所述统计所述源目录所属的源客户端中待移动文件的文件数目的过程，具体包括：

进一步的，步骤S2所述统计所述源目录所属的源客户端中待移动文件的文件数目之后，还包括：

判断所述文件数目是否小于或等于第一预设值；

如果是，则直接执行所述文件移动步骤；

也就是说，只有在文件数目大于第一预设值时，才需要向上一实施例中一样执行步骤S3的动作。

进一步的，所述文件移动方法还包括：

更新所述元数据服务器中的文件个数配额值。

进一步的，所述更新所述元数据服务器中的文件个数配额值的过程，具体包括：

本发明实施例公开了一种存储系统的文件移动系统，参见图2所示，包括：

判断模块01，用于判断源目录或目标目录是否具有配额属性；如果是，则触发统计模块02；

所述统计模块02，用于统计所述源目录所属的源客户端中待移动文件的文件数目；

预申请模块03，用于通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请；如果所述空间预申请反馈成功，则触发执行模块04；

所述执行模块04，用于执行文件移动步骤；

所述文件移动步骤具体包括：

本发明实施例中对文件进行移动时并没有经过内核，而是通过元数据服务器发起空间预申请，减少客户端与元数据服务器之间的交互频率，如果反馈成功，直接进行文件移动，不需要内核的遍历拷贝和原文件删除操作，提高了文件移动效率。

在一些具体的实施例中，所述文件移动系统还包括：

信息更新模块05，用于根据所述文件数目，更新所述源目录和所述目标目录的文件个数配额值。

在一些具体的实施例中，所述统计模块02具体用于：

在一些具体的实施例中，所述统计模块02还具体用于：

判断所述文件数目是否小于或等于第一预设值；

如果是，则触发执行模块04直接执行所述文件移动步骤；

如果否，则触发预申请模块03执行通过所述源客户端，向元数据服务器发起对应所述文件数目的空间预申请的步骤。

在一些具体的实施例中，所述信息更新模块05还用于：

更新所述元数据服务器中的文件个数配额值。

本发明实施例还公开了一种存储系统的文件移动装置，参见图3所示，包括处理器11和存储器12；其中，所述处理11执行所述存储器12中保存的计算机程序时实现以下步骤：

如果所述空间预申请反馈成功，则执行文件移动步骤；

所述文件移动步骤具体包括：

本实施例中对文件进行移动时并没有经过内核，而是通过元数据服务器发起空间预申请，减少客户端与元数据服务器之间的交互频率，如果反馈成功，直接进行文件移动，不需要内核的遍历拷贝和原文件删除操作，提高了文件移动效率。

在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：根据所述文件数目，更新所述源目录和所述目标目录的文件个数配额值。

在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：通过递归遍历，统计所述源目录所属的源客户端中待移动文件的文件数目。

在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：判断所述文件数目是否小于或等于第一预设值；

如果是，则直接执行所述文件移动步骤；

在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：更新所述元数据服务器中的文件个数配额值。

在一些具体的实施例中，所述处理器11执行所述存储器12中保存的计算机子程序时，具体可以实现以下步骤：当所述源客户端或所述目标客户端累计的所述文件数目超过第二预设值，更新所述元数据服务器中的文件个数配额值。

进一步的，本实施例中的文件移动系统，还可以包括：

输入接口13，用于获取外界导入的计算机程序，并将获取到的计算机程序保存至所述存储器12中，还可以用于获取外界终端设备传输的各种指令和参数，并传输至处理器11中，以便处理器11利用上述各种指令和参数展开相应的处理。本实施例中，所述输入接口13具体可以包括但不限于USB接口、串行接口、语音输入接口、指纹输入接口、硬盘读取接口等。

输出接口14，用于将处理器11产生的各种数据输出至与其相连的终端设备，以便于与输出接口14相连的其他终端设备能够获取到处理器11产生的各种数据。本实施例中，所述输出接口14具体可以包括但不限于USB接口、串行接口等。

通讯单元15，用于在文件移动系统和外部服务器之间建立远程通讯连接，以便于文件移动系统能够将镜像文件挂载到外部服务器中。本实施例中，通讯单元15具体可以包括但不限于基于无线通讯技术或有线通讯技术的远程通讯单元。

键盘16，用于获取用户通过实时敲击键帽而输入的各种参数数据或指令。

显示器17，用于对文件的移动过程的相关信息进行实时显示，以便于用户及时地了解当前文件的移动情况。

鼠标18，可以用于协助用户输入数据并简化用户的操作。

最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上对本发明所提供的一种存储系统的文件移动方法、系统及装置进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims

1.一种存储系统的文件移动方法，其特征在于，包括：

如果所述空间预申请反馈成功，则执行文件移动步骤；

所述文件移动步骤具体包括：

2.根据权利要求1所述文件移动方法，其特征在于，还包括：

3.根据权利要求2所述文件移动方法，其特征在于，所述统计所述源目录所属的源客户端中待移动文件的文件数目的过程，具体包括：

4.根据权利要求3所述文件移动方法，其特征在于，所述统计所述源目录所属的源客户端中待移动文件的文件数目之后，还包括：

判断所述文件数目是否小于或等于第一预设值；

如果是，则直接执行所述文件移动步骤；

5.根据权利要求2至4任一项所述文件移动方法，其特征在于，还包括：

更新所述元数据服务器中的文件个数配额值。

6.根据权利要求5所述文件移动方法，其特征在于，所述更新所述元数据服务器中的文件个数配额值的过程，具体包括：

7.一种存储系统的文件移动系统，其特征在于，包括：

所述执行模块，用于执行文件移动步骤；

所述文件移动步骤具体包括：

8.根据权利要求7所述文件移动系统，其特征在于，还包括：

9.根据权利要求8所述文件移动系统，其特征在于，所述信息更新模块还用于：

更新所述元数据服务器中的文件个数配额值。

10.一种存储系统的文件移动装置，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至6任一项所述存储系统的文件移动方法的步骤。