CN105677789A - 一种分布式文件系统的目录容量管理方法及系统 - Google Patents

Abstract

本发明公开了一种分布式文件系统的目录容量管理方法及系统，该方法包括：客户端在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，并将所述更新请求发送至服务端；所述服务端在收到所述更新请求时，遍历所述目标文件所属目录下的所有文件(而不是直接使用目录iNode大小)，得到当前已用目录容量大小，并将所述当前已用目录容量大小反馈至所述客户端。可见，本发明有效实现了及时更新目录容量大小，进而提高配额准确性的目的。

Description

一种分布式文件系统的目录容量管理方法及系统

技术领域

本发明涉及分布式文件系统技术领域，特别是涉及一种分布式文件系统的目录容量管理方法及系统。

背景技术

目前，分布式文件系统已经发展了很长时间，但是对于配额功能的支持一直是困扰用户的问题，尤其是目录容量配额，不能实时统计目录的容量，这直接导致当前目录容量配额的准确性不高，易出现目录下的数据大小超出配额值的情况。

在分布式文件系统中，磁盘目录容量配额可以帮助管理员实现管理目录大小的目的，当目录容量达到配额限度或接近配额限度时可以及时邮件、短信提醒，实现对目录使用的合理控制，提高访问数据的效率和管理、维护数据的方便性。

但是，在现有的分布式文件系统中，由于其是直接使用目录iNode(索引节点)大小来表示当前的目录容量大小，而目录iNode大小并不能实时统计目录容量大小，这也就直接导致当前目录容量配额的准确性存在偏差，满足不了客户对配额准确性要求比较高的使用场景，比如，有多个用户在客户端向系统写入数据，如果有多个用户在写同一个目录(文件夹)，由于服务端不能给客户端实时更新当前目录容量大小，那么客户端当前记录的目录容量大小已经不能正确表示当前目录的真实大小，所以继续写入数据时，使用当前目录大小判断是否超过配额值会导致写入数据大小超过配额值。

基于此，亟需一种能够及时更新目录容量大小，进而提高配额准确性的方法。

发明内容

有鉴于此，本发明提供了一种分布式文件系统的目录容量管理方法及系统，以实现及时更新目录容量大小，进而提高配额准确性的目的。

为解决上述技术问题，本发明提供一种分布式文件系统的目录容量管理方法，该方法包括：

客户端在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，并将所述更新请求发送至服务端；

所述服务端在收到所述更新请求时，遍历所述目标文件所属目录下的所有文件，得到当前已用目录容量大小，并将所述当前已用目录容量大小反馈至所述客户端。

上述方法中，优选地，在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，还包括：

所述客户端判断所述当前已用目录容量大小达到针对所述目标文件所属目录的目录配额限度；

如果达到，则显示所述目标文件所属目录已达所述目录配额限度的提示信息；

如果未达到，则显示所述目标文件所属目录当前可用容量大小的提示信息。

上述方法中，优选地，在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，还包括：

所述客户端根据所述当前已用目录容量大小更新已用目录容量参数。

上述方法中，优选地，所述更新请求包含于针对所述写操作的写请求，所述客户端在检测到对所述目标文件的所述写操作时，生成所述写请求并将所述写请求发送至所述服务端。

上述方法中，优选地，所述客户端在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，包括：

所述客户端在检测到对目标文件的写操作时，判断提高配额准确性模式是否开启，如果是，则生成所述目标文件所属目录的已用目录容量大小的更新请求。

本发明还提供了一种分布式文件系统的目录容量管理系统，该系统包括：

客户端，用于在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，并将所述更新请求发送至服务端；

所述服务端，用于在收到所述更新请求时，遍历所述目标文件所属目录下的所有文件，得到当前已用目录容量大小，并将所述当前已用目录容量大小反馈至所述客户端。

上述系统中，优选地，所述客户端还用于在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，判断所述当前已用目录容量大小达到针对所述目标文件所属目录的目录配额限度；如果达到，则显示所述目标文件所属目录已达所述目录配额限度的提示信息；如果未达到，则显示所述目标文件所属目录当前可用容量大小的提示信息。

上述系统中，优选地，所述客户端还用于在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，根据所述当前已用目录容量大小更新已用目录容量参数。

上述系统中，优选地，所述更新请求包含于针对所述写操作的写请求，所述客户端具体用于在检测到对所述目标文件的所述写操作时，生成所述写请求并将所述写请求发送至所述服务端。

上述系统中，优选地，所述客户端用于在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，包括：

所述客户端具体用于在检测到对目标文件的写操作时，判断提高配额准确性模式是否开启，如果是，则生成所述目标文件所属目录的已用目录容量大小的更新请求。

以上本发明提供的一种分布式文件系统的目录容量管理方法及系统中，客户端主动向服务端请求更新已用目录容量大小，其在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，并将所述更新请求发送至服务端；所述服务端在接收到更新请求时，遍历所述目标文件所属目录下的所有文件(而不是直接使用目录iNode大小)，得到当前已用目录容量大小，并将所述当前已用目录容量大小反馈至所述客户端。可见，本发明有效实现了及时更新目录容量大小，进而提高配额准确性的目的。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的一种分布式文件系统的目录容量管理方方法的流程图；

图2为本发明实施例提供的一种分布式文件系统的目录容量管理方系统的结构框图示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的核心是提供一种分布式文件系统的目录容量管理方法及系统，以实现及时更新目录容量大小，进而提高配额准确性的目的。

为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。

参考图1，图1示出了本发明实施例提供的一种分布式文件系统的目录容量管理方法的流程图，该方法具体可以包括如下步骤：

步骤S100、客户端在检测到对目标文件的写操作时生成目标文件所属目录的已用目录容量大小的更新请求，并将更新请求发送至服务端。

本发明中，当客户端检测到对某一目标文件进行写操作时，需要知道在分布式文件系统中该目标文件所归属于的目录是否还能在继续写入数据，即该目录的已使用容量大小是否已经达到目录配额限度，如果达到则不能再往该目标文件中写入数据，反之，则按正常写入方式写入数据至该目标文件中。

本发明中，客户端主动向服务端请求更新已用目录容量大小，进一步地，由于客户端每次在检测到对目标文件的写操作时，会向服务端发送针对本次写操作的写请求，以告知服务端客户端需要对目标文件执行写操作了。因此，客户端可以在每次向服务端发送写请求的同时，请求更新目标文件所归属的目录的已用目录容量大小，也就是说，更新请求包含于针对写操作的写请求，这样就不需要专门单独发送一次更新请求。

在具体实施过程中，客户端在检测到对目标文件的写操作时，生成写请求并将写请求发送至服务端。在服务端接收到写请求及该写请求中的更新请求后，做相应的处理操作。当然，本发明主要针对服务端对更新请求的处理进行详细描述，至于对写请求中的其它内容的处理，可参考现有技术，本发明在此不作详细阐述。

步骤S101、服务端在收到更新请求时，遍历目标文件所属目录下的所有文件，得到当前已用目录容量大小，并将当前已用目录容量大小反馈至客户端。

具体地，当服务端接收到更新请求时，确定该目标文件所属的目录，递归遍历目录下的所有文件，将所有文件的iNode记录的大小相加后更新目录的大小。相较现有技术中直接使用目录iNode大小，本发明中先遍历再相加能够保证获取的目录大小是准确的。

考虑到实际应用中，上述遍历统计过程会消耗一部分资源，如CPU占用率提高,内存使用量提高，导致本来繁忙的服务端更加繁忙影响系统性能。因此，在客户端，目录容量配额的准确性功能开关可以根据用户的需求灵活控制，如果用户对性能要求不高，但要提高准确性，就可以打开准确性开关，否则可以关闭准确性开关，提高系统性能。即对于本发明提供的提高配额准确性功能，开关控制功能负责管理是否启用提高配额准确性的功能，打开以后可以提高配额准确性，但是在系统压力较大的情况下，会影响到系统的整体读写性能。

根据上述分析，在具体实施过程中，客户端在检测到对目标文件的写操作时，判断提高配额准确性模式是否开启，如果是，则生成目标文件所属目录的已用目录容量大小的更新请求；如果否，则还按现有技术中的方案去执行相应的操作。

另外，在服务端将当前已用目录容量大小反馈至客户端之后，客户端接收到服务端反馈的数据后，根据当前已用目录容量大小更新本地记录的已用目录容量参数，，这样就可以用来准确判断当前目录已用容量是否超过预设的目录配额限度。具体地，客户端判断当前已用目录容量大小达到针对目标文件所属目录的目录配额限度；如果达到，则向用户显示目标文件所属目录已达目录配额限度的提示信息，这样，用户就不会继续往目标文件中写入数据，以此准确有效地避免写入数据超过配额限度的情况；如果未达到，则显示目标文件所属目录当前可用容量大小的提示信息，这样，用户可以参考当前可用容量大小来继续往目标文件中写入数据，直到目标文件所属目录达到目录配额限度。

综上，服务端在接收到更新请求时，根据更新请求中的目录标识，遍历目标文件所属目录下的所有文件(而不是直接使用目录iNode大小)，得到当前已用目录容量大小，并将当前已用目录容量大小反馈至客户端。可见，本发明有效实现了及时更新目录容量大小，进而提高配额准确性的目的。

基于上述本发明实施例提供的分布式文件系统的目录容量管理方法，本发明实施例还提供了一种分布式文件系统的目录容量管理方系统，参考图2，该系统200可以包括如下内容：

客户端201，用于在检测到对目标文件的写操作时生成目标文件所属目录的已用目录容量大小的更新请求，并将更新请求发送至服务端202；

服务端202，用于在收到更新请求时，遍历目标文件所属目录下的所有文件，得到当前已用目录容量大小，并将当前已用目录容量大小反馈至客户端201。

本发明中，客户端201还用于在服务端202将当前已用目录容量大小反馈至客户端201之后，判断当前已用目录容量大小达到针对目标文件所属目录的目录配额限度；如果达到，则显示目标文件所属目录已达目录配额限度的提示信息；如果未达到，则显示目标文件所属目录当前可用容量大小的提示信息。

本发明中，客户端201还用于在服务端202将当前已用目录容量大小反馈至客户端201之后，根据当前已用目录容量大小更新已用目录容量参数。

本发明中，更新请求包含于针对写操作的写请求，客户端201具体用于在检测到对目标文件的写操作时，生成写请求并将写请求发送至服务端202。

本发明中，客户端201用于在检测到对目标文件的写操作时生成目标文件所属目录的已用目录容量大小的更新请求，包括：

客户端201具体用于在检测到对目标文件的写操作时，判断提高配额准确性模式是否开启，如果是，则生成目标文件所属目录的已用目录容量大小的更新请求。

需要说明的是，本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。对于系统类实施例而言，由于其与方法实施例基本相似，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。

以上对本发明所提供的一种分布式文件系统的目录容量管理方法及系统进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (10)

1.一种分布式文件系统的目录容量管理方法，其特征在于，该方法包括：

客户端在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，并将所述更新请求发送至服务端；

所述服务端在收到所述更新请求时，遍历所述目标文件所属目录下的所有文件，得到当前已用目录容量大小，并将所述当前已用目录容量大小反馈至所述客户端。

2.如权利要求1所述的方法，其特征在于，在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，还包括：

所述客户端判断所述当前已用目录容量大小达到针对所述目标文件所属目录的目录配额限度；

如果达到，则显示所述目标文件所属目录已达所述目录配额限度的提示信息；

如果未达到，则显示所述目标文件所属目录当前可用容量大小的提示信息。

3.如权利要求1所述的方法，其特征在于，在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，还包括：

所述客户端根据所述当前已用目录容量大小更新已用目录容量参数。

4.如权利要求1至3任意一项所述的方法，其特征在于，所述更新请求包含于针对所述写操作的写请求，所述客户端在检测到对所述目标文件的所述写操作时，生成所述写请求并将所述写请求发送至所述服务端。

5.如权利要求4所述的方法，其特征在于，所述客户端在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，包括：

所述客户端在检测到对目标文件的写操作时，判断提高配额准确性模式是否开启，如果是，则生成所述目标文件所属目录的已用目录容量大小的更新请求。

6.一种分布式文件系统的目录容量管理系统，其特征在于，该系统包括：

客户端，用于在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，并将所述更新请求发送至服务端；

所述服务端，用于在收到所述更新请求时，遍历所述目标文件所属目录下的所有文件，得到当前已用目录容量大小，并将所述当前已用目录容量大小反馈至所述客户端。

7.如权利要求6所述的系统，其特征在于，所述客户端还用于在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，判断所述当前已用目录容量大小达到针对所述目标文件所属目录的目录配额限度；如果达到，则显示所述目标文件所属目录已达所述目录配额限度的提示信息；如果未达到，则显示所述目标文件所属目录当前可用容量大小的提示信息。

8.如权利要求6所述的系统，其特征在于，所述客户端还用于在所述服务端将所述当前已用目录容量大小反馈至所述客户端之后，根据所述当前已用目录容量大小更新已用目录容量参数。

9.如权利要求6至8任意一项所述的系统，其特征在于，所述更新请求包含于针对所述写操作的写请求，所述客户端具体用于在检测到对所述目标文件的所述写操作时，生成所述写请求并将所述写请求发送至所述服务端。

10.如权利要求9所述的系统，其特征在于，所述客户端用于在检测到对目标文件的写操作时生成所述目标文件所属目录的已用目录容量大小的更新请求，包括：

所述客户端具体用于在检测到对目标文件的写操作时，判断提高配额准确性模式是否开启，如果是，则生成所述目标文件所属目录的已用目录容量大小的更新请求。