CN109583222A - 分布式文件系统元数据服务器回收客户端权限方法及装置 - Google Patents

Abstract

本发明实施例公开了一种分布式文件系统元数据服务器回收客户端权限的方法、装置、设备及计算机可读存储介质。其中，方法包括判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值，将超时时间超过预设超时阈值的会话删除，并将其加入至对象存储服务器的黑名单中。客户端在进行读写操作前，检测黑名单中是否存在与当前读写任务对应的元数据服务器的会话，若存在，则释放持有相应元数据的权限。本申请解决客户端长期持有元数据的权限，导致其他客户端无法正常进行元数据读写操作的现状，元数据服务器强制回收元数据权限，使得其它客户端可进行正常的读写业务，提升了存储系统的易用性。

Description

分布式文件系统元数据服务器回收客户端权限方法及装置

技术领域

本发明实施例涉及分布式文件系统技术领域，特别是涉及一种分布式文件系统元数据服务器回收客户端权限的方法、装置、设备及计算机可读存储介质。

背景技术

随着云计算、大数据的快速发展，数据呈现爆炸式增长，单纯通过增加硬盘个数来扩展计算机文件系统的存储容量的方式，已经无法满足信息爆炸时代指数倍增长的数据的存储需求，分布式文件系统应用而生。

分布式文件系统(Distributed File System)为基于客户端/服务器模式的文件系统管理的物理存储资源，通过计算机网络与节点相连，可以有效解决数据的存储和管理难题。将固定于某个地点的某个文件系统，扩展到任意多个地点/多个文件系统，众多的节点组成一个文件系统网络。每个节点可以分布在不同的地点，通过网络进行节点间的通信和数据传输。用户在使用分布式文件系统时，无需关心数据是存储在哪个节点上、或者是从哪个节点从获取的，只需要像使用本地文件系统一样管理和存储文件系统中的数据。

Cap为MDS(metadata server，元数据服务器)分配给客户端对元数据的操作能力的权限。不同客户端，或者同一客户端不同时刻，对同一元数据持有Cap可能是不同的。Cap为文件系统层面的，包括元数据和数据操作，都是通过Cap来控制的。因此，MDS通过Cap对多个客户端操作同一个元数据进行权限管理。

在正常的业务场景下，经常会遇到这种情况，客户端会因某种原因长期持有某元数据的Cap不释放，也不进行交互，从而导致其它客户端无法获取该Cap权限，也就无法对响应的元数据进行操作。

发明内容

本公开实施例提供了一种分布式文件系统元数据服务器回收客户端权限的方法、装置、设备及计算机可读存储介质，解决客户端长期持有元数据的权限，导致其他客户端无法正常进行元数据读写操作的现状。

为解决上述技术问题，本发明实施例提供以下技术方案：

本发明实施例一方面提供了一种分布式文件系统元数据服务器回收客户端权限的方法，包括：

判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值；

若是，则将所述会话删除，并将所述会话加入至对象存储服务器的黑名单中，以使所述客户端在检测到所述会话被删除后，释放持有相应元数据的权限。

可选的，所述将所述会话删除包括：

将所述会话加入至预先构建的等待队列中；

当检测到所述等待队列中没有新的会话加入，将所述等待队列中的会话依次删掉。

可选的，所述判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值为：

按照预设频率，定期检测分布式文件系统中所有元数据服务器与客户端的会话超时时间是否超过预设超时阈值。

可选的，在所述将所述会话删除，并将所述会话加入至对象存储服务器的黑名单中之后，还包括：

当检测到源客户端释放元数据权限，将所述元数据权限授权给目标客户端，以使所述目标客户端执行相应元数据的读写操作。

本发明实施例还提供了一种分布式文件系统元数据服务器回收客户端权限的装置，包括：

判断超时模块，用于判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值；

会话删除模块，用于将超过所述预设超时阈值的会话删除，并将所述会话加入至对象存储服务器的黑名单中，以使所述客户端在检测到所述会话被删除后，释放持有相应元数据的权限。

可选的，还包括：

权限授权模块，用于当检测到源客户端释放元数据权限，将所述元数据权限授权给目标客户端，以使所述目标客户端执行相应元数据的读写操作。

本发明实施例还提供了一种分布式文件系统元数据服务器回收客户端权限的设备，包括处理器，所述处理器用于执行存储器中存储的计算机程序时实现如前任一项所述分布式文件系统元数据服务器回收客户端权限的方法的步骤。

本发明实施例最后还提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有分布式文件系统元数据服务器回收客户端权限的程序，所述分布式文件系统元数据服务器回收客户端权限的程序被处理器执行时实现如前任一项所述分布式文件系统元数据服务器回收客户端权限的方法的步骤。

本发明实施例另一方面提供了一种分布式文件系统元数据服务器回收客户端权限的方法，基于客户端，包括：

判断与当前读写任务对应的元数据服务器的会话，是否在对象存储服务器的黑名单中；

若是，则释放持有相应元数据的权限；

若否，则执行读写操作；

其中，所述会话的超时时间在超过预设超时阈值后被删除，且被加入至所述黑名单中。

本发明实施例还提供了一种分布式文件系统元数据服务器回收客户端权限装置，基于客户端，包括：

会话检测模块，用于判断与当前读写任务对应的元数据服务器的会话，是否在对象存储服务器的黑名单中；所述会话的超时时间在超过预设超时阈值后被删除，且被加入至所述黑名单中；

权限释放模块，用于当所述会话存在黑名单，释放持有相应元数据的权限；

读写操作模块，用于在与当前读写任务对应的元数据服务器的会话不存在黑名单时，执行读写操作。

本申请提供的技术方案的优点在于，通过设定一个合理的超时阈值，将客户端与元数据服务器的超过预设超时阈值的会话删除，客户端在检测到会话被删除后，主动释放相应元数据的权限，解决客户端长期持有元数据的权限，导致其他客户端无法正常进行元数据读写操作的现状，元数据服务器强制回收元数据权限，使得其它客户端可进行正常的读写业务，提升了存储系统的易用性。

此外，本发明实施例还针对分布式文件系统元数据服务器回收客户端权限的方法提供了相应的实现装置、设备及计算机可读存储介质，进一步使得所述方法更具有实用性，所述装置、设备及计算机可读存储介质具有相应的优点。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本公开。

附图说明

为了更清楚的说明本发明实施例或相关技术的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种分布式文件系统元数据服务器回收客户端权限的方法的流程示意图；

图2为本发明实施例提供的另一种分布式文件系统元数据服务器回收客户端权限的方法的流程示意图；

图3为本发明实施例提供的分布式文件系统元数据服务器回收客户端权限的装置的一种具体实施方式结构图；

图4为本发明实施例提供的分布式文件系统元数据服务器回收客户端权限的装置的另一种具体实施方式结构图

图5为本发明实施例提供的分布式文件系统元数据服务器回收客户端权限的装置的另一种具体实施方式结构图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象，而不是用于描述特定的顺序。此外术语“包括”和“具有”以及他们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可包括没有列出的步骤或单元。

在介绍了本发明实施例的技术方案后，下面详细的说明本申请的各种非限制性实施方式。

首先参见图1，图1为本发明实施例提供的一种分布式文件系统元数据服务器回收客户端权限的方法的流程示意图，本发明实施例可包括以下内容：

S101：判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值，若是，则执行S102。

预设超时阈值为预先根据分布式文件系统的实际运行任务进行设定的合理的阈值，例如5s，超时阈值不小于当前应用场景中客户端与元数据服务器可允许的最大响应时间。本领域技术人员可根据自身经验进行确定，也可通过多次试验后取实验结果最好的值，这均不影响本申请的实现。

可选的，可通过设置定时任务，定时任务按照预设频率(每隔1h)定期检查所有元数据服务器与客户端的会话超时时间是否超过预设超时阈值，当然，也可对预先设定的某些关键元数据服务器(这些关键元数据服务器可为历史数据中被客户端访问次数较高的一些元数据服务器)进行检测，这均不影响本申请的实现。

S102：将会话删除，并将会话加入至对象存储服务器的黑名单中，以使客户端在检测到会话被删除后，释放持有相应元数据的权限。

在对多个元数据服务器进行检测时，每检测完一个元数据服务器与客户端的会话，可将会话超时时间超过预设超时阈值的会话加入到预先构建的等待队列中，在将所有的元数据服务器均检查完成后，或者是检测到等待队列中没有新的会话加入(可以在预设时间段内(例如5s)如果没有新的会话加入，则判定等待队列中没有新的会话加入)，将等待队列中的会话依次删除，可以按照加入时间的先后进行删除，也可随机删除，这均不影响本申请的实现。

会话在被删除掉后，将其加入至对象存储服务器的黑名单中，客户端便会禁止对象存储服务器的读写操作。客户端在进行数据读写前，会检测此黑名单，若黑名单中存在与当前读写任务对应的元数据服务器的会话，则主动释放掉相应元数据的权限，实现元数据服务器的权限的强制回收。

在本发明实施例提供的技术方案中，通过设定一个合理的超时阈值，将客户端与元数据服务器的超过预设超时阈值的会话删除，客户端在检测到会话被删除后，主动释放相应元数据的权限，解决客户端长期持有元数据的权限，导致其他客户端无法正常进行元数据读写操作的现状，元数据服务器强制回收元数据权限，使得其它客户端可进行正常的读写业务，提升了存储系统的易用性。

可选的，元数据服务器在检测到源客户端释放元数据权限，将该元数据权限授权给有需求的目标客户端，如果目标客户端有多个，可以按照各目标客户端发送元数据权限请求的时间顺序进行授权，也可以随机授权给任何一个有需求的客户端，从而使得目标客户端执行相应元数据的读写操作，提升存储系统的易用性。

本申请还提供了另外一个实施例，请参见图2，图2为本发明实施例提供的另一种分布式文件系统元数据服务器回收客户端权限的方法的流程示意图，本发明实施例例如可应用于分布式文件系统的客户端，可包括以下内容：

S201：判断与当前读写任务对应的元数据服务器的会话是否在对象存储服务器的黑名单中，若是，则执行S202，若否，则执行S203。

S202：释放持有相应元数据的权限。

S203：执行读写操作。

会话的超时时间在超过预设超时阈值后被删除，且被加入至黑名单中，也就是说，客户端在检测到与元数据服务器的会话被删除掉后，会主动释放相应元数据的权限，元数据服务器和元数据权限相对应。

本发明实施例与上述实施相同的步骤或方法，可参阅上述实施例记载的描述过程，此处，便不再赘述。

由上可知，本发明实施例客户端在检测到于元数据服务器的会话被删除后，便主动释放元数据权限，实现元数据服务器强制回收元数据权限，使得其它客户端可进行正常的读写业务，提升了存储系统的易用性。

本发明实施例还针对分布式文件系统元数据服务器回收客户端权限的方法提供了相应的实现装置，进一步使得所述方法更具有实用性。下面对本发明实施例提供的分布式文件系统元数据服务器回收客户端权限的装置进行介绍，下文描述的分布式文件系统元数据服务器回收客户端权限的装置与上文描述的分布式文件系统元数据服务器回收客户端权限的方法可相互对应参照。

参见图3，图3为本发明实施例提供的分布式文件系统元数据服务器回收客户端权限的装置在一种具体实施方式下的结构图，该装置可包括：

判断超时模块301，用于判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值。

会话删除模块302，用于将超过预设超时阈值的会话删除，并将会话加入至对象存储服务器的黑名单中，以使客户端在检测到会话被删除后，释放持有相应元数据的权限。

可选的，在本实施例的一些实施方式中，请参阅图4，所述装置例如还可以包括权限授权模块303，用于当检测到源客户端释放元数据权限，将元数据权限授权给目标客户端，以使目标客户端执行相应元数据的读写操作。

在另外一种实施方式中，所述会话删除模块302可为将会话加入至预先构建的等待队列中；当检测到等待队列中没有新的会话加入，将等待队列中的会话依次删掉的模块。

此外，所述判断超时模块301例如还可为按照预设频率，定期检测分布式文件系统中所有元数据服务器与客户端的会话超时时间是否超过预设超时阈值的模块。

请参阅图5，图5为本发明实施例提供的分布式文件系统元数据服务器回收客户端权限的装置在一种具体实施方式下的结构图，基于分布式文件系统的客户端，该装置可包括：

会话检测模块501，用于判断与当前读写任务对应的元数据服务器的会话，是否在对象存储服务器的黑名单中；会话的超时时间在超过预设超时阈值后被删除，且被加入至黑名单中。

权限释放模块502，用于当所述会话存在黑名单，释放持有相应元数据的权限，即释放黑名单中会话相应的元数据的权限。

读写操作模块503，用于在与当前读写任务对应的元数据服务器的会话不存在黑名单时，执行读写操作。

本发明实施例所述分布式文件系统元数据服务器回收客户端权限的装置的各功能模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。

由上可知，本发明实施例解决客户端长期持有元数据的权限，导致其他客户端无法正常进行元数据读写操作的现状，元数据服务器强制回收元数据权限，使得其它客户端可进行正常的读写业务，提升了存储系统的易用性。

本发明实施例还提供了一种分布式文件系统元数据服务器回收客户端权限的设备，具体可包括：

存储器，用于存储计算机程序；

处理器，用于执行计算机程序以实现如上任意一实施例所述分布式文件系统元数据服务器回收客户端权限的方法的步骤。

本发明实施例所述分布式文件系统元数据服务器回收客户端权限的设备的各功能模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。

由上可知，本发明实施例解决客户端长期持有元数据的权限，导致其他客户端无法正常进行元数据读写操作的现状，元数据服务器强制回收元数据权限，使得其它客户端可进行正常的读写业务，提升了存储系统的易用性。

本发明实施例还提供了一种计算机可读存储介质，存储有分布式文件系统元数据服务器回收客户端权限的程序，所述分布式文件系统元数据服务器回收客户端权限的程序被处理器执行时如上任意一实施例所述分布式文件系统元数据服务器回收客户端权限的方法的步骤。

本发明实施例所述计算机可读存储介质的各功能模块的功能可根据上述方法实施例中的方法具体实现，其具体实现过程可以参照上述方法实施例的相关描述，此处不再赘述。

由上可知，本发明实施例解决客户端长期持有元数据的权限，导致其他客户端无法正常进行元数据读写操作的现状，元数据服务器强制回收元数据权限，使得其它客户端可进行正常的读写业务，提升了存储系统的易用性。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

以上对本发明所提供的一种分布式文件系统元数据服务器回收客户端权限的方法、装置、设备及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (10)

1.一种分布式文件系统元数据服务器回收客户端权限的方法，其特征在于，包括：

判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值；

若是，则将所述会话删除，并将所述会话加入至对象存储服务器的黑名单中，以使所述客户端在检测到所述会话被删除后，释放持有相应元数据的权限。

2.根据权利要求1所述的分布式文件系统元数据服务器回收客户端权限的方法，其特征在于，所述将所述会话删除包括：

将所述会话加入至预先构建的等待队列中；

当检测到所述等待队列中没有新的会话加入，将所述等待队列中的会话依次删掉。

3.根据权利要求1所述的分布式文件系统元数据服务器回收客户端权限的方法，其特征在于，所述判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值为：

按照预设频率，定期检测分布式文件系统中所有元数据服务器与客户端的会话超时时间是否超过预设超时阈值。

4.根据权利要求1至3任意一项所述的分布式文件系统元数据服务器回收客户端权限的方法，其特征在于，在所述将所述会话删除，并将所述会话加入至对象存储服务器的黑名单中之后，还包括：

当检测到源客户端释放元数据权限，将所述元数据权限授权给目标客户端，以使所述目标客户端执行相应元数据的读写操作。

5.一种分布式文件系统元数据服务器回收客户端权限的装置，其特征在于，包括：

判断超时模块，用于判断元数据服务器与客户端的会话超时时间是否超过预设超时阈值；

会话删除模块，用于将超过所述预设超时阈值的会话删除，并将所述会话加入至对象存储服务器的黑名单中，以使所述客户端在检测到所述会话被删除后，释放持有相应元数据的权限。

6.根据权利要求5所述的分布式文件系统元数据服务器回收客户端权限的装置，其特征在于，还包括：

权限授权模块，用于当检测到源客户端释放元数据权限，将所述元数据权限授权给目标客户端，以使所述目标客户端执行相应元数据的读写操作。

7.一种分布式文件系统元数据服务器回收客户端权限的设备，其特征在于，包括处理器，所述处理器用于执行存储器中存储的计算机程序时实现如权利要求1至4任一项所述分布式文件系统元数据服务器回收客户端权限的方法的步骤。

8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有分布式文件系统元数据服务器回收客户端权限的程序，所述分布式文件系统元数据服务器回收客户端权限的程序被处理器执行时实现如权利要求1至4任一项所述分布式文件系统元数据服务器回收客户端权限的方法的步骤。

9.一种分布式文件系统元数据服务器回收客户端权限的方法，其特征在于，基于客户端，包括：

判断与当前读写任务对应的元数据服务器的会话，是否在对象存储服务器的黑名单中；

若是，则释放持有相应元数据的权限；

若否，则执行读写操作；

其中，所述会话的超时时间在超过预设超时阈值后被删除，且被加入至所述黑名单中。

10.一种分布式文件系统元数据服务器回收客户端权限的装置，其特征在于，基于客户端，包括：

会话检测模块，用于判断与当前读写任务对应的元数据服务器的会话，是否在对象存储服务器的黑名单中；所述会话的超时时间在超过预设超时阈值后被删除，且被加入至所述黑名单中；

权限释放模块，用于当所述会话存在黑名单，释放持有相应元数据的权限；

读写操作模块，用于在与当前读写任务对应的元数据服务器的会话不存在黑名单时，执行读写操作。