CN107729178A - 一种元数据服务进程接替方法及装置 - Google Patents

Abstract

本发明公开了一种元数据服务进程接替方法，应用于目标元数据服务进程所在的第一节点，该方法包括以下步骤：在目标元数据服务进程故障时，确定是否存在与目标元数据服务进程对应的目标热备服务进程，目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程；如果是，则利用目标热备服务进程接替目标元数据服务进程。应用本发明实施例所提供的技术方案，通过为目标元数据服务进程设定目标热备服务进程，当目标元数据服务进程出现故障时，可以缩短元数据服务进程的接替时间，较大地降低了元数据服务进程减少的概率，提升了整个系统的元数据性能。本发明还公开了一种元数据服务进程接替装置，具有相应技术效果。

Description

一种元数据服务进程接替方法及装置

技术领域

本发明涉及计算机应用技术领域，特别是涉及一种元数据服务进程接替方法及装置。

背景技术

随着计算机应用技术的发展，分布式文件系统也得到了快速发展。分布式文件系统主要包括元数据服务进程、数据服务进程和客户端。在分布式文件系统应用中，元数据服务进程是重要环节之一，相当于大脑的左右。在分布式文件系统文件IO即文件的数据输入和输出过程中，分为元数据操作和数据操作。客户端首先向元数据服务进程发送数据请求，元数据服务进程应答后才能进行数据操作，可见元数据服务进程可靠性的重要性，即元数据服务进程出现故障后被其他元数据服务进程接替的接替方法的重要性。

现有的元数据服务进程接替方法为通过对称式架构分布式文件系统对故障元数据服务进程进行接替。对称式架构分布式文件系统是指没有固定服务节点，每个节点都能担当元数据服务进程和数据服务进程。对称式架构分布式文件系统由于没有固定的元数据服务进程，只要求能保证冗余度范围内的可靠性。例如分布式文件系统元数据服务进程故障冗余度为2，那么只能保证任意2个元数据服务进程故障不影响系统的正常应用。

这种元数据服务进程接替方法存在一定的缺点，首先，接替过程需要处理好客户端请求和元数据服务进程之间的对应关系、元数据缓存重新加载等工作，元数据服务进程的接替时间长，其次，系统中正常工作的元数据服务进程还充当备用元数据服务进程的角色，当存在元数据服务进程出现故障时，可用元数据服务进程会减少，使得整个系统的元数据性能降低。

发明内容

为解决上述技术问题，本发明提供如下技术方案：

一种元数据服务进程接替方法，应用于目标元数据服务进程所在的第一节点，所述方法包括：

在所述目标元数据服务进程故障时，确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，所述目标热备服务进程为同步有所述目标元数据服务进程中处理元数据请求所需的信息的进程；

如果是，则利用所述目标热备服务进程接替所述目标元数据服务进程。

在本发明的一种具体实施方式中，在确定不存在与所述目标元数据服务进程对应的目标热备服务进程时，还包括：

在冷备服务进程集合中确定所述目标元数据服务进程的冷备服务进程；

利用所述冷备服务进程接替所述目标元数据服务进程。

在本发明的一种具体实施方式中，所述确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，包括：

如果所述目标元数据服务进程对应的目标热备服务进程所在的第二节点故障，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。

在本发明的一种具体实施方式中，所述确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，包括：

如果所述目标元数据服务进程本身为热备服务进程，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。

一种元数据服务进程接替装置，应用于目标元数据服务进程所在的第一节点，所述装置包括：

进程确定模块，用于在所述目标元数据服务进程故障时，确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，如果是，则触发热备接替模块，所述目标热备服务进程为同步有所述目标元数据服务进程中处理元数据请求所需的信息的进程；

所述热备接替模块，用于利用所述目标热备服务进程接替所述目标元数据服务进程。

在本发明的一种具体实施方式中，还包括冷备接替模块，用于：

在确定不存在与所述目标元数据服务进程对应的目标热备服务进程时，在冷备服务进程集合中确定所述目标元数据服务进程的冷备服务进程；

利用所述冷备服务进程接替所述目标元数据服务进程。

在本发明的一种具体实施方式中，所述进程确定模块，具体用于：

如果所述目标元数据服务进程对应的目标热备服务进程所在的第二节点故障，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。

在本发明的一种具体实施方式中，所述进程确定模块，具体用于：

如果所述目标元数据服务进程本身为热备服务进程，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。

应用本发明实施例所提供的技术方案，在目标元数据服务进程故障时，目标元数据服务进程所在的第一节点确定是否存在与目标元数据服务进程对应的目标热备服务进程，目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程，如果是，则利用目标热备服务进程接替目标元数据服务进程。通过为目标元数据服务器进程设定同步有目标元数据服务进程中处理元数据请求所需的信息的目标热备服务进程，当目标元数据服务进程出现故障时，可以缩短元数据服务进程的接替时间，较大地降低了元数据服务进程减少的概率，提升了整个系统的元数据性能。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例中一种元数据服务进程接替方法的实施流程图；

图2为本发明实施例中一种元数据服务进程接替系统的结构框图；

图3为本发明实施例中一种元数据服务进程接替装置的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明的核心是提供一种元数据服务进程接替方法，该方法可以应用于目标元数据服务进程所在的第一节点。在目标元数据服务进程故障时，目标元数据服务进程所在的第一节点确定是否存在与目标元数据服务进程对应的目标热备服务进程，目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程，如果是，则利用目标热备服务进程接替目标元数据服务进程。通过为目标元数据服务器进程设定同步有目标元数据服务进程中处理元数据请求所需的信息的目标热备服务进程，当目标元数据服务进程出现故障时，可以缩短元数据服务进程的接替时间，较大地降低了元数据服务进程减少的概率，提升了整个系统的元数据性能。

参见图1，为本发明实施例中一种元数据服务进程接替方法的实施流程图，该方法可以包括以下步骤：

S101：在目标元数据服务进程故障时，确定是否存在与目标元数据服务进程对应的目标热备服务进程，如果是，则执行步骤S102。

目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程。

在分布式文件系统的目标元数据服务进程所在的第一节点或其他节点上可以预先设定与目标元数据服务进程对应的目标热备服务进程。在目标元数据服务进程故障时，目标元数据服务进程所在的第一节点可以确定是否存在与目标元数据服务进程对应的目标热备服务进程，如果存在，则可以继续执行步骤S102。热备服务进程可称为hot mds。

目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程，即在正常工作的目标元数据服务进程正常情况下处理元数据请求的过程中，可以将处理元数据请求所需的信息同步到目标热备服务进程。正常工作的元数据服务进程可称为active mds。

目标元数据服务进程可以为分布式文件系统中待接替的任意一个元数据服务进程。

在本发明的一种具体实施方式中，确定是否存在与目标元数据服务进程对应的目标热备服务进程，可以包括以下步骤：

如果目标元数据服务进程对应的目标热备服务进程所在的第二节点故障，则确定不存在与目标元数据服务进程对应的目标热备服务进程。

在一个节点发生故障时，其自身中部署的正常工作的元数据服务进程、热备服务进程及冷备服务进程都将不可用。在目标元数据服务进程故障时，如果目标元数据服务进程所在的第一节点通过与目标元数据服务进程对应的目标热备服务进程所在的第二节点预先进行的配置检测到第二节点故障时，说明目标元数据服务进程对应的目标热备服务进程不可用，即确定出不存在与目标元数据服务进程对应的目标热备服务进程。

在本发明的一种具体实施方式中，确定是否存在与目标元数据服务进程对应的目标热备服务进程，可以包括以下步骤：

如果目标元数据服务进程本身为热备服务进程，则确定不存在与目标元数据服务进程对应的目标热备服务进程。

在分布式文件系统的其中一个节点中针对目标元数据服务器设定有指定的一个目标热备服务进程，目标元数据服务进程可能本身就是原来的元数据服务器出现故障后，接替原来的元数据服务器的热备服务进程。因此，如果目标元数据服务进程本身为热备服务进程，则确定不存在与目标元数据服务进程对应的目标热备服务进程。

S102：利用目标热备服务进程接替目标元数据服务进程。

目标元数据服务进程所在的第一节点可以预先与目标元数据服务进程对应的目标热备服务进程所在的第二节点进行配置，在确定出与目标元数据服务进程对应的目标热备服务进程后，可以与目标热备服务进程所在的第二节点通过预先的配置进行通信，从而利用目标热备服务进程接替出现故障的目标元数据服务进程，以较快接替出现故障的目标元数据服务进程。

应用本发明实施例所提供的方法，在目标元数据服务进程故障时，目标元数据服务进程所在的第一节点确定是否存在与目标元数据服务进程对应的目标热备服务进程，目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程，如果是，则利用目标热备服务进程接替目标元数据服务进程。通过为目标元数据服务器进程设定同步有目标元数据服务进程中处理元数据请求所需的信息的目标热备服务进程，当目标元数据服务进程出现故障时，可以缩短元数据服务进程的接替时间，较大地降低了元数据服务进程减少的概率，提升了整个系统的元数据性能。

在本发明的一种具体实施方式中，在确定不存在与目标元数据服务进程对应的目标热备服务进程时，该方法还可以包括以下步骤：

步骤一：在冷备服务进程集合中确定目标元数据服务进程的冷备服务进程；

步骤二：利用冷备服务进程接替目标元数据服务进程。

为方便描述，可以将上述两个步骤结合起来进行说明。

在分布式文件系统的每个节点上可以预先设定冷备服务进程，冷备服务进程可称为cold mds。每个节点启动冷备服务进程，各冷备服务进程共同构成冷备服务进程集合，目标元数据服务进程所在的第一节点在确定不存在与目标元数据服务进程对应的目标热备服务进程时，可以在冷备服务进程集合中确定目标元数据服务进程的冷备服务进程，利用冷备服务进程接替目标元数据服务进程，提升了分布式文件系统元数据服务进程集群的可靠性，使得分布式文件系统冗余范围内节点故障后，不影响整个分布式文件系统的元数据性能。

在实际应用中，可以指定热备服务进程接替哪个正常工作的元数据服务进程，如图2所示，将节点1上的热备服务进程2设定为节点2上正常工作的元数据服务进程2的热备服务进程，将节点2上的热备服务进程3设定为节点3上正常工作的元数据服务进程3的热备服务进程，将节点3上的热备服务进程1设定为节点1上正常工作的元数据服务进程1的热备服务进程，以较快接替故障元数据服务进程。当多个元数据服务进程所在的节点故障无热备服务进程可用时，由冷备服务进程接替故障元数据服务进程，如图2所示，在每个节点上设置一个冷备服务进程，在元数据服务进程故障无热备服务进程可用时，可以选择任意一个节点上的冷备服务进程接替故障元数据服务进程。

相应于上面的方法实施例，本发明实施例还提供了一种元数据服务进程接替装置，下文描述的一种元数据服务进程接替装置与上文描述的一种元数据服务进程接替方法可相互对应参照。

参见图3，该装置可以包括以下模块：

进程确定模块301，用于在目标元数据服务进程故障时，确定是否存在与目标元数据服务进程对应的目标热备服务进程，如果是，则触发热备接替模块302，目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程；

热备接替模块302，用于利用目标热备服务进程接替目标元数据服务进程。

应用本发明实施例所提供的装置，在目标元数据服务进程故障时，目标元数据服务进程所在的第一节点确定是否存在与目标元数据服务进程对应的目标热备服务进程，目标热备服务进程为同步有目标元数据服务进程中处理元数据请求所需的信息的进程，如果是，则利用目标热备服务进程接替目标元数据服务进程。通过为目标元数据服务器进程设定同步有目标元数据服务进程中处理元数据请求所需的信息的目标热备服务进程，当目标元数据服务进程出现故障时，可以缩短元数据服务进程的接替时间，较大地降低了元数据服务进程减少的概率，提升了整个系统的元数据性能。

在本发明的一种具体实施方式中，该装置还可以包括冷备接替模块，用于：

在确定不存在与目标元数据服务进程对应的目标热备服务进程时，在冷备服务进程集合中确定目标元数据服务进程的冷备服务进程；

利用冷备服务进程接替目标元数据服务进程。

在本发明的一种具体实施方式中，进程确定模块301，具体用于：

如果目标元数据服务进程对应的目标热备服务进程所在的第二节点故障，则确定不存在与目标元数据服务进程对应的目标热备服务进程。

在本发明的一种具体实施方式中，进程确定模块301，具体用于：

如果目标元数据服务进程本身为热备服务进程，则确定不存在与目标元数据服务进程对应的目标热备服务进程。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的技术方案及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以对本发明进行若干改进和修饰，这些改进和修饰也落入本发明权利要求的保护范围内。

Claims (8)

1.一种元数据服务进程接替方法，其特征在于，应用于目标元数据服务进程所在的第一节点，所述方法包括：

在所述目标元数据服务进程故障时，确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，所述目标热备服务进程为同步有所述目标元数据服务进程中处理元数据请求所需的信息的进程；

如果是，则利用所述目标热备服务进程接替所述目标元数据服务进程。

2.根据权利要求1所述的方法，其特征在于，在确定不存在与所述目标元数据服务进程对应的目标热备服务进程时，还包括：

在冷备服务进程集合中确定所述目标元数据服务进程的冷备服务进程；

利用所述冷备服务进程接替所述目标元数据服务进程。

3.根据权利要求1或2所述的方法，其特征在于，所述确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，包括：

如果所述目标元数据服务进程对应的目标热备服务进程所在的第二节点故障，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。

4.根据权利要求1或2所述的方法，其特征在于，所述确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，包括：

如果所述目标元数据服务进程本身为热备服务进程，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。

5.一种元数据服务进程接替装置，其特征在于，应用于目标元数据服务进程所在的第一节点，所述装置包括：

进程确定模块，用于在所述目标元数据服务进程故障时，确定是否存在与所述目标元数据服务进程对应的目标热备服务进程，如果是，则触发热备接替模块，所述目标热备服务进程为同步有所述目标元数据服务进程中处理元数据请求所需的信息的进程；

所述热备接替模块，用于利用所述目标热备服务进程接替所述目标元数据服务进程。

6.根据权利要求5所述的装置，其特征在于，还包括冷备接替模块，用于：

在确定不存在与所述目标元数据服务进程对应的目标热备服务进程时，在冷备服务进程集合中确定所述目标元数据服务进程的冷备服务进程；

利用所述冷备服务进程接替所述目标元数据服务进程。

7.根据权利要求5或6所述的装置，其特征在于，所述进程确定模块，具体用于：

如果所述目标元数据服务进程对应的目标热备服务进程所在的第二节点故障，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。

8.根据权利要求5或6所述的装置，其特征在于，所述进程确定模块，具体用于：

如果所述目标元数据服务进程本身为热备服务进程，则确定不存在与所述目标元数据服务进程对应的目标热备服务进程。