CN111427861B - 分布式文件系统配置方法及装置 - Google Patents

Abstract

本发明是关于分布式文件系统配置方法及装置。该方法包括：接收通过图形化配置界面输入的文件系统配置参数；根据所述文件系统配置参数调用RPC发送程序；通过所述RPC发送程序调用相应的RPC服务程序；基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统。通过本发明的技术方案，可在不需要配置人员输入配置脚本的基础上，利用可视化的配置界面输入的文件系统配置参数对分布式文件系统进行配置，以提高分布式文件系统的配置便捷性，减少分布式文件系统部署过程的工作量与运营成本，并自动完成分布式文件系统的图形化自动安装与配置。

Description

分布式文件系统配置方法及装置

技术领域

本发明涉及文件系统配置技术领域，尤其涉及分布式文件系统配置方法及装置。

背景技术

目前，分布式文件系统的使用越来越普及，但分布式文件系统的安装与配置需要在在线环境下进行，无法在离线环境下进行；同时，在配置分布式文件系统时，需要配置人员输入大量的繁琐脚本才能完成部署，配置过程比较繁琐，如此，对于非专业配置人员由于其不懂脚本就无法配置分布式文件系统。

发明内容

本发明实施例提供了分布式文件系统配置方法及装置。所述技术方案如下：

根据本发明实施例的第一方面，提供了一种分布式文件系统配置方法，所述配置方法适用于离线环境，所述配置方法包括：

接收通过图形化配置界面输入的文件系统配置参数；

根据所述文件系统配置参数调用RPC发送程序；

通过所述RPC发送程序调用相应的RPC服务程序；

基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统。

在一个实施例中，所述文件系统配置参数包括以下至少一项参数：文件系统创建参数、文件系统删除参数、文件系统客户端配置参数以及文件系统的任务处理参数；

基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统，包括：

将所述文件系统配置参数传递至所述RPC服务程序，以使所述RPC服务程序执行与所述配置参数相应的文件系统配置操作。

在一个实施例中，所述文件系统配置参数包括：与存储服务器相关的服务器配置参数；

所述基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统，包括：

将所述服务器配置参数传递至所述RPC服务程序，以使所述RPC服务程序为所述分布式文件系统中的多个存储服务器进行目标配置操作，其中，所述目标配置操作包括以下至少一项：

在所述多个存储服务器中配置至少一组互为高可用服务器，所述至少一组互为高可用服务器中的每一组互为高可用服务器包括至少两个存储服务器；

为所述多个存储服务器中各存储服务器配置可挂载磁盘，所述可挂载磁盘为磁盘阵列中的磁盘；

为所述多个存储服务器中各存储服务器配置磁盘的格式化；

为所述多个存储服务器中各存储服务器配置磁盘容量；

为所述多个存储服务器中各存储服务器配置主机系统。

在一个实施例中，所述方法还包括：

在为所述分布式文件系统配置完至少一组互为高可用服务器之后，控制每一组互为高可用服务器所包含的存储服务器之间相互发生心跳包；

当任一组互为高可用服务器所包含的存储服务器中的一个存储服务器在预设心跳时间内未回复向其发送心跳包的另一存储服务器时，控制所述另一存储服务器关闭所述一个存储服务器的主机电源，并将所述一个存储服务器的可挂载磁盘挂载至所述另一存储服务器上。

在一个实施例中，所述在所述多个存储服务器中配置至少一组互为高可用服务器，包括：

从所述多个存储服务器中选择若干个存储服务器；

将所述若干个存储服务器添加至高可用服务器集群中；

在所述若干个存储服务器中任意两个存储服务器之间执行互为高可用认证；

将通过互为高可用认证的存储服务器作为一组互为高可用服务器，以完成至少一组互为高可用服务器的配置。

根据本发明实施例的第二方面，提供了一种分布式文件系统配置装置，所述配置装置适用于离线环境，所述配置装置包括：

接收模块，用于接收通过图形化配置界面输入的文件系统配置参数；

第一调用模块，用于根据所述文件系统配置参数调用RPC发送程序；

第二调用模块，用于通过所述RPC发送程序调用相应的RPC服务程序；

配置模块，用于基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统。

在一个实施例中，所述文件系统配置参数包括以下至少一项参数：文件系统创建参数、文件系统删除参数、文件系统客户端配置参数以及文件系统的任务处理参数；

所述配置模块包括：

第一处理子模块，用于将所述文件系统配置参数传递至所述RPC服务程序，以使所述RPC服务程序执行与所述配置参数相应的文件系统配置操作。

在一个实施例中，所述文件系统配置参数包括：与存储服务器相关的服务器配置参数；

所述配置模块包括：

第二处理子模块，用于将所述服务器配置参数传递至所述RPC服务程序，以使所述RPC服务程序为所述分布式文件系统中的多个存储服务器进行目标配置操作，其中，所述目标配置操作包括以下至少一项：

在所述多个存储服务器中配置至少一组互为高可用服务器，所述至少一组互为高可用服务器中的每一组互为高可用服务器包括至少两个存储服务器；

为所述多个存储服务器中各存储服务器配置可挂载磁盘，所述可挂载磁盘为磁盘阵列中的磁盘；

为所述多个存储服务器中各存储服务器配置磁盘的格式化；

为所述多个存储服务器中各存储服务器配置磁盘容量；

为所述多个存储服务器中各存储服务器配置主机系统。

在一个实施例中，所述装置还包括：

第一控制模块，用于在为所述分布式文件系统配置完至少一组互为高可用服务器之后，控制每一组互为高可用服务器所包含的存储服务器之间相互发生心跳包；

第二控制模块，用于当任一组互为高可用服务器所包含的存储服务器中的一个存储服务器在预设心跳时间内未回复向其发送心跳包的另一存储服务器时，控制所述另一存储服务器关闭所述一个存储服务器的主机电源，并将所述一个存储服务器的可挂载磁盘挂载至所述另一存储服务器上。

在一个实施例中，所述第二处理子模块具体用于：

从所述多个存储服务器中选择若干个存储服务器；

将所述若干个存储服务器添加至高可用服务器集群中；

在所述若干个存储服务器中任意两个存储服务器之间执行互为高可用认证；

将通过互为高可用认证的存储服务器作为一组互为高可用服务器，以完成至少一组互为高可用服务器的配置。

本发明的实施例提供的技术方案可以包括以下有益效果：

通过图形化配置界面输入的文件系统配置参数，可在不需要配置人员输入配置脚本的基础上，利用可视化的配置界面输入的文件系统配置参数对分布式文件系统进行配置，以提高分布式文件系统的配置便捷性，减少分布式文件系统部署过程的工作量与运营成本，具体地，在输入该文件系统配置参数之后，可利用该文件系统配置参数自动调用相应的RPC发送程序，进而通过RPC发送程序调用相应的RPC服务程序，以通过RPC服务程序以及所述文件系统配置参数，自动完成分布式文件系统的图形化自动安装与配置。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1是根据一示例性实施例示出的一种分布式文件系统配置方法的流程图。

图2是根据一示例性实施例示出的一种分布式文件系统配置装置的框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

为了解决上述技术问题，本发明实施例提供了一种分布式文件系统配置方法，该方法分布式文件系统配置程序、系统或装置中，且该方法对应的执行主体可以是服务器，如图1所示，所述配置方法适用于离线环境，该配置方法包括步骤S101至步骤S104：

在步骤S101中，接收通过图形化配置界面输入的文件系统配置参数；

另外，在步骤S101之前，需要根据接收到的命令，在图形化配置界面添加多个存储服务器，这多个存储服务器构成分布式文件系统的服务器，进而才能进行步骤S101以完成对分布式文件系统的配置。当然，在添加时，可通过添加存储服务器的账号密码认证(也可以做免密钥登录)。

在步骤S102中，根据所述文件系统配置参数调用RPC(Remote ProcedureCall，远程过程调用)发送程序；

不同的文件系统配置参数对应的操作类型不同，因而，根据文件系统配置参数可确定当前具体的操作类型，进而根据该操作类型可调用正确的RPC发送程序。操作类型可以是创建分布式文件系统、取消所创建的分布式文件系统、为分布式文件系统配置任务等。

在步骤S103中，通过所述RPC发送程序调用相应的RPC服务程序；

不同的RPC发送程序会对应不用的RPC服务程序，因而，在调用某个RPC发送程序后可自动调用相应的RPC服务程序。

在步骤S104中，基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统。

通过图形化配置界面输入的文件系统配置参数，可在不需要配置人员输入配置脚本的基础上，利用可视化的配置界面输入的文件系统配置参数对分布式文件系统进行配置，可提高分布式文件系统的配置便捷性，减少分布式文件系统部署过程的工作量与运营成本，具体地，在输入该文件系统配置参数之后，可利用该文件系统配置参数自动调用相应的RPC发送程序，进而通过RPC发送程序调用相应的RPC服务程序，以通过RPC服务程序以及所述文件系统配置参数，自动完成分布式文件系统的图形化自动安装与配置。

另外，本申请配置分布式文件系统的过程是在离线环境下进行的，如此，即便在未联网的情况下，也能完成分布式文件系统的配置。

在一个实施例中，所述文件系统配置参数包括以下至少一项参数：文件系统创建参数、文件系统删除参数、文件系统客户端配置参数以及文件系统的任务处理参数；

文件系统配置参数包括但不限于以上参数，还可以包括文件系统重启参数、文件系统升级参数、文件系统名字、文件系统的存储服务器中元数据服务器的标识等。该任务处理参数可以是高可用任务的创建、删除参数等。基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统，包括：

将所述文件系统配置参数传递至所述RPC服务程序，以使所述RPC服务程序执行与所述配置参数相应的文件系统配置操作。

通过将文件系统配置参数传递至RPC服务程序，使得RPC服务程序可自动执行与配置参数相对应的文件系统配置操作，从而对分布式文件系统完成创建、删除、客户端的配置、任务处理操作等。

在一个实施例中，所述文件系统配置参数包括：与存储服务器相关的服务器配置参数；

所述基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统，包括：

将所述服务器配置参数传递至所述RPC服务程序，以使所述RPC服务程序为所述分布式文件系统中的多个存储服务器进行目标配置操作，其中，所述目标配置操作包括以下至少一项：

在所述多个存储服务器中配置至少一组互为高可用服务器，所述至少一组互为高可用服务器中的每一组互为高可用服务器包括至少两个存储服务器；

当与存储服务器相关的服务器配置参数包括磁盘挂载参数时，为所述多个存储服务器中各存储服务器配置可挂载磁盘，所述可挂载磁盘为磁盘阵列中的磁盘；

当与存储服务器相关的服务器配置参数包括磁盘格式化配置参数时，为所述多个存储服务器中各存储服务器配置磁盘的格式化；

当与存储服务器相关的服务器配置参数包括磁盘容量配置参数时，为所述多个存储服务器中各存储服务器配置磁盘容量；

当与存储服务器相关的服务器配置参数包括主机配置参数时，为所述多个存储服务器中各存储服务器配置主机系统(如该存储服务器使用哪个操作系统)。

通过将服务器配置参数传递至RPC服务程序，使得RPC服务程序可自动地为分布式文件系统进行具体的配置操作，如为存储服务器进行高可用配置，配置可挂载磁盘、磁盘的格式化、磁盘容量、主机系统、目录创建等操作，从而在离线环境下完善对分布式文件系统的配置。

其次，本发明的执行主体可以是部署服务器，而部署服务器与多个存储服务器在同一个子网内部，部署服务器与多个存储服务器通过SSH协议(Secure Shell，安全外壳协议)相通信。

另外，RPC服务程序在为分布式文件系统中的多个存储服务器进行目标配置操作的步骤为：RPC服务程序向相应的存储服务器(该相应的存储服务器为服务器配置参数所指向的服务器)发送指令，该指令中携带有服务器配置参数，然后存储服务器执行该指令，从而完成目标配置操作。

最后，目标配置操作包括但不限于上述几种，还可以是控制存储服务器的电源。

在一个实施例中，所述方法还包括：

在为所述分布式文件系统配置完至少一组互为高可用服务器之后，控制每一组互为高可用服务器所包含的存储服务器之间相互发生心跳包；

当至少一组互为高可用服务器中的任一组互为高可用服务器所包含的存储服务器中的一个存储服务器在预设心跳时间内未回复向其发送心跳包的另一存储服务器时，控制所述另一存储服务器关闭所述一个存储服务器的主机电源，并将所述一个存储服务器的可挂载磁盘挂载至所述另一存储服务器上。

在为分布式文件系统配置完至少一组高可用服务器之后，可控制每组互为高可用服务器中所包含的所有存储服务器之间互相发送心跳包，以使每组互为高可用服务器内部的存储服务器能够互相检测对方是否工作正常，具体地，当任一组互为高可用服务器中所包含的所有存储服务器中的一个存储服务器在一定的预设心跳时间内未回复向其发送心跳包的另一存储服务器时，说明前述一个存储服务器发生了故障，无法与前述另一个存储服务器通信，因而，为了避免已经故障的前述一个存储服务器中的存储内容无法被正常访问，可将前述一个存储服务器的主机电源关闭并将前述一个存储服务器的可挂载磁盘挂载至前述另一个存储服务器上，从而发挥前述一个存储服务器与前述另一个存储服务器之间的互为高可用性，确保互为高可用服务器中的任一个服务器故障，仍可通过互为高可用服务器中的其他正常服务器访问已故障的服务器的可挂载磁盘中的存储内容，以确保即便服务器故障业务也不会中断。

同时，由于多个存储服务器的数目可自定义配置，因而，可便捷地实现扩容。

另外，由于本申请既可以在离线环境下配置分布式文件系统又可以将互为高可用服务器中故障存储服务器的可挂载磁盘挂载至正常工作的存储服务器上，因而，为分布式文件系统的平滑升级提供了前提基础，达到整个系统的平滑升级。

在一个实施例中，所述在所述多个存储服务器中配置至少一组互为高可用服务器，包括：

从所述多个存储服务器中选择若干个存储服务器；

将所述若干个存储服务器添加至高可用服务器集群中；

在所述若干个存储服务器中任意两个存储服务器之间执行互为高可用认证；

将通过互为高可用认证的存储服务器作为一组互为高可用服务器，以完成至少一组互为高可用服务器的配置。

在为所述多个存储服务器配置至少一组互为高可用服务器时，可在任意两个存储服务器之间执行互为高可用认证，然后前述任意两个存储服务器通过互为高可用认证之后，可将前述任意两个存储服务器作为一组互为高可用服务器，从而完成一组或多组互为高可用服务器的配置，进而为分布式文件系统配置多组能够互为高可用的服务器。

本实施例的具体过程可以是：

在这任意两个存储服务器之间配置高可用模块，高可用模块由通信层组件、资源管理器以及电源管理模块组成。互为Failover(失效转移)的2个存储服务器之间需要多开启一个网口，两台存储服务器的网口之间，设置一根网线用于彼此之间测试心跳。通信层组件会自动的为2个网口配置同一子网的IP以及相同的组播端口，通信层组件负责高可用集群服务的探活，

互为Failover的2个节点之间需要做认证，高可用模块会启动一个高可用集群，然后将2台节点添加到高可用集群中。

最后，需要明确的是：本领域技术人员可根据实际需求，将上述多个实施例进行自由组合。

对应本发明实施例提供的上述分布式文件系统配置方法，本发明实施例还提供一种分布式文件系统配置装置，所述配置装置适用于离线环境，如图2所示，该装置包括：

接收模块201，用于接收通过图形化配置界面输入的文件系统配置参数；

第一调用模块202，用于根据所述文件系统配置参数调用RPC发送程序；

第二调用模块203，用于通过所述RPC发送程序调用相应的RPC服务程序；

配置模块204，用于基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统。

在一个实施例中，所述文件系统配置参数包括以下至少一项参数：文件系统创建参数、文件系统删除参数、文件系统客户端配置参数以及文件系统的任务处理参数；

所述配置模块包括：

第一处理子模块，用于将所述文件系统配置参数传递至所述RPC服务程序，以使所述RPC服务程序执行与所述配置参数相应的文件系统配置操作。

在一个实施例中，所述文件系统配置参数包括：与存储服务器相关的服务器配置参数；

所述配置模块包括：

第二处理子模块，用于将所述服务器配置参数传递至所述RPC服务程序，以使所述RPC服务程序为所述分布式文件系统中的多个存储服务器进行目标配置操作，其中，所述目标配置操作包括以下至少一项：

在所述多个存储服务器中配置至少一组互为高可用服务器，所述至少一组互为高可用服务器中的每一组互为高可用服务器包括至少两个存储服务器；

为所述多个存储服务器中各存储服务器配置可挂载磁盘，所述可挂载磁盘为磁盘阵列中的磁盘；

为所述多个存储服务器中各存储服务器配置磁盘的格式化；

为所述多个存储服务器中各存储服务器配置磁盘容量；

为所述多个存储服务器中各存储服务器配置主机系统。

在一个实施例中，所述装置还包括：

第一控制模块，用于在为所述分布式文件系统配置完至少一组互为高可用服务器之后，控制每一组互为高可用服务器所包含的存储服务器之间相互发生心跳包；

第二控制模块，用于当任一组互为高可用服务器所包含的存储服务器中的一个存储服务器在预设心跳时间内未回复向其发送心跳包的另一存储服务器时，控制所述另一存储服务器关闭所述一个存储服务器的主机电源，并将所述一个存储服务器的可挂载磁盘挂载至所述另一存储服务器上。

在一个实施例中，所述第二处理子模块具体用于：

从所述多个存储服务器中选择若干个存储服务器；

将所述若干个存储服务器添加至高可用服务器集群中；

在所述若干个存储服务器中任意两个存储服务器之间执行互为高可用认证；

将通过互为高可用认证的存储服务器作为一组互为高可用服务器，以完成至少一组互为高可用服务器的配置。

本领域技术人员在考虑说明书及实践这里发明的发明后，将容易想到本发明的其它实施方案。本申请旨在涵盖本发明的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未发明的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本发明的真正范围和精神由下面的权利要求指出。

应当理解的是，本发明并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本发明的范围仅由所附的权利要求来限制。

Claims (6)

1.一种分布式文件系统配置方法，其特征在于，所述配置方法适用于离线环境，所述配置方法包括：

接收通过图形化配置界面输入的文件系统配置参数；

根据所述文件系统配置参数调用RPC发送程序；

通过所述RPC发送程序调用相应的RPC服务程序；

基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统；

其中，所述文件系统配置参数包括：与存储服务器相关的服务器配置参数；

所述基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统，包括：

将所述服务器配置参数传递至所述RPC服务程序，以使所述RPC服务程序为所述分布式文件系统中的多个存储服务器进行目标配置操作，其中，所述目标配置操作包括以下至少一项：

在所述多个存储服务器中配置至少一组互为高可用服务器，所述至少一组互为高可用服务器中的每一组互为高可用服务器包括至少两个存储服务器；

为所述多个存储服务器中各存储服务器配置可挂载磁盘，所述可挂载磁盘为磁盘阵列中的磁盘；

为所述多个存储服务器中各存储服务器配置磁盘的格式化；

为所述多个存储服务器中各存储服务器配置磁盘容量；

为所述多个存储服务器中各存储服务器配置主机系统；

其中，所述方法还包括：

在为所述分布式文件系统配置完至少一组互为高可用服务器之后，控制每一组互为高可用服务器所包含的存储服务器之间相互发生心跳包；

当任一组互为高可用服务器所包含的存储服务器中的一个存储服务器在预设心跳时间内未回复向其发送心跳包的另一存储服务器时，控制所述另一存储服务器关闭所述一个存储服务器的主机电源，并将所述一个存储服务器的可挂载磁盘挂载至所述另一存储服务器上。

2.根据权利要求1所述的方法，其特征在于，

所述文件系统配置参数包括以下至少一项参数：文件系统创建参数、文件系统删除参数、文件系统客户端配置参数以及文件系统的任务处理参数；

基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统，包括：

将所述文件系统配置参数传递至所述RPC服务程序，以使所述RPC服务程序执行与所述配置参数相应的文件系统配置操作。

3.根据权利要求1所述的方法，其特征在于，

所述在所述多个存储服务器中配置至少一组互为高可用服务器，包括：

从所述多个存储服务器中选择若干个存储服务器；

将所述若干个存储服务器添加至高可用服务器集群中；

在所述若干个存储服务器中任意两个存储服务器之间执行互为高可用认证；

将通过互为高可用认证的存储服务器作为一组互为高可用服务器，以完成至少一组互为高可用服务器的配置。

4.一种分布式文件系统配置装置，其特征在于，所述配置装置适用于离线环境，所述配置装置包括：

接收模块，用于接收通过图形化配置界面输入的文件系统配置参数；

第一调用模块，用于根据所述文件系统配置参数调用RPC发送程序；

第二调用模块，用于通过所述RPC发送程序调用相应的RPC服务程序；

配置模块，用于基于所述RPC服务程序以及所述文件系统配置参数，配置一分布式文件系统；

其中，所述文件系统配置参数包括：与存储服务器相关的服务器配置参数；

所述配置模块包括：

第二处理子模块，用于将所述服务器配置参数传递至所述RPC服务程序，以使所述RPC服务程序为所述分布式文件系统中的多个存储服务器进行目标配置操作，其中，所述目标配置操作包括以下至少一项：

在所述多个存储服务器中配置至少一组互为高可用服务器，所述至少一组互为高可用服务器中的每一组互为高可用服务器包括至少两个存储服务器；

为所述多个存储服务器中各存储服务器配置可挂载磁盘，所述可挂载磁盘为磁盘阵列中的磁盘；

为所述多个存储服务器中各存储服务器配置磁盘的格式化；

为所述多个存储服务器中各存储服务器配置磁盘容量；

为所述多个存储服务器中各存储服务器配置主机系统；

其中，所述装置还包括：

第一控制模块，用于在为所述分布式文件系统配置完至少一组互为高可用服务器之后，控制每一组互为高可用服务器所包含的存储服务器之间相互发生心跳包；

第二控制模块，用于当任一组互为高可用服务器所包含的存储服务器中的一个存储服务器在预设心跳时间内未回复向其发送心跳包的另一存储服务器时，控制所述另一存储服务器关闭所述一个存储服务器的主机电源，并将所述一个存储服务器的可挂载磁盘挂载至所述另一存储服务器上。

5.根据权利要求4所述的装置，其特征在于，

所述文件系统配置参数包括以下至少一项参数：文件系统创建参数、文件系统删除参数、文件系统客户端配置参数以及文件系统的任务处理参数；

所述配置模块包括：

第一处理子模块，用于将所述文件系统配置参数传递至所述RPC服务程序，以使所述RPC服务程序执行与所述配置参数相应的文件系统配置操作。

6.根据权利要求4所述的装置，其特征在于，

所述第二处理子模块具体用于：

从所述多个存储服务器中选择若干个存储服务器；

将所述若干个存储服务器添加至高可用服务器集群中；

在所述若干个存储服务器中任意两个存储服务器之间执行互为高可用认证；

将通过互为高可用认证的存储服务器作为一组互为高可用服务器，以完成至少一组互为高可用服务器的配置。

Images