CN106502742A

CN106502742A - 一种部署Lustre文件系统方法、装置和客户端

Info

Publication number: CN106502742A
Application number: CN201610938683.4A
Authority: CN
Inventors: 秦璞
Original assignee: Zhengzhou Yunhai Information Technology Co Ltd
Current assignee: Zhengzhou Yunhai Information Technology Co Ltd
Priority date: 2016-10-31
Filing date: 2016-10-31
Publication date: 2017-03-15

Abstract

本发明所提供的一种部署Lustre文件系统方法，包括通过Kickstart技术制作部署Lustre文件系统的ISO镜像文件；获取所述ISO镜像文件；利用所述ISO镜像文件部署所述Lustre文件系统；本发明通过使用Kickstart技术制作部署Lustre文件系统的ISO镜像文件，使得利用此ISO镜像文件部署Lustre文件系统的过程中，不需人工参与，并且可以在多台服务器并行部署，减少了工作人员的工作量，并且减少了企业的运营成本。本发明还提供了的一种部署Lustre文件系统装置和客户端，同样具有上述有益效果。

Description

一种部署Lustre文件系统方法、装置和客户端

技术领域

本发明涉及高性能计算领域，特别涉及一种部署Lustre文件系统方法、装置和客户端。

技术背景

随着现代社会科技的发展，大数据已经成为未来发展的一种趋势，随之而来的是对存储设备中大量数据进行管理的文件系统的广泛应用。Lustre是一个以GNUGeneralPublic为许可证的，开源的分布式并行文件系统。由于Lustre文件系统的体系结构具有极好的可扩展性，它得以在科学计算、石油天然气、制造业、金融等领域得到广泛部署。Lustre文件系统可以为其客户端提供包含对共享文件对象的并行存取能力在内的POSIX接口。

Lustre是一个面向对象的文件系统。它由三个部件组成：元数据服务器(Metadataservers,MDSs)、对象存储服务器(objectstorage servers,OSSs)和客户端。如图1所示。Lustre使用块设备来作为文件数据和元数据的存储介质，每个块设备只能由一个Lustre服务管理。Lustre文件系统的容量是所有单个OST的容量之和。客户端通过POSIX I/O系统调用来并行访问和使用数据。

现有技术中，若要部署Lustre文件系统，首先需要人工参与安装操作系统，操作系统安装完成后，还需要配置防火墙、时区和系统分区等参数，然后再安装Lustre文件系统的安装包。可见，现有技术部署Lustre文件系统的过程中，需要人工参与，配置各种参数，使得工作人员的工作量增加，企业的运营成本较高。

发明内容

本发明实施例所要解决的技术问题是，提供一种部署Lustre文件系统方法、装置和客户端，以满足部署Lustre文件系统的过程中不需人工参与。

为解决上述技术问题，本发明提供了一种部署Lustre文件系统方法，该方法包括：

通过Kickstart技术制作部署Lustre文件系统的ISO镜像文件；

获取所述ISO镜像文件；

利用所述ISO镜像文件部署所述Lustre文件系统。

可选的，所述ISO镜像文件的制作，包括：

将指定的安装所述Lustre文件系统的安装包和安装操作系统的软件包打包到指定目录下；

配置无人值守配置文件；其中，所述无人值守配置文件包括防火墙、安装方式、时区和系统分区；

导入指定的安装所述Lustre文件系统的所述安装包，分别编写categroy、group和package字段，并将所述categroy、所述group和所述package字段间的对应关系记录于repodata文件夹下的xxx-comps.xml文件中；

生成所述ISO镜像文件。

可选的，所述软件包，包括：操作系统最小安装软件包。

可选的，所述categroy、所述group和所述package字段间的对应关系，包括：

每个所述categroy里包含一个或多个所述group，每个所述group里包含一个或多个所述package。

可选的，所述安装方式具体为ISO安装方式。

可选的，所述获取ISO镜像文件，包括：

通过网络获取所述ISO镜像文件或从光盘中读取所述ISO镜像文件。

此外，本发明提供了一种部署Lustre文件系统装置，该装置包括：

获取模块，用于获取ISO镜像文件；其中，所述ISO镜像文件为通过Kickstart技术制作部署Lustre文件系统的文件。

部署模块，用于利用所述ISO镜像文件部署所述Lustre文件系统。

可选的，所述获取模块包括：

网络获取模块，用于通过网络获取所述ISO镜像文件；或

光盘获取模块，用于从光盘中读取所述ISO镜像文件。

本发明还提供了一种客户端，包括：如上述任一项所述的部署Lustre文件系统装置。

本发明所提供的一种部署Lustre文件系统方法，包括通过Kickstart技术制作部署Lustre文件系统的ISO镜像文件；获取所述ISO镜像文件；利用所述ISO镜像文件部署所述Lustre文件系统；

可见，本发明通过使用Kickstart技术制作部署Lustre文件系统的ISO镜像文件，使得利用此ISO镜像文件部署Lustre文件系统的过程中，不需人工参与，并且可以在多台服务器并行部署，减少了工作人员的工作量，并且减少了企业的运营成本。本发明还提供了的一种部署Lustre文件系统装置和客户端，同样具有上述有益效果。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为Lustre文件系统架构图；

图2为本发明实施例提供的一种部署Lustre文件系统方法的流程图；

图3为本发明实施例提供的另一种部署Lustre文件系统方法的流程图；

图4为本发明实施例提供的一种部署Lustre文件系统装置的结构图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

请参考图2，图2为本发明实施例提供的一种部署Lustre文件系统方法的流程图。该方法可以包括：

步骤101：通过Kickstart技术制作部署Lustre文件系统的ISO镜像文件。

其中，Kickstart技术为无人工值守安装技术。

可以理解的是，通过Kickstart技术制作出的部署Lustre文件系统的ISO镜像文件，可以实现部署Lustre文件系统的过程中，根据ISO镜像文件中的设置进行Lustre文件系统的安装，而不需要人工配置参数。

需要说明的是，通过Kickstart技术制作部署Lustre文件系统的ISO镜像文件的过程，可以在客户端完成，也可以在任意的计算机中完成，只要可以制作出此ISO镜像文件，本实施例对此ISO镜像文件的制作位置并不做任何限制

可选的，本步骤可以进一步包括：

步骤1011：将指定的安装所述Lustre文件系统的安装包和安装操作系统的软件包打包到指定目录下。

其中，安装Lustre文件系统的安装包可以包括安装Lustre文件系统的依赖包和安装Lustre文件系统的的软件包。操作系统可以为Linux系统。

优选的，操作系统安装所需的软件包可以为操作系统最小安装软件包。可以减少生成的ISO镜像文件的占用空间，节省存储空间。

步骤1012：配置无人值守配置文件；其中，所述无人值守配置文件包括防火墙、安装方式、时区和系统分区。

需要说明的是，无人值守配置文件还可以包括如selinux的其他参数，本实施例对此不受任何限制。

可以理解的是，因为本实施例利用制作出的IOS镜像部署Lustre文件系统，安装方式可以为IOS安装方式。

步骤1013：导入指定的安装所述Lustre文件系统的所述安装包，分别编写categroy、group和package字段，并将所述categroy、group和package字段间的对应关系记录于repodata文件夹下的xxx-comps.xml文件中；

需要说明的是，每个categroy里包含一个或多个group，每个group里包含一个或多个package。

可以理解的是，xxx-comps.xml文件可以根据用户需求任意命名，如可以命名为rmcomp.xml。

步骤1014：生成所述ISO镜像文件。

步骤102：获取所述ISO镜像文件。

其中，获取ISO镜像文件可以通过网络获取所述ISO镜像文件，也可以从光盘中读取所述ISO镜像文件。只要可以获取ISO镜像文件，本实施例对获取ISO镜像文件的方式不做任何限制。

可以理解的是，获取ISO镜像文件的方式可以是需要部署Lustre文件系统的装置根据ISO镜像文件制作后存储位置对应使用的获取方式。如：ISO镜像文件在外部计算机制作后将其存放在光盘中，客户端若需部署Lustre文件系统，则可以通过光驱光盘中读取ISO镜像文件；或者ISO镜像文件在客户端中制作并存储在此客户端中，若此客户端需部署Lustre文件系统，则可省略获取过程，直接利用ISO镜像文件进行Lustre文件系统的部署。

步骤103：利用所述ISO镜像文件部署所述Lustre文件系统。

其中，本步骤可以通过打开IOS镜像文件自动进行Lustre文件系统的部署，部署Lustre文件系统的过程中不需要人工配置各种参数。

可以理解的是，打开IOS镜像文件的的方式可以是双击IOS镜像文件打开，也可以是选定IOS镜像文件直接打开，本实施例对此不受任何限制。

本实施例中，通过使用Kickstart技术制作部署Lustre文件系统的ISO镜像文件，使得利用此ISO镜像文件部署Lustre文件系统的过程中，不需人工参与，并且可以在多台服务器并行部署，减少了工作人员的工作量，并且减少了企业的运营成本。

请参考图3，图3为本发明实施例提供的另一种部署Lustre文件系统方法的流程图。该方法可以包括：

步骤201：将指定的安装Lustre文件系统的安装包和Linux最小安装软件包打包到指定目录下。

需要说明的是，指定目录可以是为放置指定的安装Lustre文件系统的安装包和Linux最小安装软件包而建立的目录，例如/home/source。

步骤202：配置无人值守配置文件。

其中，配置的无人值守配置文件可以为anaconda-ks.cfg。

具体实施中，配置anaconda-ks.cfg的代码可以为如下所示的代码：

步骤203：导入指定的安装所述Lustre文件系统的所述安装包，分别编写categroy、group和package字段。

具体实施中，本步骤可以为如下代码：

<group>

<id>hpc-group</id>

<name>HPC Group</name>

<packagereq type＝"default">lustre</packagereq>

<packagereq type＝"default">kernel</packagereq>

</packagelist>

</group>

<group>

<id>inspur-optimization-tools</id>

<name>Inspur Optimization Tools</name>

<description>Some optimization packages provided by Inspur

company.</description>

<packagereq type＝"default">php-mysql</packagereq>

</packagelist>

</group>

在最后一行的</comps>之前，添加以下内容

<id>inspur-extra</id>

<name>Inspur Extra</name>

<description>Inspur extra Packages</description>

<groupid>inspur-security-group</groupid>

<groupid>inspur-optimization-tools</groupid>

</grouplist>

</category>

步骤204：将所述categroy、所述group和所述package字段间的对应关系记录于repodata文件夹下的rm comps.xml文件中。

具体实施中，本步骤可以通过如下代码实现：

declare-x discinfo＝`head-1.discinfo`

createrepo-u"media://$discinfo"-g comps.xml./

rm comps.xml

步骤205：生成所述ISO镜像文件,并将其存储至光盘。

可以理解的是，生成的ISO镜像文件可以用于批量部署Lustre文件系统。

具体实施中，生成ISO镜像文件的代码可以为如下所示代码：

#mkisofs-o centos6.5Release.iso-V centos6.5Release-bisolinux/isolinux.bin-c isolinux/boot.cat-no-emul-boot-boot-load-size 4-boot-info-table-R-J-v-T/home/source

步骤206：从光盘中读取所述ISO镜像文件。

可以理解的是，因为上一步骤中将ISO镜像文件存储至光盘中，本步骤ISO镜像文件是从光盘中读取得到的。若ISO镜像文件在其他位置存储，对应的获取ISO镜像文件的方式也可以改变。本实施例对此不受任何限制。

步骤207：利用所述ISO镜像文件部署所述Lustre文件系统。

本实施例中，通过使用Kickstart技术制作部署Lustre文件系统的ISO镜像文件，使得利用此ISO镜像文件部署Lustre文件系统的过程中，不需人工参与，并且可以在多台服务器并行部署，减少了工作人员的工作量，并且减少了企业的运营成本。进一步的，通过使用Linux最小安装软件包，减小了生成ISO镜像文件的占用空间，节省了存储ISO镜像文件的存储空间，提高了获取ISO镜像文件的速度。

请参考图4，图4为本发明实施例提供的一种部署Lustre文件系统装置的结构图。该装置可以包括：

获取模块100，用于获取ISO镜像文件。

其中，ISO镜像文件为通过Kickstart技术制作部署Lustre文件系统的文件。

可以理解的是，根据获取方式不同，获取模块100可以为：

网络获取模块，用于通过网络获取所述ISO镜像文件；或

光盘获取模块，用于从光盘中读取所述ISO镜像文件。

需要说明的是，制作ISO镜像文件的装置可以不在本实施例的部署Lustre文件系统装置中，本实施中的部署Lustre文件系统装置只需要获取通过Kickstart技术制作的部署Lustre文件系统的ISO镜像文件就可以完成Lustre文件系统的部署。当然，若制作ISO镜像文件的装置在部署Lustre文件系统装置中，只需要将获取模块100替换成ISO镜像文件生成模块，同样可以达到本实施例的目的，本实施例对此不受任何限制。

部署模块200，用于利用所述ISO镜像文件部署所述Lustre文件系统。

本实施例中，通过获取模块100获取通过Kickstart技术制作的部署Lustre文件系统的ISO镜像文件，使得部署模块200利用此ISO镜像文件部署Lustre文件系统的过程中，不需人工参与，并且可以在多台服务器并行部署，减少了工作人员的工作量，并且减少了企业的运营成本。

本发明实施例还提供一种客户端，包括：如上述任一实施例所述的部署Lustre文件系统装置。

其中，本发明实施例提供的客户端也可以为主机或其他需要部署Lustre文件系统的装置。

需要说明的是，本说明书中的实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。对于装置和客户端实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上对本申请所提供的部署Lustre文件系统方法、装置和客户端进行了详细介绍，本文中应用了具体实施例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims

1.一种部署Lustre文件系统方法，其特征在于，包括：

通过Kickstart技术制作部署Lustre文件系统的ISO镜像文件；

获取所述ISO镜像文件；

利用所述ISO镜像文件部署所述Lustre文件系统。

2.根据权利要求1所述部署Lustre文件系统方法，其特征在于，所述ISO镜像文件的制作，包括：

通过所述软件包、所述无人值守配置文件和所述xxx-comps.xml文件生成所述ISO镜像文件。

3.根据权利要求2所述部署Lustre文件系统方法，其特征在于，所述软件包，包括：操作系统最小安装软件包。

4.根据权利要求2所述部署Lustre文件系统方法，其特征在于，所述categroy、所述group和所述package字段间的对应关系，包括：

5.根据权利要求4所述部署Lustre文件系统方法，其特征在于，所述安装方式具体为ISO安装方式。

6.根据权利要求1至5任一项所述部署Lustre文件系统方法，其特征在于，所述获取ISO镜像文件，包括：

7.一种部署Lustre文件系统装置，其特征在于，包括：

8.根据权利要求4所述部署Lustre文件系统装置，其特征在于，所述获取模块包括：

网络获取模块，用于通过网络获取所述ISO镜像文件；或

光盘获取模块，用于从光盘中读取所述ISO镜像文件。

9.一种客户端，其特征在于，包括：如权利要求7或8所述的部署Lustre文件系统装置。