CN113961213B - 一种BeeGFS高可用配置方法及配置工具 - Google Patents
一种BeeGFS高可用配置方法及配置工具 Download PDFInfo
- Publication number
- CN113961213B CN113961213B CN202111280302.5A CN202111280302A CN113961213B CN 113961213 B CN113961213 B CN 113961213B CN 202111280302 A CN202111280302 A CN 202111280302A CN 113961213 B CN113961213 B CN 113961213B
- Authority
- CN
- China
- Prior art keywords
- configuration
- configuring
- beegfs
- environment
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 25
- 238000007726 management method Methods 0.000 claims description 38
- 238000009434 installation Methods 0.000 claims description 14
- 238000012790 confirmation Methods 0.000 claims description 4
- 238000013468 resource allocation Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 210000004556 brain Anatomy 0.000 description 2
- 238000005336 cracking Methods 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000011900 installation process Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/60—Software deployment
- G06F8/61—Installation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
- G06F8/71—Version control; Configuration management
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Stored Programmes (AREA)
Abstract
本发明提供了一种BeeGFS高可用配置方法及配置工具,所述方法包括配置管理节点,并根据配置文件安装需要的组件包,所述组件包内包括drbd、pcs、corosync、pacemaker;配置ha资源,并检查drbd和pcs的服务状态;在所述服务状态正常时,配置BeeGFS文件系统管理节点所需服务和组件;配置BeeGFS客户端。本发明基于pcs和drbd,创建一种使用双机主备的方式配置BeeGFS的高可用自动配置工具,本发明实施例中只需要两台服务器,并且用户只需在对应服务器节点上运行配置工具,就能简单快速的完成管理服务节点的高可用主备配置,降低用户使用门槛,提高部署成功率和部署效率。
Description
技术领域
本发明涉及集群配置技术领域,尤其是一种BeeGFS高可用配置方法及配置工具。
背景技术
BeeGFS作为一种领先的并行文件系统,使用分布式元数据架构,具备可伸缩和灵活性来满足业务的需求,在高性能集群中使用广泛。BeeGFS文件系统,开发的重点是性能,易于安装和便于管理,在安装部署和易用性方面特点突出,但是在高可用方面存在不足。
BeeGFS文件系统没有原生的高可用支持方案,市场上开发的BeeGFS方案基本上都需要第三方节点做仲裁节点,即需要3台服务器以上,配置过程复杂、成本高。
发明内容
本发明提供了一种BeeGFS高可用配置方法及配置工具,用于解决现有BeeGFS高可用配置方案配置过程复杂、成本高的问题。
为实现上述目的,本发明采用下述技术方案:
本发明第一方面提供了一种BeeGFS高可用配置方法,所述配置方法包括以下步骤:
配置管理节点,并根据配置文件安装需要的组件包,所述组件包内包括drbd、pcs、corosync、pacemaker;
配置ha资源,并检查drbd和pcs的服务状态;
在所述服务状态正常时,配置BeeGFS文件系统管理节点所需服务和组件;
配置BeeGFS客户端。
进一步地,所述配置管理节点之前还包括对配置环境的部署。
进一步地,所述对配置环境的部署包括检查服务器环境是否具备BeeGFS高可用配置要求,检查内容包括本地系统镜像文件和文件系统安装介质。
进一步地,所述对配置环境的部署包括配置环境的初始化,所述初始化包括禁止selinux、停止firewalld和NetworkManager、创建安装路径、修改主机名、配置ssh服务。
进一步地,所述对配置环境的部署包括检查是否具有IB网卡,若有,则安装OFED驱动,并配置IB地址。
进一步地,所述配置ha资源包括:
配置drbd资源并配置防脑裂信息,配置beegfs元数据管理服务资源组;
通过pcs控制集群的方式,来约束两台服务器的管理服务和信息同步;
通过内部心跳来完成ha状态的判断和切换条件的确认。
进一步地,所述管理节点所需服务包括管理服务、元数据服务和对象数据服务。
本发明第二方面提供了一种BeeGFS高可用配置工具,所述配置工具包括:
管理节点配置单元,用于配置管理节点,并根据配置文件安装需要的组件包,所述组件包内包括drbd、pcs、corosync、pacemaker;
资源配置单元,用于配置ha资源,并检查drbd和pcs的服务状态;
服务配置单元,用于在所述服务状态正常时,配置BeeGFS文件系统管理节点所需服务和组件;
客户端配置单元,用于配置BeeGFS客户端。
进一步地,所述配置工具还包括环境部署单元,所述环境部署单元用于对配置环境的部署,所述对配置环境的部署包括检查服务器环境是否具备BeeGFS高可用配置要求、配置环境的初始化和检查是否具有IB网卡。
本发明第三方面提供了一种计算机存储介质,所述计算机存储介质中存储有计算机指令,所述计算机指令在所述配置工具上运行时,使所述配置工具执行所述配置方法的步骤。
本发明第二方面的所述BeeGFS高可用配置工具能够实现第一方面及第一方面的各实现方式中的方法,并取得相同的效果。
发明内容中提供的效果仅仅是实施例的效果,而不是发明所有的全部效果,上述技术方案中的一个技术方案具有如下优点或有益效果:
本发明基于pcs和drbd,创建一种使用双机主备的方式配置BeeGFS的高可用自动配置工具,本发明实施例中只需要两台服务器,并且用户只需在对应服务器节点上运行配置工具,就能简单快速的完成管理服务节点的高可用主备配置,降低用户使用门槛,提高部署成功率和部署效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明所述配置方法实施例的流程示意图;
图2是本发明所述配置方法实施例中其一实现方式的流程示意图;
图3是本发明所述配置工具实施例的结构图。
具体实施方式
为能清楚说明本方案的技术特点,下面通过具体实施方式,并结合其附图,对本发明进行详细阐述。下文的公开提供了许多不同的实施例或例子用来实现本发明的不同结构。为了简化本发明的公开,下文中对特定例子的部件和设置进行描述。此外,本发明可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的,其本身不指示所讨论各种实施例和/或设置之间的关系。应当注意,在附图中所图示的部件不一定按比例绘制。本发明省略了对公知组件和处理技术及工艺的描述以避免不必要地限制本发明。
本发明采用shell编程方法,通过配置drbd和pcs,在两台服务器之间完成BeeGFS的管理配置和服务同步,不依赖第三方节点,就能保证元数据服务在主备节点的正常运行和元数据信息同步,采用快速部署方案,通过在单台服务器上读取配置文件,来完成整个文件系统的部署,配置工具会自动检测服务器是否符合部署条件及配置方案是否完善,并支持简单快速的高可用主备切换测试。
如图1所示,本发明实施例提供的一种BeeGFS高可用配置方法,所述配置方法包括以下步骤:
S1,配置管理节点,并根据配置文件安装需要的组件包,所述组件包内包括drbd、pcs、corosync、pacemaker;
S2,配置ha资源,并检查drbd和pcs的服务状态;
S3,在所述服务状态正常时,配置BeeGFS文件系统管理节点所需服务和组件;
S4,配置BeeGFS客户端。
如图2所示,所述配置管理节点之前还包括对配置环境的部署。
所述对配置环境的部署包括检查服务器环境是否具备BeeGFS高可用配置要求,执行checkenvironment.sh检查服务器环境是否具备,检查内容包括本地系统镜像文件和文件系统安装介质是否存在,若成功,提示执行下一步初始化操作,若失败,生成错误日志,根据日志修改系统环境,修改后重新执行本步骤,直到环境检查成功。
所述对配置环境的部署包括配置环境的初始化,执行./init.sh环境初始化脚本,读取配置文件,并根据配置文件完成服务器初始化操作,所述初始化包括禁止selinux、停止firewalld和NetworkManager、创建安装路径、修改主机名、配置ssh服务。初始化成功后,提示进入安装操作,若初始化失败,生成错误日志,根据日志修改相应错误,修改完成后重新进行初始化操作,直到提示成功。
所述对配置环境的部署包括检查是否具有IB网卡,执行mlnxinstall检查并安装ib驱动,检查是否有Infiniband网卡,若有,则安装OFED驱动,并配置IB地址,若没有,跳过该步骤。
步骤S1中,执行install.sh配置管理节点,同时生成安装日志。
步骤S2中,执行./ha_config安装脚本,通过读取配置文件,配置ha资源。
所述配置ha资源包括:配置drbd资源并配置防脑裂信息,配置beegfs元数据管理服务资源组;通过pcs控制集群的方式,来约束两台服务器的管理服务和信息同步;通过内部心跳来完成ha状态的判断和切换条件的确认。安装完成后进行服务状态检查,检查确认drbd和pcs服务状态,若服务正常则进行文件系统的部署安装。
步骤S3中,执行./beegfs_setup,配置BeeGFS文件系统管理节点所需组件和服务。所述管理节点所需服务包括管理服务、元数据服务和对象数据服务。BeeGFS服务端包含3个组件,三个组件可以安装在1台服务器上也可以安装在不同服务器上,安装过程中默认2台服务器安装所有3个组件。
步骤S4中,执行./client_setup配置BeeGFS客户端,文件系统服务端部署完成后,在客户端执行本脚本,完成客户端的服务配置,完成整体文件系统部署。
上述步骤S3和步骤S4的过程均生成日志分析机制。
如图3所示,本发明实施例还提供了一种BeeGFS高可用配置工具,所述配置工具包括管理节点配置单元1、资源配置单元2、服务配置单元3、客户端配置单元4和环境部署单元5。
管理节点配置单元1用于配置管理节点,并根据配置文件安装需要的组件包,所述组件包内包括drbd、pcs、corosync、pacemaker;资源配置单元2用于配置ha资源,并检查drbd和pcs的服务状态;服务配置单元3用于在所述服务状态正常时,配置BeeGFS文件系统管理节点所需服务和组件;客户端配置单元4用于配置BeeGFS客户端。所述环境部署单元5用于对配置环境的部署,所述对配置环境的部署包括检查服务器环境是否具备BeeGFS高可用配置要求、配置环境的初始化和检查是否具有IB网卡。
本发明实施例还提供了一种计算机存储介质,所述计算机存储介质中存储有计算机指令,所述计算机指令在所述配置工具上运行时,使所述配置工具执行所述配置方法的步骤。
上述虽然结合附图对本发明的具体实施方式进行了描述,但并非对本发明保护范围的限制,所属领域技术人员应该明白,在本发明的技术方案的基础上,本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本发明的保护范围以内。
Claims (6)
1.一种BeeGFS高可用配置方法,其特征是,所述配置方法包括以下步骤:
配置管理节点,并根据配置文件安装需要的组件包,所述组件包内包括drbd、pcs、corosync、pacemaker;
配置ha资源,并检查drbd和pcs的服务状态;
在所述服务状态正常时,配置BeeGFS文件系统管理节点所需服务和组件;
配置BeeGFS客户端;
在配置管理节点之前包括对配置环境的部署,所述对配置环境的部署包括检查服务器环境是否具备BeeGFS高可用配置要求,检查内容包括本地系统镜像文件和文件系统安装介质,若成功,进行配置环境的初始化;
所述配置ha资源包括:
配置drbd资源并配置防脑裂信息,配置BeeGFS元数据管理服务资源组;
通过pcs控制集群的方式,来约束两台服务器的管理服务和信息同步;
通过内部心跳来完成ha状态的判断和切换条件的确认。
2.根据权利要求1所述BeeGFS高可用配置方法,其特征是,所述对配置环境的部署包括配置环境的初始化,所述初始化包括禁止selinux、停止firewalld和NetworkManager、创建安装路径、修改主机名、配置ssh服务。
3.根据权利要求1所述BeeGFS高可用配置方法,其特征是,所述对配置环境的部署包括检查是否具有IB网卡,若有,则安装OFED驱动,并配置IB地址。
4.根据权利要求1所述BeeGFS高可用配置方法,其特征是,所述管理节点所需服务包括管理服务、元数据服务和对象数据服务。
5.一种BeeGFS高可用配置工具,其特征是,所述配置工具包括:
管理节点配置单元,用于配置管理节点,并根据配置文件安装需要的组件包,所述组件包内包括drbd、pcs、corosync、pacemaker;
资源配置单元,用于配置ha资源,并检查drbd和pcs的服务状态;
服务配置单元,用于在所述服务状态正常时,配置BeeGFS文件系统管理节点所需服务和组件;
客户端配置单元,用于配置BeeGFS客户端;
所述配置工具还包括环境部署单元,所述环境部署单元用于对配置环境的部署,所述对配置环境的部署包括检查服务器环境是否具备BeeGFS高可用配置要求,检查内容包括本地系统镜像文件和文件系统安装介质,若成功,进行配置环境的初始化;
所述配置ha资源包括:
配置drbd资源并配置防脑裂信息,配置BeeGFS元数据管理服务资源组;
通过pcs控制集群的方式,来约束两台服务器的管理服务和信息同步;
通过内部心跳来完成ha状态的判断和切换条件的确认。
6.一种计算机存储介质,所述计算机存储介质中存储有计算机指令,其特征是,所述计算机指令在权利要求5所述配置工具上运行时,使所述配置工具执行如权利要求1-4任一项所述配置方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111280302.5A CN113961213B (zh) | 2021-10-29 | 2021-10-29 | 一种BeeGFS高可用配置方法及配置工具 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111280302.5A CN113961213B (zh) | 2021-10-29 | 2021-10-29 | 一种BeeGFS高可用配置方法及配置工具 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113961213A CN113961213A (zh) | 2022-01-21 |
CN113961213B true CN113961213B (zh) | 2023-11-10 |
Family
ID=79468736
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111280302.5A Active CN113961213B (zh) | 2021-10-29 | 2021-10-29 | 一种BeeGFS高可用配置方法及配置工具 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113961213B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105681109A (zh) * | 2016-03-15 | 2016-06-15 | 山东超越数控电子有限公司 | 一种高可用集群管理系统的实现方法及其架构 |
CN110162312A (zh) * | 2019-05-28 | 2019-08-23 | 苏州浪潮智能科技有限公司 | 一种基于IML的BeeGFS配置方法与装置 |
CN112003726A (zh) * | 2020-07-19 | 2020-11-27 | 苏州浪潮智能科技有限公司 | 一种快速部署Beegfs管理服务节点高可用的配置方法 |
-
2021
- 2021-10-29 CN CN202111280302.5A patent/CN113961213B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105681109A (zh) * | 2016-03-15 | 2016-06-15 | 山东超越数控电子有限公司 | 一种高可用集群管理系统的实现方法及其架构 |
CN110162312A (zh) * | 2019-05-28 | 2019-08-23 | 苏州浪潮智能科技有限公司 | 一种基于IML的BeeGFS配置方法与装置 |
CN112003726A (zh) * | 2020-07-19 | 2020-11-27 | 苏州浪潮智能科技有限公司 | 一种快速部署Beegfs管理服务节点高可用的配置方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113961213A (zh) | 2022-01-21 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10275258B2 (en) | Systems and methods for enhancing the availability of multi-tier applications on cloud computing platforms | |
EP3276488B1 (en) | Deployment system for multi-node applications | |
US8332496B2 (en) | Provisioning of operating environments on a server in a networked environment | |
US20140298082A1 (en) | Testing server, information processing system, and testing method | |
CN106941420B (zh) | 一种集群应用环境升级方法及装置 | |
CN107210924B (zh) | 用于配置通信系统的方法和设备 | |
CN113032085A (zh) | 云操作系统的管理方法、装置、服务器、管理系统及介质 | |
US20190364098A1 (en) | Method for managing a software-defined data center | |
US10970105B2 (en) | Storage device operation method and physical server | |
CN110764788B (zh) | 云存储部署方法、装置、计算机设备和可读存储介质 | |
CN106776064B (zh) | 多系统中管理日志的方法及装置 | |
CN113360386B (zh) | 交换芯片驱动测试方法、装置、电子设备和存储介质 | |
CN113961213B (zh) | 一种BeeGFS高可用配置方法及配置工具 | |
US7958397B2 (en) | System for automatically configuring a storage array | |
CN113268254A (zh) | 一种集群系统安装方法、装置、电子设备及存储介质 | |
CN110688130A (zh) | 物理机部署方法、装置、可读存储介质及电子设备 | |
CN111431951B (zh) | 一种数据处理方法、节点设备、系统及存储介质 | |
CN116521081A (zh) | 组板载独立磁盘冗余阵列的方法、装置、设备及存储介质 | |
WO2014036693A1 (zh) | 一种业务部署的方法及装置 | |
CN106161061B (zh) | 业务配置的回滚方法及网络设备 | |
CN112256289A (zh) | 一种自动部署方法、装置及设备 | |
CN117389713B (zh) | 存储系统应用业务数据迁移方法、装置、设备及介质 | |
CN111008043A (zh) | 一种云平台的服务器启动方法及终端 | |
CN117376194B (zh) | 网络检测方法、系统、电子设备及计算机可读存储介质 | |
US11803304B2 (en) | Efficient bit compression for direct mapping of physical memory addresses |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |