CN115757361B - 一种数据库集群系统自动化部署的方法和系统 - Google Patents

Abstract

本发明公开了一种数据库集群系统自动化部署的方法和系统，该方法包括：对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件；对所述数据库集群的运行性能进行实时监测，获取实时监测结果；分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果；其中，对存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理，从而提升数据库部署和运维的时效性，提高大规模数据库集群长期运行的可靠性和可用性，并降低数据库集群部署、管理和运维的总体成本。

Description

一种数据库集群系统自动化部署的方法和系统

技术领域

本发明涉及数据处理和数据库技术领域，具体涉及数据库集群部署，更具体地，涉及一种数据库集群系统自动化部署的方法和系统。

背景技术

集群是一些应用服务器的集合，在这些应用服务器上安装了完全相同的企业应用，作为一个单独的、逻辑意义上的服务器向外提供服务。当其中的某台服务器因为特殊的原因不能提供服务时，其他的服务器能够及时的代替它向用户提供服务，保证服务系统不因为某台服务器不能提供服务而中断提供服务。而数据库集群是基于这些应用服务器统一安装部署数据库软件系统，每台服务器部署相同的数据库环境，在集群部署准备阶段，需要对数据库集群进行统一部署；在实际运行中，为了保障数据库集群实时运行的性能、可用性和可靠性，需要实时地数据库中的所有数据库节点进行维护。

当前，不同的数据库软件产品，对数据库集群部署和维护都提供了不同的集群部署方案，这些部署方案总的来说都是通过备份节点的方式保障集群的高可用性和高可靠性，即在数据库集群中除了部署负责管理任务的服务节点和执行任务的服务节点，还部署了备用节点，备用节点上的应用系统和数据与负责管理任务的服务节点和执行任务的服务节点保持一致，当集群中的某一服务节点出现故障，由备用节点承接该服务节点的执行任务，再由技术人员分析该节点的故障原因，在找到故障原因后，再以手动的方式重新安装数据库系统文件或更改数据库系统配置文件，使得故障的服务节点恢复正常，从而恢复数据库集群的正常运行。

这种方式在数据库集群的出现故障时能够使集群恢复正常，但存在两大问题，无法满足对规模数据集群的部署和运维要求。一、服务节点的故障分析、运维和数据库软件部署、更新基本都需要依赖于人工操作，难以高效应对大规模数据库集群的部署和运维，工作效率低，且无法精准找到故障根本原因，成本也居高不下；二、故障恢复时间较长，一般需要对故障服务节点上的所有数据库系统进行重新安装或升级。

基于此，有必要引入一种新的方法及系统，该方法及系统能够对数据库集群进行自动化部署和运维，以解决现有技术中无法精准找到故障根本原因、运维效率低、大规模数据库集群部署和运维困难、集群部署和管理成本等技术难题，进而实现通过自动化监管和部署的方式，精准找到数据库服务节点具体故障原因，并根据具体故障原因对故障数据库服务节点上的数据库系统文件进行针对性的更新和升级，提升数据库部署和运维的时效性，提高大规模数据库集群长期运行的可靠性和可用性，并降低数据库集群部署、管理和运维的总体成本。

发明内容

针对上面提到的技术问题，本发明提供一种数据库集群系统自动化部署的方法和系统，根据数据库集群的规模创建系统自动配置规则，对所述数据库集群的运行性能进行实时监测和数据库文件的自动部署，解决了现有技术中无法精准找到故障根本原因、运维效率低、大规模数据库集群部署和运维困难、集群部署和管理成本等技术难题，进而实现通过自动化监管和部署的方式，精准找到数据库服务节点具体故障原因，并根据具体故障原因对故障数据库服务节点上的数据库系统文件进行针对性的更新和升级，提升数据库部署和运维的时效性，提高大规模数据库集群长期运行的可靠性和可用性，并降低数据库集群部署、管理和运维的总体成本。

本发明提供一种数据库集群系统自动化部署的方法，所述方法包括：

S101，对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件；

S102，对所述数据库集群的运行性能进行实时监测，获取实时监测结果；

S103，分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果；

其特征在于，所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析，并将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理。

如上所述，所述系统自动配置规则包括7个字段，分别为部署条件、节点认证、节点编号、节点数量、网络传输路径、节点运行状态、系统文件编号；

所述系统文件包括日志文件、数据库操作系统文件和系统配置文件。

如上所述，所述S101，对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件的步骤包括：

S3-1，分别统计并获取所述数据库集群中的所述管理节点的所述节点认证、所述集群节点编号、所述节点数量和所述网络传输路径，所述数据节点的所述节点认证、所述节点编号、所述节点数量和所述网络传输路径，以及所述系统文件的所述系统文件编号，并将所述数据节点的所述部署条件和所述节点运行状态均设置为“初始化”；

S3-2，创建所述数据库集群的所述系统自动配置规则；

S3-3，所述管理节点根据所述数据节点的所述部署条件、所述节点编号和所述网络传输路径，向所述数据节点发送所述节点认证；

S3-4，所述数据节点通过所述节点认证，并向所述管理节点返回节点认证信息；

S3-5，所述管理节点根据所述节点认证信息，通过所述数据节点的所述网络传输路径发送全部所述系统文件；

S3-6，所述数据节点接收并自动安装所述系统文件，并在安装完成向所述管理节点返回安装信息；

S3-7，所述管理节点根据所述安装信息，将所述数据节点的所述节点运行状态均设置为“运行”，所述部署条件设置为“部署成功”；

S3-8，重复步骤S3-6和步骤S3-7，直到全部所述数据节点的所述系统文件安装完成。

如上所述，所述S102，对所述数据库集群的运行性能进行实时监测，获取实时监测结果的步骤包括；

所述管理节点对所述数据节点的运行性能进行实时监测，获取所述数据节点的运行性能监测值；

比较所述运行性能监测值和运行性能阈值，生成所述实时监测结果；

当所述运行性能监测值低于或等于运行性能阈值时，所述实时监测结果为正常；

当所述运行性能监测值高于运行性能阈值时，所述实时监测结果为异常；

其中，所述运行性能阈值由用户根据数据库应用需求设置，具体包括任务处理速度、任务处理资源消耗、网络开销、数据访问速度、数据库系统响应效率、数据加载速度。

如上所述，所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析的步骤包括：

当所述实时监测结果为正常时，所述管理节点继续对所述数据节点的运行性能进行实时监测；

当所述实时监测结果为异常时，所述管理节点获取所述数据节点的所述日志文件和所述系统配置文件，对所述日志文件进行分析得到异常原因，并将所述数据节点的所述节点运行状态设置为“故障”，所述部署条件设置为“待部署”；

确定异常的数据库操作系统文件，所述管理节点根据所述异常原因和所述系统配置文件，确定所述数据库操作系统文件的所述系统文件编号。

如上所述，所述将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理的步骤包括：

所述管理节点根据所述数据库操作系统文件的所述系统文件编号，获取与所述系统文件编号对应的所述数据库操作系统文件，并通过所述网络传输路径将所述数据库操作系统文件发送至所述数据节点；

所述数据节点接收所述数据库操作系统文件，并根据所述系统文件编号，自动替换所述异常的数据库操作系统文件，并更新所述日志文件和所述系统配置文件，向所述管理节点返回替换成功信息；

所述管理节点根据替换成功信息，将所述数据节点的所述节点运行状态设置为“运行”，所述部署条件设置为“部署成功”。

相应的，本发明还提供了一种实施所述数据库集群系统自动化部署的方法的系统，所述系统包括初始化模块、实时监测模块和自动部署模块；

其中，

所述初始化模块，用于对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件；

所述实时监测模块，用于对所述数据库集群的运行性能进行实时监测，获取实时监测结果；

所述自动部署模块，用于分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果；

所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析，并将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理。

本发明通过应用以上技术方案，实现了根据数据库集群的规模创建系统自动配置规则，对所述数据库集群的运行性能进行实时监测和数据库文件的自动部署，解决了现有技术中无法精准找到故障根本原因、运维效率低、大规模数据库集群部署和运维困难、集群部署和管理成本等技术难题，进而实现通过自动化监管和部署的方式，精准找到数据库服务节点具体故障原因，并根据具体故障原因对故障数据库服务节点上的数据库系统文件进行针对性的更新和升级，提升数据库部署和运维的时效性，提高大规模数据库集群长期运行的可靠性和可用性，并降低数据库集群部署、管理和运维的总体成本。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了本发明实施例的一种数据库集群系统自动化部署方法的流程示意图；

图2示出了本发明实施例的一种数据库集群系统自动化部署系统的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明提供一种数据库集群系统自动化部署的方法，如图1所示，所述方法包括以下步骤：

S101，对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件。

本实施例中，所述系统自动配置规则包括7个字段，分别为部署条件、节点认证、节点编号、节点数量、网络传输路径、节点运行状态、系统文件编号；

所述系统文件包括日志文件、数据库操作系统文件和系统配置文件。

为了确保数据库集群成功完成初始化部署，本实施例中，所述S101，对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件的步骤包括：

S3-1，分别统计并获取所述数据库集群中的所述管理节点的所述节点认证、所述集群节点编号、所述节点数量和所述网络传输路径，所述数据节点的所述节点认证、所述节点编号、所述节点数量和所述网络传输路径，以及所述系统文件的所述系统文件编号，并将所述数据节点的所述部署条件和所述节点运行状态均设置为“初始化”；

S3-2，创建所述数据库集群的所述系统自动配置规则；

S3-3，所述管理节点根据所述数据节点的所述部署条件、所述节点编号和所述网络传输路径，向所述数据节点发送所述节点认证；

S3-4，所述数据节点通过所述节点认证，并向所述管理节点返回节点认证信息；

S3-5，所述管理节点根据所述节点认证信息，通过所述数据节点的所述网络传输路径发送全部所述系统文件；

S3-6，所述数据节点接收并自动安装所述系统文件，并在安装完成向所述管理节点返回安装信息；

S3-7，所述管理节点根据所述安装信息，将所述数据节点的所述节点运行状态均设置为“运行”，所述部署条件设置为“部署成功”；

S3-8，重复步骤S3-6和步骤S3-7，直到全部所述数据节点的所述系统文件安装完成。

S102，对所述数据库集群的运行性能进行实时监测，获取实时监测结果。

本实施例中，所述S102，对所述数据库集群的运行性能进行实时监测，获取实时监测结果的步骤包括；

所述管理节点对所述数据节点的运行性能进行实时监测，获取所述数据节点的运行性能监测值；

比较所述运行性能监测值和运行性能阈值，生成所述实时监测结果；

当所述运行性能监测值低于或等于运行性能阈值时，所述实时监测结果为正常；

当所述运行性能监测值高于运行性能阈值时，所述实时监测结果为异常；

其中，所述运行性能阈值由用户根据数据库应用需求设置，具体包括任务处理速度、任务处理资源消耗、网络开销、数据访问速度、数据库系统响应效率、数据加载速度。

S103，分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果。

其中，所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析，并将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理。

为了实时对数据库集群进行监测，在本发明的一些实施例中，所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析的步骤包括：

当所述实时监测结果为正常时，所述管理节点继续对所述数据节点的运行性能进行实时监测；

当所述实时监测结果为异常时，所述管理节点获取所述数据节点的所述日志文件和所述系统配置文件，对所述日志文件进行分析得到异常原因，并将所述数据节点的所述节点运行状态设置为“故障”，所述部署条件设置为“待部署”；

确定异常的数据库操作系统文件，所述管理节点根据所述异常原因和所述系统配置文件，确定所述数据库操作系统文件的所述系统文件编号。

为了对故障的数据节点的系统文件进行自动局部替换，在本发明的一些实施例中，所述将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理的步骤包括：

所述管理节点根据所述数据库操作系统文件的所述系统文件编号，获取与所述系统文件编号对应的所述数据库操作系统文件，并通过所述网络传输路径将所述数据库操作系统文件发送至所述数据节点；

所述数据节点接收所述数据库操作系统文件，并根据所述系统文件编号，自动替换所述异常的数据库操作系统文件，并更新所述日志文件和所述系统配置文件，向所述管理节点返回替换成功信息；

所述管理节点根据替换成功信息，将所述数据节点的所述节点运行状态设置为“运行”，所述部署条件设置为“部署成功”。

通过应用以上技术方案，对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件；对所述数据库集群的运行性能进行实时监测，获取实时监测结果；分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果；实现了根据数据库集群的规模创建系统自动配置规则，对所述数据库集群的运行性能进行实时监测和数据库文件的自动部署，解决了现有技术中无法精准找到故障根本原因、运维效率低、大规模数据库集群部署和运维困难、集群部署和管理成本等技术难题，进而实现通过自动化监管和部署的方式，精准找到数据库服务节点具体故障原因，并根据具体故障原因对故障数据库服务节点上的数据库系统文件进行针对性的更新和升级，提升数据库部署和运维的时效性，提高大规模数据库集群长期运行的可靠性和可用性，并降低数据库集群部署、管理和运维的总体成本。

与本发明实施例中的一种数据库集群系统自动化部署的方法相对应，本发明还公开了一种数据库集群系统自动化部署的系统，如图2所示，所述系统包括初始化模块701、实时监测模块702和自动部署模块703。

其中，

所述初始化模块701，用于对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件；

所述实时监测模块702，用于对所述数据库集群的运行性能进行实时监测，获取实时监测结果；

所述自动部署模块703，用于分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果；

所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析，并将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (4)

1.一种数据库集群系统自动化部署的方法，所述方法包括：

S101，对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件；

S102，对所述数据库集群的运行性能进行实时监测，获取实时监测结果；

S103，分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果；

其特征在于，所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析，并将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理；

其中，所述系统自动配置规则包括7个字段，分别为部署条件、节点认证、节点编号、节点数量、网络传输路径、节点运行状态、系统文件编号；

所述系统文件包括日志文件、数据库操作系统文件和系统配置文件；

所述S101，对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件的步骤包括：

S3-1，分别统计并获取所述数据库集群中的所述管理节点的所述节点认证、所述集群节点编号、所述节点数量和所述网络传输路径，所述数据节点的所述节点认证、所述节点编号、所述节点数量和所述网络传输路径，以及所述系统文件的所述系统文件编号，并将所述数据节点的所述部署条件和所述节点运行状态均设置为“初始化”；

S3-2，创建所述数据库集群的所述系统自动配置规则；

S3-3，所述管理节点根据所述数据节点的所述部署条件、所述节点编号和所述网络传输路径，向所述数据节点发送所述节点认证；

S3-4，所述数据节点通过所述节点认证，并向所述管理节点返回节点认证信息；

S3-5，所述管理节点根据所述节点认证信息，通过所述数据节点的所述网络传输路径发送全部所述系统文件；

S3-6，所述数据节点接收并自动安装所述系统文件，并在安装完成向所述管理节点返回安装信息；

S3-7，所述管理节点根据所述安装信息，将所述数据节点的所述节点运行状态均设置为“运行”，所述部署条件设置为“部署成功”；

S3-8，重复步骤S3-6和步骤S3-7，直到全部所述数据节点的所述系统文件安装完成；

所述S102，对所述数据库集群的运行性能进行实时监测，获取实时监测结果的步骤包括；

所述管理节点对所述数据节点的运行性能进行实时监测，获取所述数据节点的运行性能监测值；

比较所述运行性能监测值和运行性能阈值，生成所述实时监测结果；

当所述运行性能监测值低于或等于运行性能阈值时，所述实时监测结果为正常；

当所述运行性能监测值高于运行性能阈值时，所述实时监测结果为异常；

其中，所述运行性能阈值由用户根据数据库应用需求设置，具体包括任务处理速度、任务处理资源消耗、网络开销、数据访问速度、数据库系统响应效率、数据加载速度。

2.如权利要求1所述的方法，其特征在于，所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析的步骤包括：

当所述实时监测结果为正常时，所述管理节点继续对所述数据节点的运行性能进行实时监测；

当所述实时监测结果为异常时，所述管理节点获取所述数据节点的所述日志文件和所述系统配置文件，对所述日志文件进行分析得到异常原因，并将所述数据节点的所述节点运行状态设置为“故障”，所述部署条件设置为“待部署”；

确定异常的数据库操作系统文件，所述管理节点根据所述异常原因和所述系统配置文件，确定所述数据库操作系统文件的所述系统文件编号。

3.如权利要求2所述的方法，其特征在于，所述将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理的步骤包括：

所述管理节点根据所述数据库操作系统文件的所述系统文件编号，获取与所述系统文件编号对应的所述数据库操作系统文件，并通过所述网络传输路径将所述数据库操作系统文件发送至所述数据节点；

所述数据节点接收所述数据库操作系统文件，并根据所述系统文件编号，自动替换所述异常的数据库操作系统文件，并更新所述日志文件和所述系统配置文件，向所述管理节点返回替换成功信息；

所述管理节点根据替换成功信息，将所述数据节点的所述节点运行状态设置为“运行”，所述部署条件设置为“部署成功”。

4.一种实施权利要求1所述一种数据库集群系统自动化部署的方法的系统，其特征在于，所述系统包括初始化模块、实时监测模块和自动部署模块；

其中，

所述初始化模块，用于对数据库集群进行初始化，对所述数据库集群中的管理节点和数据节点进行统计处理，创建系统自动配置规则，并自动部署系统文件；

所述实时监测模块，用于对所述数据库集群的运行性能进行实时监测，获取实时监测结果；

所述自动部署模块，用于分析所述实时监测结果，对所述数据库集群进行自动化部署，并返回部署结果；

所述数据库集群根据所述系统自动配置规则，以及所述实时监测结果分别对所述管理节点的所述系统文件和所述数据节点的所述系统文件进行分析，并将存在故障的所述管理节点的所述系统文件和所述数据节点的所述系统文件进行自动局部替换处理。