CN110519348A - 一种多服务分布式集群部署系统及方法 - Google Patents

Abstract

本申请公开了一种多服务分布式集群部署系统，包括客户端、主节点和从节点，该系统利用客户端和主节点实现自动检测从节点，并根据用户操作划分节点分组进而确定各节点分组的存储服务类型，最终利用主节点实现自动部署。可见，通过在客户端提供后台管理服务，用户可以直接通过客户端划分节点分组确定各节点分组的存储服务类型，最终下达部署命令，实现了自动化部署多服务分布式集群的目的，显著提升了部署效率。此外，本申请还提供了一种多服务分布式集群方法及WEB管理服务平台，其作用与上述系统的作用相对应。

Description

一种多服务分布式集群部署系统及方法

技术领域

本申请涉及存储技术领域，特别涉及一种多服务分布式集群部署系统、方法及WEB管理服务平台。

背景技术

在分布式存储集群相关的领域，分布式存储集群系统一般包含多台存储服务器(Server)，也称为节点，这些服务器组成一个集群统一对外提供服务。

传统分布式存储集群类型按照应用方式上可划分为文件存储、块存储和对象存储，由于集群中单个节点同时只能提供一种存储服务，故往往一套存储集群系统只能支持一种服务类型。针对传统集群单一服务部署方式的不足，可以通过节点分组的方式可以使集群提供多服务。然而，在部署多服务分布式集群的过程中，管理员需通过终端输入相关指令来完成，过程相当繁琐，部署效率低下。

可见，如何提升多服务分布式集群的部署效率，是亟待本领域技术人员解决的问题。

发明内容

本申请的目的是提供一种多服务分布式集群部署系统、方法及WEB管理服务平台，用以解决传统的部署方案在部署多服务分布式集群时部署效率低下的问题。

为解决上述技术问题，本申请提供了一种多服务分布式集群部署系统，包括：客户端、主节点和从节点；

所述客户端用于向所述主节点发送节点检测请求；还用于显示所述主节点检测得到的从节点，根据用户操作将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型，进而向所述主节点发送部署请求；

所述主节点用于根据所述节点检测请求向当前局域网发送广播，以便于所述从节点根据所述广播向所述主节点发送响应信息，以实现节点检测；还用于根据所述部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。

优选的，所述主节点具体用于：根据所述节点检测请求，通过自身的MAC地址利用socket端口向当前局域网发送数据链路层广播，以便于所述从节点根据所述数据链路层广播向所述主节点发送响应信息。

优选的，所述从节点具体用于根据所述数据链路层广播向所述主节点发送MAC地址和序列号。

优选的，所述客户端具体用于：通过HTTP协议或HTTPS协议向所述主节点发送节点检测请求。

优选的，所述客户端具体用于：根据用户操作将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型，其中所述存储服务类型包括以下任意一项或多项：文件存储、块存储、对象存储。

优选的，所述主节点和所述从节点均设置有WEB管理服务平台，所述WEB管理服务平台包括管理模块和代理模块；所述主节点具体用于：根据所述部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，利用自身的管理模块通过SSH协议调用所述主节点和所述从节点的代理模块执行相应的部署操作。

优选的，所述客户端具体用于：根据用户在WEB管理界面输入的IP地址，确定分布式集群中的主节点，并向所述主节点的管理模块发送节点检测请求。

此外，本申请还提供了一种多服务分布式集群部署方法，应用于多服务分布式集群的主节点，包括：

根据客户端发送的节点检测请求，通过所述主节点的MAC地址向当前局域网发送广播，以便于从节点根据所述广播反馈响应信息，以确定检测得到的从节点；

根据所述客户端一侧的用户操作，将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型；

根据所述客户端发送的部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。

最后，本申请还提供了一种WEB管理服务平台，应用于多服务分布式集群的主节点，包括：

节点检测模块：用于根据客户端发送的节点检测请求，通过所述主节点的MAC地址向当前局域网发送广播，以便于从节点根据所述广播反馈响应信息，以确定检测得到的从节点；

分组模块：用于根据所述客户端一侧的用户操作，将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型；

部署模块：用于根据所述客户端发送的部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。

本申请所提供的一种多服务分布式集群部署系统，包括客户端、主节点和从节点，其中客户端用于向主节点发送节点检测请求，主节点用于根据节点检测请求向当前局域网发送广播，以便于从节点根据广播向主节点发送响应信息，以实现节点检测；客户端还用于显示主节点检测得到的从节点，根据用户操作将主节点和从节点划分为多个节点分组，并确定各个节点分组的存储服务类型，进而向主节点发送部署请求，主节点用于根据部署请求，依据划分得到的节点分组和各个节点分组的存储服务类型，对主节点自身和从节点进行相应的部署操作。

综上，该系统利用客户端和主节点实现了自动检测从节点，并根据用户操作划分节点分组进而确定各节点分组的存储服务类型，最终利用主节点实现自动部署。可见，通过在客户端提供后台管理服务，用户可以直接通过客户端划分节点分组确定各节点分组的存储服务类型，最终下达部署命令，实现了自动化部署多服务分布式集群的目的，显著提升了部署效率。

此外，本申请还提供了一种多服务分布式集群方法及WEB管理服务平台，其作用与上述系统的作用相对应，这里不再赘述。

附图说明

为了更清楚的说明本申请实施例或现有技术的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请所提供的一种多服务分布式集群部署系统实施例一的架构示意图；

图2为本申请所提供的一种多服务分布式集群部署系统实施例二的架构示意图；

图3为本申请所提供的一种多服务分布式集群部署系统实施例二的节点检测示意图；

图4为本申请所提供的一种多服务分布式集群部署系统实施例二的节点分组示意图；

图5为本申请所提供的一种多服务分布式集群部署系统实施例二的部署过程示意图；

图6为本申请所提供的一种多服务分布式集群部署方法实施例的实现流程图；

图7为本申请所提供的一种WEB管理服务平台实施例的功能框图。

具体实施方式

本申请的核心是提供一种多服务分布式集群部署系统、方法及WEB管理服务平台，通过在客户端提供后台管理服务，实现了自动化部署多服务分布式集群的目的，显著提升了部署效率。

为了使本技术领域的人员更好地理解本申请方案，下面结合附图和具体实施方式对本申请作进一步的详细说明。显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

下面对本申请提供的一种多服务分布式集群部署系统实施例一进行介绍，参见图1，实施例一包括：客户端101、主节点102和从节点103；

所述客户端101用于向所述主节点102发送节点检测请求；还用于显示所述主节点102检测得到的从节点，根据用户操作将所述主节点102和所述从节点103划分为多个节点分组，并确定各个所述节点分组的存储服务类型，进而向所述主节点102发送部署请求；

所述主节点102用于根据所述节点检测请求向当前局域网发送广播，以便于所述从节点103根据所述广播向所述主节点102发送响应信息，以实现节点检测；还用于根据所述部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点102自身和所述从节点103进行相应的部署操作。

本实施例的目的在于优化多服务分布式集群的部署方式，针对多服务分布式集群部署流程的复杂性，在客户端101提供了后台管理服务。作为一种具体的实施方式，在多服务分布式集群各节点设置WEB管理服务平台，并在各节点的灌装过程中启动该WEB管理服务平台，WEB管理服务平台为客户端101提供后台管理服务，具体的，为管理员提供一个图形化WEB管理界面，可通过浏览器访问WEB管理界面，进而通过WEB管理界面下发上述节点检测请求，并实现节点分组操作以及配置各节点分组的存储服务类型的操作，最终下发上述部署请求，以实现对多服务分布式集群的自动化部署。

具体的，在节点检测过程之后，通过WEB管理界面显示节点检测过程中检测得到的节点，管理员进而可以将其划分成多个节点分组，并设置每个节点分组的存储服务类型，以对外提供服务。值得一提的是，每个节点分组只能提供一种类型的存储服务，一个分布式集群中可以划分多个节点分组。上述存储服务类型主要包括：块存储(Storage AreaNetwork，SAN)、文件存储(Network Attached Storage，NAS)、对象存储(Object Storage、OBJ)。

在确定节点分组和存储服务类型之后，可以将节点分组和存储服务类型的信息通过HTTP/HTTPS协议下发到主节点102，主节点102进而执行自动化部署。可以理解的是，在自动化部署完成后，NAS节点组只配置文件存储相关服务，SAN节点组只配置块服务，OBJ节点组只配置对象服务，节点组间数据隔离，也就是NAS服务对应的业务数据只存在NAS节点组的节点中，SAN和OBJ同理。

本实施例所提供一种多服务分布式集群部署系统，包括客户端、主节点和从节点，其中客户端用于向主节点发送节点检测请求，主节点用于根据节点检测请求向当前局域网发送广播，以便于从节点根据广播向主节点发送响应信息，以实现节点检测；客户端还用于显示主节点检测得到的从节点，根据用户操作将主节点和从节点划分为多个节点分组，并确定各个节点分组的存储服务类型，进而向主节点发送部署请求，主节点用于根据部署请求，依据划分得到的节点分组和各个节点分组的存储服务类型，对主节点自身和从节点进行相应的部署操作。

综上，该系统通过在客户端提供后台管理服务，能够利用客户端和主节点实现自动检测从节点的目的，简单高效；而且支持根据用户操作划分节点分组进而确定各节点分组的存储服务类型，减少手动配置工作；此外，利用主节点实现了对多服务分布式集群的自动化部署，减少手动执行命令，大大提升部署效率，减少人为错误；最后，该系统支持各存储服务间数据隔离，提高可维护性。

下面开始详细介绍本申请提供的一种多服务分布式集群部署系统实施例二，实施例二基于前述实施例一实现，并在实施例一的基础上进行了一定程度上的拓展。实施例二中，一方面，多服务分布式集群中任意节点均可作为主节点；另一方面，主节点通过自身的MAC地址向当前局域网进行数据集链路层广播。

参见图2，实施例二具体包括：客户端201和集群节点202，集群节点202设置有WEB管理服务平台，所述WEB管理服务平台包括管理模块(master)和代理模块(agent)。

首先，所述客户端201用于根据用户在WEB管理界面输入的IP地址，确定分布式集群中的主节点203，也就是说，选中的节点即为主节点203，相应的，集群节点202中的其他节点即为从节点204。具体的，客户端201提供浏览器访问功能，用户在客户端201的浏览器中输入分布式集群任一节点的IP地址，即确定该节点为主节点203，并进入WEB管理界面，在WEB管理界面提供图形化界面，以便于实现多服务分布式集群的部署操作。

然后，如图3所示，所述客户端201通过HTTP协议或HTTPS协议向所述主节点203发送节点检测请求；所述主节点203用于根据所述节点检测请求，通过自身的MAC地址利用socket端口向当前局域网发送数据链路层广播，以便于所述从节点204根据所述数据链路层广播向所述主节点203发送MAC地址和序列号，以实现节点检测。

具体的，主节点203自动发现局域网内所有启动WEB管理服务平台的节点，每个节点上的WEB管理服务平台包括管理模块和代理模块，主节点203的管理模块通过socket通信机制广播到局域网其他节点的代理模块(包括主节点自身的代理模块)，代理模块查询并返回自身的mac地址和序列号给主节点203的管理模块。这样可以发现局域网内所有节点，并展示到WEB管理界面上。

最后，所述客户端201显示所述主节点检测得到的从节点，根据用户操作将所述主节点203和所述从节点204划分为多个节点分组，并确定各个所述节点分组的存储服务类型，进而向所述主节点203发送部署请求。所述主节点203根据所述部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，利用自身的管理模块通过SSH协议调用所述主节点203和所述从节点204的代理模块执行相应的部署操作。

具体的，通过WEB管理界面划分节点组示例如图4所示，在节点检测完成后，在WEB管理界面可以显示检测得到的节点列表，管理员可在WEB管理界面上对当前节点列表进行规划分组，图4是一种规划分组示例，在实际应用场景中，可以规划不同的节点分组去提供不同的服务。然后，如图5所示，管理员在客户端201通过HTTP/HTTPS协议将分组配置信息下发给主节点203的管理模块，管理模块读取配置信息后使用SSH协议调用各节点的代理模块执行对应的节点分组操作和部署操作。

最终，每个节点分组对外提供相应的服务，客户可以根据业务场景去访问对应集群节点分组上的节点，存取数据。并且各节点分组只存储自己所属服务类型的客户数据，节点分组之间数据保持隔离，避免NAS/SAN/OBJ业务数据混杂。

综上，本实施例提供的一种多服务分布式集群部署系统，包括客户端和集群节点，集群节点上设置有WEB管理服务平台，WEB管理服务平台用于为客户端201提供WEB管理界面，WEB管理服务平台包括管理模块和代理模块，在集群节点灌装过程中启动WEN管理服务平台。在部署过程中，首先根据用户在客户端201输入的IP地址确定集群节点中的主节点，并进入WEB管理界面；然后客户端201向主节点203发送节点检测请求，主节点203通过自身的MAC地址利用socket端口向当前局域网发送数据链路层广播，以便于所述从节点204根据所述数据链路层广播向所述主节点203发送MAC地址和序列号，以实现节点检测；客户端201进而显示主节点203检测得到的从节点204列表，根据用户操作将主节点203和从节点204划分为多个节点分组，并确定各个节点分组的存储服务类型，进而向主节点203发送部署请求，最终主节点203依据划分得到的节点分组和各个节点分组的存储服务类型，对主节点203自身和从节点204进行相应的部署操作。

可见，通过在客户端提供后台管理服务，用户可以直接通过客户端划分节点分组确定各节点分组的存储服务类型，最终下达部署命令，实现了自动化部署多服务分布式集群的目的，显著提升了部署效率。

下面对本申请实施例提供的一种多服务分布式集群部署方法进行介绍，下文描述的一种多服务分布式集群部署方法基于上文描述的一种多服务分布式集群部署系统实现，因此，其具体实施过程可以参照上述多服务分布式集群部署系统的介绍。

如图6所示，该多服务分布式集群部署方法应用于多服务分布式集群的主节点，主要包括：

S601、根据客户端发送的节点检测请求，通过所述主节点的MAC地址向当前局域网发送广播，以便于从节点根据所述广播反馈响应信息，以确定检测得到的从节点；

S602、根据所述客户端一侧的用户操作，将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型；

S603、根据所述客户端发送的部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。

本实施例的多服务分布式集群部署方法基于前述的多服务分布式集群部署系统实现，因此该方法的具体实施方式可见前文中的多服务分布式集群部署系统的实施例部分。所以，其具体实施方式可以参照相应的各个部分实施例的描述，在此不再展开介绍。

另外，由于本实施例的多服务分布式集群部署方法基于前述的多服务分布式集群部署系统实现，因此其作用与上述系统的作用相对应，这里不再赘述。

此外，本申请还提供了一种WEB管理服务平台，如图7所示，该WEB管理服务平台可应用于多服务分布式集群的主节点，包括：

节点检测模块701：用于根据客户端发送的节点检测请求，通过所述主节点的MAC地址向当前局域网发送广播，以便于从节点根据所述广播反馈响应信息，以确定检测得到的从节点；

分组模块702：用于根据所述客户端一侧的用户操作，将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型；

部署模块703：用于根据所述客户端发送的部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。

值得一提的是，如前述多服务分布式集群部署实施例中的描述，所述WEB管理服务平台不仅可以应用于多服务分布式集群的主节点，还可以应用于多服务分布式集群的从节点。本实施例仅就WEB管理服务平台应用于多服务分布式集群的主节点的情形进行了描述，其应用于多服务分布式集群的从节点的情形可以参照前述多服务分布式集群部署实施例中的描述，在此不再赘述。

本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。

结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

以上对本申请所提供的方案进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (9)

1.一种多服务分布式集群部署系统，其特征在于，包括：客户端、主节点和从节点；

所述客户端用于向所述主节点发送节点检测请求；还用于显示所述主节点检测得到的从节点，根据用户操作将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型，进而向所述主节点发送部署请求；

所述主节点用于根据所述节点检测请求向当前局域网发送广播，以便于所述从节点根据所述广播向所述主节点发送响应信息，以实现节点检测；还用于根据所述部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。

2.如权利要求1所述的系统，其特征在于，所述主节点具体用于：根据所述节点检测请求，通过自身的MAC地址利用socket端口向当前局域网发送数据链路层广播，以便于所述从节点根据所述数据链路层广播向所述主节点发送响应信息。

3.如权利要求2所述的系统，其特征在于，所述从节点具体用于根据所述数据链路层广播向所述主节点发送MAC地址和序列号。

4.如权利要求1所述的系统，其特征在于，所述客户端具体用于：通过HTTP协议或HTTPS协议向所述主节点发送节点检测请求。

5.如权利要求1所述的系统，其特征在于，所述客户端具体用于：根据用户操作将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型，其中所述存储服务类型包括以下任意一项或多项：文件存储、块存储、对象存储。

6.如权利要求1-5任意一项所述的系统，其特征在于，所述主节点和所述从节点均设置有WEB管理服务平台，所述WEB管理服务平台包括管理模块和代理模块；所述主节点具体用于：根据所述部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，利用自身的管理模块通过SSH协议调用所述主节点和所述从节点的代理模块执行相应的部署操作。

7.如权利要求6所述的系统，其特征在于，所述客户端具体用于：根据用户在WEB管理界面输入的IP地址，确定分布式集群中的主节点，并向所述主节点的管理模块发送节点检测请求。

8.一种多服务分布式集群部署方法，其特征在于，应用于多服务分布式集群的主节点，包括：

根据客户端发送的节点检测请求，通过所述主节点的MAC地址向当前局域网发送广播，以便于从节点根据所述广播反馈响应信息，以确定检测得到的从节点；

根据所述客户端一侧的用户操作，将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型；

根据所述客户端发送的部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。

9.一种WEB管理服务平台，其特征在于，应用于多服务分布式集群的主节点，包括：

节点检测模块：用于根据客户端发送的节点检测请求，通过所述主节点的MAC地址向当前局域网发送广播，以便于从节点根据所述广播反馈响应信息，以确定检测得到的从节点；

分组模块：用于根据所述客户端一侧的用户操作，将所述主节点和所述从节点划分为多个节点分组，并确定各个所述节点分组的存储服务类型；

部署模块：用于根据所述客户端发送的部署请求，依据划分得到的节点分组和各个所述节点分组的存储服务类型，对所述主节点自身和所述从节点进行相应的部署操作。