CN113886009A - 一种云服务平台部署大数据集群的系统及方法 - Google Patents

Abstract

本发明提供一种云服务平台部署大数据集群的系统及方法，所述方法步骤：生成虚拟机集群部署的资源库模块，存储镜像库、存储池、主机集群以及网络资源，并为资源库模块内资源创建查询接口，形成资源库接口模块；用户接口模块获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；根据用户选择的资源库模块的具体参数，从资源库模块选择对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；运行部署完成的虚拟机集群，并对各虚拟机进行设置。本发明实现云服务平台部署大数据集群的高效率、节省部署时间、安全性好，能够带来良好的用户体验。

Description

一种云服务平台部署大数据集群的系统及方法

技术领域

本发明属于云平台集群部署技术领域，具体涉及一种云服务平台部署大数据集群的系统及方法。

背景技术

现有的云服务平台部署大数据集群采用单独部署方式。单独部署方式需要首先单独部署虚拟机，等待所有虚拟机部署完成之后，才能再配置集群关系。若虚拟机数量多，等待的时间会很长。此种单独部署方式，一是部署时间长，因此效率极低，二是技术要求高，因此不方面客户使用，三是发生故障时对运维人员的技术要求，使用成本高。

此为现有技术的不足，因此，针对现有技术中的上述缺陷，提供一种云服务平台部署大数据集群的系统及方法，是非常有必要的。

发明内容

针对现有技术的上述现有云服务器平台部署集群采用单独部署方式，部署时间长，效率低，技术要求高，使用成本高的缺陷，本发明提供一种云服务平台部署大数据集群的系统及方法，以解决上述技术问题。

第一方面，本发明提供一种云服务平台部署大数据集群的系统，包括：

资源库模块，用于存储镜像库、虚拟机模板、存储池、主机集群以及网络资源；虚拟机模板包括管理虚拟机模板和工作虚拟机模板；

资源库接口模块，用于提供镜像库列表查询接口、模板列表查询接口、存储池列表查询接口、主机集群列表查询接口、网络列表查询接口以及大数据集群部署接口；

用户接口模块，用于获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；

集群部署执行模块，用于根据用户选择的资源库模块的具体参数，选择资源库模块的对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；

集群运行模块，用于运行部署完成的虚拟机集群，并对各虚拟机进行设置。

进一步地，资源库模块包括：

镜像库单元，用于存储虚拟机集群部署所需镜像库；

虚拟机模板单元，用于存储虚拟机集群部署所需的虚拟机模板；

存储池单元，用于存储虚拟机集群部署所需的系统盘和数据盘，并将系统盘和数据盘生成的存储池；

主机集群单元，用于存储虚拟机集群部署所需的主机集群；

网络存储单元，用于存储虚拟机集群部署所需的管理网络和业务网络。

进一步地，资源库接口模块包括：

镜像库列表查询接口，用于获取虚拟机集群部署所需的所有镜像库，生成镜像库列表，提供给用户进行镜像库配置查询；

模板列表查询接口，用于获取虚拟机集群部署所需的工作虚拟机模板和管理虚拟机模板，生成模板列表，提供给用户进行模板配置查询；

存储池列表查询接口，用于获取虚拟机集群部署所需的存储池，生成存储池列表，提供给用户进行存储池配置查询；

主机集群列表接口，用于获取虚拟机集群部署所需的主机集群，生成主机集群列表，提供给用户进行主机集群配置查询；

网络列表接口，用于获取用户虚拟机集群部署所需的网络IP、网关以及掩码，生成网络列表，提供给用户进行网络信息配置查询；

大数据集群部署接口，用于接收用户启动虚拟机集群部署的操作。

进一步地，用户接口模块包括：

用户虚拟机集群部署启动单元，用于通过大数据集群部署接口获取用户的部署启动时，启动虚拟机集群部署；

用户虚拟机集群名称接口单元，用于生成提示界面，获取虚拟机集群名称及集群描述信息，并对虚拟机集群名称进行重复性校验；

用户管理虚拟机配置接口单元，用于生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的管理虚拟机模板，配置虚拟机名称前缀、CPU、内存、数据盘大小以及数据盘数量；

用户工作虚拟机接口配置单元，用于生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的工作虚拟机模板，配置名称前缀、CPU、内存、数据盘大小以及数据盘数量；

用户主机集群接口单元，用于生成主机集群选择界面，通过主机集群列表接口选择主机集群下的主机，所述主机包括同一主机集群下的主机和不同主机集群下的主机；

用户主机配置接口单元，用于生成主机配置界面，获取用户选择的主机，并对主机的系统盘、数据盘、管理网络以及业务网选项进行配置；

用户虚拟机网络信息接口单元，用于生成虚拟机信息展示界面，对虚拟机信息进行展示，并通过网络信息查询接口获取用户对虚拟机节点网络信息的配置；

参数对象生成单元，用于获取的虚拟机集群名称，集群描述信息，管理虚拟机和工作虚拟机的名称前缀、CPU、内存、数据盘大小以及数据盘数量，选择的主机，对主机的存储及网络配置，以及虚拟机节点网络信息组装，生成设定格式的参数对象，并把参数对象提供给集群部署执行模块。

进一步地，集群部署执行模块包括：

参数解析单元，用于获取用户选择的具体参数，解析出用户对虚拟机集群的配置参数；

配置参数校验单元，用于对虚拟机集群的配置参数进行校验，并在校验不通过时，提示用户重新配置，以及在校验通过时，进入下一步部署；

工作虚拟机部署单元，用于启动工作虚拟机部署主任务，并将工作虚拟机部署主任务生成若干异步子任务，同时对所有工作虚拟机执行部署，每个异步子任务对应一个工作虚拟机的部署；

异步子任务完成判断单元，用于判断工作虚拟机部署中是否有异步子任务部署失败，并在异步子任务部署失败时，退出工作虚拟机部署主任务；

管理虚拟机部署单元，用于启动管理虚拟机部署主任务，对管理虚拟机执行部署；

集群运行模块包括:

虚拟机开机单元，用于对工作虚拟机进行开机操作，并在所有工作虚拟机都开机后，开启管理虚拟机；

虚拟机开机成功判断单元，用于判定管理虚拟机是否开机成功，并在管理虚拟机未开机成功时，等待管理虚拟机开机成功；

存储挂载单元，用于通过虚拟机底层的linux命令接口，格式化磁盘，挂载磁盘；

主机名称设置单元，用于对虚拟机集群中所有虚拟机的主机设置主机名称；

配置文件生成单元，用于将虚拟机集群中每个虚拟机的IP、主机名称以及主机角色，按照设定格式生成配置文件。

第二方面，本发明提供一种云服务平台部署大数据集群的方法，包括如下步骤：

S1.生成虚拟机集群部署的资源库模块，存储镜像库、存储池、主机集群以及网络资源，并为资源库模块内各资源创建查询接口，各查询接口形成资源库接口模块；

S2.用户接口模块获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；

S3.根据用户选择的资源库模块的具体参数，从资源库模块选择对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；

S4.运行部署完成的虚拟机集群，并对各虚拟机进行设置。

进一步地，步骤S1具体步骤如下：

S11.配置虚拟机集群部署的环境，创建资源库模块；

S12.生成管理虚拟机模板、工作虚拟机模板以及镜像库，并将管理虚拟机模板和工作虚拟机模板放入镜像库，再将镜像库放入资源库模块；

S13.将配置虚拟机集群所需的系统盘和数据盘生成存储池，再将存储池放入资源库模块；

S14.将配置虚拟机集群所需的物理主机生成主机集群，再将主机集群放入资源库模块；

S15.将配置虚拟机集群所需管理网络和数据网络放入资源库模块；

S16.获取镜像库列表、模板列表、存储池列表、主机集群列表、网络列表以及网络信息，生成镜像库列表查询接口、模板列表查询接口、存储池列表查询接口、主机集群列表接口、网络列表查询接口以及网络信息查询接口；

S17.生成大数据部署集群接口，提供给用户进行虚拟机集群部署启动。预先准备好虚拟机集群部署的环境，将虚拟机集群部署所需资源加入资源库模块，并建立接口与资源库模块连接；网络信息包括IP、网络以及子网掩码。

进一步地，步骤S2具体步骤如下：

S21.用户接口模块通过大数据集群部署接口获取到用户部署启动时，启动虚拟机集群部署；

S22.用户接口模块生成提示界面，获取虚拟机集群名称及集群描述信息，并对虚拟机集群名称进行重复性校验；

S23.用户接口模块进行管理虚拟机配置，生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的管理虚拟机模板，配置虚拟机名称前缀、CPU、内存、数据盘大小以及数据盘数量；

S24.用户接口模块进行工作虚拟机配置，生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的工作虚拟机模板，配置名称前缀、CPU、内存、数据盘大小以及数据盘数量；

S25.用户接口模块生成主机集群选择界面，通过主机集群列表接口选择主机集群下的主机，所述主机包括同一主机集群下的主机和不同主机集群下的主机；

S26.用户接口模块生成主机配置界面，获取用户选择的主机，并对主机的系统盘、数据盘、管理网络以及业务网选项进行配置；

S27.用户接口模块生成虚拟机信息展示界面，对虚拟机信息进行展示，并通过网络信息查询接口获取用户对虚拟机节点网络信息的配置；

S28.用户接口模块将获取的虚拟机集群名称，集群描述信息，管理虚拟机和工作虚拟机的名称前缀、CPU、内存、数据盘大小以及数据盘数量，选择的主机，对主机的存储及网络配置，以及虚拟机节点网络信息组装，生成设定格式的参数对象，并把参数对象提供给集群部署执行模块。步骤S26中可选择单个主机部署的虚拟机数量，多个主机可部署多个虚拟机，从而充分利用主机资源。大数据集群部署接口为用户启动虚拟机集群部署的接口；提示界面可输出虚拟机集群部署的注意事项提示列表，并对集群名称做重复性校验。

进一步地，步骤S3具体步骤如下:

S31.集群部署执行模块获取用户选择的具体参数，解析出用户对虚拟机集群的配置参数；

S32.集群部署执行模块对虚拟机集群的配置参数进行校验，并在校验不通过时，提示用户重新配置，以及在校验通过时，进入下一步部署；

S33.集群部署执行模块启动工作虚拟机部署主任务，并将工作虚拟机部署主任务生成若干异步子任务，同时对所有工作虚拟机执行部署，每个异步子任务对应一个工作虚拟机的部署；

S34.集群部署执行模块判断工作虚拟机部署中是否有异步子任务部署失败；

若是，输出错误信息，退出工作虚拟机部署主任务，结束；

若否，等待所有异步子任务部署完成，进入步骤S35；

S35.集群部署执行模块启动管理虚拟机部署主任务，对管理虚拟机执行部署，并在管理虚拟机部署完成后，进入下一步。集群部署执行模块对虚拟机集群的配置参数进行校验，如每个主机的虚拟机数量限制，对每个虚拟机的管理网和业务网是否处于同一网段的校验；多个工作虚拟机通过异步子任务同时进行部署。

进一步地，步骤S4具体步骤如下：

S41.集群运行模块对工作虚拟机进行开机操作，并在所有工作虚拟机都开机后，开启管理虚拟机；

S42.集群运行模块判断管理虚拟机是否开机成功；

若是，进入步骤S43；

若否，等待管理虚拟机开机成功后，进入步骤S43；

S43.集群运行模块通过虚拟机底层的linux命令接口，格式化磁盘，挂载磁盘；

S44.集群运行模块对虚拟机集群中所有虚拟机的主机设置主机名称；

S45.集群运行模块将虚拟机集群中每个虚拟机的IP、主机名称以及主机角色，按照设定格式生成配置文件。虚拟机集群部署完成后，可登录管理虚拟机的地址进入到集群管理界面，查看集群状态、各虚拟机信息以及各服务器的状态。

本发明的有益效果在于，

本发明提供的云服务平台部署大数据集群的系统及方法，实现云服务平台大数据集群多个虚拟机的同时部署，并对工作虚拟机和管理虚拟机分别部署，同时虚拟机可部署在同一集群的主机上，也可部署在不同集群的主机上。本发明操作简单，对操作人员技术要求低，节省云服务平台大数据集群部署的时间，提高了部署效率，安全性好，用户体验高。

此外，本发明设计原理可靠，结构简单，具有非常广泛的应用前景。

由此可见，本发明与现有技术相比，具有突出的实质性特点和显著的进步，其实施的有益效果也是显而易见的。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明的云服务平台部署大数据集群的系统实施例1示意图。

图2是本发明的云服务平台部署大数据集群的系统实施例2示意图。

图3是本发明的云服务平台部署大数据集群的方法实施例3流程示意图。

图4是本发明的云服务平台部署大数据集群的方法实施例4流程示意图二。

图5是本发明的云服务平台部署大数据集群的方法实施例4流程示意图二。

图中，1-资源库模块；1.1-镜像库单元；1.2-虚拟机模板单元；1.3-存储池单元；1.4-主机集群单元；1.5-网络存储单元；2-资源库接口模块；2.1-镜像库列表查询接口；2.2-模板列表查询接口；2.3-存储池列表查询接口；2.4-主机集群列表接口；2.5-网络列表接口；2.6-大数据集群部署接口；3-用户接口模块；3.1-用户虚拟机集群部署启动单元；3.2-用户虚拟机集群名称接口单元；3.3-用户管理虚拟机配置接口单元；3.4-用户工作虚拟机接口配置单元；3.5-用户主机集群接口单元；3.6-用户主机配置接口单元；3.7-用户虚拟机网络信息接口单元；3.8-参数对象生成单元；4-集群部署执行模块；4.1-参数解析单元；4.2-配置参数校验单元；4.3-工作虚拟机部署单元；4.4-异步子任务完成判断单元；4.5-管理虚拟机部署单元；5-集群运行模块；5.1-虚拟机开机单元；5.2-虚拟机开机成功判断单元；5.3-存储挂载单元；5.4-主机名称设置单元；5.5-配置文件生成单元。

具体实施方式

为了使本技术领域的人员更好地理解本发明中的技术方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

实施例1：

如图1所示，本发明提供一种云服务平台部署大数据集群的系统，包括：

资源库模块1，用于存储镜像库、虚拟机模板、存储池、主机集群以及网络资源；虚拟机模板包括管理虚拟机模板和工作虚拟机模板；

资源库接口模块2，用于提供镜像库列表查询接口、模板列表查询接口、存储池列表查询接口、主机集群列表查询接口、网络列表查询接口以及大数据集群部署接口；

用户接口模块3，用于获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；

集群部署执行模块4，用于根据用户选择的资源库模块的具体参数，选择资源库模块的对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；

集群运行模块5，用于运行部署完成的虚拟机集群，并对各虚拟机进行设置。

实施例2：

如图2所示，本发明提供一种云服务平台部署大数据集群的系统，包括：

资源库模块1，用于存储镜像库、虚拟机模板、存储池、主机集群以及网络资源；虚拟机模板包括管理虚拟机模板和工作虚拟机模板；资源库模块1包括：

镜像库单元1.1，用于存储虚拟机集群部署所需镜像库；

虚拟机模板单元1.2，用于存储虚拟机集群部署所需的虚拟机模板；

存储池单元1.3，用于存储虚拟机集群部署所需的系统盘和数据盘，并将系统盘和数据盘生成的存储池；

主机集群单元1.4，用于存储虚拟机集群部署所需的主机集群；

网络存储单元1.5，用于存储虚拟机集群部署所需的管理网络和业务网络；

资源库接口模块2，用于提供镜像库列表查询接口、模板列表查询接口、存储池列表查询接口、主机集群列表查询接口、网络列表查询接口以及大数据集群部署接口；资源库接口模块2包括：

镜像库列表查询接口2.1，用于获取虚拟机集群部署所需的所有镜像库，生成镜像库列表，提供给用户进行镜像库配置查询；

模板列表查询接口2.2，用于获取虚拟机集群部署所需的工作虚拟机模板和管理虚拟机模板，生成模板列表，提供给用户进行模板配置查询；

存储池列表查询接口2.3，用于获取虚拟机集群部署所需的存储池，生成存储池列表，提供给用户进行存储池配置查询；

主机集群列表接口2.4，用于获取虚拟机集群部署所需的主机集群，生成主机集群列表，提供给用户进行主机集群配置查询；

网络列表接口2.5，用于获取用户虚拟机集群部署所需的网络IP、网关以及掩码，生成网络列表，提供给用户进行网络信息配置查询；

大数据集群部署接口2.6，用于接收用户启动虚拟机集群部署的操作；

用户接口模块3，用于获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；用户接口模块3包括：

用户虚拟机集群部署启动单元3.1，用于通过大数据集群部署接口获取用户的部署启动时，启动虚拟机集群部署；

用户虚拟机集群名称接口单元3.2，用于生成提示界面，获取虚拟机集群名称及集群描述信息，并对虚拟机集群名称进行重复性校验；

用户管理虚拟机配置接口单元3.3，用于生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的管理虚拟机模板，配置虚拟机名称前缀、CPU、内存、数据盘大小以及数据盘数量；

用户工作虚拟机接口配置单元3.4，用于生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的工作虚拟机模板，配置名称前缀、CPU、内存、数据盘大小以及数据盘数量；

用户主机集群接口单元3.5，用于生成主机集群选择界面，通过主机集群列表接口选择主机集群下的主机，所述主机包括同一主机集群下的主机和不同主机集群下的主机；

用户主机配置接口单元3.6，用于生成主机配置界面，获取用户选择的主机，并对主机的系统盘、数据盘、管理网络以及业务网选项进行配置；

用户虚拟机网络信息接口单元3.7，用于生成虚拟机信息展示界面，对虚拟机信息进行展示，并通过网络信息查询接口获取用户对虚拟机节点网络信息的配置；

参数对象生成单元3.8，用于获取的虚拟机集群名称，集群描述信息，管理虚拟机和工作虚拟机的名称前缀、CPU、内存、数据盘大小以及数据盘数量，选择的主机，对主机的存储及网络配置，以及虚拟机节点网络信息组装，生成设定格式的参数对象，并把参数对象提供给集群部署执行模块；

集群部署执行模块4，用于根据用户选择的资源库模块的具体参数，选择资源库模块的对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；集群部署执行模块4包括：

参数解析单元4.1，用于获取用户选择的具体参数，解析出用户对虚拟机集群的配置参数；

配置参数校验单元4.2，用于对虚拟机集群的配置参数进行校验，并在校验不通过时，提示用户重新配置，以及在校验通过时，进入下一步部署；

工作虚拟机部署单元4.3，用于启动工作虚拟机部署主任务，并将工作虚拟机部署主任务生成若干异步子任务，同时对所有工作虚拟机执行部署，每个异步子任务对应一个工作虚拟机的部署；

异步子任务完成判断单元4.4，用于判断工作虚拟机部署中是否有异步子任务部署失败，并在异步子任务部署失败时，退出工作虚拟机部署主任务；

管理虚拟机部署单元4.5，用于启动管理虚拟机部署主任务，对管理虚拟机执行部署；

集群运行模块5，用于运行部署完成的虚拟机集群，并对各虚拟机进行设置；集群运行模块5包括:

虚拟机开机单元5.1，用于对工作虚拟机进行开机操作，并在所有工作虚拟机都开机后，开启管理虚拟机；

虚拟机开机成功判断单元5.2，用于判定管理虚拟机是否开机成功，并在管理虚拟机未开机成功时，等待管理虚拟机开机成功；

存储挂载单元5.3，用于通过虚拟机底层的linux命令接口，格式化磁盘，挂载磁盘；

主机名称设置单元5.4，用于对虚拟机集群中所有虚拟机的主机设置主机名称；

配置文件生成单元5.5，用于将虚拟机集群中每个虚拟机的IP、主机名称以及主机角色，按照设定格式生成配置文件。

实施例3：

如图3所示，本发明提供一种云服务平台部署大数据集群的方法，包括如下步骤：

S1.生成虚拟机集群部署的资源库模块，存储镜像库、存储池、主机集群以及网络资源，并为资源库模块内各资源创建查询接口，各查询接口形成资源库接口模块；

S2.用户接口模块获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；

S3.根据用户选择的资源库模块的具体参数，从资源库模块选择对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；

S4.运行部署完成的虚拟机集群，并对各虚拟机进行设置。

实施例4：

如图4和图5所示，本发明提供一种云服务平台部署大数据集群的方法，包括如下步骤：

S1.生成虚拟机集群部署的资源库模块，存储镜像库、存储池、主机集群以及网络资源，并为资源库模块内各资源创建查询接口，各查询接口形成资源库接口模块；具体步骤如下：

S11.配置虚拟机集群部署的环境，创建资源库模块；

S12.生成管理虚拟机模板、工作虚拟机模板以及镜像库，并将管理虚拟机模板和工作虚拟机模板放入镜像库，再将镜像库放入资源库模块；

S13.将配置虚拟机集群所需的系统盘和数据盘生成存储池，再将存储池放入资源库模块；

S14.将配置虚拟机集群所需的物理主机生成主机集群，再将主机集群放入资源库模块；

S15.将配置虚拟机集群所需管理网络和数据网络放入资源库模块；

S16.获取镜像库列表、模板列表、存储池列表、主机集群列表、网络列表以及网络信息，生成镜像库列表查询接口、模板列表查询接口、存储池列表查询接口、主机集群列表接口、网络列表查询接口以及网络信息查询接口；

S17.生成大数据部署集群接口，提供给用户进行虚拟机集群部署启动；

S2.用户接口模块获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；具体步骤如下：

S21.用户接口模块通过大数据集群部署接口获取到用户部署启动时，启动虚拟机集群部署；

S22.用户接口模块生成提示界面，获取虚拟机集群名称及集群描述信息，并对虚拟机集群名称进行重复性校验；

S23.用户接口模块进行管理虚拟机配置，生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的管理虚拟机模板，配置虚拟机名称前缀、CPU、内存、数据盘大小以及数据盘数量；

S24.用户接口模块进行工作虚拟机配置，生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的工作虚拟机模板，配置名称前缀、CPU、内存、数据盘大小以及数据盘数量；

S25.用户接口模块生成主机集群选择界面，通过主机集群列表接口选择主机集群下的主机，所述主机包括同一主机集群下的主机和不同主机集群下的主机；

S26.用户接口模块生成主机配置界面，获取用户选择的主机，并对主机的系统盘、数据盘、管理网络以及业务网选项进行配置；

S27.用户接口模块生成虚拟机信息展示界面，对虚拟机信息进行展示，并通过网络信息查询接口获取用户对虚拟机节点网络信息的配置；

S28.用户接口模块将获取的虚拟机集群名称，集群描述信息，管理虚拟机和工作虚拟机的名称前缀、CPU、内存、数据盘大小以及数据盘数量，选择的主机，对主机的存储及网络配置，以及虚拟机节点网络信息组装，生成设定格式的参数对象，并把参数对象提供给集群部署执行模块；

S3.根据用户选择的资源库模块的具体参数，从资源库模块选择对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；具体步骤如下:

S31.集群部署执行模块获取用户选择的具体参数，解析出用户对虚拟机集群的配置参数；

S32.集群部署执行模块对虚拟机集群的配置参数进行校验，并在校验不通过时，提示用户重新配置，以及在校验通过时，进入下一步部署；

S33.集群部署执行模块启动工作虚拟机部署主任务，并将工作虚拟机部署主任务生成若干异步子任务，同时对所有工作虚拟机执行部署，每个异步子任务对应一个工作虚拟机的部署；

S34.集群部署执行模块判断工作虚拟机部署中是否有异步子任务部署失败；

若是，输出错误信息，退出工作虚拟机部署主任务，结束；

若否，等待所有异步子任务部署完成，进入步骤S35；

S35.集群部署执行模块启动管理虚拟机部署主任务，对管理虚拟机执行部署，并在管理虚拟机部署完成后，进入下一步；

S4.运行部署完成的虚拟机集群，并对各虚拟机进行设置；具体步骤如下：

S41.集群运行模块对工作虚拟机进行开机操作，并在所有工作虚拟机都开机后，开启管理虚拟机；

S42.集群运行模块判断管理虚拟机是否开机成功；

若是，进入步骤S43；

若否，等待管理虚拟机开机成功后，进入步骤S43；

S43.集群运行模块通过虚拟机底层的linux命令接口，格式化磁盘，挂载磁盘；

S44.集群运行模块对虚拟机集群中所有虚拟机的主机设置主机名称；

S45.集群运行模块将虚拟机集群中每个虚拟机的IP、主机名称以及主机角色，按照设定格式生成配置文件。

尽管通过参考附图并结合优选实施例的方式对本发明进行了详细描述，但本发明并不限于此。在不脱离本发明的精神和实质的前提下，本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换，而这些修改或替换都应在本发明的涵盖范围内/任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种云服务平台部署大数据集群的系统，其特征在于，包括：

资源库模块(1)，用于存储镜像库、虚拟机模板、存储池、主机集群以及网络资源；虚拟机模板包括管理虚拟机模板和工作虚拟机模板；

资源库接口模块(2)，用于提供镜像库列表查询接口、模板列表查询接口、存储池列表查询接口、主机集群列表查询接口、网络列表查询接口以及大数据集群部署接口；

用户接口模块(3)，用于获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；

集群部署执行模块(4)，用于根据用户选择的资源库模块的具体参数，选择资源库模块的对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；

集群运行模块(5)，用于运行部署完成的虚拟机集群，并对各虚拟机进行设置。

2.如权利要求1所述的云服务平台部署大数据集群的系统，其特征在于，资源库模块(1)包括：

镜像库单元(1.1)，用于存储虚拟机集群部署所需镜像库；

虚拟机模板单元(1.2)，用于存储虚拟机集群部署所需的虚拟机模板；

存储池单元(1.3)，用于存储虚拟机集群部署所需的系统盘和数据盘，并将系统盘和数据盘生成的存储池；

主机集群单元(1.4)，用于存储虚拟机集群部署所需的主机集群；

网络存储单元(1.5)，用于存储虚拟机集群部署所需的管理网络和业务网络。

3.如权利要求1所述的云服务平台部署大数据集群的系统，其特征在于，资源库接口模块(2)包括：

镜像库列表查询接口(2.1)，用于获取虚拟机集群部署所需的所有镜像库，生成镜像库列表，提供给用户进行镜像库配置查询；

模板列表查询接口(2.2)，用于获取虚拟机集群部署所需的工作虚拟机模板和管理虚拟机模板，生成模板列表，提供给用户进行模板配置查询；

存储池列表查询接口(2.3)，用于获取虚拟机集群部署所需的存储池，生成存储池列表，提供给用户进行存储池配置查询；

主机集群列表接口(2.4)，用于获取虚拟机集群部署所需的主机集群，生成主机集群列表，提供给用户进行主机集群配置查询；

网络列表接口(2.5)，用于获取用户虚拟机集群部署所需的网络IP、网关以及掩码，生成网络列表，提供给用户进行网络信息配置查询；

大数据集群部署接口(2.6)，用于接收用户启动虚拟机集群部署的操作。

4.如权利要求1所述的云服务平台部署大数据集群的系统，其特征在于，用户接口模块(3)包括：

用户虚拟机集群部署启动单元(3.1)，用于通过大数据集群部署接口获取用户的部署启动时，启动虚拟机集群部署；

用户虚拟机集群名称接口单元(3.2)，用于生成提示界面，获取虚拟机集群名称及集群描述信息，并对虚拟机集群名称进行重复性校验；

用户管理虚拟机配置接口单元(3.3)，用于生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的管理虚拟机模板，配置虚拟机名称前缀、CPU、内存、数据盘大小以及数据盘数量；

用户工作虚拟机接口配置单元(3.4)，用于生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的工作虚拟机模板，配置名称前缀、CPU、内存、数据盘大小以及数据盘数量；

用户主机集群接口单元(3.5)，用于生成主机集群选择界面，通过主机集群列表接口选择主机集群下的主机，所述主机包括同一主机集群下的主机和不同主机集群下的主机；

用户主机配置接口单元(3.6)，用于生成主机配置界面，获取用户选择的主机，并对主机的系统盘、数据盘、管理网络以及业务网选项进行配置；

用户虚拟机网络信息接口单元(3.7)，用于生成虚拟机信息展示界面，对虚拟机信息进行展示，并通过网络信息查询接口获取用户对虚拟机节点网络信息的配置；

参数对象生成单元(3.8)，用于获取的虚拟机集群名称，集群描述信息，管理虚拟机和工作虚拟机的名称前缀、CPU、内存、数据盘大小以及数据盘数量，选择的主机，对主机的存储及网络配置，以及虚拟机节点网络信息组装，生成设定格式的参数对象，并把参数对象提供给集群部署执行模块。

5.如权利要求1所述的云服务平台部署大数据集群的系统，其特征在于，集群部署执行模块(4)包括：

参数解析单元(4.1)，用于获取用户选择的具体参数，解析出用户对虚拟机集群的配置参数；

配置参数校验单元(4.2)，用于对虚拟机集群的配置参数进行校验，并在校验不通过时，提示用户重新配置，以及在校验通过时，进入下一步部署；

工作虚拟机部署单元(4.3)，用于启动工作虚拟机部署主任务，并将工作虚拟机部署主任务生成若干异步子任务，同时对所有工作虚拟机执行部署，每个异步子任务对应一个工作虚拟机的部署；

异步子任务完成判断单元(4.4)，用于判断工作虚拟机部署中是否有异步子任务部署失败，并在异步子任务部署失败时，退出工作虚拟机部署主任务；

管理虚拟机部署单元(4.5)，用于启动管理虚拟机部署主任务，对管理虚拟机执行部署；

集群运行模块(5)包括:

虚拟机开机单元(5.1)，用于对工作虚拟机进行开机操作，并在所有工作虚拟机都开机后，开启管理虚拟机；

虚拟机开机成功判断单元(5.2)，用于判定管理虚拟机是否开机成功，并在管理虚拟机未开机成功时，等待管理虚拟机开机成功；

存储挂载单元(5.3)，用于通过虚拟机底层的linux命令接口，格式化磁盘，挂载磁盘；

主机名称设置单元(5.4)，用于对虚拟机集群中所有虚拟机的主机设置主机名称；

配置文件生成单元(5.5)，用于将虚拟机集群中每个虚拟机的IP、主机名称以及主机角色，按照设定格式生成配置文件。

6.一种云服务平台部署大数据集群的方法，其特征在于，包括如下步骤：

S1.生成虚拟机集群部署的资源库模块，存储镜像库、存储池、主机集群以及网络资源，并为资源库模块内各资源创建查询接口，各查询接口形成资源库接口模块；

S2.用户接口模块获取到用户的集群部署启动时，向用户输出资源库接口模块的对应查询接口，来获取用户选择的资源库模块的具体参数；

S3.根据用户选择的资源库模块的具体参数，从资源库模块选择对应资源，执行虚拟机集群部署，并对管理虚拟机和工作虚拟机分别部署；

S4.运行部署完成的虚拟机集群，并对各虚拟机进行设置。

7.如权利要求6所述的云服务平台部署大数据集群的方法，其特征在于，步骤S1具体步骤如下：

S11.配置虚拟机集群部署的环境，创建资源库模块；

S12.生成管理虚拟机模板、工作虚拟机模板以及镜像库，并将管理虚拟机模板和工作虚拟机模板放入镜像库，再将镜像库放入资源库模块；

S13.将配置虚拟机集群所需的系统盘和数据盘生成存储池，再将存储池放入资源库模块；

S14.将配置虚拟机集群所需的物理主机生成主机集群，再将主机集群放入资源库模块；

S15.将配置虚拟机集群所需管理网络和数据网络放入资源库模块；

S16.获取镜像库列表、模板列表、存储池列表、主机集群列表、网络列表以及网络信息，生成镜像库列表查询接口、模板列表查询接口、存储池列表查询接口、主机集群列表接口、网络列表查询接口以及网络信息查询接口；

S17.生成大数据部署集群接口，提供给用户进行虚拟机集群部署启动。

8.如权利要求6所述的云服务平台部署大数据集群的方法，其特征在于，步骤S2具体步骤如下：

S21.用户接口模块通过大数据集群部署接口获取到用户部署启动时，启动虚拟机集群部署；

S22.用户接口模块生成提示界面，获取虚拟机集群名称及集群描述信息，并对虚拟机集群名称进行重复性校验；

S23.用户接口模块进行管理虚拟机配置，生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的管理虚拟机模板，配置虚拟机名称前缀、CPU、内存、数据盘大小以及数据盘数量；

S24.用户接口模块进行工作虚拟机配置，生成镜像库选择界面，通过镜像库列表查询接口获取用户选择的镜像库，通过模板列表查询接口获取用户选择的工作虚拟机模板，配置名称前缀、CPU、内存、数据盘大小以及数据盘数量；

S25.用户接口模块生成主机集群选择界面，通过主机集群列表接口选择主机集群下的主机，所述主机包括同一主机集群下的主机和不同主机集群下的主机；

S26.用户接口模块生成主机配置界面，获取用户选择的主机，并对主机的系统盘、数据盘、管理网络以及业务网选项进行配置；

S27.用户接口模块生成虚拟机信息展示界面，对虚拟机信息进行展示，并通过网络信息查询接口获取用户对虚拟机节点网络信息的配置；

S28.用户接口模块将获取的虚拟机集群名称，集群描述信息，管理虚拟机和工作虚拟机的名称前缀、CPU、内存、数据盘大小以及数据盘数量，选择的主机，对主机的存储及网络配置，以及虚拟机节点网络信息组装，生成设定格式的参数对象，并把参数对象提供给集群部署执行模块。

9.如权利要求8所述的云服务平台部署大数据集群的方法，其特征在于，步骤S3具体步骤如下:

S31.集群部署执行模块获取用户选择的具体参数，解析出用户对虚拟机集群的配置参数；

S32.集群部署执行模块对虚拟机集群的配置参数进行校验，并在校验不通过时，提示用户重新配置，以及在校验通过时，进入下一步部署；

S33.集群部署执行模块启动工作虚拟机部署主任务，并将工作虚拟机部署主任务生成若干异步子任务，同时对所有工作虚拟机执行部署，每个异步子任务对应一个工作虚拟机的部署；

S34.集群部署执行模块判断工作虚拟机部署中是否有异步子任务部署失败；

若是，输出错误信息，退出工作虚拟机部署主任务，结束；

若否，等待所有异步子任务部署完成，进入步骤S35；

S35.集群部署执行模块启动管理虚拟机部署主任务，对管理虚拟机执行部署，并在管理虚拟机部署完成后，进入下一步。

10.如权利要求6所述的云服务平台部署大数据集群的方法，其特征在于，步骤S4具体步骤如下：

S41.集群运行模块对工作虚拟机进行开机操作，并在所有工作虚拟机都开机后，开启管理虚拟机；

S42.集群运行模块判断管理虚拟机是否开机成功；

若是，进入步骤S43；

若否，等待管理虚拟机开机成功后，进入步骤S43；

S43.集群运行模块通过虚拟机底层的linux命令接口，格式化磁盘，挂载磁盘；

S44.集群运行模块对虚拟机集群中所有虚拟机的主机设置主机名称；

S45.集群运行模块将虚拟机集群中每个虚拟机的IP、主机名称以及主机角色，按照设定格式生成配置文件。

Images