CN104113580A - 基于虚拟机模版的hadoop集群自动化部署技术 - Google Patents
基于虚拟机模版的hadoop集群自动化部署技术 Download PDFInfo
- Publication number
- CN104113580A CN104113580A CN201410050050.0A CN201410050050A CN104113580A CN 104113580 A CN104113580 A CN 104113580A CN 201410050050 A CN201410050050 A CN 201410050050A CN 104113580 A CN104113580 A CN 104113580A
- Authority
- CN
- China
- Prior art keywords
- user
- hadoop cluster
- platform
- virtual machine
- hadoop
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Abstract
本发明公开了基于虚拟机模版的hadoop集群自动化部署技术，主要解决现有的hadoop集群搭建过程繁杂的缺陷，其技术方案是将计算资源的分配和hadoop集群自动化部署整合进云计算平台，以云平台中的虚拟机模版完成计算资源的快速分配。在云计算平台中存储常用操作系统的虚拟主机模版，云平台会通过用户选定的虚拟机模版以及配置参数为用户搭建好hadoop集群所需的计算主机群。然后再通过超算管理平台，自定义要使用的主机以及各主机上需要安装的组件，确认无误后，系统会自动化搭建好hadoop计算集群。
Description
技术领域
本发明专利涉及一种hadoop集群自动化搭建技术，尤其是基于云环境中虚拟机模版的集群部署技术。
背景技术
目前，公知的hadoop集群搭建技术是建立在计算资源齐备的基础上，进行的hadoop集群自动化搭建过程。因而在准备计算资源的阶段，如果是自主实施，则对人员的技术要求比较高，且耗时耗力。如果是找专业公司搭建，然后再采购hadoop自动化搭建系统，过程繁杂，耗时较长。在一定程序上浪费了资金和时间。
发明内容
为了克服现有的hadoop集群搭建过程繁杂的缺陷，本发明专利提出基于云环境中虚拟机模版的集群部署技术。本发明将计算资源的准备过程和hadoop自动化部署过程整合在一起，通过现有的云计算平台提供的虚拟机模版，可以快速准备好计算资源，并进一步完成hadoop集群的便捷搭建。
本发明专利解决其技术问题所采用的技术方案是：在云计算平台中存储常用操作系统的虚拟主机模版，云平台会通过用户选定的虚拟机模版以及配置参数为用户搭建好hadoop集群所需的计算主机群。
本发明还包括一种方法，详细步骤如下：
1) 在云平台中存放一些常用操作系统的虚拟机模版；
2) 用户接入到受理与交付平台，申请hadoop集群的规模及配置参数；
3) 受理与交付平台管理人员审核用户提交的服务受理单；
4) 审核通过的受理单，系统会自动根据受理单中的要求在云计算平台中为用户创建所需规模的主机群；
5) 用户接入到受理与交付平台，查看自己分配到的主机群资源，并获得超算管理平台的接入方式；
6) 用户接入到超算管理平台，通过自定义的方式，选择所需的主机、要安装的组件；
7) 系统根据用户的选择给出hadoop集群的搭建信息总览；
8) 经用户确认后，系统进行hadoop集群的自动化搭建；
9) 搭建完成后，用户可以查看、监控、操作和使用该hadoop集群。
本发明专利的有益效果是：由于本发明是在云平台中以虚拟机模版的形式创建hadoop计算主机群，实现了集群资源的快速准备过程，节省了时间和成本，克服了之前的技术中存在的资源准备过程繁杂的问题，使得hadoop集群的自动化搭建速度大大提高。
附图说明
图1为本发明的技术流程图。
具体实施方式
为了更清楚地介绍本发明提出的基于虚拟机模版的hadoop集群自动化部署技术，下面将结合附图进行详细说明。
本发明专利解决其技术问题所采用的技术方案是：在云计算平台中存储常用操作系统的虚拟主机模版，云平台会通过用户选定的虚拟机模版以及配置参数为用户搭建好hadoop集群所需的计算主机群。
本发明还包括一种方法，参照图1，此方法包括如下步骤：
1) 在云平台中存放一些常用操作系统的虚拟机模版；
2) 用户接入到受理与交付平台，申请hadoop集群的规模及配置参数；
3) 受理与交付平台管理人员审核用户提交的服务受理单；
4) 审核通过的受理单，系统会自动根据受理单中的要求在云计算平台中为用户创建所需规模的主机群；
5) 用户接入到受理与交付平台，查看自己分配到的主机群资源，并获得超算管理平台的接入方式；
6) 用户接入到超算管理平台，通过自定义的方式，选择所需的主机、要安装的组件；
7) 系统根据用户的选择给出hadoop集群的搭建信息总览；
8) 经用户确认后，系统进行hadoop集群的自动化搭建；
9) 搭建完成后，用户可以查看、监控、操作和使用该hadoop集群。
Claims (1)
1.一种hadoop集群自动化部署技术，其特征是，在不影响服务质量并节约成本的前提下实现了集群的便捷部署，将计算资源的分配和hadoop集群自动化部署整合进云计算平台，以云平台中的虚拟机模版完成计算资源的快速分配；包括如下步骤：
1）在云平台中存放一些常用操作系统的虚拟机模版；
2）用户接入到受理与交付平台，申请hadoop集群的规模及配置参数；
3）受理与交付平台管理人员审核用户提交的服务受理单；
4）审核通过的受理单，系统会自动根据受理单中的要求在云计算平台中为用户创建所需规模的主机群；
5）用户接入到受理与交付平台，查看自己分配到的主机群资源，并获得超算管理平台的接入方式；
6）用户接入到超算管理平台，通过自定义的方式，选择所需的主机、要安装的组件；
7）系统根据用户的选择给出hadoop集群的搭建信息总览；
8）经用户确认后，系统进行hadoop集群的自动化搭建；
9）搭建完成后，用户可以查看、监控、操作和使用该hadoop集群。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410050050.0A CN104113580A (zh) | 2014-02-13 | 2014-02-13 | 基于虚拟机模版的hadoop集群自动化部署技术 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410050050.0A CN104113580A (zh) | 2014-02-13 | 2014-02-13 | 基于虚拟机模版的hadoop集群自动化部署技术 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN104113580A true CN104113580A (zh) | 2014-10-22 |
Family
ID=51710213
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410050050.0A Pending CN104113580A (zh) | 2014-02-13 | 2014-02-13 | 基于虚拟机模版的hadoop集群自动化部署技术 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104113580A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105260203A (zh) * | 2015-09-25 | 2016-01-20 | 福州大学 | 一种基于模型的Hadoop部署以及配置方法 |
| CN106982137A (zh) * | 2017-03-08 | 2017-07-25 | 中国人民解放军国防科学技术大学 | 基于麒麟云计算平台的Hadoop集群自动化部署方法 |
| CN107153571A (zh) * | 2017-06-13 | 2017-09-12 | 郑州云海信息技术有限公司 | 一种虚拟化管理节点的部署方法及装置 |
| CN109032757A (zh) * | 2018-07-12 | 2018-12-18 | 贵州电网有限责任公司 | 一种基于云平台的系统框架自动部署时间优化方法 |
| CN109213568A (zh) * | 2018-08-16 | 2019-01-15 | 北京京东尚科信息技术有限公司 | 一种区块链网络服务平台及其部署方法、存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004042575A1 (fr) * | 2002-11-08 | 2004-05-21 | Dunes Technologies S.A. | Methode d'administration de applications sur des machines virtuelles |
| CN102915248A (zh) * | 2012-09-28 | 2013-02-06 | 用友软件股份有限公司 | 应用系统的自动部署系统和自动部署方法 |
| CN103064742A (zh) * | 2012-12-25 | 2013-04-24 | 中国科学院深圳先进技术研究院 | 一种hadoop集群的自动部署系统及方法 |
| CN103561061A (zh) * | 2013-10-17 | 2014-02-05 | 南京邮电大学 | 一种弹性的云数据挖掘平台部署方法 |
-
2014
- 2014-02-13 CN CN201410050050.0A patent/CN104113580A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2004042575A1 (fr) * | 2002-11-08 | 2004-05-21 | Dunes Technologies S.A. | Methode d'administration de applications sur des machines virtuelles |
| CN102915248A (zh) * | 2012-09-28 | 2013-02-06 | 用友软件股份有限公司 | 应用系统的自动部署系统和自动部署方法 |
| CN103064742A (zh) * | 2012-12-25 | 2013-04-24 | 中国科学院深圳先进技术研究院 | 一种hadoop集群的自动部署系统及方法 |
| CN103561061A (zh) * | 2013-10-17 | 2014-02-05 | 南京邮电大学 | 一种弹性的云数据挖掘平台部署方法 |
Non-Patent Citations (1)
| Title |
|---|
| 王茜 等: "《应用于云计算中心的虚拟主机安全防护系统》", 《计算机技术与发展》 * |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105260203A (zh) * | 2015-09-25 | 2016-01-20 | 福州大学 | 一种基于模型的Hadoop部署以及配置方法 |
| CN105260203B (zh) * | 2015-09-25 | 2017-11-17 | 福州大学 | 一种基于模型的Hadoop部署以及配置方法 |
| CN106982137A (zh) * | 2017-03-08 | 2017-07-25 | 中国人民解放军国防科学技术大学 | 基于麒麟云计算平台的Hadoop集群自动化部署方法 |
| CN106982137B (zh) * | 2017-03-08 | 2019-09-20 | 中国人民解放军国防科学技术大学 | 基于麒麟云计算平台的Hadoop集群自动化部署方法 |
| CN107153571A (zh) * | 2017-06-13 | 2017-09-12 | 郑州云海信息技术有限公司 | 一种虚拟化管理节点的部署方法及装置 |
| CN109032757A (zh) * | 2018-07-12 | 2018-12-18 | 贵州电网有限责任公司 | 一种基于云平台的系统框架自动部署时间优化方法 |
| CN109032757B (zh) * | 2018-07-12 | 2022-03-18 | 贵州电网有限责任公司 | 一种基于云平台的系统框架自动部署时间优化方法 |
| CN109213568A (zh) * | 2018-08-16 | 2019-01-15 | 北京京东尚科信息技术有限公司 | 一种区块链网络服务平台及其部署方法、存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104113580A (zh) | 基于虚拟机模版的hadoop集群自动化部署技术 | |
| CN102523254B (zh) | 一种云计算环境自动分配系统资源的方法 | |
| CN110689223B (zh) | 一种基于rpa控制的机器人批量管理系统 | |
| CN104572201B (zh) | 一种基于三维模型的航天器总装信息变更系统及变更方法 | |
| CN105653398B (zh) | 一种智能分配操作系统镜像方法 | |
| CN103218677B (zh) | 流程自动化调度控制方法、装置及系统 | |
| CN106331210A (zh) | 一种云计算网络中的ip地址分配方法及装置 | |
| CN102752394B (zh) | 面向集群站点的发布控制方法和系统 | |
| US9430219B2 (en) | Revision safe upgrade in a hybrid cloud landscape | |
| CN107330045A (zh) | 机票预订平台的大数据可视化分析方法及系统 | |
| CN107071036A (zh) | 一种下载驱动文件的方法、网络服务器及系统 | |
| CN106411650A (zh) | 一种分布式安全保密检查方法 | |
| CN107392052A (zh) | 一种施工图审查用的cad在线标注系统及在线标注方法 | |
| CN104298761A (zh) | 一种异构软件系统间主数据匹配的实现方法 | |
| CN107798120B (zh) | 一种数据转换方法及装置 | |
| CN104967532B (zh) | Toc技术运维系统及应用方法 | |
| CN109656682A (zh) | 一种基于容器技术的勘探开发大数据处理平台的系统和方法 | |
| CN104410511B (zh) | 一种服务器管理方法及系统 | |
| KR102319503B1 (ko) | Vnf 라이선스 관리 기능을 가진 nfvo 및 이를 이용한 vnf 라이선스 관리 방법 | |
| CN104158905B (zh) | web容器的创建方法 | |
| CN109036431A (zh) | 一种语音识别系统和方法 | |
| CN103823750A (zh) | 一种基于云的软件测试服务方法 | |
| CN108230218B (zh) | 多人值机的推送方法、系统、存储介质和电子设备 | |
| CN107256167A (zh) | 应用于应用系统迁移的升级控制方法及升级控制设备 | |
| CN109460831A (zh) | 一种设备检修作业方法、装置和系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20141022 |