CN103412768A - 一种基于脚本程序自动化部署Zookeeper集群的方法 - Google Patents

一种基于脚本程序自动化部署Zookeeper集群的方法 Download PDF

Info

Publication number
CN103412768A
CN103412768A CN201310307029XA CN201310307029A CN103412768A CN 103412768 A CN103412768 A CN 103412768A CN 201310307029X A CN201310307029X A CN 201310307029XA CN 201310307029 A CN201310307029 A CN 201310307029A CN 103412768 A CN103412768 A CN 103412768A
Authority
CN
China
Prior art keywords
zookeeper
cluster
node
configuration
script
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310307029XA
Other languages
English (en)
Inventor
柯宗贵
柯宗庆
杨育斌
赵必厦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Bluedon Information Security Technologies Co Ltd
Original Assignee
Bluedon Information Security Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Bluedon Information Security Technologies Co Ltd filed Critical Bluedon Information Security Technologies Co Ltd
Priority to CN201310307029XA priority Critical patent/CN103412768A/zh
Publication of CN103412768A publication Critical patent/CN103412768A/zh
Priority to PCT/CN2014/000043 priority patent/WO2015007069A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/60Software deployment
    • G06F8/61Installation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44505Configuring for program initiating, e.g. using registry, configuration files
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08Configuration management of networks or network elements
    • H04L41/0803Configuration setting
    • H04L41/084Configuration by using pre-existing information, e.g. using templates or copying from other elements
    • H04L41/0843Configuration by using pre-existing information, e.g. using templates or copying from other elements based on generic templates

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Stored Programmes (AREA)

Abstract

本发明公开了一种基于脚本程序自动化部署Zookeeper集群的方法,该方法通过使用Python作为脚本语言进行自动化配置,在配置管理节点上,把自动化部署脚本程序和官网下载的Zookeeper程序放在同一个文件夹下,配置好zookeeper-detail.conf和zookeeper-clusters.conf这2个文件,最后运行脚本程序完成自动化配置功能。通过本发明,为需要应用Zookeeper来维护集群一致性的分布式集群系统,例如HBase、Storm等的自动化部署提供理论依据以及实践基础,快速部署并运行起Zookeeper集群节点,为下一步骤的集群软件的搭建与部署工作提供前提条件与可能。

Description

一种基于脚本程序自动化部署Zookeeper集群的方法
技术领域
本发明涉及数据处理技术领域,尤其涉及一种基于脚本程序自动化部署Zookeeper集群的方法。
背景技术
Apache Zookeeper是一个开源的高可靠的分布式协调服务器,是Hadoop子项目中的一种分布式协调系统,用于控制分布式系统中各个组件中的一致性。很多项目中都用到了Zookeeper,包括基于列存储的NoSQL数据库HBase、分布式实时流计算系统Storm、NoSQL数据存储系统Blur等。因此,自动化部署Zookeeper集群,变得很重要,因为可以节省集群部署时间和运维成本。处理大数据的Hadoop集群,有大量的开源社区或者商家研发并提供专门的配置管理工具来自动化部署集群,其中就包含了Zookeeper的自动化部署功能。但是,Hadoop集群外的集群系统,尚无现成的自动化部署Zookeeper集群的方法或者软件工具。
Apache Ambari支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sqoop和Hcatalog等的集中管理,是顶级的hadoop管理工具之一。
Ambari的特性有:
a)通过一步一步的安装向导简化了集群供应。
b)预先配置好关键的运维指标(metrics),可以直接查看Hadoop Core(HDFS和MapReduce)及相关项目(如HBase、Hive和HCatalog)是否健康。
c)支持作业与任务执行的可视化与分析,能够更好地查看依赖和性能。
d)通过一个完整的RESTful API把监控信息暴露出来,集成了现有的运维工具。
e)用户界面非常直观,用户可以轻松有效地查看信息并控制集群。
假如需要部署Hadoop集群,Ambari是个不错的选择方案。但是,如果只是部署Zookeeper集群作为一致性协调系统,在Zookeeper之上还需要部署其它集群,例如Storm、Blur等,Ambari就显得大材小用了。因为,部署完Zookeeper集群之后的工作,已经不属于Ambari的能力范围了。
Cloudera Manager是Cloudera公司开发的Hadoop集群配置管理工具,可以对集群进行快速部署,当然也可以自动化部署Zookeeper集群,只需要提供集群节点的root用户名和密码。Cloudera Manager的功能和Apache Ambari的功能差不多,有些功能甚至更强大。但是Cloudera Manager安装起来比较麻烦,需要联网安装,否则需要配置Yum源才能安装。
因此,为了克服现有技术中的缺陷和不足,本发明提供的自动化部署Zookeeper集群的方法,为所有的集群系统提供了一个可行的解决方案和方法。
发明内容
本发明的目的是为了克服现有技术的缺陷,提供一种基于脚本程序自动化部署Zookeeper集群的方法,该方法通过使用脚本语言自动化部署Zookeeper集群,在配置管理节点上,把自动化部署脚本程序和官网下载的Zookeeper程序放在同一个文件夹下,配置好zookeeper-detail.conf和zookeeper-clusters.conf这2个文件,最后运行脚本程序完成自动化配置功能。具体流程为:
a.脚本程序读取配置文件;
b.脚本程序根据配置文件的信息使用SCP命令传送Zookeeper压缩包文件到集群各个节点;
c.脚本程序SSH到集群各个节点上面解压Zookeeper压缩包文件;
d.脚本程序SSH到集群各个节点配置Zookeeper的环境变量;
e.脚本程序SSH到集群各个节点产生Zookeeper的配置文件;
f.脚本程序SSH到集群各个节点对时间进行统一的设置;
g.脚本程序SSH到集群各个节点上面开放防火墙端口;
h.脚本程序SSH到集群各个节点上面执行启动命令:bin/zkServer.sh start。
在步骤a中,脚本读取zookeeper-detail.conf和zookeeper-clusters.conf的内容,初始化集群系统的参数。
在步骤d中,脚本SSH到集群各个节点上面配置系统级的环境变量,例如/etc/profile文件,或者用户级的环境变量,例如Linux用户名下的.bashrc文件。
在步骤e中,脚本SSH到集群各个节点上面产生配置zoo.cfg文件、myid文件。
本发明技术方案带来的有益效果:通过本发明,为需要应用Zookeeper来维护集群一致性的分布式集群系统,例如HBase、Storm等的自动化部署提供理论依据以及实践基础,快速部署并运行起Zookeeper集群节点,为下一步骤的集群软件的搭建与部署工作提供前提条件与可能。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它的附图。
图1是Linux下手动配置ZooKeeper集群的流程图;
图2是本发明中自动化部署ZooKeeper集群的系统拓扑图;
图3是本发明中自动化部署ZooKeeper集群的方法流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供了一种基于脚本程序自动化部署Zookeeper集群的方法,该方法通过使用Python作为脚本语言进行自动化配置。
本发明中Zookeeper集群的启动,需要满足以下条件:
a)集群节点至少为3个并且为奇数。
b)集群节点之间的时间需要先同步,相差不能超过30秒,否则,很容易出现Leader与Follower之间通信超时,节点自动退出的情况。
c)防火墙要开放相应的Zookeeper监听端口。
d)每个节点执行启动命令的时间要控制好,在超时之前全部节点都要启动完毕。
Linux下手动配置Zookeeper集群的流程如图1所示:
a)从官网下载稳定的Zookeeper版本的压缩包文件到本地并解压缩。
b)配置解压后的文件夹下面的conf/zoo.cfg文件,确定好“ZOOKEEPER_HOME”的存放位置。
c)使用SCP命令传送Zookeeper解压文件夹到集群各个节点的“ZOOKEEPER_HOME”。
d)集群各个节点配置“ZOOKEEPER_HOME”到系统级或者用户级的环境变量。
e)集群各个节点建立myid文件,并写入id编号。
f)对集群各个节点的时间进行同步。
g)集群各个节点的防火墙开放端口或者直接关闭防火墙。
h)集群各个节点执行启动命令:bin/zkServer.sh start。
其中,配置管理节点,可以是Zookeeper集群中的节点。
本发明使用Python作为脚本语言自动化部署Zookeeper集群,pexpert组件实现了主要的交互功能,其集群系统拓扑图如图2所示。
在配置管理节点上,把自动化部署脚本程序和官网下载的Zookeeper程序放在同一个文件夹下,配置好zookeeper-detail.conf和zookeeper-clusters.conf这2个文件,最后运行脚本程序完成自动化配置功能。
zookeeper-detail.conf:主要配置运行Zookeeper集群的“IS_GLOBAL_ZOOKEEPER”、“ZOOKEEPER_HOME”、用户名和密码,以及自动产生的zoo.cfg文件中需要额外配置的参数。
zookeeper-clusters.conf:主要配置Zookeeper集群节点的ip地址、主机名、root密码信息,一行配置一个节点的信息。
假设使用zoouser为用户名和密码来自动化配置3个节点的zookeeper集群,则配置的内容主要有:zookeeper-detail.conf的IS_GLOBAL_ZOOKEEPER、ZOOKEEPER_HOME、ZOOKEEPER_USER、ZOOKEEPER_PASSWORD,zookeeper-clusters.conf的节点信息。IS_GLOBAL_ZOOKEEPER表示是否配置全局的Zookeeper,如果值为1,则配置到系统环境变量(/etc/profile文件)中;否则,配置到用户环境变量(Linux用户名下的.bashrc文件)中。
zookeeper-detail.confzookeeper-clusters.confzookeeper-detail.confzookeeper-clusters.confzookeeper-detail.conf的配置清单:
Figure BDA00003538914700041
Figure BDA00003538914700051
zookeeper-clusters.conf的配置清单:
Figure BDA00003538914700052
本发明方法的执行流程如图3所示:
a)脚本程序读取配置文件
脚本程序读取zookeeper-detail.conf和zookeeper-clusters.conf的内容,初始化集群系统的参数。
b)脚本程序SCP传送压缩包到集群节点
脚本程序根据配置文件的信息使用SCP命令传输压缩包到集群各个节点。
c)脚本程序SSH到集群节点解压Zookeeper的压缩包
脚本程序SSH到集群各个节点上面解压Zookeeper的压缩包文件。
d)脚本程序SSH到集群节点配置Zookeeper的环境变量
脚本程序SSH到集群各个节点上面配置系统环境变量(/etc/profile文件)或者用户环境变量(Linux用户名下的.bashrc文件)。
e)脚本程序SSH到集群节点产生配置文件
脚本程序SSH到集群各个节点上面产生配置zoo.cfg文件、myid文件。
f)脚本程序SSH到集群节点进行时间同步
脚本程序SSH到集群各个节点对时间进行统一的设置。
g)脚本程序SSH到集群节点开放防火墙端口或者直接关闭防火墙
脚本程序SSH到集群各个节点上面开放防火墙端口或者直接关闭防火墙。
h)脚本程序SSH到集群节点执行启动命令:bin/zkServer.sh start
脚本程序SSH到集群各个节点上面执行启动命令:bin/zkServer.sh start。
本发明提供一种基于脚本程序自动化部署Zookeeper集群的方法,为需要应用Zookeeper来维护集群一致性的分布式集群系统,例如HBase、Storm等的自动化部署提供理论依据以及实践基础,快速部署并运行起Zookeeper集群节点,为下一步骤的集群软件的搭建与部署工作提供前提条件与可能。
此外,Python实现的交互脚本,也能够考虑使用其它的交互脚本来代替,例如Perl、Ruby等。
以上对本发明实施例所提供的一种基于脚本程序自动化部署Zookeeper集群的方法进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (9)

1.一种基于脚本程序自动化部署Zookeeper集群的方法,其特征在于,该方法通过使用脚本语言自动化部署Zookeeper集群,在配置管理节点上,把自动化部署脚本程序和官网下载的Zookeeper程序放在同一个文件夹下,配置好zookeeper-detail.conf和zookeeper-clusters.conf这2个文件,最后运行脚本程序完成自动化配置功能,具体流程为:
a.脚本程序读取配置文件;
b.脚本程序根据配置文件的信息使用SCP命令传送压缩包到集群各个节点;
c.脚本程序SSH到集群各个节点上面解压Zookeeper的压缩包文件;
d.脚本程序SSH到集群各个节点配置Zookeeper的环境变量;
e.脚本程序SSH到集群各个节点产生Zookeeper的配置文件;
f.脚本程序SSH到集群各个节点对时间进行统一的设置;
g.脚本程序SSH到集群各个节点上面开放防火墙端口或者直接关闭防火墙;
h.脚本程序SSH到集群各个节点上面执行Zookeeper启动命令:bin/zkServer.sh start。
2.根据权利要求1所述的方法,其特征在于,该方法中使用Python作为脚本语言自动化部署Zookeeper集群,pexpert组件实现了主要的交互功能。
3.根据权利要求1所述的方法,其特征在于,在步骤a中,脚本读取zookeeper-detail.conf和zookeeper-clusters.conf的内容,初始化集群系统的参数。
4.根据权利要求1所述的方法,其特征在于,在步骤d中,脚本SSH到集群各个节点上面配置系统环境变量,例如/etc/profile文件,或者用户环境变量,例如Linux用户名下的.bashrc文件。
5.根据权利要求1所述的方法,其特征在于,在步骤e中,脚本SSH到集群各个节点上面产生配置zoo.cfg文件、myid文件。
6.根据权利要求1所述的方法,其特征在于,zookeeper-detail.conf:配置运行Zookeeper集群的“IS_GLOBAL_ZOOKEEPER”、“ZOOKEEPER_HOME”、用户名和密码,以及自动产生的zoo.cfg文件中需要额外配置的参数。
7.根据权利要求1所述的方法,其特征在于,zookeeper-clusters.conf:配置Zookeeper集群节点的ip地址、主机名、root密码信息,一行配置一个节点的信息。
8.根据权利要求1所述的方法,其特征在于,Zookeeper集群的启动,需要满足以下条件:集群节点至少为3个并且为奇数;集群节点之间的时间需要先同步,相差不能超过30秒,否则,很容易出现Leader与Follower之间通信超时,节点自动退出的情况;防火墙要开放相应的Zookeeper监听端口,或者关闭防火墙;每个节点执行启动命令的时间要控制好,在超时之前全部节点都要启动完毕。
9.根据权利要求1所述的方法,其特征在于,该方法中还能够使用其它的交互脚本来代替,例如Ruby、Perl。
CN201310307029XA 2013-07-19 2013-07-19 一种基于脚本程序自动化部署Zookeeper集群的方法 Pending CN103412768A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201310307029XA CN103412768A (zh) 2013-07-19 2013-07-19 一种基于脚本程序自动化部署Zookeeper集群的方法
PCT/CN2014/000043 WO2015007069A1 (zh) 2013-07-19 2014-01-15 一种基于脚本程序自动化部署Zookeeper集群的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310307029XA CN103412768A (zh) 2013-07-19 2013-07-19 一种基于脚本程序自动化部署Zookeeper集群的方法

Publications (1)

Publication Number Publication Date
CN103412768A true CN103412768A (zh) 2013-11-27

Family

ID=49605781

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310307029XA Pending CN103412768A (zh) 2013-07-19 2013-07-19 一种基于脚本程序自动化部署Zookeeper集群的方法

Country Status (2)

Country Link
CN (1) CN103412768A (zh)
WO (1) WO2015007069A1 (zh)

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103701633A (zh) * 2013-12-09 2014-04-02 国家电网公司 对分布式搜索SolrCloud进行可视化集群应用搭建和维护的系统
CN104050003A (zh) * 2014-06-27 2014-09-17 浪潮集团有限公司 一种采用shell脚本启动Nutch采集系统的方法
WO2015007069A1 (zh) * 2013-07-19 2015-01-22 蓝盾信息安全技术股份有限公司 一种基于脚本程序自动化部署Zookeeper集群的方法
CN104376102A (zh) * 2014-11-26 2015-02-25 浪潮电子信息产业股份有限公司 一种基于python的hbase jdbc连接方法
CN104657502A (zh) * 2015-03-12 2015-05-27 浪潮集团有限公司 基于Hadoop对海量数据进行实时统计的系统和方法
CN105407114A (zh) * 2014-08-29 2016-03-16 北京信威通信技术股份有限公司 处理Zookeeper集群数据的客户端及方法
CN105487891A (zh) * 2015-11-26 2016-04-13 航天恒星科技有限公司 一种分布式集群的部署方法及系统
CN106385437A (zh) * 2016-08-31 2017-02-08 广州唯品会信息科技有限公司 集群选择方法及装置
CN103713924B (zh) * 2013-12-24 2017-03-08 汉柏科技有限公司 云计算平台服务的升级方法及系统
CN106487582A (zh) * 2016-09-21 2017-03-08 努比亚技术有限公司 一种部署搜索服务器的方法和装置
CN106533790A (zh) * 2016-12-12 2017-03-22 郑州云海信息技术有限公司 部署存储服务器的方法、装置及系统、存储服务器
CN106648799A (zh) * 2016-12-30 2017-05-10 广东浪潮大数据研究有限公司 一种基于Ambari快速为第三方组件添加微件的方法
CN106713458A (zh) * 2016-12-23 2017-05-24 智者四海(北京)技术有限公司 Zookeeper集群及Zookeeper实例的部署方法、装置以及管理平台
CN107506262A (zh) * 2017-08-18 2017-12-22 郑州云海信息技术有限公司 一种高性能集群用户系统备份与恢复的方法及装置
CN107707671A (zh) * 2017-10-30 2018-02-16 郑州云海信息技术有限公司 一种MyCat集群统一配置的方法
CN107749867A (zh) * 2017-09-05 2018-03-02 清华大学 数据中心/集群系统自组织的实现方法及系统
US9965260B2 (en) 2015-02-18 2018-05-08 Oracle International Corporation Software product release automation framework
CN108073402A (zh) * 2017-11-30 2018-05-25 山东鲁能软件技术有限公司 基于Linux系统的kafka集群自动部署方法和装置
CN108549717A (zh) * 2018-04-23 2018-09-18 泰华智慧产业集团股份有限公司 自动化部署运维Hadoop生态圈组件的方法及系统
CN108572826A (zh) * 2018-04-18 2018-09-25 中山大学 一种基于脚本自动化部署Hadoop和Spark集群的方法
CN109088774A (zh) * 2018-08-28 2018-12-25 郑州云海信息技术有限公司 一种分布式系统部署的方法及装置
CN109165022A (zh) * 2018-07-18 2019-01-08 山东中创软件商用中间件股份有限公司 一种大数据集群部署方法、系统、介质及设备
CN109471799A (zh) * 2018-10-29 2019-03-15 北京城市网邻信息技术有限公司 一种需求环境的部署方法、装置、存储介质及终端
CN109597627A (zh) * 2017-09-30 2019-04-09 北京国双科技有限公司 一种组件安装方法、装置、存储介质和处理器
CN110389766A (zh) * 2019-06-21 2019-10-29 深圳市汇川技术股份有限公司 HBase容器集群部署方法、系统、设备及计算机可读存储介质
CN111061503A (zh) * 2018-10-16 2020-04-24 航天信息股份有限公司 集群系统的配置方法和集群系统
WO2022037173A1 (zh) * 2020-08-21 2022-02-24 苏州浪潮智能科技有限公司 存储集群运行时数据持久化的方法、装置、设备和介质
CN114124938A (zh) * 2021-11-24 2022-03-01 浪潮卓数大数据产业发展有限公司 一种自动部署ipfs网络的方法、装置、设备及介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105677382A (zh) * 2015-12-28 2016-06-15 深圳市华讯方舟软件技术有限公司 一种大数据库系统的安装工具
CN109240879A (zh) * 2018-08-21 2019-01-18 郑州云海信息技术有限公司 一种分布式存储系统qos特性测试方法和装置
CN110071975A (zh) * 2019-04-23 2019-07-30 深圳易帆互动科技有限公司 异步上报的动态服务器管理系统
CN110404256A (zh) * 2019-07-26 2019-11-05 上海商汤智能科技有限公司 数据处理方法及装置、设备、服务器、系统及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6681389B1 (en) * 2000-02-28 2004-01-20 Lucent Technologies Inc. Method for providing scaleable restart and backout of software upgrades for clustered computing
CN102195978A (zh) * 2011-04-26 2011-09-21 深圳市共济科技有限公司 一种软件分布部署方法及系统
CN102404381A (zh) * 2011-09-02 2012-04-04 西安交通大学 一种云计算环境下基于工作流的软件部署系统及部署方法
CN102455936A (zh) * 2010-11-25 2012-05-16 中标软件有限公司 集群的快速部署方法
CN103064742A (zh) * 2012-12-25 2013-04-24 中国科学院深圳先进技术研究院 一种hadoop集群的自动部署系统及方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101789886B (zh) * 2009-01-23 2011-12-28 中兴通讯股份有限公司 一种分布式环境的环境搭建自动化系统及方法
CN102402628B (zh) * 2010-09-07 2016-03-09 无锡中感微电子股份有限公司 一种生成SoC验证平台的方法及系统
CN103412768A (zh) * 2013-07-19 2013-11-27 蓝盾信息安全技术股份有限公司 一种基于脚本程序自动化部署Zookeeper集群的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6681389B1 (en) * 2000-02-28 2004-01-20 Lucent Technologies Inc. Method for providing scaleable restart and backout of software upgrades for clustered computing
CN102455936A (zh) * 2010-11-25 2012-05-16 中标软件有限公司 集群的快速部署方法
CN102195978A (zh) * 2011-04-26 2011-09-21 深圳市共济科技有限公司 一种软件分布部署方法及系统
CN102404381A (zh) * 2011-09-02 2012-04-04 西安交通大学 一种云计算环境下基于工作流的软件部署系统及部署方法
CN103064742A (zh) * 2012-12-25 2013-04-24 中国科学院深圳先进技术研究院 一种hadoop集群的自动部署系统及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
SHIRDM: "ZooKeeper-3.3.4集群安装配置", 《HTTP://WWW.LINUXIDC.COM/LINUX/2012-05/59751.HTM》 *
SLAYTANIC: "python加shell快速部署集群", 《HTTP://SLAYTANIC.BLOG.51CTO.COM/2057708/1195808》 *

Cited By (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015007069A1 (zh) * 2013-07-19 2015-01-22 蓝盾信息安全技术股份有限公司 一种基于脚本程序自动化部署Zookeeper集群的方法
CN103701633A (zh) * 2013-12-09 2014-04-02 国家电网公司 对分布式搜索SolrCloud进行可视化集群应用搭建和维护的系统
CN103701633B (zh) * 2013-12-09 2017-01-11 国家电网公司 对分布式搜索SolrCloud进行可视化集群应用搭建和维护的系统
CN103713924B (zh) * 2013-12-24 2017-03-08 汉柏科技有限公司 云计算平台服务的升级方法及系统
CN104050003A (zh) * 2014-06-27 2014-09-17 浪潮集团有限公司 一种采用shell脚本启动Nutch采集系统的方法
CN104050003B (zh) * 2014-06-27 2017-06-09 浪潮集团有限公司 一种采用shell脚本启动Nutch采集系统的方法
CN105407114B (zh) * 2014-08-29 2019-02-22 北京信威通信技术股份有限公司 处理Zookeeper集群数据的客户端及方法
CN105407114A (zh) * 2014-08-29 2016-03-16 北京信威通信技术股份有限公司 处理Zookeeper集群数据的客户端及方法
CN104376102A (zh) * 2014-11-26 2015-02-25 浪潮电子信息产业股份有限公司 一种基于python的hbase jdbc连接方法
US9965260B2 (en) 2015-02-18 2018-05-08 Oracle International Corporation Software product release automation framework
CN104657502A (zh) * 2015-03-12 2015-05-27 浪潮集团有限公司 基于Hadoop对海量数据进行实时统计的系统和方法
CN105487891A (zh) * 2015-11-26 2016-04-13 航天恒星科技有限公司 一种分布式集群的部署方法及系统
CN106385437A (zh) * 2016-08-31 2017-02-08 广州唯品会信息科技有限公司 集群选择方法及装置
CN106487582A (zh) * 2016-09-21 2017-03-08 努比亚技术有限公司 一种部署搜索服务器的方法和装置
CN106533790A (zh) * 2016-12-12 2017-03-22 郑州云海信息技术有限公司 部署存储服务器的方法、装置及系统、存储服务器
CN106713458A (zh) * 2016-12-23 2017-05-24 智者四海(北京)技术有限公司 Zookeeper集群及Zookeeper实例的部署方法、装置以及管理平台
CN106648799A (zh) * 2016-12-30 2017-05-10 广东浪潮大数据研究有限公司 一种基于Ambari快速为第三方组件添加微件的方法
CN107506262A (zh) * 2017-08-18 2017-12-22 郑州云海信息技术有限公司 一种高性能集群用户系统备份与恢复的方法及装置
CN107749867B (zh) * 2017-09-05 2020-04-24 清华大学 数据中心/集群系统自组织的实现方法及系统
CN107749867A (zh) * 2017-09-05 2018-03-02 清华大学 数据中心/集群系统自组织的实现方法及系统
CN109597627A (zh) * 2017-09-30 2019-04-09 北京国双科技有限公司 一种组件安装方法、装置、存储介质和处理器
CN107707671A (zh) * 2017-10-30 2018-02-16 郑州云海信息技术有限公司 一种MyCat集群统一配置的方法
CN108073402A (zh) * 2017-11-30 2018-05-25 山东鲁能软件技术有限公司 基于Linux系统的kafka集群自动部署方法和装置
CN108572826A (zh) * 2018-04-18 2018-09-25 中山大学 一种基于脚本自动化部署Hadoop和Spark集群的方法
CN108572826B (zh) * 2018-04-18 2022-08-16 中山大学 一种基于脚本自动化部署Hadoop和Spark集群的方法
CN108549717A (zh) * 2018-04-23 2018-09-18 泰华智慧产业集团股份有限公司 自动化部署运维Hadoop生态圈组件的方法及系统
CN108549717B (zh) * 2018-04-23 2021-06-29 泰华智慧产业集团股份有限公司 自动化部署运维Hadoop生态圈组件的方法及系统
CN109165022A (zh) * 2018-07-18 2019-01-08 山东中创软件商用中间件股份有限公司 一种大数据集群部署方法、系统、介质及设备
CN109088774A (zh) * 2018-08-28 2018-12-25 郑州云海信息技术有限公司 一种分布式系统部署的方法及装置
CN111061503A (zh) * 2018-10-16 2020-04-24 航天信息股份有限公司 集群系统的配置方法和集群系统
CN111061503B (zh) * 2018-10-16 2023-08-18 航天信息股份有限公司 集群系统的配置方法和集群系统
CN109471799A (zh) * 2018-10-29 2019-03-15 北京城市网邻信息技术有限公司 一种需求环境的部署方法、装置、存储介质及终端
CN110389766A (zh) * 2019-06-21 2019-10-29 深圳市汇川技术股份有限公司 HBase容器集群部署方法、系统、设备及计算机可读存储介质
CN110389766B (zh) * 2019-06-21 2022-12-27 深圳市汇川技术股份有限公司 HBase容器集群部署方法、系统、设备及计算机可读存储介质
WO2022037173A1 (zh) * 2020-08-21 2022-02-24 苏州浪潮智能科技有限公司 存储集群运行时数据持久化的方法、装置、设备和介质
CN114124938A (zh) * 2021-11-24 2022-03-01 浪潮卓数大数据产业发展有限公司 一种自动部署ipfs网络的方法、装置、设备及介质

Also Published As

Publication number Publication date
WO2015007069A1 (zh) 2015-01-22

Similar Documents

Publication Publication Date Title
CN103412768A (zh) 一种基于脚本程序自动化部署Zookeeper集群的方法
CN111027921B (zh) 一种业务处理方法、装置及电子设备和存储介质
US9612815B1 (en) Method and tool for automating deployment of reference implementation architectures for pre-integrated multi-product solutions
EP3053052B1 (en) Managing a number of secondary clouds by a master cloud service manager
CN102752137B (zh) 主动设置虚拟机网络参数的装置和方法
US9661064B2 (en) Systems and methods for deploying legacy software in the cloud
CN103986786A (zh) 一种远程云桌面操作系统
US10540162B2 (en) Generating service images having scripts for the deployment of services
Huang AppACTS: Mobile app automated compatibility testing service
CN104077131A (zh) 一种组件部署系统及方法
Lossent et al. PaaS for web applications with OpenShift Origin
CN103067501B (zh) PaaS平台的大数据处理方法
CN103810001A (zh) 用于向数据处理系统上部署虚拟设备的方法和系统
CN105306225A (zh) 一种基于Openstack的物理机远程关机方法
US20140040441A1 (en) System and method for the configuration of a clustered simulation network
CN105426208A (zh) 一种云计算系统OpenStack离线自动安装方法
CN105430096A (zh) 并行文件系统的自动安装方法及装置
WO2019027597A1 (en) WORKFLOW MANAGEMENT FRAMEWORK
WO2020199597A1 (zh) 区块链节点管理代理服务安装方法、电子装置及存储介质
CN117112122A (zh) 一种集群部署方法和装置
CN114443294A (zh) 大数据服务组件部署方法、系统、终端及存储介质
WO2016198004A1 (zh) 一种在虚拟化技术下的网络开局配置方法及装置
CN111897551B (zh) 一种云环境下快速克隆软件环境的平台及方法
US10613708B2 (en) Cloning a hypervisor
Khoshkbarforoushha et al. Dimensions for evaluating cloud resource orchestration frameworks

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20131127