CN106790483A - 基于容器技术的Hadoop集群系统及快速构建方法 - Google Patents

基于容器技术的Hadoop集群系统及快速构建方法 Download PDF

Info

Publication number
CN106790483A
CN106790483A CN201611143466.2A CN201611143466A CN106790483A CN 106790483 A CN106790483 A CN 106790483A CN 201611143466 A CN201611143466 A CN 201611143466A CN 106790483 A CN106790483 A CN 106790483A
Authority
CN
China
Prior art keywords
container
hadoop
mirror image
service
deployment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611143466.2A
Other languages
English (en)
Inventor
向智宇
郝俊瑞
许德玮
郭嘉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Research Institute of Posts and Telecommunications Co Ltd
Original Assignee
Wuhan Research Institute of Posts and Telecommunications Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Research Institute of Posts and Telecommunications Co Ltd filed Critical Wuhan Research Institute of Posts and Telecommunications Co Ltd
Priority to CN201611143466.2A priority Critical patent/CN106790483A/zh
Publication of CN106790483A publication Critical patent/CN106790483A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/46Interconnection of networks
    • H04L12/4641Virtual LANs, VLANs, e.g. virtual private networks [VPN]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/45Network directories; Name-to-address mapping
    • H04L61/4505Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • H04L61/4511Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

基于容器技术的Hadoop集群系统及快速构建方法,涉及大数据和云计算技术领域,包括配置不同容器运行节点的容器之间通过VXLAN进行通信,配置各容器运行节点的虚拟网桥不在同一网段;安装SSH和JAVA运行环境,制作DNS服务镜像、Hadoop Master服务镜像和Hadoop Slave服务镜像的打包文件,执行镜像打包,打包后上传至镜像仓库保存;用户通过客户端依次向容器管理节点提交部署三个服务的请求,容器管理节点调度相应请求到容器运行节点进行部署,并进行对应服务的注册。本发明能够快速部署Hadoop集群,解决服务器数量不够用的情况,提高Hadoop容器集群部署在Docker平台上的可用性。

Description

基于容器技术的Hadoop集群系统及快速构建方法
技术领域
本发明涉及大数据和云计算技术领域,具体来讲涉及基于容器技术的Hadoop集群系统及快速构建方法。
背景技术
在大数据技术领域,以Hadoop生态为代表的大数据技术经过多年的发展已经被越来越多的使用。软件研发人员往往需要进行多节点Hadoop集群的开发调试,经常遇到的一个问题是研发环境中的服务器数量不够用。与此类似,测试人员和运维人员在对Hadoop集群功能进行验证时,经常需要快速搭建一套多节点的Hadoop集群环境,也会遇到服务器数量不够用和部署环境配置繁琐导致时效性不高的情况。另外,对于数据分析人员,也经常有快速部署Hadoop集群进行数据分析应用的需求。
针对以上的问题和需求,过去采用基于虚拟机的解决方案,通过对计算、存储、网络等资源的复用,在一定程度上缓解服务器数量不够用的情况。但是,随着研发人员的不断增长,并不能满足各类大数据技术人员对Hadoop集群快速部署上线的需求;同时,虚拟机的解决方案也存在启动慢、时效性低的问题。
此外,当使用Docker容器技术部署Hadoop集群时,由于Hadoop集群节点间通过节点域名来相互通信,因此必须在制作Hadoop镜像的时候,手动添加静态域名解析条目,这也会导致Hadoop容器集群部署在Docker平台上的可用性非常差。
发明内容
针对现有技术中存在的缺陷,本发明的目的在于提供一种基于容器技术的Hadoop集群系统及快速构建方法,能够快速部署Hadoop集群,解决服务器数量不够用的情况,提高Hadoop容器集群部署在Docker平台上的可用性。
为达到以上目的,本发明采取一种基于容器技术的Hadoop集群系统,包括:
客户端,用于向容器管理节点提交请求,包括部署请求和镜像打包请求;
镜像仓库,用于提供镜像的存储、查询、拉取服务;
多个容器运行节点,用于提供容器的运行环境和镜像打包环境,还用于从镜像仓库拉取相应的镜像进行部署,每个容器运行节点内设置多个容器;
容器管理节点,客户端提交请求的唯一入口,用于将请求部署的容器调度到容器运行节点运行,还用于管控容器运行节点的资源状态,向DNS服务更新成功部署容器的域名信息;
服务发现组件,用于配置共享和服务发现,以及记录容器运行节点间的通信信息,接受运行容器的注册信息。
本发明还提供一种基于容器技术的Hadoop集群快速构建方法,包括:
S1.环境初始化,配置不同容器运行节点的容器之间通过VXLAN进行通信,配置各容器运行节点的虚拟网桥不在同一网段;
S2.使用相同的基础操作系统,安装SSH和JAVA运行环境,制作DNS服务镜像、Hadoop Master服务镜像和Hadoop Slave服务镜像的打包文件,执行镜像打包,且镜像打包完成后上传至镜像仓库保存;
S3.用户通过客户端依次向容器管理节点提交部署DNS服务、Hadoop Master服务和Hadoop Slave服务的请求,容器管理节点调度相应请求到容器运行节点进行部署,并进行对应服务的注册;进入部署Hadoop Master服务的容器的命令行,运行Hadoop集群自身的启动脚本,部署完成。
在上述技术方案的基础上,所述S1中,在容器运行节点间建立一个重叠网络,在启动容器运行节点的Docker守护进程时,配置连接到服务发现组件的参数。
在上述技术方案的基础上,所述S2中,制作Hadoop Master服务镜像和HadoopSlave服务镜像的打包文件包括,先配置基础操作系统镜像,安装SSH和JAVA运行环境;配置SSH无密码访问;再以解压方式上传Hadoop安装包;接着上传Hadoop配置文件;单独上传Slave文件;最后配置namenode格式化脚本;然后按照Dockerfile格式整理形成打包文件。
在上述技术方案的基础上,所述S2中执行镜像打包,包括,配置Hadoop配置文件中的slave文件,先写入Hadoop Master服务所部署的容器名,再根据想要部署的HadoopSlave节点数目,循环追加写入Hadoop Slave所部署的容器名,形成的slave文件放置于镜像打包时指定的拷贝目录下;分别运行Docker的镜像打包命令,构建DNS服务镜像、HadoopMaster服务镜像和Hadoop Slave服务镜像,打包参数为镜像名和对应的Dockerfile文件目录路径。
在上述技术方案的基础上,所述S2中,将DNS服务镜像、Hadoop Master服务镜像和Hadoop Slave服务镜像的打包文件,通过Docker的加载命令,由客户端上传至镜像仓库保存。
在上述技术方案的基础上,所述S3中,客户端向容器管理节点提交部署DNS服务的请求,请求至少包含容器名、DNS服务镜像版本和容器所在的叠加网络信息,容器管理节点调度该请求到容器运行节点进行部署,并进行DNS服务注册。
在上述技术方案的基础上,所述S3中,DNS服务部署后,客户端向容器管理节点提交部署Hadoop Master服务的请求,请求至少包含容器名、Hadoop Master服务镜像、DNS地址和容器所在的叠加网络信息,容器管理节点调度该请求到容器运行节点进行部署,并进行Hadoop Master服务注册。
在上述技术方案的基础上,所述S3中,DNS服务和Hadoop Master服务部署后,客户端向容器管理节点提交部署Hadoop Slave服务的请求,请求至少包含容器名、HadoopSlave服务镜像、DNS地址和容器所在的叠加网络信息,容器管理节点调度该请求到容器运行节点进行部署,并进行Hadoop Slave服务注册;若有多个Hadoop Slave服务,依次部署完成。
在上述技术方案的基础上,所述S3中,运行Docker命令进入部署Hadoop Master服务的容器的命令行,赋予执行权限给Hadoop集群自身的启动脚本,运行该启动脚本,待启动完成后,进行标准化的检查操作。
本发明的有益效果在于:
1、本发明基于Docker技术,对于一台物理服务器而言,Docker根据物理服务器上的配置不同,提供几十甚至上百的个容器,如果有多台物理服务器作为容器运行节点,则能提供更多的容器。因此,Hadoop集群经过Docker技术的容器化改造后,可以在Docker平台上实现快速的部署上线。
2、Hadoop集群的运行环境和服务被打包成一体化的镜像,借助容器环境一致性、应用轻量级和快速启停的特性,就可以实现快速部署的一套Hadoop集群,同时也一定程度解决了研发环境中物理服务器数量不够用的情况,节省了物理服务器资源;解决了开发、测试、运维环境不一致带来的繁琐的环境配置问题。
3、Docker容器基于内核虚拟化的资源隔离技术,多个Hadoop集群节点可以部署在同一台服务器上,解决了研发环境中的物理服务器数量不够用的问题。
4、在Hadoop集群的快速部署方面,使用集群DNS方案,增加一个部署DNS服务的容器,每一个Hadoop容器进行服务注册后,都同步更新集群DNS服务器的域名解析条目,这样Hadoop集群节点通过DNS服务请求就能访问到集群中的任意节点,从而取代了手动修改容器hosts文件带来的大量重复工作,进一步提高Hadoop集群的部署效率。
附图说明
图1为本发明实施例基于容器技术的Hadoop集群系统结构框图;
图2为本发明实施例基于容器技术的Hadoop集群快速构建方法流程图;
图3为本发明实施例Hadoop集群部署的流程图。
具体实施方式
以下结合附图及实施例对本发明作进一步详细说明。
如图1所示,本发明基于容器技术的Hadoop集群系统,包括客户端、容器管理节点、镜像仓库、服务发现组件和多个容器运行节点,每个容器运行节点内设置多个容器,所有容器运行节点都采用Docker引擎作为容器运行环境,所有容器运行节点的容器中,一个部署DNS服务,一个部署Hadoop Master服务,其余部署Hadoop Slave服务。其中:
客户端,用于用户向容器管理节点提交请求,包括部署请求和镜像打包请求。
镜像仓库,用于提供镜像的存储、查询、拉取服务。
多个容器运行节点,用于提供容器的运行环境和镜像打包环境;接收到容器部署请求后,还用于从镜像仓库拉取相应的镜像进行部署。
容器管理节点,是客户端提交请求的唯一入口,在接收到容器部署请求后,用于将用户请求部署的容器调度到容器运行节点上运行;还用于管控容器运行节点的资源状态;此外,在每个Hadoop容器部署成功后,向DNS服务更新该容器的域名信息;这些信息以键值对的方式存储和提供查询,键值的内容主要有容器名、容器监听的IP地址、容器监听的端口等。
如图2所示,本发明基于容器技术的Hadoop集群快速构建方法,包括步骤:
S1.环境初始化,配置不同容器运行节点的容器之间通过VXLAN进行通信,配置各容器运行节点的虚拟网桥不在同一网段。
S2.使用相同的基础操作系统,安装SSH和JAVA运行环境,制作DNS服务镜像、Hadoop Master服务镜像和Hadoop Slave服务镜像的打包文件,执行镜像打包,且镜像打包完成后上传至镜像仓库保存;
S3.用户通过客户端依次向容器管理节点提交部署DNS服务、Hadoop Master服务和Hadoop Slave服务的请求,容器管理节点调度相应请求到容器运行节点进行部署,并进行对应服务的注册;进入部署Hadoop Master服务的容器的命令行,运行Hadoop集群自身的启动脚本,部署完成。
具体的,步骤S1视为环境初始化阶段,要配置不同容器运行节点的容器之间通过VXLAN协议进行通信的功能,实际上是在容器运行节点间建立一个重叠网络,由于基于Docker的容器平台是内置VXLAN驱动的,因此只需在初始化时做相应重叠网络配置即可。重叠网络的配置会用到容器管理节点的服务发现组件,因此,首先在启动容器运行节点的Docker守护进程时,配置连接到服务发现组件的参数;然后使用命令创建一个供Hadoop集群使用的重叠网络;再配置各容器运行节点的虚拟网桥docker0不在同一网段。
步骤S2中,三种服务镜像打包文件的制作,使用相同的基础操作系统、SSH和JAVA运行环境,能够保证后续开发、测试、运维环境的一致性,具体构建内容如下:
DNS服务镜像打包,首先配置基础操作系统镜像,安装SSH和JAVA运行环境,如果镜像构建环境可以连接互联网,则使用在线源安装,否则需要使用离线安装包。接着安装DNS服务,当前可选DNS软件很多,如最常用的dnsmasq,需要根据具体所选的DNS服务提前准备好配置文件,包括上级和本地的DNS服务地址配置,上传至安装目录。最后写上DNS服务的启动脚本,使容器运行时服务能自动启动。对以上流程按照Dockerfile格式整理,即可形成DNS服务镜像的打包文件。
Hadoop Master服务镜像打包,首先配置基础操作系统镜像,安装SSH和JAVA运行环境,如果镜像构建环境可以连接互联网,则使用在线源安装,否则需要提供离线安装包。接着配置生成SSH公钥/私钥对和无密码访问的脚本,用于Hadoop节点无密码登录;再接着使用ADD命令上传预先准备的Hadoop安装包,注意这里的Hadoop安装包是在与当前镜像使用的操作系统和JDK版本相同环境下编译所打的包;然后配置标准的Hadoop目录结构和环境变量,上传已提前准备好且写入了Hadoop运行参数的、按Hadoop标准格式命名的配置文件到相应目录下;最后写上namenode格式化脚本,使容器运行时自动运行该脚本。对以上流程按照Dockerfile格式整理即可形成Hadoop Slave服务镜像的打包文件。
Hadoop Slave服务镜像打包,与Hadoop Master服务镜像打包基本相同,区别之处在于,最后写上namenode格式化脚本,使容器运行时自动运行该脚本之前,需要配置上传Hadoop配置文件中的Slave文件到相应的目录下的命令。
步骤S2中,执行镜像打包,包括两个部分:
一是配置Hadoop配置文件中的slave文件,先写入Hadoop Master服务所部署的容器名,再根据想要部署的Hadoop Slave节点数目,循环追加写入Hadoop Slave所部署的容器名,形成的slave文件放置于镜像打包时指定的拷贝目录下。二是分别运行Docker的镜像打包命令,构建DNS服务镜像、Hadoop Master服务镜像和Hadoop Slave服务镜像,打包参数为镜像名和对应的Dockerfile文件目录路径。
所述S2中,Hadoop集群部署所需的三种服务镜像就构建完成,但这时的服务镜像保存在本地的容器运行节点之中,只供本地部署使用,因此还需要通过Docker的加载命令,将三种镜像上传至本地或者网络上的镜像仓库保存,以方便后续的各方的复用。
如图3所示,步骤S3的详细流程如下:
S301.用户通过客户端向容器管理节点提交部署DNS服务的请求,请求至少包含容器名、DNS服务镜像版本和容器所在的叠加网络信息,本实施例中,DNS服务的容器指定使用宿主机的53端口,53端口为DNS的默认端口。
S302.容器管理节点接收到部署请求后,调度该请求到容器运行节点进行部署。调度时,管理节点会根据一定的策略来计算最适合运行容器的节点,常用的策略主要有:随机调度、基于宿主机资源的调度或指定宿主机调度。基于宿主机资源的调度又分为集中式调度和分散式调度,当Hadoop集群节点不多且宿主机资源够用时,建议采用集中调度策略尽可能将Hadoop集群节点运行在一个容器运行节点上面,既减少了跨容器运行节点的网络消耗,又尽量节省整个容器平台资源给其他项目使用,当然实际实施时可以根据具体情况来决定调度策略。部署完成后,容器运行节点向容器管理节点的服务发现组件发送DNS服务注册消息,完成服务的注册。
S303.判断DNS服务是否部署成功,若是,进入S304;若否,进入S301。
S304.客户端向容器管理节点提交部署Hadoop Master服务的请求,请求至少包含容器名、Hadoop Master服务镜像、DNS地址和容器所在的叠加网络信息。
S305.容器管理节点接收到该部署请求后,调度该请求到容器运行节点进行部署。调度时,管理节点会根据一定的策略来计算最适合运行容器的节点,常用的策略主要有:随机调度、基于宿主机资源的调度或指定宿主机调度。基于宿主机资源的调度又分为集中式调度和分散式调度,当Hadoop集群节点不多且宿主机资源够用时建议采用集中调度策略尽可能将Hadoop集群节点运行在一个容器运行节点上面,既减少了跨容器运行节点的网络消耗,又尽量节省整个容器平台资源给其他项目使用,当然实际实施时可以根据具体情况来决定调度策略。部署完成后,容器运行节点向容器管理节点的服务发现组件发送HadoopMaster服务注册消息,完成服务的注册,并同步更新DNS服务,以保证DNS保存Hadoop集群中所有节点的域名解析,从而使得Hadoop集群中的任意节点都可以通过域名来相互通信。
S306.判断Hadoop Master服务是否部署成功,若是,进入S307;若否,进入S304。
S307.客户端向容器管理节点提交部署Hadoop Slave服务的请求,请求至少包含容器名、Hadoop Slave服务镜像、DNS地址和容器所在的叠加网络信息。
S308.容器管理节点接收到部署请求后,调度该请求到容器运行节点进行部署。调度时,管理节点会根据一定的策略来计算最适合运行容器的节点,常用的策略主要有:随机调度、基于宿主机资源的调度或指定宿主机调度。基于宿主机资源的调度又分为集中式调度和分散式调度,当Hadoop集群节点不多且宿主机资源够用时建议采用集中调度策略尽可能将Hadoop集群节点运行在一个容器运行节点上面,既减少了跨容器运行节点的网络消耗,又尽量节省整个容器平台资源给其他项目使用,当然实际实施时可以根据具体情况来决定调度策略。部署完成后,容器运行节点向容器管理节点的服务发现组件发送HadoopSlave服务注册消息,完成服务在整个容器平台的注册,并同步更新DNS服务,以保证DNS保存Hadoop集群中所有节点的域名解析,从而使得Hadoop集群中的任意节点都可以通过域名来相互通信。
S309.判断Hadoop Slave服务是否部署成功,若是,进入S310;若否,进入S307。
S309.判断Hadoop Slave服务是否全部部署完成,若是,进入S311;若否,进入S307。此步骤是为了,如果有多个Hadoop Slave服务需要布置,则需要循环S307到S309,依次部署完成。
S311.运行Docker命令进入部署Hadoop Master服务的容器的命令行,赋予执行权限给Hadoop集群自身的启动脚本,并运行该启动脚本,待启动完成后,进行标准化的检查操作,保证部署完整,如无问题,至此Hadoop集群部署完成。
本发明不局限于上述实施方式,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围之内。本说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。

Claims (10)

1.一种基于容器技术的Hadoop集群系统,其特征在于,包括:
客户端,用于向容器管理节点提交请求,包括部署请求和镜像打包请求;
镜像仓库,用于提供镜像的存储、查询、拉取服务;
多个容器运行节点,用于提供容器的运行环境和镜像打包环境,还用于从镜像仓库拉取相应的镜像进行部署,每个容器运行节点内设置多个容器;
容器管理节点,客户端提交请求的唯一入口,用于将请求部署的容器调度到容器运行节点运行,还用于管控容器运行节点的资源状态,向DNS服务更新成功部署容器的域名信息;
服务发现组件,用于配置共享和服务发现,以及记录容器运行节点间的通信信息,接受运行容器的注册信息。
2.一种基于权利要求1所述系统的基于容器技术的Hadoop集群快速构建方法,其特征在于,包括:
S1.环境初始化,配置不同容器运行节点的容器之间通过VXLAN进行通信,配置各容器运行节点的虚拟网桥不在同一网段;
S2.使用相同的基础操作系统,安装SSH和JAVA运行环境,制作DNS服务镜像、HadoopMaster服务镜像和Hadoop Slave服务镜像的打包文件,执行镜像打包,且镜像打包完成后上传至镜像仓库保存;
S3.用户通过客户端依次向容器管理节点提交部署DNS服务、Hadoop Master服务和Hadoop Slave服务的请求,容器管理节点调度相应请求到容器运行节点进行部署,并进行对应服务的注册;进入部署Hadoop Master服务的容器的命令行,运行Hadoop集群自身的启动脚本,部署完成。
3.如权利要求2所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S1中,在容器运行节点间建立一个重叠网络,在启动容器运行节点的Docker守护进程时,配置连接到服务发现组件的参数。
4.如权利要求2所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S2中,制作Hadoop Master服务镜像和HadoopSlave服务镜像的打包文件包括,先配置基础操作系统镜像,安装SSH和JAVA运行环境;配置SSH无密码访问;再以解压方式上传Hadoop安装包;接着上传Hadoop配置文件;单独上传Slave文件;最后配置namenode格式化脚本;然后按照Dockerfile格式整理形成打包文件。
5.如权利要求4所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S2中执行镜像打包,包括,
配置Hadoop配置文件中的slave文件,先写入Hadoop Master服务所部署的容器名,再根据想要部署的Hadoop Slave节点数目,循环追加写入Hadoop Slave所部署的容器名,形成的slave文件放置于镜像打包时指定的拷贝目录下;
分别运行Docker的镜像打包命令,构建DNS服务镜像、HadoopMaster服务镜像和HadoopSlave服务镜像,打包参数为镜像名和对应的Dockerfile文件目录路径。
6.如权利要求2所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S2中,将DNS服务镜像、Hadoop Master服务镜像和Hadoop Slave服务镜像的打包文件,通过Docker的加载命令,由客户端上传至镜像仓库保存。
7.如权利要求2所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S3中,客户端向容器管理节点提交部署DNS服务的请求,请求至少包含容器名、DNS服务镜像版本和容器所在的叠加网络信息,容器管理节点调度该请求到容器运行节点进行部署,并进行DNS服务注册。
8.如权利要求2所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S3中,DNS服务部署后,客户端向容器管理节点提交部署Hadoop Master服务的请求,请求至少包含容器名、Hadoop Master服务镜像、DNS地址和容器所在的叠加网络信息,容器管理节点调度该请求到容器运行节点进行部署,并进行HadoopMaster服务注册。
9.如权利要求2所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S3中,DNS服务和Hadoop Master服务部署后,客户端向容器管理节点提交部署Hadoop Slave服务的请求,请求至少包含容器名、Hadoop Slave服务镜像、DNS地址和容器所在的叠加网络信息,容器管理节点调度该请求到容器运行节点进行部署,并进行Hadoop Slave服务注册;若有多个Hadoop Slave服务,依次部署完成。
10.如权利要求2所述基于容器技术的Hadoop集群快速构建方法,其特征在于:所述S3中,运行Docker命令进入部署Hadoop Master服务的容器的命令行,赋予执行权限给Hadoop集群自身的启动脚本,运行该启动脚本,待启动完成后,进行标准化的检查操作。
CN201611143466.2A 2016-12-13 2016-12-13 基于容器技术的Hadoop集群系统及快速构建方法 Pending CN106790483A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611143466.2A CN106790483A (zh) 2016-12-13 2016-12-13 基于容器技术的Hadoop集群系统及快速构建方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611143466.2A CN106790483A (zh) 2016-12-13 2016-12-13 基于容器技术的Hadoop集群系统及快速构建方法

Publications (1)

Publication Number Publication Date
CN106790483A true CN106790483A (zh) 2017-05-31

Family

ID=58880475

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611143466.2A Pending CN106790483A (zh) 2016-12-13 2016-12-13 基于容器技术的Hadoop集群系统及快速构建方法

Country Status (1)

Country Link
CN (1) CN106790483A (zh)

Cited By (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107229830A (zh) * 2017-06-01 2017-10-03 上海联影医疗科技有限公司 放疗计划系统及其任务执行方法
CN107395762A (zh) * 2017-08-30 2017-11-24 四川长虹电器股份有限公司 一种基于Docker容器的应用服务访问系统及方法
CN107579898A (zh) * 2017-09-14 2018-01-12 快云信息科技有限公司 一种多种容器间互联通信的方法及其装置
CN107733977A (zh) * 2017-08-31 2018-02-23 北京百度网讯科技有限公司 一种基于Docker的集群管理方法及装置
CN107809467A (zh) * 2017-10-10 2018-03-16 暨南大学 一种云环境下容器镜像数据的删减方法
CN108173919A (zh) * 2017-12-22 2018-06-15 百度在线网络技术(北京)有限公司 大数据平台搭建系统、方法、设备及计算机可读介质
CN108255968A (zh) * 2017-12-26 2018-07-06 曙光信息产业(北京)有限公司 一种大数据并行文件系统的设计方法
CN108388433A (zh) * 2017-12-28 2018-08-10 创新科软件技术(深圳)有限公司 超融合系统的管理平台部署方法
CN108924217A (zh) * 2018-06-29 2018-11-30 中山大学 一种分布式云系统自动化部署方法
CN108958892A (zh) * 2018-08-14 2018-12-07 郑州云海信息技术有限公司 一种创建用于深度学习作业的容器的方法和装置
CN109117170A (zh) * 2017-06-22 2019-01-01 中兴通讯股份有限公司 一种运行环境搭建方法及装置、代码合入方法及系统
CN109144661A (zh) * 2018-07-05 2019-01-04 杭州电子科技大学 一种基于docker的深度学习管理方法
CN109284184A (zh) * 2018-03-07 2019-01-29 中山大学 一种基于容器化技术的分布式机器学习平台的搭建方法
CN109302483A (zh) * 2018-10-17 2019-02-01 网宿科技股份有限公司 一种应用程序的管理方法及系统
CN109309693A (zh) * 2017-07-26 2019-02-05 财付通支付科技有限公司 基于docker的多服务系统、部署方法及装置、设备及存储介质
CN109445802A (zh) * 2018-09-25 2019-03-08 众安信息技术服务有限公司 基于容器的私有化Paas平台及其发布应用的方法
CN109683909A (zh) * 2018-11-30 2019-04-26 昆明理工大学 一种基于Docker的MPI并行环境自动部署方法
CN109714358A (zh) * 2019-01-15 2019-05-03 广东工业大学 一种微服务化的注塑mes云平台
CN109710281A (zh) * 2018-12-28 2019-05-03 中科曙光国际信息产业有限公司 大数据平台的安装方法及装置
CN109739616A (zh) * 2018-12-05 2019-05-10 国云科技股份有限公司 一种云平台容器镜像批量制作方法
CN109739518A (zh) * 2018-12-25 2019-05-10 杭州数梦工场科技有限公司 生成离线软件资源的方法及装置
CN109800056A (zh) * 2019-01-16 2019-05-24 杭州趣链科技有限公司 一种基于容器的区块链部署方法
CN109814881A (zh) * 2017-11-21 2019-05-28 北京京东尚科信息技术有限公司 用于部署数据库集群的方法和装置
CN109857516A (zh) * 2018-12-29 2019-06-07 航天信息股份有限公司 基于容器的集群迁移方法及装置
CN109885316A (zh) * 2019-02-18 2019-06-14 国家计算机网络与信息安全管理中心 基于kubernetes的hdfs-hbase部署方法及装置
CN110008006A (zh) * 2019-04-11 2019-07-12 中国联合网络通信集团有限公司 基于容器的大数据工具部署方法及系统
CN110109649A (zh) * 2018-02-01 2019-08-09 中国电信股份有限公司 针对Web服务的容器控制方法、装置和容器系统
CN110120979A (zh) * 2019-05-20 2019-08-13 华为技术有限公司 一种调度方法、装置及相关设备
CN110489203A (zh) * 2019-07-01 2019-11-22 广东轩辕网络科技股份有限公司 一种容器调度框架系统
CN110602253A (zh) * 2019-09-30 2019-12-20 新华三大数据技术有限公司 一种任务调度方法、装置及系统
CN110750270A (zh) * 2019-09-29 2020-02-04 北京东软望海科技有限公司 一种套装软件的部署方法及装置
CN110865840A (zh) * 2019-11-18 2020-03-06 上海极链网络科技有限公司 一种应用管理方法、装置、服务器及存储介质
CN110941474A (zh) * 2018-09-25 2020-03-31 北京京东尚科信息技术有限公司 Hadoop与Kubernetes系统共享计算资源的方法、系统、设备及存储介质
CN110941434A (zh) * 2018-09-21 2020-03-31 中国石油化工股份有限公司 基于容器技术的地震处理软件部署方法
CN110990026A (zh) * 2019-10-10 2020-04-10 武汉烽火信息集成技术有限公司 一种PaaS平台自动部署方法及系统
CN111026723A (zh) * 2019-11-21 2020-04-17 望海康信(北京)科技股份公司 大数据集群管理控制方法、装置、计算机设备及存储介质
CN111061491A (zh) * 2019-12-11 2020-04-24 青岛海洋科学与技术国家实验室发展中心 一种基于lxc容器技术的边缘计算网关管理系统及方法
CN111078553A (zh) * 2019-12-16 2020-04-28 南方电网数字电网研究院有限公司 数据开发任务测试方法、装置、计算机设备和存储介质
CN111078358A (zh) * 2019-12-05 2020-04-28 中车株洲电力机车有限公司 一种基于软件容器的试验数据处理方法及系统
CN111158872A (zh) * 2019-12-16 2020-05-15 北京明朝万达科技股份有限公司 一种提交并守护spark任务的方法及装置
CN111212116A (zh) * 2019-12-24 2020-05-29 湖南舜康信息技术有限公司 一种基于容器云的高性能计算集群创建方法和系统
CN111209087A (zh) * 2020-01-15 2020-05-29 南京中新赛克科技有限责任公司 一种基于Docker的大数据学习平台搭建方法
WO2020112029A1 (en) * 2018-11-30 2020-06-04 Purple Ds Private Ltd. System and method for facilitating participation in a blockchain environment
CN111240806A (zh) * 2020-01-14 2020-06-05 南京邮电大学 一种分布式容器镜像构建调度系统及方法
WO2020125265A1 (zh) * 2018-12-21 2020-06-25 中兴通讯股份有限公司 容器的业务监控方法、系统和计算机可读存储介质
CN111464648A (zh) * 2020-04-02 2020-07-28 聚好看科技股份有限公司 一种分布式本地dns系统及域名查询方法
CN111475260A (zh) * 2020-04-10 2020-07-31 杭州趣维科技有限公司 一种基于jenkins和kubernetes平台的可弹性CICD方法
CN111538625A (zh) * 2020-04-29 2020-08-14 西安交通大学 基于Docker技术的Ambari集群部署、数据备份方法及电子设备
CN111800452A (zh) * 2019-04-08 2020-10-20 施耐德电器工业公司 在输入/输出设备集群中的服务部署
CN111858370A (zh) * 2020-07-28 2020-10-30 浪潮云信息技术股份公司 DevOps的实现方法、装置、计算机可读介质
CN111885122A (zh) * 2020-07-03 2020-11-03 中移(杭州)信息技术有限公司 远程推送方法、系统、服务器、计算机可读存储介质
CN112015438A (zh) * 2020-07-29 2020-12-01 烽火通信科技股份有限公司 一种基于Ansible的轻量级容器化分布式系统与部署方法
CN112118123A (zh) * 2020-07-30 2020-12-22 爱普(福建)科技有限公司 一种基于堆叠的网关管理方法及系统
CN112187925A (zh) * 2020-09-28 2021-01-05 江苏银承网络科技股份有限公司 用于大数据平台的离线集群管理方法及装置
CN112199164A (zh) * 2020-10-19 2021-01-08 国网新疆电力有限公司信息通信公司 一种保证容器镜像一致性的方法
CN112269634A (zh) * 2020-10-13 2021-01-26 苏州浪潮智能科技有限公司 一种基于Docker容器部署Ambari组件的方法和系统
CN112579260A (zh) * 2020-12-21 2021-03-30 常州微亿智造科技有限公司 工业物联网数据中心传Worker服务自动扩缩容方法及装置
CN112860374A (zh) * 2021-01-30 2021-05-28 柏科数据技术(深圳)股份有限公司 快速部署Ceph方法、装置、服务器及存储介质
CN112882726A (zh) * 2021-01-26 2021-06-01 西安建筑科技大学 基于Hadoop和Docker的环境系统的部署方法
CN113419750A (zh) * 2021-08-24 2021-09-21 北京华品博睿网络技术有限公司 一种模型推理服务调用系统和方法
CN113542443A (zh) * 2020-04-20 2021-10-22 西门子股份公司 创建域名系统容器镜像用于创建域名系统容器实例
CN113722066A (zh) * 2021-08-23 2021-11-30 中国电力科学研究院有限公司 一种电网细粒度容器化服务管控系统及方法
CN113778486A (zh) * 2021-09-09 2021-12-10 上海浦东发展银行股份有限公司 一种代码流水线的容器化处理方法、装置、介质及设备
CN113923116A (zh) * 2021-10-28 2022-01-11 西安热工研究院有限公司 一种基于一个平台管理多个广域网集群的方法
CN114172811A (zh) * 2021-11-01 2022-03-11 北京银盾泰安网络科技有限公司 一种容器镜像部署平台及其部署方法
CN115357256A (zh) * 2022-10-18 2022-11-18 安徽华云安科技有限公司 一种cdh集群部署方法和系统
CN116339926A (zh) * 2023-05-22 2023-06-27 成都交控轨道科技有限公司 一种ats软件的容器化部署方法
CN116909584A (zh) * 2023-05-06 2023-10-20 广东国地规划科技股份有限公司 时空大数据引擎的部署方法、装置、设备以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103414761A (zh) * 2013-07-23 2013-11-27 北京工业大学 一种基于Hadoop架构的移动终端云资源调度方法
CN104951360A (zh) * 2015-06-30 2015-09-30 北京奇虎科技有限公司 基于Docker的配置管理方式及装置
CN105591820A (zh) * 2015-12-31 2016-05-18 北京轻元科技有限公司 一种高可扩展的容器网络管理系统和方法
CN105630488A (zh) * 2015-12-18 2016-06-01 上海爱数信息技术股份有限公司 一种基于docker容器技术的持续集成实现方法
CN105824614A (zh) * 2015-12-15 2016-08-03 广东亿迅科技有限公司 基于Docker的分布式开发环境的搭建方法及装置
CN105897946A (zh) * 2016-04-08 2016-08-24 北京搜狐新媒体信息技术有限公司 一种访问地址的获取方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103414761A (zh) * 2013-07-23 2013-11-27 北京工业大学 一种基于Hadoop架构的移动终端云资源调度方法
CN104951360A (zh) * 2015-06-30 2015-09-30 北京奇虎科技有限公司 基于Docker的配置管理方式及装置
CN105824614A (zh) * 2015-12-15 2016-08-03 广东亿迅科技有限公司 基于Docker的分布式开发环境的搭建方法及装置
CN105630488A (zh) * 2015-12-18 2016-06-01 上海爱数信息技术股份有限公司 一种基于docker容器技术的持续集成实现方法
CN105591820A (zh) * 2015-12-31 2016-05-18 北京轻元科技有限公司 一种高可扩展的容器网络管理系统和方法
CN105897946A (zh) * 2016-04-08 2016-08-24 北京搜狐新媒体信息技术有限公司 一种访问地址的获取方法及系统

Cited By (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107229830A (zh) * 2017-06-01 2017-10-03 上海联影医疗科技有限公司 放疗计划系统及其任务执行方法
CN109117170A (zh) * 2017-06-22 2019-01-01 中兴通讯股份有限公司 一种运行环境搭建方法及装置、代码合入方法及系统
CN109117170B (zh) * 2017-06-22 2023-04-07 中兴通讯股份有限公司 一种运行环境搭建方法及装置、代码合入方法及系统
CN109309693B (zh) * 2017-07-26 2022-04-29 财付通支付科技有限公司 基于docker的多服务系统、部署方法及装置、设备及存储介质
CN109309693A (zh) * 2017-07-26 2019-02-05 财付通支付科技有限公司 基于docker的多服务系统、部署方法及装置、设备及存储介质
CN107395762A (zh) * 2017-08-30 2017-11-24 四川长虹电器股份有限公司 一种基于Docker容器的应用服务访问系统及方法
CN107733977A (zh) * 2017-08-31 2018-02-23 北京百度网讯科技有限公司 一种基于Docker的集群管理方法及装置
CN107733977B (zh) * 2017-08-31 2020-11-03 北京百度网讯科技有限公司 一种基于Docker的集群管理方法及装置
CN107579898A (zh) * 2017-09-14 2018-01-12 快云信息科技有限公司 一种多种容器间互联通信的方法及其装置
CN107579898B (zh) * 2017-09-14 2020-08-14 快云信息科技有限公司 一种多种容器间互联通信的方法及其装置
CN107809467B (zh) * 2017-10-10 2020-06-16 暨南大学 一种云环境下容器镜像数据的删减方法
CN107809467A (zh) * 2017-10-10 2018-03-16 暨南大学 一种云环境下容器镜像数据的删减方法
CN109814881A (zh) * 2017-11-21 2019-05-28 北京京东尚科信息技术有限公司 用于部署数据库集群的方法和装置
CN108173919A (zh) * 2017-12-22 2018-06-15 百度在线网络技术(北京)有限公司 大数据平台搭建系统、方法、设备及计算机可读介质
CN108255968A (zh) * 2017-12-26 2018-07-06 曙光信息产业(北京)有限公司 一种大数据并行文件系统的设计方法
CN108388433A (zh) * 2017-12-28 2018-08-10 创新科软件技术(深圳)有限公司 超融合系统的管理平台部署方法
CN110109649B (zh) * 2018-02-01 2023-08-08 中国电信股份有限公司 针对Web服务的容器控制方法、装置和容器系统
CN110109649A (zh) * 2018-02-01 2019-08-09 中国电信股份有限公司 针对Web服务的容器控制方法、装置和容器系统
CN109284184A (zh) * 2018-03-07 2019-01-29 中山大学 一种基于容器化技术的分布式机器学习平台的搭建方法
CN108924217A (zh) * 2018-06-29 2018-11-30 中山大学 一种分布式云系统自动化部署方法
CN109144661A (zh) * 2018-07-05 2019-01-04 杭州电子科技大学 一种基于docker的深度学习管理方法
CN108958892A (zh) * 2018-08-14 2018-12-07 郑州云海信息技术有限公司 一种创建用于深度学习作业的容器的方法和装置
CN110941434A (zh) * 2018-09-21 2020-03-31 中国石油化工股份有限公司 基于容器技术的地震处理软件部署方法
CN110941474A (zh) * 2018-09-25 2020-03-31 北京京东尚科信息技术有限公司 Hadoop与Kubernetes系统共享计算资源的方法、系统、设备及存储介质
CN109445802A (zh) * 2018-09-25 2019-03-08 众安信息技术服务有限公司 基于容器的私有化Paas平台及其发布应用的方法
CN109445802B (zh) * 2018-09-25 2022-08-26 众安信息技术服务有限公司 基于容器的私有化Paas平台及其发布应用的方法
US11316800B2 (en) 2018-10-17 2022-04-26 Wangsu Science & Technology Co., Ltd. Method and system for managing applications
CN109302483A (zh) * 2018-10-17 2019-02-01 网宿科技股份有限公司 一种应用程序的管理方法及系统
CN109302483B (zh) * 2018-10-17 2021-02-02 网宿科技股份有限公司 一种应用程序的管理方法及系统
WO2020112029A1 (en) * 2018-11-30 2020-06-04 Purple Ds Private Ltd. System and method for facilitating participation in a blockchain environment
CN109683909A (zh) * 2018-11-30 2019-04-26 昆明理工大学 一种基于Docker的MPI并行环境自动部署方法
CN109739616A (zh) * 2018-12-05 2019-05-10 国云科技股份有限公司 一种云平台容器镜像批量制作方法
WO2020125265A1 (zh) * 2018-12-21 2020-06-25 中兴通讯股份有限公司 容器的业务监控方法、系统和计算机可读存储介质
CN109739518A (zh) * 2018-12-25 2019-05-10 杭州数梦工场科技有限公司 生成离线软件资源的方法及装置
CN109710281A (zh) * 2018-12-28 2019-05-03 中科曙光国际信息产业有限公司 大数据平台的安装方法及装置
CN109857516B (zh) * 2018-12-29 2023-12-12 航天信息股份有限公司 基于容器的集群迁移方法及装置
CN109857516A (zh) * 2018-12-29 2019-06-07 航天信息股份有限公司 基于容器的集群迁移方法及装置
CN109714358A (zh) * 2019-01-15 2019-05-03 广东工业大学 一种微服务化的注塑mes云平台
CN109800056A (zh) * 2019-01-16 2019-05-24 杭州趣链科技有限公司 一种基于容器的区块链部署方法
CN109885316A (zh) * 2019-02-18 2019-06-14 国家计算机网络与信息安全管理中心 基于kubernetes的hdfs-hbase部署方法及装置
CN109885316B (zh) * 2019-02-18 2023-05-09 国家计算机网络与信息安全管理中心 基于kubernetes的hdfs-hbase部署方法及装置
CN111800452A (zh) * 2019-04-08 2020-10-20 施耐德电器工业公司 在输入/输出设备集群中的服务部署
CN110008006B (zh) * 2019-04-11 2021-04-02 中国联合网络通信集团有限公司 基于容器的大数据工具部署方法及系统
CN110008006A (zh) * 2019-04-11 2019-07-12 中国联合网络通信集团有限公司 基于容器的大数据工具部署方法及系统
CN110120979A (zh) * 2019-05-20 2019-08-13 华为技术有限公司 一种调度方法、装置及相关设备
CN110120979B (zh) * 2019-05-20 2023-03-10 华为云计算技术有限公司 一种调度方法、装置及相关设备
CN110489203A (zh) * 2019-07-01 2019-11-22 广东轩辕网络科技股份有限公司 一种容器调度框架系统
CN110750270A (zh) * 2019-09-29 2020-02-04 北京东软望海科技有限公司 一种套装软件的部署方法及装置
CN110602253A (zh) * 2019-09-30 2019-12-20 新华三大数据技术有限公司 一种任务调度方法、装置及系统
CN110602253B (zh) * 2019-09-30 2022-04-26 新华三大数据技术有限公司 一种任务调度方法、装置及系统
CN110990026B (zh) * 2019-10-10 2023-03-14 武汉烽火信息集成技术有限公司 一种PaaS平台自动部署方法及系统
CN110990026A (zh) * 2019-10-10 2020-04-10 武汉烽火信息集成技术有限公司 一种PaaS平台自动部署方法及系统
CN110865840B (zh) * 2019-11-18 2023-11-03 义乌中国小商品城大数据有限公司 一种应用管理方法、装置、服务器及存储介质
CN110865840A (zh) * 2019-11-18 2020-03-06 上海极链网络科技有限公司 一种应用管理方法、装置、服务器及存储介质
CN111026723A (zh) * 2019-11-21 2020-04-17 望海康信(北京)科技股份公司 大数据集群管理控制方法、装置、计算机设备及存储介质
CN111026723B (zh) * 2019-11-21 2023-08-11 望海康信(北京)科技股份公司 大数据集群管理控制方法、装置、计算机设备及存储介质
CN111078358A (zh) * 2019-12-05 2020-04-28 中车株洲电力机车有限公司 一种基于软件容器的试验数据处理方法及系统
CN111078358B (zh) * 2019-12-05 2023-09-05 中车株洲电力机车有限公司 一种基于软件容器的试验数据处理方法及系统
CN111061491B (zh) * 2019-12-11 2023-08-22 青岛海洋科技中心 一种基于lxc容器技术的边缘计算网关管理系统及方法
CN111061491A (zh) * 2019-12-11 2020-04-24 青岛海洋科学与技术国家实验室发展中心 一种基于lxc容器技术的边缘计算网关管理系统及方法
CN111078553A (zh) * 2019-12-16 2020-04-28 南方电网数字电网研究院有限公司 数据开发任务测试方法、装置、计算机设备和存储介质
CN111158872A (zh) * 2019-12-16 2020-05-15 北京明朝万达科技股份有限公司 一种提交并守护spark任务的方法及装置
CN111158872B (zh) * 2019-12-16 2023-06-16 北京明朝万达科技股份有限公司 一种提交并守护spark任务的方法及装置
CN111078553B (zh) * 2019-12-16 2021-06-15 南方电网数字电网研究院有限公司 数据开发任务测试方法、装置、计算机设备和存储介质
CN111212116A (zh) * 2019-12-24 2020-05-29 湖南舜康信息技术有限公司 一种基于容器云的高性能计算集群创建方法和系统
CN111240806A (zh) * 2020-01-14 2020-06-05 南京邮电大学 一种分布式容器镜像构建调度系统及方法
WO2021143590A1 (zh) * 2020-01-14 2021-07-22 南京邮电大学 一种分布式容器镜像构建调度系统及方法
US11656902B2 (en) 2020-01-14 2023-05-23 Nanjing University Of Posts And Telecommunications Distributed container image construction scheduling system and method
CN111240806B (zh) * 2020-01-14 2022-04-01 南京邮电大学 一种分布式容器镜像构建调度方法
CN111209087A (zh) * 2020-01-15 2020-05-29 南京中新赛克科技有限责任公司 一种基于Docker的大数据学习平台搭建方法
CN111209087B (zh) * 2020-01-15 2024-01-30 南京中新赛克科技有限责任公司 一种基于Docker的大数据学习平台搭建方法
CN111464648A (zh) * 2020-04-02 2020-07-28 聚好看科技股份有限公司 一种分布式本地dns系统及域名查询方法
CN111464648B (zh) * 2020-04-02 2021-11-05 聚好看科技股份有限公司 一种分布式本地dns系统及域名查询方法
CN111475260A (zh) * 2020-04-10 2020-07-31 杭州趣维科技有限公司 一种基于jenkins和kubernetes平台的可弹性CICD方法
US11621856B2 (en) 2020-04-20 2023-04-04 Siemens Aktiengesellschaft Generating a domain name system container image to create an instance of a domain name system container
CN113542443B (zh) * 2020-04-20 2023-09-19 西门子股份公司 创建域名系统容器镜像用于创建域名系统容器实例
CN113542443A (zh) * 2020-04-20 2021-10-22 西门子股份公司 创建域名系统容器镜像用于创建域名系统容器实例
CN111538625B (zh) * 2020-04-29 2023-03-28 西安交通大学 基于Docker技术的Ambari集群部署、数据备份方法及电子设备
CN111538625A (zh) * 2020-04-29 2020-08-14 西安交通大学 基于Docker技术的Ambari集群部署、数据备份方法及电子设备
CN111885122A (zh) * 2020-07-03 2020-11-03 中移(杭州)信息技术有限公司 远程推送方法、系统、服务器、计算机可读存储介质
CN111885122B (zh) * 2020-07-03 2022-11-29 中移(杭州)信息技术有限公司 远程推送方法、系统、服务器、计算机可读存储介质
CN111858370A (zh) * 2020-07-28 2020-10-30 浪潮云信息技术股份公司 DevOps的实现方法、装置、计算机可读介质
CN111858370B (zh) * 2020-07-28 2023-12-26 浪潮云信息技术股份公司 DevOps的实现方法、装置、计算机可读介质
CN112015438B (zh) * 2020-07-29 2023-04-18 烽火通信科技股份有限公司 一种基于Ansible的轻量级容器化分布式系统与部署方法
CN112015438A (zh) * 2020-07-29 2020-12-01 烽火通信科技股份有限公司 一种基于Ansible的轻量级容器化分布式系统与部署方法
CN112118123A (zh) * 2020-07-30 2020-12-22 爱普(福建)科技有限公司 一种基于堆叠的网关管理方法及系统
CN112187925A (zh) * 2020-09-28 2021-01-05 江苏银承网络科技股份有限公司 用于大数据平台的离线集群管理方法及装置
CN112269634A (zh) * 2020-10-13 2021-01-26 苏州浪潮智能科技有限公司 一种基于Docker容器部署Ambari组件的方法和系统
CN112199164A (zh) * 2020-10-19 2021-01-08 国网新疆电力有限公司信息通信公司 一种保证容器镜像一致性的方法
CN112579260A (zh) * 2020-12-21 2021-03-30 常州微亿智造科技有限公司 工业物联网数据中心传Worker服务自动扩缩容方法及装置
CN112882726A (zh) * 2021-01-26 2021-06-01 西安建筑科技大学 基于Hadoop和Docker的环境系统的部署方法
CN112882726B (zh) * 2021-01-26 2022-11-15 西安建筑科技大学 基于Hadoop和Docker的环境系统的部署方法
CN112860374A (zh) * 2021-01-30 2021-05-28 柏科数据技术(深圳)股份有限公司 快速部署Ceph方法、装置、服务器及存储介质
CN113722066A (zh) * 2021-08-23 2021-11-30 中国电力科学研究院有限公司 一种电网细粒度容器化服务管控系统及方法
CN113419750A (zh) * 2021-08-24 2021-09-21 北京华品博睿网络技术有限公司 一种模型推理服务调用系统和方法
CN113778486A (zh) * 2021-09-09 2021-12-10 上海浦东发展银行股份有限公司 一种代码流水线的容器化处理方法、装置、介质及设备
CN113778486B (zh) * 2021-09-09 2024-06-07 上海浦东发展银行股份有限公司 一种代码流水线的容器化处理方法、装置、介质及设备
CN113923116A (zh) * 2021-10-28 2022-01-11 西安热工研究院有限公司 一种基于一个平台管理多个广域网集群的方法
CN114172811B (zh) * 2021-11-01 2023-11-24 浙江银盾云科技有限公司 一种容器镜像部署平台及其部署方法
CN114172811A (zh) * 2021-11-01 2022-03-11 北京银盾泰安网络科技有限公司 一种容器镜像部署平台及其部署方法
CN115357256A (zh) * 2022-10-18 2022-11-18 安徽华云安科技有限公司 一种cdh集群部署方法和系统
CN116909584A (zh) * 2023-05-06 2023-10-20 广东国地规划科技股份有限公司 时空大数据引擎的部署方法、装置、设备以及存储介质
CN116909584B (zh) * 2023-05-06 2024-05-24 广东国地规划科技股份有限公司 时空大数据引擎的部署方法、装置、设备以及存储介质
CN116339926B (zh) * 2023-05-22 2023-08-08 成都交控轨道科技有限公司 一种ats软件的容器化部署方法
CN116339926A (zh) * 2023-05-22 2023-06-27 成都交控轨道科技有限公司 一种ats软件的容器化部署方法

Similar Documents

Publication Publication Date Title
CN106790483A (zh) 基于容器技术的Hadoop集群系统及快速构建方法
CN106020930B (zh) 一种基于应用容器的应用管理方法及系统
US10700991B2 (en) Multi-cluster resource management
CN103491144B (zh) 一种广域网虚拟平台的构建方法
CN107579931B (zh) 一种基于Kubernetes的区块链即服务资源适配方法
US20220329481A1 (en) Composable edge device platforms
US10198281B2 (en) Hybrid infrastructure provisioning framework tethering remote datacenters
CN106603592B (zh) 一种用于基于服务模型的应用集群迁移的方法和迁移装置
US11329888B2 (en) End-to-end automated servicing model for cloud computing platforms
US8448219B2 (en) Securely hosting workloads in virtual computing environments
CN110178357A (zh) 远程设备可接入的云中基于云的手机服务
CN110520843A (zh) 集群环境中高度可用的有状态容器
Doherty SDN and NFV simplified: a visual guide to understanding software defined networks and network function virtualization
CN103226493B (zh) 多操作系统业务的部署方法和系统
US10135692B2 (en) Host management across virtualization management servers
US20160149771A1 (en) Transparent orchestration and management of composite network functions
US9183097B2 (en) Virtual infrastructure recovery configurator
CN110727653B (zh) 多项目负载均衡方法和装置
CN109313564A (zh) 用于支持多个不同租户的高度可用虚拟桌面的服务器计算机管理系统
WO2012039053A1 (ja) 計算機システムの運用管理方法、計算機システム及びプログラムを記憶する計算機読み取り可能な媒体
CN106789432A (zh) 基于自主可控云平台技术的测试系统
CN107590033A (zh) 一种创建docker容器的方法、装置和系统
CN106462457A (zh) 虚拟化应用集群
CN105357067A (zh) 一种云平台的测试方法及系统
Marshall Mastering VMware VSphere 6

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170531

RJ01 Rejection of invention patent application after publication