CN111625497A - 一种分布式文件系统的部署方法、装置、设备及存储介质 - Google Patents

一种分布式文件系统的部署方法、装置、设备及存储介质 Download PDF

Info

Publication number
CN111625497A
CN111625497A CN202010442859.3A CN202010442859A CN111625497A CN 111625497 A CN111625497 A CN 111625497A CN 202010442859 A CN202010442859 A CN 202010442859A CN 111625497 A CN111625497 A CN 111625497A
Authority
CN
China
Prior art keywords
container node
file system
client container
distributed file
configuration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010442859.3A
Other languages
English (en)
Other versions
CN111625497B (zh
Inventor
刘江
孟军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Baike Data Technology Shenzhen Co ltd
Original Assignee
Baike Data Technology Shenzhen Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Baike Data Technology Shenzhen Co ltd filed Critical Baike Data Technology Shenzhen Co ltd
Priority to CN202010442859.3A priority Critical patent/CN111625497B/zh
Publication of CN111625497A publication Critical patent/CN111625497A/zh
Application granted granted Critical
Publication of CN111625497B publication Critical patent/CN111625497B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/60Software deployment
    • G06F8/61Installation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/455Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533Hypervisors; Virtual machine monitors
    • G06F9/45558Hypervisor-specific management and integration aspects
    • G06F2009/45595Network integration; Enabling network access in virtual machine instances

Abstract

本发明实施例公开了一种分布式文件系统的部署方法、装置、设备及存储介质。该方法包括:根据客户端容器节点的网络地址对各个客户端容器节点进行认证;向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装;基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,并根据配置文件控制各个客户端容器节点进行配置。本发明实施例所提供的技术方案,实现了分布式文件系统简单高效的自动化部署过程,并提高了分布式文件系统的可扩展性及灵活性,同时为用户对分布式文件系统的测试及重建提供了更多的便利,也降低了部署所需的资源消耗及成本。

Description

一种分布式文件系统的部署方法、装置、设备及存储介质
技术领域
本发明实施例涉及计算机存储技术领域,尤其涉及一种分布式文件系统的部署方法、装置、设备及存储介质。
背景技术
分布式文件系统Ceph能够同时提供对象存储、块存储和文件系统存储这三种存储服务的统一存储架构,能够满足不同应用需求前提下的简化部署和运维,同时还具有高可靠性和高扩展性,因此、在大数据、云计算以及海量存储等领域中得到了越来越广泛的应用。
但是Ceph是一个较为庞大的系统,Ceph的组件及工作流程都非常的复杂,而Ceph官方推荐的部署方案为手动部署方案,操作复杂且配置任务繁多,需要专业技术人员进行操作。现有技术中也存在一些半自动化的部署方案,但仍然需要较多的前期准备和手动配置过程,且通常只适用于特定的操作系统,而不具有普适性,难以使用及推广。
发明内容
本发明实施例提供一种分布式文件系统的部署方法、装置、设备及存储介质,以实现分布式文件系统Ceph简单高效的自动化部署过程。
第一方面,本发明实施例提供了一种分布式文件系统的部署方法,应用于服务端容器节点,该方法包括:
根据客户端容器节点的网络地址对各个客户端容器节点进行认证;
向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装;
基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,并根据配置文件控制各个客户端容器节点进行配置。
第二方面,本发明实施例还提供了一种分布式文件系统的部署装置,应用于服务端容器节点,该装置包括:
节点认证模块,用于根据客户端容器节点的网络地址对各个客户端容器节点进行认证;
系统安装模块,用于向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装;
系统配置模块,用于基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,并根据配置文件控制各个客户端容器节点进行配置。
第三方面,本发明实施例还提供了一种计算机设备,该设备包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明任意实施例所提供的分布式文件系统的部署方法。
第四方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明任意实施例所提供的分布式文件系统的部署方法。
本发明实施例提供了一种分布式文件系统的部署方法,通过服务端容器节点根据客户端容器节点的网络地址对各个客户端容器节点进行认证,认证后由服务端容器节点向客户端容器节点发送安装指令以控制客户端容器节点安装分布式文件系统的软件包,完成安装后,再由服务端容器节点生成配置文件,并控制客户端容器节点对分布式文件系统进行配置。本发明实施例通过利用服务器管理工具(Saltstack),实现了分布式文件系统简单高效的自动化部署过程,并提高了分布式文件系统的可扩展性及灵活性,同时通过在容器环境下完成分布式文件系统的部署过程,为用户对分布式文件系统的测试及重建提供了更多的便利,并降低了部署所需的资源消耗及成本。
附图说明
图1A是本发明实施例一所提供的分布式文件系统的部署方法的流程图;
图1B是本发明实施例一中所提到的服务器管理工具Saltstack基本架构的示意图;
图1C是本发明实施例一中所提到的分布式文件系统中各节点的节点功能类型的示意图;
图2是本发明实施例二所提供的分布式文件系统的部署方法的流程图;
图3是本发明实施例三所提供的分布式文件系统的部署装置的结构示意图;
图4是本发明实施例四提供的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中使用的术语只是为了描述具体的实施方式的目的,不是旨在于限制本发明。本文所使用的术语“和/或”包括一个或多个相关的所列项目的任意的和所有的组合。在本发明的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各步骤描述成顺序的处理,但是其中的许多步骤可以被并行地、并发地或者同时实施。此外,各步骤的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一
图1A为本发明实施例一所提供的分布式文件系统的部署方法的流程图,应用于服务端容器节点。本实施例可适用于对分布式文件系统进行部署的情况,该方法可以由本发明实施例所提供的分布式文件系统的部署装置来执行,该装置可以由硬件和/或软件的方式来实现,一般可集成于计算机设备中。如图1A所示,具体包括如下步骤:
S11、根据客户端容器节点的网络地址对各个客户端容器节点进行认证。
其中,客户端容器节点是相对于服务端容器节点的含义,这里的容器是指分布式文件系统的部署是在容器环境下完成的,即将容器环境中的单个容器作为Saltstack的服务端节点或客户端节点。其中,容器(Docker)技术是与宿主机共享硬件资源及操作系统,可以实现资源的动态分配。容器包含应用及其所需的依赖包,在宿主机的操作系统中以分离的进程运行,从而实现在隔离的进程中运行应用程序及其依赖关系。
服务端容器节点是Saltstack中的管理方节点(master),而客户端容器节点是Saltstack中的被管理方节点(minion),可选的,服务端容器节点可以为一个或多个,客户端容器节点为至少一个。其中,Saltstack是一个服务器基础设施管理工具,具有配置管理、远程执行以及监控等功能,从少量本地网络系统到跨越数个数据中心,均是采用服务器-客户端(C/S,Client-Server)模型的拓扑架构,从而可以提高客户端的响应速度,并使得配置过程更加简单,其中,Saltstack的基本架构如图1B所示。在Saltstack服务过程中,所有的客户端容器节点可以同时实时的接收服务端容器节点发送的命令,同时服务端容器节点的通信只是一套轻量级的指令,而客户端容器节点在本地存储可用于执行的所有命令,因此可以立即执行命令并将结果快速返回。
在服务端容器节点对客户端容器节点进行认证的过程中,首先接收客户端容器节点发起的握手以及携带的客户端公钥并通过salt-key命令进行认证,然后服务端容器节点根据各个客户端容器节点对应的网络地址将自身的服务端公钥以及高级加密标准(Advanced Encryption Standard,AES)密钥返回至各个客户端容器节点,从而完成对各个客户端容器节点的认证,以实现服务端容器节点与客户端容器节点之间的通信。其中,AES密钥是使用对应的客户端公钥进行加密生成的,因此只能通过对应的服务端容器节点进行解密,从而确保了通信过程的安全。
可选的,在根据客户端容器节点的网络地址对各个客户端容器节点进行认证之前,还包括:根据各个容器上安装的镜像文件启动Saltstack的管理服务。其中,该镜像文件是包括Saltstack的相关软件包的定制镜像文件,且作为服务端容器节点和客户端容器节点的容器上安装的镜像文件不同。在容器环境安装完成后,及在安装镜像文件之前,可以根据用户的选择确定各个容器的角色,即确定其中分别作为服务端容器节点和客户端容器节点的容器,也可以随机的将其中一个或多个容器直接确定为服务端容器节点,同时将其他用于部署分布式文件系统的容器确定为客户端容器节点。在启动Saltstack的管理服务之后,即可接收客户端容器节点发起的握手以开始认证过程。在完成认证后,即可在Saltstack服务的服务端容器节点和客户端容器节点之间,通过消息队列(ZeroMQ)的请求回应模型(Request-Reply)来实现整个分布式文件系统的部署过程。
可选的,在根据客户端容器节点的网络地址对各个客户端容器节点进行认证之后,还包括:对客户端容器节点进行免密操作以及时间同步操作。具体的,可以为服务端容器节点设置安全外壳协议(Secure Shell,SSH)密钥,并将其发送到各个客户端容器节点上进行存储,进而可以实现服务端容器节点无密码登录各个服务端容器节点。然后通过配置服务端容器节点和所有的客户端容器节点上的网络时间协议(Network Time Protocol,NTP)服务来实现服务端容器节点和所有的客户端容器节点的时间同步。
S12、向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装。
在本实施例中,该分布式文件系统可以为Ceph。在完成对客户端容器节点的认证之后,可以向各个客户端容器节点发送安装指令,以控制各个客户端容器节点对分布式文件系统的软件包进行安装,其中,该软件包均预先存储在各个客户端容器节点本地。具体的,可以通过使用Ceph-deploy工具来实现安装以及后续部署配置的过程,其中,Ceph-deploy是Ceph中定义存储系统的一部分,用来方便的配置和管理Ceph存储集群。在控制客户端容器节点进行安装的同时,服务端容器节点也可以进行分布式文件系统的软件包的安装。
可选的,在控制认证后的客户端容器节点进行分布式文件系统的软件包的安装之前,还包括:对客户端容器节点上的安装过程进行规划。具体的,规划过程可以包括为各个客户端容器节点分配存储磁盘以及日志盘等等。
可选的,在向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装之后,还包括:根据客户端容器节点的资源使用情况确定客户端容器节点的节点功能类型,其中,节点功能类型包括:监视器、对象存储器以及监视器兼对象存储器。
具体的,在服务端容器节点完成分布式文件系统的软件的安装之后,即在服务端容器节点上创建一个监视器(Monitor),用于监控、管理和协调整个分布式系统环境中其他服务端容器节点和客户端容器节点的工作过程,以保证整个分布环境中的数据一致性。可选的,在分布式文件系统的集群中,节点功能类型包括监视器的节点可以为多个,以在某些节点故障的情况下整个分布式文件系统依然可以稳定的工作,同时可选的,节点功能类型包括监视器的节点可以为奇数个,以便于形成仲裁,其中,节点包括服务端容器节点和/或客户端容器节点。
在服务端容器节点完成分布式文件系统的软件的安装之后,同时也在服务端容器节点上创建至少一个对象存储器(Object Storage Device,OSD),用于集群中数据与对象的存储,处理集群数据的复制、恢复、回填及再均衡,并向集群中其他OSD节点发送心跳,以及向Monitor提供监控信息等,即服务端容器节点的节点功能类型为监视器兼对象存储器(Monitor & OSD)。当分布式文件系统存储集群设定数据有两个副本时,设置OSD节点的个数为至少两个,以使集群达到活跃且清洁(active + clean)的状态。
在控制客户端容器节点完成软件包的安装之后,可以根据各个客户端容器节点的资源使用情况确定各个客户端容器节点的节点功能类型。具体的,如图1C所示,可以通过查询各个客户端容器节点的磁盘可用情况来确定节点功能类型为Monitor、OSD或Monitor兼OSD,并可以确定客户端容器节点上需要创建的OSD的数量等。在确定各个客户端容器节点的节点功能类型之后,可以向各个客户端容器节点发送对应的指令,以控制各个客户端容器节点创建相应数量的Monitor和/或OSD。可选的,可以为所有的客户端容器节点创建OSD,以提高分布式文件系统的存储能力。
可选的,在确定客户端容器节点的节点功能类型之后,还可以为各个服务端容器节点与客户端容器节点创建元数据服务器MDS,用于为分布式文件系统提供元数据计算、缓存与同步,以便于分布式文件系统使用文件系统存储解决方案CephFS。其中,元数据存储在OSD节点中,而MDS类似于元数据的代理缓存服务器。
可选的,在向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装之后,还包括:获取客户端容器节点上分布式文件系统的安装进度以及运行状态。
具体的,在控制客户端容器节点安装软件包之后,可以向正在安装的各个客户端容器节点发送安装进度查询指令,以获取各个客户端容器节点上软件包的安装进度,具体可以是已安装百分比模式或已安装文件数量模式等。同时可以向各个客户端容器节点发送运行状态查看指令,以收集部署分布式文件系统上各个服务端容器节点和客户端容器节点的状态,进而判断集群的状态是否正常。可选的,运行状态可包括:集群健康状态、集群使用状态、Monitor状态、OSD状态、归置组PG状态以及Monitor仲裁状态等。
S13、基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,并根据配置文件控制各个客户端容器节点进行配置。
具体的,服务端容器节点可以根据部署客户端容器节点的情况生成分布式文件系统的配置文件,配置文件中的配置参数可包括:集群内使用的网络环境、为用户提供访问的公共网络环境、集群中逻辑分区Pool的副本数、对象名称的长度、日志的大小以及集群数据存储的路径等等。在生成配置文件之后,可以向各个客户端容器节点发送配置指令,以控制各个客户端容器节点按照该配置文件进行配置。
可选的,基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,包括:根据用户在服务端容器节点上的图形界面进行的参数配置生成配置文件,其中,未被用户配置的参数采用默认值。
具体的,在服务端容器节点上可以将分布式文件系统集群的个性化配置以图形方式展示给用户,并根据用户对各个配置参数的实际配置记录参数值,在用户确认完成配置后,即可确定分布式文件系统集群的个性化配置参数项,而对于其他用户未更改的参数项可采用系统存储的参数默认值。在完成接收用户的参数配置之后,即可根据用户的配置以及参数默认值生成配置文件,并根据该配置文件控制各个客户端容器节点进行配置。
本发明实施例所提供的技术方案,通过利用服务器管理工具(Saltstack),实现了分布式文件系统简单高效的自动化部署过程,并提高了分布式文件系统的可扩展性及灵活性,同时通过在容器环境下完成分布式文件系统的部署过程,为用户对分布式文件系统的测试及重建提供了更多的便利,并降低了部署所需的资源消耗及成本。
实施例二
图2为本发明实施例二所提供的分布式文件系统的部署方法的流程图,应用于服务端容器节点。本实施例的技术方案在上述技术方案的基础上进一步细化,具体的,在本实施例中,可以在控制客户端容器节点配置分布式文件系统之前,对各个客户端容器节点的运行环境进行检查,以确定各个客户端容器节点的运行环境是否能够满足分布式文件系统的配置条件,以更好的实现分布式文件系统的配置过程。即在根据配置文件控制各个客户端容器节点进行配置之前,还包括:检查客户端容器节点的运行环境是否满足分布式文件系统的配置条件。相应的,如图2所示,具体包括如下步骤:
S21、根据客户端容器节点的网络地址对各个客户端容器节点进行认证。
S22、向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装。
S23、检查客户端容器节点的运行环境是否满足分布式文件系统的配置条件。
具体的,在完成对客户端容器节点的认证之后,可以向各个客户端容器节点发送环境检查指令,以检查作为客户端容器节点的各个容器的运行环境是否能够满足分布式文件系统的配置条件,即配置分布式文件系统集群的条件。可选的,配置条件包括:网络连接情况、NTP服务情况、集群服务器时间和时区一致性、防火墙策略以及磁盘阵列情况等。若接收到客户端容器节点返回的答复为满足配置条件,则进一步生成配置文件并发送至各个客户端容器节点进行配置。通过预先对客户端容器节点的运行环境进行检查,可以减少客户端容器节点配置失败的情况,实现在配置之前了解运行状态,以便于对状态问题及时的进行处理。
S24、若满足,则基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,并根据配置文件控制各个客户端容器节点进行配置。
S25、若存在至少一个客户端容器节点的运行环境不满足配置条件,则控制不满足的客户端容器节点对运行环境进行清理。
具体的,若各个客户端容器节点中存在至少一个客户端容器节点的运行环境不满足分布式文件系统的配置条件,则向不满足配置条件的客户端容器节点发送环境清理指令,以解决其中存在的状态问题。可选的,对于其他满足配置条件的客户端容器节点,可以先进行系统的配置过程,以减少因为少数客户端容器节点的状态问题影响整体系统的配置进度。
S26、再次检查运行环境不满足配置条件的客户端容器节点的运行环境,若仍不满足,则通知管理员进行配置。
在不满足配置条件的客户端容器节点完成了环境清理过程后,可以在接收到客户端容器节点返回的清理完成消息之后,再次向不满足配置条件的客户端容器节点发送环境检查指令,以再次检查运行环境是否满足分布式文件系统的配置条件,若接收到客户端容器节点返回的答复为满足配置条件,则进一步生成配置文件并发送至各个尚未完成配置的客户端容器节点进行配置。若仍不能满足分布式文件系统的配置条件,则可通知管理员对运行环境进行配置,并可根据管理员的配置情况确定是否需要进一步对客户端容器节点进行配置以及配置所需的参数等等,具体的,可以通知管理员在服务端容器节点上进行配置,并将管理员配置的内容发送至指定的客户端容器节点。
本发明实施例所提供的技术方案,通过预先对客户端容器节点的运行环境进行检查,以确定各个客户端容器节点的运行环境是否能够满足分布式文件系统的配置条件,并对不满足配置条件的客户端容器节点的运行环境进行清理,对清理后仍不满足的客户端容器节点通知管理员进行配置,减少了客户端容器节点配置失败的情况,实现了在配置之前了解客户端容器节点的运行状态,以便于对状态问题及时的进行处理。
实施例三
图3为本发明实施例三所提供的分布式文件系统的部署装置的结构示意图,应用于服务端容器节点。该装置可以由硬件和/或软件的方式来实现,一般可集成于计算机设备中,用于执行本发明任意实施例所提供的分布式文件系统的部署方法。如图3所示,该装置包括:
节点认证模块31,用于根据客户端容器节点的网络地址对各个客户端容器节点进行认证;
系统安装模块32,用于向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装;
系统配置模块33,用于基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,并根据配置文件控制各个客户端容器节点进行配置。
本发明实施例所提供的技术方案,通过利用服务器管理工具(Saltstack),实现了分布式文件系统简单高效的自动化部署过程,并提高了分布式文件系统的可扩展性及灵活性,同时通过在容器环境下完成分布式文件系统的部署过程,为用户对分布式文件系统的测试及重建提供了更多的便利,并降低了部署所需的资源消耗及成本。
在上述技术方案的基础上,可选的,该分布式文件系统的部署装置,还包括:
功能确定模块,用于在向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装之后,根据客户端容器节点的资源使用情况确定客户端容器节点的节点功能类型,其中,节点功能类型包括:监视器、对象存储器以及监视器兼对象存储器。
在上述技术方案的基础上,可选的,该分布式文件系统的部署装置,还包括:
配置管理模块,用于在根据客户端容器节点的网络地址对各个客户端容器节点进行认证之后,对客户端容器节点进行免密操作以及时间同步操作。
在上述技术方案的基础上,可选的,该分布式文件系统的部署装置,还包括:
环境管理模块,用于在根据配置文件控制各个客户端容器节点进行配置之前,检查客户端容器节点的运行环境是否满足分布式文件系统的配置条件。
在上述技术方案的基础上,可选的,环境管理模块还用于:
在检查客户端容器节点的运行环境是否满足分布式文件系统的配置条件之后,若存在至少一个客户端容器节点的运行环境不满足配置条件,则控制不满足的客户端容器节点对运行环境进行清理;
再次检查运行环境不满足配置条件的客户端容器节点的运行环境,若仍不满足,则通知管理员进行配置。
在上述技术方案的基础上,可选的,该分布式文件系统的部署装置,还包括:
系统状态获取模块,用于在向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装之后,获取客户端容器节点上分布式文件系统的安装进度以及运行状态。
在上述技术方案的基础上,可选的,系统配置模块33,包括:
配置文件生成单元,用于根据用户在服务端容器节点上的图形界面进行的参数配置生成配置文件,其中,未被用户配置的参数采用默认值。
本发明实施例所提供的分布式文件系统的部署装置可执行本发明任意实施例所提供的分布式文件系统的部署方法,具备执行方法相应的功能模块和有益效果。
值得注意的是,在上述分布式文件系统的部署装置的实施例中,所包括的各个单元和模块只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
实施例四
图4为本发明实施例四提供的一种计算机设备的结构示意图,示出了适于用来实现本发明实施方式的示例性计算机设备的框图。图4显示的计算机设备仅仅是一个示例,不应对本发明实施例的功能和使用范围带来任何限制。如图4所示,该计算机设备包括处理器41、存储器42、输入装置43及输出装置44;计算机设备中处理器41的数量可以是一个或多个,图4中以一个处理器41为例,计算机设备中的处理器41、存储器42、输入装置43及输出装置44可以通过总线或其他方式连接,图4中以通过总线连接为例。
存储器42作为一种计算机可读存储介质,可用于存储软件程序、计算机可执行程序以及模块,如本发明实施例中的分布式文件系统的部署方法对应的程序指令/模块(例如,分布式文件系统的部署装置中的节点认证模块31、系统安装模块32及系统配置模块33)。处理器41通过运行存储在存储器42中的软件程序、指令以及模块,从而执行计算机设备的各种功能应用以及数据处理,即实现上述的分布式文件系统的部署方法。
存储器42可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序;存储数据区可存储根据计算机设备的使用所创建的数据等。此外,存储器42可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储器42可进一步包括相对于处理器41远程设置的存储器,这些远程存储器可以通过网络连接至移动终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置43可用于接收用户输入的配置参数的值,还可用于接收其他系统节点发送的控制信号或响应信号,以及产生与计算机设备的用户设置以及功能控制有关的键信号输入。输出装置44可用于向其他系统节点发送控制信号或响应信号等,还可包括显示屏等显示设备,可用于向用户显示待配置的参数项。
实施例五
本发明实施例五还提供一种包含计算机可执行指令的存储介质,该计算机可执行指令在由计算机处理器执行时用于执行一种分布式文件系统的部署方法,该方法包括:
根据客户端容器节点的网络地址对各个客户端容器节点进行认证;
向认证后的客户端容器节点发送指令,以控制认证后的客户端容器节点进行分布式文件系统的软件包的安装;
基于安装了软件包的客户端容器节点生成分布式文件系统的配置文件,并根据配置文件控制各个客户端容器节点进行配置。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到计算机系统。第二计算机系统可以提供程序指令给计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本发明实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的方法操作,还可以执行本发明任意实施例所提供的分布式文件系统的部署方法中的相关操作。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于无线、电线、光缆、RF等等,或者上述的任意合适的组合。
通过以上关于实施方式的描述,所属领域的技术人员可以清楚地了解到,本发明可借助软件及必需的通用硬件来实现,当然也可以通过硬件实现,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如计算机的软盘、只读存储器(Read-Only Memory, ROM)、随机存取存储器(RandomAccess Memory, RAM)、闪存(FLASH)、硬盘或光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种分布式文件系统的部署方法,应用于服务端容器节点,其特征在于,包括:
根据客户端容器节点的网络地址对各个所述客户端容器节点进行认证;
向认证后的所述客户端容器节点发送指令,以控制认证后的所述客户端容器节点进行分布式文件系统的软件包的安装;
基于安装了所述软件包的所述客户端容器节点生成所述分布式文件系统的配置文件,并根据所述配置文件控制各个所述客户端容器节点进行配置。
2.根据权利要求1所述的分布式文件系统的部署方法,其特征在于,在所述向认证后的所述客户端容器节点发送指令,以控制认证后的所述客户端容器节点进行分布式文件系统的软件包的安装之后,还包括:
根据所述客户端容器节点的资源使用情况确定所述客户端容器节点的节点功能类型,其中,所述节点功能类型包括:监视器、对象存储器以及监视器兼对象存储器。
3.根据权利要求1所述的分布式文件系统的部署方法,其特征在于,在所述根据客户端容器节点的网络地址对各个所述客户端容器节点进行认证之后,还包括:
对所述客户端容器节点进行免密操作以及时间同步操作。
4.根据权利要求1所述的分布式文件系统的部署方法,其特征在于,在所述根据所述配置文件控制各个所述客户端容器节点进行配置之前,还包括:
检查所述客户端容器节点的运行环境是否满足所述分布式文件系统的配置条件。
5.根据权利要求4所述的分布式文件系统的部署方法,其特征在于,在所述检查所述客户端容器节点的运行环境是否满足所述分布式文件系统的配置条件之后,还包括:
若存在至少一个所述客户端容器节点的运行环境不满足所述配置条件,则控制不满足的所述客户端容器节点对运行环境进行清理;
再次检查运行环境不满足所述配置条件的所述客户端容器节点的运行环境,若仍不满足,则通知管理员进行配置。
6.根据权利要求1所述的分布式文件系统的部署方法,其特征在于,在所述向认证后的所述客户端容器节点发送指令,以控制认证后的所述客户端容器节点进行分布式文件系统的软件包的安装之后,还包括:
获取所述客户端容器节点上所述分布式文件系统的安装进度以及运行状态。
7.根据权利要求1所述的分布式文件系统的部署方法,其特征在于,所述基于安装了所述软件包的所述客户端容器节点生成所述分布式文件系统的配置文件,包括:
根据用户在所述服务端容器节点上的图形界面进行的参数配置生成所述配置文件,其中,未被用户配置的参数采用默认值。
8.一种分布式文件系统的部署装置,应用于服务端容器节点,其特征在于,包括:
节点认证模块,用于根据客户端容器节点的网络地址对各个所述客户端容器节点进行认证;
系统安装模块,用于向认证后的所述客户端容器节点发送指令,以控制认证后的所述客户端容器节点进行分布式文件系统的软件包的安装;
系统配置模块,用于基于安装了所述软件包的所述客户端容器节点生成所述分布式文件系统的配置文件,并根据所述配置文件控制各个所述客户端容器节点进行配置。
9.一种计算机设备,其特征在于,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的分布式文件系统的部署方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-7中任一所述的分布式文件系统的部署方法。
CN202010442859.3A 2020-05-22 2020-05-22 一种分布式文件系统的部署方法、装置、设备及存储介质 Active CN111625497B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010442859.3A CN111625497B (zh) 2020-05-22 2020-05-22 一种分布式文件系统的部署方法、装置、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010442859.3A CN111625497B (zh) 2020-05-22 2020-05-22 一种分布式文件系统的部署方法、装置、设备及存储介质

Publications (2)

Publication Number Publication Date
CN111625497A true CN111625497A (zh) 2020-09-04
CN111625497B CN111625497B (zh) 2023-04-28

Family

ID=72271079

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010442859.3A Active CN111625497B (zh) 2020-05-22 2020-05-22 一种分布式文件系统的部署方法、装置、设备及存储介质

Country Status (1)

Country Link
CN (1) CN111625497B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112073247A (zh) * 2020-09-10 2020-12-11 工银科技有限公司 区块链网络部署方法、装置、计算机系统和介质
CN112783610A (zh) * 2021-01-30 2021-05-11 柏科数据技术(深圳)股份有限公司 基于Saltstack部署Ceph的主节点
CN112860374A (zh) * 2021-01-30 2021-05-28 柏科数据技术(深圳)股份有限公司 快速部署Ceph方法、装置、服务器及存储介质
CN112988333A (zh) * 2021-04-26 2021-06-18 武汉深之度科技有限公司 一种容器应用认证方法、系统、计算设备及可读存储介质
CN115757361A (zh) * 2022-12-26 2023-03-07 北京柏睿数据技术股份有限公司 一种数据库集群系统自动化部署的方法和系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102455925A (zh) * 2010-11-02 2012-05-16 金蝶软件(中国)有限公司 一种软件自动化部署方法、装置及终端
US20180278724A1 (en) * 2017-03-22 2018-09-27 Mastercard International Incorporated Systems and methods for automated application deployment management
CN108965003A (zh) * 2018-07-16 2018-12-07 郑州云海信息技术有限公司 一种分布式集群的部署方法、装置、系统及存储介质
CN111026415A (zh) * 2019-12-17 2020-04-17 南京奥工信息科技有限公司 基于容器技术动态适应软硬件运行环境的软件部署方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102455925A (zh) * 2010-11-02 2012-05-16 金蝶软件(中国)有限公司 一种软件自动化部署方法、装置及终端
US20180278724A1 (en) * 2017-03-22 2018-09-27 Mastercard International Incorporated Systems and methods for automated application deployment management
CN108965003A (zh) * 2018-07-16 2018-12-07 郑州云海信息技术有限公司 一种分布式集群的部署方法、装置、系统及存储介质
CN111026415A (zh) * 2019-12-17 2020-04-17 南京奥工信息科技有限公司 基于容器技术动态适应软硬件运行环境的软件部署方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
运维饺子: "使用saltstack给minion自动化安装httpd及配置管理", 《CSDN: HTTPS://BLOG.CSDN.NET/QQ_37369726/ARTICLE/DETAILS/103349455》 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112073247A (zh) * 2020-09-10 2020-12-11 工银科技有限公司 区块链网络部署方法、装置、计算机系统和介质
CN112073247B (zh) * 2020-09-10 2023-03-24 中国工商银行股份有限公司 区块链网络部署方法、装置、计算机系统和介质
CN112783610A (zh) * 2021-01-30 2021-05-11 柏科数据技术(深圳)股份有限公司 基于Saltstack部署Ceph的主节点
CN112860374A (zh) * 2021-01-30 2021-05-28 柏科数据技术(深圳)股份有限公司 快速部署Ceph方法、装置、服务器及存储介质
CN112988333A (zh) * 2021-04-26 2021-06-18 武汉深之度科技有限公司 一种容器应用认证方法、系统、计算设备及可读存储介质
CN112988333B (zh) * 2021-04-26 2021-09-03 武汉深之度科技有限公司 一种容器应用认证方法、系统、计算设备及可读存储介质
CN115757361A (zh) * 2022-12-26 2023-03-07 北京柏睿数据技术股份有限公司 一种数据库集群系统自动化部署的方法和系统
CN115757361B (zh) * 2022-12-26 2023-08-18 北京柏睿数据技术股份有限公司 一种数据库集群系统自动化部署的方法和系统

Also Published As

Publication number Publication date
CN111625497B (zh) 2023-04-28

Similar Documents

Publication Publication Date Title
CN111625496B (zh) 分布式文件系统在虚拟机环境下的部署方法、装置及设备
CN111625497B (zh) 一种分布式文件系统的部署方法、装置、设备及存储介质
US7418702B2 (en) Concurrent web based multi-task support for control management system
JP6707153B2 (ja) クラウドコンピューティングノードのセキュアな設定
CN112035215B (zh) 节点集群的节点自治方法、系统、装置及电子设备
US20120096461A1 (en) Load balancing in multi-server virtual workplace environments
CN106911648B (zh) 一种环境隔离方法及设备
CN104932941B (zh) 一种分布式消息处理系统及其中的设备和方法
US9021008B1 (en) Managing targeted scripts
CN105260377B (zh) 一种基于分级存储的升级方法和系统
CN111212117A (zh) 一种远程交互的方法和装置
US8903096B2 (en) Security key distribution in a cluster
CN111935195B (zh) 分布式系统管理方法、装置、存储介质和分布式管理系统
CN112035062A (zh) 云计算的本地存储的迁移方法、计算机设备及存储介质
CN114697334B (zh) 一种编排任务的执行方法和装置
CN110545320A (zh) 一种内网数据交互方法及设备
CN112506705B (zh) 一种分布式存储的配置信息备份方法及装置
CN116192853B (zh) 一种多集群管理的方法
CN112241323A (zh) 基于fpga服务器的计算资源发现及管理方法、系统
CN112506704B (zh) 一种物联网网关的配置信息备份方法及装置
CN112506703B (zh) 一种物联网终端配置信息的备份方法及装置
CN116822637A (zh) 一种量子计算机集群扩容方法、装置、设备、存储介质
CN115098065A (zh) 任务的转换方法和装置、电子设备及存储介质
CN111880985A (zh) 一种kx操作系统的设计
KR100663787B1 (ko) 범용 실시간 관제시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: No.3333 Liuxian Avenue, Fuguang community, Taoyuan Street, Nanshan District, Shenzhen, Guangdong 518000

Applicant after: BAIKE DATA TECHNOLOGY (SHENZHEN) CO.,LTD.

Address before: 518000 room 701-c, 7th floor, bike technology, No.9, Keke Road, high tech Zone, Nanshan District, Shenzhen City, Guangdong Province

Applicant before: BAIKE DATA TECHNOLOGY (SHENZHEN) CO.,LTD.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant