CN110149409A - 云主机元数据服务管理方法、系统、设备及存储介质 - Google Patents

云主机元数据服务管理方法、系统、设备及存储介质 Download PDF

Info

Publication number
CN110149409A
CN110149409A CN201910479324.0A CN201910479324A CN110149409A CN 110149409 A CN110149409 A CN 110149409A CN 201910479324 A CN201910479324 A CN 201910479324A CN 110149409 A CN110149409 A CN 110149409A
Authority
CN
China
Prior art keywords
server
cloud host
cloud
service
agent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910479324.0A
Other languages
English (en)
Other versions
CN110149409B (zh
Inventor
汤晓栋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201910479324.0A priority Critical patent/CN110149409B/zh
Publication of CN110149409A publication Critical patent/CN110149409A/zh
Application granted granted Critical
Publication of CN110149409B publication Critical patent/CN110149409B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0803—Configuration setting
    • H04L41/0806—Configuration setting for initial configuration or provisioning, e.g. plug-and-play
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/08—Configuration management of networks or network elements
    • H04L41/0893—Assignment of logical groups to network elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1004—Server selection for load balancing
    • H04L67/1008—Server selection for load balancing based on parameters of servers, e.g. available memory or workload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1029—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers using data related to the state of servers by a load balancer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H04L67/1031—Controlling of the operation of servers by a load balancer, e.g. adding or removing servers that serve requests
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/34—Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/56—Provisioning of proxy services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H04L67/63—Routing a service request depending on the request content or context

Abstract

本发明涉及云技术领域，公开了一种云主机元数据服务管理方法，包括以下步骤：云管理服务器将元数据服务的应用程序包上传文件服务器；计算当前系统负载；判断当前系统负载与预置最大系统负载的比值是否超过预置比值；若是，则采用分布式部署模式部署新的云主机；通过Agent服务器下发元数据服务安装命令至新部署的云主机，以供新部署的云主机基于所述元数据服务安装命令，从所述文件服务器下载元数据服务的应用程序包并进行安装，以部署新的元数据服务器。本发明还公开了一种云主机元数据服务管理系统、设备及计算机可读存储介质。本发明实现了高访问流量下的元数据服务快捷部署，提升了系统的稳定性与健壮性。

Description

云主机元数据服务管理方法、系统、设备及存储介质
技术领域
本发明涉及云技术领域，尤其涉及一种云主机元数据服务管理方法、系统、设备及计算机可读存储介质。
背景技术
目前市面上的云服务平台通常都是基于开源CloudStack打造的，CloudStack提供三种系统虚拟机，其中，虚拟路由器VR负责对外提供包括元数据服务在内的多种服务，并且每一个客户网络对应一个VR，由CloudStack负责该虚拟机的整个生命周期，如果CloudStack发生故障，则会导致VR无法正常对外提供元数据服务，并且VR对外使用的是单点服务机制，因而无法实现高可用，也即现有云服务平台的云服务存在无法实现高可用的问题。
发明内容
本发明的主要目的在于提供一种云主机元数据服务管理方法、系统、设备及计算机可读存储介质，旨在解决现有云服务平台的云服务存在无法实现高可用的技术问题。
为实现上述目的，本发明提供一种云主机元数据服务管理方法，所述云主机元数据服务管理方法包括以下步骤：
云管理服务器将元数据服务的应用程序包上传文件服务器；
计算当前系统负载；
判断当前系统负载与预置最大系统负载的比值是否超过预置比值；
若是，则采用分布式部署模式部署新的云主机；
通过Agent服务器下发元数据服务安装命令至新部署的云主机，以供新部署的云主机基于所述元数据服务安装命令，从所述文件服务器下载元数据服务的应用程序包并进行安装，以部署新的元数据服务器。
可选地，在所述通过Agent服务器下发元数据服务安装命令至新部署的云主机的步骤之后，还包括：
云主机通过注册安装的Agent服务，接收云管理服务器通过Agent服务器下发的元数据服务安装命令；
根据所述元数据服务安装命令中指定的文件名，从所述文件服务器下载对应的元数据服务的应用程序包并进行安装，以部署新的元数据服务器；
生成新的元数据服务器的部署执行结果并通过Agent服务返回至对应的Agent服务器；
Agent服务器保存元数据服务器返回的部署执行结果以及将部署执行结果转发至云管理服务器，以供云管理服务器生成本次部署元数据服务器的部署执行结果文档。
可选地，在所述云管理服务器将元数据服务的应用程序包上传文件服务器的步骤之前，还包括：
Agent服务器监测是否存在云主机发起的Agent服务注册请求，所述注册请求中包含有云主机的主机信息；
若存在，则生成云主机的Agent服务信息，并将所述Agent服务信息与云主机信息关联保存；
其中，所述Agent服务信息中包括所述云主机的AgentManager服务信息以及Agent服务的版本信息。
可选地，所述云主机元数据服务管理方法还包括：
Agent服务器创建定时任务并每隔预设时长检测各云主机注册的Agent服务的状态和版本信息；
若存在低于当前最新版本的Agent服务，则通过AgentManager服务下发更新命令至对应云主机；
若存在未开启的Agent服务，则通过AgentManager服务下发安装命令至对应云主机。
可选地，所述云主机元数据服务管理方法还包括：
负载均衡服务器接收用户云服务器发起的云主机初始化请求；
根据预置负载均衡算法，从元数据服务器集群中选择对应的元数据服务器并将所述云主机初始化请求转发至元数据服务器；
元数据服务器解析所述云主机初始化请求，得到请求内容；
基于所述请求内容，查找预置数据库，获得相关元数据，并将所述相关元数据通过负载均衡服务器转发至对应用户云服务器。
进一步地，为实现上述目的，本发明还提供一种云主机元数据服务管理系统，所述云主机元数据服务管理系统包括：云管区、公共服务区，各区域相互之间物理隔离；所述云管区部署有云管理服务器，所述云管理服务器用于部署新的元数据服务器；所述公共服务区部署有文件服务器、Agent服务器集群和云主机集群，所述文件服务器用于保存元数据服务的应用程序包，所述Agent服务器用于实现云管理服务器与各云主机之间的信息中转；
所述云管理服务器具体用于：
将元数据服务的应用程序包上传文件服务器；计算当前系统负载；判断当前系统负载与预置最大系统负载的比值是否超过预置比值；若是，则采用分布式部署模式部署新的云主机；通过Agent服务器下发元数据服务安装命令至新部署的云主机，以供新部署的云主机基于所述元数据服务安装命令，从所述文件服务器下载元数据服务的应用程序包并进行安装，以部署新的元数据服务器。
所述云主机具体用于：
通过注册安装的Agent服务，接收云管理服务器通过Agent服务器下发的元数据服务安装命令；根据所述元数据服务安装命令中指定的文件名，从所述文件服务器下载对应的元数据服务的应用程序包并进行安装；生成新的元数据服务器的部署执行结果并通过Agent服务返回至对应的Agent服务器；
所述Agent服务器具体用于：
保存元数据服务器返回的部署执行结果以及将部署执行结果转发至云管理服务器，以供云管理服务器生成本次部署元数据服务器的部署执行结果文档。
可选地，所述Agent服务器还用于：
监测是否存在云主机发起的Agent服务注册请求，所述注册请求中包含有云主机的主机信息；若存在，则生成云主机的Agent服务信息，并将所述Agent服务信息与云主机信息关联保存；其中，所述Agent服务信息中包括所述云主机的AgentManager服务信息以及Agent服务的版本信息；
所述Agent服务器还用于：
创建定时任务并每隔预设时长检测各云主机注册的Agent服务的状态和版本信息；若存在低于当前最新版本的Agent服务，则通过AgentManager服务下发更新命令至对应云主机；若存在未开启的Agent服务，则通过AgentManager服务下发安装命令至对应云主机。
可选地，所述公共服务区还部署有负载均衡服务器集群，所述云主机元数据服务管理系统还包括：用户区，所述用户区划分为多个子用户区域，每个子用户区域部署有多个用户云服务器；
所述负载均衡服务器用于：
接收用户云服务器发起的云主机初始化请求；根据预置负载均衡算法，从元数据服务器集群中选择对应的元数据服务器并将所述云主机初始化请求转发至元数据服务器；
所述元数据服务器用于：
解析所述云主机初始化请求，得到请求内容；基于所述请求内容，查找预置数据库，获得相关元数据，并将所述相关元数据通过负载均衡集群转发至对应用户云服务器。
进一步地，为实现上述目的，本发明还提供一种云主机元数据服务管理设备，所述云主机元数据服务管理设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的云主机元数据服务管理程序，所述云主机元数据服务管理程序被所述处理器执行时实现如上述任一项所述的云主机元数据服务管理方法的步骤。
进一步地，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有云主机元数据服务管理程序，所述云主机元数据服务管理程序被处理器执行时实现如上述任一项所述的云主机元数据服务管理方法的步骤。
本发明通过云管理服务器预先将元数据服务的应用程序包上传到文件服务器，然后在系统负载过载的情况下，通过调用Agent服务器的Agent服务接口，进而通过Agent服务接口下发元数据服务安装命令到待部署元数据服务的云主机上，然后由云主机基于元数据服务安装命令从文件服务器下载元数据服务的应用程序包并进行安装，从而实现元数据服务器的快捷部署。本发明根据实际的系统负载，快速部署元数据服务，以应对高并发和高可用，提升了系统运行的稳定性与健壮性。
附图说明
图1为本发明实施例方案涉及的云主机元数据服务管理设备运行环境的结构示意图；
图2为本发明云主机元数据服务管理方法第一实施例的流程示意图；
图3为本发明云主机元数据服务管理方法第二实施例的流程示意图；
图4为本发明云主机元数据服务管理方法第三实施例的流程示意图；
图5为本发明云主机元数据服务管理方法第四实施例的流程示意图；
图6为本发明云主机元数据服务管理方法第五实施例的流程示意图；
图7为本发明云主机元数据服务管理系统一实施例的功能模块部署架构示意图；
图8为本发明云主机元数据服务管理系统另一实施例的功能模块部署架构示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅用以解释本发明，并不用于限定本发明。
本发明提供一种云主机元数据服务管理设备。
参照图1，图1为本发明实施例方案涉及的云主机元数据服务管理设备运行环境的结构示意图。
如图1所示，该云主机元数据服务管理设备包括：处理器1001，例如CPU，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图1中示出的云主机元数据服务管理设备的硬件结构并不构成对云主机元数据服务管理设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种计算机可读存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及云主机元数据服务管理程序。其中，操作系统是管理和控制云主机元数据服务管理设备和软件资源的程序，支持云主机元数据服务管理程序以及其它软件和/或程序的运行。
在图1所示的云主机元数据服务管理设备的硬件结构中，网络接口1004主要用于接入网络；用户接口1003主要用于侦测确认指令和编辑指令等，而处理器1001可以用于调用存储器1005中存储的云主机元数据服务管理程序，并执行以下云主机元数据服务管理方法的各实施例的操作。
基于上述云主机元数据服务管理设备硬件结构，提出本发明云主机元数据服务管理方法的各个实施例。
参照图2，图2为本发明云主机元数据服务管理方法第一实施例的流程示意图。本实施例中，所述云主机元数据服务管理方法包括以下步骤：
步骤S110，云管理服务器将元数据服务的应用程序包上传文件服务器；
本实施例中，云管理服务器预先将需要安装的元数据服务的应用程序包上传到文件服务器存储。元数据服务的应用程序包为rpm格式，利用systemd管理系统服务命令即可实现自动安装。
此外，为便于进一步对主机进行管理，比如进行元数据服务管理，本实施例中，云管理服务器还可将各种脚本文件上传到文件服务器，比如，上传的脚本文件可用于获取主机CPU，内存和磁盘的负载情况、安装/卸载云主机上的第三方服务组件、执行自定义命令脚本(Linxu/Windows)、更新证书、检测软件/硬件可用性、以及各种元数据服务，如获取ip、主机名、uuid、用户云主机id、vpc标识、dns等元数据。
本实施例中，文件服务器位于中间层，云管理服务器以及云主机都可进行访问。
步骤S120，计算当前系统负载；
本实施例对于评价系统负载的指标不限，可以是描述服务器或操作系统性能的一些数据指标，如使用内存数、进程时间，也可以是描述系统各种资源的使用情况，如cpu占用率为68％，内存占用率为55％，一般使用“资源实际使用/总的资源可用量”计算资源利用率。
本实施例中优选以吞吐量作为评价系统负载的指标。吞吐量指单位时间内系统处理用户的请求数。从业务角度看，吞吐量可以用：请求数/秒、页面数/秒、人数/天或处理业务数/小时等单位来衡量；从网络角度看，吞吐量可以用：字节/秒来衡量；对于交互式应用来说，吞吐量指标反映的是服务器承受的压力，其能够说明系统的负载能力。
以不同方式表达的吞吐量可以说明不同层次的问题，例如，以字节数/秒方式可以表示数要受网络基础设施、服务器架构、应用服务器制约等方面的瓶颈；已请求数/秒的方式表示主要是受应用服务器和应用代码的制约体现出的瓶颈。当没有遇到性能瓶颈的时候，吞吐量与虚拟用户数之间存在一定的联系，可以采用以下公式计算：
F＝VU*R/T；
其中，F为吞吐量，VU表示虚拟用户个数，R表示每个虚拟用户发出的请求数，T表示性能测试所用的时间。
步骤S130，判断当前系统负载与预置最大系统负载的比值是否超过预置比值；
本实施例中，在计算出当前系统负载后，计算当前系统负载与预置的最大系统负载之间的比值，若该比值超过预设比例值，比如超过70％，则说明当前系统访问压力较大，需要增加新的系统资源，以保证对外服务的质量。
步骤S140，若是，则采用分布式部署模式部署新的云主机；
本实施例中，若检测到当前系统负载过大，则部署新的云主机。本实施例中的新云主机上面安装有基本的系统服务，在部署好的新云主机上可进一步安装部署各种应用服务程序。此外，为提升系统运行稳定性和健壮性，进而以应对高流量、高并发，实现元数据服务的高可用性，因此，本实施例优选采用分布式部署模式来部署用于安装元数据服务程序的新云主机。
步骤S150，通过Agent服务器下发元数据服务安装命令至新部署的云主机，以供新部署的云主机基于所述元数据服务安装命令，从所述文件服务器下载元数据服务的应用程序包并进行安装，以部署新的元数据服务器。
本实施例中，云管理服务器通过调用Agent服务器的Agent服务接口，进而通过各Agent服务接口下发脚本执行命令到各自对应的云主机上，然后由各云主机基于脚本执行命令，从文件服务器下载云管理服务器预先上传的文件并执行。本实施例中，云管理服务器通过Agent服务接口下发元数据服务安装命令到新主机上，以供新云主机基于元数据服务安装命令从所述文件服务器下载元数据服务的应用程序包并进行安装，从而完成新的元数据服务器的部署。元数据服务是独立的应用服务，因而部署没有依赖，提升了部署元数据服务器的灵活性与便捷性。
例如，通过以下命令在新的云主机上安装元数据服务的应用程序包，进而实现部署元数据服务器，具体安装过程如下：
(1)yum localinstall元数据-xxx-.rpm；
(2)元数据-setup-databases user:password@database-server-ip；
(3)systemctl start元数据-management.service；
(4)systemctl enable元数据-management.service。
本实施例中，可以利用云主机上暴露的接口，自定义命令脚本，以对云主机进行各种自定义操作，实现特定管理功能。元数据服务是一个单独的应用，通过接口对外提供服务，通过负载均衡机制，可根据实际的系统负载，快速部署多个元数据服务，进而以应对高并发和高可用，提升系统的健壮性。
本实施例中，云管理服务器预先将元数据服务的应用程序包上传到文件服务器，然后在系统负载过载的情况下，通过调用Agent服务器的Agent服务接口，进而通过各Agent服务接口下发脚本执行命令到部署的云主机上，然后由云主机基于脚本执行命令从文件服务器下载元数据服务的应用程序包并进行安装，从而实现元数据服务器的快捷部署。
参照图3，图3为本发明云主机元数据服务管理方法第二实施例的流程示意图。基于上述第一实施例，本实施例中，在上述步骤S150之后，还包括：
步骤S160，云主机通过注册安装的Agent服务，接收云管理服务器通过Agent服务器下发的元数据服务安装命令；
步骤S170，根据所述元数据服务安装命令中指定的文件名，从所述文件服务器下载对应的元数据服务的应用程序包并进行安装，以部署新的元数据服务器；
步骤S180，生成新的元数据服务器的部署执行结果并通过Agent服务返回至对应的Agent服务器；
Agent是一类在特定环境下能感知环境，并能灵活、自主地运行以实现一系列设计目标的、自主的计算实体或程序。本实施例中，为便于对云主机进行批量管理，需要云主机预先在Agent服务器进行注册以安装Agent服务，通过Agent服务代理云主机，进而实现特定管理操作。
本实施例中，每一个云主机都在Agent服务器注册有Agent服务，进而云管理服务器可通过Agent服务器实现对海量云主机的批量管理。云主机通过Agent服务，接收云管理服务器通过Agent服务器下发的元数据服务安装命令，然后根据元数据服务安装命令中指定的文件名，到文件服务器下载对应的元数据服务的应用程序包并进行安装；最后再生成安装结果，并通过Agent服务返回至对应的Agent服务器，以供通过Agent服务器转发至云管理服务器。
步骤S190，Agent服务器保存元数据服务器返回的部署执行结果以及将部署执行结果转发至云管理服务器，以供云管理服务器生成本次部署元数据服务器的部署执行结果文档。
本实施例中，Agent服务器用于实现云管理服务器与各云主机之间的信息中转。当Agent服务器接收到各云主机返回的元数据服务器部署执行结果时，将各云主机返回的部署执行结果转发给云管理服务器，然后再由云管理服务器进一步生成本次部署元数据服务器对应的执行结果文档。
本实施例中，Agent服务器还进一步将云主机返回的部署执行结果保存到预置数据库或缓存中，便于留档以供后续统计分析或进行其他用途。
参照图4，图4为本发明云主机元数据服务管理方法第三实施例的流程示意图。基于上述第二实施例，本实施例中，云主机元数据服务管理方法还包括：
步骤S210，Agent服务器监测是否存在云主机发起的Agent服务注册请求，所述注册请求中包含有云主机的主机信息；
步骤S220，若存在，则生成云主机的Agent服务信息，并将所述Agent服务信息与云主机信息关联保存；若不存在，则返回步骤S210。
本实施例中，在部署新的云主机时，为便于后续对云主机进行管理，因此需要云主机主动向Agent服务器服务器发起Agent服务注册请求。当Agent服务器服务器监测到Agent服务注册请求时，生成云主机注册的Agent服务信息，并将Agent服务信息以及云主机信息关联保存到预置数据库或缓存中。
本实施例中，Agent服务信息中包括云主机的AgentManager服务信息、各Agent服务的版本信息。其中，AgentManager服务是云主机在注册时必须安装的一个特殊的Agent服务，而其他Agent为可选服务，AgentManager服务用于管理云主机上其他的Agent服务。
参照图5，图5为本发明云主机元数据服务管理方法第四实施例的流程示意图。基于上述第三实施例，本实施例中，云主机元数据服务管理方法还包括：
步骤S310，Agent服务器创建定时任务；
步骤S320，每隔预设时长检测各云主机注册的Agent服务的状态和版本信息；
步骤S330，若存在低于当前最新版本的Agent服务，则通过AgentManager服务下发更新命令至对应云主机；
步骤S340，若存在未开启的Agent服务，则通过AgentManager服务下发安装命令至对应云主机。
本实施例是基于Agent服务实现云主机元数据服务管理，因此，为便于对云主机进行管理，需要获得云主机上安装的Agent服务的状态以及版本信息。如果把检测新版本或Agent状态的工作放在云主机上，一方面云主机的负载会加重，另一方面如果用户不小心把检测的进程删除，用户将没有办法进行自动更新而需要手动更新，而解决上面的问题的方法是加一个定时任务检测更新进程是否存在，如果不存在，自动从文件服务器下载最新的版本进行更新。而若定时任务也被删除，则自更新服务还是无法正常工作。
基于上述问题的考量，本实施例将检测云主机的Agent状态和版本信息的工作放到Agent服务器上，并通过执行定时任务方式进行检测，一来可以解决用户误删的问题，二来可以集中管理云主机的版本和运行状态等信息。
本实施例中，通过定时检测各云主机注册的Agent服务的状态以及版本信息，从而保证Agent服务在线、Agent服务能够正常运行，进而使得云管理服务器能够实现对海量云主机的元数据服务管理。
参照图6，图6为本发明云主机元数据服务管理方法第五实施例的流程示意图。基于上述任一实施例，本实施例中，云主机元数据服务管理方法还包括：
步骤S410，负载均衡服务器接收用户云服务器发起的云主机初始化请求；
步骤S420，根据预置负载均衡算法，从元数据服务器集群中选择对应的元数据服务器并将所述云主机初始化请求转发至元数据服务器；
步骤S430，元数据服务器解析所述云主机初始化请求，得到请求内容；
步骤S440，基于所述请求内容，查找预置数据库，获得相关元数据，并将所述相关元数据通过负载均衡服务器转发至对应用户云服务器。
本实施例中，用户云服务器(也即供用户使用的云主机)进行初始化时，需要获得系统的相关数据，如ip、主机名、uuid、用户云主机id、vpc标识、dns等元数据。为提升云主机的高可用性，因此，本实施例使用一个单独的服务应用元数据服务来实现在对云主机进行初始时提供元数据服务。
本实施例中，当用户云服务器发起云主机初始化请求时，该请求先到达负载均衡服务器，然后经过负载均衡计算选择合适的元数据服务器处理该云主机初始化请求，具体的负载均衡算法不限。
可选的，在一实施例中，使用以下负载均衡算法从元数据服务器集群中选择合适的元数据服务器处理云主机初始化请求，具体如下：
(1)动态获取元数据服务器集群中各元数据服务器当前连接的TCP连接数和流量数据量；
(2)根据以下公式计算各元数据服务器的实时负载：元数据服务器实时负载＝TCP连接数*第一权重+流量数据量*第二权重；其中，第一权重与第二权重预先设置，且与元数据服务器的处理能力有关。
(3)根据各元数据服务器实时负载与预置最大负载，分别计算各元数据服务器的实时负载率，实时负载率＝实时负载/最大负载；
(4)判断各元数据服务器的实时负载率是否低于预置负载率，若是，则将低于预置负载率的元数据服务器作为候选元数据服务器；
(5)根据实时负载率，对各候选元数据服务器进行排序，并将候选元数据服务器中实时负载率最低的元数据服务器作为目标元数据服务器。
本实施例中，所有的用户云服务器进行云主机初始化都有一个约定的过程，该过程需要执行多个与初始化相关的脚本，这些脚本的执行顺序、执行时机、执行次数、脚本位置等元数据都配置在元数据服务器的数据库表中，也即通过本实施例的上述流程，从而实现了用户云服务器进行云主机初始化的可配置性。
本发明还提供一种云主机元数据服务管理系统。
参照图7，图7为本发明云主机元数据服务管理系统一实施例的功能模块部署架构示意图。本实施例中，所述云主机元数据服务管理系统包括：
(一)云管区
如图7所示，在云管区部署有云管理服务器10，用于部署新的元数据服务器，实现云主机的部署管理。
(二)公共服务区
如图7所示，在公共服务区部署有文件服务器20、Agent服务器集群30和云主机集群40，文件服务器20用于保存元数据服务的应用程序包以及还存储各种脚本文件，而Agent服务器集群30则用于实现云管理服务器10与各云主机之间的信息中转。
本实施例中，各区域相互之间物理隔离，所有主机都是双网卡，一个网卡属于云管网络，另一个网卡属于用户VPC网络，两个网络是物理隔离，连接在不同的交换机，用防火墙隔离，保证网络的安全性。
本实施例中，云管理服务器10具体用于：
将元数据服务的应用程序包上传文件服务器；计算当前系统负载；判断当前系统负载与预置最大系统负载的比值是否超过预置比值；若是，则采用分布式部署模式部署新的云主机；通过Agent服务器下发元数据服务安装命令至新部署的云主机，以供新部署的云主机基于所述元数据服务安装命令，从所述文件服务器下载元数据服务的应用程序包并进行安装，以部署新的元数据服务器。
本实施例中，云主机集群40中各云主机具体用于：
通过注册安装的Agent服务，接收云管理服务器通过Agent服务器下发的元数据服务安装命令；根据所述元数据服务安装命令中指定的文件名，从所述文件服务器下载对应的元数据服务的应用程序包并进行安装；生成新的元数据服务器的部署执行结果并通过Agent服务返回至对应的Agent服务器；
本实施例中，Agent服务器集群30中各Agent服务器具体用于：
保存元数据服务器返回的部署执行结果以及将部署执行结果转发至云管理服务器，以供云管理服务器生成本次部署元数据服务器的部署执行结果文档。
基于与上述本发明云主机元数据服务管理方法相同的实施例说明内容，因此本实施例对云主机元数据服务管理系统的实施例内容不做过多赘述。
本实施例中，云管理服务器预先将元数据服务的应用程序包上传到文件服务器，然后在系统负载过载的情况下，通过调用Agent服务器的Agent服务接口，进而通过各Agent服务接口下发脚本执行命令到部署的云主机上，然后由云主机基于脚本执行命令从文件服务器下载元数据服务的应用程序包并进行安装，从而实现元数据服务器的快捷部署。
参照图8，图8为本发明云主机元数据服务管理系统另一实施例的功能模块部署架构示意图。本实施例中，所述Agent服务器还用于：
监测是否存在云主机发起的Agent服务注册请求，所述注册请求中包含有云主机的主机信息；若存在，则生成云主机的Agent服务信息，并将所述Agent服务信息与云主机信息关联保存；其中，所述Agent服务信息中包括所述云主机的AgentManager服务信息以及Agent服务的版本信息；
所述Agent服务器还用于：
创建定时任务并每隔预设时长检测各云主机注册的Agent服务的状态和版本信息；若存在低于当前最新版本的Agent服务，则通过AgentManager服务下发更新命令至对应云主机；若存在未开启的Agent服务，则通过AgentManager服务下发安装命令至对应云主机。
进一步地，在本发明云主机元数据服务管理系统另一实施例中，所述云主机元数据服务管理系统还包括：
(三)用户区
如图8所示，用户区划分为多个子用户区域，在每个子用户区域都署有多个用户云服务器50，而用户云服务器50用于给用户(租户)提供各种云服务，比如云计算服务、云存储服务等。
此外，本实施例中，在共服务区还部署有负载均衡服务器集群60，负载均衡服务器用于：
接收用户云服务器发起的云主机初始化请求；根据预置负载均衡算法，从元数据服务器集群中选择对应的元数据服务器并将所述云主机初始化请求转发至元数据服务器；
本实施例中，元数据服务器用于：
解析所述云主机初始化请求，得到请求内容；基于所述请求内容，查找预置数据库，获得相关元数据，并将所述相关元数据通过负载均衡集群转发至对应用户云服务器。
本发明还提供一种计算机可读存储介质。
本实施例中，所述计算机可读存储介质上存储有云主机元数据服务管理程序，所述云主机元数据服务管理程序被处理器执行时实现如上述任一项实施例中所述的云主机元数据服务管理方法的步骤。其中，云主机元数据服务管理程序被处理器执行时所实现的方法可参照本发明云主机元数据服务管理方法的各个实施例，因此不再过多赘述。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述，但是本发明并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本发明的启示下，在不脱离本发明宗旨和权利要求所保护的范围情况下，还可做出很多形式，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，这些均属于本发明的保护之内。

Claims (10)

1.一种云主机元数据服务管理方法，其特征在于，所述云主机元数据服务管理方法包括以下步骤：
云管理服务器将元数据服务的应用程序包上传文件服务器；
计算当前系统负载；
判断当前系统负载与预置最大系统负载的比值是否超过预置比值；
若是，则采用分布式部署模式部署新的云主机；
通过Agent服务器下发元数据服务安装命令至新部署的云主机，以供新部署的云主机基于所述元数据服务安装命令，从所述文件服务器下载元数据服务的应用程序包并进行安装，以部署新的元数据服务器。
2.如权利要求1所述的云主机元数据服务管理方法，其特征在于，在所述通过Agent服务器下发元数据服务安装命令至新部署的云主机的步骤之后，还包括：
云主机通过注册安装的Agent服务，接收云管理服务器通过Agent服务器下发的元数据服务安装命令；
根据所述元数据服务安装命令中指定的文件名，从所述文件服务器下载对应的元数据服务的应用程序包并进行安装，以部署新的元数据服务器；
生成新的元数据服务器的部署执行结果并通过Agent服务返回至对应的Agent服务器；
Agent服务器保存元数据服务器返回的部署执行结果以及将部署执行结果转发至云管理服务器，以供云管理服务器生成本次部署元数据服务器的部署执行结果文档。
3.如权利要求2所述的云主机元数据服务管理方法，其特征在于，在所述云管理服务器将元数据服务的应用程序包上传文件服务器的步骤之前，还包括：
Agent服务器监测是否存在云主机发起的Agent服务注册请求，所述注册请求中包含有云主机的主机信息；
若存在，则生成云主机的Agent服务信息，并将所述Agent服务信息与云主机信息关联保存；
其中，所述Agent服务信息中包括所述云主机的AgentManager服务信息以及Agent服务的版本信息。
4.如权利要求3所述的云主机元数据服务管理方法，其特征在于，所述云主机元数据服务管理方法还包括：
Agent服务器创建定时任务并每隔预设时长检测各云主机注册的Agent服务的状态和版本信息；
若存在低于当前最新版本的Agent服务，则通过AgentManager服务下发更新命令至对应云主机；
若存在未开启的Agent服务，则通过AgentManager服务下发安装命令至对应云主机。
5.如权利要求1-4任一项所述的云主机元数据服务管理方法，其特征在于，所述云主机元数据服务管理方法还包括：
负载均衡服务器接收用户云服务器发起的云主机初始化请求；
根据预置负载均衡算法，从元数据服务器集群中选择对应的元数据服务器并将所述云主机初始化请求转发至元数据服务器；
元数据服务器解析所述云主机初始化请求，得到请求内容；
基于所述请求内容，查找预置数据库，获得相关元数据，并将所述相关元数据通过负载均衡服务器转发至对应用户云服务器。
6.一种云主机元数据服务管理系统，其特征在于，所述云主机元数据服务管理系统包括：云管区、公共服务区，各区域相互之间物理隔离；所述云管区部署有云管理服务器，所述云管理服务器用于部署新的元数据服务器；所述公共服务区部署有文件服务器、Agent服务器集群和云主机集群，所述文件服务器用于保存元数据服务的应用程序包，所述Agent服务器用于实现云管理服务器与各云主机之间的信息中转；
所述云管理服务器具体用于：
将元数据服务的应用程序包上传文件服务器；计算当前系统负载；判断当前系统负载与预置最大系统负载的比值是否超过预置比值；若是，则采用分布式部署模式部署新的云主机；通过Agent服务器下发元数据服务安装命令至新部署的云主机，以供新部署的云主机基于所述元数据服务安装命令，从所述文件服务器下载元数据服务的应用程序包并进行安装，以部署新的元数据服务器。
所述云主机具体用于：
通过注册安装的Agent服务，接收云管理服务器通过Agent服务器下发的元数据服务安装命令；根据所述元数据服务安装命令中指定的文件名，从所述文件服务器下载对应的元数据服务的应用程序包并进行安装；生成新的元数据服务器的部署执行结果并通过Agent服务返回至对应的Agent服务器；
所述Agent服务器具体用于：
保存元数据服务器返回的部署执行结果以及将部署执行结果转发至云管理服务器，以供云管理服务器生成本次部署元数据服务器的部署执行结果文档。
7.如权利要求6所述的云主机元数据服务管理系统，其特征在于，所述Agent服务器还用于：
监测是否存在云主机发起的Agent服务注册请求，所述注册请求中包含有云主机的主机信息；若存在，则生成云主机的Agent服务信息，并将所述Agent服务信息与云主机信息关联保存；其中，所述Agent服务信息中包括所述云主机的AgentManager服务信息以及Agent服务的版本信息；
所述Agent服务器还用于：
创建定时任务并每隔预设时长检测各云主机注册的Agent服务的状态和版本信息；若存在低于当前最新版本的Agent服务，则通过AgentManager服务下发更新命令至对应云主机；若存在未开启的Agent服务，则通过AgentManager服务下发安装命令至对应云主机。
8.如权利要求6所述的云主机元数据服务管理系统，其特征在于，所述公共服务区还部署有负载均衡服务器集群，所述云主机元数据服务管理系统还包括：用户区，所述用户区划分为多个子用户区域，每个子用户区域部署有多个用户云服务器；
所述负载均衡服务器用于：
接收用户云服务器发起的云主机初始化请求；根据预置负载均衡算法，从元数据服务器集群中选择对应的元数据服务器并将所述云主机初始化请求转发至元数据服务器；
所述元数据服务器用于：
解析所述云主机初始化请求，得到请求内容；基于所述请求内容，查找预置数据库，获得相关元数据，并将所述相关元数据通过负载均衡集群转发至对应用户云服务器。
9.一种云主机元数据服务管理设备，其特征在于，所述云主机元数据服务管理设备包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的云主机元数据服务管理程序，所述云主机元数据服务管理程序被所述处理器执行时实现如权利要求1-5中任一项所述的云主机元数据服务管理方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有云主机元数据服务管理程序，所述云主机元数据服务管理程序被处理器执行时实现如权利要求1-5中任一项所述的云主机元数据服务管理方法的步骤。
CN201910479324.0A 2019-06-04 2019-06-04 云主机元数据服务管理方法、系统、设备及存储介质 Active CN110149409B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910479324.0A CN110149409B (zh) 2019-06-04 2019-06-04 云主机元数据服务管理方法、系统、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910479324.0A CN110149409B (zh) 2019-06-04 2019-06-04 云主机元数据服务管理方法、系统、设备及存储介质

Publications (2)

Publication Number Publication Date
CN110149409A true CN110149409A (zh) 2019-08-20
CN110149409B CN110149409B (zh) 2023-08-15

Family

ID=67590272

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910479324.0A Active CN110149409B (zh) 2019-06-04 2019-06-04 云主机元数据服务管理方法、系统、设备及存储介质

Country Status (1)

Country Link
CN (1) CN110149409B (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110661852A (zh) * 2019-09-05 2020-01-07 深圳平安通信科技有限公司 云环境中的业务处理方法及装置
CN110913024A (zh) * 2019-12-30 2020-03-24 中国联合网络通信集团有限公司 云平台信息同步方法、系统、控制设备及存储介质
CN111176687A (zh) * 2019-12-29 2020-05-19 北京浪潮数据技术有限公司 一种云主机客户端程序更新方法、装置、设备及存储介质
CN111291012A (zh) * 2020-01-16 2020-06-16 深圳市前海随手财富管理有限公司 一种规则文件部署系统、方法、设备及介质
CN112003917A (zh) * 2020-08-14 2020-11-27 苏州浪潮智能科技有限公司 一种文件存储的管理方法、系统、设备以及介质
CN113542322A (zh) * 2020-04-15 2021-10-22 北京京东尚科信息技术有限公司 用于活动目录程序的安装方法、装置、计算设备及介质
CN114328421A (zh) * 2022-03-17 2022-04-12 联想凌拓科技有限公司 元数据服务架构管理方法、计算机系统、电子设备及介质
CN115269495A (zh) * 2022-06-18 2022-11-01 知学云(北京)科技股份有限公司 一种基于aPaaS平台的业务方案元数据处理方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140344808A1 (en) * 2013-05-20 2014-11-20 International Business Machines Corporation Dynamically modifying workload patterns in a cloud
CN105868333A (zh) * 2016-03-28 2016-08-17 金蝶软件（中国）有限公司 文件处理方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140344808A1 (en) * 2013-05-20 2014-11-20 International Business Machines Corporation Dynamically modifying workload patterns in a cloud
CN105868333A (zh) * 2016-03-28 2016-08-17 金蝶软件（中国）有限公司 文件处理方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
陈晓博等: "广播电视内容监管云平台支撑系统方案设计", 《广播电视信息 》 *
黄秋兰;程耀东;杜然;陈刚;: "可扩展的分布式元数据管理系统设计", 计算机工程, no. 05 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110661852A (zh) * 2019-09-05 2020-01-07 深圳平安通信科技有限公司 云环境中的业务处理方法及装置
CN110661852B (zh) * 2019-09-05 2023-02-03 深圳平安通信科技有限公司 云环境中的业务处理方法及装置
CN111176687A (zh) * 2019-12-29 2020-05-19 北京浪潮数据技术有限公司 一种云主机客户端程序更新方法、装置、设备及存储介质
CN110913024A (zh) * 2019-12-30 2020-03-24 中国联合网络通信集团有限公司 云平台信息同步方法、系统、控制设备及存储介质
CN110913024B (zh) * 2019-12-30 2022-02-01 中国联合网络通信集团有限公司 云平台信息同步方法、系统、控制设备及存储介质
CN111291012A (zh) * 2020-01-16 2020-06-16 深圳市前海随手财富管理有限公司 一种规则文件部署系统、方法、设备及介质
CN113542322A (zh) * 2020-04-15 2021-10-22 北京京东尚科信息技术有限公司 用于活动目录程序的安装方法、装置、计算设备及介质
CN112003917A (zh) * 2020-08-14 2020-11-27 苏州浪潮智能科技有限公司 一种文件存储的管理方法、系统、设备以及介质
CN112003917B (zh) * 2020-08-14 2022-12-27 苏州浪潮智能科技有限公司 一种文件存储的管理方法、系统、设备以及介质
CN114328421A (zh) * 2022-03-17 2022-04-12 联想凌拓科技有限公司 元数据服务架构管理方法、计算机系统、电子设备及介质
CN115269495A (zh) * 2022-06-18 2022-11-01 知学云(北京)科技股份有限公司 一种基于aPaaS平台的业务方案元数据处理方法及系统
CN115269495B (zh) * 2022-06-18 2023-08-08 知学云(北京)科技股份有限公司 一种基于aPaaS平台的业务方案元数据处理方法及系统

Also Published As

Publication number Publication date
CN110149409B (zh) 2023-08-15

Similar Documents

Publication Publication Date Title
CN110149409A (zh) 云主机元数据服务管理方法、系统、设备及存储介质
CN106899680B (zh) 多区块链的分片处理方法和装置
CN109729143B (zh) 在终端设备上部署基于网络的云平台
CN104937584B (zh) 基于共享资源的质量向经优先级排序的虚拟机和应用程序提供优化的服务质量
US9755990B2 (en) Automated reconfiguration of shared network resources
CN106302445B (zh) 用于处理请求的方法和装置
US10013271B2 (en) Management system and method for controlling management system
EP2989543B1 (en) Method and device for updating client
CN108683516A (zh) 一种应用实例的升级方法、装置和系统
CN110795203B (zh) 资源调度方法、装置、系统和计算设备
US20140237114A1 (en) Method and system for managing servers
CN110417613A (zh) 基于Jmeter的分布式性能测试方法、装置、设备及存储介质
CN108667639B (zh) 一种私有云环境下的资源管理方法及管理服务器
KR20100138689A (ko) 클라우드 컴퓨팅 서비스를 제공하는 관리 서버 및 방법
CN110196722A (zh) 云主机批量管理方法、系统、设备及存储介质
US7613680B2 (en) Computer system and the computer control method
CN107026758B (zh) 用于cdn业务更新的信息处理方法、信息处理系统及服务器
CN110442610A (zh) 负载均衡的方法、装置、计算设备以及介质
CN106131122A (zh) 一种部署负载均衡服务的方法及装置
CN109597643A (zh) 应用灰度发布方法、装置、电子设备及存储介质
CN113239118A (zh) 一种区块链实训系统和方法
CN113014608B (zh) 一种流量分发控制方法、装置、电子设备及存储介质
JP5531278B2 (ja) サーバ構成管理システム
CN105763610B (zh) 桌面云服务提供方法及装置
CN113672344A (zh) 一种基于OpenStack平台创建多规格vGPU虚拟机灵活分配的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant