CN117155804A - 一种云服务器的部署方法及相关装置 - Google Patents

一种云服务器的部署方法及相关装置 Download PDF

Info

Publication number
CN117155804A
CN117155804A CN202311409603.2A CN202311409603A CN117155804A CN 117155804 A CN117155804 A CN 117155804A CN 202311409603 A CN202311409603 A CN 202311409603A CN 117155804 A CN117155804 A CN 117155804A
Authority
CN
China
Prior art keywords
target
cloud server
resource
physical machine
deployment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202311409603.2A
Other languages
English (en)
Other versions
CN117155804B (zh
Inventor
江露
李力
李德铠
郭志强
杨广知
胡皓
惠冬雨
黄晓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202311409603.2A priority Critical patent/CN117155804B/zh
Publication of CN117155804A publication Critical patent/CN117155804A/zh
Application granted granted Critical
Publication of CN117155804B publication Critical patent/CN117155804B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14Network analysis or design
    • H04L41/145Network analysis or design involving simulating, designing, planning or modelling of a network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请提供了一种云服务器的部署方法以及相关装置。本申请实施例可应用于云技术、人工智能、智慧交通、辅助驾驶等各种场景。其方法包括:接收云服务器的目标部署请求;从内存资源数据中获取M个候选物理机对应的M个参数信息;根据M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机;将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息;根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。本申请实施例提供方法,对内存资源数据中的目标物理机对应的参数信息进行更新,解决了装箱数据不权威的问题,提高了装箱任务处理速度,实现装箱调度管理器的性能提升。

Description

一种云服务器的部署方法及相关装置
技术领域
本申请涉及云计算技术领域,尤其涉及一种云服务器的部署方法及相关装置。
背景技术
云计算是一种基于互联网的计算方式,通过远程服务器提供计算资源和数据存储。它允许用户通过互联网访问计算资源,而无需在本地拥有和维护昂贵的硬件和软件。
装箱调度管理器是一种用于在云计算环境中选择物理机的工具。随着计算资源(如物理机)的使用,需要对计算资源数据进行更新,但是由于计算资源数据的更新的数据来源较多,造成装箱数据不权威,对于每个装箱任务,都需要去从数据库同步增量更新的资源数据,造成装箱任务处理慢,并且随着装箱任务的并发量的增加,装箱调度管理器的吞吐量已经不能满足业务要求。
发明内容
本申请实施例提供了一种云服务器的部署方法以及相关装置,解决了装箱数据不权威的问题以及装箱任务处理慢的问题。
本申请的一方面提供一种云服务器的部署方法,包括:
接收云服务器的目标部署请求,其中,云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,云服务器目标部署请求携带目标云服务器的部署条件信息;
从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;
根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机,其中,目标物理机对应的参数信息满足目标云服务器的部署条件信息;
将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息;
根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。
本申请的另一方面提供了一种云服务器的部署装置,包括:目标部署请求接收模块、参数信息获取模块、目标物理机确定模块、部署模块及参数更新模块;具体的:
目标部署请求接收模块,用于接收云服务器的目标部署请求,其中,云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,云服务器目标部署请求携带目标云服务器的部署条件信息;
参数信息获取模块,用于从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;
目标物理机确定模块,用于根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机,其中,目标物理机对应的参数信息满足目标云服务器的部署条件信息;
部署模块,用于将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息;
参数更新模块,用于根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。
在本申请实施例的另一种实现方式中,目标物理机确定模块,还用于:
根据目标云服务器的部署条件信息及M个候选物理机对应的M个参数信息,从M个候选物理机中确定P个预选物理机,其中,P个预选物理机对应的P个参数信息均满足部署条件信息,P为大于1且小于等于M的整数;
根据P个预选物理机对应的P个参数信息,计算P个预选物理机对应的P个运行状态得分;
根据P个运行状态得分,从P个预选物理机中确定目标物理机。
在本申请实施例的另一种实现方式中,目标物理机确定模块,还用于:
获取P个预选物理机对应的P个资源池信息及目标云服务器的资源需求信息;
根据P个资源池信息及目标云服务器的资源需求信息,对P个资源池信息进行资源扣减,得到P个资源扣减信息;
根据P个资源扣减信息确定目标物理机,其中,目标物理机的资源扣减信息为P个预选物理机对应的P个资源扣减信息中的最小值。
在本申请实施例的另一种实现方式中,目标物理机确定模块,还用于:
根据目标云服务器的部署条件信息确定目标计算节点,其中,目标计算节点的配置信息满足部署条件信息;
通过目标计算节点从内存资源数据中获取M个候选物理机对应的M个参数信息。
在本申请实施例的另一种实现方式中,目标物理机确定模块,还用于:
根据目标云服务器的部署条件信息确定目标分区,其中,目标分区的配置信息满足部署条件信息;
根据目标分区确定目标计算节点,其中,目标计算节点与目标分区具有第一映射关系。
在本申请实施例的另一种实现方式中,目标物理机确定模块,还用于:
根据资源更新信息对目标计算节点中的内存资源数据中的目标物理机对应的参数信息进行更新。
在本申请实施例的另一种实现方式中,云服务器的部署装置还包括:资源更新信息存储模块;具体的,资源更新信息存储模块,用于:
根据目标计算节点,确定目标存储节点,其中,目标计算节点与目标存储节点具有第二映射关系;
通过目标存储节点对资源更新信息进行存储。
在本申请实施例的另一种实现方式中,资源更新信息存储模块,用于:
获取目标分区的历史部署请求日志数据;
若历史部署请求日志数据的数量大于部署请求处理阈值,则获取目标存储节点对资源更新信息进行存储的当前任务序列号;
若当前任务序列号与目标任务序列号相同,则获取超时时间;
待等待超时时间后,通过目标存储节点对资源更新信息进行存储。
在本申请实施例的另一种实现方式中,资源更新信息存储模块,用于:
若当前任务序列号与目标任务序列号不相同,则更新目标存储节点对资源更新信息进行存储的任务序列号,生成更新任务序列号,其中,更新任务序列号大于当前任务序列号;
若更新任务序列号与目标任务序列号相同,则通过目标存储节点对资源更新信息进行存储。
在本申请实施例的另一种实现方式中,资源更新信息存储模块,用于:
若更新任务序列号与目标任务序列号不同,则获取等待时间,其中,等待时间为当前时间与目标存储节点接收到对资源更新信息进行存储任务的时间的时间差;
若等待时间不大于超时时间,则目标存储节点对资源更新信息进行存储。
在本申请实施例的另一种实现方式中,资源更新信息存储模块,用于:
若历史部署请求日志数据的数量不大于部署请求处理阈值,则根据历史部署请求日志数据的数量设置目标存储节点对资源更新信息进行存储的任务序列号。
本申请的另一方面提供了一种计算机设备,包括:
存储器、收发器、处理器以及总线系统;
其中,存储器用于存储程序;
处理器用于执行存储器中的程序,包括执行上述各方面的方法;
总线系统用于连接存储器以及处理器,以使存储器以及处理器进行通信。
本申请的另一方面提供了一种计算机可读存储介质,计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述各方面的方法。
本申请的另一方面提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述各方面所提供的方法。
从以上技术方案可以看出,本申请实施例具有以下优点:
本申请提供了一种云服务器的部署方法以及相关装置,其方法包括:接收云服务器的目标部署请求,其中,云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,云服务器目标部署请求携带目标云服务器的部署条件信息;从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机,其中,目标物理机对应的参数信息满足目标云服务器的部署条件信息;将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息;根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。本申请实施例提供的云服务器的部署方法,通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性,并且仅对内存资源数据中的目标物理机对应的参数信息进行更新,解决了装箱数据不权威的问题,将物理机确定的步骤与参数信息更新的步骤进行异步处理,提高了装箱任务处理速度,实现装箱调度管理器的性能提升。
附图说明
图1为本申请某一实施例提供的云服务器的部署系统的一个架构示意图;
图2为本申请某一实施例提供的云服务器的部署模型的架构图;
图3为本申请某一实施例提供的云服务器的部署方法的流程图;
图4为本申请某一实施例提供的目标计算节点的资源更新操作流程图;
图5为本申请另一实施例提供的云服务器的部署方法的流程图;
图6为本申请另一实施例提供的云服务器的部署方法的流程图;
图7为本申请某一实施例提供的目标节点处理装箱任务的流程图;
图8为本申请另一实施例提供的云服务器的部署方法的流程图;
图9为本申请另一实施例提供的云服务器的部署方法的流程图;
图10为本申请另一实施例提供的云服务器的部署方法的流程图;
图11为本申请另一实施例提供的云服务器的部署方法的流程图;
图12为本申请另一实施例提供的云服务器的部署方法的流程图;
图13为本申请某一实施例提供的目标存储节点对于单个存储任务的处理流程;
图14为本申请某一实施例提供的云服务器的部署装置的结构示意图;
图15为本申请另一实施例提供的云服务器的部署装置的结构示意图;
图16为本申请某一实施例提供的服务器结构示意图。
实施方式
本申请实施例提供了一种云服务器的部署方法,通过接收云服务器的部署请求,并根据目标云服务器的部署条件信息和候选物理机的参数信息,快速确定目标物理机,从而实现了高效、准确的云服务器部署;通过从候选物理机中选择满足目标云服务器部署条件的目标物理机,并在目标物理机上进行部署,保证了云服务器的稳定性和可靠性;通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性;通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性,并且仅对内存资源数据中的目标物理机对应的参数信息进行更新,解决了装箱数据不权威的问题,将物理机确定的步骤与参数信息更新的步骤进行异步处理,提高了装箱任务处理速度,实现装箱调度管理器的性能提升。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例例如能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“对应于”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
云技术(Cloud technology)是指在广域网或局域网内将硬件、软件、网络等系列资源统一起来,实现数据的计算、储存、处理和共享的一种托管技术。
云技术(Cloud technology)基于云计算商业模式应用的网络技术、信息技术、整合技术、管理平台技术、应用技术等的总称,可以组成资源池,按需所用,灵活便利。云计算技术将变成重要支撑。技术网络系统的后台服务需要大量的计算、存储资源,如视频网站、图片类网站和更多的门户网站。伴随着互联网行业的高度发展和应用,将来每个物品都有可能存在自己的识别标志,都需要传输到后台系统进行逻辑处理,不同程度级别的数据将会分开处理,各类行业数据皆需要强大的系统后盾支撑,只能通过云计算来实现。
云计算(cloud computing)是一种计算模式,它将计算任务分布在大量计算机构成的资源池上,使各种应用系统能够根据需要获取计算力、存储空间和信息服务。提供资源的网络被称为“云”。“云”中的资源在使用者看来是可以无限扩展的,并且可以随时获取,按需使用,随时扩展,按使用付费。
作为云计算的基础能力提供商,会建立云计算资源池(简称云平台,一般称为IaaS(Infrastructure as a Service,基础设施即服务)平台,在资源池中部署多种类型的虚拟资源,供外部客户选择使用。云计算资源池中主要包括:计算设备(为虚拟化机器,包含操作系统)、存储设备、网络设备。
按照逻辑功能划分,在IaaS(Infrastructure as a Service,基础设施即服务)层上可以部署PaaS(Platform as a Service,平台即服务)层,PaaS层之上再部署SaaS(Software as a Service,软件即服务)层,也可以直接将SaaS部署在IaaS上。PaaS为软件运行的平台,如数据库、web容器等。SaaS为各式各样的业务软件,如web门户网站、短信群发器等。一般来说,SaaS和PaaS相对于IaaS是上层。
在云计算中,装箱调度管理器(Container Scheduling Manager)是一种负责管理和调度容器(Container)的软件工具。容器是一种轻量级的虚拟化技术,可以将一个或多个应用程序打包在一个独立的、可移植的、自给自足的软件单元中。装箱调度管理器的主要职责是根据一定的策略和规则,将容器(如云服务器)部署到合适的计算资源(如虚拟机、物理机、容器集群等)上,以确保应用程序能够高效、可靠地运行。装箱调度管理器通常会考虑多种因素,如容器的资源需求、应用程序的性能要求、可用的计算资源、成本效益等,以确定最佳的部署方案。此外,装箱调度管理器还可以获取容器的运行状态,并在必要时进行动态调整,以确保应用程序始终处于最佳的运行状态。装箱调度管理器是云计算平台的核心组件之一,它的性能和可靠性对于云计算平台的整体效率和用户体验至关重要。
在云计算中,装箱调度管理器负责进行装箱调度(Container Scheduling),装箱调度是指将计算资源(例如虚拟机、物理机或容器)分配给需要运行的应用程序或容器的过程。装箱调度的作用是确保应用程序或容器能够在云计算环境中高效、可靠地运行。它通过将计算资源分配给最需要它们的应用程序或容器,以最大程度地提高云计算资源的利用率。此外,装箱调度还可以帮助云计算环境实现自动化管理。它可以根据预定义的规则和策略,自动地将计算资源分配给应用程序或容器,并在需要时进行动态调整。这可以大大减少人工干预的需要,提高云计算环境的管理效率。总的来说,装箱调度是云计算环境中非常重要的一部分,它有助于提高云计算资源的利用率,实现自动化管理,并确保应用程序或容器在云计算环境中高效、可靠地运行。
但是,随着计算资源的使用,需要对物理机资源数据进行更新,但是由于物理机资源数据的更新的数据来源较多,造成装箱数据不权威,对于每个装箱任务,都需要去从数据库同步增量更新的资源数据,造成装箱任务处理慢,并且随着装箱任务的并发量的增加,装箱调度管理器的吞吐量已经不能满足业务要求。
本申请提供了一种云服务器的部署方法以及相关装置,其方法包括:接收云服务器的目标部署请求,其中,云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,云服务器目标部署请求携带目标云服务器的部署条件信息;从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机,其中,目标物理机对应的参数信息满足目标云服务器的部署条件信息;将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息;根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。本申请实施例提供的云服务器的部署方法,通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性,并且仅对内存资源数据中的目标物理机对应的参数信息进行更新,解决了装箱数据不权威的问题,将物理机确定的步骤与参数信息更新的步骤进行异步处理,提高了装箱任务处理速度,实现装箱调度管理器的性能提升。
为了便于理解,请参阅图1,图1为本申请实施例中云服务器的部署方法的应用环境图,如图1所示,本申请实施例中云服务器的部署方法应用于云服务器的部署系统。云服务器的部署系统包括:服务器和用户终端;其中,服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(Content Delivery Network,CDN)、以及大数据和人工智能平台等基础云计算服务的云服务器。用户终端包括但不限于手机、电脑、智能语音交互设备、智能家电、车载终端、飞行器等。终端和服务器可以通过有线或无线通信方式进行直接或间接地连接,本申请实施例在此不做限制。本发明实施例可应用于各种场景,包括但不限于云技术、人工智能、智慧交通、辅助驾驶等。
为了便于理解,请参阅图2,图2为本申请实施例提供的云服务器的部署模型的架构图。部署模型包括控制台(前端)、装箱调度管理器及用于建立前端与装箱调度管理器通讯连接的API层。本申请实施例提供的云服务器的部署方法由装箱调度管理器执行。具体的:
装箱调度管理器首先接收云服务器的目标部署请求,其中,云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,云服务器目标部署请求携带目标云服务器的部署条件信息;其次,服务器从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;接着,装箱调度管理器根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机,其中,目标物理机对应的参数信息满足目标云服务器的部署条件信息;然后,装箱调度管理器将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息;最后,装箱调度管理器根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。
可以理解的是,本申请实施例提供的云服务器的部署过程包括:
1、创建云服务器。
用户通过控制台对目标云服务器进行部署请求,同时需要对目标云服务器的部署条件进行设置。
控制台首先接收用户的部署请求及部署条件,根据用户的部署请求及输入的部署条件生成携带目标云服务器的部署条件信息的目标部署请求;接着,控制台通过API层获取与装箱调度管理器的通讯连接,并将该目标部署请求投入到目标队列中进行等待。
装箱调度管理器首先获取队列中的目标部署请求,接着将队列中的目标部署请求分发到并行的消费模块(消费模块-0、消费模块-1、···、消费模块-n、),然后开始由两级调度组成的装箱调度过程。
2、第一级调度。
第一级调度负责把云服务器的目标部署请求任务分发到目标分区(目标分区-0、目标分区-1、···、目标分区-n)。
装箱调度管理器从云服务器目标部署请求中提取出目标云服务器的部署条件信息(例如,由{zoneId}_{pool}_{device_class}组成的三元组),根据部署条件信息确定目标分区。确定了目标分区之后,将目标部署请求投递到对应的队列(队列-0、队列-1、···、队列-n)中进行任务等待,当任务等待结束后将目标部署请求投递至对应的目标节点(目标节点-0、目标节点-1、···、目标节点-n)进行第二级调度。
在一优选的实施方式中,可以从云服务器目标部署请求中提取出由{zoneId}_{pool}_{device_class}组成的三元组,其中,zoneId 表示云计算资源所在的区域(Zone),它通常表示一个数据中心或一组物理机。pool 表示云计算资源所属的资源池(Pool),它通常表示一组共享的计算、存储和网络资源。device_class 表示云计算资源的设备类型(Device Class),它通常表示物理机、虚拟机、存储设备等不同类型的资源。
通过将{zoneId}_{pool}_{device_class}组成的三元组,可以唯一地标识一个云计算资源的配置和分配方式。例如,zoneId=cn-west-1, pool=compute, device_class=n1-standard-1 表示一个位于cn西部 1 区(cn-west-1)的计算资源,云计算资源所属的资源池为计算资源池,设备类型为 n1-standard-1。这种标识方式的好处是,它可以帮助云计算平台更好地管理和分配资源,提高资源的利用率和灵活性。同时,它也可以为用户提供更加精细和可控的资源配置和管理方式,满足不同的应用场景和需求。
3、第二级调度负责选出满足目标云服务器的部署条件信息的目标物理机。
4、选出目标物理机后,计算节点会将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息。计算节点对于物理机资源数据的更新不再直接更新数据库,而是先同步到装箱目标节点更新目标节点的内存,然后由目标节点再把资源更新操作任务丢到目标存储节点(目标存储节点-0、目标存储节点-1、···、目标存储节点-n),驱动目标存储节点完成数据落地到关系型数据库,以便在目标节点重启的时候,可从关系型数据库加载数据,计算资源池也会涉及到物理机相关资源的变更,也需要同步到缓存数据库,所以也需要将变更后的数据通过目标存储节点负责数据的落地,把数据的更新同步到缓存数据库。
下面将从装箱调度管理器的角度,对本申请中云服务器的部署方法进行介绍。请参阅图3,本申请实施例提供的云服务器的部署方法包括:步骤S110至步骤S150。具体的:
S110、接收云服务器的目标部署请求。
其中,云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,云服务器目标部署请求携带目标云服务器的部署条件信息。
可以理解的是,用户通过控制台请求对目标云服务器进行部署,同时需要用户对部署条件进行设置。控制台首先根据用户请求及输入的部署条件生成携带目标云服务器的部署条件信息的目标部署请求;接着,控制台通过API层获取与装箱调度管理器的通讯连接,并将该目标部署请求投入到队列中进行等待。装箱调度管理器将队列中的请求分发到并行的消费模块(consumer-0)后开始装箱第一级调度过程。
第一级调度负责把云服务器的目标部署请求任务分发到目标分区(P1,partition-1)。装箱调度管理器从云服务器目标部署请求中提取出目标云服务器的部署条件信息(例如,由{zoneId}_{pool}_{device_class}组成的三元组),根据部署条件信息确定目标分区。确定了目标分区之后,将目标部署请求投递到对应的队列(queue-0)中进行任务等待,当任务等待结束后将目标部署请求投递至对应的目标节点(worker-0)进行第二级调度。
在一优选的实施方式中,可以从云服务器目标部署请求中提取出由{zoneId}_{pool}_{device_class}组成的三元组,其中,zoneId 表示云计算资源所在的区域(zone),它通常表示一个数据中心或一组物理机。pool 表示云计算资源所属的资源池(pool),它通常表示一组共享的计算、存储和网络资源。device_class 表示云计算资源的设备类型(device class),它通常表示物理机、虚拟机、存储设备等不同类型的资源。通过将{zoneId}_{pool}_{device_class}组成的三元组,可以唯一地标识一个云计算资源的配置和分配方式。例如,zoneId=cn-west-1, pool=compute, device_class=n1-standard-1 表示一个位于cn西部 1 区(cn-west-1)的计算资源,属于计算资源池(compute),设备类型为n1-standard-1。这种标识方式的好处是,它可以帮助云计算平台更好地管理和分配资源,提高资源的利用率和灵活性。同时,它也可以为用户提供更加精细和可控的资源配置和管理方式,满足不同的应用场景和需求。
S120、从内存资源数据中获取M个候选物理机对应的M个参数信息。
其中,M为大于1的整数。
可以理解的是,目标节点(worker-0)从内存资源数据中获取M个候选物理机对应的M个参数信息。
S130、根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机。
其中,目标物理机对应的参数信息满足目标云服务器的部署条件信息。
可以理解的是,目标节点根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机包括两个步骤:筛选(filter)处理和称重(weight)处理。
根据M个候选物理机对应的M个参数信息对M个候选物理机进行筛选处理,即从M个候选物理机中确定参数信息均满足部署条件信息的P个预选物理机,具体的,可以是将不满足硬性约束条件(如物理机的所在位置可用区与zoneId不相同,或,物理机能够提供的资源无法满足云服务器所需的pool中的资源,或,物理机不能支持云服务器对应的device_class)的候选物理机过滤掉。
在得到了P个预选物理机后,根据每个预选物理机的软性约束(如运行状态得分)对P个预选物理机进行排序,经过排序后得到包含P个预选物理机的排序列表,通过内循环对排序列表中的P个预选物理机按照排序的顺序进行资源扣减,根据资源扣减结果,确定最小的资源扣减信息对应的目标物理机。若经过内循环完成对P个预选物理机的遍历后,无法确定目标物理机,则将目标部署请求任务进行回滚处理。
在申请实施例提供的云服务器的部署方法中,目标节点负责为目标部署请求任务选出合适的目标物理机,在这个任务处理过程实现全内存化的处理,不再与数据库进行交互。
S140、将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息。
可以理解的是,云服务器和物理机之间是一种虚拟化和物理实体之间的关系。云服务器是在云计算平台上提供的一种虚拟化的计算资源,它可以根据用户的需求进行配置和扩展。云服务器通常是基于虚拟化技术,将一台或多台物理服务器的资源虚拟化为多个虚拟机,每个虚拟机都可以独立运行自己的操作系统和应用程序。物理机则是指实际存在的计算机硬件设备,它包括处理器、内存、硬盘、网卡等物理硬件。物理机通常是由用户自行购买和维护,或者由数据中心提供托管服务。
将目标云服务器在目标物理机上进行部署,亦在建立云服务器和物理机之间的关系:云服务器是建立在物理机之上的虚拟化资源,它利用物理机的计算资源和存储资源来提供虚拟化的服务器实例。云服务器和物理机之间可以实现动态扩展和资源共享,用户可以根据需求灵活地增加或减少云服务器的资源配置,而不需要对物理机进行重新配置。云服务器具有更高的灵活性和可管理性,用户可以通过云平台的管理界面方便地进行服务器的创建、启动、停止和备份等操作,而不需要直接对物理机进行操作。物理机仍然是云计算平台的基础,云服务器的性能和稳定性依赖于物理机的硬件配置和性能。
将目标云服务器在目标物理机上进行部署后,生成目标物理机的资源更新信息。
S150、根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。
可以理解的是,目标计算节点根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,具体的,目标计算节点触发资源更新后,发起请求同步资源数据到装箱消费模块,装箱消费模块根据目标分区分发到对应的装箱目标节点,装箱目标节点收到请求后,进行内存资源数据的更新,把请求投递到目标存储节点,目标存储节点负责把资源数据的更新落到数据库。
在申请实施例提供的云服务器的部署方法中,数据权威性是目标节点操作全内存化的基石,目标计算节点对于物理机资源数据的更新不再直接更新数据库,而是先同步到装箱目标节点更新目标节点的内存,然后由目标节点再把资源更新操作任务丢到目标存储节点,驱动目标存储节点完成数据落地到数据库。资源数据的变化是需要持久化的,避免目标节点重启内存数据丢失,新增目标存储节点模块负责数据的落地,把数据的更新同步到数据库。
为便于理解,请参见图4,图4是本申请实施例提供的目标计算节点的资源更新操作流程图。首先,目标计算节点接收到参数信息更新需求,计算资源池触发资源更新;其次,将待更新的资源同步到装箱消费模块;再次,将待更新的资源同步到目标节点;接着,目标节点根据待更新的资源对内存资源数据进行更新;然后,目标节点将携带待更新的资源的存储任务投递到目标存储节点;最后,通过目标存储节点负责数据的落地,把数据的更新同步到数据库。
本申请实施例提供了的云服务器的部署方法,通过接收云服务器的部署请求,并根据目标云服务器的部署条件信息和候选物理机的参数信息,快速确定目标物理机,从而实现了高效、准确的云服务器部署;通过从候选物理机中选择满足目标云服务器部署条件的目标物理机,并在目标物理机上进行部署,保证了云服务器的稳定性和可靠性;通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性;通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性,并且仅对内存资源数据中的目标物理机对应的参数信息进行更新,解决了装箱数据不权威的问题,将物理机确定的步骤与参数信息更新的步骤进行异步处理,提高了装箱任务处理速度,实现装箱调度管理器的性能提升。
在本申请的图3对应的实施例提供的云服务器的部署方法的一个可选实施例中,请参阅图5,步骤S130进一步包括子步骤S131至子步骤S133。具体的:
S131、根据目标云服务器的部署条件信息及M个候选物理机对应的M个参数信息,从M个候选物理机中确定P个预选物理机。
其中,P个预选物理机对应的P个参数信息均满足部署条件信息,P为大于1且小于等于M的整数。
可以理解的是,目标节点根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中筛选出参数信息均满足部署条件信息的P个预选物理机。具体的,可以是将不满足硬性约束条件(如物理机的所在位置可用区与zoneId不相同,或,物理机能够提供的资源无法满足云服务器所需的pool中的资源,或,物理机不能支持云服务器对应的device_class)的候选物理机过滤掉。
S132、根据P个预选物理机对应的P个参数信息,计算P个预选物理机对应的P个运行状态得分。
可以理解的是,得到了P个预选物理机后,根据每个预选物理机的参数信息计算每个预选物理机对应的运行状态得分,该运行状态得分可以用于表征物理机的健康度。物理机的健康度是指物理计算机系统的整体健康状况。它可以通过多种指标来衡量,例如:硬件健康:包括 CPU、内存、硬盘、网卡等硬件组件的运行状况。温度:计算机内部温度过高会影响硬件性能和寿命。电源稳定性:电源不稳定会导致计算机频繁重启。软件健康:包括操作系统、驱动程序、应用程序等软件组件的运行状况。
S133、根据P个运行状态得分,从P个预选物理机中确定目标物理机。
可以理解的是,根据P个运行状态得分对P个预选物理机进行排序,经过排序后得到包含P个预选物理机的排序列表,通过内循环对排序列表中的P个预选物理机按照排序的顺序进行资源扣减,根据资源扣减结果,确定最小的资源扣减信息对应的目标物理机。若经过内循环完成对P个预选物理机的遍历后,无法确定目标物理机,则将目标部署请求任务进行回滚处理。
本申请实施例提供了的云服务器的部署方法,通过对候选物理机进行筛选,将不满足硬性约束条件的物理机过滤掉,只保留满足条件的物理机,有助于避免在选择物理机时忽略重要的约束条件,从而提高选择的准确性。通过对预选物理机的软性约束条件进行打分排序。这有助于在选择物理机时考虑到不同的因素,例如物理机的健康度、性能等,从而选择最适合当前需求的物理机。对物理机做筛选处理和称重处理,提高了选择合适物理机的准确性、考虑了物理机的不同因素,并提高了部署效率。
在本申请的图5对应的实施例提供的云服务器的部署方法的一个可选实施例中,请参阅图6,步骤S133进一步包括子步骤S1331至子步骤S1333。具体的:
S1331、获取P个预选物理机对应的P个资源池信息及目标云服务器的资源需求信息。
可以理解的是,每个物理机具有其对应的资源池信息,该资源池信息用于表征该物理机的可承载的资源种类及资源种类的对应值。例如,预选物理机a的资源池信息包括:可支持的运行5m的计算资源、可支持运行6m的存储资源、可支持运行7m的网络资源;预选物理机b的资源池信息包括:可支持的运行2m的计算资源、可支持运行2m的存储资源、不支持运行资源;预选物理机c的资源池信息包括:可支持的运行9m的计算资源、可支持运行2m的存储资源、可支持运行4m的网络资源。
目标云服务器的资源需求信息用于表征该云服务器运行时所需要的资源种类及资源种类的对应值。例如,目标云服务器的资源需求信息为2m的计算资源。
S1332、根据P个资源池信息及目标云服务器的资源需求信息,对P个资源池信息进行资源扣减,得到P个资源扣减信息。
可以理解的是,根据每个物理机对应的资源池信息及目标云服务器的资源需求信息,对资源池信息进行资源扣减,得到每个物理机对应的资源扣减信息。例如,对于可支持的运行5m的计算资源的预选物理机a而言,根据资源池信息及目标云服务器的资源需求信息对计算资源进行资源扣减,得到预选物理机a的资源扣减信息为5-2=3m;对于可支持的运行2m的计算资源的预选物理机b而言,根据资源池信息及目标云服务器的资源需求信息对计算资源进行资源扣减,得到预选物理机b的资源扣减信息为2-2=0m;对于可支持的运行9m的计算资源的预选物理机c而言,根据资源池信息及目标云服务器的资源需求信息对计算资源进行资源扣减,得到预选物理机c的资源扣减信息为9-2=7m。
S1333、根据P个资源扣减信息确定目标物理机。
其中,目标物理机的资源扣减信息为P个预选物理机对应的P个资源扣减信息中的最小值。
可以理解的是,从P个预选物理机中选择资源扣减信息最小确定为目标物理机。即在上述例子中,选择资源扣减信息为0m的预选物理机b作为目标物理机,从而避免对物理机的切割。
为便于理解,请参阅图7,图7为本申请实施例提供的目标节点处理装箱任务的流程图。需要说明的是,目标节点的操作为全内存化。首先,目标节点从消息队列中获取目标部署请求,其次,目标节点将该部署请求投递到对应目标分区处理的线程中,在该线程中依次进行筛选处理和称重处理,以选出目标物理机。具体的,在对物理机进行筛选处理时,将不满足硬性约束(如位置可用区不满足)的过滤掉;在对经过筛选后的物理机进行称重处理,根据每个物理机软性约束的不同,进行打分排序,如物理机的健康度,健康度越高的排在前边;完成上述动作后,会得到一个物理机的列表,查找是否有满足条件的物理机,在这一个步骤里,需要循环对物理机列表中的物理机做资源扣减,如果这些操作成功,则选择对应的物理机,这一步结束,如果操作失败,则继续下一个物理机,循环结束后,如果没有选到物理机,则把任务进行回滚处理,否则,丢入目标存储节点,继续任务的处理。
在该目标节点的处理过程中,不需要从数据库拉取增量数据,避免拉取数据的过程,任务等待,处理时间加长,可能导致多达几分钟的等待;不需要做参数转换,与数据库做交互,把参数转换的过程上移到装箱消费模块,因为装箱消费模块是平行可扩展的架构,可实现并发;在处理任务的过程,在筛选处理和称重处理过程,不需要再和数据库交互,程序启动时,已拉取全部数据缓存到内存。处理任务选到物理机后,无需再更新数据库,丢到下一个步骤目标存储节点进行数据的更新,丢到目标存储节点的任务,需要按序打上序列号,因为针对同一个物理机的资源数据的更新,必须是有序的,否则会造成数据错乱,这里会按照目标分区进行哈希,实现目标分区到目标存储节点的队列的映射,确保一个目标分区的请求丢到同一个目标存储节点队列,由同一目标存储节点消费者进行处理,实现数据的有序处理。
本申请实施例提供的云服务器的部署方法,通过对资源池信息进行扣减,可以确保目标云服务器所需的资源能够在可用的物理机上得到满足,从而提高了资源的利用率;通过选择资源扣减信息最小的物理机作为目标物理机,可以避免对物理机进行过度切割,从而保护了物理机的性能和稳定性;通过优化资源分配,减少了不必要的资源浪费,降低了云服务器的成本。
在本申请的图3对应的实施例提供的云服务器的部署方法的一个可选实施例中,请参阅图8,步骤S120包括子步骤S121至子步骤S122。具体的:
S121、根据目标云服务器的部署条件信息确定目标计算节点。
其中,目标计算节点的配置信息满足部署条件信息。
可以理解的是,根据目标云服务器的部署条件信息,从候选计算节点中选择计算节点的配置信息满足部署条件信息的目标计算节点。例如,在选择计算节点时需要考虑到目标云服务器的特定需求,例如计算能力、存储容量等。
S122、通过目标计算节点从内存资源数据中获取M个候选物理机对应的M个参数信息。
可以理解的是,根据目标计算机点的内部存储数据,获取M个候选物理机中每个候选物理机对应的参数信息。例如,在确定了目标计算节点后,可以访问该节点上存储的内存资源数据,以获取有关候选物理机的信息,例如物理机的型号、配置等参数信息。
本申请实施例提供了的云服务器的部署方法,通过选择合适的计算节点,使得目标云服务器的部署条件得到满足,这有助于提高系统的可靠性和稳定性,并降低因为资源不足或不匹配而导致的故障风险。通过从内存资源数据中获取候选物理机对应的参数信息,以便更好地了解可用的资源情况,并选择最适合目标云服务器需求的物理机。这有助于提高系统的效率和性能,并降低因为资源浪费或不足而导致的成本。
在本申请的图8对应的实施例提供的云服务器的部署方法的一个可选实施例中,请参阅图9,步骤S121进一步包括子步骤S1211至子步骤S1212。具体的:
S1211、根据目标云服务器的部署条件信息确定目标分区。
其中,目标分区的配置信息满足部署条件信息。
可以理解的是,根据目标云服务器的部署条件信息确定目标分区,其中,部署条件信息包括存储需求、处理能力、网络带宽等方面的要求,然后,检查目标分区的配置信息是否满足这些部署条件信息,只有当目标分区的配置信息满足所有条件时,才将其确定为目标分区。
S1212、根据目标分区确定目标计算节点。
其中,目标计算节点与目标分区具有第一映射关系。
可以理解的是,根据已经确定的目标分区来确定目标计算节点,其中,第一映射关系是指在云计算环境中,每个分区都与一个或多个计算节点相关联,并且这些计算节点具有特定的资源配置和性能特征,可以满足该分区的需求。因此,根据目标分区的需求,可以确定与之具有第一映射关系的目标计算节点,以确保该分区能够在这些计算节点上得到高效的运行。
本申请实施例提供了的云服务器的部署方法,根据目标分区确定合适的计算节点,使得目标分区能够在具有足够资源和性能的计算节点上运行。这有助于提高系统的效率和性能,并降低因为资源不足或不匹配而导致的问题。
在本申请实施例提供的云服务器的部署方法的一个可选实施例中,请参阅图10,步骤S150进一步包括子步骤S151。具体的:
S151、根据资源更新信息对目标计算节点中的内存资源数据中的目标物理机对应的参数信息进行更新。
可以理解的是,目标计算节点指需要进行内存资源数据更新操作的计算节点。内存资源数据指存储在目标计算节点中的与物理机相关的参数信息,例如物理机的内存大小、可用性等。目标物理机:指需要对其对应的参数信息进行更新的物理机。资源更新信息:指与目标物理机相关的更新信息,例如物理机的内存大小发生了变化,或者物理机不可用了等。
本申请实施例提供了的云服务器的部署方法,根据资源更新信息对目标计算节点中的内存资源数据中的目标物理机对应的参数信息进行更新,可以确保内存资源数据的准确性和时效性,从而为后续的资源管理和调度提供更准确的信息。
在本申请的图10对应的实施例提供的云服务器的部署方法的一个可选实施例中,请参阅图11,步骤S151之后还包括步骤S152至步骤S153。具体的:
S152、根据目标计算节点,确定目标存储节点。
其中,目标计算节点与目标存储节点具有第二映射关系。
可以理解的是,第二映射关系指的是在系统中,每个计算节点都与一个或多个存储节点相关联,并且这些存储节点具有特定的存储能力和性能特征,可以满足该计算节点的存储需求。因此,根据目标计算节点的需求,可以确定与之具有第二映射关系的目标存储节点,以确保该计算节点的资源更新信息能够被存储在合适的存储节点上。
S153、通过目标存储节点对资源更新信息进行存储。
可以理解的是,资源更新信息指的是系统中各个计算节点的资源状态变化信息,例如内存使用情况、CPU 占用率等,通过将这些更新信息存储在相应的存储节点上,可以方便地对资源状态进行管理。
本申请实施例提供了的云服务器的部署方法,根据目标计算节点的需求确定合适的存储节点,并将资源更新信息存储在这些节点上,从而确保系统中的资源状态能够得到及时更新和管理。
在本申请的图9对应的实施例提供的云服务器的部署方法的一个可选实施例中,请参阅图12,部署方法还包括步骤S210至步骤S230。具体的:
S210、获取目标分区的历史部署请求日志数据。
可以理解的是,从目标分区中获取历史的部署请求日志数据,这些数据包含有关过去的资源更新请求的信息。
S220、若历史部署请求日志数据的数量大于部署请求处理阈值,则获取目标存储节点对资源更新信息进行存储的当前任务序列号。
可以理解的是,如果历史部署请求日志数据的数量大于一个预设的部署请求处理阈值,则会获取目标存储节点对资源更新信息进行存储的当前任务序列号,这个阈值是根据系统的负载和性能要求设定的,用于控制系统处理部署请求的数量。
S221、若当前任务序列号与目标任务序列号相同,则获取超时时间。
可以理解的是,如果当前任务序列号与目标任务序列号相同,则系统会获取超时时间。目标任务序列号是指预先设定的一个特定的任务序列号,用于标识特定的资源更新请求。超时时间可能是指系统允许资源更新请求等待存储的最长时间。
S222、待等待超时时间后,通过目标存储节点对资源更新信息进行存储。
可以理解的是,如果等待时间超过了超时时间,则会通过目标存储节点对资源更新信息进行存储。优选的,如果资源更新请求等待存储的时间超过了超时时间,系统会自动执行存储操作。
S223、若当前任务序列号与目标任务序列号不相同,则更新目标存储节点对资源更新信息进行存储的任务序列号,生成更新任务序列号。
其中,更新任务序列号大于当前任务序列号。
可以理解的是,如果当前任务序列号与目标任务序列号不相同,则系统会更新目标存储节点对资源更新信息进行存储的任务序列号,生成一个更新后的任务序列号。这个更新后的任务序列号用于标识下一次的资源更新请求。
S224、若更新任务序列号与目标任务序列号相同,则通过目标存储节点对资源更新信息进行存储。
可以理解的是,如果更新后的任务序列号与目标任务序列号相同,则系统会通过目标存储节点对资源更新信息进行存储。
S225、若更新任务序列号与目标任务序列号不同,则获取等待时间。
其中,等待时间为当前时间与目标存储节点接收到对资源更新信息进行存储任务的时间的时间差。
可以理解的是,如果更新后的任务序列号与目标任务序列号不同,则系统会获取等待时间。等待时间是指从目标存储节点接收到对资源更新信息进行存储任务的时间到当前时间的时间差。
S226、若等待时间不大于超时时间,则目标存储节点对资源更新信息进行存储。
可以理解的是,如果等待时间不大于超时时间,则目标存储节点会对资源更新信息进行存储。超时时间是之前设定的一个时间限制,用于控制资源更新请求等待存储的时间。
S230、若历史部署请求日志数据的数量不大于部署请求处理阈值,则根据历史部署请求日志数据的数量设置目标存储节点对资源更新信息进行存储的任务序列号。
可以理解的是,如果历史部署请求日志数据的数量不大于部署请求处理阈值,则系统会根据历史部署请求日志数据的数量设置目标存储节点对资源更新信息进行存储的任务序列号。这个任务序列号可能会用于标识资源更新请求在目标存储节点中的存储位置。
为便于理解,请参阅图13,图13为本申请实施例提供的目标存储节点对于单个存储任务的处理流程。目标存储节点收到数据库落地的任务后,需要先判断该目标分区是否有处理过任务,如果没有处理过,可能是因为服务重启后,该目标分区过来的第一个部署请求,先记录这个目标分区最后一个处理的序列号为当前目标部署请求的序列号减2,这里这样设计,是为了避免第一个过来的请求乱序,所以多等待一个超时时间,然后判断过来的目标部署请求的序列号是否为1,如果为1,则明确说明没有乱序,记录目标分区最后一个处理的序列号为任务的序列号减1。
如果过来的目标部署请求的序列号不为1,则判断目标分区最后一个处理的序列号加1是否等于当前要处理的任务的序列号,对于当前目标分区为1以及目标分区最后一个处理的序列号加1等于当前要处理的目标部署请求的序列号的情况,则对当前收到的任务进行处理,执行数据落地的动作,然后进入处理先到未处理的目标部署请求流程。
目标分区最后一个处理的序列号加1不等于当前要处理的任务的序列号,则保存这个目标部署请求,并且查看目标分区等待当前要处理的序列号请求是否超过了超时时间,如果超过了超时时间,则需要把目标分区最后处理的请求的序列号加1,代表跳过一个序列号不等待了,进入处理先到未处理的目标部署请求流程,这个流程会从目标分区最后处理的请求的序列号加1,从内存里查找是否存在对应的序列号的目标部署请求,存在的话,一直循环处理下去,把所有先到未处理的请求处理完,直到内存里没有对应的序列号的目标部署请求了,结束循环。
本申请实施例提供了的云服务器的部署方法,将数据库落地的操作从装箱目标节点里剥离出来,采用目标存储节点进行处理,装箱目标节点只做计算处理,不做数据库交互,确保装箱目标节点的吞吐能力,目标存储节点在处理数据库落地的时候,按照物理机维度进行并发操作,实现数据库操作落地的高并发,实现装箱整体性能的提升。针对装箱目标节点串行处理装箱任务过程,剥离数据库交互的操作,实现全内存化的装箱处理,集群万级别规模下,装箱过程可从分钟级优化到秒级。
下面对本申请中的云服务器的部署装置进行详细描述,请参阅图14。图14为本申请实施例中云服务器的部署装置10的一个实施例示意图,云服务器的部署装置10包括:目标部署请求接收模块110、参数信息获取模块120、目标物理机确定模块130、部署模块140及参数更新模块150;具体的:
目标部署请求接收模块110,用于接收云服务器的目标部署请求,其中,云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,云服务器目标部署请求携带目标云服务器的部署条件信息;
参数信息获取模块120,用于从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;
目标物理机确定模块130,用于根据M个候选物理机对应的M个参数信息及目标云服务器的部署条件信息,从M个候选物理机中确定目标物理机,其中,目标物理机对应的参数信息满足目标云服务器的部署条件信息;
部署模块140,用于将目标云服务器在目标物理机上进行部署,生成目标物理机的资源更新信息;
参数更新模块150,用于根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新。
本申请实施例提供了的云服务器的部署装置,通过接收云服务器的部署请求,并根据目标云服务器的部署条件信息和候选物理机的参数信息,快速确定目标物理机,从而实现了高效、准确的云服务器部署;通过从候选物理机中选择满足目标云服务器部署条件的目标物理机,并在目标物理机上进行部署,保证了云服务器的稳定性和可靠性;通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性;通过根据目标物理机的资源更新信息对内存资源数据中的目标物理机对应的参数信息进行更新,实现了对物理机资源的实时更新,保证了资源数据的准确性和实时性,并且仅对内存资源数据中的目标物理机对应的参数信息进行更新,解决了装箱数据不权威的问题,将物理机确定的步骤与参数信息更新的步骤进行异步处理,提高了装箱任务处理速度,实现装箱调度管理器的性能提升。
在本申请的图14对应的实施例提供的云服务器的部署装置的一个可选实施例中,请参阅图14,目标物理机确定模块130,还用于:
根据目标云服务器的部署条件信息及M个候选物理机对应的M个参数信息,从M个候选物理机中确定P个预选物理机,其中,P个预选物理机对应的P个参数信息均满足部署条件信息,P为大于1且小于等于M的整数;
根据P个预选物理机对应的P个参数信息,计算P个预选物理机对应的P个运行状态得分;
根据P个运行状态得分,从P个预选物理机中确定目标物理机。
本申请实施例提供了的云服务器的部署装置,通过对候选物理机进行筛选,将不满足硬性约束条件的物理机过滤掉,只保留满足条件的物理机,有助于避免在选择物理机时忽略重要的约束条件,从而提高选择的准确性。通过对预选物理机的软性约束条件进行打分排序。这有助于在选择物理机时考虑到不同的因素,例如物理机的健康度、性能等,从而选择最适合当前需求的物理机。对物理机做筛选处理和称重处理,提高了选择合适物理机的准确性、考虑了物理机的不同因素,并提高了部署效率。
在本申请的图14对应的实施例提供的云服务器的部署装置的一个可选实施例中,请参阅图14,目标物理机确定模块130,还用于:
获取P个预选物理机对应的P个资源池信息及目标云服务器的资源需求信息;
根据P个资源池信息及目标云服务器的资源需求信息,对P个资源池信息进行资源扣减,得到P个资源扣减信息;
根据P个资源扣减信息确定目标物理机,其中,目标物理机的资源扣减信息为P个预选物理机对应的P个资源扣减信息中的最小值。
本申请实施例提供的云服务器的部署装置,通过对资源池信息进行扣减,可以确保目标云服务器所需的资源能够在可用的物理机上得到满足,从而提高了资源的利用率;通过选择资源扣减信息最小的物理机作为目标物理机,可以避免对物理机进行过度切割,从而保护了物理机的性能和稳定性;通过优化资源分配,减少了不必要的资源浪费,降低了云服务器的成本。
在本申请的图14对应的实施例提供的云服务器的部署装置的一个可选实施例中,请参阅图14,目标物理机确定模块130,还用于:
根据目标云服务器的部署条件信息确定目标计算节点,其中,目标计算节点的配置信息满足部署条件信息;
通过目标计算节点从内存资源数据中获取M个候选物理机对应的M个参数信息。
本申请实施例提供了的云服务器的部署装置,通过选择合适的计算节点,使得目标云服务器的部署条件得到满足,这有助于提高系统的可靠性和稳定性,并降低因为资源不足或不匹配而导致的故障风险。通过从内存资源数据中获取候选物理机对应的参数信息,以便更好地了解可用的资源情况,并选择最适合目标云服务器需求的物理机。这有助于提高系统的效率和性能,并降低因为资源浪费或不足而导致的成本。
在本申请的图14对应的实施例提供的云服务器的部署装置的一个可选实施例中,请参阅图14,目标物理机确定模块130,还用于:
根据目标云服务器的部署条件信息确定目标分区,其中,目标分区的配置信息满足部署条件信息;
根据目标分区确定目标计算节点,其中,目标计算节点与目标分区具有第一映射关系。
本申请实施例提供了的云服务器的部署装置,根据目标分区确定合适的计算节点,使得目标分区能够在具有足够资源和性能的计算节点上运行。这有助于提高系统的效率和性能,并降低因为资源不足或不匹配而导致的问题。
在本申请的图14对应的实施例提供的云服务器的部署装置的一个可选实施例中,请参阅图14,目标物理机确定模块130,还用于:
根据资源更新信息对目标计算节点中的内存资源数据中的目标物理机对应的参数信息进行更新。
本申请实施例提供了的云服务器的部署装置,根据资源更新信息对目标计算节点中的内存资源数据中的目标物理机对应的参数信息进行更新,可以确保内存资源数据的准确性和时效性,从而为后续的资源管理和调度提供更准确的信息。
在本申请的图14对应的实施例提供的云服务器的部署装置的一个可选实施例中,请参阅图15,云服务器的部署装置还包括:资源更新信息存储模块160;具体的,资源更新信息存储模块160,用于:
根据目标计算节点,确定目标存储节点,其中,目标计算节点与目标存储节点具有第二映射关系;
通过目标存储节点对资源更新信息进行存储。
本申请实施例提供了的云服务器的部署装置,根据目标计算节点的需求确定合适的存储节点,并将资源更新信息存储在这些节点上,从而确保系统中的资源状态能够得到及时更新和管理。
在本申请的图15对应的实施例提供的云服务器的部署装置的一个可选实施例中,请参阅图15,资源更新信息存储模块160,用于:
获取目标分区的历史部署请求日志数据;
若历史部署请求日志数据的数量大于部署请求处理阈值,则获取目标存储节点对资源更新信息进行存储的当前任务序列号;
若当前任务序列号与目标任务序列号相同,则获取超时时间;
待等待超时时间后,通过目标存储节点对资源更新信息进行存储。
若当前任务序列号与目标任务序列号不相同,则更新目标存储节点对资源更新信息进行存储的任务序列号,生成更新任务序列号,其中,更新任务序列号大于当前任务序列号;
若更新任务序列号与目标任务序列号相同,则通过目标存储节点对资源更新信息进行存储。
若更新任务序列号与目标任务序列号不同,则获取等待时间,其中,等待时间为当前时间与目标存储节点接收到对资源更新信息进行存储任务的时间的时间差;
若等待时间不大于超时时间,则目标存储节点对资源更新信息进行存储。
若历史部署请求日志数据的数量不大于部署请求处理阈值,则根据历史部署请求日志数据的数量设置目标存储节点对资源更新信息进行存储的任务序列号。
本申请实施例提供了的云服务器的部署装置,将数据库落地的操作从装箱目标节点(worker)里剥离出来,采用目标存储节点(store)进行处理,装箱目标节点(worker)只做计算处理,不做数据库交互,确保装箱目标节点(worker)的吞吐能力,目标存储节点(store)在处理数据库落地的时候,按照物理机维度进行并发操作,实现数据库操作落地的高并发,实现装箱整体性能的提升。针对装箱目标节点(worker)串行处理装箱任务过程,剥离数据库交互的操作,实现全内存化的装箱处理,集群万级别规模下,装箱过程可从分钟级优化到秒级。
图16是本申请实施例提供的一种服务器结构示意图,该服务器300可因配置或性能不同而产生比较大的差异,可以包括一个或一个以上中央处理器(central processingunits,CPU)322(例如,一个或一个以上处理器)和存储器332,一个或一个以上存储应用程序342或数据344的存储介质330(例如一个或一个以上海量存储设备)。其中,存储器332和存储介质330可以是短暂存储或持久存储。存储在存储介质330的程序可以包括一个或一个以上模块(图示没标出),每个模块可以包括对服务器中的一系列指令操作。更进一步地,中央处理器322可以设置为与存储介质330通信,在服务器300上执行存储介质330中的一系列指令操作。
服务器300还可以包括一个或一个以上电源326,一个或一个以上有线或无线网络接口350,一个或一个以上输入输出接口358,和/或,一个或一个以上操作系统341,例如Windows ServerTM,Mac OS XTM,UnixTM, LinuxTM,FreeBSDTM等等。
上述实施例中由服务器所执行的步骤可以基于该图16所示的服务器结构。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。

Claims (14)

1.一种云服务器的部署方法,其特征在于,包括:
接收云服务器的目标部署请求,其中,所述云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,所述云服务器目标部署请求携带目标云服务器的部署条件信息;
从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;
根据所述M个候选物理机对应的M个参数信息及所述目标云服务器的部署条件信息,从所述M个候选物理机中确定目标物理机,其中,所述目标物理机对应的参数信息满足所述目标云服务器的部署条件信息;
将所述目标云服务器在所述目标物理机上进行部署,生成目标物理机的资源更新信息;
根据所述目标物理机的资源更新信息对所述内存资源数据中的所述目标物理机对应的参数信息进行更新。
2.如权利要求1所述的云服务器的部署方法,其特征在于,所述根据所述M个候选物理机对应的M个参数信息及所述目标云服务器的部署条件信息,从所述M个候选物理机中确定目标物理机,包括:
根据所述目标云服务器的部署条件信息及所述M个候选物理机对应的M个参数信息,从所述M个候选物理机中确定P个预选物理机,其中,所述P个预选物理机对应的P个参数信息均满足所述部署条件信息,P为大于1且小于等于M的整数;
根据所述P个预选物理机对应的P个参数信息,计算所述P个预选物理机对应的P个运行状态得分;
根据所述P个运行状态得分,从所述P个预选物理机中确定目标物理机。
3.如权利要求2所述的云服务器的部署方法,其特征在于,所述根据所述P个运行状态得分,从所述P个预选物理机中确定目标物理机,包括:
获取所述P个预选物理机对应的P个资源池信息及所述目标云服务器的资源需求信息;
根据所述P个资源池信息及所述目标云服务器的资源需求信息,对所述P个资源池信息进行资源扣减,得到P个资源扣减信息;
根据所述P个资源扣减信息确定所述目标物理机,其中,所述目标物理机的资源扣减信息为所述P个预选物理机对应的P个资源扣减信息中的最小值。
4.如权利要求1所述的云服务器的部署方法,其特征在于,所述从内存资源数据中获取M个候选物理机对应的M个参数信息,包括:
根据所述目标云服务器的部署条件信息确定目标计算节点,其中,所述目标计算节点的配置信息满足所述部署条件信息;
通过所述目标计算节点从内存资源数据中获取M个候选物理机对应的M个参数信息。
5.如权利要求4所述的云服务器的部署方法,其特征在于,所述根据所述目标云服务器的部署条件信息确定目标计算节点,包括:
根据所述目标云服务器的部署条件信息确定目标分区,其中,所述目标分区的配置信息满足所述部署条件信息;
根据所述目标分区确定目标计算节点,其中,所述目标计算节点与所述目标分区具有第一映射关系。
6.如权利要求5所述的云服务器的部署方法,其特征在于,所述根据所述目标物理机的资源更新信息对所述内存资源数据中的所述目标物理机对应的参数信息进行更新,包括:
根据所述资源更新信息对所述目标计算节点中的内存资源数据中的所述目标物理机对应的参数信息进行更新。
7.如权利要求6所述的云服务器的部署方法,其特征在于,所述根据所述资源更新信息对所述目标计算节点中的内存资源数据中的所述目标物理机对应的参数信息进行更新之后,还包括:
根据所述目标计算节点,确定目标存储节点,其中,所述目标计算节点与所述目标存储节点具有第二映射关系;
通过所述目标存储节点对所述资源更新信息进行存储。
8.如权利要求7所述的云服务器的部署方法,其特征在于,所述通过所述目标存储节点对所述资源更新信息进行存储,包括:
获取所述目标分区的历史部署请求日志数据;
若所述历史部署请求日志数据的数量大于部署请求处理阈值,则获取所述目标存储节点对所述资源更新信息进行存储的当前任务序列号;
若所述当前任务序列号与目标任务序列号相同,则获取超时时间;
待等待所述超时时间后,通过所述目标存储节点对所述资源更新信息进行存储。
9.如权利要求8所述的云服务器的部署方法,其特征在于,所述获取所述目标存储节点对所述资源更新信息进行存储的当前任务序列号之后,还包括:
若所述当前任务序列号与目标任务序列号不相同,则更新所述目标存储节点对所述资源更新信息进行存储的任务序列号,生成更新任务序列号,其中,所述更新任务序列号大于所述当前任务序列号;
若所述更新任务序列号与所述目标任务序列号相同,则通过所述目标存储节点对所述资源更新信息进行存储。
10.如权利要求9所述的云服务器的部署方法,其特征在于,所述更新所述目标存储节点对所述资源更新信息进行存储的任务序列号之后,还包括:
若所述更新任务序列号与所述目标任务序列号不同,则获取等待时间,其中,所述等待时间为当前时间与目标存储节点接收到对所述资源更新信息进行存储任务的时间的时间差;
若所述等待时间不大于所述超时时间,则目标存储节点对所述资源更新信息进行存储。
11.如权利要求8所述的云服务器的部署方法,其特征在于,所述获取所述目标分区的历史部署请求日志数据之后,还包括:
若所述历史部署请求日志数据的数量不大于部署请求处理阈值,则根据所述历史部署请求日志数据的数量设置所述目标存储节点对所述资源更新信息进行存储的任务序列号。
12.一种云服务器的部署装置,其特征在于,包括:
目标部署请求接收模块,用于接收云服务器的目标部署请求,其中,所述云服务器目标部署请求用于表征将目标云服务器在物理机上进行部署的指令,所述云服务器目标部署请求携带目标云服务器的部署条件信息;
参数信息获取模块,用于从内存资源数据中获取M个候选物理机对应的M个参数信息,其中,M为大于1的整数;
目标物理机确定模块,用于根据所述M个候选物理机对应的M个参数信息及所述目标云服务器的部署条件信息,从所述M个候选物理机中确定目标物理机,其中,所述目标物理机对应的参数信息满足所述目标云服务器的部署条件信息;
部署模块,用于将所述目标云服务器在所述目标物理机上进行部署,生成目标物理机的资源更新信息;
参数更新模块,用于根据所述目标物理机的资源更新信息对所述内存资源数据中的所述目标物理机对应的参数信息进行更新。
13.一种计算机设备,其特征在于,包括:存储器、收发器、处理器以及总线系统;
其中,所述存储器用于存储程序;
所述处理器用于执行所述存储器中的程序,包括执行如权利要求1至11中任一项所述的云服务器的部署方法;
所述总线系统用于连接所述存储器以及所述处理器,以使所述存储器以及所述处理器进行通信。
14.一种计算机可读存储介质,包括指令,其特征在于,当其在计算机上运行时,使得计算机执行如权利要求1至11中任一项所述的云服务器的部署方法。
CN202311409603.2A 2023-10-27 2023-10-27 一种云服务器的部署方法及相关装置 Active CN117155804B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311409603.2A CN117155804B (zh) 2023-10-27 2023-10-27 一种云服务器的部署方法及相关装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202311409603.2A CN117155804B (zh) 2023-10-27 2023-10-27 一种云服务器的部署方法及相关装置

Publications (2)

Publication Number Publication Date
CN117155804A true CN117155804A (zh) 2023-12-01
CN117155804B CN117155804B (zh) 2024-01-09

Family

ID=88910404

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202311409603.2A Active CN117155804B (zh) 2023-10-27 2023-10-27 一种云服务器的部署方法及相关装置

Country Status (1)

Country Link
CN (1) CN117155804B (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110295999A1 (en) * 2010-05-28 2011-12-01 James Michael Ferris Methods and systems for cloud deployment analysis featuring relative cloud resource importance
CN105843670A (zh) * 2016-03-22 2016-08-10 浙江大学 一种云平台虚拟集群部署整合方法
CN108833592A (zh) * 2018-07-13 2018-11-16 无锡华云数据技术服务有限公司 云主机调度器优化方法、装置、设备及存储介质
CN110825494A (zh) * 2019-11-01 2020-02-21 北京京东尚科信息技术有限公司 物理机调度方法及装置、计算机可存储介质
WO2021197214A1 (zh) * 2020-03-30 2021-10-07 北京金山云网络技术有限公司 云平台的升级方法、装置和服务器
CN115567596A (zh) * 2022-09-28 2023-01-03 建信金融科技有限责任公司 云服务资源部署方法、装置、设备及存储介质
CN115695210A (zh) * 2022-09-26 2023-02-03 北京金山云网络技术有限公司 云服务器部署方法和装置、电子设备和存储介质
WO2023045552A1 (zh) * 2021-09-27 2023-03-30 中兴通讯股份有限公司 服务部署方法、服务部署系统、电子设备及存储介质

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110295999A1 (en) * 2010-05-28 2011-12-01 James Michael Ferris Methods and systems for cloud deployment analysis featuring relative cloud resource importance
CN105843670A (zh) * 2016-03-22 2016-08-10 浙江大学 一种云平台虚拟集群部署整合方法
CN108833592A (zh) * 2018-07-13 2018-11-16 无锡华云数据技术服务有限公司 云主机调度器优化方法、装置、设备及存储介质
CN110825494A (zh) * 2019-11-01 2020-02-21 北京京东尚科信息技术有限公司 物理机调度方法及装置、计算机可存储介质
WO2021197214A1 (zh) * 2020-03-30 2021-10-07 北京金山云网络技术有限公司 云平台的升级方法、装置和服务器
WO2023045552A1 (zh) * 2021-09-27 2023-03-30 中兴通讯股份有限公司 服务部署方法、服务部署系统、电子设备及存储介质
CN115695210A (zh) * 2022-09-26 2023-02-03 北京金山云网络技术有限公司 云服务器部署方法和装置、电子设备和存储介质
CN115567596A (zh) * 2022-09-28 2023-01-03 建信金融科技有限责任公司 云服务资源部署方法、装置、设备及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张乾坤;李果;张福铮;: "基于OpenStack云平台的计算资源动态调度", 电子设计工程, no. 05 *

Also Published As

Publication number Publication date
CN117155804B (zh) 2024-01-09

Similar Documents

Publication Publication Date Title
CN105049268B (zh) 分布式计算资源分配系统和任务处理方法
CN109117265A (zh) 在集群中调度作业的方法、装置、设备及存储介质
US7856572B2 (en) Information processing device, program thereof, modular type system operation management system, and component selection method
CN111427675B (zh) 一种数据处理方法、装置以及计算机可读存储介质
CN110221920B (zh) 部署方法、装置、存储介质及系统
JPWO2007072544A1 (ja) 情報処理装置、計算機、リソース割り当て方法及びリソース割り当てプログラム
CN112437129B (zh) 集群的管理方法及集群的管理装置
WO2019199449A1 (en) Deployment of services across clusters of nodes
CN117480494A (zh) 改进虚拟计算环境中资源分配的协调容器调度
CN110399272A (zh) 日志处理设备、方法、电子设备及计算机可读存储介质
CN111666158A (zh) 一种基于Kubernetes的容器调度方法、装置、存储介质及电子设备
CN112463395A (zh) 一种资源分配方法、装置、设备及可读存储介质
US11720460B2 (en) Enhanced configuration management of data processing clusters
CN107203256B (zh) 一种网络功能虚拟化场景下的节能分配方法与装置
CN114281479A (zh) 一种容器管理方法及装置
CN114416355A (zh) 资源调度方法、装置、系统、电子设备及介质
CN114116173A (zh) 动态调整任务分配的方法、装置和系统
Wu et al. Abp scheduler: Speeding up service spread in docker swarm
CN117155804B (zh) 一种云服务器的部署方法及相关装置
CN112698929A (zh) 一种信息采集方法及装置
EP4206915A1 (en) Container creation method and apparatus, electronic device, and storage medium
CN115794306A (zh) 基于抢占实例的资源分配方法及装置、电子设备及介质
CN116266129A (zh) 分布式计算系统中的多领导者选举
CN112835989A (zh) 一种单应用多MySQL Set的部署方法及系统
CN110018898B (zh) 选择虚拟化基础设施管理器的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant