CN112416520A - 一种基于vSphere的智能资源调度方法 - Google Patents

一种基于vSphere的智能资源调度方法 Download PDF

Info

Publication number
CN112416520A
CN112416520A CN202011315639.0A CN202011315639A CN112416520A CN 112416520 A CN112416520 A CN 112416520A CN 202011315639 A CN202011315639 A CN 202011315639A CN 112416520 A CN112416520 A CN 112416520A
Authority
CN
China
Prior art keywords
host
resource
virtual machine
weight
cluster
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011315639.0A
Other languages
English (en)
Other versions
CN112416520B (zh
Inventor
谭昌雄
尹韶君
吴远明
温振环
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vcmy Guangzhou Technology Shares Co ltd
Original Assignee
Vcmy Guangzhou Technology Shares Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vcmy Guangzhou Technology Shares Co ltd filed Critical Vcmy Guangzhou Technology Shares Co ltd
Priority to CN202011315639.0A priority Critical patent/CN112416520B/zh
Publication of CN112416520A publication Critical patent/CN112416520A/zh
Application granted granted Critical
Publication of CN112416520B publication Critical patent/CN112416520B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5061—Partitioning or combining of resources
    • G06F9/5077—Logical partitioning of resources; Management or configuration of virtualized resources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/4557—Distribution of virtual machine instances; Migration and load balancing
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)
  • Stored Programmes (AREA)

Abstract

本发明提出一种基于vSphere的智能资源调度方法，适用于多主机集群的复杂环境，其步骤是：设置虚拟机数量和资源参数的阈值和权重；获取集群内各主机的资源使用率和虚拟机数量，并且检验主机的资源使用率是否超过阈值，对已超过阈值的主机添加到资源超额的列表；统计各个集群内主机的24小时性能使用报告，分析得出主机资源最不常用时间段并设置为虚拟机调度时间；按权重公式排序各集群内各主机的权重顺序，得主机的资源权重排名列表；获取已过阈值的主机并通过权重公式获取虚拟机的权重排名，将排名最高的虚拟机存放到需调度的虚拟机列表；在虚拟机调度时间内，使用vMotion迁移至主机资源权重排名中最低的主机中，或挂起虚拟机后使用冷迁移资源。

Description

一种基于vSphere的智能资源调度方法
技术领域
本发明涉及一种基于vSphere的智能资源调度方法。
背景技术
vSphere是一款提供虚拟化、虚拟化管理、资源优化、应用程序可用性、操作自动化等功能的管理平台，其主要功能就是创建虚拟机并对虚拟机进行管理。在企业、医院、政府部门等组织机构，需要在vSphere上创建各种各样的虚拟机，因为虚拟机的创建是需要占用主机的资源如cpu，内存，存储等，所以在批量创建的时候会出现资源分配不均的问题，从而造成资源使用率低的情况，导致部分主机cpu已满内存剩余较多或内存已满cpu剩余较多。
在现有技术下，主要的资源调度方案是：DRS(分布式资源调度器)一种有助于改善所有主机和资源池之间的资源分配及功耗状况的功能，它能将一组服务器的计算能力统计起来，然后，按照事先设定好的规则，自动把负载较重的主机上的虚拟机通过VMotion迁移到负载较轻的主机上，最终达到整个集群中的主机资源消耗平衡。目前的DRS技术，必须要在同一集群内才能收集到主机和虚拟机的资源使用情况，仅适用于单主机集群内的资源调度。
发明内容
为克服现有技术只针对单个主机集群所做的资源调度分配，局限性较大的缺陷，本发明提出一种基于vSphere的智能资源调度方法，适用于多主机集群的复杂环境，可以通过获取集群信息和虚拟机信息完成资源调度。其具体技术内容如下：
一种基于vSphere的智能资源调度方法，其包括以下步骤：
步骤1，设置虚拟机数量的阈值和权重，以及若干个资源参数的阈值和权重；所述资源参数包括主机CPU占用率、主机内存占用率、主机磁盘利用率；
步骤2，获取集群内各个主机的资源使用率和虚拟机数量，并且检验各主机的资源使用率是否超过步骤1所设置的阈值，对已超过阈值的主机添加到资源超额的列表内保存；
步骤3，统计各个集群内主机最近N天内的24小时性能使用报告，其中包含CPU和内存的使用情况，分析得出主机资源最不常用时间段，将其设置为虚拟机调度时间；
步骤4，按权重公式排序各个集群内各个主机的权重顺序，得主机的资源权重排名列表，所述权重公式为：主机的权重值＝CPU利用率*权重+内存占用率*权重+磁盘利用率*权重+虚拟机数量*权重；
步骤5，从步骤2中资源超额的列表中获取已过阈值的主机，通过步骤4的权重公式获取虚拟机的权重排名，将排名最高的虚拟机存放到需调度的虚拟机列表；
步骤6，在所述虚拟机调度时间内，使用vMotion迁移至主机资源权重排名中最低的主机中，或挂起虚拟机后使用冷迁移资源。
于本发明的一个或多个实施例当中，在步骤6的虚拟机调度前，先行校验虚拟机与集群主机的CPU兼容性和剩余资源是否满足虚拟机的迁移需求。
于本发明的一个或多个实施例当中，当虚拟机与集群主机的CPU不能兼容性，或者是虚拟机与集群主机的剩余资源不能满足虚拟机的迁移需求时，将迁移目标转向主机资源权重排名中次最低的主机；依此类推，直到匹配到合适的主机。
于本发明的一个或多个实施例当中，所述步骤3中N取值为30。
本发明的有益效果是：通过获取多集群的主机信息和虚拟机信息，完成对集群主机中虚拟机的资源调度，其适用于多主机集群的复杂环境，可通过获取多个主机集群信息和虚拟机信息完成资源调度，克服现有技术只针对单个主机集群所做的资源调度分配，局限性较大的缺陷；而且本发明自动设置资源最不常用的时间为调度时间，尽量少影响用户的正常使用。
附图说明
图1为资源调度方法的流程图。
具体实施方式
如下结合附图1对本申请方案作进一步描述：
一种基于vSphere的智能资源调度方法，其包括以下步骤：
步骤1，设置虚拟机数量的阈值和权重，以及若干个资源参数的阈值和权重；所述资源参数包括主机CPU占用率、主机内存占用率、主机磁盘利用率；例如，阈值统一为90％，权重占比统一为0.25。
步骤2，获取集群内各个主机的资源使用率和虚拟机数量，并且检验各主机的资源使用率是否超过步骤1所设置的阈值，对已超过阈值的主机添加到资源超额的列表内保存；
步骤3，统计各个集群内主机最近30天内的24小时性能使用报告，其中包含CPU和内存的使用情况，分析得出主机资源最不常用时间段，将其设置为虚拟机调度时间；
步骤4，按权重公式排序各个集群内各个主机的权重顺序，得主机的资源权重排名列表，所述权重公式为：主机的权重值＝CPU利用率*权重+内存占用率*权重+磁盘利用率*权重+虚拟机数量*权重；
步骤5，从步骤2中资源超额的列表中获取已过阈值的主机，通过步骤4的权重公式获取虚拟机的权重排名，将排名最高的虚拟机存放到需调度的虚拟机列表；
步骤6，在所述虚拟机调度时间内，使用vMotion迁移至主机资源权重排名中最低的主机中，或挂起虚拟机后使用冷迁移资源。在步骤6的虚拟机调度前，先行校验虚拟机与集群主机的CPU兼容性和剩余资源是否满足虚拟机的迁移需求。当虚拟机与集群主机的CPU不能兼容性，或者是虚拟机与集群主机的剩余资源不能满足虚拟机的迁移需求时，将迁移目标转向主机资源权重排名中次最低的主机；依此类推，直到匹配到合适的主机。
本发明通过获取多集群的主机信息和虚拟机信息，完成对集群主机中虚拟机的资源调度，其适用于多主机集群的复杂环境，可通过获取多个主机集群信息和虚拟机信息完成资源调度，克服现有技术只针对单个主机集群所做的资源调度分配，局限性较大的缺陷；而且本发明自动设置资源最不常用的时间为调度时间，尽量少影响用户的正常使用。
上述优选实施方式应视为本申请方案实施方式的举例说明，凡与本申请方案雷同、近似或以此为基础作出的技术推演、替换、改进等，均应视为本专利的保护范围。

Claims (4)

1.一种基于vSphere的智能资源调度方法，其特征在于，包括以下步骤：
步骤1，设置虚拟机数量的阈值和权重，以及若干个资源参数的阈值和权重；所述资源参数包括主机CPU占用率、主机内存占用率、主机磁盘利用率；
步骤2，获取集群内各个主机的资源使用率和虚拟机数量，并且检验各主机的资源使用率是否超过步骤1所设置的阈值，对已超过阈值的主机添加到资源超额的列表内保存；
步骤3，统计各个集群内主机最近N天内的24小时性能使用报告，其中包含CPU和内存的使用情况，分析得出主机资源最不常用时间段，将其设置为虚拟机调度时间；
步骤4，按权重公式排序各个集群内各个主机的权重顺序，得主机的资源权重排名列表，所述权重公式为：主机的权重值＝CPU利用率*权重+内存占用率*权重+磁盘利用率*权重+虚拟机数量*权重；
步骤5，从步骤2中资源超额的列表中获取已过阈值的主机，通过步骤4的权重公式获取虚拟机的权重排名，将排名最高的虚拟机存放到需调度的虚拟机列表；
步骤6，在所述虚拟机调度时间内，使用vMotion迁移至主机资源权重排名中最低的主机中，或挂起虚拟机后使用冷迁移资源。
2.根据权利要求1所述的基于vSphere的智能资源调度方法，其特征在于：在步骤6的虚拟机调度前，先行校验虚拟机与集群主机的CPU兼容性和剩余资源是否满足虚拟机的迁移需求。
3.根据权利要求2所述的基于vSphere的智能资源调度方法，其特征在于：当虚拟机与集群主机的CPU不能兼容性，或者是虚拟机与集群主机的剩余资源不能满足虚拟机的迁移需求时，将迁移目标转向主机资源权重排名中次最低的主机；依此类推，直到匹配到合适的主机。
4.根据权利要求1所述的基于vSphere的智能资源调度方法，其特征在于：所述步骤3中N取值为30。
CN202011315639.0A 2020-11-21 2020-11-21 一种基于vSphere的智能资源调度方法 Active CN112416520B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011315639.0A CN112416520B (zh) 2020-11-21 2020-11-21 一种基于vSphere的智能资源调度方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011315639.0A CN112416520B (zh) 2020-11-21 2020-11-21 一种基于vSphere的智能资源调度方法

Publications (2)

Publication Number Publication Date
CN112416520A true CN112416520A (zh) 2021-02-26
CN112416520B CN112416520B (zh) 2023-10-13

Family

ID=74778250

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011315639.0A Active CN112416520B (zh) 2020-11-21 2020-11-21 一种基于vSphere的智能资源调度方法

Country Status (1)

Country Link
CN (1) CN112416520B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113407355A (zh) * 2021-08-19 2021-09-17 苏州浪潮智能科技有限公司 一种集群中进程协作的方法、系统、设备和存储介质
CN116149798A (zh) * 2023-04-13 2023-05-23 北京中电德瑞电子科技有限公司 云操作系统的虚拟机控制方法、装置以及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102447609A (zh) * 2010-09-30 2012-05-09 中国移动通信集团公司 一种虚拟化资源系统中虚拟节点的部署方法及装置
CN102681899A (zh) * 2011-03-14 2012-09-19 金剑 云计算服务平台的虚拟计算资源动态管理系统
CN103617076A (zh) * 2013-10-31 2014-03-05 中兴通讯股份有限公司 一种虚拟化资源的调度方法和系统及服务端
US20160378564A1 (en) * 2015-06-27 2016-12-29 Vmware, Inc. Virtual resource scheduling for containers without migration
WO2018177042A1 (zh) * 2017-03-27 2018-10-04 中兴通讯股份有限公司 一种实现资源调度的方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102447609A (zh) * 2010-09-30 2012-05-09 中国移动通信集团公司 一种虚拟化资源系统中虚拟节点的部署方法及装置
CN102681899A (zh) * 2011-03-14 2012-09-19 金剑 云计算服务平台的虚拟计算资源动态管理系统
CN103617076A (zh) * 2013-10-31 2014-03-05 中兴通讯股份有限公司 一种虚拟化资源的调度方法和系统及服务端
US20160378564A1 (en) * 2015-06-27 2016-12-29 Vmware, Inc. Virtual resource scheduling for containers without migration
WO2018177042A1 (zh) * 2017-03-27 2018-10-04 中兴通讯股份有限公司 一种实现资源调度的方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113407355A (zh) * 2021-08-19 2021-09-17 苏州浪潮智能科技有限公司 一种集群中进程协作的方法、系统、设备和存储介质
CN116149798A (zh) * 2023-04-13 2023-05-23 北京中电德瑞电子科技有限公司 云操作系统的虚拟机控制方法、装置以及存储介质

Also Published As

Publication number Publication date
CN112416520B (zh) 2023-10-13

Similar Documents

Publication Publication Date Title
US20220027189A1 (en) System and Method for Optimizing Placements of Virtual Machines on Hypervisor Hosts
US9542223B2 (en) Scheduling jobs in a cluster by constructing multiple subclusters based on entry and exit rules
US20170244784A1 (en) Method and system for multi-tenant resource distribution
CN112416520B (zh) 一种基于vSphere的智能资源调度方法
CN104239154B (zh) 一种Hadoop集群中的作业调度方法和作业调度器
CN109101320B (zh) 异构处理器平台融合管理系统
US10949368B2 (en) Input/output command rebalancing in a virtualized computer system
Pongsakorn et al. Container rebalancing: Towards proactive linux containers placement optimization in a data center
CN113342477B (zh) 一种容器组部署方法、装置、设备及存储介质
US8539495B2 (en) Recording medium storing therein a dynamic job scheduling program, job scheduling apparatus, and job scheduling method
CN108427602B (zh) 一种分布式计算任务的协同调度方法及装置
CN111190691A (zh) 适用于虚拟机的自动迁移方法、系统、装置及存储介质
Delavar et al. A synthetic heuristic algorithm for independent task scheduling in cloud systems
CN104917839A (zh) 一种用于云计算环境下的负载均衡方法
CN114968566A (zh) 一种面向共享式gpu集群下的容器调度方法及装置
CN114911613A (zh) 一种云际计算环境中跨集群资源高可用调度方法及系统
CN114968565A (zh) 资源管理方法、装置、电子设备、存储介质及服务器
Shu-Jun et al. Optimization and research of hadoop platform based on fifo scheduler
WO2013190649A1 (ja) 仮想ディスクのマイグレーションに関する情報処理方法及び装置
CN105930202B (zh) 一种三阈值的虚拟机迁移方法
CN106020971B (zh) 云主机系统中的cpu调度方法及装置
Ramezani et al. Task Scheduling in cloud environments: a survey of population‐based evolutionary algorithms
CN117112199A (zh) 一种多租户资源调度方法、装置及存储介质
CN113778627B (zh) 一种创建云资源的调度方法
CN116244085A (zh) Kubernetes集群容器组调度方法、装置及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant