CN105100184A - 虚拟机的可靠且确定的实时迁移 - Google Patents

虚拟机的可靠且确定的实时迁移 Download PDF

Info

Publication number
CN105100184A
CN105100184A CN201510183053.6A CN201510183053A CN105100184A CN 105100184 A CN105100184 A CN 105100184A CN 201510183053 A CN201510183053 A CN 201510183053A CN 105100184 A CN105100184 A CN 105100184A
Authority
CN
China
Prior art keywords
computing node
virtual machine
resource
migration
platform resource
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510183053.6A
Other languages
English (en)
Other versions
CN105100184B (zh
Inventor
K.贾布萨斯亚纳拉亚纳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Intel Corp
Original Assignee
Intel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Intel Corp filed Critical Intel Corp
Publication of CN105100184A publication Critical patent/CN105100184A/zh
Application granted granted Critical
Publication of CN105100184B publication Critical patent/CN105100184B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485—Task life-cycle, e.g. stopping, restarting, resuming execution
    • G06F9/4856—Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485—Task life-cycle, e.g. stopping, restarting, resuming execution
    • G06F9/4856—Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration
    • G06F9/4862—Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration the task being a mobile agent, i.e. specifically designed to migrate
    • G06F9/4875—Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration the task being a mobile agent, i.e. specifically designed to migrate with migration policy, e.g. auction, contract negotiation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/5055—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering software capabilities, i.e. software resources associated or available to the machine
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5083—Techniques for rebalancing the load in a distributed system
    • G06F9/5088—Techniques for rebalancing the load in a distributed system involving task migration
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/4557—Distribution of virtual machine instances; Migration and load balancing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/48—Indexing scheme relating to G06F9/48
    • G06F2209/485—Resource constraint
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2209/00—Indexing scheme relating to G06F9/00
    • G06F2209/50—Indexing scheme relating to G06F9/50
    • G06F2209/503—Resource availability

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Debugging And Monitoring (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明名称为“虚拟机的可靠且确定的实时迁移”。用于实时虚拟机迁移的技术包括多个计算节点和数据中心管理器。数据中心管理器向源计算节点发出使虚拟机迁移的请求。该请求包括服务级要求,例如最大迁移时间或停工期。源计算节点确定在服务级要求内执行迁移所需要的平台资源并持续预测迁移时间地预留平台资源。源计算节点将虚拟机状态传输到目的地计算节点并在完成传输后释放平台资源。源计算节点可使用硬件资源监视器或预留管理器来确定可用平台资源并预留平台资源用于专门使用。如果足够的平台资源不可用,源计算节点可与数据中心管理器协商降低服务级要求。描述且要求保护其他实施例。

Description

虚拟机的可靠且确定的实时迁移
背景技术
数据中心越来越依靠虚拟化来向客户交付服务。典型的数据中心可包括密集填充的计算服务器集群（叫作节点），其中每个节点潜在地执行许多虚拟机。典型地，每个节点包括管理程序或其他虚拟化框架，并且整个数据中心包括一个或多个数据中心管理器，其管理特定计算节点上的虚拟机的例示。虚拟机可通过使虚拟机的完整状态从源节点传输到目的地节点而在节点之间传输或“迁移”。虚拟机迁移可“实时”执行，即，在不中断虚拟机的状态并且对提供的服务具有最小扰乱的情况下。然而，典型的虚拟化数据中心可未对虚拟机迁移提供时间关键或高可用性保证。从而，虚拟机迁移在虚拟机不可用时典型地引起一定的停工期，并且该停工期可根据虚拟机大小、虚拟机负载、网络业务和可能无法预测的其他因素而变化。
电信网络功能越来越多地合并到网络数据中心。例如，在历史上分布在许多手机信号塔之间的蜂窝基站功能现在可合并到虚拟化网络数据中心。然而，电信网络典型地具有极高的可靠性要求。因此，虚拟机的典型实时迁移一贯地在实现对于电信网络功能的可靠性要求方面有困难。
附图说明
本文描述的概念通过示例而非限制的方式在附图中图示。为了图示的简单和清楚起见，在图中图示的元件不一定按比例绘制。在认为适当的地方，标号在图之中重复来指示对应或类似元件。
图1是对于实时（live）虚拟机迁移的系统的至少一个实施例的简化框图；
图2是图示可由图1的系统实现的模拟结果的图表；
图3是可由图1的系统建立的各种环境的至少一个实施例的简化框图；
图4是可由图1和3的系统的计算节点执行的用于实时虚拟机迁移的方法的至少一个实施例的简化流程图；
图5是可由图1和3的系统的计算节点执行的用于传送虚拟机页面的方法的至少一个实施例的简化流程图；
图6是可由图1和3的系统的计算节点执行的用于接收虚拟机页面的方法的至少一个实施例的简化流程图；
图7是可由图1和3的系统的计算节点执行的用于协商服务级要求的方法的至少一个实施例的简化流程图；
图8是可由图1和3的系统的数据中心管理器执行的用于协商服务级要求的方法的至少一个实施例的简化流程图。
具体实施方式
尽管本公开的概念易受各种修改和备选形式影响，其特定示范性实施例已通过图中的示例示出并且将在本文详细描述。然而应该理解没有将本公开的概念限制于公开的特别形式的意图，而相反，意图是要涵盖所有与本公开和附上的权利要求一致的所有修改、等同物和备选项。
在说明书中对“一个实施例”、“实施例”、“说明性实施例”等的引用指示描述的实施例可包括特定特征、结构或特性，但每个实施例可包括或可不一定包括该特定特征、结构或特性。此外，这样的短语不一定指相同的实施例。此外，当特定特征、结构或特性连同实施例描述时，认为连同其他无论是否明确描述的实施例实现这样的特征、结构或特性，这在本领域内技术人员的知识内。另外，应意识到采用“A、B和C中的至少一个”形式包括在列表中的项可以意指（A）；（B）；（C）：（A和B）；（A和C）；（B和C）；或（A、B和C）。相似地，采用“A、B或C中的至少一个”形式列出的项可以意指（A）；（B）；（C）：（A和B）；（A和C）；（B和C）；或（A、B和C）。
公开的实施例在一些情况下可采用硬件、固件、软件或其任何组合来实现。公开的实施例还可实现为由一个或多个暂时性或非暂时性机器可读（例如，计算机可读）存储介质携带或在其上存储的指令，这些指令可由一个或多个处理器读取并且执行。机器可读存储介质可体现为用于采用机器可读的形式存储或传送信息的任何存储设备、机构或其他物理结构（例如，易失性或非易失性存储器、媒体盘或其他媒体设备）。
在图中，一些结构或方法特征可采用特定设置和/或排序示出。然而，应意识到可不需要这样的特定设置和/或排序。相反，在一些实施例中，这样的特征可采用与在说明性图中示出的不同的方式和/或顺序设置。另外，在特定图中包括结构或方法特征并不意在暗指在所有实施例中需要这样的特征，并且在一些实施例中，可不包括这样的特征或其可与其他特征组合。
现在参考图1，在说明性实施例中，对于实时虚拟机器迁移的系统100包括通过网络106通信的许多计算节点102和数据中心管理器104。在使用中，如在下文更详细论述的，每个计算节点102可例示一个或多个虚拟机来执行计算任务。数据中心管理器104可指示源计算节点102使虚拟机迁移到目的地计算节点102，从而规定特定需要的服务级（例如，最大停工期、总迁移时间或网络带宽使用）。源计算节点102确定实现规定服务级所需要的平台资源以及那些需要的平台资源是否可用。如果需要的平台资源可用，源计算节点102预留那些资源并且使用预留资源来进行迁移。如果需要的平台资源不可用，源计算节点102可确定可实现的服务级并且与数据中心管理器104协商是否使用减少但可实现的服务级来继续迁移。确定需要的资源并且预留那些资源可提高虚拟机迁移的可靠性和性能，特别是对于大的虚拟机或具有高存储器负载的虚拟机。另外，停工期和/或迁移的总迁移时间的确定性可提高；即，实际停工期和/或总迁移时间可更加可预测。另外，数据中心管理器104可基于从计算节点102接收的关于规定的服务级是否可实现的信息来开发改进的迁移计划，例如以基于功耗、计算负载、地理位点或用别的方式来分配计算任务。从而，实时虚拟机迁移的提高的可靠性、性能和确定性可提高电信网络工作负载的虚拟化技术方案的适宜性。
现在参考图2，图表200图示可使用系统100实现的模拟实验结果。曲线图202图示以秒计的总虚拟机迁移时间，并且曲线图204图示以毫秒计的虚拟机停工期。两个曲线图202、204中的第一数据点图示使用QEMU 1.6.0的虚拟机传输的模拟结果，其是典型的开放源机器仿真器和虚拟器。如在图表200中示出的，典型的虚拟器可实现69.11秒的总迁移时间和489毫秒的停工期，从而给出每秒120000个页面的脏页率（其指示虚拟机的存储器负载）。两个曲线图202、204中的第二数据点图示使用QEMU 1.6.0的打补丁版本（其体现本文公开的技术中的一些）的虚拟机传输的模拟结果。如在图表200中示出的，打补丁虚拟器可实现41.66秒的总迁移时间和472毫秒的停工期，从而给出每秒400100个页面的脏页率。从而，在图表200中示出的结果图示系统100可减少总迁移时间和停工期同时处理高得多的存储器负载（即，超过三倍的较大负载）。包括如本文描述的硬件支持的系统100的实施例可在性能、确定性和/或可靠性方面提供额外提高。
返回参考图1，每个计算节点102可体现为能够执行本文描述的功能的任何类型的计算或计算机设备，其无限制地包括计算机、微处理器系统、服务器、机架式服务器、刀片式服务器、便携式计算机、笔记本计算机、网络家电、web家电、分布式计算系统、基于处理器的系统和/或消费者电子设备。如在图1中示出的，每个计算节点102说明性地包括两个处理器120、输入/输出子系统128、存储器134、数据存储设备136和通信电路138。当然，在其他实施例中，计算节点102可包括其他或额外部件，例如通常在服务器设备（例如，各种输入/输出设备）中找到的那些。另外，在一些实施例中，说明性部件中的一个或多个可包含在另一个部件中或用别的方式形成另一个部件的一部分。例如，在一些实施例中，存储器134或其的部分可包含在一个或多个处理器120中。
每个处理器120可体现为能够执行本文描述的功能的任何类型的处理器。每个说明性处理器120是多核处理器，然而在其他实施例中，每个处理器120可体现为单个或多核处理器、数字信号处理器、微控制器或其他处理器或处理/控制电路。每个处理器120说明性地包括四个处理器核122、资源监视器124和预留管理器126。处理器核122中的每个是能够执行编程指令的独立处理单元。尽管说明性计算节点102中的每个包括两个处理器120，其具有四个处理器核122；在其他实施例中，每个计算节点102可包括一个、两个或以上处理器120，其每个具有一个、两个或以上处理器核122。特别地，本文公开的技术也能适用于单处理器或单核计算节点102。
资源监视器124可体现为能够提供关于处理器120和/或计算节点102对平台资源利用的准确、实时信息的任何硬件部件。例如，资源监视器124可提供关于处理器120和/或处理器核122的计算或其他执行资源的使用、存储器134的使用或I/O使用（例如通信电路138的使用）的信息。预留管理器126可体现为能够为了使用特定软件上下文（例如，进程或线程）而持续规定时段地专门预留处理器120和/或计算节点102的一个或多个平台资源的任何硬件部件。一旦被预留，特定平台资源可未被被计算节点102的其他软件上下文（其包括计算节点102的任何操作系统、虚拟机监视器或管理程序）抢占、争夺或用别的方式使用。例如，预留管理器126可为了使用特定软件上下文而预留处理器核122中的一个或多个。在被预留时，那些处理器核122可未被其他软件上下文中断、抢占或用别的方式使用。作为另一个示例，预留管理器126可预留存储器134的特定页面，其可未调出到盘或用别的方式被干扰，或预留可能不减少的特定I/O带宽量。尽管说明性处理器120包括资源监视器124和预留管理器126，在其他实施例中，处理器120可不包括对那些功能的硬件支持。例如，处理器120可体现为典型的服务器、台式机或移动处理器120。
存储器134可体现为能够执行本文描述的功能的任何类型的易失性或非易失性存储器或数据存储。在操作中，存储器134可存储在计算节点102的操作期间使用的各种数据和软件，例如操作系统、应用、程序、库和驱动器。存储器134经由I/O子系统128通信地耦合于处理器120，该I/O子系统128可体现为用于促进处理器120、存储器134和计算节点102的其他部件的输入/输出操作的电路和/或部件。例如，I/O子系统128可体现为或用别的方式包括存储器控制器集线器、输入/输出控制集线器、固件设备、通信链路（即，点到点链路、总线链路、线、电缆、光导、印刷电路板迹线，等）和/或用于促进输入/输出操作的其他部件和子系统。在一些实施例中，I/O子系统128可形成片上系统（SoC）的一部分并且连同处理器120、存储器134和计算节点102的其他部件一起包含在单个集成电路芯片上。
说明性I/O子系统128进一步包括资源监视器130和预留管理器132。那些部件执行分别与处理器120的资源监视器124和预留管理器126相似的功能，其的描述能适用于I/O子系统128的对应部件并且在本文未被重复以便不掩盖本公开。另外或备选地，在一些实施例中，资源监视器130和/或预留管理器132可监视和/或预留与处理器120的那些部件不同的平台资源。例如，I/O子系统128的部件可监视并且预留存储器134和/或I/O资源，例如通信电路138的带宽。而且，在一些实施例中，I/O子系统128可包括一个或多个专用资源监视器130和/或预留管理器132，其专用于计算设备100的特定子系统，例如存储器子系统。与处理器120相似，在一些实施例中，I/O子系统128可不包括对那些功能的硬件支持。例如，I/O子系统128可体现为典型的服务器、台式机或移动芯片集。
数据存储设备136可体现为为了数据的短期或长期存储而配置的任何类型的设备或多个设备，例如，存储器设备或电路、存储卡、硬盘驱动、固态驱动或其他数据存储设备。数据存储设备136可用于存储虚拟机应用或用作虚拟机存储器页面的后备储存。
计算节点102的通信电路138可体现为能够通过网络106在计算节点102、数据中心管理器104和/或其他远程设备之间实现通信的任何通信电路、设备或其集合。通信电路138可配置成使用任何一个或多个通信技术（例如，有线或无线通信）和关联的协议（例如，以太网、Bluetooth®、Wi-Fi®、WiMAX，等）来实施这样的通信。在一些实施例中，通信电路138可包括用于加速或卸载来自计算节点102的其他部件的网络功能性的专用硬件。例如，在一些实施例中，通信电路138可包括对网络业务的硬件加速压缩的支持。
数据中心管理器104配置成管理在系统100的计算节点102之间分布的虚拟机或其他计算实例。数据中心管理器104可体现为能够执行本文描述的功能的任何类型的服务器计算设备或多个设备的集合。如此，数据中心管理器104可体现为单个服务器计算设备或服务器和关联设备的集合。例如，在一些实施例中，数据中心管理器104可体现为由跨网络106分布并且在公共或私有云中操作的多个计算设备形成的“虚拟服务器”。因此，尽管数据中心管理器104在图1中图示为体现为单个服务器计算设备，应意识到数据中心管理器104可体现为一起合作来促进下文描述的功能性的多个设备。说明性地，数据中心管理器104包括处理器140、I/O子系统142、存储器144、数据存储设备146、通信电路148和/或通常在服务器或相似计算设备中找到的其他部件和设备。数据中心管理器104的那些个体部件可与计算节点102的对应部件相似，其的描述能适用于数据中心管理器104的对应部件并且在本文未被重复以便不掩盖本公开。
如在下文更详细论述的，计算节点102和数据中心管理器104可配置成通过网络106彼此和/或与系统100的其他设备传送和接收数据。网络106可体现为任何数量的各种有线和/或无线网络。例如，网络106可体现为或用别的方式包括有线或无线局域网（LAN）、有线或无线广域网（WAN）、蜂窝网络和/或公共可访问的全局网络（例如因特网）。如此，网络106可包括任何数量的额外设备，例如额外计算机、路由器和交换机，用于促进系统100的设备之间的通信。
现在参考图3，在说明性实施例中，计算节点102a在操作期间建立环境300。说明性环境300包括虚拟机监视器302、服务级管理模块308和资源管理模块310。环境300的各种模块可体现为硬件、固件、软件或其组合。
虚拟机监视器302可体现为任何虚拟机监视器、管理程序、通用处理系统、专用操作系统或允许在计算节点102a上执行虚拟化工作负载的其他部件。虚拟机监视器302可进一步包括虚拟机迁移模块304和一个或多个虚拟机306。
虚拟机迁移模块304配置成从数据中心管理器104接收使虚拟机306从计算节点102a（“源”计算节点102a）迁移到“目的地”计算节点102b的请求。该请求还可对迁移规定服务级要求，例如最大停工期和/或最大总迁移时间。如在下文进一步描述的，虚拟机迁移模块304进一步配置成使用源计算节点102a的预留平台资源将请求虚拟机306传输到目的地计算节点102b。在一些实施例中，如果初始请求的服务级要求使用当前可用平台资源而不可实现，虚拟机迁移模块304可进一步配置成与数据中心管理器104协商降低服务级要求。
每个虚拟机306配置成在源计算节点102a上执行计算工作负载，例如网络功能虚拟化（NFV）工作负载。每个虚拟机306限定当前状态，其包括例如当前虚拟存储器状态、当前虚拟处理器状态和/或当前虚拟、仿真或半虚拟化设备状态。每个虚拟机306的状态可体现为存储器134内的许多存储器页面。从而，虚拟机306可通过将那些存储器页面传输到目的地计算节点102b而迁移到目的地计算节点102b。如下文描述的，虚拟机306可由数据中心管理器104例示、迁移和用别的方式管理。
服务级管理模块308配置成确定在请求的服务级要求内需要哪些平台资源来使虚拟机306迁移到目的地计算节点102b。在一些实施例中，服务级管理模块308进一步配置成基于源计算节点102a的当前可用平台资源来确定什么服务级可实现。如在下文进一步描述的，平台资源可体现为源计算节点102a的任何硬件、软件或I/O资源，其可用于执行虚拟机306迁移过程。平台过程可包括例如处理器资源、存储器资源或I/O资源，例如网络带宽。
资源管理模块310配置成确定在请求的服务级要求内使虚拟机306迁移到目的地计算节点102b所需要的平台资源对于源计算节点102a是否可用。资源管理模块310可使用例如操作系统或虚拟机监视器302等软件或使用例如性能计数器或资源监视器124、130等硬件来监视平台资源的使用。资源管理模块310进一步配置成为虚拟机迁移模块304预留平台资源来使虚拟机306迁移。资源管理模块310可持续有限时间（例如预测的总迁移时间）地预留平台资源。资源管理模块310可使用例如操作系统或虚拟机监视器302等软件或使用例如预留管理器126、132等硬件来预留平台资源。
仍参考图3，在说明性实施例中，目的地计算节点102b在操作期间建立环境320。说明性环境320包括虚拟机监视器302，其包括虚拟机迁移模块304和许多虚拟机306。环境320的各种模块可体现为硬件、固件、软件或其组合。
虚拟机监视器302与源计算节点102a的虚拟机监视器相似，并且从而可体现为任何虚拟机监视器、管理程序、通用操作系统、专用操作系统或允许在目的地计算节点102b上执行虚拟化工作负载的其他部件。相似地，虚拟机迁移模块304与源计算节点102a的虚拟机迁移模块304相似并且从而配置成从源计算节点102a接收虚拟机306。如上文描述的，虚拟机306中的每个配置成在目的地计算节点102b上执行计算工作负载。在从源计算节点102a接收虚拟机306的状态后，目的地计算节点102b恢复虚拟机306，从而完成迁移。
仍参考图3，在说明性实施例中，数据中心管理器104在操作期间建立环境340。说明性环境340包括虚拟机调度器模块342和服务级协商模块344。环境340的各种模块可体现为硬件、固件、软件或其组合。
虚拟机调度器模块342配置成调度虚拟机306以供在系统100的各种计算节点102上执行。特别地，虚拟机调度器模块342配置成发出使虚拟机306从源计算节点102a迁移到目的地计算节点102b的请求。使虚拟机306迁移的请求可包括要由源计算节点102a实现的服务级要求。虚拟机调度器模块342可基于来自任何合适的源的命令生成虚拟机306迁移请求。例如，虚拟机调度器模块342可通过基于web的控制接口、命令行接口或任何其他合适的接口接收来自系统管理员的命令。作为另一个示例，在一些实施例中，虚拟机调度器模块342可基于对计算服务的需求接收和/或生成使虚拟机306迁移的命令，例如以根据功耗、负载或地理来平衡工作负载。
服务级协商模块344配置成响应于源计算节点102a不能实现请求的服务级而从源计算节点102a接收可实现的服务级。作为响应，服务级协商模块344配置成确定可实现的服务级是否可接受并且将指示是否继续虚拟机306迁移的合适的响应传送到源计算节点102a。例如，源计算节点102a可在足够的平台资源不可用于满足请求的服务器要求时指示可实现的服务级。服务级协商模块344可应用任何标准来确定可实现的服务级是否可接受，其包括提示用户批准。
现在参考图4，在使用中，源计算节点102a可执行方法400用于使虚拟机306迁移。该方法400以框402开始，其中元计算节点102a确定它是否从数据中心管理器104接收迁移请求。如果否的话，方法400循环回到块402来继续监视迁移请求。如果接收迁移请求，方法400前进到框404。
在框404中，源计算节点102a从数据中心管理器104接收对虚拟机迁移的请求。对虚拟机迁移的请求可规定要迁移的虚拟机306、目的地计算节点102b以及对迁移的一个或多个服务级要求。这些服务级要求可在使虚拟机306迁移到目的地计算节点102b时规定要实现的任何极限、阈值、度规或其他性能和/或可靠性度量。在一些实施例中，在框406中，源计算节点102a可按请求接收停工期要求。停工期要求可规定虚拟机306在迁移期间要中止或用别的方式不可用的最大时间。例如，在一些电信网络功能虚拟化（NFV）工作负载中，停工期要求可表达为许多微秒或毫秒。在一些实施例中，在框408中，源计算节点102a可接收迁移时间要求。该迁移时间要求可规定最大总迁移时间，即，在接收对迁移的请求与在目的地计算节点102b上激活虚拟机306之间的最大时间。
在框410中，源计算节点102a使虚拟机306为迁移做准备。源计算节点102a可执行使虚拟机306迁移所需要的任何任务。例如，源计算节点102a可确定通过网络106是否可到达目的地计算节点102b、目的地计算节点102b是否能够接收虚拟机306，或执行其他兼容性检查。在框412中，源计算节点102a识别要传输到目的地计算节点102b的存储器134的页面。要传输的存储器页面可包括这样的存储器页面，其对应于虚拟机306的存储器状态；虚拟机306的虚拟化、仿真或半虚拟化设备状态；虚拟机306的虚拟处理器状态，其包括虚拟寄存器状态和虚拟处理器标志；或对应于虚拟机306的当前状态的任何其他存储器页面。
在框414中，源计算节点102a确定在规定服务级要求内完成虚拟机306迁移所需要的平台资源。完成虚拟机306迁移所需要的平台资源可取决于要传输的存储器页面的数量、要在存储器页面上执行的任何数据压缩或其他处理或影响传输虚拟机306的计算、存储或通信复杂性的任何其他因素。在一些实施例中，在框416中，源计算节点102a可确定完成虚拟机306迁移所需要的处理器120资源。例如，在一些实施例中，源计算节点102a可确定需要整个处理器120或处理器核122（即，百分之百CPU利用率）来完成虚拟机306迁移。在框418中，源计算节点102a可确定完成虚拟机306迁移所需要的存储器134资源。例如，在一些实施例中，源计算节点102a可确定在存储器134中需要比要传输的所有存储器页面更大的空间来完成虚拟机306迁移。在一些实施例中，在框420中，源计算节点102a可确定完成虚拟机306迁移所需要的I/O资源。例如，源计算节点102a可确定用于完成传输所需要的网络带宽。另外或备选地，源计算节点102a可确定是否需要特定I/O硬件功能。例如，源计算节点102a可确定是否需要对网络业务的硬件加速压缩的支持。
在框422中，源计算节点102a确定哪些平台资源当前对源计算节点102a可用。如上文描述的，平台资源可包括处理器120资源、存储器134资源或I/O资源。源计算节点102a可使用用于确定可用平台资源的任何方法，其包括处理器120的硬件性能计数器或性能监视单元（PMU），或基于操作系统或管理程序的硬件监视子系统，例如穿孔（perf）子系统。减少延迟和/或提高性能测量的准确性可提高虚拟机306迁移过程的可靠性和/或确定性。在一些实施例中，在框424中，源计算节点102a可从处理器120的资源监视器124和/或I/O子系统128的资源监视器130检索关于当前可用平台资源的瞬时数据。与传统PMU或软件资源监视子系统不同，资源监视器124、130可以减少的时移提供关于当前可用平台资源的实时、准确的信息。另外，资源监视器124、130可提供关于可能未被传统系统监视的存储器134资源和I/O资源的实时信息。
在框426中，源计算节点102a确定在请求的服务级要求内足够的平台资源当前是否可用于执行虚拟机306迁移。源计算节点102a可例如将确定的所需平台资源（如在上文在框414中描述的）与确定的当前可用平台资源（如在上文在框422中描述的）比较。如果足够的平台资源当前可用，方法400提前分叉到框430（下文描述的）。如果足够的平台资源当前不可用，方法400前进到框428。
如果足够的平台资源当前不可用，在框428中，源计算节点102a与数据中心管理器104协商降低服务级要求。源计算节点102a可就可使用可用平台资源实现的降低的服务级要求进行成功协商。源计算节点102a可基于当前可用平台资源确定可实现的服务级，从而基本上使在上文描述的响应于框414的计算反向。备选地，如果无法与数据中心管理器104达成关于降低服务级要求的协议，源计算节点102a可取消虚拟机306迁移。服务级要求的协商在下文连同图7和8进一步论述。
在确定需要的平台资源可用或用别的方式协商降低服务级要求之后，在框430中，源计算节点102a持续预测迁移时间地预留平台资源。源计算节点102a可预留在上文连同框414确定的所需平台资源，或在上文连同框428描述的协商平台资源。预测迁移时间可对应于能适用的服务级要求的最大总迁移时间，或可由源计算节点102a基于可用平台资源计算。预留平台资源使得那些平台资源不能专门或几乎不能专门被虚拟机306迁移过程所使用。例如，为了预留计算计算，源计算节点102a可对虚拟机306迁移过程设置处理器亲和性。作为另一个示例，为了预留存储器134资源，源计算节点102a可固定、连接特定存储器页面或用别的方式指定它们以保持驻存在存储器134中。然而，在一些实施例中，预留的平台资源仍可在某些情况下被中断或抢占（即，预留可以是“尽力而为”预留）。例如，即使虚拟机306迁移过程指定为仅仅是在特定处理器核122上执行的过程，虚拟机306迁移过程仍可被操作系统、虚拟机监视器302或源计算节点102a的其他控制过程中断或抢占。
备选地，在一些实施例中，在框432中，源计算节点102a可使用处理器120的预留管理器126和/或I/O子系统128的预留管理器132来专门预留平台资源。与基于操作系统或管理程序的资源预留不同，预留管理器126、132可持续规定时段地对虚拟机306迁移过程提供预留平台资源的排他、不间断控制。例如，虚拟机306迁移过程可在不被任何操作系统、虚拟机监视器302或管理程序中断或抢占的情况下排他地访问一个或多个处理器核122。相似地，可准许虚拟机306迁移过程排他地访问存储器134的一部分、通信电路138的一定数量的I/O带宽和/或特定I/O硬件功能。
在框434中，源计算节点102a使用预留平台资源将请求虚拟机306的虚拟机状态传输到目的地计算节点102b。为了这样做，源计算节点102a可迭代地将存储器页面传输到目的地计算节点102b，并且如必要的话，在完成传输之前重新传送存储器页面（“脏”页面）。源计算节点102a可将存储器页面分包并且压缩它们来减少传输时间并且执行完成传输所必需的任何其他处理。在完成虚拟机306状态的传输后，虚拟机306在源计算节点102a上停止并且在目的地计算节点102b上恢复。传输虚拟机306状态在下文连同图5和6进一步论述。
在传输虚拟机306状态后，在框434中，源计算节点102a释放预留的平台资源，如在上文在框430中描述的。在一些实施例中，源计算节点102a可根据情况使用硬件预留管理器126、132来释放平台资源。在释放预留资源后，方法400循环回到框402来等待另外的迁移请求。
现在参考图5，在使用中，源计算节点102a可执行方法500用于传输虚拟机状态。方法500可作为上文描述的方法400的一部分而被执行，例如作为框434的全部或部分。方法500以框502开始，其中源计算节点102a使用预留平台资源来优化要传输的存储器页面。源计算节点102a可对存储器页面执行任何处理、序列化、分包或其他算法来使它们为传送做准备。在框504中，源计算节点102a可压缩要传输的存储器页面。压缩存储器页面可以是高度资源密集的。如此，压缩存储器页面可从专用处理器120和/或处理器核122的使用或通信电路138的专用硬件加速压缩支持的使用中获益。
在框506中，源计算节点102a将存储器页面传输到目的地计算节点102b。源计算节点102a可使用用于识别、选择或跟踪要传输的存储器页面的任何技术。例如，源计算节点102a可迭代直通所有识别的存储器页面并且然后对脏页面重新迭代。不管怎样，在框508中，源计算节点102a确定是否完成存储器页面的传输。在源计算节点102a确定剩余存储器页面可在单个操作（即，“单发”传输）中传输到目的地计算节点102b时可完成传输。源计算节点102a可基于脏存储器页面的数量、存储器负载（例如，脏页率）或与传输存储器页面的剩余时间有关的任何其他因素的该确定。如果未完成传输，方法500循环回到框506来继续传输存储器页面。如果完成传输，方法500前进到框510。
在框510中，源计算节点102a中止虚拟机306。在中止虚拟机306后，虚拟机306未执行另外的工作，这意指可未产生新的脏存储器页面。另外，在中止虚拟机306后，虚拟机306可未提供另外的服务。从而，对于虚拟机306迁移的停工期时期在中止虚拟机306时开始。
在框512中，源计算节点102a使用预留平台资源将剩余脏存储器页面传输到目的地计算节点102b。如上文描述的，传输可在单个操作中进行。在一些实施例中，在框514中，源计算节点102a可在脏存储器页面传输之前压缩它们。例如，源计算节点102a可应用delta压缩来减少必须通过网络106传送的数据量。如上文描述的，源计算节点102a可使用专用处理器资源和/或I/O资源来进行压缩。
在框516中，源计算节点102a使用预留平台资源将剩余虚拟机306状态传输到目的地计算节点102b。例如，源计算节点102a可传输虚拟机306的虚拟处理器状态或虚拟化、仿真或半虚拟机设备状态。在传送虚拟机306状态后，完成方法500。源计算节点102a可释放预留资源并且完成虚拟机306迁移，如在上文连同图4描述的。
现在参考图6，在使用中，目的地计算节点102b可执行方法600用于接收虚拟机状态。方法600以框602开始，其中目的地计算节点102b确定是否接收使虚拟机306从源计算节点102a迁移到目的地计算节点102b的请求。该请求可源于源计算节点102a、数据中心管理器104或那些设备的任何组合。如果未接收请求，方法600循环回到框602来继续监视迁移请求。如果接收迁移请求，方法600前进到框604。
在框604中，目的地计算节点102b从源计算节点102a接收存储器页面。如上文描述的，接收的存储器页面可对应于虚拟机306的虚拟机状态、虚拟处理器状态和/或虚拟、仿真或半虚拟化设备状态。在接收存储器页面时，存储器页面可复制到存储器134内、被解压或用别的方式准备以供虚拟机306使用。在框606中，目的地计算节点102b确定存储器页面的传输是否完成。传输可基于从源计算节点102a接收的指示而完成。如果未完成传输，方法600循环回到框604来继续接收存储器页面。如果完成传输，方法600前进到框608。
在框608中，目的地计算节点102b从源计算节点102a接收剩余脏存储器页面。脏存储器页面的传送在上文连同图5的框512进一步描述。在框610中，目的地计算节点102b从源计算节点102a接收虚拟机306状态。虚拟机306状态的传送在上文连同图5的框516进一步描述。
在接收所有存储器页面和虚拟机306状态后，在612中，目的地计算节点102b恢复虚拟机306。在恢复后，虚拟机306全面运作并且能够服务于请求。从而，迁移停工期和总迁移时间在虚拟机306被目的地计算节点102b恢复后结束。在恢复虚拟机306后，方法600循环回到框602来等待另外的迁移请求。
现在参考图7，在使用中，源计算节点102a可执行方法700用于协商服务级要求。方法700可作为上文描述的方法400的一部分而被执行，例如作为框428的全部或部分。方法700以框702开始，其中源计算节点102a基于源计算节点102a的当前可用平台资源来确定可实现的服务级。例如，与计算节点102的当前可用平台资源（例如，当前可用处理器资源、存储器资源或I/O资源）相比，源计算节点102a可基于传输的存储器页面的数量、当前或估计存储器负载或控制使虚拟机306迁移所需要的处理量的其他因素来确定可实现的服务级。可实现的服务级可表达为性能和/或可靠性极限、阈值、度规或在使虚拟机306迁移时预测为可实现的其他度量的任何组合。在一些实施例中，在框704中，源计算节点102a可确定可实现的最大停工期。在一些实施例中，在框706中，计算节点102a可确定可实现的最大总迁移时间。
在框708中，源计算节点102a将可实现的服务级传输到数据中心管理器104。如在下文连同图8进一步描述的，数据中心管理器104可确定可实现的服务级是否可接受。在框710中，源计算节点102a从数据中心管理器104接收响应，其指示可实现的服务级是否可接受并且从而可以是肯定或否定的。在框712中，计算节点102a确定响应是否是肯定的。如果否的话，方法700分叉到框714，其中源计算节点102a取消虚拟机306迁移。在取消迁移后，可终止方法700、在上文连同图4描述的方法400或任何其他虚拟机306迁移过程。返回参考框712，如果来自数据中心管理器104的响应是肯定的，方法700前进到框716。
在框716中，源计算节点102a使虚拟机306在可实现的服务级内迁移。如在上文连同图5描述的，源计算节点102a可预留当前可用的平台资源以在可实现的服务级内执行虚拟机306迁移。虚拟机306迁移可如在上文连同图4-6描述的那样行进。
现在参考图8，在使用中，数据中心管理器104可执行方法800用于协商服务级要求。方法800以框802开始，其中数据中心管理器104确定它是否接收迁移请求。如果否的话，方法800循环回到框802来继续监视迁移请求。如果接收迁移请求，方法800前进到框804。
在框804中，数据中心管理器104接收对于虚拟机迁移的请求。该请求可从数据中心管理器104的用户（例如系统100的管理员）接收，或可在没有用户干预的情况下生成，例如通过数据中心管理器104的负载平衡过程。对虚拟机迁移的请求可规定要迁移的虚拟机306、源计算节点102a、目的地计算节点102b以及对迁移的一个或多个服务级要求。这些服务级要求可在使虚拟机306从源计算节点102a迁移到目的地计算节点102b时规定要实现的任何极限、阈值、度规或其他性能和/或可靠性度量。在一些实施例中，在框806中，数据中心管理器104可按请求接收停工期要求。停工期要求可规定虚拟机306在迁移期间要中止或用别的方式不可用的最大时间。例如，在一些电信网络功能虚拟化（NFV）工作负载中，停工期要求可表达为许多微秒或毫秒。在一些实施例中，在框808中，数据中心管理器104可接收迁移时间要求。该迁移时间要求可规定最大总迁移时间，即，在由源计算节点102a接收对迁移的请求在目的地计算节点102b上激活虚拟机306之间的最大时间。
在框810中，数据中心管理器104将虚拟机306迁移请求传输到源计算节点102a，其包括任何服务级要求。如在上文连同图4和7描述的，源计算节点102a可使用源计算节点102a的当前可用平台资源来确定服务级要求是否可实现。如果否的话，源计算节点102a可将可实现的服务级传送到数据中心管理器104。在框812中，数据中心管理器104监视来自源计算节点102a的响应。在框814中，数据中心管理器104确定是否接收响应。如果未接收响应，方法800循环回到框802来继续监视虚拟机迁移命令。在那些情况下，源计算节点102a可能够实现服务级要求并且可继续虚拟机迁移306迁移。返回参考框814，如果从源计算节点102a接收响应，方法800前进到框816。
在框816中，数据中心管理器104从源计算节点102a接收可实现的服务级。如上文描述的，可实现的服务级可表达为性能和/或可靠性极限、阈值、度规或在使虚拟机306迁移时预测为可实现的其他度量的任何组合。例如，可实现的服务级可包括最大停工期和/或最大总迁移时间。
在框818中，数据中心管理器104确定从源计算节点102a接收的可实现的服务级是否可接受。数据中心管理器104可使用任何标准来确定服务级是否可接受。可接受的服务级可取决于要迁移的特定虚拟机306的工作负载。例如，数据中心管理器104可确定可实现的服务级是否满足对电信网络功能虚拟化（NFV）工作负载、数据中心工作负载或其他合适的工作负载的要求。在一些实施例中，在框820中，数据中心管理器104可提示用户确定可实现的服务级是否可接受。
在框822中，数据中心管理器104将指示可实现的服务级是否可接受的响应传送到源计算节点102a。在框824中，数据中心管理器104基于可实现的服务是否可接受而分叉。如果可接受，方法800循环回到框802来继续监视虚拟机迁移命令。如果不可接受，方法800前进到框826。在框826中，数据中心管理器104取消虚拟机306从源计算节点102a到目的地计算节点102b的迁移。在取消虚拟机306迁移后，数据中心管理器104可在相同计算节点102或不同计算节点102上重新调度、重新提交或用别的方式重新进行迁移。另外或备选地，在一些情况下，数据中心管理器104可允许虚拟机306在当前计算节点102上继续而不迁移。在取消迁移后，方法800循环回到框802来继续监视额外迁移命令。
示例
本文公开的技术的说明性示例在下文提供。技术的实施例可包括下文描述的示例中的任何一个或多个和其任何组合。
示例1包括用于使虚拟机迁移的计算节点，该计算节点包括：虚拟机迁移模块，用于接收使虚拟机迁移到目的地计算节点的请求，其中该请求包括服务级要求；服务级管理模块，用于确定使虚拟机迁移并且满足服务级要求所需要的平台资源；和资源管理模块，用于（i）确定需要的平台资源对于计算节点是否当前可用以及（ii）响应于所需平台资源当前可用的确定来持续预测迁移时间地预留所需平台资源；其中虚拟机迁移模块进一步响应于所需平台资源的预留使用预留的平台资源来使虚拟机迁移到目的地计算节点。
示例2包括示例1的主题，并且进一步包括硬件资源监视器，其中确定所需平台资源当前是否可用包括询问硬件资源监视器。
示例3包括示例1和2中的任一个的主题，并且其中硬件资源监视器包括计算节点的处理器的硬件资源监视器或计算节点的I/O子系统的硬件资源监视器。
示例4包括示例1-3中任一个的主题，并且进一步包括硬件预留管理器，其中预留所需平台资源包括使用硬件预留管理器来预留所需平台资源。
示例5包括示例1-4中任一个的主题，并且其中硬件预留管理器包括计算节点的处理器的硬件预留管理器或计算节点的I/O子系统的硬件预留管理器。
示例6包括示例1-5中任一个的主题，并且其中服务级要求包括最大停工期要求或最大总迁移时间要求。
示例7包括示例1-6中任一个的主题，并且其中服务级要求包括最大网络带宽使用要求。
示例8包括示例1-7中任一个的主题，并且其中平台资源包括处理器资源、存储器资源或I/O资源中的至少一个。
示例9包括示例1-8中任一个的主题，并且其中资源管理模块进一步响应于所需平台资源对于计算节点当前不可用的确定来确定计算节点的当前可用平台资源；服务级管理模块进一步基于当前可用平台资源确定对使虚拟机迁移的请求的可实现的服务级；虚拟机迁移模块进一步（i）将可实现的服务级传送到数据中心管理器；以及（ii）响应于可实现的服务级从数据中心管理器接收响应；并且资源管理模块进一步响应于从数据中心管理器接收肯定响应而持续预测迁移时间地预留当前可用平台资源。
示例10包括示例1-9中任一个的主题，并且其中虚拟机迁移模块进一步响应于从数据中心管理器接收否定响应而取消使虚拟机迁移的请求。
示例11包括示例1-10中任一个的主题，并且进一步包括硬件资源监视器，其中确定当前可用平台资源包括询问硬件资源监视器。
示例12包括示例1-11中任一个的主题，并且其中硬件资源监视器包括计算节点的处理器的硬件资源监视器或计算节点的I/O子系统的硬件资源监视器。
示例13包括示例1-12中任一个的主题，并且进一步包括硬件预留管理器，其中预留当前可用平台资源包括使用硬件预留管理器来预留当前可用平台资源。
示例14包括示例1-13中任一个的主题，并且其中硬件预留管理器包括计算节点的处理器的硬件预留管理器或计算节点的I/O子系统的硬件预留管理器。
示例15包括用于使虚拟机迁移的数据中心管理器，该数据中心管理器包括：虚拟机调度模块，用于将使源计算节点的虚拟机迁移到目的地计算节点的请求从数据中心管理器传送到源计算节点，其中该请求包括要由源计算节点满足的服务级要求；和服务级协商模块，用于：响应于使虚拟机迁移的请求的传送而从源计算节点接收可实现的服务级，其中该可实现的服务级指示用计算节点的当前可用平台资源使虚拟机迁移而可实现的服务级；确定可实现的服务级是否可接受；以及响应于可实现的服务级可接受的确定将肯定响应传送到源计算节点。
示例16包括示例15的主题，并且其中服务级协商模块进一步响应于可实现的服务级不可接受的确定将否定响应传送到源计算节点。
示例17包括示例15和16中任一个的主题，并且其中可实现的服务级包括最大停工期或最大总迁移时间。
示例18包括示例15-17中任一个的主题，并且其中服务级要求包括最大网络带宽使用要求。
示例19包括用于使虚拟机迁移的方法，该方法包括：由计算节点接收使虚拟机迁移到目的地计算节点的请求，该请求包括服务级要求；由计算节点确定使虚拟机迁移并且满足服务级要求所需要的平台资源；由计算节点确定所需平台资源对于计算节点当前是否可用；由计算节点响应于确定所需平台资源当前可用而持续预测迁移时间地预留所需平台资源；以及由计算节点并且响应于预留所需平台资源而使用预留平台资源使虚拟机迁移到目的地计算节点。
示例20包括示例19的主题，并且其中确定所需平台资源当前是否可用包括询问计算节点的硬件资源监视器。
示例21包括示例19和20中任一个的主题，并且其中询问硬件资源监视器包括询问计算节点的处理器的硬件资源监视器或询问计算节点的I/O子系统的硬件资源监视器。
示例22包括示例19-21中任一个的主题，并且其中预留所需平台资源包括使用计算节点的硬件预留管理器来预留所需平台资源。
示例23包括示例19-22中任一个的主题，并且其中使用硬件预留管理器包括使用计算节点的处理器的硬件预留管理器或询问计算节点的I/O子系统的硬件预留管理器。
示例24包括示例19-23中任一个的主题，并且其中服务级要求包括最大停工期要求或最大总迁移时间要求。
示例25包括示例19-24中任一个的主题，并且其中服务级要求包括最大网络带宽使用要求。
示例26包括示例19-25中任一个的主题，并且其中平台资源包括处理器资源、存储器资源或I/O资源中的至少一个。
示例27包括示例19-26中任一个的主题，并且进一步包括响应于确定所需平台资源对于计算节点当前不可用而由计算节点确定计算节点的当前可用平台资源；由计算节点基于当前可用平台资源确定对于使虚拟机迁移的请求的可实现的服务级；由计算节点将可实现的服务级传送到数据中心管理器；由计算节点响应于可实现的服务级从数据中心管理器接收响应；以及由计算节点响应于从数据中心管理器接收肯定响应而持续预测迁移时间地预留当前可用平台资源。
示例28包括示例19-27中任一个的主题，并且进一步包括由计算节点响应于从数据中心管理器接收否定响应而取消使虚拟机迁移的请求。
示例29包括示例19-28中任一个的主题，并且其中确定当前可用平台资源包括询问计算节点的硬件资源监视器。
示例30包括示例19-29中任一个的主题，并且其中询问硬件资源监视器包括询问计算节点的处理器的硬件资源监视器或询问计算节点的I/O子系统的硬件资源监视器。
示例31包括示例19-30中任一个的主题，并且其中预留当前可用平台资源包括使用计算节点的硬件预留管理器来预留当前可用平台资源。
示例32包括示例19-31中任一个的主题，并且其中使用硬件预留管理器包括使用计算节点的处理器的硬件预留管理器或使用计算节点的I/O子系统的硬件预留管理器。
示例33包括用于使虚拟机迁移的方法，该方法包括由数据中心管理器将使源计算节点的虚拟机迁移到目的地计算节点的请求传送到源计算节点，该请求包括要由源计算节点满足的服务级要求；由数据中心管理器响应于传送使虚拟机迁移的请求而从源计算节点接收可实现的服务级，该可实现的服务级指示用计算节点的当前可用平台资源使虚拟机迁移而可实现的服务级；由数据中心管理器确定可实现的服务级是否可接受；以及由数据中心管理器响应于确定可实现的服务级可接受而将肯定响应传送到源计算节点。
示例34包括示例33的主题，并且进一步包括由数据中心管理器响应于确定可实现的服务级不可接受而将否定响应传送到源计算节点。
示例35包括示例33和34中任一个的主题，并且其中可实现的服务级包括最大停工期或最大总迁移时间。
示例36包括示例33-35中任一个的主题，并且其中服务级要求包括最大网络带宽使用要求。
示例37包括计算设备，其包括：处理器；和具有存储在其上的多个指令的存储器，这些指令在由处理器执行时促使计算设备执行示例19-36中任一个的方法。
示例38包括一个或多个机器可读存储介质，其包括存储在其上的多个指令，这些指令在执行时导致计算设备执行示例19-36中任一个的方法。
示例39包括计算设备，其包括用于执行示例19-36中任一个的方法的装置。
示例40包括用于使虚拟机迁移的计算节点，该计算节点包括用于接收使虚拟机迁移到目的地计算节点的请求的装置，该请求包括服务级要求；用于确定使虚拟机迁移并且满足服务级要求所需要的平台资源的装置；用于确定所需平台资源对于计算节点当前是否可用的装置；用于响应于确定所需平台资源当前可用而持续预测迁移时间地预留所需平台资源的装置；以及用于响应于预留所需平台资源而使用预留平台资源使虚拟机迁移到目的地计算节点的装置。
示例41包括示例40的主题，并且其中用于确定所需平台资源当前是否可用的装置包括用于询问计算节点的硬件资源监视器的装置。
示例42包括示例40和41中任一个的主题，并且其中用于询问硬件资源监视器的装置包括用于询问计算节点的处理器的硬件资源监视器的装置或用于询问计算节点的I/O子系统的硬件资源监视器的装置。
示例43包括示例40-42中任一个的主题，并且其中用于预留所需平台资源的装置包括用于使用计算节点的硬件预留管理器来预留所需平台资源的装置。
示例44包括示例40-43中任一个的主题，并且其中用于使用硬件预留管理器来预留所需平台资源的装置包括用于使用计算节点的处理器的硬件预留管理器的装置或用于使用计算节点的I/O子系统的硬件预留管理器的装置。
示例45包括示例40-44中任一个的主题，并且其中服务级要求包括最大停工期要求或最大总迁移时间要求。
示例46包括示例40-45中任一个的主题，并且其中服务级要求包括最大网络带宽使用要求。
示例47包括示例40-46中任一个的主题，并且其中平台资源包括处理器资源、存储器资源或I/O资源中的至少一个。
示例48包括示例40-47中任一个的主题，并且进一步包括响应于确定所需平台资源对于计算节点当前不可用，用于确定计算节点的当前可用平台资源的装置；用于基于当前可用的平台资源来确定对于使虚拟机迁移的请求的可实现的服务级的装置；用于将可实现的服务级传送到数据中心管理器的装置；用于响应于可实现的服务级从数据中心管理器接收响应的装置；以及用于响应于从数据中心管理器接收肯定响应而持续预测迁移时间地预留当前可用平台资源的装置。
示例49包括示例40-48中任一个的主题，并且进一步包括用于响应于从数据中心管理器接收否定响应而取消使虚拟机迁移的请求。
示例50包括示例40-49中任一个的主题，并且其中用于确定当前可用平台资源的装置包括用于询问计算节点的硬件资源监视器的装置。
示例51包括示例40-50中任一个的主题，并且其中用于询问硬件资源监视器的装置包括用于询问计算节点的处理器的硬件资源监视器的装置或用于询问计算节点的I/O子系统的硬件资源监视器的装置。
示例52包括示例40-51中任一个的主题，并且其中用于预留当前可用平台资源的装置包括用于使用计算节点的硬件预留管理器来预留当前可用平台资源的装置。
示例53包括示例40-52中任一个的主题，并且其中用于使用硬件预留管理器来预留当前可用平台资源的装置包括用于使用计算节点的处理器的硬件预留管理器的装置或用于使用计算节点的I/O子系统的硬件预留管理器的装置。
示例54包括用于使虚拟机迁移的数据中心管理器，该数据中心管理器包括：用于将使源计算节点的虚拟机迁移到目的地计算节点的请求传送到源计算节点的装置，该请求包括要由源计算节点满足的服务级要求；用于响应于传送使虚拟机迁移的请求从源计算节点接收可实现的服务级的装置，该可实现的服务级指示用计算节点的当前可用平台资源使虚拟机迁移而可实现的服务级；用于确定可实现的服务级是否可接受的装置；以及用于响应于确定可实现的服务级可接受而将肯定响应传送到源计算节点的装置。
示例55包括示例54的主题，并且进一步包括用于响应于确定可实现的服务级不可接受而将否定响应传送到源计算节点的装置。
示例56包括示例54和55中任一个的主题，并且其中可实现的服务级包括最大停工期或最大总迁移时间。
示例57包括示例54-56中任一个的主题，并且其中服务级要求包括最大网络带宽使用要求。

Claims (25)

1. 一种用于使虚拟机迁移的计算节点，所述计算节点包括：
虚拟机迁移模块，用于接收使虚拟机迁移到目的地计算节点的请求，其中所述请求包括服务级要求；
服务级管理模块，用于确定使所述虚拟机迁移并且满足所述服务级要求所需要的平台资源；和
资源管理模块，用于（i）确定需要的平台资源对于所述计算节点是否当前可用以及（ii）响应于所需平台资源当前可用的确定来持续预测迁移时间地预留所需平台资源；
其中所述虚拟机迁移模块进一步响应于所需平台资源的预留使用预留的平台资源来使所述虚拟机迁移到所述目的地计算节点。
2. 如权利要求1所述的计算节点，其进一步包括硬件资源监视器，其中确定所需平台资源当前是否可用包括询问所述硬件资源监视器。
3. 如权利要求2所述的计算节点，其中所述硬件资源监视器包括所述计算节点的处理器的硬件资源监视器或所述计算节点的I/O子系统的硬件资源监视器。
4. 如权利要求1所述的计算节点，其进一步包括硬件预留管理器，其中预留所需平台资源包括使用所述硬件预留管理器来预留所需平台资源。
5. 如权利要求4所述的计算节点，其中所述硬件预留管理器包括所述计算节点的处理器的硬件预留管理器或所述计算节点的I/O子系统的硬件预留管理器。
6. 如权利要求1所述的计算节点，其中所述服务级要求包括最大停工期要求或最大总迁移时间要求。
7. 如权利要求1所述的计算节点，其中所述服务级要求包括最大网络带宽使用要求。
8. 如权利要求1所述的计算节点，其中所述平台资源包括处理器资源、存储器资源或I/O资源中的至少一个。
9. 如权利要求1所述的计算节点，其中：
所述资源管理模块进一步响应于所需平台资源对于所述计算节点当前不可用的确定来确定所述计算节点的当前可用平台资源；
所述服务级管理模块进一步基于当前可用平台资源确定对使所述虚拟机迁移的请求的可实现的服务级；
所述虚拟机迁移模块进一步（i）将所述可实现的服务级传送到数据中心管理器；以及（ii）响应于所述可实现的服务级从所述数据中心管理器接收响应；并且
所述资源管理模块进一步响应于从所述数据中心管理器接收肯定响应而持续所述预测迁移时间地预留当前可用平台资源。
10. 如权利要求9所述的计算节点，其进一步包括硬件资源监视器，其中确定当前可用平台资源包括询问所述硬件资源监视器。
11. 如权利要求9所述的计算节点，其进一步包括硬件预留管理器，其中预留当前可用平台资源包括使用所述硬件预留管理器来预留当前可用平台资源。
12. 一种用于使虚拟机迁移的计算节点，所述计算节点包括：
用于接收使虚拟机迁移到目的地计算节点的请求的装置，所述请求包括服务级要求；
用于确定使所述虚拟机迁移并且满足所述服务级要求所需要的平台资源的装置；
用于确定所需平台资源对于所述计算节点当前是否可用的装置；
用于响应于确定所需平台资源当前可用而持续预测迁移时间地预留所需平台资源的装置；以及
用于响应于预留所需平台资源而使用预留平台资源使所述虚拟机迁移到所述目的地计算节点的装置。
13. 如权利要求12所述的计算节点，其中用于确定所需平台资源当前是否可用的装置包括用于询问所述计算节点的硬件资源监视器的装置。
14. 如权利要求12所述的计算节点，其中用于预留所需平台资源的装置包括用于使用所述计算节点的硬件预留管理器来预留所需平台资源的装置。
15. 如权利要求12所述的计算节点，其进一步包括响应于确定所需平台资源对于实施计算节点当前不可用：
用于确定所述计算节点的当前可用平台资源的装置；
用于基于当前可用的平台资源来确定对于使所述虚拟机迁移的请求的可实现的服务级的装置；
用于将所述可实现的服务级传送到数据中心管理器的装置；
用于响应于所述可实现的服务级从数据中心管理器接收响应的装置；以及
用于响应于从所述数据中心管理器接收肯定响应而持续所述预测迁移时间地预留当前可用平台资源的装置。
16. 如权利要求15所述的计算节点，其中用于确定当前可用平台资源的装置包括用于询问所述计算节点的硬件资源监视器的装置。
17. 如权利要求15所述的计算节点，其中用于预留当前可用平台资源的装置包括用于使用所述计算节点的硬件预留管理器来预留当前可用平台资源的装置。
18. 一种用于使虚拟机迁移的数据中心管理器，所述数据中心管理器包括：
虚拟机调度模块，用于将使源计算节点的虚拟机迁移到目的地计算节点的请求从所述数据中心管理器传送到所述源计算节点，其中所述请求包括要由所述源计算节点满足的服务级要求；和
服务级协商模块，用于：
响应于使所述虚拟机迁移的请求的传送而从所述源计算节点接收可实现的服务级，其中所述可实现的服务级指示可实现来用所述计算节点的当前可用平台资源使所述虚拟机迁移的服务级；
确定所述可实现的服务级是否可接受；以及
响应于所述可实现的服务级可接受的确定将肯定响应传送到所述源计算节点。
19. 如权利要求18所述的数据中心管理器，其中所述服务级协商模块进一步响应于所述可实现的服务级不可接受的确定将否定响应传送到所述源计算节点。
20. 如权利要求18所述的数据中心管理器，其中所述可实现的服务级包括最大停工期或最大总迁移时间。
21. 如权利要求18所述的数据中心管理器，其中所述服务级要求包括最大网络带宽使用要求。
22. 一种用于使虚拟机迁移的数据中心管理器，所述数据中心管理器包括：
用于将使源计算节点的虚拟机迁移到目的地计算节点的请求传送到所述源计算节点的装置，所述请求包括要由所述源计算节点满足的服务级要求；
用于响应于传送使所述虚拟机迁移的请求从所述源计算节点接收可实现的服务级的装置，所述可实现的服务级指示可实现来用所述计算节点的当前可用平台资源使所述虚拟机迁移的服务级；
用于确定所述可实现的服务级是否可接受的装置；以及
用于响应于确定所述可实现的服务级可接受而将肯定响应传送到所述源计算节点的装置。
23. 如权利要求22所述的数据中心管理器，其进一步包括用于响应于确定所述可实现的服务级不可接受而将否定响应传送到所述源计算节点的装置。
24. 如权利要求22所述的数据中心管理器，其中所述可实现的服务级包括最大停工期或最大总迁移时间。
25. 如权利要求22所述的数据中心管理器，其中所述服务级要求包括最大网络带宽使用要求。
CN201510183053.6A 2014-05-19 2015-04-17 虚拟机的可靠且确定的实时迁移 Active CN105100184B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/280997 2014-05-19
US14/280,997 US9558005B2 (en) 2014-05-19 2014-05-19 Reliable and deterministic live migration of virtual machines

Publications (2)

Publication Number Publication Date
CN105100184A true CN105100184A (zh) 2015-11-25
CN105100184B CN105100184B (zh) 2020-07-10

Family

ID=54361790

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510183053.6A Active CN105100184B (zh) 2014-05-19 2015-04-17 虚拟机的可靠且确定的实时迁移

Country Status (4)

Country Link
US (1) US9558005B2 (zh)
JP (1) JP6005795B2 (zh)
CN (1) CN105100184B (zh)
DE (1) DE102015105884B4 (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017101100A1 (en) * 2015-12-18 2017-06-22 Intel Corporation Virtual machine batch live migration
CN107347089A (zh) * 2017-05-16 2017-11-14 深圳警翼智能科技股份有限公司 一种电信级别的云计算系统的资源分配方法
CN109144659A (zh) * 2017-06-27 2019-01-04 英特尔公司 使用分解计算资源迁移虚拟机的技术
CN110389816A (zh) * 2018-04-20 2019-10-29 伊姆西Ip控股有限责任公司 用于资源调度的方法、装置以及计算机程序产品
CN111684419A (zh) * 2018-02-01 2020-09-18 西门子股份公司 在计算节点之间迁移容器编排平台中的容器的方法和系统
CN111684419B (zh) * 2018-02-01 2024-06-04 西门子股份公司 在计算节点之间迁移容器编排平台中的容器的方法和系统

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9817728B2 (en) 2013-02-01 2017-11-14 Symbolic Io Corporation Fast system state cloning
CN105324968B (zh) * 2014-06-05 2019-02-26 华为技术有限公司 可靠性资源的分配方法和装置
US9612765B2 (en) * 2014-11-19 2017-04-04 International Business Machines Corporation Context aware dynamic composition of migration plans to cloud
JP2016126562A (ja) * 2015-01-05 2016-07-11 富士通株式会社 情報処理システム、管理装置、及び情報処理システムの制御方法
US10721181B1 (en) * 2015-03-10 2020-07-21 Amazon Technologies, Inc. Network locality-based throttling for automated resource migration
US10061514B2 (en) 2015-04-15 2018-08-28 Formulus Black Corporation Method and apparatus for dense hyper IO digital retention
US9836327B1 (en) * 2015-06-12 2017-12-05 Amazon Technologies, Inc. Network-based storage access control for migrating live storage clients
US10228969B1 (en) * 2015-06-25 2019-03-12 Amazon Technologies, Inc. Optimistic locking in virtual machine instance migration
US10970110B1 (en) 2015-06-25 2021-04-06 Amazon Technologies, Inc. Managed orchestration of virtual machine instance migration
US9710401B2 (en) 2015-06-26 2017-07-18 Intel Corporation Processors, methods, systems, and instructions to support live migration of protected containers
US10305814B2 (en) * 2015-08-05 2019-05-28 International Business Machines Corporation Sizing SAN storage migrations
US10664179B2 (en) 2015-09-25 2020-05-26 Intel Corporation Processors, methods and systems to allow secure communications between protected container memory and input/output devices
US9336042B1 (en) * 2015-11-19 2016-05-10 International Business Machines Corporation Performing virtual machine live migration within a threshold time by adding available network path in multipath network
US10404579B1 (en) * 2015-12-07 2019-09-03 Amazon Technologies, Inc. Virtual machine instance migration using a hypervisor
WO2017106997A1 (en) * 2015-12-21 2017-06-29 Intel Corporation Techniques for co-migration of virtual machines
US10440153B1 (en) * 2016-02-08 2019-10-08 Microstrategy Incorporated Enterprise health score and data migration
JP6770073B2 (ja) * 2016-02-25 2020-10-14 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． 自動アプリケーション展開のための方法およびクラウド管理ノード
BR112019000113A2 (pt) * 2016-07-07 2019-04-09 Huawei Tech Co Ltd método, aparelho e sistema de gerenciamento de recursos de rede
US11537419B2 (en) * 2016-12-30 2022-12-27 Intel Corporation Virtual machine migration while maintaining live network links
US10503233B2 (en) 2017-04-14 2019-12-10 Intel Corporation Usage scenario based monitoring and adjustment
US10541939B2 (en) * 2017-08-15 2020-01-21 Google Llc Systems and methods for provision of a guaranteed batch
US10445129B2 (en) 2017-10-31 2019-10-15 Vmware, Inc. Virtual computing instance transfer path selection
WO2019126072A1 (en) 2017-12-18 2019-06-27 Formulus Black Corporation Random access memory (ram)-based computer systems, devices, and methods
US10797940B2 (en) * 2018-02-02 2020-10-06 Storage Engine, Inc. Methods, apparatuses and systems for cloud-based disaster recovery
US10896069B2 (en) 2018-03-16 2021-01-19 Citrix Systems, Inc. Dynamically provisioning virtual machines from remote, multi-tier pool
US10853116B2 (en) * 2018-07-19 2020-12-01 Vmware, Inc. Machine learning prediction of virtual computing instance transfer performance
US11494212B2 (en) * 2018-09-27 2022-11-08 Intel Corporation Technologies for adaptive platform resource assignment
CN111381928B (zh) * 2018-12-28 2021-05-25 中兴通讯股份有限公司 一种虚拟机迁移方法、云计算管理平台和存储介质
WO2020142431A1 (en) 2019-01-02 2020-07-09 Formulus Black Corporation Systems and methods for memory failure prevention, management, and mitigation
CN109828829B (zh) * 2019-01-22 2022-10-18 重庆邮电大学 一种基于灾难预警时间的虚拟机快速撤离方法
US11233747B2 (en) * 2019-01-23 2022-01-25 Servicenow, Inc. Systems and methods for acquiring server resources at schedule time
JP7151530B2 (ja) * 2019-02-13 2022-10-12 日本電信電話株式会社 サーバ基盤および物理ｃｐｕ割当プログラム
US11416362B2 (en) 2019-05-17 2022-08-16 Citrix Systems, Inc. Dependency API controlled experiment dashboard
US11321130B2 (en) * 2019-08-01 2022-05-03 Kyndryl, Inc. Container orchestration in decentralized network computing environments
CN112395081B (zh) * 2019-08-15 2024-05-07 中国移动通信集团浙江有限公司 一种资源在线自动回收方法、系统、服务器以及存储介质
US11637748B2 (en) 2019-08-28 2023-04-25 Microstrategy Incorporated Self-optimization of computing environments
US11210189B2 (en) 2019-08-30 2021-12-28 Microstrategy Incorporated Monitoring performance of computing systems
US11360881B2 (en) 2019-09-23 2022-06-14 Microstrategy Incorporated Customizing computer performance tests
US11586457B2 (en) * 2020-01-15 2023-02-21 EMC IP Holding Company LLC Load balancing in a hyper-converged infrastructure (HCI) environment
CN111274230B (zh) * 2020-03-26 2024-03-08 北京奇艺世纪科技有限公司 数据迁移的管理方法、装置、设备及存储介质
US11409619B2 (en) 2020-04-29 2022-08-09 The Research Foundation For The State University Of New York Recovering a virtual machine after failure of post-copy live migration
US20220413902A1 (en) * 2021-06-23 2022-12-29 International Business Machines Corporation Partition migration with critical task prioritization
CN115361349B (zh) * 2022-07-26 2023-08-15 支付宝(杭州)信息技术有限公司 资源使用方法和装置

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101511109A (zh) * 2009-04-01 2009-08-19 南京邮电大学 一种基于移动代理的卫星网服务质量保证方法
CN101998553A (zh) * 2009-08-14 2011-03-30 大唐移动通信设备有限公司 上行资源的分配方法和设备
CN102547876A (zh) * 2011-11-28 2012-07-04 杭州电子科技大学 对周围节点无干扰的无线网状网信道资源预留系统及方法
CN103053146A (zh) * 2012-03-01 2013-04-17 华为技术有限公司 数据迁移方法和设备
KR20130090628A (ko) * 2012-02-06 2013-08-14 인하대학교 산학협력단 모바일 클라우드를 위한 온톨로지 기반의 가상 머신 할당 장치 및 그 방법
CN103399778A (zh) * 2013-07-01 2013-11-20 华为技术有限公司 一种虚拟机在线整体迁移方法和设备
US20130311989A1 (en) * 2012-05-21 2013-11-21 Hitachi, Ltd. Method and apparatus for maintaining a workload service level on a converged platform
US20140115162A1 (en) * 2012-10-22 2014-04-24 International Business Machines Corporation Providing automated quality-of-service ('qos') for virtual machine migration across a shared data center network

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002017065A2 (en) * 2000-08-18 2002-02-28 International Business Machines Corporation Apparatus and method for use in a computer hosting services environment
US8775585B2 (en) * 2003-09-30 2014-07-08 International Business Machines Corporation Autonomic SLA breach value estimation
US20070204266A1 (en) * 2006-02-28 2007-08-30 International Business Machines Corporation Systems and methods for dynamically managing virtual machines
US9037692B2 (en) * 2008-11-26 2015-05-19 Red Hat, Inc. Multiple cloud marketplace aggregation
CN101937357B (zh) * 2009-07-01 2013-11-06 华为技术有限公司 一种虚拟机迁移决策方法、装置及系统
US8645529B2 (en) * 2010-10-06 2014-02-04 Infosys Limited Automated service level management of applications in cloud computing environment
US8615579B1 (en) * 2010-12-28 2013-12-24 Amazon Technologies, Inc. Managing virtual machine migration
US20130085742A1 (en) * 2011-10-04 2013-04-04 Nec Laboratories America, Inc. Service level agreement-aware migration for multitenant database platforms
US9009316B2 (en) * 2011-10-06 2015-04-14 Telefonaktiebolaget L M Ericsson (Publ) On-demand integrated capacity and reliability service level agreement licensing
JP2013250775A (ja) 2012-05-31 2013-12-12 Fujitsu Ltd 仮想マシン管理装置、仮想マシン管理プログラム、仮想マシン管理方法及びネットワークシステム
JPWO2014010213A1 (ja) * 2012-07-11 2016-06-20 日本電気株式会社 マイグレーションシステム、マイグレーション方法及び制御プログラムを格納した非一時的なコンピュータ可読媒体
US9104498B2 (en) 2012-07-31 2015-08-11 Hewlett-Packard Development Company, L.P. Maximizing server utilization within a datacenter
US9122527B2 (en) * 2012-08-21 2015-09-01 International Business Machines Corporation Resource allocation for migration within a multi-tiered system
JP5768796B2 (ja) * 2012-10-23 2015-08-26 日本電気株式会社 運用管理装置、運用管理方法、及び、プログラム
CN103685256B (zh) 2013-12-06 2017-08-04 华为技术有限公司 一种虚拟机迁移管理方法、装置及系统
US20150195347A1 (en) * 2014-01-06 2015-07-09 Siegfried Luft Architecture and method for cloud provider selection and projection
WO2015119638A1 (en) * 2014-02-10 2015-08-13 Empire Technology Development, Llc Automatic collection and provisioning of migration resources
JP2015170242A (ja) * 2014-03-10 2015-09-28 富士通株式会社 中継プログラム、中継方法、および中継装置

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101511109A (zh) * 2009-04-01 2009-08-19 南京邮电大学 一种基于移动代理的卫星网服务质量保证方法
CN101998553A (zh) * 2009-08-14 2011-03-30 大唐移动通信设备有限公司 上行资源的分配方法和设备
CN102547876A (zh) * 2011-11-28 2012-07-04 杭州电子科技大学 对周围节点无干扰的无线网状网信道资源预留系统及方法
KR20130090628A (ko) * 2012-02-06 2013-08-14 인하대학교 산학협력단 모바일 클라우드를 위한 온톨로지 기반의 가상 머신 할당 장치 및 그 방법
CN103053146A (zh) * 2012-03-01 2013-04-17 华为技术有限公司 数据迁移方法和设备
US20130311989A1 (en) * 2012-05-21 2013-11-21 Hitachi, Ltd. Method and apparatus for maintaining a workload service level on a converged platform
US20140115162A1 (en) * 2012-10-22 2014-04-24 International Business Machines Corporation Providing automated quality-of-service ('qos') for virtual machine migration across a shared data center network
CN103399778A (zh) * 2013-07-01 2013-11-20 华为技术有限公司 一种虚拟机在线整体迁移方法和设备

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017101100A1 (en) * 2015-12-18 2017-06-22 Intel Corporation Virtual machine batch live migration
US11074092B2 (en) 2015-12-18 2021-07-27 Intel Corporation Virtual machine batch live migration
CN107347089A (zh) * 2017-05-16 2017-11-14 深圳警翼智能科技股份有限公司 一种电信级别的云计算系统的资源分配方法
CN107347089B (zh) * 2017-05-16 2019-11-12 深圳警翼智能科技股份有限公司 一种电信级别的云计算系统的资源分配方法
CN109144659A (zh) * 2017-06-27 2019-01-04 英特尔公司 使用分解计算资源迁移虚拟机的技术
CN111684419A (zh) * 2018-02-01 2020-09-18 西门子股份公司 在计算节点之间迁移容器编排平台中的容器的方法和系统
CN111684419B (zh) * 2018-02-01 2024-06-04 西门子股份公司 在计算节点之间迁移容器编排平台中的容器的方法和系统
CN110389816A (zh) * 2018-04-20 2019-10-29 伊姆西Ip控股有限责任公司 用于资源调度的方法、装置以及计算机程序产品
CN110389816B (zh) * 2018-04-20 2023-05-23 伊姆西Ip控股有限责任公司 用于资源调度的方法、装置以及计算机可读介质

Also Published As

Publication number Publication date
JP2015219908A (ja) 2015-12-07
US9558005B2 (en) 2017-01-31
US20150331715A1 (en) 2015-11-19
CN105100184B (zh) 2020-07-10
DE102015105884A1 (de) 2015-11-19
JP6005795B2 (ja) 2016-10-12
DE102015105884B4 (de) 2023-01-05

Similar Documents

Publication Publication Date Title
CN105100184A (zh) 虚拟机的可靠且确定的实时迁移
US10922192B2 (en) Method, device and computer program product for data backup including determining a hardware configuration allocated to a proxy virtual machine based on a workload of a backup job
EP3252602A1 (en) System, virtualization control device, method for controlling virtualization control device, and program
CN109359031B (zh) 多设备应用程序测试方法、装置、服务器及存储介质
US10993127B2 (en) Network slice instance management method, apparatus, and system
CN111399970B (zh) 一种预留资源管理方法、装置和存储介质
CN107251486A (zh) 一种扩展联动的方法、装置及系统
US9722930B2 (en) Exploiting probabilistic latency expressions for placing cloud applications
CN108132827B (zh) 一种网络切片资源映射方法、相关设备及系统
EP3113429B1 (en) Network resource processing device, method and system
CN111338785A (zh) 资源调度方法及装置、电子设备、存储介质
CN115427934A (zh) 管理用于虚拟机池的电力资源
WO2016095524A1 (zh) 资源分配方法及装置
KR20140057368A (ko) 실시간 모듈 진단 테스팅
CN105283821A (zh) Aux功率控制器
WO2014136302A1 (ja) タスク管理装置及びタスク管理方法
CN108028806A (zh) 网络功能虚拟化nfv网络中分配虚拟资源的方法和装置
CN103902320A (zh) 虚拟机安装系统及方法
US20170235288A1 (en) Process control program, process control device, and process control method
KR101596325B1 (ko) 서버/스토리지 관리 시스템
WO2018009103A1 (en) Power manager and method performed thereby for managing power of a datacentre
CN108737144B (zh) 资源管理的方法和设备
CN110245013A (zh) 物联网计算资源管理方法与装置
WO2021014556A1 (ja) リソース割当装置、リソース割当方法、および、リソース割当プログラム
US9461933B2 (en) Virtual server system, management server device, and system managing method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant