JP6304493B2 - Virtual machine migration method, migration apparatus and program - Google Patents

Virtual machine migration method, migration apparatus and program Download PDF

Info

Publication number
JP6304493B2
JP6304493B2 JP2014521321A JP2014521321A JP6304493B2 JP 6304493 B2 JP6304493 B2 JP 6304493B2 JP 2014521321 A JP2014521321 A JP 2014521321A JP 2014521321 A JP2014521321 A JP 2014521321A JP 6304493 B2 JP6304493 B2 JP 6304493B2
Authority
JP
Japan
Prior art keywords
migration
network
virtual machine
virtual machines
completed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2014521321A
Other languages
Japanese (ja)
Other versions
JPWO2013191021A1 (en
Inventor
隆史 鳥居
隆史 鳥居
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JPWO2013191021A1 publication Critical patent/JPWO2013191021A1/en
Application granted granted Critical
Publication of JP6304493B2 publication Critical patent/JP6304493B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/48—Program initiating; Program switching, e.g. by interrupt
    • G06F9/4806—Task transfer initiation or dispatching
    • G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
    • G06F9/485—Task life-cycle, e.g. stopping, restarting, resuming execution
    • G06F9/4856—Task life-cycle, e.g. stopping, restarting, resuming execution resumption being on a different machine, e.g. task migration, virtual machine migration

Description

本発明は、仮想マシンのマイグレーション方法、マイグレーション装置及びプログラムに関する。 The present invention relates to a virtual machine migration method, a migration apparatus, and a program.

仮想マシン（Virtual Machine：VM）の技術が実用化されている。仮想マシン技術を使うと、物理的なマシンの中に複数の仮想マシンを持つことができる。クラウドシステムでは、仮想マシンベースでユーザにリソース提供を行う。仮想マシンはマイグレーションをすることができる。マイグレーションとは、仮想マシンが動作している物理的なマシンを移動することである。その際に、仮想マシンの動作を停止することなく行うのがライブマイグレーションと呼ばれる。マイグレーションを行う理由は様々である。例えば仮想マシンの配置を変更することによりネットワークトラフィックの最適化を狙う。広域で配置されたデータセンター間でマイグレーションすることにより、顧客に近いデータセンターに仮想マシンをマイグレーションする。 Virtual machine (VM) technology has been put into practical use. With virtual machine technology, you can have multiple virtual machines in a physical machine. In the cloud system, resources are provided to users on a virtual machine basis. Virtual machines can be migrated. Migration refers to moving a physical machine on which a virtual machine is operating. At that time, performing the virtual machine without stopping the operation is called live migration. There are various reasons for migration. For example, it aims to optimize network traffic by changing the placement of virtual machines. By migrating between data centers arranged in a wide area, the virtual machine is migrated to a data center close to the customer.

クラウドシステムでは、複数の顧客が同じクラウドシステムを利用する。このような利用形態をマルチテナントと言う。顧客ごとのシステムをテナントと言う。テナントは一つもしくは複数の仮想マシンからなるシステムである。例えばＷｅｂ３層システムは、Ｗｅｂサーバ、アプリケーションサーバ、データベースサーバの３つの仮想マシンからなる。さらに各サーバを複数用意して、トータルの処理性能を向上させることができる。 In the cloud system, multiple customers use the same cloud system. This type of usage is called multi-tenant. A system for each customer is called a tenant. A tenant is a system composed of one or more virtual machines. For example, the Web three-tier system includes three virtual machines: a Web server, an application server, and a database server. Further, a plurality of servers can be prepared to improve the total processing performance.

例えば、特許文献１には、一の物理サーバ上で動作していたサービスを別の物理サーバ上へ移行する技術が開示されれている。 For example, Patent Document 1 discloses a technique for migrating a service that has been operating on one physical server to another physical server.

特開２０１１−１８６７７５号公報JP 2011-186775 A

本発明ではテナントのマイグレーションにおける課題をとりあげる。テナントは複数の仮想マシンの集合であるとする。すると、個々の仮想マシンが個別にマイグレーションを実施することになる。個別の仮想マシンのマイグレーションが失敗した場合、すでにマイグレーションした仮想マシンを巻き戻す必要が出てくる。また、マイグレーションが終わった仮想マシンからは、通信先がマイグレーション先になるので、マイグレーション先と元でネットワークが分かれた状態になる。広域マイグレーションの場合、レイテンシが長くなるため、性能が著しく落ちる可能性がある。   In the present invention, problems in tenant migration are taken up. A tenant is a set of a plurality of virtual machines. Then, each virtual machine performs migration individually. If migration of an individual virtual machine fails, it will be necessary to rewind the already migrated virtual machine. In addition, since a communication destination is a migration destination from a virtual machine that has been migrated, the network is separated from the migration destination. In the case of wide area migration, the latency may be long, and the performance may be significantly reduced.

本発明は、上記問題点に鑑みてなされたもので、複数の仮想マシンの集合からなるテナントをマイグレーションする場合において通信の遅延時間の悪化を防止することができる仮想マシンのマイグレーション方法、マイグレーション装置及びプログラムを提供することを目的とする。   The present invention has been made in view of the above problems, and in the case of migrating a tenant consisting of a set of a plurality of virtual machines, a virtual machine migration method, a migration apparatus, and a virtual machine that can prevent deterioration of communication delay time The purpose is to provide a program.

本発明は、複数の仮想マシンからなる単一のシステムのマイグレーションにおいて、前記システムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行うことを特徴とする仮想マシンのマイグレーション方法である。   According to the present invention, in the migration of a single system composed of a plurality of virtual machines, the network is switched after confirming that the migration of all the virtual machines belonging to the system is completed. Migration method.

本発明は、複数の仮想マシンからなる単一のシステムのマイグレーションを行うマイグレーション装置であって、前記システムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行うことを特徴とするマイグレーション装置である。   The present invention is a migration apparatus that performs migration of a single system composed of a plurality of virtual machines, and performs network switching after confirming that migration of all virtual machines belonging to the system has been completed. This is a featured migration device.

本発明は、コンピュータに、複数の仮想マシンからなる単一のシステムのマイグレーションにおいて、前記システムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行う処理
を実行させることを特徴とするマイグレーション装置である。The present invention allows a computer to execute a process of switching a network after confirming that migration of all virtual machines belonging to the system is completed in migration of a single system composed of a plurality of virtual machines. A migration apparatus characterized by the above.

本発明によれば、複数の仮想マシンの集合からなるテナントをマイグレーションする場合において通信の遅延時間の悪化を防止することができる。   ADVANTAGE OF THE INVENTION According to this invention, when migrating the tenant which consists of a collection of a some virtual machine, the deterioration of the delay time of communication can be prevented.

図１は本発明のシステム構成を示す図である。FIG. 1 is a diagram showing a system configuration of the present invention. 図２は本発明のテナントと仮想マシンの対応を示す図である。FIG. 2 is a diagram showing the correspondence between tenants and virtual machines according to the present invention. 図３は本発明のマイグレーション処理のフローを示す図である。FIG. 3 is a diagram showing the flow of the migration process of the present invention. 図４は本発明のテナントマイグレーションの概念図である。FIG. 4 is a conceptual diagram of tenant migration according to the present invention. 図５は本発明のマイグレーションの状態を示す図である。FIG. 5 is a diagram showing a state of migration according to the present invention. 図６は本発明のマイグレーションの状態を示す図である。FIG. 6 is a diagram showing a state of migration according to the present invention. 図７は従来のマイグレーションの状態を示す図である。FIG. 7 is a diagram showing a state of conventional migration. 図８は本発明のマイグレーションの状態を示す図である。FIG. 8 is a diagram showing a state of migration according to the present invention.

以下、本発明の実施形態について図面を参照して説明する。   Embodiments of the present invention will be described below with reference to the drawings.

図１は本発明の実施形態のシステム構成を示す図である。マイグレーション管理装置は、システム管理部１、ＶＭ制御部２、ＶＭマイグレーション管理部３、ネットワーク制御管理部４、ネットワークコントローラ６を備える。マイグレーション管理装置は、ネットワークを介して、仮想マシン群５を備える物理サーバやネットワーク装置８に接続されている。システム管理部１は、本システム全体を管理する。ＶＭマイグレーション管理部３は、仮想マシンのマイグレーションを管理する。ＶＭ制御部２は、仮想マシン群５を制御する。仮想マシン群５は、仮想マシン７の集合である。ネットワーク管理制御部４は、ネットワークを制御する。ネットワーク管理制御部４は、システム管理部１とＶＭ制御部２との連携を行う。ネットワーク管理制御部４は、ネットワークコントローラ６を介して、ネットワーク装置８の制御を行う。   FIG. 1 is a diagram showing a system configuration of an embodiment of the present invention. The migration management apparatus includes a system management unit 1, a VM control unit 2, a VM migration management unit 3, a network control management unit 4, and a network controller 6. The migration management apparatus is connected to a physical server including the virtual machine group 5 and the network apparatus 8 via a network. The system management unit 1 manages the entire system. The VM migration management unit 3 manages virtual machine migration. The VM control unit 2 controls the virtual machine group 5. The virtual machine group 5 is a set of virtual machines 7. The network management control unit 4 controls the network. The network management control unit 4 coordinates the system management unit 1 and the VM control unit 2. The network management control unit 4 controls the network device 8 via the network controller 6.

図２はテナント９と仮想マシンの対応関係を示している。テナント９のシステムは、複数の仮想マシン７からなる。テナント９は仮想マシン群５に属する。テナント９はシステム管理部１によって管理されている。システム管理部１は、各テナントにそれぞれ対応する仮想マシンの情報を図示せぬ記憶部に記憶し管理する。通常の場合、ＶＭ制御部２はテナント９を意識することなく制御を行う。   FIG. 2 shows the correspondence between the tenant 9 and the virtual machine. The system of the tenant 9 includes a plurality of virtual machines 7. The tenant 9 belongs to the virtual machine group 5. The tenant 9 is managed by the system management unit 1. The system management unit 1 stores and manages virtual machine information corresponding to each tenant in a storage unit (not shown). In a normal case, the VM control unit 2 performs control without being conscious of the tenant 9.

本発明におけるテナント９のマイグレーションのフローを図３に示す。まずテナントマイグレーションを起動する（Ｓ１）。次に仮想マシンのマイグレーションを起動する（Ｓ２）。ここで、処理対象が複数の仮想マシンである場合には、並列に起動できればトータルのマイグレーション時間の短縮につながる。本発明では、並列でもよく直列でもよい。Ｓ３で、全仮想マシンのマイグレーションが正常に終了したかを判定する。正常に終了すれば、ネットワークをアトミックに切り替えて、テナントマイグレーションを終了する（Ｓ４）。仮想マシンのマイグレーションが一つでも失敗した場合には、ネットワークは切り替えず、マイグレーション先をクリーンアップ（すでにマイグレーション先にコピーした内容を削除）して、テナントマイグレーションは失敗として終了する（Ｓ５）。   A migration flow of the tenant 9 in the present invention is shown in FIG. First, tenant migration is activated (S1). Next, virtual machine migration is started (S2). Here, when the processing target is a plurality of virtual machines, the total migration time can be shortened if they can be started in parallel. In the present invention, it may be parallel or serial. In S3, it is determined whether the migration of all virtual machines has been completed normally. If completed normally, the network is switched to atomic and the tenant migration is completed (S4). If even one virtual machine migration fails, the network is not switched, the migration destination is cleaned up (the contents already copied to the migration destination are deleted), and the tenant migration is terminated as a failure (S5).

本発明では、全仮想マシンのマイグレーションが終了したかを判定してから、ネットワーク切り替えを行っている点が特徴である。従来の方法では、マイグレーションが終了した仮想マシンから順次ネットワーク切り替えを行っている。そのため、一つでもマイグレーションが失敗した場合のフローが異なってくる。マイグレーションに失敗したので、テナントのマイグレーションとしては不完全な状況になっており、テナントマイグレーション全体を切り戻す必要が出てくる。すると、すでにネットワーク切り替えを行ってしまっている仮想マシンを、再度マイグレーションを行って、戻すことになる。これは運用上、手間のかかる作業であるし、新たなマイグレーションを行うということになると、それが失敗した場合も検討しなければならない。かといって、切り戻しを行わないとすると、半端な状態のまま運用を継続することになる。特にデータセンター間でマイグレーションをしている場合、テナント間の通信がデータセンターをまたぐという効率の悪い状態となってしまう。本発明によれば、マイグレーションが失敗した場合でも切り戻す必要がなく、運用が簡単になる。   The present invention is characterized in that network switching is performed after determining whether or not the migration of all virtual machines has been completed. In the conventional method, the network is switched sequentially from the virtual machine for which the migration has been completed. Therefore, the flow when even one migration fails is different. Since the migration has failed, the tenant migration is incomplete, and it is necessary to switch back the entire tenant migration. Then, the virtual machine that has already been switched over is migrated again and returned. This is a laborious operation, and if a new migration is to be done, it must be considered even if it fails. However, if the switchback is not performed, the operation is continued in an odd state. Especially when migrating between data centers, communication between tenants crosses the data center, resulting in an inefficient state. According to the present invention, even if migration fails, there is no need to switch back and the operation is simplified.

テナントのマイグレーション処理について、図を用いて詳しく説明する。図４はテナントのマイグレーションをデータセンター間で行う場合の概念図である。テナントには例えば複数の仮想マシンが含まれており、これをテナントという固まりとしてマイグレーションしたい、というのがテナントマイグレーションで実現したいことである。   Tenant migration processing will be described in detail with reference to the drawings. FIG. 4 is a conceptual diagram when tenant migration is performed between data centers. For example, a tenant includes a plurality of virtual machines, and it is desired to perform migration as a tenant group by tenant migration.

通常のマイグレーションでは、仮想マシンのイメージのマイグレーション先へのコピーが終了したら、順次マイグレーション先の仮想マシンに切り替えが行われる。つまり、仮想マシンに対するネットワーク通信が、マイグレーション先に行くようになる。具体的には、ＡＲＰ（Address Resolution Protocol）パケットを送信し、ネットワーク装置のＡＲＰテーブルを書き換えることで、マイグレーション元からマイグレーション先に宛先を変えることがよく行われる。しかし、この切り替えをマイグレーションが終了した仮想マシンから順次行うと、テナント内部の通信がマイグレーション元とマイグレーション先で分断されてしまい、遅延時間が増大する。この状態を防止するために、ネットワークのアトミックな切り替えを行うのが本発明の特徴である。   In normal migration, when copying of the virtual machine image to the migration destination is completed, the virtual machine is sequentially switched to the migration destination virtual machine. That is, network communication for the virtual machine goes to the migration destination. Specifically, the destination is often changed from the migration source to the migration destination by transmitting an ARP (Address Resolution Protocol) packet and rewriting the ARP table of the network device. However, if this switching is performed sequentially from the virtual machine that has been migrated, communication within the tenant is divided between the migration source and the migration destination, and the delay time increases. In order to prevent this state, it is a feature of the present invention that the network is switched atomically.

具体的には、同一テナントに含まれる全ての仮想マシンのマイグレーションが終了するまで、マイグレーション元にパケットが届くようにネットワーク制御を行う。あるテナントについてマイグレーションが起動されると、ＶＭマイグレーション管理部３が、処理対象のテナントに対応する仮想マシンについてマイグレーションの進捗管理を行い、全ての仮想マシンのマイグレーションが完了するまでは、ネットワーク管理制御部４に変更指示をしない。一般に、マイグレーションが完了した仮想マシンは、自動的にＡＲＰパケットを送信するが、本発明の仮想マシン７は、自動的なＡＲＰパケット送信はせず、ネットワーク管理制御部４により制御を行う。このようなネットワーク管理制御部４の具体的な実現手段として、例えばネットワーク制御技術OpenFlowが利用できる。OpenFlowを利用すれば、ネットワーク管理制御部４が集中的にネットワークフローを管理・制御することができる。   Specifically, network control is performed so that packets are delivered to the migration source until migration of all virtual machines included in the same tenant is completed. When migration is started for a certain tenant, the VM migration management unit 3 manages the migration progress for the virtual machines corresponding to the processing target tenant, and until the migration of all virtual machines is completed, the network management control unit No change instruction to 4 Generally, a virtual machine that has been migrated automatically transmits an ARP packet. However, the virtual machine 7 of the present invention does not automatically transmit an ARP packet, but performs control by the network management control unit 4. As a specific means for realizing such a network management control unit 4, for example, the network control technology OpenFlow can be used. By using OpenFlow, the network management control unit 4 can centrally manage and control network flows.

ＶＭマイグレーション管理部３は、あるテナントに対応する全ての仮想マシンのマイグレーションが完了したことを検出すると、ネットワーク管理制御部４に指示を出し、ネットワーク管理制御部４は、パケットがマイグレーション先に届くようにフロー設定（ＭＡＣアドレス、ＩＰアドレス、ポート番号等の情報に基づき、どの宛先に送るかという設定情報）を変更する。これにより、全てのマイグレーションが完了してから、アトミックにテナントのネットワークを切り替えることができる。   When the VM migration management unit 3 detects that the migration of all virtual machines corresponding to a tenant has been completed, the VM migration management unit 3 issues an instruction to the network management control unit 4 so that the packet reaches the migration destination. The flow setting (setting information on which destination to send based on information such as a MAC address, an IP address, and a port number) is changed. Thereby, after all the migrations are completed, the tenant network can be switched atomically.

具体的に図を用いて説明する。図５はマイグレーション前の状態を示している。テナントがあるデータセンターＡに属しており、テナントの仮想マシンは全てデータセンターＡの物理サーバに配置されている。データセンター外からの通信はネットワークによりデータセンターＡにのみ転送される。テナント内部の通信は、データセンターＡの内部で閉じる。   This will be specifically described with reference to the drawings. FIG. 5 shows a state before migration. The tenant belongs to a data center A, and the tenant's virtual machines are all arranged in the physical server of the data center A. Communications from outside the data center are transferred only to data center A over the network. Communication within the tenant is closed inside the data center A.

テナントマイグレーションを開始した状態が図６である。ここでは複数の仮想マシンで並列にマイグレーションが行われているとする。マイグレーション先は他のデータセンターＢである。   FIG. 6 shows a state where tenant migration is started. Here, it is assumed that migration is performed in parallel on a plurality of virtual machines. The migration destination is another data center B.

従来の方法で、一つ目の仮想マシンでマイグレーションが完了した状態が図７である。マイグレーションが完了した仮想マシンはネットワークが切り替わるので、外部からの通信がデータセンターＡとデータセンターＢで分岐する。テナント内部の通信もデータセンターをまたがる通信が発生する。   FIG. 7 shows a state where the migration has been completed on the first virtual machine by the conventional method. Since the network of the virtual machine that has been migrated is switched, communication from the outside branches at the data center A and the data center B. Communication within the tenant also occurs across data centers.

全ての仮想マシンのマイグレーションが終了した状態が図８である。この状態になると、全ての仮想マシンがデータセンターＢに配置されているため、通信がデータセンターをまたぐことや、分岐することがなくなる。   FIG. 8 shows a state where the migration of all virtual machines has been completed. In this state, since all the virtual machines are arranged in the data center B, the communication does not cross the data center or branch off.

本発明では、図７の状態が発生しない。図６の状態から、全ての仮想マシンでマイグレーションが終了した時点で、アトミックに図８の状態に遷移する。これにより、データセンターをまたいだ通信が発生しない。   In the present invention, the state of FIG. 7 does not occur. From the state of FIG. 6, when migration is completed in all virtual machines, the state transitions atomically to the state of FIG. 8. This prevents communication across data centers.

以上説明したように本発明によれば、複数の仮想マシンのマイグレーションを行い、全ての仮想マシンのマイグレーションが終了した段階で、同期してアトミックに切り替えを行う。そのためにネットワークレイヤでの制御を連動させる。これにより、仮想マシン環境において、複数の仮想マシンからなるテナントのマイグレーションをアトミックに行うことができ、マイグレーション中の遅延悪化や、マイグレーション失敗による巻き戻し処理を防止することができる。   As described above, according to the present invention, migration of a plurality of virtual machines is performed, and at the stage where all virtual machines have been migrated, switching is performed synchronously and atomically. For this purpose, control at the network layer is linked. As a result, in a virtual machine environment, migration of a tenant composed of a plurality of virtual machines can be performed atomically, and deterioration in delay during migration and rewinding processing due to migration failure can be prevented.

上述した本発明の実施形態に係るマイグレーション管理装置は、ＣＰＵ（Central Processing Unit）が記憶部に格納された動作プログラム等を読み出して実行することにより実現されてもよく、また、ハードウェアで構成されてもよい。上述した実施の形態の一部の機能のみをコンピュータプログラムにより実現することもできる。   The above-described migration management device according to the embodiment of the present invention may be realized by a CPU (Central Processing Unit) reading and executing an operation program or the like stored in a storage unit, and is configured by hardware. May be. Only some functions of the above-described embodiments can be realized by a computer program.

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。   A part or all of the above-described embodiment can be described as in the following supplementary notes, but is not limited thereto.

（付記１）
複数の仮想マシンからなる単一のシステムのマイグレーションにおいて、前記システムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行う
ことを特徴とする仮想マシンのマイグレーション方法。(Appendix 1)
In a migration of a single system comprising a plurality of virtual machines, a virtual machine migration method comprising performing network switching after confirming that migration of all virtual machines belonging to the system has been completed.

（付記２）
前記ネットワークの切り替えを行う際に、ネットワークの集中制御を使う
ことを特徴とする付記１に記載の仮想マシンのマイグレーション方法。(Appendix 2)
The virtual machine migration method according to appendix 1, wherein centralized network control is used when the network is switched.

（付記３）
前記システムに属する少なくとも一つの仮想マシンのマイグレーションが失敗した場合に、前記ネットワークの切り替えを行わず、すでにマイグレーション先にコピーしたデータを削除し、マイグレーションをエラーで終了する
ことを特徴とする付記１又は付記２に記載の仮想マシンのマイグレーション方法。(Appendix 3)
Supplementary note 1 or 3, wherein, when migration of at least one virtual machine belonging to the system fails, the network is not switched, the data already copied to the migration destination is deleted, and the migration is terminated with an error. The virtual machine migration method according to appendix 2.

（付記４）
複数の仮想マシンからなる単一のシステムのマイグレーションを行うマイグレーション装置であって、
前記システムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行う
ことを特徴とするマイグレーション装置。(Appendix 4)
A migration device that performs migration of a single system consisting of multiple virtual machines,
A migration apparatus that performs network switching after confirming that migration of all virtual machines belonging to the system is completed.

（付記５）
前記ネットワークの切り替えを行う際に、ネットワークを集中制御するネットワーク制御部を備える
ことを特徴とする付記４に記載のマイグレーション装置。(Appendix 5)
The migration apparatus according to appendix 4, further comprising a network control unit that centrally controls the network when the network is switched.

（付記６）
前記システムに属する少なくとも一つの仮想マシンのマイグレーションが失敗した場合に、前記ネットワークの切り替えを行わず、すでにマイグレーション先にコピーしたデータを削除し、マイグレーションをエラーで終了する
ことを特徴とする付記５又は付記６に記載のマイグレーション装置。(Appendix 6)
Supplementary note 5 or 5, wherein if at least one virtual machine belonging to the system fails to migrate, the network is not switched, the data already copied to the migration destination is deleted, and the migration is terminated with an error. The migration apparatus according to appendix 6.

（付記７）
コンピュータに、
複数の仮想マシンからなる単一のシステムのマイグレーションにおいて、前記システムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行う処理
を実行させることを特徴とするプログラム。(Appendix 7)
On the computer,
In a migration of a single system composed of a plurality of virtual machines, a program for executing a process of switching networks after confirming that the migration of all virtual machines belonging to the system is completed.

（付記８）
前記コンピュータに、
前記ネットワークの切り替えを行う際に、ネットワークの集中制御を使う処理を実行させることを特徴とする付記７に記載のプログラム。(Appendix 8)
In the computer,
The program according to appendix 7, wherein a process using centralized control of the network is executed when the network is switched.

（付記９）
前記コンピュータに、
前記システムに属する少なくとも一つの仮想マシンのマイグレーションが失敗した場合に、前記ネットワークの切り替えを行わず、すでにマイグレーション先にコピーしたデータを削除し、マイグレーションをエラーで終了する処理
を実行させることを特徴とする付記７又は付記８に記載のプログラム。(Appendix 9)
In the computer,
When migration of at least one virtual machine belonging to the system fails, the network is not switched, the data already copied to the migration destination is deleted, and the process of ending migration with an error is executed. The program according to appendix 7 or appendix 8.

以上、好ましい実施の形態をあげて本発明を説明したが、本発明は必ずしも上記実施の形態に限定されるものではなく、その技術的思想の範囲内において様々に変形し実施することが出来る。
この出願は、２０１２年６月２２日に出願された日本出願特願２０１２−１４０６８７を基礎とする優先権を主張し、その開示の全てをここに取り込む。Although the present invention has been described with reference to the preferred embodiments, the present invention is not necessarily limited to the above-described embodiments, and various modifications can be made within the scope of the technical idea.
This application claims the priority on the basis of Japanese application Japanese Patent Application No. 2012-140687 for which it applied on June 22, 2012, and takes in those the indications of all here.

１ システム管理部
２ ＶＭ制御部
３ ＶＭマイグレーション管理部
４ ネットワーク制御部
５ 仮想マシン群
６ ネットワークコントローラ
７ 仮想マシン
８ ネットワーク装置
９ テナントDESCRIPTION OF SYMBOLS 1 System management part 2 VM control part 3 VM migration management part 4 Network control part 5 Virtual machine group 6 Network controller 7 Virtual machine 8 Network apparatus 9 Tenant

Claims (9)

複数の仮想マシンからなる単一のシステムのマイグレーションにおいて、
各システムにそれぞれ対応する仮想マシンの情報に基づいて、前記単一のシステムに対応する全ての仮想マシンのマイグレーションが完了するまで、マイグレーション元にパケットが届くようにネットワークを制御し、
前記単一のシステムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行う
ことを特徴とする仮想マシンのマイグレーション方法。 In the migration of a single system consisting of multiple virtual machines,
Based on the information of the virtual machine corresponding to each system, until the migration of all virtual machines corresponding to the single system is completed, the network is controlled so that the packet reaches the migration source,
A virtual machine migration method comprising: performing network switching after confirming that migration of all virtual machines belonging to the single system is completed. 前記ネットワークの切り替えを行う際に、ネットワークの集中制御を使う
ことを特徴とする請求項１に記載の仮想マシンのマイグレーション方法。 The virtual machine migration method according to claim 1, wherein centralized network control is used when the network is switched. 前記システムに属する少なくとも一つの仮想マシンのマイグレーションが失敗した場合に、前記ネットワークの切り替えを行わず、すでにマイグレーション先にコピーしたデータを削除し、マイグレーションをエラーで終了する
ことを特徴とする請求項１又は請求項２に記載の仮想マシンのマイグレーション方法。 2. When migration of at least one virtual machine belonging to the system fails, the data that has already been copied to the migration destination is deleted without switching the network, and the migration ends with an error. Alternatively, the virtual machine migration method according to claim 2. 複数の仮想マシンからなる単一のシステムのマイグレーションを行うマイグレーション装置であって、
各システムにそれぞれ対応する仮想マシンの情報に基づいて、前記単一のシステムに対応する全ての仮想マシンのマイグレーションが完了するまで、マイグレーション元にパケットが届くようにネットワークを制御し、
前記単一のシステムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行う
ことを特徴とするマイグレーション装置。 A migration device that performs migration of a single system consisting of multiple virtual machines,
Based on the information of the virtual machine corresponding to each system, until the migration of all virtual machines corresponding to the single system is completed, the network is controlled so that the packet reaches the migration source,
A migration apparatus that performs network switching after confirming that migration of all virtual machines belonging to the single system is completed. 前記ネットワークの切り替えを行う際に、ネットワークを集中制御するネットワーク制御部を備える
ことを特徴とする請求項４に記載のマイグレーション装置。 The migration apparatus according to claim 4, further comprising a network control unit that performs centralized control of the network when the network is switched. 前記システムに属する少なくとも一つの仮想マシンのマイグレーションが失敗した場合に、前記ネットワークの切り替えを行わず、すでにマイグレーション先にコピーしたデータを削除し、マイグレーションをエラーで終了する
ことを特徴とする請求項４又は請求項５に記載のマイグレーション装置。 If the migration of at least one virtual machine belonging to the system fails, without switching of the network, according to claim 4 which removes the data already copied to the migration destination, characterized by terminating the migration error Or the migration apparatus of Claim 5 . コンピュータに、
複数の仮想マシンからなる単一のシステムのマイグレーションにおいて、各システムにそれぞれ対応する仮想マシンの情報に基づいて、前記単一のシステムに対応する全ての仮想マシンのマイグレーションが完了するまで、マイグレーション元にパケットが届くようにネットワークを制御する処理、
前記単一のシステムに属する全ての仮想マシンのマイグレーションが終了したことを確認してからネットワークの切り替えを行う処理
を実行させることを特徴とするプログラム。 On the computer,
In the migration of a single system consisting of multiple virtual machines, based on the information of the virtual machine corresponding to each system, until the migration of all virtual machines corresponding to the single system is completed, The process of controlling the network so that packets arrive,
A program for executing a process of switching networks after confirming that migration of all virtual machines belonging to the single system is completed. 前記コンピュータに、
前記ネットワークの切り替えを行う際に、ネットワークの集中制御を使う処理を実行させることを特徴とする請求項７に記載のプログラム。 In the computer,
The program according to claim 7, wherein when the network is switched, a process using centralized control of the network is executed. 前記コンピュータに、
前記システムに属する少なくとも一つの仮想マシンのマイグレーションが失敗した場合に、前記ネットワークの切り替えを行わず、すでにマイグレーション先にコピーしたデータを削除し、マイグレーションをエラーで終了する処理
を実行させることを特徴とする請求項７又は請求項８に記載のプログラム。 In the computer,
When migration of at least one virtual machine belonging to the system fails, the network is not switched, the data already copied to the migration destination is deleted, and the process of ending migration with an error is executed. The program according to claim 7 or 8.
JP2014521321A 2012-06-22 2013-06-10 Virtual machine migration method, migration apparatus and program Active JP6304493B2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012140687 2012-06-22
JP2012140687 2012-06-22
PCT/JP2013/065967 WO2013191021A1 (en) 2012-06-22 2013-06-10 Virtual machine migration method, migration device and program

Publications (2)

Publication Number Publication Date
JPWO2013191021A1 JPWO2013191021A1 (en) 2016-05-26
JP6304493B2 true JP6304493B2 (en) 2018-04-04

Family

ID=49768621

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014521321A Active JP6304493B2 (en) 2012-06-22 2013-06-10 Virtual machine migration method, migration apparatus and program

Country Status (2)

Country Link
JP (1) JP6304493B2 (en)
WO (1) WO2013191021A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6167092B2 (en) * 2014-10-16 2017-07-19 ソフトバンク株式会社 Work management apparatus and program

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8234377B2 (en) * 2009-07-22 2012-07-31 Amazon Technologies, Inc. Dynamically migrating computer networks
JP5717164B2 (en) * 2009-10-07 2015-05-13 日本電気株式会社 Computer system and computer system maintenance method
JP5190084B2 (en) * 2010-03-30 2013-04-24 株式会社日立製作所 Virtual machine migration method and system
JP5476261B2 (en) * 2010-09-14 2014-04-23 株式会社日立製作所 Multi-tenant information processing system, management server, and configuration management method
JP5614226B2 (en) * 2010-10-15 2014-10-29 富士通株式会社 Virtual machine control device, virtual machine control program, and virtual machine control method

Also Published As

Publication number Publication date
JPWO2013191021A1 (en) 2016-05-26
WO2013191021A1 (en) 2013-12-27

Similar Documents

Publication Publication Date Title
US11012351B2 (en) Service path computation for service insertion
JP6335363B2 (en) Provision of virtual security appliance architecture for virtual cloud infrastructure
US10003534B2 (en) Multiple active L3 gateways for logical networks
US8959215B2 (en) Network virtualization
Koponen et al. Network virtualization in multi-tenant datacenters
US10083026B1 (en) In-service software upgrade of software-defined networking controller
JP5976942B2 (en) System and method for providing policy-based data center network automation
JP5347982B2 (en) Virtual network control program, virtual network control method, and management apparatus
Duan et al. A load balancing and multi-tenancy oriented data center virtualization framework
US20120131662A1 (en) Virtual local area networks in a virtual machine environment
JP2014135721A (en) Device and method for distributing traffic of data center network
WO2015171469A1 (en) Constructing and operating high-performance unified compute infrastructure across geo-distributed datacenters
CN106126318A (en) The dynamic migration method of virtual machine in a kind of Openstack cloud platform
JP2011070549A (en) Computer system and migration method of virtual machine
CN107005471A (en) Universal Subscriber premises equipment
JP5804189B2 (en) Information processing system, information processing method, program
JP7190569B2 (en) Data center traffic sharing method, apparatus, device and storage medium
WO2015149636A1 (en) Data flow migration method and device
JP5861772B2 (en) Network appliance redundancy system, control device, network appliance redundancy method and program
CN109587286A (en) A kind of equipment connection control method and device
US20190132152A1 (en) Dynamic customer vlan identifiers in a telecommunications network
KR20140049115A (en) Method and system of supporting multiple controller in software defined networking
US20210176172A1 (en) Packet forwarding method, device and apparatus, and storage medium
US11868794B2 (en) Network system, management method and apparatus thereof, and server
US20200159556A1 (en) Traffic forwarding during migration

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20160516

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20170412

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170609

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20171206

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180130

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20180207

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20180220

R150 Certificate of patent or registration of utility model

Ref document number: 6304493

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150