JP2010124129A - Virtual computer transmission method, system, management device, and program - Google Patents

Virtual computer transmission method, system, management device, and program Download PDF

Info

Publication number
JP2010124129A
JP2010124129A JP2008294647A JP2008294647A JP2010124129A JP 2010124129 A JP2010124129 A JP 2010124129A JP 2008294647 A JP2008294647 A JP 2008294647A JP 2008294647 A JP2008294647 A JP 2008294647A JP 2010124129 A JP2010124129 A JP 2010124129A
Authority
JP
Japan
Prior art keywords
layer
physical
address
computer
virtual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008294647A
Other languages
Japanese (ja)
Other versions
JP5079665B2 (en
Inventor
Takahiro Miyamoto
崇弘 宮本
Michiaki Hayashi
通秋 林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2008294647A priority Critical patent/JP5079665B2/en
Publication of JP2010124129A publication Critical patent/JP2010124129A/en
Application granted granted Critical
Publication of JP5079665B2 publication Critical patent/JP5079665B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)
  • Small-Scale Networks (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a virtual computer transmission method, a system, a management device, and a program for transferring a packet addressed to a virtual address to a physical computer of a destination by controlling a network topology after the virtual computer is moved. <P>SOLUTION: A second physical computer to be a destination allocates a virtual layer 2 address of the virtual computer to a physical interface of the second physical computer, transmits a packet toward a branching switch between the second physical computer and a first physical computer 1 in a layer 2 network, has a switch comprising the layer 2 network learn the virtual layer 2 address, and returns the address to a physical layer 2 address, and allocates it to the physical interface of the second physical computer. The first physical computer to be an origin of movement moves the virtual computer toward a layer 3 address of the second physical computer. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、仮想計算機送信方法、システム、管理装置及びプログラムに関する。   The present invention relates to a virtual machine transmission method, system, management apparatus, and program.

仮想計算機とは、仮想的に作り出された1台のコンピュータであって、物理計算機の中で稼働する。仮想計算機は、OS(Operating System)及びアプリケーションを包括した単位である。仮想計算機は、物理計算機に搭載されたプロセッサを時分割で利用し、物理計算機のディスクを領域分割で利用し、物理計算機のメモリを仮想記憶として利用する。   A virtual computer is a computer created virtually and operates in a physical computer. The virtual machine is a unit that includes an OS (Operating System) and applications. The virtual computer uses a processor mounted on the physical computer in time division, uses a disk of the physical computer in area division, and uses the memory of the physical computer as virtual storage.

異なる物理計算機の間で、ネットワークを介して仮想計算機を移動させる技術がある(例えば特許文献1及び2参照)。この技術によれば、移動元の物理計算機で稼働中の仮想計算機を一時的に停止し、仮想資源状態情報を保持する。移動元の物理計算機は、仮想計算機と共に、その仮想資源状態情報を、移動先の物理計算機へ送信する。移動先の物理計算機は、移動元の物理計算機で停止された状態から、仮想計算機を再起動させる。これによって、仮想計算機が、移動後も継続して運用されることとなる。   There is a technique for moving a virtual machine between different physical computers via a network (see, for example, Patent Documents 1 and 2). According to this technology, a virtual computer that is operating on a migration source physical computer is temporarily stopped, and virtual resource state information is retained. The source physical computer transmits the virtual resource state information together with the virtual computer to the destination physical computer. The destination physical computer restarts the virtual computer from the state stopped by the source physical computer. As a result, the virtual machine continues to be operated even after movement.

また、仮想計算機を管理し、複数の物理計算機の間における仮想計算機の移動を管理する管理サーバを備える技術もある(例えば特許文献3参照)。この技術によれば、仮想計算機は、一時的に停止されることなく、動的マイグレーションによって移動される。「動的マイグレーション」とは、仮想計算機が、移動中に、一時的停止及び再起動されないことを意味する。これは、移動元の物理計算機と移動先の物理計算機との間で、稼働中の仮想計算機のメモリデータの差分コピーを繰り返すことによって実現される。   There is also a technology that includes a management server that manages virtual machines and manages the movement of virtual machines between a plurality of physical computers (see, for example, Patent Document 3). According to this technology, the virtual machine is moved by dynamic migration without being temporarily stopped. “Dynamic migration” means that the virtual machine is not temporarily stopped and restarted during movement. This is realized by repeating the differential copy of the memory data of the operating virtual machine between the migration source physical computer and the migration destination physical computer.

特開平10−283210号公報JP-A-10-283210 特開2006−72591号公報JP 2006-72591 A 特表2007−536657号公報Special table 2007-536657 gazette

仮想計算機を移動させた後、ネットワークに配置されたスイッチは、移動先の物理計算機の下における仮想計算機の仮想MACアドレスを、経路テーブルに既に学習し終えていることを前提としている。そうでない場合、仮想計算機が移動した後、仮想計算機を宛先とするパケットは、移動元の物理計算機へ転送されることとなる。   After moving the virtual machine, it is assumed that the switch arranged in the network has already learned the virtual MAC address of the virtual machine under the destination physical machine in the route table. Otherwise, after the virtual machine has moved, the packet destined for the virtual machine will be transferred to the source physical computer.

しかしながら、前述したいずれの従来技術であっても、移動元の物理計算機と移動先の物理計算機との間のネットワークに配置されたスイッチおける経路制御(ネットワークトポロジの変更)については、検討されていない。また、既存の仮想計算機は、広くともレイヤ3サブネット内での仮想計算機の移動のみを想定している。従って、レイヤ3サブネットを越えて仮想計算機が移動する場合についてまで検討されていない。   However, none of the above-described conventional techniques has been studied for path control (change of network topology) in a switch arranged in a network between a source physical computer and a destination physical computer. . In addition, existing virtual machines are assumed to move only within a layer 3 subnet at most. Therefore, the case where the virtual machine moves beyond the layer 3 subnet has not been studied.

そこで、本発明は、仮想計算機が移動した後、ネットワークトポロジを制御することによって、仮想レイヤ2アドレス及びレイヤ3アドレスを宛先とするパケットが移動先の物理計算機へ転送される仮想計算機送信方法、システム、管理装置及びプログラムを提供することを目的とする。   Therefore, the present invention provides a virtual computer transmission method and system in which a packet whose destination is a virtual layer 2 address and a layer 3 address is transferred to a destination physical computer by controlling the network topology after the virtual computer has moved. An object is to provide a management apparatus and a program.

本発明によれば、複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機と、該物理計算機で稼働している仮想計算機を管理する管理装置とを有するシステムについて、物理計算機は、レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有し、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる仮想計算機送信方法であって、
第2の物理計算機が、当該第2の物理計算機の物理インタフェースに対して、仮想計算機の仮想レイヤ2アドレスを割り当てる第1のステップと、
第2の物理計算機が、レイヤ2ネットワークにおける第1の物理計算機との間の分岐スイッチへ向けてパケットを送信し、レイヤ2ネットワークを構成するスイッチに、仮想レイヤ2アドレスを学習させる第2のステップと、
第2の物理計算機が、第2の物理計算機の物理インタフェースに対して、物理レイヤ2アドレスに戻して割り当てる第3のステップと、
第1の物理計算機が、仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させる第4のステップと
を有することを特徴とする。
According to the present invention, a plurality of physical computers connected to a layer 2 network logically configured in a tree shape by a plurality of switches, and a management apparatus that manages virtual computers operating on the physical computers are provided. Regarding the system, the physical computer has a physical layer 2 address and a layer 3 address in a physical interface connected to the layer 2 network, and the virtual computer has a virtual layer 2 address and a layer 3 address in the virtual interface, A virtual machine transmission method for moving a virtual machine running on a first physical computer to a second physical computer after movement,
A first step in which a second physical computer assigns a virtual layer 2 address of the virtual computer to a physical interface of the second physical computer;
A second step in which the second physical computer transmits a packet to a branching switch between the second physical computer and the first physical computer in the layer 2 network, and causes the switch constituting the layer 2 network to learn the virtual layer 2 address. When,
A third step in which the second physical computer assigns the physical interface of the second physical computer back to the physical layer 2 address;
The first physical computer has a fourth step of moving the virtual computer toward the layer 3 address of the second physical computer.

本発明の仮想計算機送信方法における他の実施形態によれば、
第1の物理計算機と第2の物理計算機とが、レイヤ3サブネットを越えて、異なるレイヤ2ネットワークに接続されている場合、
第1の物理計算機が、第2の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するステップと、
第2の物理計算機が、第1の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するステップと、
第2の物理計算機が、仮想計算機の仮想インタフェースを、レイヤ3トンネルに対応付けるステップと、
第1の物理計算機が、仮想計算機のレイヤ3アドレスへの経路制御を、レイヤ3トンネルの入口アドレスに対応付けるステップと、
第1の物理計算機が、仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させるステップと
を有することも好ましい。
According to another embodiment of the virtual machine transmission method of the present invention,
When the first physical computer and the second physical computer are connected to different layer 2 networks across the layer 3 subnet,
A first physical computer creating a layer 3 tunnel with a layer 3 address of a second physical computer;
A second physical computer creating a layer 3 tunnel with the layer 3 address of the first physical computer;
A second physical computer associating a virtual interface of the virtual computer with a layer 3 tunnel;
The first physical computer associating the route control to the layer 3 address of the virtual computer with the entrance address of the layer 3 tunnel;
It is also preferable that the first physical computer has a step of moving the virtual computer toward the layer 3 address of the second physical computer.

本発明の仮想計算機送信方法における他の実施形態によれば、第2のステップについて、第2の物理計算機は、
分岐スイッチのレイヤ3アドレスが特定されている場合、該レイヤ3アドレスへ向けてping(Packet INternet Groper)パケットを送信し、
分岐スイッチのレイヤ3アドレスが特定されていない場合、該分岐スイッチの物理アドレスへ向けてEthernet OAM Continuity Check (CC)又はLoop Back (LB)のメッセージを送信することも好ましい。
According to another embodiment of the virtual computer transmission method of the present invention, for the second step, the second physical computer is:
When the layer 3 address of the branch switch is specified, a ping (Packet Internet Groper) packet is transmitted to the layer 3 address,
When the layer 3 address of the branch switch is not specified, it is also preferable to transmit an Ethernet OAM Continuity Check (CC) or Loop Back (LB) message to the physical address of the branch switch.

本発明の仮想計算機送信方法における他の実施形態によれば、システムは、管理装置を更に有し、管理装置は、レイヤ2ネットワークにおける第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索し、第1のステップから第4のステップを実行すべき制御メッセージを、第1の物理計算機及び第2の物理計算機へ送信することも好ましい。   According to another embodiment of the virtual computer transmission method of the present invention, the system further includes a management device, and the management device branches between the first physical computer and the second physical computer in the layer 2 network. It is also preferable to search for a switch and send a control message to execute the first step to the fourth step to the first physical computer and the second physical computer.

本発明によれば、複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機を有するシステムについて、物理計算機は、レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有しており、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる仮想計算機送信システムであって、
第2の物理計算機は、
当該第2の物理計算機の物理インタフェースに対して、仮想計算機の仮想レイヤ2アドレスを割り当てるアドレス詐称手段と、
レイヤ2ネットワークにおける第1の物理計算機との間の分岐スイッチへ向けてパケットを送信し、レイヤ2ネットワークを構成するスイッチに、仮想レイヤ2アドレスを学習させる学習パケット送信手段と、
第2の物理計算機の物理インタフェースに対して、物理レイヤ2アドレスに戻して割り当てるアドレス復旧手段と
を有し、
第1の物理計算機は、仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させる仮想計算機送信手段を有することを特徴とする。
According to the present invention, for a system having a plurality of physical computers connected to a layer 2 network that is logically configured in a tree structure by a plurality of switches, the physical computer is physically connected to a physical interface connected to the layer 2 network. The virtual machine has a layer 2 address and a layer 3 address, the virtual machine has a virtual layer 2 address and a layer 3 address in the virtual interface, and the virtual machine running on the first physical computer before the movement is A virtual machine transmission system for moving to a second physical computer after movement,
The second physical computer is
An address spoofing means for assigning a virtual layer 2 address of the virtual machine to the physical interface of the second physical computer;
Learning packet transmitting means for transmitting a packet toward a branch switch between the first physical computer in the layer 2 network and for causing the switch constituting the layer 2 network to learn a virtual layer 2 address;
Address recovery means for assigning the physical interface of the second physical computer back to the physical layer 2 address;
The first physical computer has a virtual computer transmission means for moving the virtual computer toward the layer 3 address of the second physical computer.

本発明の仮想計算機送信システムにおける他の実施形態によれば、第1の物理計算機と第2の物理計算機とが、レイヤ3サブネットを越えて、異なるレイヤ2ネットワークに接続されている場合、
第1の物理計算機は、
第2の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するトンネル生成手段と、
仮想計算機のレイヤ3アドレスへの経路制御を、レイヤ3トンネルの入口アドレスに対応付けるトンネル経路制御手段と
を更に有し、
第2の物理計算機は、
第1の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するトンネル生成手段と、
仮想計算機の仮想インタフェースを、レイヤ3トンネルに対応付けるトンネル割当手段と
を更に有し、
仮想計算機送信手段は、仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させることも好ましい。
According to another embodiment of the virtual computer transmission system of the present invention, when the first physical computer and the second physical computer are connected to different layer 2 networks across the layer 3 subnet,
The first physical computer is
Tunnel generating means for generating a layer 3 tunnel with the layer 3 address of the second physical computer;
Tunnel control means for associating the route control to the layer 3 address of the virtual machine with the entrance address of the layer 3 tunnel;
The second physical computer is
Tunnel generating means for generating a layer 3 tunnel with the layer 3 address of the first physical computer;
Tunnel allocation means for associating the virtual interface of the virtual machine with the layer 3 tunnel;
It is also preferable that the virtual computer transmission means move the virtual computer toward the layer 3 address of the second physical computer.

本発明の仮想計算機送信システムにおける他の実施形態によれば、
学習パケット送信手段は、
分岐スイッチのレイヤ3アドレスが特定されている場合、該レイヤ3アドレスへ向けてpingパケットを送信し、
分岐スイッチのレイヤ3アドレスが特定されていない場合、該分岐スイッチの物理レイヤ2アドレスへ向けてEthernet OAM Continuity Check (CC)又はLoop Back (LB)のメッセージを送信することも好ましい。
According to another embodiment of the virtual machine transmission system of the present invention,
The learning packet transmission means
When the layer 3 address of the branch switch is specified, a ping packet is transmitted to the layer 3 address,
When the layer 3 address of the branch switch is not specified, it is also preferable to transmit an Ethernet OAM Continuity Check (CC) or Loop Back (LB) message to the physical layer 2 address of the branch switch.

本発明によれば、複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機を有するシステムについて、物理計算機は、レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有しており、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる管理装置であって、
レイヤ2ネットワークについて第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索する分岐スイッチ探索手段と、
当該第2の物理計算機の物理インタフェースに対して、仮想計算機の仮想レイヤ2アドレスを割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス詐称制御手段と、
第2の物理計算機が、分岐スイッチへ向けてパケットを送信し、レイヤ2ネットワークの中のスイッチに、仮想レイヤ2アドレスを学習させるべく、第2の物理計算機へ制御メッセージを送信するアドレス学習制御手段と、
第2の物理計算機の物理インタフェースに対して、物理レイヤ2アドレスに戻して割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス復旧制御手段と、
第1の物理計算機が、仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させるべく、第1の物理計算機へ制御メッセージを送信する仮想計算機移動制御手段と
を有することを特徴とする。
According to the present invention, for a system having a plurality of physical computers connected to a layer 2 network that is logically configured in a tree structure by a plurality of switches, the physical computer is physically connected to a physical interface connected to the layer 2 network. The virtual machine has a layer 2 address and a layer 3 address, the virtual machine has a virtual layer 2 address and a layer 3 address in the virtual interface, and the virtual machine running on the first physical computer before the movement is A management device to be moved to the second physical computer after the movement,
Branch switch search means for searching for a branch switch between the first physical computer and the second physical computer for the layer 2 network;
Address spoofing control means for transmitting a control message to the second physical computer in order to assign a virtual layer 2 address of the virtual computer to the physical interface of the second physical computer;
Address learning control means for transmitting a control message to the second physical computer so that the second physical computer transmits a packet toward the branch switch and causes the switch in the layer 2 network to learn the virtual layer 2 address. When,
Address recovery control means for transmitting a control message to the second physical computer to assign the physical interface of the second physical computer back to the physical layer 2 address;
The first physical computer has virtual computer movement control means for transmitting a control message to the first physical computer in order to move the virtual computer toward the layer 3 address of the second physical computer. To do.

本発明によれば、複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機を有するシステムについて、物理計算機は、レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有しており、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる管理装置に搭載されるコンピュータを機能させるプログラムであって、
レイヤ2ネットワークについて第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索する分岐スイッチ探索手段と、
当該第2の物理計算機の物理インタフェースに対して、仮想計算機の仮想レイヤ2アドレスを割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス詐称制御手段と、
第2の物理計算機が、分岐スイッチへ向けてパケットを送信し、レイヤ2ネットワークの中のスイッチに、仮想レイヤ2アドレスを学習させるべく、第2の物理計算機へ制御メッセージを送信するアドレス学習制御手段と、
第2の物理計算機の物理インタフェースに対して、物理レイヤ2アドレスに戻して割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス復旧制御手段と、
第1の物理計算機が、仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させるべく、第1の物理計算機へ制御メッセージを送信する仮想計算機移動制御手段と
してコンピュータを機能させることを特徴とする。
According to the present invention, for a system having a plurality of physical computers connected to a layer 2 network that is logically configured in a tree structure by a plurality of switches, the physical computer is physically connected to a physical interface connected to the layer 2 network. The virtual machine has a layer 2 address and a layer 3 address, the virtual machine has a virtual layer 2 address and a layer 3 address in the virtual interface, and the virtual machine running on the first physical computer before the movement is A program for causing a computer mounted in a management apparatus to be moved to a second physical computer after movement,
Branch switch search means for searching for a branch switch between the first physical computer and the second physical computer for the layer 2 network;
Address spoofing control means for transmitting a control message to the second physical computer in order to assign a virtual layer 2 address of the virtual computer to the physical interface of the second physical computer;
Address learning control means for transmitting a control message to the second physical computer so that the second physical computer transmits a packet toward the branch switch and causes the switch in the layer 2 network to learn the virtual layer 2 address. When,
Address recovery control means for transmitting a control message to the second physical computer to assign the physical interface of the second physical computer back to the physical layer 2 address;
The first physical computer causes the computer to function as virtual computer movement control means for transmitting a control message to the first physical computer in order to move the virtual computer toward the layer 3 address of the second physical computer. Features.

本発明の仮想計算機送信方法、システム、管理装置及びプログラムによれば、仮想計算機が移動した後、ネットワークトポロジを制御することによって、仮想レイヤ2アドレス及びレイヤ3アドレスを宛先とするパケットが、移動先の物理計算機へ転送される。   According to the virtual machine transmission method, system, management apparatus, and program of the present invention, after the virtual machine moves, the packet whose destination is the virtual layer 2 address and the layer 3 address is changed by controlling the network topology. To the physical computer.

以下では、図面を用いて、本発明を実施するための最良の形態について詳細に説明する。   Hereinafter, the best mode for carrying out the present invention will be described in detail with reference to the drawings.

図1は、レイヤ3サブネット内で仮想計算機を移動させるシステム構成図である。   FIG. 1 is a system configuration diagram for moving a virtual machine within a layer 3 subnet.

図1のシステムによれば、複数のスイッチ4によって構成されたレイヤ2ネットワークに、複数の物理計算機1が接続されている。レイヤ2ネットワークは、例えばイーサネット(登録商標)であって、ループを構成することのなく、論理的にツリー状に構成される。また、管理装置3も、レイヤ2ネットワークに接続されており、物理計算機1で稼働する仮想計算機2を管理する。   According to the system of FIG. 1, a plurality of physical computers 1 are connected to a layer 2 network configured by a plurality of switches 4. The layer 2 network is, for example, Ethernet (registered trademark), and is logically configured in a tree shape without forming a loop. The management device 3 is also connected to the layer 2 network and manages the virtual computer 2 operating on the physical computer 1.

図1によれば、移動元の第1の物理計算機1の上で、仮想計算機2が稼働している。仮想計算機2には、仮想MAC(Media Access Control)アドレス(レイヤ2アドレス)及び仮想IP(Internet Protocol)アドレス(レイヤ3アドレス)が付与される。仮想MACアドレスは、ランダムに生成された24ビットのアドレスであり、上位12ビットは、仮想計算機のベンダIDである。   According to FIG. 1, the virtual machine 2 is operating on the first physical machine 1 that is the migration source. The virtual computer 2 is assigned a virtual MAC (Media Access Control) address (layer 2 address) and a virtual IP (Internet Protocol) address (layer 3 address). The virtual MAC address is a 24-bit address generated randomly, and the upper 12 bits are a vendor ID of the virtual machine.

物理計算機1は、物理NIC(Network Interface Card)によって、スイッチ4に接続される。物理計算機1にも、物理MACアドレス及びIPアドレスが付与される。物理計算機1は、仮想インタフェース(vif: virtual interface)を有する仮想ブリッジ部を更に有し、仮想ブリッジ部は物理NICに接続される。そして、仮想計算機2の仮想MACアドレスは、仮想インタフェースにマッピングされる。仮想ブリッジ部は、仮想計算機2と物理NICとの間でスイッチとして機能する。   The physical computer 1 is connected to the switch 4 by a physical NIC (Network Interface Card). The physical computer 1 is also given a physical MAC address and an IP address. The physical computer 1 further includes a virtual bridge unit having a virtual interface (vif: virtual interface), and the virtual bridge unit is connected to the physical NIC. The virtual MAC address of the virtual machine 2 is mapped to the virtual interface. The virtual bridge unit functions as a switch between the virtual computer 2 and the physical NIC.

仮想計算機2は、移動元の第1の物理計算機1から移動先の第2の物理計算機1へ移動している。仮想計算機2は、移動後、仮想MACアドレスの接続先を、第2の物理計算機1の仮想インタフェースに切り替える。これによって、仮想計算機2は、第2の物理計算機1の上で、パケットを送受信することができる。   The virtual computer 2 has moved from the first physical computer 1 that is the movement source to the second physical computer 1 that is the movement destination. After moving, the virtual machine 2 switches the connection destination of the virtual MAC address to the virtual interface of the second physical computer 1. Thereby, the virtual machine 2 can transmit and receive packets on the second physical machine 1.

図2は、レイヤ3サブネット内で仮想計算機を移動させるシーケンス図である。   FIG. 2 is a sequence diagram for moving a virtual machine within a layer 3 subnet.

(S0)管理装置3は、ネットワークトポロジデータベースを有し、レイヤ2ネットワークにおけるスイッチのトポロジ情報を蓄積している。管理装置3は、ネットワークトポロジデータベースを用いて、レイヤ2ネットワークにおける第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索することができる。「分岐スイッチ」とは、第1の物理計算機及び第2の物理計算機から見て、上層のスイッチを辿って、分岐点となるスイッチを意味する。管理装置3は、分岐スイッチのIPアドレス及びMACアドレスを探索する。 (S0) The management device 3 has a network topology database and accumulates switch topology information in the layer 2 network. The management device 3 can search for a branch switch between the first physical computer and the second physical computer in the layer 2 network using the network topology database. The “branch switch” means a switch that becomes a branch point by following an upper layer switch as viewed from the first physical computer and the second physical computer. The management device 3 searches for the IP address and MAC address of the branch switch.

管理装置3が、ネットワークトポロジデータベースを有することなく、分岐スイッチを発見できない場合、そのツリー状の最上層のルートスイッチを、分岐スイッチとして選択してもよい。レイヤ2ネットワークがスパニングツリーによって構成されている場合、最小のブリッジIDのスイッチがルートスイッチである。   If the management device 3 cannot find a branch switch without having a network topology database, the tree-shaped root switch of the tree may be selected as the branch switch. When the layer 2 network is configured by a spanning tree, the switch with the smallest bridge ID is the root switch.

仮想計算機には、例えばXen(登録商標)及びVMware(登録商標)がある。Xenは、ケンブリッジ大学で研究された後、GNU(General Public License)の元で公開され、現在、XenSource社によって開発されている。Xenでは、仮想計算機の単位を「ドメイン」と称する。VMwareは、VMware社によって開発されており、物理計算機を「ホストOS」と称し、仮想計算機を「ゲストOS」と称する。   Examples of virtual machines include Xen (registered trademark) and VMware (registered trademark). Xen was researched at the University of Cambridge, released under the GNU (General Public License), and is currently being developed by XenSource. In Xen, a unit of a virtual machine is called a “domain”. The VMware is developed by VMware, and the physical computer is referred to as “host OS” and the virtual computer is referred to as “guest OS”.

Xenの場合、以下のような設定ファイルに、仮想MACアドレスが登録されている。
kernel = '/boot/vmlinuz-2.6.24-19-xen'
ramdisk = '/boot/initrd.img-2.6.24-19-xen'
memory = '128'
root = '/dev/xvda2 ro'
disk = ['tap:aio:/vm/domains/vm001/swap.img,xvda1,w',
'tap:aio:/vm/domains/vm001/disk.img,xvda2,w',]
name = 'vm001'
vif = [ 'ip=192.168.10.111, mac=00:16:3E:A8:A0:88, bridge=xenbr1' ]
on_poweroff = 'destroy'
on_reboot = 'restart'
on_crash = 'restart'
extra = '2 console=xvc0'
ここで、"vif"は、仮想インタフェースを表し、"ip=192.168.10.111"は、仮想IPアドレスを表し、"mac=00:16:3E:A8:A0:88"は、仮想MACアドレスを表し、"bridge=xenbr1"は、仮想ブリッジの名前を表す。
In the case of Xen, the virtual MAC address is registered in the following setting file.
kernel = '/boot/vmlinuz-2.6.24-19-xen'
ramdisk = '/boot/initrd.img-2.6.24-19-xen'
memory = '128'
root = '/ dev / xvda2 ro'
disk = ['tap: aio: /vm/domains/vm001/swap.img,xvda1,w',
'tap: aio: /vm/domains/vm001/disk.img,xvda2,w',]
name = 'vm001'
vif = ['ip = 192.168.10.111, mac = 00: 16: 3E: A8: A0: 88, bridge = xenbr1']
on_poweroff = 'destroy'
on_reboot = 'restart'
on_crash = 'restart'
extra = '2 console = xvc0'
Here, “vif” represents a virtual interface, “ip = 192.168.10.111” represents a virtual IP address, and “mac = 00: 16: 3E: A8: A0: 88” represents a virtual MAC address. “Bridge = xenbr1” represents the name of the virtual bridge.

また、VMwareの場合、以下のような設定ファイルに、仮想MACアドレスが登録されている。
ide0:0.redo = ""
ide1:0.startConnected = "TRUE"
ethernet0.addressType = "generated"
uuid.location = "56 4d ab 6d a7 e8 64 c2-c3 cc f8 35 65 f4 b9 1e"
uuid.bios = "56 4d ab 6d a7 e8 64 c2-c3 cc f8 35 65 f4 b9 1e"
ethernet0.generatedAddress = "00:0c:29:f4:b9:1e"
ethernet0.generatedAddressOffset = "0"
tools.syncTime = "FALSE"
ここで、ethernet0.generatedAddress = "00:0c:29:f4:b9:1e"が、仮想MACアドレスを表す。
In the case of VMware, the virtual MAC address is registered in the following setting file.
ide0: 0.redo = ""
ide1: 0.startConnected = "TRUE"
ethernet0.addressType = "generated"
uuid.location = "56 4d ab 6d a7 e8 64 c2-c3 cc f8 35 65 f4 b9 1e"
uuid.bios = "56 4d ab 6d a7 e8 64 c2-c3 cc f8 35 65 f4 b9 1e"
ethernet0.generatedAddress = "00: 0c: 29: f4: b9: 1e"
ethernet0.generatedAddressOffset = "0"
tools.syncTime = "FALSE"
Here, ethernet0.generatedAddress = “00: 0c: 29: f4: b9: 1e” represents the virtual MAC address.

仮想MACアドレスを含む設定ファイルは、仮想計算機が稼働している物理計算機の共有ディスクに記憶されていると共に、管理装置3によっても管理されている。   The setting file including the virtual MAC address is stored in the shared disk of the physical computer on which the virtual computer is operating, and is also managed by the management device 3.

(S1)第2の物理計算機が、当該第2の物理計算機の物理インタフェースに対して、仮想計算機2の仮想MACアドレスを割り当てる。即ち、第2の物理計算機は、仮想MACアドレスに詐称される。尚、第2の物理計算機は、管理装置3からのアドレス詐称の制御メッセージを受信した際に、実行されるものであってもよい。 (S1) The second physical computer assigns the virtual MAC address of the virtual computer 2 to the physical interface of the second physical computer. That is, the second physical computer is misrepresented as a virtual MAC address. The second physical computer may be executed when an address spoofing control message is received from the management device 3.

例えばLinux(登録商標)の場合、第2の物理計算機は、以下のようなコマンドを実行することによって、仮想MACアドレスに詐称することができる。
# ifdown eth0 (eth0インタフェースの停止)
# ifconfig eth0 hw ether 00:16:3E:A8:A0:88 (仮想MACアドレスに詐称)
# ifup eth0 (eth0インタフェースの起動)
For example, in the case of Linux (registered trademark), the second physical computer can be misrepresented as a virtual MAC address by executing the following command.
# ifdown eth0 (stop eth0 interface)
# ifconfig eth0 hw ether 00: 16: 3E: A8: A0: 88 (spoofed as a virtual MAC address)
# ifup eth0 (start up eth0 interface)

(S2)第2の物理計算機が、分岐スイッチへ向けてパケットを送信する。このパケットの送信元MACアドレスは、仮想MACアドレスとなる。このパケットを中継するスイッチは、仮想MACアドレスに基づいて経路テーブルを更新する。これによって、レイヤ2ネットワークを構成するスイッチに、仮想MACアドレスを学習させることができる。尚、第2の物理計算機は、管理装置3からの学習パケット送信の制御メッセージを受信した際に、実行されるものであってもよい。 (S2) The second physical computer transmits a packet toward the branch switch. The source MAC address of this packet is a virtual MAC address. The switch that relays the packet updates the route table based on the virtual MAC address. As a result, the virtual MAC address can be learned by the switches constituting the layer 2 network. Note that the second physical computer may be executed when a learning packet transmission control message is received from the management device 3.

ここで、分岐スイッチのレイヤ3アドレスが特定されている場合、そのレイヤ3アドレスへ向けてping(Packet INternet Groper)パケットが送信される。pingパケットは、相手方物理計算機のIPアドレスへ向けて送信される、ICMPの32バイトのパケットであって、接続性及び応答時間等を診断する。一方、分岐スイッチのレイヤ3アドレスが特定されていない場合、その分岐スイッチの物理アドレスへ向けて、接続性確認のためのEthernet OAM Continuity Check (CC)又はLoop Back (LB)のメッセージが送信される。   Here, when the layer 3 address of the branch switch is specified, a ping (Packet Internet Groper) packet is transmitted to the layer 3 address. The ping packet is an ICMP 32-byte packet transmitted toward the IP address of the counterpart physical computer, and diagnoses connectivity and response time. On the other hand, if the layer 3 address of the branch switch is not specified, an Ethernet OAM Continuity Check (CC) or Loop Back (LB) message for connectivity check is transmitted to the physical address of the branch switch. .

(S3)第2の物理計算機が、第2の物理計算機の物理インタフェースに対して、物理MACアドレスに戻して割り当てる。尚、第2の物理計算機は、管理装置3からのアドレス復旧の制御メッセージを受信した際に、実行されるものであってもよい。 (S3) The second physical computer assigns the physical interface of the second physical computer back to the physical MAC address. Note that the second physical computer may be executed when an address restoration control message is received from the management device 3.

(S4)第1の物理計算機が、仮想計算機2を、第2の物理計算機のIPアドレス(レイヤ3アドレス)へ向けて移動させる。尚、第1の物理計算機は、管理装置3からの仮想計算機2の移動を指示する制御メッセージを受信した際に、実行されるものであってもよい。 (S4) The first physical computer moves the virtual computer 2 toward the IP address (layer 3 address) of the second physical computer. The first physical computer may be executed when a control message instructing movement of the virtual computer 2 from the management apparatus 3 is received.

例えばXenの場合、以下のようなコマンドを実行することによって、仮想計算機2を、第1の物理計算機(ip=192.168.10.2)から第2の物理計算機(ip=192.168.10.3)へ移動させることができる。
$ ssh -l root 192.168.10.2 (移動元の物理計算機へログイン)
# xm migrate --live vm01 192.168.10.3
(仮想計算機vm01を、第2の物理計算機へ移動)
For example, in the case of Xen, the virtual machine 2 is moved from the first physical computer (ip = 192.168.10.2) to the second physical computer (ip = 192.168.10.3) by executing the following command: Can do.
$ ssh -l root 192.168.10.2 (Log in to the source physical computer)
# xm migrate --live vm01 192.168.10.3
(Move virtual machine vm01 to the second physical machine)

本発明によれば、第2の物理計算機へ仮想計算機2が移動する前に、既に、レイヤ2ネットワークの各スイッチ4は、仮想計算機2の仮想MACアドレスを、経路テーブルに学習している。従って、仮想計算機2を宛先とするパケットは、レイヤ2ネットワークを介して、第2の物理計算機へ到達する。   According to the present invention, before the virtual computer 2 moves to the second physical computer, each switch 4 of the layer 2 network has already learned the virtual MAC address of the virtual computer 2 in the route table. Therefore, the packet destined for the virtual machine 2 reaches the second physical machine via the layer 2 network.

図3は、レイヤ3サブネットを越えて仮想計算機を移動させるシステム構成図である。   FIG. 3 is a system configuration diagram for moving a virtual machine across a layer 3 subnet.

図3のシステムによれば、第1の物理計算機は、複数のルータ5を介して、第2の物理計算機に接続される。従って、図2のシステムのように、レイヤ2ネットワークのスイッチに対する経路制御だけでは、仮想計算機の移動後のネットワークトポロジを変更することができない。そのために、本発明によれば、第1の物理計算機と第2の物理計算機との間に、レイヤ3のトンネルを生成する。そして、第1の物理計算機は、仮想計算機への経路制御を、そのレイヤ3トンネルの入口アドレスに対応付ける。   According to the system of FIG. 3, the first physical computer is connected to the second physical computer via a plurality of routers 5. Therefore, as in the system of FIG. 2, the network topology after the migration of the virtual machine cannot be changed only by the path control for the switch of the layer 2 network. Therefore, according to the present invention, a layer 3 tunnel is generated between the first physical computer and the second physical computer. Then, the first physical computer associates the route control to the virtual computer with the entrance address of the layer 3 tunnel.

例えばLinuxの場合、第1の物理計算機は、以下のようなコマンドを実行することによって、IPトンネルを生成し、そのトンネルに入口アドレスを付与する。
# ip tunnel add netR2 mode gre remote 192.168.20.3 local 192.168.0.3
(GREトンネルを生成)
# ip link set netR2 up (トンネルを有効化)
# ip addr add 10.10.10.1 dev netR2 (トンネルにアドレスを付与)
ここで、トンネルnetR2には、アドレス"10.10.10.1"が付与される。
For example, in the case of Linux, the first physical computer generates an IP tunnel by giving the following command and assigns an entrance address to the tunnel.
# ip tunnel add netR2 mode gre remote 192.168.20.3 local 192.168.0.3
(Create a GRE tunnel)
# ip link set netR2 up (enable tunnel)
# ip addr add 10.10.10.1 dev netR2 (assign an address to the tunnel)
Here, the address “10.10.10.1” is assigned to the tunnel netR2.

同様に、第2の物理計算機も、以下のようなコマンドを実行することによって、IPトンネルを生成し、そのトンネルに入口アドレスを付与する。
# ip tunnel add netR1 mode gre remote 192.168.0.3 local 192.168.20.3
(GREトンネルを生成)
# ip link set netR1 up (トンネルを有効化)
# ip addr add 10.10.10.2 dev netR1 (トンネルにアドレスを付与)
ここで、トンネルnetR1には、アドレス"10.10.10.2"が付与される。
Similarly, the second physical computer also generates an IP tunnel by executing the following command and assigns an entrance address to the tunnel.
# ip tunnel add netR1 mode gre remote 192.168.0.3 local 192.168.20.3
(Create a GRE tunnel)
# ip link set netR1 up (Tunnel enabled)
# ip addr add 10.10.10.2 dev netR1 (assigns an address to the tunnel)
Here, the address “10.10.10.2” is assigned to the tunnel netR1.

次に、第1の物理計算機は、例えばXenの場合、以下のようなコマンドを実行することによって、仮想ブリッジxenbr1にそのトンネルを接続する。
# /etc/xen/scripts/network-bridge start vifnum=1 bridge=xenbr1 netdev=netR1
Next, for example, in the case of Xen, the first physical computer connects the tunnel to the virtual bridge xenbr1 by executing the following command.
# / etc / xen / scripts / network-bridge start vifnum = 1 bridge = xenbr1 netdev = netR1

そして、第1の物理計算機が、仮想計算機2を、トンネルを介して、第2の物理計算機のレイヤ3アドレスへ向けて移動させる。例えばXenの場合、以下のようなコマンドを実行することによって、仮想計算機2を、第1の物理計算機(ip=192.168.10.2)から第2の物理計算機(ip=192.168.10.3)へ移動させることができる。
$ ssh -l root 192.168.10.2 (移動元の物理計算機へログイン)
# xm migrate --live vm01 192.168.10.3
(仮想計算機vm01を、第2の物理計算機へ移動)
Then, the first physical computer moves the virtual computer 2 toward the layer 3 address of the second physical computer via the tunnel. For example, in the case of Xen, the virtual machine 2 is moved from the first physical computer (ip = 192.168.10.2) to the second physical computer (ip = 192.168.10.3) by executing the following command: Can do.
$ ssh -l root 192.168.10.2 (Log in to the source physical computer)
# xm migrate --live vm01 192.168.10.3
(Move virtual machine vm01 to the second physical machine)

図4は、本発明における物理計算機の機能構成図である。   FIG. 4 is a functional configuration diagram of the physical computer in the present invention.

図4によれば、物理計算機1は、スイッチ4に接続される通信インタフェース部10と、アドレス詐称部11と、学習パケット送信部12と、アドレス復旧部13と、仮想計算機送信部14と、仮想計算機受信部15と、トンネル生成部16と、トンネルアドレス割当部17と、仮想ブリッジ部18と、制御メッセージ受信部19と、トンネル経路制御部1Aとを有する。これら機能構成部は、物理計算機に搭載されたコンピュータを機能させるプログラムを実行することによって実現される。   According to FIG. 4, the physical computer 1 includes a communication interface unit 10 connected to the switch 4, an address spoofing unit 11, a learning packet transmission unit 12, an address restoration unit 13, a virtual computer transmission unit 14, a virtual computer The computer receiving unit 15, the tunnel generating unit 16, the tunnel address assigning unit 17, the virtual bridge unit 18, the control message receiving unit 19, and the tunnel route control unit 1A are included. These functional components are realized by executing a program that causes a computer installed in the physical computer to function.

アドレス詐称部11は、当該第2の物理計算機の物理インタフェースに対して、仮想計算機の仮想MACアドレスを割り当てる。尚、アドレス詐称部11は、制御メッセージ受信部19によって受信された管理装置3からの制御メッセージによって実行されてもよい。   The address spoofing unit 11 assigns a virtual MAC address of the virtual computer to the physical interface of the second physical computer. The address spoofing unit 11 may be executed by a control message from the management device 3 received by the control message receiving unit 19.

学習パケット送信部12は、レイヤ2ネットワークにおける分岐スイッチへ向けてパケットを送信し、レイヤ2ネットワークを構成するスイッチに、仮想MACアドレスを学習させる。尚、学習パケット送信部12は、制御メッセージ受信部19によって受信された管理装置3からの制御メッセージによって実行されてもよい。   The learning packet transmission unit 12 transmits a packet toward the branch switch in the layer 2 network, and causes the switch configuring the layer 2 network to learn the virtual MAC address. Note that the learning packet transmitter 12 may be executed by a control message from the management device 3 received by the control message receiver 19.

分岐スイッチのIPアドレス及び物理MACアドレスは、管理装置3から受信されるものであってもよい。分岐スイッチのIPアドレスが特定されている場合、そのIPアドレスへ向けてpingパケットが送信される。一方、分岐スイッチのレイヤ3アドレスが特定されていない場合、その分岐スイッチの物理MACアドレスへ向けてEthernet OAM Continuity Check (CC)又はLoop Back (LB)のメッセージが送信される。   The branch switch IP address and physical MAC address may be received from the management device 3. When the IP address of the branch switch is specified, a ping packet is transmitted to the IP address. On the other hand, when the layer 3 address of the branch switch is not specified, an Ethernet OAM Continuity Check (CC) or Loop Back (LB) message is transmitted to the physical MAC address of the branch switch.

アドレス復旧部13は、第2の物理計算機の物理インタフェースに対して、物理MACアドレスに戻して割り当てる。尚、学習パケット送信部12は、制御メッセージ受信部19によって受信された管理装置3からの制御メッセージによって実行されてもよい。   The address recovery unit 13 assigns the physical interface of the second physical computer back to the physical MAC address. Note that the learning packet transmitter 12 may be executed by a control message from the management device 3 received by the control message receiver 19.

仮想計算機送信部14は、仮想計算機2を、移動先の物理計算機のIPアドレスへ向けて送信する。   The virtual machine transmission unit 14 transmits the virtual machine 2 toward the IP address of the physical computer that is the movement destination.

仮想計算機送信部14は、仮想計算機2を、移動元の物理計算機から受信する。   The virtual machine transmission unit 14 receives the virtual machine 2 from the physical computer that is the movement source.

トンネル生成部16は、相手方物理計算機との間でレイヤ3サブネットを越えて接続されている場合、レイヤ3(IP)トンネルを生成する。   The tunnel generation unit 16 generates a layer 3 (IP) tunnel when connected to the counterpart physical computer beyond the layer 3 subnet.

トンネルアドレス割当部17は、トンネル生成部16によって生成されたトンネルの入口アドレスを、仮想ブリッジ部18に割り当てる。   The tunnel address assignment unit 17 assigns the tunnel entrance address generated by the tunnel generation unit 16 to the virtual bridge unit 18.

仮想ブリッジ部18は、仮想インタフェースと物理NICとの間でスイッチとして機能する。仮想インタフェースは、仮想計算機2の仮想MACアドレスにマッピングされる。   The virtual bridge unit 18 functions as a switch between the virtual interface and the physical NIC. The virtual interface is mapped to the virtual MAC address of the virtual machine 2.

制御メッセージ受信部19は、管理装置3から制御メッセージを受信し、アドレス詐称部11、学習パケット送信部12、アドレス復旧部13及びトンネル生成部16を制御する。   The control message receiving unit 19 receives the control message from the management device 3 and controls the address spoofing unit 11, the learning packet transmission unit 12, the address restoration unit 13, and the tunnel generation unit 16.

トンネル経路制御部1Aは、トンネル生成部16によって生成されたレイヤ3トンネルの入口アドレスに、仮想計算機への経路制御を、そのレイヤ3トンネルの入口アドレスに対応付ける。これによって、第1の物理計算機は、仮想計算機2に対するパケットを、レイヤ3トンネルを介して第2の物理計算機へ経路制御する。   The tunnel route control unit 1A associates the route control to the virtual machine with the entrance address of the layer 3 tunnel generated by the tunnel generation unit 16 and the entrance address of the layer 3 tunnel. As a result, the first physical computer routes the packet for the virtual computer 2 to the second physical computer via the layer 3 tunnel.

図5は、本発明における管理装置の機能構成図である。   FIG. 5 is a functional configuration diagram of the management apparatus according to the present invention.

図5の管理装置3は、レイヤ3ネットワークに接続される通信インタフェース部30と、アドレス詐称制御部31と、学習パケット送信制御部32と、アドレス復旧制御部33と、仮想計算機移動制御部34と、分岐スイッチ探索部35と、ネットワークトポロジデータベース36と、トンネル生成制御部37と、トンネルアドレス割当制御部38とを有する。これら機能構成部は、管理装置3に搭載されたコンピュータを機能させるプログラムを実行することによって実現される。   The management device 3 in FIG. 5 includes a communication interface unit 30 connected to the layer 3 network, an address spoofing control unit 31, a learning packet transmission control unit 32, an address recovery control unit 33, a virtual machine migration control unit 34, A branch switch search unit 35, a network topology database 36, a tunnel generation control unit 37, and a tunnel address allocation control unit 38. These functional components are realized by executing a program that causes a computer installed in the management apparatus 3 to function.

アドレス詐称制御部31は、当該第2の物理計算機の物理インタフェースに対して、仮想計算機の仮想MACアドレスを割り当てるべく、第2の物理計算機へ制御メッセージを送信する。   The address spoofing control unit 31 transmits a control message to the second physical computer in order to assign the virtual MAC address of the virtual computer to the physical interface of the second physical computer.

学習パケット送信制御部32は、第2の物理計算機が、分岐スイッチへ向けてパケットを送信し、レイヤ2ネットワークの中のスイッチに、仮想MACアドレスを学習させるべく、第2の物理計算機へ制御メッセージを送信する。   The learning packet transmission control unit 32 sends a control message to the second physical computer so that the second physical computer transmits the packet to the branch switch and causes the switch in the layer 2 network to learn the virtual MAC address. Send.

アドレス復旧制御部33は、第2の物理計算機の物理インタフェースに対して、物理MACアドレスに戻して割り当てるべく、第2の物理計算機へ制御メッセージを送信する。   The address recovery control unit 33 transmits a control message to the second physical computer so that the physical interface of the second physical computer is assigned back to the physical MAC address.

仮想計算機移動制御部34は、第1の物理計算機が、仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させるべく、第1の物理計算機へ制御メッセージを送信する。   The virtual computer migration control unit 34 transmits a control message to the first physical computer so that the first physical computer moves the virtual computer toward the layer 3 address of the second physical computer.

分岐スイッチ探索部35は、第1の物理計算機と第2の物理計算機との間がレイヤ3サブネット内である場合、ネットワークトポロジデータベース36を用いて、レイヤ2ネットワークについて第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索する。   When the switch between the first physical computer and the second physical computer is in the layer 3 subnet, the branch switch search unit 35 uses the network topology database 36 to perform the first physical computer and the second physical computer for the layer 2 network. Search for branch switch with other physical computers.

ネットワークトポロジデータベース36は、第1の物理計算機と第2の物理計算機との間のスイッチのトポロジ情報を蓄積している。   The network topology database 36 stores topology information of switches between the first physical computer and the second physical computer.

トンネル生成制御部37は、第1の物理計算機と第2の物理計算機との間がレイヤ3サブネットを越えている場合に、両物理計算機に対してトンネルを生成するべく、制御メッセージを送信する。   When the space between the first physical computer and the second physical computer exceeds the layer 3 subnet, the tunnel generation control unit 37 transmits a control message to generate a tunnel to both physical computers.

トンネルアドレス割当制御部38は、生成したトンネルの入口アドレスを、仮想計算機に対応付けるべく、制御メッセージを送信する。   The tunnel address assignment control unit 38 transmits a control message so as to associate the generated tunnel entrance address with the virtual machine.

以上、詳細に説明したように、本発明の仮想計算機送信方法、システム、管理装置及びプログラムによれば、仮想計算機が移動した後、ネットワークトポロジを制御することによって、仮想アドレスを宛先とするパケットが、移動先の物理計算機へ転送される。   As described above in detail, according to the virtual machine transmission method, system, management apparatus, and program of the present invention, a packet whose destination is a virtual address is controlled by controlling the network topology after the virtual machine has moved. And transferred to the destination physical computer.

前述した本発明の種々の実施形態において、本発明の技術思想及び見地の範囲の種々の変更、修正及び省略は、当業者によれば容易に行うことができる。前述の説明はあくまで例であって、何ら制約しようとするものではない。本発明は、特許請求の範囲及びその均等物として限定するものにのみ制約される。   In the various embodiments of the present invention described above, various changes, modifications, and omissions in the scope of the technical idea and the viewpoint of the present invention can be easily made by those skilled in the art. The above description is merely an example, and is not intended to be restrictive. The invention is limited only as defined in the following claims and the equivalents thereto.

レイヤ3サブネット内で仮想計算機を移動させるシステム構成図である。FIG. 3 is a system configuration diagram for moving a virtual machine in a layer 3 subnet. レイヤ3サブネット内で仮想計算機を移動させるシーケンス図である。It is a sequence diagram which moves a virtual machine within a layer 3 subnet. レイヤ3サブネットを越えて仮想計算機を移動させるシステム構成図である。It is a system configuration diagram for moving a virtual machine across a layer 3 subnet. 本発明における物理計算機の機能構成図である。It is a functional block diagram of the physical computer in this invention. 本発明における管理装置の機能構成図である。It is a functional block diagram of the management apparatus in this invention.

符号の説明Explanation of symbols

1 物理計算機
10 通信インタフェース部
11 アドレス詐称部
12 学習パケット送信部
13 アドレス復旧部
14 仮想計算機送信部
15 仮想計算機受信部
16 トンネル生成部
17 トンネルアドレス割当部
18 仮想ブリッジ部
19 制御メッセージ受信部
1A トンネル経路制御部
2 仮想計算機
3 管理装置
30 通信インタフェース部
31 アドレス詐称制御部
32 学習パケット送信制御部
33 アドレス復旧制御部
34 仮想計算機移動制御部
35 分岐スイッチ探索部
36 ネットワークトポロジデータベース
37 トンネル生成制御部
38 トンネルアドレス割当制御部
4 スイッチ
5 ルータ
DESCRIPTION OF SYMBOLS 1 Physical computer 10 Communication interface part 11 Address spoofing part 12 Learning packet transmission part 13 Address restoration part 14 Virtual computer transmission part 15 Virtual computer reception part 16 Tunnel generation part 17 Tunnel address allocation part 18 Virtual bridge part 19 Control message reception part 1A Tunnel Route control unit 2 Virtual computer 3 Management device 30 Communication interface unit 31 Address spoofing control unit 32 Learning packet transmission control unit 33 Address recovery control unit 34 Virtual computer migration control unit 35 Branch switch search unit 36 Network topology database 37 Tunnel generation control unit 38 Tunnel address allocation control unit 4 Switch 5 Router

Claims (9)

複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機と、該物理計算機で稼働している仮想計算機を管理する管理装置とを有するシステムについて、前記物理計算機は、前記レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、前記仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有し、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる仮想計算機送信方法であって、
第2の物理計算機が、当該第2の物理計算機の物理インタフェースに対して、前記仮想計算機の前記仮想レイヤ2アドレスを割り当てる第1のステップと、
第2の物理計算機が、前記レイヤ2ネットワークにおける第1の物理計算機との間の分岐スイッチへ向けてパケットを送信し、前記レイヤ2ネットワークを構成する前記スイッチに、前記仮想レイヤ2アドレスを学習させる第2のステップと、
第2の物理計算機が、第2の物理計算機の物理インタフェースに対して、前記物理レイヤ2アドレスに戻して割り当てる第3のステップと、
第1の物理計算機が、前記仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させる第4のステップと
を有することを特徴とする仮想計算機送信方法。
For a system having a plurality of physical computers connected to a layer 2 network logically configured in a tree structure by a plurality of switches, and a management device for managing a virtual computer running on the physical computer, the physical computer Has a physical layer 2 address and a layer 3 address in a physical interface connected to the layer 2 network, and the virtual machine has a virtual layer 2 address and a layer 3 address in a virtual interface, A virtual computer transmission method for moving a virtual computer running on one physical computer to a second physical computer after movement,
A first step in which a second physical computer assigns the virtual layer 2 address of the virtual computer to a physical interface of the second physical computer;
A second physical computer transmits a packet to a branch switch with the first physical computer in the layer 2 network, and causes the switch constituting the layer 2 network to learn the virtual layer 2 address. A second step;
A third step in which the second physical computer assigns the physical interface of the second physical computer back to the physical layer 2 address;
A virtual machine transmission method, comprising: a fourth step in which the first physical computer moves the virtual computer toward a layer 3 address of the second physical computer.
第1の物理計算機と第2の物理計算機とが、レイヤ3サブネットを越えて、異なるレイヤ2ネットワークに接続されている場合、
第1の物理計算機が、第2の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するステップと、
第2の物理計算機が、第1の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するステップと、
第2の物理計算機が、前記仮想計算機の仮想インタフェースを、前記レイヤ3トンネルに対応付けるステップと、
第1の物理計算機が、前記仮想計算機のレイヤ3アドレスへの経路制御を、前記レイヤ3トンネルの入口アドレスに対応付けるステップと、
第1の物理計算機が、前記仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させるステップと
を有することを特徴とする請求項1に記載の仮想計算機送信方法。
When the first physical computer and the second physical computer are connected to different layer 2 networks across the layer 3 subnet,
A first physical computer creating a layer 3 tunnel with a layer 3 address of a second physical computer;
A second physical computer creating a layer 3 tunnel with the layer 3 address of the first physical computer;
A second physical computer associating the virtual interface of the virtual computer with the layer 3 tunnel;
A first physical computer associating route control to a layer 3 address of the virtual computer with an entrance address of the layer 3 tunnel;
The virtual machine transmission method according to claim 1, further comprising a step of causing the first physical computer to move the virtual computer toward a layer 3 address of the second physical computer.
第2のステップについて、第2の物理計算機は、
前記分岐スイッチのレイヤ3アドレスが特定されている場合、該レイヤ3アドレスへ向けてping(Packet INternet Groper)パケットを送信し、
前記分岐スイッチのレイヤ3アドレスが特定されていない場合、該分岐スイッチの物理アドレスへ向けてEthernet OAM Continuity Check (CC)又はLoop Back (LB)のメッセージを送信する
ことを特徴とする請求項1又は2に記載の仮想計算機送信方法。
For the second step, the second physical computer
When the layer 3 address of the branch switch is specified, a ping (Packet Internet Groper) packet is transmitted to the layer 3 address,
The Ethernet OAM Continuity Check (CC) or Loop Back (LB) message is transmitted to the physical address of the branch switch when the layer 3 address of the branch switch is not specified. 3. The virtual machine transmission method according to 2.
前記システムは、管理装置を更に有し、
前記管理装置は、
前記レイヤ2ネットワークにおける第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索し、
第1のステップから第4のステップを実行すべき制御メッセージを、第1の物理計算機及び第2の物理計算機へ送信する
ことを特徴とする請求項1から3のいずれか1項に記載の仮想計算機送信方法。
The system further includes a management device,
The management device
Searching for a branch switch between the first physical computer and the second physical computer in the layer 2 network;
The virtual message according to any one of claims 1 to 3, wherein a control message for executing the first step to the fourth step is transmitted to the first physical computer and the second physical computer. Computer transmission method.
複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機を有するシステムについて、前記物理計算機は、前記レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、前記仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有しており、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる仮想計算機送信システムであって、
第2の物理計算機は、
当該第2の物理計算機の物理インタフェースに対して、前記仮想計算機の前記仮想レイヤ2アドレスを割り当てるアドレス詐称手段と、
前記レイヤ2ネットワークにおける第1の物理計算機との間の分岐スイッチへ向けてパケットを送信し、前記レイヤ2ネットワークを構成する前記スイッチに、前記仮想レイヤ2アドレスを学習させる学習パケット送信手段と、
第2の物理計算機の物理インタフェースに対して、前記物理レイヤ2アドレスに戻して割り当てるアドレス復旧手段と
を有し、
第1の物理計算機は、前記仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させる仮想計算機送信手段を有する
ことを特徴とする仮想計算機送信システム。
For a system having a plurality of physical computers connected to a layer 2 network logically configured in a tree structure by a plurality of switches, the physical computer has a physical layer 2 address and a physical interface connected to the layer 2 network. The virtual machine has a virtual layer 2 address and a layer 3 address in the virtual interface, and the virtual machine running on the first physical machine before the migration is A virtual machine transmission system for moving to a second physical computer,
The second physical computer is
Address spoofing means for assigning the virtual layer 2 address of the virtual machine to the physical interface of the second physical machine;
Learning packet transmitting means for transmitting a packet to a branching switch with the first physical computer in the layer 2 network, and for causing the switch constituting the layer 2 network to learn the virtual layer 2 address;
Address recovery means for assigning the physical interface of the second physical computer back to the physical layer 2 address;
The first physical computer includes a virtual computer transmission unit that moves the virtual computer toward a layer 3 address of the second physical computer.
第1の物理計算機と第2の物理計算機とが、レイヤ3サブネットを越えて、異なるレイヤ2ネットワークに接続されている場合、
第1の物理計算機は、
第2の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するトンネル生成手段と、
前記仮想計算機のレイヤ3アドレスへの経路制御を、前記レイヤ3トンネルの入口アドレスに対応付けるトンネル経路制御手段と
を更に有し、
第2の物理計算機は、
第1の物理計算機のレイヤ3アドレスとの間で、レイヤ3トンネルを生成するトンネル生成手段と、
前記仮想計算機の仮想インタフェースを、前記レイヤ3トンネルに対応付けるトンネル割当手段と
を更に有し、
前記仮想計算機送信手段は、前記仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させる
ことを特徴とする請求項5に記載の仮想計算機送信システム。
When the first physical computer and the second physical computer are connected to different layer 2 networks across the layer 3 subnet,
The first physical computer is
Tunnel generating means for generating a layer 3 tunnel with the layer 3 address of the second physical computer;
Tunnel control means for associating route control to the layer 3 address of the virtual machine with the entrance address of the layer 3 tunnel;
The second physical computer is
Tunnel generating means for generating a layer 3 tunnel with the layer 3 address of the first physical computer;
Tunnel allocation means for associating the virtual interface of the virtual machine with the layer 3 tunnel;
6. The virtual machine transmission system according to claim 5, wherein the virtual machine transmission unit moves the virtual machine toward a layer 3 address of a second physical computer.
前記学習パケット送信手段は、
前記分岐スイッチのレイヤ3アドレスが特定されている場合、該レイヤ3アドレスへ向けてpingパケットを送信し、
前記分岐スイッチのレイヤ3アドレスが特定されていない場合、該分岐スイッチの物理レイヤ2アドレスへ向けてEthernet OAM Continuity Check (CC)又はLoop Back (LB)のメッセージを送信する
ことを特徴とする請求項5又は6に記載の仮想計算機送信システム。
The learning packet transmitting means includes
When the layer 3 address of the branch switch is specified, a ping packet is transmitted to the layer 3 address,
The Ethernet OAM Continuity Check (CC) or Loop Back (LB) message is transmitted to the physical layer 2 address of the branch switch when the layer 3 address of the branch switch is not specified. The virtual machine transmission system according to 5 or 6.
複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機を有するシステムについて、前記物理計算機は、前記レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、前記仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有しており、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる管理装置であって、
前記レイヤ2ネットワークについて第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索する分岐スイッチ探索手段と、
当該第2の物理計算機の物理インタフェースに対して、前記仮想計算機の前記仮想レイヤ2アドレスを割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス詐称制御手段と、
第2の物理計算機が、前記分岐スイッチへ向けてパケットを送信し、前記レイヤ2ネットワークの中の前記スイッチに、前記仮想レイヤ2アドレスを学習させるべく、第2の物理計算機へ制御メッセージを送信するアドレス学習制御手段と、
第2の物理計算機の物理インタフェースに対して、前記物理レイヤ2アドレスに戻して割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス復旧制御手段と、
第1の物理計算機が、前記仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させるべく、第1の物理計算機へ制御メッセージを送信する仮想計算機移動制御手段と
を有することを特徴とする管理装置。
For a system having a plurality of physical computers connected to a layer 2 network logically configured in a tree structure by a plurality of switches, the physical computer has a physical layer 2 address and a physical interface connected to the layer 2 network. The virtual machine has a virtual layer 2 address and a layer 3 address in the virtual interface, and the virtual machine running on the first physical machine before the migration is A management device to be moved to the second physical computer,
Branch switch search means for searching for a branch switch between the first physical computer and the second physical computer for the layer 2 network;
Address spoofing control means for transmitting a control message to the second physical computer to assign the virtual layer 2 address of the virtual computer to the physical interface of the second physical computer;
The second physical computer transmits a packet toward the branch switch, and transmits a control message to the second physical computer to cause the switch in the layer 2 network to learn the virtual layer 2 address. Address learning control means;
Address recovery control means for transmitting a control message to the second physical computer to assign the physical interface of the second physical computer back to the physical layer 2 address;
The first physical computer has virtual computer movement control means for transmitting a control message to the first physical computer in order to move the virtual computer toward the layer 3 address of the second physical computer. Management device.
複数のスイッチによって論理的にツリー状に構成されたレイヤ2ネットワークに接続された複数の物理計算機を有するシステムについて、前記物理計算機は、前記レイヤ2ネットワークに接続される物理インタフェースに物理レイヤ2アドレス及びレイヤ3アドレスを有し、前記仮想計算機は、仮想インタフェースに仮想レイヤ2アドレス及びレイヤ3アドレスを有しており、移動前となる第1の物理計算機で稼働している仮想計算機を、移動後となる第2の物理計算機へ移動させる管理装置に搭載されるコンピュータを機能させるプログラムであって、
前記レイヤ2ネットワークについて第1の物理計算機と第2の物理計算機との間の分岐スイッチを探索する分岐スイッチ探索手段と、
当該第2の物理計算機の物理インタフェースに対して、前記仮想計算機の前記仮想レイヤ2アドレスを割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス詐称制御手段と、
第2の物理計算機が、前記分岐スイッチへ向けてパケットを送信し、前記レイヤ2ネットワークの中の前記スイッチに、前記仮想レイヤ2アドレスを学習させるべく、第2の物理計算機へ制御メッセージを送信するアドレス学習制御手段と、
第2の物理計算機の物理インタフェースに対して、前記物理レイヤ2アドレスに戻して割り当てるべく、第2の物理計算機へ制御メッセージを送信するアドレス復旧制御手段と、
第1の物理計算機が、前記仮想計算機を、第2の物理計算機のレイヤ3アドレスへ向けて移動させるべく、第1の物理計算機へ制御メッセージを送信する仮想計算機移動制御手段と
してコンピュータを機能させることを特徴とする管理装置用のプログラム。
For a system having a plurality of physical computers connected to a layer 2 network logically configured in a tree structure by a plurality of switches, the physical computer has a physical layer 2 address and a physical interface connected to the layer 2 network. The virtual machine has a virtual layer 2 address and a layer 3 address in the virtual interface, and the virtual machine running on the first physical machine before the migration is A program for causing a computer mounted on a management device to be moved to a second physical computer to function,
Branch switch search means for searching for a branch switch between the first physical computer and the second physical computer for the layer 2 network;
Address spoofing control means for transmitting a control message to the second physical computer to assign the virtual layer 2 address of the virtual computer to the physical interface of the second physical computer;
The second physical computer transmits a packet toward the branch switch, and transmits a control message to the second physical computer to cause the switch in the layer 2 network to learn the virtual layer 2 address. Address learning control means;
Address recovery control means for transmitting a control message to the second physical computer to assign the physical interface of the second physical computer back to the physical layer 2 address;
The first physical computer causes the computer to function as virtual computer movement control means for transmitting a control message to the first physical computer in order to move the virtual computer toward the layer 3 address of the second physical computer. A program for a management device characterized by
JP2008294647A 2008-11-18 2008-11-18 Virtual computer transmission method, system, management apparatus, and program Expired - Fee Related JP5079665B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008294647A JP5079665B2 (en) 2008-11-18 2008-11-18 Virtual computer transmission method, system, management apparatus, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008294647A JP5079665B2 (en) 2008-11-18 2008-11-18 Virtual computer transmission method, system, management apparatus, and program

Publications (2)

Publication Number Publication Date
JP2010124129A true JP2010124129A (en) 2010-06-03
JP5079665B2 JP5079665B2 (en) 2012-11-21

Family

ID=42325083

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008294647A Expired - Fee Related JP5079665B2 (en) 2008-11-18 2008-11-18 Virtual computer transmission method, system, management apparatus, and program

Country Status (1)

Country Link
JP (1) JP5079665B2 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012231382A (en) * 2011-04-27 2012-11-22 Nec Corp Virtual routing method in virtual environment and virtual routing system
JP2014021979A (en) * 2012-07-16 2014-02-03 Ntt Docomo Inc Hierarchy system, method and computer program for controlling multiple virtual machines
EP2782294A1 (en) 2013-03-18 2014-09-24 Fujitsu Limited Information processing apparatus and method for generating coupling information
JP2014225774A (en) * 2013-05-16 2014-12-04 富士通株式会社 Information processing system, method, device and program
KR101503717B1 (en) * 2013-01-31 2015-03-19 에스코어 주식회사 Network Apparatus and Data Transporting Method Used in the Same
US9348662B2 (en) 2012-03-29 2016-05-24 Fujitsu Limited Network system and communication control method
US9354905B2 (en) 2011-01-07 2016-05-31 Fujitsu Limited Migration of port profile associated with a target virtual machine to be migrated in blade servers
US9794147B2 (en) 2014-02-03 2017-10-17 Fujitsu Limited Network switch, network system, and network control method

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9354905B2 (en) 2011-01-07 2016-05-31 Fujitsu Limited Migration of port profile associated with a target virtual machine to be migrated in blade servers
JP2012231382A (en) * 2011-04-27 2012-11-22 Nec Corp Virtual routing method in virtual environment and virtual routing system
US9348662B2 (en) 2012-03-29 2016-05-24 Fujitsu Limited Network system and communication control method
JP2014021979A (en) * 2012-07-16 2014-02-03 Ntt Docomo Inc Hierarchy system, method and computer program for controlling multiple virtual machines
KR101503717B1 (en) * 2013-01-31 2015-03-19 에스코어 주식회사 Network Apparatus and Data Transporting Method Used in the Same
EP2782294A1 (en) 2013-03-18 2014-09-24 Fujitsu Limited Information processing apparatus and method for generating coupling information
US9632962B2 (en) 2013-03-18 2017-04-25 Fujitsu Limited Information processing apparatus and method for generating coupling information
JP2014225774A (en) * 2013-05-16 2014-12-04 富士通株式会社 Information processing system, method, device and program
US9794147B2 (en) 2014-02-03 2017-10-17 Fujitsu Limited Network switch, network system, and network control method

Also Published As

Publication number Publication date
JP5079665B2 (en) 2012-11-21

Similar Documents

Publication Publication Date Title
JP5079665B2 (en) Virtual computer transmission method, system, management apparatus, and program
EP3430512B1 (en) Network virtualization of containers in computing systems
US11502950B2 (en) Universal customer premise equipment
US11190375B2 (en) Data packet processing method, host, and system
JP6544872B2 (en) Load balancing computer device, system and method
US11941423B2 (en) Data processing method and related device
US8549187B1 (en) System and method of MAC address assignment using IP addresses
US20180248769A1 (en) Simulating a topology of network elements
US9026625B2 (en) System and method of MAC address assignment using dynamic MAC address protocol
CN110995561B (en) Virtual network data communication interaction method and system based on container technology
WO2007065139A2 (en) Virtual tunnel network router
US9112769B1 (en) Programatically provisioning virtual networks
CN109587286B (en) Equipment access control method and device
CN107645402B (en) Route management method and device
WO2017137067A1 (en) Federated virtual datacenter apparatus
US20190334862A1 (en) Seamless Network Characteristics For Hardware Isolated Virtualized Environments
CN115686729A (en) Container cluster network system, data processing method, device and computer program product
CN114422350A (en) Public cloud container instance creating method
CN112667293B (en) Method, device and storage medium for deploying operating system
US10171292B1 (en) Deploying a cloud infrastructure in a remote site
US20220103475A1 (en) Route Processing Method and Network Device
CN117278527A (en) Bare metal server online system, method and device
CN115550316A (en) Containerized network system, containerized IPV6 communication method and device, medium and equipment
KR102660421B1 (en) Management apparatus for virtual network, and control method thereof
CN116436727B (en) Virtual machine container mixed arrangement system and IPv6 network implementation method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110816

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120622

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120730

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120803

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120823

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120829

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150907

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees