JP5109748B2 - Virtual computer system, packet transmission control method, and network interface card used therefor - Google Patents
Virtual computer system, packet transmission control method, and network interface card used therefor Download PDFInfo
- Publication number
- JP5109748B2 JP5109748B2 JP2008079458A JP2008079458A JP5109748B2 JP 5109748 B2 JP5109748 B2 JP 5109748B2 JP 2008079458 A JP2008079458 A JP 2008079458A JP 2008079458 A JP2008079458 A JP 2008079458A JP 5109748 B2 JP5109748 B2 JP 5109748B2
- Authority
- JP
- Japan
- Prior art keywords
- transmission
- upper limit
- transmission packet
- packet
- priority
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Description
本発明は仮想計算機システム及びパケット送信制御方法並びにそれに用いるネットワークインターフェースカードに関し、特に複数の仮想計算機の各々の送信すべきパケット群の各送信パケットに関する情報群を処理し、この処理結果に従って各仮想計算機の送信パケットをネットワークへ送信するネットワークインターフェースカードのパケット送信制御方式に関するものである。 The present invention relates to a virtual machine system, a packet transmission control method, and a network interface card used for the virtual machine system, and more particularly, to process information groups related to transmission packets of packet groups to be transmitted from a plurality of virtual machines, and to each virtual machine according to the processing result. The present invention relates to a packet transmission control method for a network interface card that transmits a transmission packet to a network.
１つの計算機システムで利用可能なプロセッサ数は、マルチコアプロセッサが登場したことにより飛躍的に増加させることが可能となってきた。このようなプロセッサを多数搭載した計算機システムを単独ＯＳで利用すると、システムアイドル状態で多くのプロセッサ資源が無駄になってしまう。そこで、プロセッサ資源の利用効率を向上させる方法として、制御プログラムにより計算機システム上に複数の仮想計算機を同時に稼動させるという方法がある。 The number of processors that can be used in one computer system can be dramatically increased with the advent of multi-core processors. When a computer system equipped with a large number of such processors is used as a single OS, many processor resources are wasted in the system idle state. Therefore, as a method of improving the utilization efficiency of processor resources, there is a method of operating a plurality of virtual machines simultaneously on a computer system by a control program.
ここで、計算機システム上のＩ／Ｏデバイスの数はプロセッサ数に比べて増加の程度が緩やかなため、マルチコアプロセッサを搭載した計算機システムでは、プロセッサに対するＩ／Ｏデバイス数が減少するという状況が生じている。従って、計算機システム上で多くの仮想計算機を稼動させるためには、Ｉ／Ｏデバイスをいかに効率よく利用するかが課題となる。 Here, since the number of I / O devices on the computer system increases slowly compared to the number of processors, a situation occurs in a computer system equipped with a multi-core processor that the number of I / O devices for the processor decreases. ing. Therefore, in order to operate many virtual machines on a computer system, how to efficiently use I / O devices becomes a problem.
そのための１つの解決策として、Ｉ／Ｏデバイスの１つであるネットワークインタ−フェースカード（Network Interface Card：ＮＩＣ）を制御プログラムにより仮想化し、この制御プログラムによって、計算機システム上に搭載している物理ＮＩＣを、複数のＶＮＩＣで共有するという方法がある（特許文献１参照）。この方法により、１つのＩ／Ｏデバイスを複数の仮想計算機で共有利用することが可能となる。 As one solution for this, a network interface card (NIC), which is one of the I / O devices, is virtualized by a control program, and the physical mounted on the computer system by this control program. There is a method in which a NIC is shared by a plurality of VNICs (see Patent Document 1). With this method, one I / O device can be shared and used by a plurality of virtual machines.
図２１に、このようなＶＮＩＣを用いた仮想計算機システムの一例を示している。図２１を参照すると、複数の仮想計算機１０ａ，１０ｂ，１０ｃ、主記憶３０及び物理ＮＩＣ２０は、ＰＣＩ（Peripheral Component Interconnect ）バス５０に共通接続されている。そして、物理ＮＩＣ２０はネットワーク４０に接続されている。
FIG. 21 shows an example of a virtual machine system using such a VNIC. Referring to FIG. 21, a plurality of
仮想計算機は１０ａは、アプリケーション１０１ａと、ＯＳ１０２ａと、ＶＮＩＣ（仮想ＮＩＣ）１０５ａとを備えており、ＯＳ１０２ａは、ＴＣＰ（Transmission Control Protocol ）／ＩＰ（Internet Protocol ）機能部１０３ａとドライバ１０４ａとを有している。他の仮想計算機１０ｂ，１０ｃも、仮想計算機１０ａと同一構成である。
The
物理ＮＩＣ２０は、ＰＣＩバスＩ／Ｆ（インターフェース）２００と、送信キュー２０１と、受信キュー２０２と、ＤＭＡ（Direct Memory Access）制御部２０６と、送信バッファ２０７と、受信バッファ２０８と、ネットワークＩ／Ｆ２０９とを備えている。
The
ここで、図２１に示したＶＮＩＣを使用した場合のパケット送信動作について説明する。ＶＮＩＣ１０５ａ，１０５ｂ，１０５ｃが同時にパケットを送信する場合、１つの物理ＮＩＣ２０に対して３つのＶＮＩＣが同時にアクセスしようとすることになるために、これらＶＮＩＣ間で排他制御を行う必要がある。
Here, the packet transmission operation when the VNIC shown in FIG. 21 is used will be described. When the VNICs 105a, 105b, and 105c transmit packets at the same time, since three VNICs try to access one
ここで、ＶＮＩＣ１０５ａが物理ＮＩＣ２０のロックを取得して物理ＮＩＣ２０へのアクセス権を取得したとすると、ＶＮＩＣ１０５ｂとＶＮＩＣ１０５ｃとは物理ＮＩＣ２０へのアクセス権を得られないので、ロック取得待ち状態となりパケット送信はできない。
Here, if the VNIC 105a acquires the lock of the
一方、ロックを取得したＶＮＩＣ１０５ａは送信パケット情報を物理ＮＩＣ２０の送信キュー２０１に登録する。ＶＮＩＣ１０５ａが連続してパケットを送信する場合には、当該送信パケット情報は送信キュー２０１に連続登録されることになる。送信パケット情報の送信キューへの登録が完了した後、ＶＮＩＣ１０５ａのロックは開放となる。
On the other hand, the VNIC 105 a that has acquired the lock registers the transmission packet information in the
ロックが解放されると、ロック取得待ち状態のＶＮＩＣ１０５ｂとＶＮＩＣ１０５ｃとに対してロック取得の機会が与えられる。ここで、ＶＮＩＣ１０５ｂがロックを取得したとすると、ＶＮＩＣ１０５ｃはロック取得待ち状態が継続することになる。 When the lock is released, a lock acquisition opportunity is given to the VNIC 105b and the VNIC 105c waiting to acquire the lock. Here, assuming that the VNIC 105b has acquired the lock, the VNIC 105c continues to be in a lock acquisition waiting state.
ロックを得したＶＮＩＣ１０５ｂは送信パケット情報を物理ＮＩＣ２０の送信キュー２０１に登録する。ＶＮＩＣ１０５ｂが連続してパケットを送信する場合は、当該送信パケット情報は送信キュー２０１に連続登録される。送信パケット情報の送信キューへの登録が完了した後、ＶＮＩＣ１０５ｂのロッは開放となる。
The VNIC 105b that has obtained the lock registers the transmission packet information in the
ロックが解放されると、ロック取得待ち状態のＶＮＩＣ１０５ｃがロックを取得する。ＶＮＩＣ１０５ｃは送信パケット情報を物理ＮＩＣ２０の送信キュー２０１に登録する。ＶＮＩＣ１０５ｃが連続してパケットを送信する場合には、当該送信パケット情報は送信キュー２０１に連続登録される。送信パケット情報の送信キューへの登録が完了すると、ＶＮＩＣ１０５ｃのロックは開放となる。
When the lock is released, the VNIC 105c in the lock acquisition waiting state acquires the lock. The VNIC 105 c registers transmission packet information in the
物理ＮＩＣ２０のＤＭＡ制御部２０６は、ＶＮＩＣ１０５ａ→ＶＮＩＣ１０５ｂ→ＶＮＩＣ１０５ｃの順に送信キューに登録された送信パケット情報に従って、送信キューに登録されている順番で、計算機主記憶３０に対してＤＭＡ制御を行う。すなわち、ＤＭＡ制御部２０６は、主記憶３０から、送信パケット情報に従って送信パケットデータをＰＣＩバス５０経由で取得し、送信バッファ２０７に格納する。送信バッファ２０７に格納されたパケットデータは、ネットワークＩ／Ｆ２０９を介してネットワーク４０に送信される。
The
なお、ネットワークＩ／Ｆ２０９は、ネットワーク４０からの自ＮＩＣ宛のパケットデータを受信して受信バッファ２０８に格納する。受信バッファ２０８はネットワーク４０からの受信パケットを格納し、格納した受信パケットを解析してＤＭＡ制御部２０６に対してＤＭＡ起動指示を与えるようになっている。
図２１に示したシステムでは、１つの物理リソースを、複数のＶＮＩＣにより共有する構成のために、制御プログラムによる物理ＮＩＣの排他制御が必要になり、ロック取得待ちの処理時間が発生する。このためロック取得待ち時間分のパケット送信遅延が発生する。 In the system shown in FIG. 21, because a configuration in which one physical resource is shared by a plurality of VNICs, exclusive control of the physical NIC by a control program is required, and processing time waiting for lock acquisition occurs. For this reason, a packet transmission delay corresponding to the lock acquisition waiting time occurs.
また、特定のＶＮＩＣがデータ転送で物理ＮＩＣを占有することにより、他ＶＮＩＣのデータ転送ができなくなって、最低限のデータ転送帯域が確保できなくなる場合がある。更に、リアルタイム性が必要なパケット（例えば、Ｔｅｌｎｅｔ、ＦＴＰ（File Transfer Protocol）制御といったパケット）が、先行する他ＶＮＩＣのデータ転送パケットにより処理が遅延する場合がある。 In addition, when a specific VNIC occupies a physical NIC for data transfer, data transfer of other VNICs may not be possible and a minimum data transfer bandwidth may not be ensured. Furthermore, processing of packets that require real-time properties (for example, packets such as Telnet and FTP (File Transfer Protocol) control) may be delayed due to the data transfer packet of another preceding VNIC.
本発明の目的は、特定のＶＮＩＣによる共有物理ＮＩＣのパケット送信のためのロック占有をなくして、ロック取得待ち時間に起因するパケット送信遅延を少なくするようにした仮想計算機システム及びパケット送信制御方法並びにそれに用いるネットワークインターフェースカード、プロクラムを提供することである。 An object of the present invention is to eliminate a lock occupation for packet transmission of a shared physical NIC by a specific VNIC, and reduce a packet transmission delay caused by a lock acquisition waiting time, a packet transmission control method, and It is to provide a network interface card and program to be used for it.
本発明による仮想計算機システムは、
複数の仮想計算機の各々に対応して設けられ対応する仮想計算機とネットワークとのインターフェースをなす仮想ネットワークインターフェースカード（ＶＮＩＣ）に共有され、前記ＶＮＩＣの各々から供給されて前記仮想計算機の各々の送信すべきパケット群の各送信パケットに関する情報群を処理し、この処理結果に従って各仮想計算機の送信パケットを前記ネットワークへ送信する物理ネットワークインターフェースカードを含む仮想計算機システムであって、
前記物理ネットワークインターフェースカードは、
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御手段と、
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御手段と、
前記上限帯域制御手段の各々からの前記送信パケット情報群に含まれる各データ量を基に、前記ＶＮＩＣ毎に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御手段とを含み、
前記優先度制御手段、前記上限帯域制御手段、前記下限帯域制御手段は、この順に制御をなすよう設けられており、
前記優先度制御手段は、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とする。
The virtual machine system according to the present invention is:
A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A virtual machine system including a physical network interface card that processes a group of information about each transmission packet of a power packet group and transmits a transmission packet of each virtual machine to the network according to the processing result,
The physical network interface card is
Priority control means provided corresponding to each of the VNICs, and determining the transmission order of each transmission packet based on each priority included in the transmission packet information group of the corresponding VNIC;
Upper limit bandwidth control means provided corresponding to each of the VNICs, and based on each data amount included in the transmission packet information group of the corresponding VNIC, to limit the maximum transmission amount per unit time according to the transmission order;
Lower limit bandwidth control means for guaranteeing the minimum amount of transmission per unit time according to the transmission order for each VNIC based on the amount of data included in the transmission packet information group from each of the upper limit bandwidth control means. See
The priority control unit, the upper limit band control unit, and the lower limit band control unit are provided to perform control in this order,
The priority control means sets the number of high priority transmission packets to be preferentially transmitted to a predetermined value, and transmits a lower priority transmission packet when the number of the high priority transmission packets reaches the predetermined value. characterized in that way the.
本発明によるパケット送信制御方法は、
複数の仮想計算機の各々に対応して設けられ対応する仮想計算機とネットワークとのインターフェースをなす仮想ネットワークインターフェースカード（ＶＮＩＣ）に共有され、前記ＶＮＩＣの各々から供給されて前記仮想計算機の各々の送信すべきパケット群の各送信パケットに関する情報群を処理し、この処理結果に従って各仮想計算機の送信パケットを前記ネットワークへ送信する物理ネットワークインターフェースカードのパケット送信制御方法であって、
前記ＶＮＩＣ毎に、前記ＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御ステップと、
前記ＶＮＩＣ毎に、前記ＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御ステップと、
前記ＶＮＩＣ毎に、前記上限帯域制御ステップからの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御ステップとを含み、
前記優先度制御ステップ、前記上限帯域制御ステップ、前記下限帯域制御ステップは、この順に制御をなすよう構成されており、
前記優先度制御ステップは、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とする。
A packet transmission control method according to the present invention includes:
A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A packet transmission control method for a physical network interface card that processes a group of information about each transmission packet of a power packet group and transmits a transmission packet of each virtual machine to the network according to the processing result;
A priority control step for determining the transmission order of each transmission packet based on each priority included in the transmission packet information group of the VNIC for each VNIC;
For each VNIC, based on each data amount included in the transmission packet information group of the VNIC, an upper limit bandwidth control step for limiting a maximum transmission amount per unit time according to the transmission order;
Wherein each VNIC, based on the respective amount of data included in the transmission packet information unit from the upper band control step, seen including a lower band control step to ensure transmission minimum amount per unit time according to the transmission order,
The priority control step, the upper limit bandwidth control step, and the lower limit bandwidth control step are configured to perform control in this order,
The priority control step sets the number of high-priority transmission packets to be preferentially transmitted to a predetermined value, and transmits a lower-priority transmission packet when the number of high-priority transmission packets reaches the predetermined value. characterized in that way the.
本発明によるネットワークインターフェースカードは、
複数の仮想計算機の各々に対応して設けられ対応する仮想計算機とネットワークとのインターフェースをなす仮想ネットワークインターフェースカード（ＶＮＩＣ）に共有され、前記ＶＮＩＣの各々から供給されて前記仮想計算機の各々の送信すべきパケット群の各送信パケットに関する情報群を処理し、この処理結果に従って各仮想計算機の送信パケットを前記ネットワークへ送信する物理ネットワークインターフェースカードであって、
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御手段と、
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御手段と、
前記上限帯域制御手段の各々からの前記送信パケット情報群に含まれる各データ量を基に、前記ＶＮＩＣ毎に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御手段とを含み、
前記優先度制御手段、前記上限帯域制御手段、前記下限帯域制御手段は、この順に制御をなすよう設けられており、
前記優先度制御手段は、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とする。
The network interface card according to the present invention comprises:
A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A physical network interface card for processing a group of information about each transmission packet of a power packet group and transmitting a transmission packet of each virtual machine to the network according to the processing result;
Priority control means provided corresponding to each of the VNICs, and determining the transmission order of each transmission packet based on each priority included in the transmission packet information group of the corresponding VNIC;
Upper limit bandwidth control means provided corresponding to each of the VNICs, and based on each data amount included in the transmission packet information group of the corresponding VNIC, to limit the maximum transmission amount per unit time according to the transmission order;
Lower limit bandwidth control means for guaranteeing the minimum amount of transmission per unit time according to the transmission order for each VNIC based on the amount of data included in the transmission packet information group from each of the upper limit bandwidth control means. See
The priority control unit, the upper limit band control unit, and the lower limit band control unit are provided to perform control in this order,
The priority control means sets the number of high priority transmission packets to be preferentially transmitted to a predetermined value, and transmits a lower priority transmission packet when the number of the high priority transmission packets reaches the predetermined value. characterized in that way the.
本発明によるプログラムは、
複数の仮想計算機の各々に対応して設けられ対応する仮想計算機とネットワークとのインターフェースをなす仮想ネットワークインターフェースカード（ＶＮＩＣ）に共有され、前記ＶＮＩＣの各々から供給されて前記仮想計算機の各々の送信すべきパケット群の各送信パケットに関する情報群を処理し、この処理結果に従って各仮想計算機の送信パケットを前記ネットワークへ送信する物理ネットワークインターフェースカードのパケット送信制御方法をコンピュータに実行させるためのプログラムであって、
前記ＶＮＩＣ毎に、前記ＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御処理と、
前記ＶＮＩＣ毎に、前記ＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御処理と、
前記ＶＮＩＣ毎に、前記上限帯域制御処理からの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御処理とを含み、
前記優先度制御処理、前記上限帯域制御処理、前記下限帯域制御処理は、この順に制御をなすよう構成されており、
前記優先度制御処理は、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とする。
The program according to the present invention is:
A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A program for causing a computer to execute a packet transmission control method of a physical network interface card that processes information groups related to each transmission packet of a power packet group and transmits the transmission packet of each virtual machine to the network according to the processing result. ,
For each VNIC, based on each priority included in the transmission packet information group of the VNIC, priority control processing for determining the transmission order of each transmission packet;
For each VNIC, based on each data amount included in the transmission packet information group of the VNIC, an upper limit bandwidth control process for limiting the maximum transmission amount per unit time according to the transmission order;
Wherein each VNIC, based on each data amount the included in the transmission packet information unit from the upper band control process, look including a lower bandwidth control process to ensure the transmission minimum amount per unit time according to the transmission order,
The priority control process, the upper limit band control process, and the lower limit band control process are configured to perform control in this order,
The priority control process sets the number of high-priority transmission packets to be transmitted with priority to a predetermined value, and transmits a lower-priority transmission packet when the number of high-priority transmission packets reaches the predetermined value. characterized in that way the.
本発明によれば、以下の効果が得られる。複数のＶＮＩＣの各々に対して、送信パケットの優先度制御、また単位時間当りの最大送信量の制限をなす上限帯域制御機能、更には、単位時間当りの最低送信量の保証する下限帯域制御機能を設けることにより、複数のＶＮＩＣにより物理ＮＩＣが共有利用されても、各ＶＮＩＣのデータ転送帯域を保証することができ、パケット送信遅延をなくすことが可能となる。 According to the present invention, the following effects can be obtained. For each of a plurality of VNICs, priority control of transmission packets, upper limit bandwidth control function for limiting the maximum transmission amount per unit time, and lower limit bandwidth control function for guaranteeing the minimum transmission amount per unit time Thus, even if a physical NIC is shared and used by a plurality of VNICs, the data transfer bandwidth of each VNIC can be guaranteed and packet transmission delay can be eliminated.
以下に、本発明の実施の形態について説明するが、それに先立ち、本発明のより良い理解のために、図１及び図２を参照して本発明の原理を説明する。 Hereinafter, embodiments of the present invention will be described. Prior to that, the principle of the present invention will be described with reference to FIGS. 1 and 2 for better understanding of the present invention.
図１は本発明の原理を説明すたるめ概略機能ブロック図である。複数の仮想計算機１，２，３と物理ＮＩＣ５とは共通バス４により相互接続されている。これら仮想計算機の各々は仮想ネットワークインターフェースカード（ＶＮＩＣ）１１，２１，３１を有している。物理ネットワークインターフェースカード（物理ＮＩＣ）５は、共通バス４に接続されてＶＮＩＣ１１，２１，３１により共有（共用）されている。
FIG. 1 is a schematic functional block diagram illustrating the principle of the present invention. The plurality of
この物理ＮＩＣ５は、仮想計算機１，２，３の各々の送信すべきパケット群（グループ）の各送信パケットに関する情報群を処理して、処理結果に従って、各仮想計算機の送信パケットをネットワークへ送信するものである。なお、この送信パケットに関する情報（送信パケット情報と称す）とは、送信パケットの番号、送信の優先度、データサイズ（データ量）、ＤＭＡ制御のための主記憶（図２１の３０参照）のアドレスなどを含むものとする。
The
物理ＮＩＣ５は、優先度制御部５１と、上限帯域制御部５２と、下限帯域制御部５３とを備えている。優先度制御部５１は、仮想計算機１〜３の各々のＶＮＩＣ１１，２１，３１からの送信パケット情報の各優先度を基に、ＶＮＩＣ１１，２１，３１毎に、各送信パケットの優先度をそれぞれ判定して、その優先度に応じて送信パケットの送信順を定めるものである。
The
上限帯域制御部５２は、ＶＮＩＣ１１，２１，３１毎に、送信パケット情報のデータ量を基に、送信順に従って送信パケットデータ量を監視して単位時間当りの送信最大量を、制限するものである。下限帯域制御部５３は、送信パケット情報を基に、ＶＮＩＣ毎に、送信順に従って送信パケットのデータ量を監視して単位時間当りの送信最低量を保証するものである。
The upper
図２を参照すると、図１に示した物理ＮＩＣ５の動作の概略を示すフローである。先ず、物理ＮＩＣ５の優先度制御部５１において、ＶＮＩＣ１１，２１，３１からの各送信パケット情報群のそれぞれの優先度が判定され、優先度に応じて送信パケットの送信順が、ＶＮＩＣ毎に決定される（ステップＳ１）。
Referring to FIG. 2, it is a flowchart showing an outline of the operation of the
次に、上限帯域制御部５２において、ＶＮＩＣ１１，２１，３１からの各送信パケット情報群のそれぞれのデータ量を、送信順に従って監視して、ＶＮＩＣ毎に単位時間当りの送信最大量を制限する、上限帯域制御がなされる（ステップＳ２）。
Next, the upper limit
最後に、下限帯域制御部５３において、ＶＮＩＣ１１，２１，３１からの各送信パケット情報群のそれぞれのデータ量を、送信順に従って監視して、仮想計算機毎に単位時間当りの送信最低量を制限する、下限帯域制御がなされる（ステップＳ３）。
Finally, the lower limit
この様に、優先度制御と、上限帯域制御と、下限帯域制御とを、仮想計算機すなわちＶＮＩＣ毎に、物理ＮＩＣにおいて実行することにより、各ＶＮＩＣのデータ転送帯域を保証することができ、パケット送信遅延をなくすことが可能となる。 As described above, by executing the priority control, the upper limit bandwidth control, and the lower limit bandwidth control in the physical NIC for each virtual computer, that is, for each VNIC, it is possible to guarantee the data transfer bandwidth of each VNIC and to transmit the packet. It becomes possible to eliminate the delay.
次に、本発明の実施の形態について図面を参照して詳細に説明する。図３は本発明の一実施の形態による物理ＮＩＣ２０の機能を示すブロック図である。物理ＮＩＣ２０は、ＰＣＩバスＩ／Ｆ２００と、送信キュー２０１ａ〜２０１ｃと、受信キュー２０２ａ〜２０２ｃと、優先度制御機構２０３ａ〜２０３ｃと、上限帯域制御機構２０４ａ〜２０４ｃと、下限帯域制御機構２０５と、ＤＭＡ制御部２０６と、送信バッファ２０７と、受信バッファ２０８と、ネットワークＩ／Ｆ２０９とを備えている。
Next, embodiments of the present invention will be described in detail with reference to the drawings. FIG. 3 is a block diagram showing functions of the
ＰＣＩバスＩ／Ｆ２００は、図１に示したＰＣＩバス４とのインターフェースである。送信キュー２０１ａ〜２０１ｃは、図１に示した各ＶＮＩＣ１１〜３３に対応する送信パケット情報を格納するキューである。受信キュー２０２ａ〜２０２ｃは、図１に示した各ＶＮＩＣ１１〜３３に対応する受信パケット情報を格納するキューである。
The PCI bus I /
優先度制御機構２０３ａ〜２０３ｃは、送信キュー２０１ａ〜２０１ｃに対応するものであって、対応する送信キューにそれぞれ登録された送信パケット情報を基に、送信キューに登録された順番を優先度の高いパケットを先に送信するように並べ替える機能を有している。
The
ここで、図４を参照すると、当該優先度制御機構２０３（２０３ａ〜２０３ｃ）の構成を示している。優先度制御機構２０３において、データレジスタ２０３１は、対応する送信キュー２０１より送られてくる送信パケット情報を一時的に保持するものである。また、優先判定論理部２０３２は、このデータレジスタ２０３に保持されている送信パケット情報のパケットフラグを参照して、次に登録する送信キューを選択する機能を有する。
Here, referring to FIG. 4, the configuration of the priority control mechanism 203 (203a to 203c) is shown. In the
また、高優先送信キュー２０３３は、高優先の送信パケット情報を登録するものであり、低優先送信キュー２０３４は、その他低優先の送信パケット情報を登録ものである。更に、選択判定論理部２０３５は、高優先送信キュー２０３３への送信パケット登録状態を監視して次に送る送信パケット情報を選択する機能を有している。すなわち、優先的に送出する高優先送信パケット情報の数を予め所定値としておき、高優先送信パケット情報の数がこの所定値に達すると、低優先送信パケット情報の送信沈み込みを回避すべく、低優先送信パケット情報を送出するような論理制御をなす機能を、選択判定論理部は有している。この所定値を、選択判定基準と称するものとする。
The high-
図３に戻ると、上限帯域制御機構２０４ａ〜２０４ｃは、送信キュー２０１ａ〜２０１ｃに対応するものであって、対応する送信キューに登録された各送信パケット情報のパケット長を監視し、予め設定しておいた上限帯域（最大送信量）以上のパケット送信を抑止する機能を有する。
Returning to FIG. 3, the upper limit
ここで、図５を参照すると、当該上限帯域制御機構２０４（２０４ａ〜２０４ｃ）の構成を示している。上限帯域制御機構２０４において、データレジスタ２０４１は、対応する優先度制御機構２０３２から送られてくる送信パケット情報を一時的に保持するものである。また、カウンタ２０４２は、このデータレジスタ２０４１に保持された各送信パケット情報のデータサイズを加算して一定期間保持するものである。
Here, referring to FIG. 5, the configuration of the upper limit bandwidth control mechanism 204 (204a to 204c) is shown. In the upper limit
更に、上限値レジスタ２０４３は、上限帯域値を設定しておくものであり、比較論理部２０４４は、カウンタ２０４２と上限値レジスタ２０４３との値を比較して、カウンタ２０４２の値が上限値よりも小さい場合に、データレジスタ２０４１に保持された送信パケット情報を送出する機能を有する。
Further, the
再度図３に戻ると、下限帯域保証機構２０５は、各上限帯域制御機構２０４ａ〜２０４ｃから送られてくる送信パケット情報から実際の送信パケットサイズを監視して、予め設定しておいた最低（下限）送信量の保証をなす機能を有する。
Returning to FIG. 3 again, the lower limit
ここで、図６を参照すると、当該下限帯域保証機構２０５の構成を示している。下限帯域保証機構２０５において、データレジスタ２０５１ａ〜２０５１ｃは、対応する上限帯域制御機構２０４ａ〜２０４ｃからそれぞれ送られてくる送信パケット情報を一時的に保持するものである。また、カウンタ２０５２ａ〜２０５２ｃは、各データレジスタ２０５１ａ〜２０５１ｃに保持された送信パケット情報のデータサイズを加算して一定期間保持するものである。
Here, referring to FIG. 6, a configuration of the lower limit
更に、下限値レジスタ２０５３は、下限帯域値を設定しておくものである。送信パケット選択論理部２０５４は、各カウンタ２０５２ａ〜２０５２ｃと下限値レジスタ２０５３との値をそれぞれ比較した結果に基づき、実際にネットワークへ送信するパケット情報を選択して、ＤＭＡ制御部に対してＤＭＡ起動指示を与えるものである。
Further, the
再び図３に戻ると、ＤＭＡ制御部２０６は、下限帯域保証機構２０５の指示に応じて、計算機システムの主記憶（図２１の３０に相当）から送信パケットデータをＰＣＩバス経由で取得し、送信バッファ２０７に格納する機能と、受信バッファ２０８の指示に応じて、受信バッファ２０８に格納されている受信パケットデータをＰＣＩバス経由で主記憶に格納する機能を有する。
Returning to FIG. 3 again, the
送信バッファ２０７は、送信パケットデータを格納する機能を有する。受信バッファ２０８は、ネットワークから受信した受信パケットを格納し、格納した受信パケットを解析し、受信対象となるＶＮＩＣに対応する受信キュー２０２ａ〜２０２ｃを選択し、ＤＭＡ制御部２０５に対してＤＭＡ起動指示を与える機能を有する。
The
ネットワークＩ／Ｆ２０９は、送信バッファに格納された送信パケットデータをネットワークに出力する機能と、ネットワークから自ＮＩＣ２０宛てのパケットデータを受信し、受信バッファに格納する機能を有する。
The network I /
以下に、本発明の実施の形態の動作を、図７及び図８並びに図９を参照しつつ説明する。図７及び図８は物理ＮＩＣ２０の送信パケット制御態様の一例を示し、図９は物理ＮＩＣ２０の受信パケット制御態様の一例を示している。先ず、図７及び図８を参照して物理ＮＩＣ２０のパケット送信動作について詳細に説明する。
The operation of the embodiment of the present invention will be described below with reference to FIGS. 7 and 8 show an example of the transmission packet control mode of the
図７及び図８では、送信キュー２０１ａ〜２０１ｃにそれぞれ対応した送信パケット情報グループＡ〜Ｃについて示しており、先ず、送信パケット情報グループＡについて説明する。
7 and 8 show the transmission packet information groups A to C respectively corresponding to the
優先度制御機構２０３ａは、送信キュー２０１ａに登録された送信パケット情報１ａ〜８ａの送信パケットフラグ情報を参照して、高優先送信パケット１ａ，２ａ，５ａと低優先送信パケット３ａ，４ａ，６ａ，７ａ，８ａとに分け、高優先送信パケット情報から順番（１ａ→２ａ→５ａ→３ａ→４ａ→６ａ→７ａ→８ａ）に上限帯域制御機構２０４ａへ送る。
The
上限帯域制御機構２０４ａは、優先度制御機構２０３ａから送られてくる送信パケット情報の送信パケットデータサイズを順次加算（積算）して、この加算値が上限値レジスタ値（本例では、１０００としている）未満の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報１ａ，２ａ，５ａ，３ａ，４ａ，６ａ，７ａ，８ａの送信パケットデータサイズの合計が９３０（＝１０＋１０＋１０＋１００＋３００＋２００＋２００＋１００）となるため、上限値レジスタ値１０００未満であることから、送信パケット情報１ａ〜８ａの全てが下限帯域制御機構２０５に送られる。
The upper limit
次に、送信パケット情報グループＢについて説明する。優先度制御機構２０３ｂは、送信キュー２０１ｂに登録された送信パケット情報１ｂ〜８ｂの送信パケットフラグ情報を参照して、高優先送信パケット５ｂと低優先送信パケット１ｂ，２ｂ，３ｂ，４ｂ，６ｂ，７ｂ，８ｂとに分け、高優先送信パケット情報から順番（５ｂ→１ｂ→２ｂ→３ｂ→４ｂ→６ｂ→７ｂ→８ｂ）に上限帯域制御機構２０４ｂへ送る。
Next, the transmission packet information group B will be described. The
上限帯域制御機構２０４ｂは、優先度判定機構２０３ｂから送られてくる送信パケット情報の送信パケットデータサイズを順次加算（積算）して、この加算値が上限値レジスタ値未満の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報の５ｂ，１ｂ，２ｂ，３ｂの送信パケットデータサイズを加算した時点で、送信パケットデータサイズの合計が９１０（＝１０＋３００＋５００＋１００）となる。
The upper limit
そして、次の送信パケット情報４ｂの送信パケットデータサイズを加算すると、送信パケットデータサイズの合計が１２１０（＝９１０＋３００）となり、上限値レジスタ値以上になるために、送信パケット情報４ｂ，６ｂ，７ｂ，８ｂは下限帯域制御機構２０５に送られず、送信パケット情報５ｂ，１ｂ，２ｂ，３ｂが下限帯域制御機構２０５に送られる。
Then, when the transmission packet data size of the next transmission packet information 4b is added, the total transmission packet data size becomes 1210 (= 910 + 300), which is equal to or larger than the upper limit register value, so that the
次に、送信パケット情報グループＣについて説明する。優先度制御機構２０３ｃは、送信キュー２０１ｃに登録された送信パケット情報１ｃ〜８ｃの送信パケットフラグ情報を参照して、高優先送信パケット２ｃ，４ｃ，５ｃ，６ｃ，７ｃ，８ｃと低優先送信パケット１ｃ，３ｃとに分ける。
Next, the transmission packet information group C will be described. The
ここでは、高優先送信パケット情報数が選択判定基準（本例では、選択判定基準の値は５とする）を超過することになる。この高優先送信パケット情報数の超過による低優先送信パケット情報の送信沈み込みを回避するために、高優先送信パケット情報の２ｃ→４ｃ→５ｃ→６ｃ→７ｃを送った後に、低優先送信パケット情報の１ｃを送り、再度高優先送信パケット情報の８ｃを送る制御を行う。この結果、送信パケット情報２ｃ→４ｃ→５ｃ→６ｃ→７ｃ→１ｃ→８ｃ→３ｃの順番で、上限帯域制御機構２０４ｃに送られることになる。
Here, the number of high-priority transmission packet information exceeds the selection criterion (in this example, the value of the selection criterion is 5). In order to avoid the transmission sinking of the low-priority transmission packet information due to the excess of the number of high-priority transmission packet information, the low-priority transmission packet information is transmitted after the high-priority
上限帯域制御機構２０４ｃは、優先度制御機構２０３ｃから送られてくる送信パケット情報の送信パケットデータサイズを順次加算（積算）して、この加算値が上限値レジスタ値未満の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報２ｃ，４ｃ，５ｃ，６ｃ，７ｃ，１ｃ，８ｃ，３ｃの送信パケットデータサイズの合計が６６０（＝１０＋１０＋１０＋１０＋１０＋５００＋１０＋１００）となるため、上限値レジスタ値１０００未満となるので送信パケット情報１ｃ〜８ｃが下限帯域制御機構２０５に送られる。
The upper limit
この送信キュー２０１ａ〜２０１ｃから上限帯域制御機構２０４ａ〜２０４ｃまでの処理は、物理ＮＩＣ２０上で同時に動作可能である。また、各上限帯域制御機構２０４ａ〜２０４ｃ内のカウンタ２０４２は一定の時間間隔でリセットされ、リセット後は、後続の送信パケット情報に対して、上記した送信パケット制御が行われることになる。
The processing from the
このような送信パケット制御を繰返すことにより、各送信パケット情報グループにそれぞれ対応する送信パケットデータグループに対して上限帯域を保証することが可能になる。下限帯域制御機構２０５に送られなかった送信パケット情報グループＢの送信パケット情報４ｂ，６ｂ，７ｂ，８ｂは、カウンタがリセットされた後で処理される。
By repeating such transmission packet control, it becomes possible to guarantee the upper limit band for the transmission packet data group corresponding to each transmission packet information group. The
次に、下限帯域制御機構２０５は、上限帯域制御機構２０４ａ〜２０４ｃから送られてくる送信パケット情報を用いて、ＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。先ず、下限帯域制御機構２０５は通信パケット情報グループＡの処理を行う。すなわち、下限帯域制御機構２０５は、上限帯域制御機構２０４ａから送られてくる送信パケット情報１ａ〜８ａの送信パケットデータサイズを、カウンタ２０５２ａにより加算して、下限値レジスタ値以上になるまでの送信パケット情報にてＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。
Next, the lower limit
ここでは、１ａ→２ａ→５ａ→３ａのパケットデータを取得した時点で、送信パケットデータサイズの合計が１３０（＝１０＋１０＋１０＋１００）となり、下限値レジスタ値（例えば、下限値レジスタ値を１００とする）以上となるので、下限帯域制御機構２０５は、ＤＭＡ制御部２０６に対して、次の通信パケット情報グループの送信パケットデータの取得に移るよう指示する。すなわち、送信パケット情報グループＡの処理に続いて通信パケット情報グループＢの処理を行うことになる。
Here, when the packet data of 1a → 2a → 5a → 3a is acquired, the total transmission packet data size becomes 130 (= 10 + 10 + 10 + 100), which is equal to or greater than the lower limit register value (for example, the lower limit register value is 100). Therefore, the lower limit
下限帯域制御機構２０５は、上限帯域制御機構２０４ｂから送られてくる送信パケット情報５ｂ，１ｂ，２ｂ，３ｂの送信パケットデータサイズを、カウンタ２０５２ｂにより加算して、下限値レジスタ値以上になるまでの送信パケット情報にてＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。
The lower limit
ここでは、５ｂ→１ｂのパケットデータを取得した時点で、送信パケットデータサイズの合計が３１０（＝１０＋３００）となり、下限値レジスタ値の１００以上となるので、下限帯域制御機構２０５は、ＤＭＡ制御部２０６に対して、次の通信パケット情報グループの送信パケットデータの取得に移るよう指示する。すなわち、送信パケット情報グループＢの処理に続いて通信パケット情報グループＣの処理を行うことになる。 Here, when the packet data of 5b → 1b is acquired, the total transmission packet data size is 310 (= 10 + 300), which is 100 or more of the lower limit register value. Instruct 206 to move to the acquisition of transmission packet data of the next communication packet information group. That is, the processing of the communication packet information group C is performed following the processing of the transmission packet information group B.
下限帯域制御機構２０５は、上限帯域制御機構２０４ｃから送られてくる送信パケット情報１ｃ〜８ｃの送信パケットデータサイズを、カウンタ２０５２ｃにより加算して、下限値レジスタ値以上になるまでの送信パケット情報にてＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。
The lower limit
ここでは、２ｃ→４ｃ→５ｃ→６ｃ→７ｃ→１ｃのパケットデータを取得した時点で、送信パケットデータサイズの合計が５５０（＝１０＋１０＋１０＋１０＋１０＋５００）となり、下限値レジスタ値の１００以上となるので、下限帯域制御機構２０５は、ＤＭＡ制御部２０６に対して、次の通信パケット情報グループの送信パケットデータの取得に移るように指示する。
Here, when the packet data of 2c → 4c → 5c → 6c → 7c → 1c is acquired, the total transmission packet data size is 550 (= 10 + 10 + 10 + 10 + 10 + 500), which is 100 or more of the lower limit register value. The
このようにして、送信パケット情報を１ａ→２ａ→５ａ→３ａ→５ｂ→１ｂ→２ｃ→４ｃ→５ｃ→６ｃ→７ｃ→１ｃの順番で処理することにより、該当する送信パケットデータを主記憶３０から取得し送信バッファ２０７に格納する。
In this way, the transmission packet information is processed from the
かかる送信パケットデータの処理により、送信パケット情報グループＡ〜Ｃに対して既に下限帯域を保証したので、残りの送信パケット情報に対する処理はラウンドロビン制御により送信パケット情報グループＡ→Ｂ→Ｃの順番で行う。 Since the lower limit band has already been guaranteed for the transmission packet information groups A to C by the processing of the transmission packet data, the processing for the remaining transmission packet information is performed in the order of the transmission packet information groups A → B → C by round robin control. Do.
ここでは、残りの送信パケット情報を、４ａ→２ｂ→８ｃ→６ａ→３ｂ→３ｃ→７ａ→８ａの順番で処理することにより、該当する送信パケットデータを主記憶３０から取得し送信バッファ２０７に格納する。また、下限帯域制御機構２０５内のカウンタ２０５２ａ〜２０５２ｃは一定の時間間隔でリセットされる。リセット後は、ラウンドロビン制御で行っていた送信パケット制御を、下限値レジスタ値と送信パケットデータサイズの加算結果とを比較する送信パケット制御に戻る。
Here, by processing the remaining transmission packet information in the order of 4a → 2b → 8c → 6a → 3b → 3c → 7a → 8a, the corresponding transmission packet data is obtained from the
このような送信パケット制御を繰り返すことにより、各送信パケット情報グループにそれぞれ対応する送信パケットデータグループに対して下限帯域を保証することができる。なお、上述した処理により、送信バッファ２０７に格納された送信パケットデータは、ネットワークＩ／Ｆ２０９にてネットワーク４０に送信される。
By repeating such transmission packet control, it is possible to guarantee the lower limit band for the transmission packet data group corresponding to each transmission packet information group. Note that the transmission packet data stored in the
次に、物理ＮＩＣ２０のパケット受信動作について、図９を参照して詳細に説明する。物理ＮＩＣ２０は、ネットワーク４０から受信したパケットについて受信した順番で処理を行う。ネットワーク４０からネットワークＩ／Ｆ２０９が、受信パケット番号１（以下単に番号１と称す）の受信パケットデータを受信すると、受信バッファ２０８にこの受信パケットデータを格納する。
Next, the packet reception operation of the
受信バッファ２０８は、格納された番号１の受信パケットデータから受信対象のＩＰアドレスデータを抜き出し、この受信パケットのＩＰアドレスに対応する受信キューを選択する。ここでは、番号１の受信パケットデータの受信パケットのＩＰアドレスは、“ａ．ａ．ａ．ａ”なので、“ａ．ａ．ａ．ａ”のＩＰアドレスに対応する受信キュー２０２ａが選択される。ＤＭＡ制御部２０６は、選択された受信キュー２０２ａに対応する主記憶３０のアドレスに、番号１の受信パケットデータ１をＤＭＡ転送し、受信キュー２０２ａに受信バッファ情報を登録する。
The
次に、ネットワークＩ／Ｆ２０９は、番号２の受信パケットデータを受信すると、受信バッファ２０８に受信パケットデータ２を格納する。受信バッファ２０８は、格納された番号２の受信パケットデータから受信対象のＩＰアドレスデータを抜き出し、この受信パケットのＩＰアドレスに対応する受信キューを選択する。ここでは、番号２の受信パケットデータの受信パケットのＩＰアドレスは“ｂ．ｂ．ｂ．ｂ”なので、“ｂ．ｂ．ｂ．ｂ”のＩＰアドレスに対応する受信キュー２０２ｂが選択される。ＤＭＡ制御部２０６は、選択された受信キュー２０２ｂに対応する主記憶３０のアドレスに、受信パケットデータ２をＤＭＡ転送し、受信キュー２０２ｂに受信バッファ情報を登録する。
Next, when receiving the received packet data of
次に、ネットワークＩ／Ｆ２０９は、番号３の受信パケットデータを受信すると、受信バッファ２０８にこの受信パケットデータを格納する。受信バッファ２０８は、格納された番号３の受信パケットデータ３から受信対象のＩＰアドレスデータを抜き出し、受信パケットのＩＰアドレスに対応する受信キューを選択する。ここでは、受信パケットデータ３の受信パケットのＩＰアドレスは“ｃ．ｃ．ｃ．ｃ”なので、“ｃ．ｃ．ｃ．ｃ”のＩＰアドレスに対応する受信キュー２０２ｃが選択される。ＤＭＡ制御部２０６は、選択された受信キュー２０２ｃの対応する主記憶３０のアドレスに、受信パケットデータ２をＤＭＡ転送し、受信キュー２０２ｃに受信バッファ情報を登録する。
Next, when receiving the received packet data of
以下、番号４〜８の各受信パケットについても同様に、受信したパケットデータに応じて、各受信キュー２０２ａ〜２０２ｃに受信パケットデータが登録されるのである。こうして、各受信キューに受信パケット情報が登録されると、各受信キューに対応しているＶＮＩＣ１０５，１１５，２５が、それぞれ受信パケットデータの取り込みを行う。
Hereinafter, similarly for each of the received packets of numbers 4-8, the received packet data is registered in each of the receive
このように、複数の送信キューと、優先度制御機構と、上限帯域制御機構と、下限帯域制御機構とを設けることにより、複数のＶＮＩＣに共有されるＮＩＣは、各ＶＮＩＣのデータ転送帯域を保証することが可能となり、各仮想計算システムに対して安定したネットワークサービスを提供することが可能となる。また、各ＶＮＩＣが対応する受信キューを搭載することにより、受信データの振り分け処理の負荷が軽減可能である。 Thus, by providing a plurality of transmission queues, a priority control mechanism, an upper limit bandwidth control mechanism, and a lower limit bandwidth control mechanism, the NIC shared by the plurality of VNICs guarantees the data transfer bandwidth of each VNIC. This makes it possible to provide a stable network service to each virtual computing system. Also, by installing a reception queue corresponding to each VNIC, it is possible to reduce the load of the received data distribution process.
次に、本発明の他の実施の形態について、図１０を参照して説明する。図１０において、図３と同等部分には同一符号を付して示している。本実施の形態では、先の実施の形態における下限値レジスタ２０５３及び上限値レジスタ２０４３として、ＮＩＣの制御ソフトウエアにより個別に設定値を変更可能とする。更に、これら上限値レジスタ及び下限値レジスタを個々の送信キュー２０１ａ，２０１ｂ，２０１ｃにそれぞれ対応して実装することにより、ＶＮＩＣ毎のデータ転送性能に差をつけるようにしたものである。
Next, another embodiment of the present invention will be described with reference to FIG. 10, parts that are the same as those in FIG. 3 are given the same reference numerals. In this embodiment, as the
図１０を参照すると、上限値レジスタ２１０ａ〜２１０ｃ、下限値レジスタ２１１ａ〜２１１ｃを、個々の送信キュー２０１ａ，２０１ｂ，２０１ｃ対応に実装した物理ＮＩＣ２０の構成を示している。これら上限値レジスタ２１０ａ〜２１０ｃ及び下限値レジスタ２１１ａ〜２１１ｃは、ＮＩＣの制御ソフトウエアにより個別に値を設定可能なレジスタにより構成される。
Referring to FIG. 10, there is shown a configuration of the
ここで、一例として、送信パケット情報グループＡの上限値レジスタ２１０ａを１０００、下限値レジスタ２１１ａを１００に、それぞれ設定するものとする。また、送信パケット情報グループＢの上限値レジスタ２１０ｂを２０００、下限値レジスタ２１１ｂを５００に、それぞれ設定するものとする。送信パケット情報グループＣの上限値レジスタ２１０ｃを６００、下限値レジスタ２１１ｃを５０に、それぞれ設定するものとする。
Here, as an example, the
図７及び図１１は本実施の形態の動作を説明するための図であり、図７に示したように、各グループＡ〜Ｃの送信パケット情報は、先の実施の形態と同一とし、また優先度制御機構２０３ａ〜２０３ｃにおける動作も先の実施の形態と同一とする。それより後段の上限帯域制御機構２０４ａ〜２０４ｃ及び下限帯域制御機構２０５、更にはＤＭＡ制御部２０６の動作が異なるので、以下に、図１１を参照して説明する。
7 and 11 are diagrams for explaining the operation of the present embodiment. As shown in FIG. 7, the transmission packet information of each of the groups A to C is the same as that of the previous embodiment. The operations in the
上限帯域制御機構２０４ａは、優先度制御機構２０３ａから送られてくる送信パケット情報の送信パケットデータサイズを加算して、上限値レジスタ２１０ａに設定された値未満（１０００未満）の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報１ａ，２ａ，５ａ，３ａ，４ａ，６ａ，７ａ，８ａの送信パケットデータサイズの合計が９３０（＝１０＋１０＋１０＋１００＋３００＋２００＋２００＋１００）となるため、全ての送信パケット情報１ａ〜８ａが、下限帯域制御機構２０５に送られる。
The upper limit
上限帯域制御機構２０４ｂは、優先度制御機構２０３ｂから送られてくる送信パケット情報の送信パケットデータサイズを加算して、上限値レジスタ２１０ｂに設定された値未満（２０００未満）の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報５ｂ，１ｂ，２ｂ，３ｂ，４ｂ，６ｂ，７ｂ，８ｂの送信パケットデータサイズの合計が１７１０（＝１０＋３００＋５００＋１００＋３００＋２００＋２００＋１００）となるため、全ての送信パケット情報１ｂ〜８ｂが下限帯域制御機構２０５に送られる。
The upper limit
上限帯域制御機構２０４ｃは、優先度制御機構２０３ｃから送られてくる送信パケット情報の送信パケットデータサイズを加算して、上限値レジスタ２１０ｃに設定された値未満（６００未満）の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報２ｃ，４ｃ，５ｃ，６ｃ，７ｃ，１ｃ，８ｃの送信パケットデータサイズを加算した時点で、送信パケットデータサイズの合計が５６０（＝１０＋１０＋１０＋１０＋１０＋５００＋１０）となる。
The upper limit
そして、次の送信パケット情報３ｃの送信パケットデータサイズを加算すると、送信パケットデータサイズの合計が６６０（＝５６０＋１００）となり、上限値レジスタ値を越えることになる。よって、送信パケット情報３ｃは下限帯域制御機構２０５に送られず、送信パケット情報２ｃ，４ｃ，５ｃ，６ｃ，７ｃ，１ｃ，８ｃが下限帯域制御機構２０５に送られるのである。
When the transmission packet data size of the next
下限帯域制御機構２０５は、上限帯域制御機構２０４ａ〜２０４ｃから送られてくる送信パケット情報を用いて、ＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。先ず、送信パケット情報グループＡの処理を行う。下限帯域制御機構２０５は、上限帯域制御機構２０４ａから送られてくる送信パケット情報１ａ〜８ａに対して、送信パケットデータサイズを加算して、下限値レジスタ２１１ａに設定された値以上になるまでの送信パケット情報に基づいて、ＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。
The lower limit
ここでは、１ａ→２ａ→５ａ→３ａのパケットデータを取得した時点で、送信パケットデータサイズの合計が１３０（＝１０＋１０＋１０＋１００）となり、下限値レジスタ２１１ａに設定した１００以上となるので、次の送信パケット情報グループの送信パケットデータの取得に移る。
Here, when the packet data of 1a → 2a → 5a → 3a is acquired, the total transmission packet data size is 130 (= 10 + 10 + 10 + 100), which is 100 or more set in the
送信パケット情報グループＡの処理に続いて、送信パケット情報グループＢの処理を行う。下限帯域制御機構２０５は、上限帯域制御機構２０４ｂから送られてくる送信パケット情報１ｂ〜８ｂに対して送信パケットデータサイズを加算して、下限値レジスタ２１１ｂに設定された値以上になるまでの送信パケット情報に基づいて、ＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。
Subsequent to the processing of the transmission packet information group A, the processing of the transmission packet information group B is performed. The lower limit
ここでは、５ｂ→１ｂ→２ｂのパケットデータを取得した時点で、送信パケットデータサイズの合計が８１０（＝１０＋３００＋５００）となり、下限値レジスタ２１１ｂに設定した５００以上となるので、次の送信パケット情報グループの送信パケットデータの取得に移る。 Here, when the packet data of 5b → 1b → 2b is acquired, the total transmission packet data size is 810 (= 10 + 300 + 500), which is 500 or more set in the lower limit register 211b, so the next transmission packet information group Move on to acquire the transmission packet data.
送信パケット情報グループＢの処理に続いて、送信パケット情報グループＣの処理を行う。下限帯域制御機構２０５は、上限帯域制御機構２０４ｃから送られてくる送信パケット情報２ｃ，４ｃ，５ｃ，６ｃ，７ｃ，１ｃ，８ｃに対して送信パケットデータサイズを加算して、下限値レジスタ２１１ｃに設定された値以上になるまでの送信パケット情報に基づき、ＤＭＡ制御部２０６に対してＤＭＡ起動指示を行う。
Subsequent to the processing of the transmission packet information group B, the processing of the transmission packet information group C is performed. The lower limit
ここでは、２ｃ→４ｃ→５ｃ→６ｃ→７ｃのパケットデータを取得した時点で、送信パケットデータサイズの合計が５０（＝１０＋１０＋１０＋１０＋１０）となり、下限値レジスタ２１１ｃに設定した５０以上となるので、次の送信パケット情報グループの送信パケットデータの取得に移る。 Here, when the packet data of 2c → 4c → 5c → 6c → 7c is acquired, the total transmission packet data size is 50 (= 10 + 10 + 10 + 10 + 10), which is 50 or more set in the lower limit register 211c. The process proceeds to acquisition of transmission packet data of the transmission packet information group.
上述した上記の送信パケットデータの処理をなすことにより、送信パケット情報グループＡ〜Ｃに対して下限帯域の保証が可能となったので、残りの送信パケット情報に対する処理は、ラウンドロビン制御により、送信パケット情報グループＡ→Ｂ→Ｃの順番で行うことになる。 By performing the above-described transmission packet data processing, it becomes possible to guarantee the lower limit bandwidth for the transmission packet information groups A to C. Therefore, the processing for the remaining transmission packet information is performed by round-robin control. The packet information groups A → B → C are performed in this order.
以上の処理に基づいて、各グループにおける総送信データサイズを考えると、単位時間で比較した場合、グループＡの総送信データサイズは９３０となり、グループＢの総送信データサイズは１７１０となり、グループＣの送信データサイズは５６０となって、結果として、ＶＮＩＣ毎のデータ転送性能に差をつけることできる。これにより、ＶＮＩＣ毎のネットワーク性能を制御することが可能となり、性能に応じた価格帯の設定等が可能となる。 Considering the total transmission data size in each group based on the above processing, when compared in unit time, the total transmission data size of group A is 930, the total transmission data size of group B is 1710, and the total transmission data size of group C is The transmission data size is 560, and as a result, the data transfer performance for each VNIC can be differentiated. As a result, the network performance for each VNIC can be controlled, and a price range can be set according to the performance.
次に、本発明の更に他の実施の形態について説明する。先の実施の形態においては、上限値レジスタを設けているので、あるグループにおいて、他グループの送信パケットがなくても、自グループ送信パケットデータサイズが上限値に達してしまった場合には、一時的にパケットの送信ができなくなってしまうという問題がある。この問題を解決するために、本実施の形態では、上限帯域制御機構２０４を改良したものである。
Next, still another embodiment of the present invention will be described. In the previous embodiment, since the upper limit register is provided, even if there is no transmission packet of another group in a certain group, if the own group transmission packet data size has reached the upper limit, There is a problem that the packet cannot be transmitted. In order to solve this problem, the upper limit
図１２は、全ての上限帯域制御機構が、他の上限帯域制御機構が保持するパケット情報の有無を参照するようにした構成となっている。図１３は、本実施の形態において、ある上限帯域制御機構が、他上限限帯域制御機構が保持するパケット情報を参照する場合の、送信パケット情報を送る動作手順を示している。 FIG. 12 shows a configuration in which all upper limit bandwidth control mechanisms refer to the presence or absence of packet information held by other upper limit bandwidth control mechanisms. FIG. 13 shows an operation procedure for transmitting transmission packet information when a certain upper limit bandwidth control mechanism refers to packet information held by another upper limit bandwidth control mechanism in the present embodiment.
図１２を用いて、本実施の形態が上記実施の形態と異なる部分に関してのみ説明する。他の上限帯域制御機構に対して、自上限帯域制御機構が保持する送信パケット情報の有無を出力する機能（データレジスタ２０４１からの出力）と、他の上限帯域制御機構が保持する送信パケット情報の有無を、比較論理部２０４４にて参照する機能とを、上記の実施の形態に対して追加している。
With reference to FIG. 12, only the portions in which this embodiment is different from the above embodiment will be described. A function for outputting the presence / absence of transmission packet information held by the own upper limit bandwidth control mechanism (output from the data register 2041) with respect to other upper limit bandwidth control mechanisms, and transmission packet information held by other upper limit bandwidth control mechanisms A function for referring to the presence / absence in the
図１３を参照して、比較論理部２０４４の制御フローについて説明する。先ず、自上限帯域制御機構のカウンタ値（２０４２の値）と上限値レジスタの値（２０４３の値）とを比較する。ここで、カウンタ値が上限値に達していない場合には、送信パケット情報を下限帯域制御機構へ送る。上限値に達している場合には、他の上限帯域制御機構が送信パケット情報を保持しているかを確認する。ここで、他の上限帯域制御機構が送信パケットを保持していない場合には、送信パケット情報を下限帯域制御機構へ送る。
A control flow of the
次に、本実施の形態における送信パケット制御の一例を、図１４を用いて説明する。図１４において、優先度制御機構２０３ａ〜２０３ｃの各選択判定基準は先の実施の形態の場合と同様に５とする。また、上限帯域制御機構２０４ａ〜２０４ｃの各上限値レジスタ値は１０００とする。
Next, an example of transmission packet control in the present embodiment will be described with reference to FIG. In FIG. 14, the selection criterion of the
上限帯域制御機構２０４ａは、優先度制御機構２０３ａから送られてくる送信パケット情報の送信パケットデータサイズを加算して、上限値レジスタ２１０ａに設定された値未満（１０００未満）の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報１ａ，２ａ，３ａの送信パケットデータサイズの合計が１２０（＝１０＋１０＋１００）となるため、送信パケット情報１ａ〜３ａが下限帯域制御機構２０５に送られる。
The upper limit
上限帯域制御機構２０４ｂは、優先度制御機構２０３ｂから送られてくる送信パケット情報の送信パケットデータサイズを加算して、上限値レジスタ２１０ｂに設定された値未満（１０００未満）の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報５ｂ，１ｂ，２ｂ，３ｂの送信パケットデータサイズの合計が９１０（＝１０＋３００＋５００＋１００）となるため、送信パケット情報５ｂ，１ｂ，２ｂ，３ｂが下限帯域制御機構２０５に送られる。
The upper limit
上限帯域制御機構２０４ｃは、優先度制御機構２０３ｃから送られてくる送信パケット情報の送信パケットデータサイズを加算して、上限値レジスタ２１０ｃに設定された値未満（１０００未満）の場合に、下限帯域制御機構２０５に送信パケット情報を送る。ここでは、送信パケット情報２ｃ，１ｃの送信パケットデータサイズを加算した時点で、送信パケットデータサイズの合計が５１０（＝１０＋５００）となるため、送信パケット情報２ｃ，１ｃが下限帯域制御機構２０５に送られる。
The upper limit
この時点で、送信パケットグループＢの送信パケット情報４ｂ，６ｂ，７ｂ，８ｂが下限帯域制御機構２０５に送られずに残っている。ここで、上限帯域制御機構２０３ｂは、上限待機制御機構２０３ａおよび２０３ｃに送信パケット情報がないことを確認すると、自上限帯域制御機構のカウンタ２０４２が上限値レジスタ２１０ｂに設定されている値（１０００）に達していても、送信パケット情報４ｂ，６ｂ，７ｂ，８ｂを下限帯域制御機構２０５に送る。
At this time, the
この結果、他グループの送信パケットがなく、自グループの送信パケットを保持している場合でも、パケット送信処理を停止することがなくなるので、更にＮＩＣを効率よく利用することが可能となる。 As a result, even when there is no transmission packet of another group and the transmission packet of the own group is held, the packet transmission processing is not stopped, so that the NIC can be used more efficiently.
本発明の別の実施の形態について、図１５及び図１６を用いて説明する。図１５は、本発明の別の実施の形態による上限帯域制御機構２０４ａの構成を示す図であり、図１６はその動作を示すフローである。なお、図１５においては、上限帯域制御機構２０４ａの構成のみを示しているが、他の上限帯域制御機構２０４ｂや２０４ｃも同一の構成である。そして、図１５において、図１２と同等部分は、同一符号により示されている。
Another embodiment of the present invention will be described with reference to FIGS. 15 and 16. FIG. 15 is a diagram showing a configuration of the upper limit
先ず、図１５においては、図１２の構成に対して、自上限帯域制御機構の送信パケットの有無の他に、カウンタ２０４２のカウンタ値、送信パケット長及び上限値レジスタ２０４３の値を、他の上限帯域制御機構に対して出力する機能が追加されている。また、図１５においては、図１２の構成に対して、他の上限帯域制御機構からの送信パケットの有無、カウンタ値、送信パケット長及び上限値レジスタの値を参照して、状態テーブル２０４４１として作成保持する機能が追加されている。
First, in FIG. 15, in addition to the presence / absence of a transmission packet of the own upper limit bandwidth control mechanism, the counter value of the
次に、図１６を参照すると、ある上限帯域制御機構が、他上限帯域制御機構からの上記情報を参照して、自送信パケット情報を送信する場合の動作について説明する。先ず、自上限帯域制御機構のカウンタ値（２０４２の値）と上限値レジスタ値（２０４３の値）とを比較する。ここで、カウンタ値が上限値に達していない場合は（ステップ２０４４−１でＮｏ）、送信パケット情報を下限帯域制御機構へ送る（ステップ２０４４−３）。 Next, with reference to FIG. 16, an operation when a certain upper limit bandwidth control mechanism transmits self-transmitted packet information with reference to the above information from the other upper limit bandwidth control mechanism will be described. First, the counter value (2042 value) of the own upper limit bandwidth control mechanism is compared with the upper limit register value (value of 2043). If the counter value has not reached the upper limit value (No in step 2044-1), the transmission packet information is sent to the lower limit bandwidth control mechanism (step 2044-3).
カウンタ値が上限値に達している場合は（ステップ２０４４−１でＹｅｓ）、他上限帯域制御機構が送信パケット情報を保持しているかを、状態テーブル２０４４１を参照し確認する（ステップ２０４４−４）。ここで、送信パケットを保持していない他上限帯域制御機構が複数ある場合には（ステップ２０４４−５）、そのなかから送信パケット余力がある上限帯域制御機構を選択する（ステップ２０４４−６）。このときの選択のアルゴリズムとしては、例えば、次の３つの方法が考えられる。 If the counter value has reached the upper limit value (Yes in Step 2044-1), it is checked by referring to the status table 20441 whether the other upper limit bandwidth control mechanism holds transmission packet information (Step 2044-4). . When there are a plurality of other upper limit bandwidth control mechanisms that do not hold transmission packets (step 2044-5), an upper limit bandwidth control mechanism having a transmission packet capacity is selected (step 2044-6). For example, the following three methods are conceivable as selection algorithms at this time.
（１）該当する上限帯域制御機構のなかから送信可能残カウント（送信余力）が最大の上限待機制御機構を選択する。（２）該当する上限帯域制御機構のなかからラウンドロビンで上限帯域制御機構を選択する。（３）該当する上限帯域制御機構のなかからランダムに上限帯域制御機構を選択する。 (1) The upper limit standby control mechanism having the maximum transmittable remaining count (transmission remaining capacity) is selected from the corresponding upper limit bandwidth control mechanisms. (2) The upper limit bandwidth control mechanism is selected by round robin from the corresponding upper limit bandwidth control mechanisms. (3) An upper limit bandwidth control mechanism is randomly selected from the corresponding upper limit bandwidth control mechanisms.
こうして選択された上限待機機構のパケット送信カウンタを更新し（ステップ２０４４−７）、自送信パケット情報を次段の下限帯域制御機構に送信する（ステップ２０４４−３）。 The packet transmission counter of the upper limit waiting mechanism selected in this way is updated (step 2044-7), and the own transmission packet information is transmitted to the lower limit bandwidth control mechanism of the next stage (step 2044-3).
次に、上記（１）の方法、すなわち該当する上限帯域制御機構のなかから、送信余力である送信可能残カウントが最大の上限待機制御機構を選択する場合について、図１７の状態テーブル２０４４１の詳細（状態変化）を参照して、詳細に説明する。 Next, the details of the state table 20441 in FIG. 17 in the case of selecting the upper limit standby control mechanism having the maximum transmittable remaining count, which is the transmission capacity, from the above method (1), that is, the corresponding upper limit bandwidth control mechanism. This will be described in detail with reference to (state change).
図１７は、図１４に示した送信パケット制御において、上限帯域制御機構２０４ｂが送信上限値に達した状態における各上限帯域制御機構２０４ａ〜２０４ｃの状態テーブル２０４４１のそれぞれの内容を示している。上限帯域制御機構２０４ａ〜２０４ｃの各状態テーブルは、全ての上限帯域制御機構について、「送信パケットの有無」、「送信可能残カウント」、「カウンタ値」及び「上限のレジスタ値」を有している。
FIG. 17 shows the contents of the state table 20441 of each of the upper limit
上限帯域制御機構２０４ｂが送信上限値に達した状態では、上限帯域制御機構２０４ｂは、図１４に示した送信パケット番号４ｂのカウンタ値３００の送信パケットを保持していることになる。この状態で、上限帯域制御機構２０４ｂは、送信上限値に達しているために、パケットの送信はできない状態となっている。この場合、上限帯域制御機構２０４ｂは、他の上限待機制御機構の送信余力を確認し自送信パケット情報の送信を試みることになる。
When the upper limit
先ず、上限帯域制御機構２０４ｂは、上限帯域制御機構２０４ａの送信可能残カウンタ値８８０と上限帯域制御機構２０４ｃの送信可能残カウンタ値４９０とを比較し、残カウントが大きい上限帯域制御機構２０４ａを選択することになる。上限待機制御機構２０４ｂは、自送信パケット情報のカウンタ値３００を上限待機制御機構２０４ａに送信し（ステップｄ）、上限帯域制御機構２０４ａのカウンタを更新する（１２０＋３００＝４２０）（ステップｅ）。これに同期して、上限帯域制御機構２０４ａの送信可能残カウンタも更新される（１０００−４２０＝５８０）（ステップｆ）。
First, the upper limit
更に、上限待機機構２０４ｂ及び２０４ｃの状態テーブル内の上限待機制御機構２０４ａのカウンタ値、送信可能残カウント情報も同期してそれぞれ更新される（ステップｈ，ｉ）。その後、上限帯域制御機構２０４ｂは、自送信パケット情報を下限帯域制御機構に送るのである。
Further, the counter value of the upper limit
次に、上限帯域制御機構２０４ｂは、後続の送信パケット番号６ｂのカウント値２００の送信パケットを送信しようとする。この状態における上限帯域制御機構２０４ａ〜２０４ｃの各状態テーブルの内容の変化を、図１８に示している。図１７で説明したと同様の論理に従って、上限帯域制御機構２０４ｂは、上限帯域制御機構２０４ａのカウンタを更新して自送信パケット情報を次段の下限帯域制御機構に送る。
Next, the upper limit
そして、上限帯域制御機構２０４ｂは、後続の送信パケット番号７ｂのカウント２００値の送信パケットを送信しようとする。この状態における上限帯域制御機構２０４ａ〜２０４ｃの各状態テーブルの内容の変化を、図１９に示している。上記と同様の論理に従って、上限帯域制御機構２０４ｂは、上限帯域制御機構２０４ｃのカウンタを更新して自送信パケット情報を次段の下限帯域制御機構に送る。
Then, the upper limit
最後に、上限帯域制御機構２０４ｂは後続の送信パケット番号８ｂのカウント値１００の送信パケットを送信しようとする。この状態における上限帯域制御機構２０４ａ〜２０４ｃの各状態テーブルの内容の変化を、図２０に示している。上記と同様の論理に従って、上限帯域制御機構２０４ｂは、上限帯域制御機構２０４ａのカウンタを更新して自送信パケット情報を次段の下限帯域制御機構に送る。
Finally, the upper limit
こうすることにより、他上限帯域制御機構にパケット送信余力がある場合には、この余力の範囲内で、かつ自上限帯域制御機構の上限値レジスタ値を超える送信パケットが送信可能となり、全仮想ＮＩＣの合計上限帯域を超えるパケット送信を抑止しつつ、かつ効率の良いパケット送信が実現可能となる。 In this way, when there is a packet transmission capacity in the other upper limit bandwidth control mechanism, it is possible to transmit a transmission packet within the range of the remaining capacity and exceeding the upper limit register value of the own upper limit bandwidth control mechanism. Thus, efficient packet transmission can be realized while suppressing packet transmission exceeding the total upper limit bandwidth.
なお、図１６におけるステップ２０４４−６の（２）の方法、すなわち、「該当する上限帯域機構をラウンドロビンで選択する」方法では、単に該当する上限帯域機構を順次予め定めた順序に基づいて選択するものである。また、ステップ２０４４−６の（３）の方法、すなわち、「該当する上限帯域機構をランダムに選択する」方法は、文字通り、アトランダムに選択するものである。 Note that in the method (2) of step 2044-6 in FIG. 16, that is, in the method of “selecting the appropriate upper limit bandwidth mechanism in round robin”, the corresponding upper limit bandwidth mechanism is simply selected based on a predetermined order sequentially. To do. The method (3) of step 2044-6, that is, the method of “selecting the appropriate upper limit bandwidth mechanism randomly” is literally selected at random.
上述したように、本発明においては、送信パケット情報キューを複数の仮想計算機に対応して設け、送信パケットキュー情報から送信パケット種類を解析し、送信パケットの優先度に応じて送信順番を並び替える優先度制御機能を設けている。更に、送信パケットキュー情報から実際の送信パケットサイズを監視し、単位時間当りのパケット送信の最大送信量を制限する上限帯域制御機能と、送信パケットキュー情報から実際の送信パケットサイズを監視し、単位時間当りのパケット送信の最低送信量を保証する下限帯域制御機能とを設けている。 As described above, in the present invention, a transmission packet information queue is provided corresponding to a plurality of virtual machines, the transmission packet type is analyzed from the transmission packet queue information, and the transmission order is rearranged according to the priority of the transmission packet. A priority control function is provided. Furthermore, the actual transmission packet size is monitored from the transmission packet queue information, the upper limit bandwidth control function for limiting the maximum transmission amount of packet transmission per unit time, and the actual transmission packet size is monitored from the transmission packet queue information. A lower limit bandwidth control function for guaranteeing a minimum transmission amount of packet transmission per time is provided.
かかる構成により、複数のＶＮＩＣ間での送信／受信時のキューロック制御によるロック取得待ち時間がなくなる。そして、送信パケットの実データ長（パケット長）に基づいて送信すべきパケットの帯域制御を行うことができるので、ＶＮＩＣ毎のパケット送信帯域の保証が可能となる。また、送信パケットの優先度に応じて送信パケットの順序制御を行うので、リアルタイム性が必要なパケットを優先的に送信可能となる。 With this configuration, there is no lock acquisition waiting time due to queue lock control during transmission / reception between a plurality of VNICs. Since the bandwidth control of the packet to be transmitted can be performed based on the actual data length (packet length) of the transmission packet, the packet transmission bandwidth for each VNIC can be guaranteed. Further, since the order of the transmission packets is controlled according to the priority of the transmission packets, it is possible to preferentially transmit packets that require real-time characteristics.
そして、複数のＶＮＩＣが１つの物理ＮＩＣを共有して利用する場合でも、ロック取得待ちによるパケット送信遅延を回避し、ＶＮＩＣ毎のデータ転送帯域を確保し、遅延の最小化が必要なパケットを優先的に送信することが可能となるものである。 Even when multiple VNICs share and use one physical NIC, avoid packet transmission delays due to waiting for lock acquisition, secure a data transfer bandwidth for each VNIC, and prioritize packets that require delay minimization. Can be transmitted automatically.
なお、上記の各実施の形態における仮想計算機の数や各レジスタの値は、単に具体例を示すにすぎず、これら数値に限定されることはなく、種々の変形が可能であることは明らかである。 It should be noted that the number of virtual machines and the value of each register in each of the above embodiments are merely specific examples, and are not limited to these numerical values, and it is obvious that various modifications are possible. is there.
上記の各実施の形態における制御動作は、予めその制御動作手順をプログラムとして記録媒体に格納しておき、これをコンピュータにより読取らせて実行させるように構成できることは明白である。 It is obvious that the control operation in each of the above-described embodiments can be configured such that the control operation procedure is stored in advance in a recording medium as a program and is read and executed by a computer.
１〜３ 仮想計算機
４ バス
５，２０ 物理ＮＩＣ
１１，２１，３１，１０５，１１５，１２５ ＶＮＩＣ
４０ ネットワーク
５１ 優先度制御部
５２ 上限帯域制御部
５３ 下限帯域制御部
２００ ＰＣＩバスＩ／Ｆ
２０１ａ〜２０１ｃ 送信キュー
２０２ａ〜２０２ｃ 受信キュー
２０３，２０３ａ〜２０３ｃ 優先度制御機構
２０４，２０４ａ〜２０４ｃ 上限帯域制御機構
２０５ 下限帯域制御機構
２０６ ＤＭＡ制御部
２０７ 送信バッファ
２０８ 受信バッファ
２０９ ネットワークＩ／Ｆ
２１０ａ〜２１０ｃ，２０４３ 上限値レジスタ
２１１ａ〜２１１ｃ，２０５３ 下限値レジスタ
２０３１，２０４１，２０５１ａ〜２０５１ｃ データレジスタ
２０３２ 優先判定部
２０３３ 高優先送信キュー
２０３４ 低優先送信キュー
２０３５ 選択判定部
２０４２，２０５２ａ〜２０５２ｃ カウンタ
２０４４ 比較部
２０５４ 送信パケット選択部
1-3 virtual computers
4 Bus
5,20 Physical NIC
11, 21, 31, 105, 115, 125 VNIC
40 network
51 Priority control unit
52 Upper limit bandwidth control unit
53 Lower limit bandwidth controller
200 PCI bus I / F
201a to 201c transmission queue
202a to 202c reception queue
203, 203a to 203c Priority control mechanism
204, 204a to 204c Upper limit bandwidth control mechanism
205 Lower limit bandwidth control mechanism
206 DMA controller
207 Transmission buffer
208 Receive buffer
209 Network I / F
210a to 210c, 2043 Upper limit register
211a to 211c, 2053
2032 Priority determination unit
2033 High-priority transmission queue
2034 Low priority transmission queue
2035 selection determination unit
2042, 2052a to 2052c counter
2044 comparison part
2054 Transmission packet selector
Claims (28)
前記物理ネットワークインターフェースカードは、
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御手段と、
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御手段と、
前記上限帯域制御手段の各々からの前記送信パケット情報群に含まれる各データ量を基に、前記ＶＮＩＣ毎に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御手段とを含み、
前記優先度制御手段、前記上限帯域制御手段、前記下限帯域制御手段は、この順に制御をなすよう設けられており、
前記優先度制御手段は、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とするシステム。 A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A virtual machine system including a physical network interface card that processes a group of information about each transmission packet of a power packet group and transmits a transmission packet of each virtual machine to the network according to the processing result,
The physical network interface card is
Priority control means provided corresponding to each of the VNICs, and determining the transmission order of each transmission packet based on each priority included in the transmission packet information group of the corresponding VNIC;
Upper limit bandwidth control means provided corresponding to each of the VNICs, and based on each data amount included in the transmission packet information group of the corresponding VNIC, to limit the maximum transmission amount per unit time according to the transmission order;
Lower limit bandwidth control means for guaranteeing the minimum amount of transmission per unit time according to the transmission order for each VNIC based on the amount of data included in the transmission packet information group from each of the upper limit bandwidth control means. See
The priority control unit, the upper limit band control unit, and the lower limit band control unit are provided to perform control in this order,
The priority control means sets the number of high priority transmission packets to be preferentially transmitted to a predetermined value, and transmits a lower priority transmission packet when the number of the high priority transmission packets reaches the predetermined value. A system characterized by doing so .
前記ＶＮＩＣ毎に、前記ＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御ステップと、
前記ＶＮＩＣ毎に、前記ＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御ステップと、
前記ＶＮＩＣ毎に、前記上限帯域制御ステップからの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御ステップとを含み、
前記優先度制御ステップ、前記上限帯域制御ステップ、前記下限帯域制御ステップは、この順に制御をなすよう構成されており、
前記優先度制御ステップは、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とする方法。 A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A packet transmission control method for a physical network interface card that processes a group of information about each transmission packet of a power packet group and transmits a transmission packet of each virtual machine to the network according to the processing result;
A priority control step for determining the transmission order of each transmission packet based on each priority included in the transmission packet information group of the VNIC for each VNIC;
For each VNIC, based on each data amount included in the transmission packet information group of the VNIC, an upper limit bandwidth control step for limiting a maximum transmission amount per unit time according to the transmission order;
Wherein each VNIC, based on the respective amount of data included in the transmission packet information unit from the upper band control step, seen including a lower band control step to ensure transmission minimum amount per unit time according to the transmission order,
The priority control step, the upper limit bandwidth control step, and the lower limit bandwidth control step are configured to perform control in this order,
The priority control step sets the number of high-priority transmission packets to be preferentially transmitted to a predetermined value, and transmits a lower-priority transmission packet when the number of high-priority transmission packets reaches the predetermined value. method characterized by the the like.
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御手段と、
前記ＶＮＩＣにそれぞれ対応して設けられ、対応するＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御手段と、
前記上限帯域制御手段の各々からの前記送信パケット情報群に含まれる各データ量を基に、前記ＶＮＩＣ毎に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御手段とを含み、
前記優先度制御手段、前記上限帯域制御手段、前記下限帯域制御手段は、この順に制御をなすよう設けられており、
前記優先度制御手段は、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とするカード。 A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A physical network interface card for processing a group of information about each transmission packet of a power packet group and transmitting a transmission packet of each virtual machine to the network according to the processing result;
Priority control means provided corresponding to each of the VNICs, and determining the transmission order of each transmission packet based on each priority included in the transmission packet information group of the corresponding VNIC;
Upper limit bandwidth control means provided corresponding to each of the VNICs, and based on each data amount included in the transmission packet information group of the corresponding VNIC, to limit the maximum transmission amount per unit time according to the transmission order;
Lower limit bandwidth control means for guaranteeing the minimum amount of transmission per unit time according to the transmission order for each VNIC based on the amount of data included in the transmission packet information group from each of the upper limit bandwidth control means. See
The priority control unit, the upper limit band control unit, and the lower limit band control unit are provided to perform control in this order,
The priority control means sets the number of high priority transmission packets to be preferentially transmitted to a predetermined value, and transmits a lower priority transmission packet when the number of the high priority transmission packets reaches the predetermined value. A card characterized by doing so .
前記ＶＮＩＣ毎に、前記ＶＮＩＣの送信パケット情報群に含まれる各優先度を基に、各送信パケットの送信順を定める優先度制御処理と、
前記ＶＮＩＣ毎に、前記ＶＮＩＣの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最大量を制限する上限帯域制御処理と、
前記ＶＮＩＣ毎に、前記上限帯域制御処理からの前記送信パケット情報群に含まれる各データ量を基に、前記送信順に従って単位時間当りの送信最低量を保証する下限帯域制御処理とを含み、
前記優先度制御処理、前記上限帯域制御処理、前記下限帯域制御処理は、この順に制御をなすよう構成されており、
前記優先度制御処理は、優先的に送信する高優先送信パケットの数を所定値に設定して、前記高優先送信パケットの数が前記所定値に達した時に、より低優先送信パケットを送出するようにしたことを特徴とするプログラム。 A virtual network interface card (VNIC) provided corresponding to each of a plurality of virtual machines and serving as an interface between the corresponding virtual machines and a network is shared, supplied from each of the VNICs, and transmitted from each of the virtual machines. A program for causing a computer to execute a packet transmission control method of a physical network interface card that processes information groups related to each transmission packet of a power packet group and transmits the transmission packet of each virtual machine to the network according to the processing result. ,
For each VNIC, based on each priority included in the transmission packet information group of the VNIC, priority control processing for determining the transmission order of each transmission packet;
For each VNIC, based on each data amount included in the transmission packet information group of the VNIC, an upper limit bandwidth control process for limiting the maximum transmission amount per unit time according to the transmission order;
Wherein each VNIC, based on each data amount the included in the transmission packet information unit from the upper band control process, look including a lower bandwidth control process to ensure the transmission minimum amount per unit time according to the transmission order,
The priority control process, the upper limit band control process, and the lower limit band control process are configured to perform control in this order,
The priority control process sets the number of high-priority transmission packets to be transmitted with priority to a predetermined value, and transmits a lower-priority transmission packet when the number of high-priority transmission packets reaches the predetermined value. A program characterized by doing so .
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008079458A JP5109748B2 (en) | 2008-03-26 | 2008-03-26 | Virtual computer system, packet transmission control method, and network interface card used therefor |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2008079458A JP5109748B2 (en) | 2008-03-26 | 2008-03-26 | Virtual computer system, packet transmission control method, and network interface card used therefor |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2009239374A JP2009239374A (en) | 2009-10-15 |
| JP5109748B2 true JP5109748B2 (en) | 2012-12-26 |
Family
ID=41252857
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2008079458A Expired - Fee Related JP5109748B2 (en) | 2008-03-26 | 2008-03-26 | Virtual computer system, packet transmission control method, and network interface card used therefor |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5109748B2 (en) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8234400B2 (en) * | 2010-03-16 | 2012-07-31 | Microsoft Corporation | Shaping virtual machine communication traffic |
| JP5549733B2 (en) * | 2010-08-18 | 2014-07-16 | 富士通株式会社 | Computer management apparatus, computer management system, and computer system |
| JP5871233B2 (en) * | 2012-03-22 | 2016-03-01 | 株式会社日立製作所 | Computer and bandwidth control method |
| JP5999184B2 (en) * | 2012-08-01 | 2016-09-28 | 富士通株式会社 | Information processing apparatus, control method, and control program |
| JP6424632B2 (en) | 2015-01-08 | 2018-11-21 | 富士通株式会社 | Load calculation method, load calculation program and load calculation device |
| DE112018007428T5 (en) | 2018-05-07 | 2021-01-07 | Mitsubishi Electric Corporation | DEVICE FOR INFORMATION PROCESSING, TUNING PROCEDURES AND TUNING PROGRAM |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3227069B2 (en) * | 1994-12-22 | 2001-11-12 | 株式会社日立製作所 | I / O processing system |
| JP2001211207A (en) * | 2000-01-26 | 2001-08-03 | Sony Corp | Packet transmission method, packet transmitter and band ensuring method |
| JP2001251331A (en) * | 2000-03-06 | 2001-09-14 | Fujitsu Ltd | Subscriber terminator to dynamically assign band |
| JP2005347969A (en) * | 2004-06-01 | 2005-12-15 | Matsushita Electric Ind Co Ltd | Device and method for transferring packet |
-
2008
- 2008-03-26 JP JP2008079458A patent/JP5109748B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2009239374A (en) | 2009-10-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5109748B2 (en) | Virtual computer system, packet transmission control method, and network interface card used therefor | |
| KR101006260B1 (en) | Apparatus and method for supporting memory management in an offload of network protocol processing | |
| US8601181B2 (en) | System and method for read data buffering wherein an arbitration policy determines whether internal or external buffers are given preference | |
| US9632977B2 (en) | System and method for ordering packet transfers in a data processor | |
| EP2618257B1 (en) | Scalable sockets | |
| KR20070042152A (en) | Apparatus and method for supporting connection establishment in an offload of network protocol processing | |
| WO2009008007A2 (en) | Data packet processing method for a multi core processor | |
| JP2007079789A (en) | Computer system and event processing method | |
| US20140317220A1 (en) | Device for efficient use of packet buffering and bandwidth resources at the network edge | |
| JP5136564B2 (en) | Packet processing apparatus and packet processing program | |
| CN104904169A (en) | Adjusting thread priority to improve throughput between peer-to-peer (P2P) devices | |
| US8189578B2 (en) | Simple fairness protocols for daisy chain interconnects | |
| TWI296387B (en) | Scheduling method for remote object procedure call and system thereof | |
| Dumazet | Busy polling: Past, present, future | |
| WO2001080035A2 (en) | Backpressure arrangement in client-server environment | |
| JP2007249357A (en) | Information processor, distributed processing system, and task management method | |
| US8004991B1 (en) | Method and system for processing network information | |
| US11271897B2 (en) | Electronic apparatus for providing fast packet forwarding with reference to additional network address translation table | |
| US10877800B2 (en) | Method, apparatus and computer-readable medium for application scheduling | |
| JP4349636B2 (en) | Packet processing apparatus and program | |
| JP2015184960A (en) | Information processing system and control method, and computer program | |
| JPH1196108A (en) | Computer system and bus control device | |
| WO2024013830A1 (en) | Server internal data transfer device, data transfer system, server internal data transfer method, and program | |
| US8842696B1 (en) | Guaranteed rate port scheduler | |
| JP2004054562A (en) | Method of controlling input and output for network file system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110210 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120614 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120619 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120820 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120911 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120924 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151019 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |