JP6734793B2 - Load control system and load control method - Google Patents

Load control system and load control method Download PDF

Info

Publication number
JP6734793B2
JP6734793B2 JP2017029842A JP2017029842A JP6734793B2 JP 6734793 B2 JP6734793 B2 JP 6734793B2 JP 2017029842 A JP2017029842 A JP 2017029842A JP 2017029842 A JP2017029842 A JP 2017029842A JP 6734793 B2 JP6734793 B2 JP 6734793B2
Authority
JP
Japan
Prior art keywords
physical
server
physical link
link group
load
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017029842A
Other languages
Japanese (ja)
Other versions
JP2018137570A (en
Inventor
義人 伊藤
義人 伊藤
彰則 白神
彰則 白神
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2017029842A priority Critical patent/JP6734793B2/en
Publication of JP2018137570A publication Critical patent/JP2018137570A/en
Application granted granted Critical
Publication of JP6734793B2 publication Critical patent/JP6734793B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、大規模データセンタなどにおける物理サーバの負荷分散に好適な負荷制御システムおよび負荷制御方法に関する。 The present invention relates to a load control system and a load control method suitable for load distribution of physical servers in a large-scale data center or the like.

ＳＳＩ（Single System Image）技術とは、複数の物理サーバを1台の論理サーバとして仮想化し、複数のサーバリソースを協調させることで大規模な仮想化サーバを構築することをいう（非特許文献１）。これによりシステム全体の性能を向上させて、高負荷処理を実現し、大容量データの使用が可能となり、例えばロードバランサや、ＷｅｂＡＰＩの処理に好適である。ＳＳＩ技術を実現するソフトウェアは、例えばＯＳ（Operating System）と連携して動作する。 The SSI (Single System Image) technology means that a plurality of physical servers are virtualized as one logical server, and a large-scale virtualized server is constructed by coordinating a plurality of server resources (Non-Patent Document 1). ). As a result, the performance of the entire system is improved, high-load processing is realized, and large-capacity data can be used, which is suitable for load balancer and Web API processing, for example. Software that realizes the SSI technology operates in cooperation with, for example, an OS (Operating System).

更にＮＩＣ（Network Interface Card）に着目すると、複数の物理サーバにまたがってＮＩＣを論理サーバに割当てて、Ｌ２（Layer 2）スイッチにＬＡＧ（Link Aggregation）設定を行うことは負荷分散の観点からメリットが大きい。 Further focusing on NICs (Network Interface Cards), it is advantageous from the viewpoint of load balancing to allocate NICs to logical servers across multiple physical servers and set LAG (Link Aggregation) on L2 (Layer 2) switches. large.

Bruce J. Walker,“Open Single System Image (openSSI) Linux Cluster Project”，[online]，Hewlett-Packard，[平成２９年２月１０日検索]，インターネット<URL:http://www.openssi.org/ssi-intro.pdf>Bruce J. Walker, "Open Single System Image (openSSI) Linux Cluster Project", [online], Hewlett-Packard, [Search on February 10, 2017], Internet <URL:http://www.openssi.org /ssi-intro.pdf>

ＬＡＧ設定されたＬ２スイッチは、パケットを複数のＮＩＣへ振り分ける。クライアントから仮想化サーバに送信されたパケットが、どのＮＩＣに振り分けられるかは、Ｌ２スイッチに予め設定されたアルゴリズムに依存する。Ｌ２スイッチがどのＮＩＣへパケットが振り分けるかに関しては、ブラックボックス化されている。一般的には、このＬ２スイッチを制御して、クライアントから仮想化サーバに送信されたパケットが、どのＮＩＣに振り分けられるかを制御することはできない。 The L2 switch set to LAG distributes the packet to a plurality of NICs. The NIC to which the packet transmitted from the client to the virtualization server is distributed depends on an algorithm preset in the L2 switch. There is a black box regarding to which NIC the L2 switch distributes the packet. In general, it is not possible to control the L2 switch to control to which NIC the packet transmitted from the client to the virtualization server is distributed.

そのため、このＬ２スイッチに到達したパケットを、どのＮＩＣを備える物理サーバに振り分けるかについては制御できない。よって、このようなシステムでは、物理サーバの負荷の偏りを分散できない。なお、このような物理サーバの負荷の偏りは、例えば、特定の物理サーバにアクセスが集中することによって生じる。
また、ＯＳのアップデートなどの際に、特定の物理サーバでの処理を停止することができない。Ｌ２スイッチは、この特定の物理サーバにもパケットを振り分ける可能性があるためである。 Therefore, it is not possible to control which NIC the physical server provided with the packet arriving at the L2 switch is assigned to. Therefore, in such a system, it is not possible to disperse the uneven load on the physical servers. Such load imbalance of the physical server occurs, for example, when access concentrates on a specific physical server.
Further, it is impossible to stop the processing on a specific physical server when updating the OS. This is because the L2 switch may distribute the packet to this specific physical server.

そこで、本発明は、各パケットを、どの物理サーバに振り分けるかについて制御可能とする負荷制御システムおよび負荷制御方法を提供することを課題とする。 Therefore, it is an object of the present invention to provide a load control system and a load control method capable of controlling to which physical server each packet is distributed.

前記した課題を解決するため、請求項１に記載の発明では、第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、前記第１の物理リンク群と第２の物理リンク群との間のパケットを振り分けるＯｐｅｎＦｌｏｗスイッチと、それぞれが前記第２の物理リンク群のいずれかに接続され、かつＳＳＩ（Single System Image）技術によって単一の仮想化サーバに仮想化された複数の物理サーバと、を備え、前記物理サーバは、自身の負荷を検知する負荷検知部を備え、前記仮想化サーバは、各前記物理サーバが備える前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させる振分変更部を備えることを特徴とする負荷制御システムとした。 In order to solve the above-mentioned problems, in the invention according to claim 1, an L2 switch that performs link aggregation setting for the first physical link group, the first physical link group, and the second physical link group OpenFlow switch for allocating packets between packets, and a plurality of physical servers each connected to one of the second physical link groups and virtualized into a single virtualized server by SSI (Single System Image) technology. And the physical server includes a load detection unit that detects its own load, and the virtualization server causes the OpenFlow switch to switch to the OpenFlow switch when the load detection unit included in each physical server detects a load deviation. against it, and a load control system according to claim Rukoto includes a distribution changing unit for changing the distribution destination of the packet between the second physical link group and the first physical link group.

このようにすることで、外部から受信した各パケットを、どの物理サーバに振り分けるかについて制御可能となる。更に、この仮想化サーバを構成する各物理サーバの負荷を調整可能である。 By doing so, it becomes possible to control to which physical server each packet received from the outside is distributed. Furthermore, it is possible to adjust the load on each physical server that constitutes this virtualization server.

請求項２に記載の発明では、前記ＯｐｅｎＦｌｏｗスイッチは、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先の変更指示を受けると、前記各物理サーバの負荷を平準化するように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分ける、ことを特徴とする請求項１に記載の負荷制御システムとした。 In the invention according to claim 2, when the OpenFlow switch receives an instruction to change a packet distribution destination between the first physical link group and the second physical link group, the load of each physical server is changed. The load control system according to claim 1 , wherein packets between the first physical link group and the second physical link group are distributed so as to equalize the above.

このようにすることで、仮想化サーバを構成する各物理サーバの負荷を平準化することができる。 By doing so, it is possible to equalize the load on each physical server that constitutes the virtualization server.

請求項３に記載の発明では、第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、前記第１の物理リンク群と第２の物理リンク群との間のパケットを振り分けるＯｐｅｎＦｌｏｗスイッチと、それぞれが前記第２の物理リンク群のいずれかに接続され、かつＳＳＩ（Single System Image）技術によって単一の仮想化サーバに仮想化された複数の物理サーバと、を備え、前記仮想化サーバは、前記ＯｐｅｎＦｌｏｗスイッチに対して、第２の物理リンク群のうち所定の物理サーバに接続される物理リンクに対して、パケットを振り分けないように変更させる処理停止決定部を備える、ことを特徴とする負荷制御システムとした。 In the invention according to claim 3 , an L2 switch for performing link aggregation setting on the first physical link group and an OpenFlow switch for allocating packets between the first physical link group and the second physical link group. And a plurality of physical servers each connected to one of the second physical link groups and virtualized into a single virtualized server by SSI (Single System Image) technology . The server includes a processing stop determination unit that causes the OpenFlow switch to change so as not to distribute packets to a physical link connected to a predetermined physical server in the second physical link group. was load control system shall be the.

このようにすることで、外部から受信した各パケットを、どの物理サーバに振り分けるかについて制御可能となる。更に、仮想化サーバによるパケットの処理を停止することなく、この仮想化サーバを構成する各物理サーバのうちいずれかを停止可能となる。 By doing so, it becomes possible to control to which physical server each packet received from the outside is distributed. Furthermore, it is possible to stop any of the physical servers that make up this virtualization server without stopping the packet processing by the virtualization server.

請求項４に記載の発明では、前記処理停止決定部は、前記ＯｐｅｎＦｌｏｗスイッチに対して、第２の物理リンク群のうち所定の物理サーバに接続される物理リンクに対して、パケットを振り分けないように変更させ、所定時間が経過したのちに前記所定の物理サーバを停止させる、ことを特徴とする請求項３に記載の負荷制御システムとした。 In the invention according to claim 4 , the processing stop determination unit does not distribute the packet to the OpenFlow switch to a physical link connected to a predetermined physical server of the second physical link group. 4. The load control system according to claim 3 , wherein the predetermined physical server is stopped after a predetermined time has elapsed.

このようにすることで、仮想化サーバによるパケットの処理を誤って停止することがなくなる。 By doing so, it is possible to prevent the packet processing by the virtualization server from being accidentally stopped.

請求項５に記載の発明では、第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、前記第１の物理リンク群と第２の物理リンク群との間のパケットを振り分けるＯｐｅｎＦｌｏｗスイッチと、それぞれが前記第２の物理リンク群のいずれかに接続され、かつＳＳＩ（Single System Image）技術によって単一の仮想化サーバに仮想化された複数の物理サーバと、を備え、前記ＯｐｅｎＦｌｏｗスイッチは、各前記物理サーバの負荷を検知する負荷検知部を備え、前記仮想化サーバは、前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させる振分変更部を備える、ことを特徴とする負荷制御システムとした。 According to a fifth aspect of the present invention, an L2 switch that performs link aggregation setting on the first physical link group and an OpenFlow switch that distributes packets between the first physical link group and the second physical link group. And a plurality of physical servers each connected to one of the second physical link groups and virtualized into a single virtualized server by SSI (Single System Image) technology. The OpenFlow switch Includes a load detection unit that detects a load of each of the physical servers, and the virtualization server, when the load detection unit detects a load deviation, detects the load of the first physical link group with respect to the OpenFlow switch. comprising a distribution changing unit for changing the distribution destination of the packet between the second physical link group, and a load control system that is characterized in that.

このようにすることで、外部から受信した各パケットを、どの物理サーバに振り分けるかについて制御可能となる。更に、各物理サーバに負荷検知部を設けることなく、これら物理サーバの負荷を検知することができる。 By doing so, it becomes possible to control to which physical server each packet received from the outside is distributed. Furthermore, the load on these physical servers can be detected without providing a load detection unit on each physical server.

請求項６に記載の発明では、第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、それぞれが第２の物理リンク群のいずれかに接続され、かつＳＳＩ技術によって単一の仮想化サーバに仮想化され、自身の負荷を検知する負荷検知部を備える複数の物理サーバとの間に接続されたＯｐｅｎＦｌｏｗスイッチと前記仮想化サーバとが実行する負荷制御方法であって、前記仮想化サーバが、各前記物理サーバが備える前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させるステップ、前記ＯｐｅｎＦｌｏｗスイッチが、各前記物理サーバの負荷が平準化されるように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分けるステップ、を実行することを特徴とする負荷制御方法とした。 In the invention according to claim 6 , an L2 switch that performs link aggregation setting for the first physical link group and each of the L2 switches are connected to any of the second physical link groups, and a single virtual is provided by SSI technology. A load control method executed by an OpenFlow switch and the virtualization server connected between a plurality of physical servers that are virtualized by a virtualization server and have a load detection unit that detects the load of the virtualization server . When the server detects a load imbalance by the load detection unit included in each physical server, packets are distributed between the first physical link group and the second physical link group to the OpenFlow switch. the step of changing the first, the OpenFlow switch, so that the load of each said physical server is leveled, the step of allocating a packet between the first physical link group and the second physical link groups The load control method is characterized by executing.

このようにすることで、外部から受信した各パケットを、どの物理サーバに振り分けるかについて制御可能となる。更に、この仮想化サーバを構成する各物理サーバの負荷を調整可能である。
請求項７に記載の発明では、第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、それぞれが第２の物理リンク群のいずれかに接続され、かつＳＳＩ技術によって単一の仮想化サーバに仮想化された複数の物理サーバとの間に接続されたＯｐｅｎＦｌｏｗスイッチと前記仮想化サーバとが実行する負荷制御方法であって、前記ＯｐｅｎＦｌｏｗスイッチが、各前記物理サーバの負荷が平準化されるように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分けるステップ、前記仮想化サーバが、前記ＯｐｅｎＦｌｏｗスイッチに対して、第２の物理リンク群のうち所定の物理サーバに接続される物理リンクに対して、パケットを振り分けないように変更させるステップ、を実行することを特徴とする負荷制御方法とした。
このようにすることで、外部から受信した各パケットを、どの物理サーバに振り分けるかについて制御可能となる。更に、仮想化サーバによるパケットの処理を停止することなく、この仮想化サーバを構成する各物理サーバのうちいずれかを停止可能となる。
請求項８に記載の発明では、第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、それぞれが第２の物理リンク群のいずれかに接続され、かつＳＳＩ技術によって単一の仮想化サーバに仮想化された複数の物理サーバとの間に接続され、各前記物理サーバの負荷を検知する負荷検知部を備えるＯｐｅｎＦｌｏｗスイッチと、前記仮想化サーバとが実行する負荷制御方法であって、前記仮想化サーバが、前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させるステップ、前記ＯｐｅｎＦｌｏｗスイッチが、各前記物理サーバの負荷が平準化されるように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分けるステップ、を実行することを特徴とする負荷制御方法とした。
このようにすることで、外部から受信した各パケットを、どの物理サーバに振り分けるかについて制御可能となる。更に、各物理サーバに負荷検知部を設けることなく、これら物理サーバの負荷を検知することができる。 By doing so, it becomes possible to control to which physical server each packet received from the outside is distributed. Furthermore, it is possible to adjust the load on each physical server that constitutes this virtualization server.
According to the invention described in claim 7, an L2 switch for performing link aggregation setting on the first physical link group and each L2 switch connected to either of the second physical link groups, and a single virtual by SSI technology. A load control method executed by an OpenFlow switch connected between a plurality of physical servers virtualized by a virtualization server and the virtualization server, wherein the load of each physical server is leveled by the OpenFlow switch. So that packets between the first physical link group and the second physical link group are distributed, the virtualization server sends the packet to the OpenFlow switch to the second physical link group. The load control method is characterized by executing a step of changing a packet so as not to be distributed to a physical link connected to a predetermined physical server.
By doing so, it becomes possible to control to which physical server each packet received from the outside is distributed. Furthermore, it is possible to stop any of the physical servers that make up the virtualization server without stopping the packet processing by the virtualization server.
According to the invention described in claim 8, an L2 switch for performing link aggregation setting on the first physical link group and each L2 switch connected to one of the second physical link groups, and a single virtual by SSI technology. An OpenFlow switch that is connected between a plurality of virtual servers that are virtualized by a virtualization server and that includes a load detection unit that detects the load of each physical server, and a load control method executed by the virtualization server. When the virtualization server detects a load imbalance by the load detection unit, a packet distribution destination between the first physical link group and the second physical link group is assigned to the OpenFlow switch. Changing, the OpenFlow switch distributes packets between the first physical link group and the second physical link group so that the load of each physical server is leveled. The load control method is characterized by the above.
By doing so, it becomes possible to control to which physical server each packet received from the outside is distributed. Furthermore, the load on these physical servers can be detected without providing a load detection unit on each physical server.

本発明によれば、各パケットを、どの物理サーバに振り分けるかについて制御可能となる。 According to the present invention, it becomes possible to control to which physical server each packet is distributed.

第１の実施形態における負荷制御システムの構成図である。It is a block diagram of the load control system in 1st Embodiment. 振分先変更処理を説明するシーケンス図である。It is a sequence diagram explaining a distribution destination change process. 停止処理を説明するシーケンス図である。It is a sequence diagram explaining a stop process. 比較例の振分動作を説明する図である。It is a figure explaining the distribution operation of a comparative example. 第１の実施形態の振分動作を説明する図である。It is a figure explaining the distribution operation of 1st Embodiment. 第２の実施形態における負荷制御システムの構成図である。It is a block diagram of the load control system in 2nd Embodiment. 第３の実施形態における負荷制御システムの構成図である。It is a block diagram of the load control system in 3rd Embodiment.

以降、本発明を実施するための形態を、各図を参照して詳細に説明する。
図１は、第１の実施形態における負荷制御システムＳの構成図である。
第１の実施形態の負荷制御システムＳは、Ｌ２スイッチ１と、物理回線１０ａ〜１０ｄと、ＯｐｅｎＦｌｏｗスイッチ２と、物理回線２０ａ〜２０ｄと、物理サーバ３Ａ，３Ｂとを備える。これら物理サーバ３Ａ，３Ｂは、ＳＳＩ技術によって仮想化された1台の仮想化サーバ４として動作する。第１の実施形態は、Ｌ２スイッチ１の後段に、物理的なＯｐｅｎＦｌｏｗスイッチ２を設けて、パケットの中継先を切り替えている。 Hereinafter, modes for carrying out the present invention will be described in detail with reference to the drawings.
FIG. 1 is a configuration diagram of a load control system S according to the first embodiment.
The load control system S of the first embodiment includes an L2 switch 1, physical lines 10a to 10d, an OpenFlow switch 2, physical lines 20a to 20d, and physical servers 3A and 3B. These physical servers 3A and 3B operate as one virtual server 4 virtualized by the SSI technology. In the first embodiment, a physical OpenFlow switch 2 is provided after the L2 switch 1 to switch the packet relay destination.

Ｌ２スイッチ１は、ＬＡＧ設定部１１と、インタフェース１２、インタフェース１３ａ〜１３ｄを備えている。インタフェース１２は、インターネット９の不図示のエッジに接続される。インタフェース１３ａ〜１３ｄは、それぞれ物理回線１０ａ〜１０ｄ（第１の物理リンク群）を介して、ＯｐｅｎＦｌｏｗスイッチ２のインタフェース２２ａ〜２２ｄに接続される。 The L2 switch 1 includes a LAG setting unit 11, an interface 12, and interfaces 13a to 13d. The interface 12 is connected to an edge (not shown) of the Internet 9. The interfaces 13a to 13d are connected to the interfaces 22a to 22d of the OpenFlow switch 2 via the physical lines 10a to 10d (first physical link group), respectively.

Ｌ２スイッチ１は、パケットに宛先情報として含まれるＭＡＣ（Media Access Control）アドレスで中継先を判断して、このパケットを中継する。Ｌ２スイッチ１は更に、ＬＡＧ設定部１１により、自身のインタフェース１３ａ〜１３ｄに接続された複数の物理回線１０ａ〜１０ｄ（第１の物理リンク群）を束ねる。このように、物理リンク群を束ねることを、リングアグリゲーション設定という。Ｌ２スイッチ１は更に、仮想化サーバ４を宛先とするパケットを、ＬＡＧ設定で束ねられた複数の物理回線１０ａ〜１０ｄのいずれかに中継する。 The L2 switch 1 determines the relay destination based on the MAC (Media Access Control) address included in the packet as the destination information, and relays this packet. The L2 switch 1 further bundles a plurality of physical lines 10a to 10d (first physical link group) connected to its own interfaces 13a to 13d by the LAG setting unit 11. Such bundling of the physical link groups is called ring aggregation setting. The L2 switch 1 further relays the packet destined for the virtualization server 4 to any of the plurality of physical lines 10a to 10d bundled by the LAG setting.

ＯｐｅｎＦｌｏｗスイッチ２は、振分設定部２１と、インタフェース２２ａ〜２２ｄと、インタフェース２３ａ〜２３ｄと、フローテーブル２５とを備える。フローテーブル２５は、ＯｐｅｎＦｌｏｗコントローラにより設定される。ＯｐｅｎＦｌｏｗスイッチ２の振分設定部２１は、このフローテーブル２５に基づいて、パケットの中継先を切り替える。インタフェース２３ａ，２３ｂは、それぞれ物理回線２０ａ，２０ｂ（第２の物理リンク群）を介して、物理サーバ３ＡのＮＩＣ３１ａ，３１ｂに接続される。インタフェース２３ｃ，２３ｄは、それぞれ物理回線２０ｃ，２０ｄを介して、物理サーバ３ＢのＮＩＣ３１ｃ，３１ｄに接続される。以下、各ＮＩＣ３１ａ〜３１ｄを特に区別しないときには、単にＮＩＣ３１と記載する。 The OpenFlow switch 2 includes a distribution setting unit 21, interfaces 22a to 22d, interfaces 23a to 23d, and a flow table 25. The flow table 25 is set by the OpenFlow controller. The distribution setting unit 21 of the OpenFlow switch 2 switches the packet relay destination based on the flow table 25. The interfaces 23a and 23b are connected to the NICs 31a and 31b of the physical server 3A via the physical lines 20a and 20b (second physical link group), respectively. The interfaces 23c and 23d are connected to the NICs 31c and 31d of the physical server 3B via the physical lines 20c and 20d, respectively. Hereinafter, the NICs 31a to 31d are simply referred to as the NIC 31 unless otherwise distinguished.

物理サーバ３Ａは、ＮＩＣ３１ａ，３１ｂと負荷検知部３２を備える。物理サーバ３Ｂは、ＮＩＣ３１ｃ，３１ｄと負荷検知部３２を備える。この負荷検知部３２は、各物理サーバ３Ａ，３Ｂの負荷の偏りを検知するためのものである。負荷検知部３２は、物理サーバ３が備える不図示のＣＰＵ（Central Processing Unit）リソース、メモリリソース、ＮＩＣの通信リソースなどから、それぞれ物理サーバ３Ａ，３Ｂの負荷を検知する。これら物理サーバ３Ａ，３Ｂは、ＳＳＩ技術で仮想化された仮想化サーバ４を具現化する。以下、物理サーバ３Ａ，３Ｂを区別しないときには、単に物理サーバ３と記載する。 The physical server 3A includes NICs 31a and 31b and a load detection unit 32. The physical server 3B includes NICs 31c and 31d and a load detection unit 32. The load detection unit 32 is for detecting load imbalance of each physical server 3A, 3B. The load detection unit 32 detects the load on each of the physical servers 3A and 3B from a CPU (Central Processing Unit) resource, a memory resource, a NIC communication resource, and the like (not shown) included in the physical server 3. These physical servers 3A and 3B embody a virtualization server 4 virtualized by the SSI technology. Hereinafter, when the physical servers 3A and 3B are not distinguished, they are simply referred to as the physical server 3.

仮想化サーバ４は、ＯｐｅｎＦｌｏｗコントローラとして機能する振分変更部４１および処理停止決定部４２と、パケットを処理するパケット処理部４３を備える。仮想化サーバ４は、複数の物理サーバ３Ａ，３Ｂによって実現される。
振分変更部４１や処理停止決定部４２は、負荷検知部３２によって物理サーバ３の負荷の偏りを検知すると、ＯｐｅｎＦｌｏｗスイッチ２のフローテーブル２５を設定する。これにより、ＯｐｅｎＦｌｏｗスイッチ２はパケットの中継先を切り替え、仮想化サーバ４へのパケット振り分け先は変更される。
振分変更部４１の動作は、後記する図２で説明する。処理停止決定部４２の動作は、後記する図３で説明する。 The virtualization server 4 includes a distribution changing unit 41 that functions as an OpenFlow controller, a processing stop determination unit 42, and a packet processing unit 43 that processes a packet. The virtualization server 4 is realized by a plurality of physical servers 3A and 3B.
When the load detection unit 32 detects the load imbalance of the physical server 3, the distribution change unit 41 and the process stop determination unit 42 set the flow table 25 of the OpenFlow switch 2. As a result, the OpenFlow switch 2 switches the packet relay destination, and the packet distribution destination to the virtualization server 4 is changed.
The operation of the distribution changing unit 41 will be described later with reference to FIG. The operation of the processing stop determination unit 42 will be described with reference to FIG. 3 described later.

図２は、振分先変更処理を説明するシーケンス図である。
Ｌ２スイッチ１が、インターネット９に接続された外部装置からパケットを受信すると（ステップＳ１０）、この振分先変更処理が開始する。このパケットは、仮想化サーバ４を宛先とするものである。Ｌ２スイッチ１は、仮想化サーバ４に通信するための物理回線１０ａ〜１０ｄをＬＡＧ設定で束ねている。よってＬ２スイッチ１は、このＬＡＧ設定に従って、このパケットの転送先を決定し（ステップＳ１１）、決定した転送先の経路を介してこのパケットを転送する（ステップＳ１２）。このパケットは、物理回線１０ａ〜１０ｄのいずれかを介してＯｐｅｎＦｌｏｗスイッチ２に転送される。 FIG. 2 is a sequence diagram illustrating the distribution destination changing process.
When the L2 switch 1 receives a packet from an external device connected to the Internet 9 (step S10), this distribution destination changing process is started. This packet is destined for the virtualization server 4. The L2 switch 1 bundles the physical lines 10a to 10d for communicating with the virtualization server 4 in a LAG setting. Therefore, the L2 switch 1 determines the transfer destination of this packet according to this LAG setting (step S11), and transfers this packet via the route of the determined transfer destination (step S12). This packet is transferred to the OpenFlow switch 2 via any of the physical lines 10a to 10d.

このパケットを受信すると、ＯｐｅｎＦｌｏｗスイッチ２は、振り分け設定に従って、このパケットの転送先を決定し（ステップＳ１３）、決定した転送先の経路を介してこのパケットを転送する（ステップＳ１４）。このパケットは、物理回線２０ａ〜２０ｄのいずれかを介して、複数の物理サーバ３Ａ，３Ｂのうちいずれかに転送される。なお、この図２では物理サーバ３と記載している。 Upon receiving this packet, the OpenFlow switch 2 determines the transfer destination of this packet according to the distribution setting (step S13), and transfers this packet via the route of the determined transfer destination (step S14). This packet is transferred to any of the plurality of physical servers 3A and 3B via any of the physical lines 20a to 20d. In addition, in FIG. 2, it is described as a physical server 3.

このパケットを受信すると、物理サーバ３は、ＳＳＩ技術により仮想化サーバ４にパケットを転送する（ステップＳ１５）。仮想化サーバ４は、このパケットに係る処理を実行する物理サーバ３を決定し（ステップＳ１６）、決定した物理サーバ３に対してこのパケットに係る処理を命令する（ステップＳ１７）。これらステップＳ１５〜Ｓ１７の処理は、いずれもＳＳＩ技術によって実行される。このパケットに係る処理を命令された物理サーバ３は、このパケットに係る処理を実行する（ステップＳ１８）。
なお、ステップＳ１５でパケットを転送する物理サーバ３と、ステップＳ１８でパケットに係る処理を実行する物理サーバ３とは相違する場合がある。この場合には、一方の物理サーバ３から、他方の物理サーバ３へ、処理命令を含んだ信号が送信される。 Upon receiving this packet, the physical server 3 transfers the packet to the virtualization server 4 using the SSI technique (step S15). The virtualization server 4 determines the physical server 3 that executes the process related to this packet (step S16), and orders the determined physical server 3 to perform the process related to this packet (step S17). All of these steps S15 to S17 are executed by the SSI technique. The physical server 3 instructed to perform the process related to this packet executes the process related to this packet (step S18).
The physical server 3 that transfers the packet in step S15 may be different from the physical server 3 that executes the process related to the packet in step S18. In this case, one physical server 3 transmits a signal including a processing instruction to the other physical server 3.

ステップＳ１９において、特定の物理サーバ３で処理の偏りが発生する。仮想化サーバ４は、各物理サーバ３に対して負荷を問い合わせ（ステップＳ２０）、この負荷応答を受信する（ステップＳ２１）。これらステップＳ２０，Ｓ２１の処理は、仮想化サーバ４が定期的に行う処理（ポーリング）である。
仮想化サーバ４は、特定の物理サーバ３における負荷の偏りを検知すると（ステップＳ２２）、振り分けを変更することを決定する（ステップＳ２３）。仮想化サーバ４は、物理サーバ３における負荷が平準化されるような振り分け設定を算出する。仮想化サーバ４は、算出した振り分け設定への変更要求をＯｐｅｎＦｌｏｗスイッチ２に送信する（ステップＳ２４）。 In step S19, processing bias occurs in the specific physical server 3. The virtualization server 4 inquires of each physical server 3 about the load (step S20), and receives this load response (step S21). The processing of these steps S20 and S21 is processing (polling) that the virtualization server 4 periodically performs.
When the virtualization server 4 detects a load imbalance in a specific physical server 3 (step S22), it determines to change the distribution (step S23). The virtualization server 4 calculates distribution settings so that the load on the physical server 3 is leveled. The virtualization server 4 sends a request to change the calculated distribution setting to the OpenFlow switch 2 (step S24).

振り分け設定の変更要求を受信すると、ＯｐｅｎＦｌｏｗスイッチ２は、自身の振り分け設定を変更し（ステップＳ２５）、変更完了通知を仮想化サーバ４に応答する（ステップＳ２６）。これにより、各物理サーバ３における負荷が平準化される。 Upon receiving the distribution setting change request, the OpenFlow switch 2 changes its own distribution setting (step S25) and sends a change completion notification to the virtualization server 4 (step S26). As a result, the load on each physical server 3 is leveled.

図３は、停止処理を説明するシーケンス図である。
図３のステップＳ３０〜Ｓ３８の処理は、図２に示したステップＳ１０〜Ｓ１８の処理と同様である。
例えば、システム管理者の操作等に基づき、仮想化サーバ４は、特定の物理サーバ３の処理を停止させることを決定する（ステップＳ３９）。仮想化サーバ４は、この物理サーバ３へパケットを振り分けないように振り分け設定を算出する。仮想化サーバ４は、算出した振り分け設定への変更要求をＯｐｅｎＦｌｏｗスイッチ２に送信する（ステップＳ４０）。 FIG. 3 is a sequence diagram illustrating the stop processing.
The processing of steps S30 to S38 in FIG. 3 is the same as the processing of steps S10 to S18 shown in FIG.
For example, the virtualization server 4 determines to stop the processing of the specific physical server 3 based on the operation of the system administrator (step S39). The virtualization server 4 calculates the distribution setting so that the packet is not distributed to the physical server 3. The virtualization server 4 sends a request to change the calculated distribution setting to the OpenFlow switch 2 (step S40).

振り分け設定の変更要求を受信すると、ＯｐｅｎＦｌｏｗスイッチ２は、自身の振り分け設定を変更し（ステップＳ４１）、振り分け設定の変更完了通知を仮想化サーバ４に応答する（ステップＳ４２）。これ以降、特定の物理サーバ３へパケットが振り分けられなくなる。 Upon receiving the distribution setting change request, the OpenFlow switch 2 changes its own distribution setting (step S41), and responds to the virtualization server 4 with a distribution setting change completion notification (step S42). After that, the packet cannot be distributed to the specific physical server 3.

仮想化サーバ４は、ステップＳ４２の時点から所定時間だけ待つ（ステップＳ４３）。特定の物理サーバ３へのパケットの振り分けを停止した後であっても、この物理サーバ３は、停止前に受信したパケットの処理を行っている場合があるからである。ステップＳ４３以降、システム管理者は、仮想化サーバ４によるパケット処理を中断することなく、特定の物理サーバ３の処理を停止させることができる。
仮想化サーバ４は更に、特定の物理サーバ３のＳＳＩクラスタ設定を解除する（ステップＳ４４）。その後、システム管理者は、この特定の物理サーバ３の処理を停止させるとよい。
なお、仮想化サーバ４は、ステップＳ４２の時点から特定の物理サーバ３の処理状態を監視して、パケットの処理が停止したのちに特定の物理サーバ３のＳＳＩクラスタ設定を解除してもよい。 The virtualization server 4 waits for a predetermined time from the time of step S42 (step S43). This is because the physical server 3 may still process the packet received before the stop even after stopping the distribution of the packet to the specific physical server 3. After step S43, the system administrator can stop the processing of the specific physical server 3 without interrupting the packet processing by the virtualization server 4.
The virtualization server 4 further cancels the SSI cluster setting of the specific physical server 3 (step S44). After that, the system administrator may stop the processing of this specific physical server 3.
The virtualization server 4 may monitor the processing state of the specific physical server 3 from the time of step S42 and cancel the SSI cluster setting of the specific physical server 3 after the packet processing is stopped.

なお、特定の物理サーバ３へパケットを振り分けないようにした後、この物理サーバ３のＯＳやアプリケーションのアップデートを行ってもよい。システム管理者は、仮想化サーバ４によるパケット処理を中断することなく、特定の物理サーバ３のＯＳやアプリケーションのアップデートを行うことができる。 Note that the OS or application of the physical server 3 may be updated after the packets are not distributed to the specific physical server 3. The system administrator can update the OS and application of the specific physical server 3 without interrupting the packet processing by the virtualization server 4.

図４は、比較例の振分動作を説明する図である。
比較例の負荷制御システムＳは、Ｌ２スイッチ１と、物理回線１０ａ〜１０ｄと、物理サーバ３Ａ，３Ｂとを備える。これら物理サーバ３Ａ，３Ｂは、ＳＳＩ技術によって仮想化された1台の仮想化サーバ４として動作する。
Ｌ２スイッチ１は、ＬＡＧ設定部１１と、インタフェース１２、インタフェース１３ａ〜１３ｄを備えている。インタフェース１２は、インターネット９の不図示のエッジに接続される。インタフェース１３ａ，１３ｂは、それぞれ物理回線１０ａ，１０ｂを介して、物理サーバ３ＡのＮＩＣ３１ａ，３１ｂに接続される。インタフェース１３ｃ，１３ｄは、それぞれ物理回線１０ｃ，１０ｄを介して、物理サーバ３ＡのＮＩＣ３１ｃ，３１ｄに接続される。 FIG. 4 is a diagram illustrating the distribution operation of the comparative example.
The load control system S of the comparative example includes an L2 switch 1, physical lines 10a to 10d, and physical servers 3A and 3B. These physical servers 3A and 3B operate as one virtual server 4 virtualized by the SSI technology.
The L2 switch 1 includes a LAG setting unit 11, an interface 12, and interfaces 13a to 13d. The interface 12 is connected to an edge (not shown) of the Internet 9. The interfaces 13a and 13b are connected to the NICs 31a and 31b of the physical server 3A via the physical lines 10a and 10b, respectively. The interfaces 13c and 13d are connected to the NICs 31c and 31d of the physical server 3A via the physical lines 10c and 10d, respectively.

Ｌ２スイッチ１は、パケットに宛先情報として含まれるＭＡＣアドレスで中継先を判断して、このパケットを中継する。Ｌ２スイッチ１は更に、ＬＡＧ設定部１１により、自身のインタフェース１３ａ〜１３ｄに接続された複数の物理回線１０ａ〜１０ｄ（第１の物理リンク群）を束ねる。Ｌ２スイッチ１は更に、仮想化サーバ４を宛先とするパケットを、ＬＡＧ設定で束ねられた複数の物理回線１０ａ〜１０ｄのいずれかに中継する。図の破線は、仮想化サーバ４を宛先とするパケットを示している。図４に示した例は、物理回線１０ａ，１０ｂを介して中継されるパケット量が多く、物理回線１０ｃ，１０ｄを介して中継されるパケット量が少ないことを示している。このとき、物理サーバ３Ａの負荷が大きく、物理サーバ３Ｂの負荷は小さい。 The L2 switch 1 determines the relay destination based on the MAC address included in the packet as the destination information, and relays this packet. The L2 switch 1 further bundles a plurality of physical lines 10a to 10d (first physical link group) connected to its own interfaces 13a to 13d by the LAG setting unit 11. The L2 switch 1 further relays the packet destined for the virtualization server 4 to any of the plurality of physical lines 10a to 10d bundled by the LAG setting. The broken line in the figure indicates a packet whose destination is the virtualization server 4. The example shown in FIG. 4 indicates that the amount of packets relayed via the physical lines 10a and 10b is large and the amount of packets relayed via the physical lines 10c and 10d is small. At this time, the load on the physical server 3A is large and the load on the physical server 3B is small.

図５は、第１の実施形態の振分動作を説明する図である。
図５に示した例は、物理回線１０ａ，１０ｂを介して中継されるパケット量が多く、物理回線１０ｃ，１０ｄを介して中継されるパケット量が少ないことを示している。
更にＯｐｅｎＦｌｏｗスイッチ２の振分設定部２１（図１参照）は、フローテーブル２５（図１参照）に基づいて、パケットの中継先を切り替えている。 FIG. 5 is a diagram for explaining the distribution operation of the first embodiment.
The example shown in FIG. 5 indicates that the amount of packets relayed via the physical lines 10a and 10b is large and the amount of packets relayed via the physical lines 10c and 10d is small.
Further, the distribution setting unit 21 (see FIG. 1) of the OpenFlow switch 2 switches the packet relay destination based on the flow table 25 (see FIG. 1).

ＯｐｅｎＦｌｏｗスイッチ２は、物理回線１０ａを介して中継されるパケットを、物理回線２０ａを介して物理サーバ３ＡのＮＩＣ３１ａに中継する。ＯｐｅｎＦｌｏｗスイッチ２は、物理回線１０ｂを介して中継されるパケットを、物理回線２０ｃを介して物理サーバ３ＢのＮＩＣ３１ｃに中継する。ＯｐｅｎＦｌｏｗスイッチ２は、物理回線１０ｃを介して中継されるパケットを、物理回線２０ｂを介して物理サーバ３ＡのＮＩＣ３１ｂに中継する。ＯｐｅｎＦｌｏｗスイッチ２は、物理回線１０ｄを介して中継されるパケットを、物理回線２０ｄを介して物理サーバ３ＢのＮＩＣ３１ｄに中継する。つまり、ＯｐｅｎＦｌｏｗスイッチ２は、インタフェース１３ｂを介して中継されるパケットを物理サーバ３ＢのＮＩＣ３１ｃに中継している。ＯｐｅｎＦｌｏｗスイッチ２は更に、インタフェース１３ｃを介して中継されるパケットを物理サーバ３ＡのＮＩＣ３１ｂに中継している。このように、振り分け先を変更することで、物理サーバ３Ａが処理するパケット量と、物理サーバ３Ｂが処理するパケット量が平準化される。 The OpenFlow switch 2 relays the packet relayed via the physical line 10a to the NIC 31a of the physical server 3A via the physical line 20a. The OpenFlow switch 2 relays the packet relayed via the physical line 10b to the NIC 31c of the physical server 3B via the physical line 20c. The OpenFlow switch 2 relays the packet relayed via the physical line 10c to the NIC 31b of the physical server 3A via the physical line 20b. The OpenFlow switch 2 relays the packet relayed via the physical line 10d to the NIC 31d of the physical server 3B via the physical line 20d. That is, the OpenFlow switch 2 relays the packet relayed via the interface 13b to the NIC 31c of the physical server 3B. The OpenFlow switch 2 further relays the packet relayed via the interface 13c to the NIC 31b of the physical server 3A. Thus, by changing the distribution destination, the packet amount processed by the physical server 3A and the packet amount processed by the physical server 3B are equalized.

なお、第１の実施形態では、各物理サーバ３Ａ，３Ｂがそれぞれ複数のＮＩＣ３１を有している。これにより、ＯｐｅｎＦｌｏｗスイッチ２は、一方のインタフェース２２ａ〜２２ｄと他方のインタフェース２３ａ〜２３ｄとの間の接続を切り替えるだけで、或る程度のパケット量の平準化を行うことができる。 In the first embodiment, each physical server 3A, 3B has a plurality of NICs 31, respectively. As a result, the OpenFlow switch 2 can perform a certain amount of packet leveling by simply switching the connection between the one interface 22a to 22d and the other interface 23a to 23d.

図６は、第２の実施形態における負荷制御システムＳの構成図である。
第２の実施形態の負荷制御システムＳは、第１の実施形態とは異なり、Ｌ２スイッチ５の後段に論理のＯｐｅｎＦｌｏｗスイッチである振分設定部５２が設けられている。この振分設定部５２により、パケットの中継先を切り替えさせることができる。
Ｌ２スイッチ５は、インタフェース１２と、ＬＡＧ設定部５１と、振分設定部５２と、インタフェース５７ａ〜５７ｄを備えている。インタフェース１２は、インターネット９のエッジ（不図示）と接続されている。インタフェース５７ａ〜５７ｄは、それぞれＮＩＣ３１ａ〜３１ｄと接続されている。
ＬＡＧ設定部５１は、論理インタフェース５３と、論理インタフェース５４ａ〜５４ｄを備えている。論理インタフェース５３は、インタフェース１２と論理的に接続されている。論理インタフェース５４ａ〜５４ｄは、それぞれ論理インタフェース５５ａ〜５５ｄと論理的に接続されている。
振分設定部５２は、論理インタフェース５５ａ〜５５ｄと、論理インタフェース５６ａ〜５６ｄと、フローテーブル５８とを備えている。論理インタフェース５６ａ〜５６ｄは、インタフェース５７ａ〜５７ｄと論理的に接続されている。 FIG. 6 is a configuration diagram of the load control system S according to the second embodiment.
Unlike the first embodiment, the load control system S of the second embodiment is provided with a distribution setting unit 52, which is a logical OpenFlow switch, at the subsequent stage of the L2 switch 5. The distribution setting unit 52 can switch the packet relay destination.
The L2 switch 5 includes an interface 12, a LAG setting unit 51, a distribution setting unit 52, and interfaces 57a to 57d. The interface 12 is connected to the edge (not shown) of the Internet 9. The interfaces 57a to 57d are connected to the NICs 31a to 31d, respectively.
The LAG setting unit 51 includes a logical interface 53 and logical interfaces 54a to 54d. The logical interface 53 is logically connected to the interface 12. The logical interfaces 54a to 54d are logically connected to the logical interfaces 55a to 55d, respectively.
The distribution setting unit 52 includes logical interfaces 55a to 55d, logical interfaces 56a to 56d, and a flow table 58. The logical interfaces 56a to 56d are logically connected to the interfaces 57a to 57d.

このように、第２の実施形態では、Ｌ２スイッチ５に論理のＯｐｅｎＦｌｏｗスイッチである振分設定部５２を設けている。これによっても、各パケットを、どの物理サーバに振り分けるかについて制御可能とすることができる。 As described above, in the second embodiment, the L2 switch 5 is provided with the distribution setting unit 52 that is a logical OpenFlow switch. This also makes it possible to control to which physical server each packet is distributed.

図７は、第３の実施形態における負荷制御システムＳの構成図である。
第３の実施形態の負荷制御システムＳは、第１の実施形態とは異なり、ＯｐｅｎＦｌｏｗスイッチ２に負荷検知部２４が設けられている。負荷検知部２４は、各インタフェース２３ａ〜２３ｄを介して中継される各パケット量を検知するものである。
この負荷検知部２４によって、各物理サーバ３に振り分けられているパケット量を検知し、よって負荷を検知してもよい。 FIG. 7 is a configuration diagram of the load control system S according to the third embodiment.
In the load control system S of the third embodiment, unlike the first embodiment, the load detection unit 24 is provided in the OpenFlow switch 2. The load detection unit 24 detects the amount of each packet relayed via each of the interfaces 23a to 23d.
The load detection unit 24 may detect the amount of packets distributed to each physical server 3 and thus detect the load.

（本実施形態の効果）
従来のＬ２スイッチでは、パケット振り分け先を変更できなかった。しかし第１〜第３の実施形態では、物理のＯｐｅｎＦｌｏｗスイッチ２やＬ２スイッチ１への機能追加により、パケット振り分け先を変更可能としている。これにより、負荷制御システムＳは、物理サーバ３の負荷の偏りを解消できる。
更に、特定の物理サーバに処理を集中、もしくは特定の物理サーバでの処理を取りやめることで、ＯＳやアプリケーションのアップデート等をサービス中断なく実行できる。 (Effect of this embodiment)
In the conventional L2 switch, the packet distribution destination cannot be changed. However, in the first to third embodiments, the packet distribution destination can be changed by adding a function to the physical OpenFlow switch 2 and the L2 switch 1. As a result, the load control system S can eliminate the uneven load on the physical server 3.
Further, by concentrating the processing on a specific physical server or canceling the processing on the specific physical server, it is possible to execute OS and application updates without interrupting the service.

（変形例）
本発明は、上記実施形態に限定されることなく、本発明の趣旨を逸脱しない範囲で、変更実施が可能であり、例えば、次の（ａ）〜（ｅ）のようなものがある。
（ａ） 第１および第２の実施形態では、物理サーバ３に負荷検知部３２が設けられている。第３の実施形態では、ＯｐｅｎＦｌｏｗスイッチ２に負荷検知部２４が設けられて、物理サーバ３へ振り分けられているパケット数を検知して負荷を検知している。しかし、これに限られず、Ｌ２スイッチに論理のＯｐｅｎＦｌｏｗスイッチと負荷検知部とが設けられてもよい。これにより、各物理サーバへ振り分けられているパケット数を検知して、各物理サーバの負荷を検知することができる。よって、各物理サーバへのパケット数を平準化し、各物理サーバの負荷を平準化することができる。
（ｂ） 各物理サーバの数は２台に限定されず、３台以上であってもよい。
（ｃ） 各物理サーバが有するＮＩＣ数は、２個に限定されない。
（ｄ） ＯｐｅｎＦｌｏｗスイッチの動作は、一方の物理リンク群と他方の物理リンク群との間のパケットを一対一で振り分ける動作に限定されず、任意の基準で振り分けてもよい。
（ｅ） 仮想化サーバが各物理サーバの負荷を監視することに限定されない。各物理サーバが自身の負荷を監視し、負荷が所定閾値を超えたときに仮想化サーバに通知してもよい。 (Modification)
The present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the spirit of the present invention. For example, the following (a) to (e) are available.
(A) In the first and second embodiments, the physical server 3 is provided with the load detection unit 32. In the third embodiment, the load detection unit 24 is provided in the OpenFlow switch 2 to detect the load by detecting the number of packets distributed to the physical server 3. However, the present invention is not limited to this, and the L2 switch may be provided with a logical OpenFlow switch and a load detection unit. As a result, the number of packets distributed to each physical server can be detected to detect the load on each physical server. Therefore, the number of packets to each physical server can be leveled, and the load on each physical server can be leveled.
(B) The number of each physical server is not limited to two and may be three or more.
(C) The number of NICs each physical server has is not limited to two.
(D) The operation of the OpenFlow switch is not limited to the operation of allocating the packets between one physical link group and the other physical link group on a one-to-one basis, and may be allocated on an arbitrary basis.
(E) The virtualization server is not limited to monitoring the load of each physical server. Each physical server may monitor its own load and notify the virtualization server when the load exceeds a predetermined threshold.

Ｓ 負荷制御システム
１ Ｌ２スイッチ
１０ａ〜１０ｄ 物理回線 （第１の物理リンク群）
１１ ＬＡＧ設定部
１２，１３ａ〜１３ｄ インタフェース
２ ＯｐｅｎＦｌｏｗスイッチ
２０ａ〜２０ｄ 物理回線 （第２の物理リンク群）
２１ 振分設定部
２２ａ〜２２ｄ，２３ａ〜２３ｄ インタフェース
２４ 負荷検知部
２５ フローテーブル
３ 物理サーバ
３Ａ 物理サーバ
３Ｂ 物理サーバ
３１ａ〜３１ｄ ＮＩＣ
３２ 負荷検知部
４ 仮想化サーバ
４１ 振分変更部
４２ 処理停止決定部
４３ パケット処理部
５ Ｌ２スイッチ
５１ ＬＡＧ設定部
５２ 振分設定部
５３，５４ａ〜５４ｄ，５５ａ〜５５ｄ，５６ａ〜５６ｄ 論理インタフェース
５７ａ〜５７ｄ インタフェース
５８ フローテーブル
９ インターネット S load control system 1 L2 switch 10a to 10d physical line (first physical link group)
11 LAG setting unit 12, 13a to 13d Interface 2 OpenFlow switch 20a to 20d Physical line (second physical link group)
21 distribution setting units 22a to 22d, 23a to 23d interface 24 load detection unit 25 flow table 3 physical server 3A physical server 3B physical server 31a to 31d NIC
32 load detection unit 4 virtualization server 41 distribution change unit 42 processing stop determination unit 43 packet processing unit 5 L2 switch 51 LAG setting unit 52 distribution distribution unit 53, 54a to 54d, 55a to 55d, 56a to 56d logical interface 57a ~ 57d Interface 58 Flow Table 9 Internet

Claims (8)

第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、
前記第１の物理リンク群と第２の物理リンク群との間のパケットを振り分けるＯｐｅｎＦｌｏｗスイッチと、
それぞれが前記第２の物理リンク群のいずれかに接続され、かつＳＳＩ（Single System Image）技術によって単一の仮想化サーバに仮想化された複数の物理サーバと、
を備え、
前記物理サーバは、自身の負荷を検知する負荷検知部を備え、
前記仮想化サーバは、各前記物理サーバが備える前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させる振分変更部を備える、
ことを特徴とする負荷制御システム。 An L2 switch for performing link aggregation setting on the first physical link group,
An OpenFlow switch that distributes packets between the first physical link group and the second physical link group;
A plurality of physical servers each connected to one of the second physical link groups and virtualized into a single virtualized server by SSI (Single System Image) technology;
Equipped with
The physical server includes a load detection unit that detects its own load,
When the load detection unit included in each physical server detects a load bias, the virtualization server causes the OpenFlow switch to connect between the first physical link group and the second physical link group. A distribution changing unit for changing the packet distribution destination is provided.
A load control system characterized in that 前記ＯｐｅｎＦｌｏｗスイッチは、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先の変更指示を受けると、前記各物理サーバの負荷を平準化するように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分ける、
ことを特徴とする請求項１に記載の負荷制御システム。 When the OpenFlow switch receives an instruction to change the distribution destination of packets between the first physical link group and the second physical link group, the OpenFlow switch is configured to level the load of each physical server. Sort packets between one physical link group and the second physical link group,
The load control system according to claim 1 , wherein: 第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、
前記第１の物理リンク群と第２の物理リンク群との間のパケットを振り分けるＯｐｅｎＦｌｏｗスイッチと、
それぞれが前記第２の物理リンク群のいずれかに接続され、かつＳＳＩ（Single System Image）技術によって単一の仮想化サーバに仮想化された複数の物理サーバと、
を備え、
前記仮想化サーバは、前記ＯｐｅｎＦｌｏｗスイッチに対して、第２の物理リンク群のうち所定の物理サーバに接続される物理リンクに対して、パケットを振り分けないように変更させる処理停止決定部を備える、
ことを特徴とする負荷制御システム。 An L2 switch for performing link aggregation setting on the first physical link group,
An OpenFlow switch that distributes packets between the first physical link group and the second physical link group;
A plurality of physical servers each connected to one of the second physical link groups and virtualized into a single virtualized server by SSI (Single System Image) technology;
Equipped with
The virtualization server includes a processing stop determination unit that causes the OpenFlow switch to change so as not to distribute packets to a physical link connected to a predetermined physical server in the second physical link group.
Load control system that is characterized in that. 前記処理停止決定部は、前記ＯｐｅｎＦｌｏｗスイッチに対して、第２の物理リンク群のうち所定の物理サーバに接続される物理リンクに対して、パケットを振り分けないように変更させ、所定時間が経過したのちに前記所定の物理サーバを停止させる、
ことを特徴とする請求項３に記載の負荷制御システム。 The processing stop determination unit causes the OpenFlow switch to change so as not to distribute packets to a physical link connected to a predetermined physical server in the second physical link group, and a predetermined time has elapsed. After that, the predetermined physical server is stopped,
The load control system according to claim 3 , wherein: 第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、
前記第１の物理リンク群と第２の物理リンク群との間のパケットを振り分けるＯｐｅｎＦｌｏｗスイッチと、
それぞれが前記第２の物理リンク群のいずれかに接続され、かつＳＳＩ（Single System Image）技術によって単一の仮想化サーバに仮想化された複数の物理サーバと、
を備え、
前記ＯｐｅｎＦｌｏｗスイッチは、各前記物理サーバの負荷を検知する負荷検知部を備え、
前記仮想化サーバは、前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させる振分変更部を備える、
ことを特徴とする負荷制御システム。 An L2 switch for performing link aggregation setting on the first physical link group,
An OpenFlow switch that distributes packets between the first physical link group and the second physical link group;
A plurality of physical servers each connected to one of the second physical link groups and virtualized into a single virtualized server by SSI (Single System Image) technology;
Equipped with
The OpenFlow switch includes a load detection unit that detects the load of each physical server,
When the load detection unit detects a load imbalance, the virtualization server changes the packet distribution destination between the first physical link group and the second physical link group with respect to the OpenFlow switch. Equipped with a distribution changer to
Load control system that is characterized in that. 第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、それぞれが第２の物理リンク群のいずれかに接続され、かつＳＳＩ技術によって単一の仮想化サーバに仮想化され、自身の負荷を検知する負荷検知部を備える複数の物理サーバとの間に接続されたＯｐｅｎＦｌｏｗスイッチと前記仮想化サーバとが実行する負荷制御方法であって、
前記仮想化サーバが、各前記物理サーバが備える前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させるステップ、
前記ＯｐｅｎＦｌｏｗスイッチが、各前記物理サーバの負荷が平準化されるように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分けるステップ、
を実行することを特徴とする負荷制御方法。 And L2 switch for link aggregation settings for the first physical link group, each connected to one of second physical links group, and virtualized into a single virtual server by SSI technology, its A load control method executed by an OpenFlow switch connected between a plurality of physical servers having a load detection unit for detecting a load and the virtualization server, comprising :
When the virtualization server detects a load bias by the load detection unit included in each physical server, the OpenFlow switch is connected to the first physical link group and the second physical link group between the first physical link group and the second physical link group. Steps for changing the packet distribution destination,
The OpenFlow switch, so that the load of each said physical server is leveled, the step for distributing packets between the second physical link group and the first physical link group,
A load control method comprising: 第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、それぞれが第２の物理リンク群のいずれかに接続され、かつＳＳＩ技術によって単一の仮想化サーバに仮想化された複数の物理サーバとの間に接続されたＯｐｅｎＦｌｏｗスイッチと前記仮想化サーバとが実行する負荷制御方法であって、
前記ＯｐｅｎＦｌｏｗスイッチが、各前記物理サーバの負荷が平準化されるように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分けるステップ、
前記仮想化サーバが、前記ＯｐｅｎＦｌｏｗスイッチに対して、第２の物理リンク群のうち所定の物理サーバに接続される物理リンクに対して、パケットを振り分けないように変更させるステップ、
を実行することを特徴とする負荷制御方法。 An L2 switch that performs link aggregation setting for the first physical link group, and a plurality of L2 switches that are each connected to one of the second physical link groups and that are virtualized to a single virtualization server by SSI technology. A load control method executed by an OpenFlow switch connected to a physical server and the virtualization server, comprising :
The OpenFlow switch, so that the load of each said physical server is leveled, the step for distributing packets between the second physical link group and the first physical link group,
A step in which the virtualization server causes the OpenFlow switch to change so as not to distribute a packet to a physical link connected to a predetermined physical server in the second physical link group;
A load control method comprising: 第１の物理リンク群に対してリンクアグリゲーション設定を行うＬ２スイッチと、それぞれが第２の物理リンク群のいずれかに接続され、かつＳＳＩ技術によって単一の仮想化サーバに仮想化された複数の物理サーバとの間に接続され、各前記物理サーバの負荷を検知する負荷検知部を備えるＯｐｅｎＦｌｏｗスイッチと、前記仮想化サーバとが実行する負荷制御方法であって、
前記仮想化サーバが、前記負荷検知部によって負荷の偏りを検知すると、前記ＯｐｅｎＦｌｏｗスイッチに対して、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットの振り分け先を変更させるステップ、
前記ＯｐｅｎＦｌｏｗスイッチが、各前記物理サーバの負荷が平準化されるように、前記第１の物理リンク群と前記第２の物理リンク群との間のパケットを振り分けるステップ、
を実行することを特徴とする負荷制御方法。 An L2 switch that performs link aggregation setting for the first physical link group, and a plurality of L2 switches that are each connected to one of the second physical link groups and that are virtualized to a single virtualization server by SSI technology. A load control method executed by an OpenFlow switch, which is connected to a physical server and includes a load detection unit that detects a load of each physical server, and the virtualization server ,
When the virtualization server detects a load imbalance by the load detection unit, the distribution destination of packets between the first physical link group and the second physical link group is changed with respect to the OpenFlow switch. Step to make,
The OpenFlow switch, so that the load of each said physical server is leveled, the step for distributing packets between the second physical link group and the first physical link group,
A load control method comprising:
JP2017029842A 2017-02-21 2017-02-21 Load control system and load control method Active JP6734793B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017029842A JP6734793B2 (en) 2017-02-21 2017-02-21 Load control system and load control method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017029842A JP6734793B2 (en) 2017-02-21 2017-02-21 Load control system and load control method

Publications (2)

Publication Number Publication Date
JP2018137570A JP2018137570A (en) 2018-08-30
JP6734793B2 true JP6734793B2 (en) 2020-08-05

Family

ID=63367131

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017029842A Active JP6734793B2 (en) 2017-02-21 2017-02-21 Load control system and load control method

Country Status (1)

Country Link
JP (1) JP6734793B2 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3372455B2 (en) * 1997-07-03 2003-02-04 富士通株式会社 Packet relay control method, packet relay device, and program storage medium
JP2013013032A (en) * 2011-06-30 2013-01-17 Fujitsu Ltd Communication control method and communication control program
JP2014220675A (en) * 2013-05-09 2014-11-20 日本電信電話株式会社 Communication control system

Also Published As

Publication number Publication date
JP2018137570A (en) 2018-08-30

Similar Documents

Publication Publication Date Title
AU2020239763B2 (en) Virtual network, hot swapping, hot scaling, and disaster recovery for containers
EP3235176B1 (en) Method and system for load balancing in a software-defined networking (sdn) system upon server reconfiguration
EP3709600B1 (en) Load balancing
US10225194B2 (en) Transparent network-services elastic scale-out
JP6393742B2 (en) Multipath routing with distributed load balancers
US8370530B2 (en) Method and system for controlling network traffic in a blade chassis
US11729098B2 (en) Methods and apparatus to manage a physical network to reduce network dependencies in a multi-fabric virtual network
EP2316206A2 (en) Distributed load balancer
JP2010061283A (en) Load balancer setting program, load balancer setting method and load balancer setting apparatus
JP5757325B2 (en) Virtual desktop system, network processing apparatus, management method, and management program
US20170293500A1 (en) Method for optimal vm selection for multi data center virtual network function deployment
WO2013186825A1 (en) Computer system, communication control server, communication control method, and program
WO2017127225A1 (en) Virtual network, hot swapping, hot scaling, and disaster recovery for containers
JP2015519765A (en) COMMUNICATION SYSTEM, CONTROL DEVICE, COMMUNICATION METHOD, CONTROL METHOD, AND PROGRAM
Hikichi et al. Dynamic application load balancing in distributed SDN controller
WO2016051335A1 (en) Algorithm for faster convergence through affinity override
JP6734793B2 (en) Load control system and load control method
US10659391B1 (en) Methods and apparatus to preserve packet order in a multi-fabric virtual network
EP3343879B1 (en) A system and method of managing flow state in stateful applications
JP5395833B2 (en) Virtual network system and virtual communication control method
JP6572184B2 (en) Packet transfer system and packet transfer method
JP2013161283A (en) Server, physical node, load distribution method and program
JP6160151B2 (en) Relay device and routing control method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190308

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20191209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200204

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200406

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200707

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200710

R150 Certificate of patent or registration of utility model

Ref document number: 6734793

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150