JP6471066B2 - Network management apparatus and address setting method - Google Patents

Network management apparatus and address setting method Download PDF

Info

Publication number
JP6471066B2
JP6471066B2 JP2015158037A JP2015158037A JP6471066B2 JP 6471066 B2 JP6471066 B2 JP 6471066B2 JP 2015158037 A JP2015158037 A JP 2015158037A JP 2015158037 A JP2015158037 A JP 2015158037A JP 6471066 B2 JP6471066 B2 JP 6471066B2
Authority
JP
Japan
Prior art keywords
address
network
clos network
spine
clos
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2015158037A
Other languages
Japanese (ja)
Other versions
JP2017038209A (en
Inventor
仁志 入野
仁志 入野
敢一郎 小野
敢一郎 小野
隆典 岩井
隆典 岩井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Priority to JP2015158037A priority Critical patent/JP6471066B2/en
Publication of JP2017038209A publication Critical patent/JP2017038209A/en
Application granted granted Critical
Publication of JP6471066B2 publication Critical patent/JP6471066B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Description

本発明は、CLOSネットワークを複数備えるネットワークにおけるネットワーク装置のアドレス設定に関する。   The present invention relates to address setting of a network device in a network including a plurality of CLOS networks.

近年、通信用のネットワークは、巨大化、複雑化が進んでいる。つまり、ネットワーク装置の数が増え、また、それらの接続関係が複雑になってきている。そのため、ネットワーク装置の設定や管理が煩雑になってきている。   In recent years, communication networks have become larger and more complex. That is, the number of network devices has increased, and their connection relations have become complicated. For this reason, the setting and management of network devices have become complicated.

そこで、例えば、SDN(Software Defined Networking)の技術によりネットワーク装置の設定の自動化が図られている。SDNとしては、例えば、オープンソースで公開されているOpenContrail(非特許文献1)では、仮想的なネットワークを、ユーザからの指示に従い自由に半自動的に設定することができる。また、このOpenContrailについて、非特許文献2には具体的な内容が開示されている。   Therefore, for example, network device settings are automated by SDN (Software Defined Networking) technology. As an SDN, for example, in OpenContrail (Non-patent Document 1) published as an open source, a virtual network can be freely and semiautomatically set according to an instruction from a user. Further, Non-Patent Document 2 discloses specific contents of this OpenContrail.

「OpenContrail - An open-source network virtualization platform for the cloud.」、[online]、OpenContrail、[2015年7月30日検索]、インターネット<URL:http://www.opencontrail.org/>"OpenContrail-An open-source network virtualization platform for the cloud.", [Online], OpenContrail, [searched July 30, 2015], Internet <URL: http://www.opencontrail.org/> 「CONTRAILアーキテクチャ」、[online]、JUNIPER NETWORKS、[2015年6月22日検索]、インターネット<URL:http://www.juniper.net/jp/jp/local/pdf/whitepapers/2000535-jp.pdf>“CONTRAIL Architecture”, [online], JUNIPER NETWORKS, [Search June 22, 2015], Internet <URL: http://www.juniper.net/jp/jp/local/pdf/whitepapers/2000535-jp. pdf>

しかしながら、前記した従来技術では、ネットワーク装置の設定の自動化は、オーバレイネットワーク部分を対象としている。つまり、既に物理的なネットワーク装置が構成されていて疎通性が確保されている環境があることを前提に、ソフトウェアを用いてその上に仮想的なネットワークを構成するための設定を行う。   However, in the above-described prior art, the automation of the setting of the network device is targeted for the overlay network portion. In other words, assuming that there is an environment in which a physical network device is already configured and communication is ensured, settings for configuring a virtual network thereon are performed using software.

一方、近年では、いわゆるSpine&Leaf型の2階層構成で複数のSpine装置と複数のLeaf装置とを有するCLOSネットワークを複数備えるネットワークが、高スケーラビリティ等の観点から、多く用いられている。そして、そのようなネットワークにおいて、物理的なネットワーク装置のアドレスを自動設定する技術は、今までになかった。   On the other hand, in recent years, a network including a plurality of CLOS networks having a plurality of Spine devices and a plurality of Leaf devices in a so-called Spine & Leaf type two-layer configuration is often used from the viewpoint of high scalability and the like. In such a network, there has never been a technique for automatically setting the address of a physical network device.

そこで、本発明は、CLOSネットワークを複数備えるネットワークにおいて、物理的なネットワーク装置のアドレスを自動設定することを課題とする。   Therefore, an object of the present invention is to automatically set an address of a physical network device in a network including a plurality of CLOS networks.

前記課題を解決するために、本発明は、複数のSpine装置と複数のLeaf装置とを有するCLOSネットワークを複数備えるネットワークにおいて、前記Spine装置と前記Leaf装置のアドレス設定を行うネットワーク管理装置であって、前記Spine装置と前記Leaf装置に設定するアドレスの始点となる始点アドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数を記憶する記憶部と、前記始点アドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数に基づいて、前記CLOSネットワークごとのアドレスの始点となるCLOSネットワーク別始点アドレスを決定し、前記CLOSネットワークごとに、前記CLOSネットワーク別始点アドレス、および、前記Spine装置の台数と前記Leaf装置の台数に基づいて、前記Spine装置と前記Leaf装置のアドレスを設定する処理部と、を備え、前記処理部は、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数の積の降順順位に基づいて、前記CLOSネットワークのクラスタIDを決定し、前記降順順位が高い前記CLOSネットワークから順に並ぶように、前記CLOSネットワーク別始点アドレスを決定し、一の前記CLOSネットワークの前記Spine装置と前記Leaf装置のアドレスを、当該CLOSネットワークのネットワーク別始点アドレス以降であって、次のクラスタIDの前記CLOSネットワークのネットワーク別始点アドレスよりも前に設定することを特徴とする。 In order to solve the above problems, the present invention is a network management device for setting addresses of the Spine device and the Leaf device in a network including a plurality of CLOS networks having a plurality of Spine devices and a plurality of Leaf devices. A starting point address that is a starting point of addresses to be set in the Spine device and the Leaf device, a storage unit that stores the number of the Spine devices and the number of Leaf devices for each CLOS network, and the starting point address, and Based on the number of the Spine devices and the number of Leaf devices for each CLOS network, a start address for each CLOS network that is a start point of the address for each CLOS network is determined, and for each CLOS network, the start point for each CLOS network Address, number of Spine devices and Le a processing unit for setting the address of the Spine device and the Leaf device based on the number of af devices, the processing unit being a product of the number of the Spine devices and the number of the Leaf devices for each CLOS network. The cluster ID of the CLOS network is determined based on the descending order of the CLOS network, the starting address for each CLOS network is determined so that the CLOS network is arranged in order from the descending order of descending order, and the Spine device of the one CLOS network The address of the Leaf device is set after the network-specific start address of the CLOS network and before the network-specific start address of the CLOS network of the next cluster ID .

これにより、始点アドレス、および、CLOSネットワークごとのSpine装置の台数とLeaf装置の台数を登録しておくだけで、自動的にSpine装置とLeaf装置のアドレスを設定することができる。   Accordingly, the addresses of the Spine device and the Leaf device can be automatically set only by registering the start point address, the number of Spine devices and the number of Leaf devices for each CLOS network.

また、本発明は、前記ネットワーク管理装置によって管理される前記CLOSネットワークごとに設置されるCLOSネットワーク管理装置であって、自身の前記CLOSネットワークにおいて、前記Spine装置および前記Leaf装置のいずれかが増設される場合、自身の前記CLOSネットワークにおける前記Spine装置の台数と前記Leaf装置の台数に基づいて、当該増設される装置のアドレスを決定し、当該増設される装置に対して、前記決定したアドレスを通知し、既存の前記Spine装置および前記Leaf装置のうち、当該増設される装置と接続されている装置に対して、当該増設される装置との通信用の設定情報を通知することを特徴とする。   Further, the present invention is a CLOS network management device installed for each CLOS network managed by the network management device, wherein either the Spine device or the Leaf device is added in the CLOS network of its own. The address of the added device is determined based on the number of Spine devices and the number of Leaf devices in the CLOS network of itself, and the determined address is notified to the added device. Of the existing Spine device and Leaf device, the setting information for communication with the added device is notified to the device connected to the added device.

これにより、Spine装置、Leaf装置の増設時に、増設される装置のアドレスを決定し、当該増設される装置にその決定したアドレスを通知するとともに、既存のSpine装置、Leaf装置に対して当該増設される装置との通信用の設定情報を通知することができる。   As a result, when adding a Spine device or Leaf device, the address of the device to be added is determined, the determined address is notified to the added device, and added to the existing Spine device or Leaf device. The setting information for communication with the device to be notified can be notified.

また、本発明は、前記記憶部が、前記CLOSネットワーク同士の接続に用いるCLOSネットワーク別インタフェースアドレスを決定するための始点となるCLOSネットワーク間始点インタフェースアドレスを記憶しており、前記処理部が、前記CLOSネットワーク間始点インタフェースアドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数に基づいて、それぞれの前記CLOSネットワーク別インタフェースアドレスを決定し、前記決定したCLOSネットワーク別インタフェースアドレスを、前記CLOSネットワークごとに設置されるそれぞれのCLOSネットワーク管理装置に送信し、当該CLOSネットワーク管理装置に配下の前記Spine装置および前記Leaf装置に通知させることで、前記CLOSネットワーク同士の接続を行うことを特徴とする。   Further, according to the present invention, the storage unit stores a CLOS network start point interface address that is a start point for determining an interface address for each CLOS network used for connection between the CLOS networks. The interface address for each CLOS network is determined based on the interface address between the CLOS networks, the number of the Spine devices and the number of the Leaf devices for each CLOS network, and the determined interface address for each CLOS network is determined. , By transmitting to each CLOS network management device installed for each CLOS network and causing the CLOS network management device to notify the subordinate Spine device and Leaf device. And performing connection between CLOS network.

これにより、CLOSネットワーク同士の接続を自動的に行うことができる。   Thereby, connection between CLOS networks can be performed automatically.

本発明によれば、CLOSネットワークを複数備えるネットワークにおいて、物理的なネットワーク装置のアドレスを自動設定することができる。   According to the present invention, the address of a physical network device can be automatically set in a network including a plurality of CLOS networks.

本実施形態のネットワークの構成例を示す図である。It is a figure which shows the structural example of the network of this embodiment. クラスタ内の通信等についての説明図である。It is explanatory drawing about communication etc. in a cluster. 1つのクラスタについてのアドレス計算結果例を示す図である。It is a figure which shows the example of an address calculation result about one cluster. 事前の情報登録に関する説明図である。It is explanatory drawing regarding prior information registration. アドレスを計算、配布する処理のシーケンス図である。It is a sequence diagram of the process which calculates and distributes an address. 図5Aの処理で用いる各情報の構成例である。It is a structural example of each information used by the process of FIG. 5A. (a)は、接続情報テーブル、論理IF情報テーブルを生成する処理のシーケンス図である。(b)は、1つのクラスタについてのアドレス計算結果例を示す図である。(A) is a sequence diagram of processing for generating a connection information table and a logical IF information table. (B) is a figure which shows the example of an address calculation result about one cluster. (a)は、論理IF情報テーブルの構成例である。(b)は、接続情報テーブルの構成例である。(A) is a structural example of a logical IF information table. (B) is a structural example of a connection information table. ネットワーク装置を増設する処理のシーケンス図である。It is a sequence diagram of a process for adding network devices. 1つのクラスタと中継装置の構成例を示す図である。It is a figure which shows the structural example of one cluster and a relay apparatus. (a)は、論理IF情報テーブルの構成例である。(b)は、接続情報テーブルの構成例である。(A) is a structural example of a logical IF information table. (B) is a structural example of a connection information table. クラスタ間を接続する処理のシーケンス図である。It is a sequence diagram of the process which connects between clusters.

以下、本発明を実施するための形態について、説明する。本実施形態では、複数のSpine装置と複数のLeaf装置とを有するCLOSネットワークを複数備えるネットワークにおいて、Spine装置とLeaf装置のアドレス設定を行うネットワーク管理装置等について説明する。なお、CLOSネットワークは、近年、データセンタ等で多く用いられ、例えば、ECMP(Equal Cost Multi Path。「https://tools.ietf.org/html/rfc2992」参照)を用いて通信する。   Hereinafter, modes for carrying out the present invention will be described. In the present embodiment, a network management device that performs address setting of a Spine device and a Leaf device in a network including a plurality of CLOS networks including a plurality of Spine devices and a plurality of Leaf devices will be described. In recent years, CLOS networks are often used in data centers and the like, and communicate using, for example, ECMP (Equal Cost Multi Path; see “https://tools.ietf.org/html/rfc2992”).

図1は、本実施形態のネットワークSの構成例を示す図である。ネットワークSは、上位コントローラ1(ネットワーク管理装置)、バックボーンネットワーク2、および、複数のクラスタ3(CLOSネットワーク)から構成される。   FIG. 1 is a diagram illustrating a configuration example of a network S according to the present embodiment. The network S includes a host controller 1 (network management device), a backbone network 2, and a plurality of clusters 3 (CLOS network).

上位コントローラ1は、処理部11、記憶部12等を備え、ネットワークS全体を管理、制御する(詳細は後記)。
バックボーンネットワーク2は、複数の伝送装置やレイヤ2スイッチなどの通信を中継する中継装置21を備えている。中継装置21は、異なる2つのクラスタ3のスパインスイッチ32(Spine装置)同士の通信を仲介する。
The host controller 1 includes a processing unit 11, a storage unit 12, and the like, and manages and controls the entire network S (details will be described later).
The backbone network 2 includes a relay device 21 that relays communications such as a plurality of transmission devices and layer 2 switches. The relay device 21 mediates communication between spine switches 32 (Spine devices) of two different clusters 3.

クラスタ3は、いわゆるSpine&Leaf型の2階層構成で複数のSpine装置(第1階層装置)と複数のLeaf装置(第2階層装置)とを有するCLOSネットワークであり、図1の例では、Cluster1〜4の4つのクラスタが設けられている。以下、クラスタ3について、「Cluster1〜4」、「Cluster1」等と記載する場合がある。   The cluster 3 is a CLOS network having a so-called Spine & Leaf type two-layer configuration and having a plurality of Spine devices (first layer devices) and a plurality of Leaf devices (second layer devices). In the example of FIG. The four clusters are provided. Hereinafter, the cluster 3 may be referred to as “Cluster1 to 4”, “Cluster1”, or the like.

クラスタ3のうち、代表してCluster1について説明すると、Cluster1は、コントローラ31(CLOSネットワーク管理装置)、複数のスパインスイッチ32(Spine1,2)(ネットワーク装置)、複数のリーフスイッチ33(Leaf1〜4)(Leaf装置。ネットワーク装置)、複数のサーバ34を備えている。なお、図1におけるクラスタ3ごとのスパインスイッチ32の数、リーフスイッチ33の数は例示であり、これらに限定されず、この例示より多くても少なくてもよい。   Of Cluster 3, Cluster 1 will be described as a representative. Cluster 1 includes a controller 31 (CLOS network management device), a plurality of spine switches 32 (Spine 1 and 2) (network devices), and a plurality of leaf switches 33 (Leaf 1 to 4). (Leaf device, network device), a plurality of servers 34 are provided. Note that the number of spine switches 32 and the number of leaf switches 33 in each cluster 3 in FIG. 1 are examples, and are not limited to these, and may be more or less than this example.

コントローラ31は、すべてのリーフスイッチ33と接続されている。また、複数のスパインスイッチ32と、複数のリーフスイッチ33とは、フルメッシュで接続されている。また、複数のサーバ34それぞれは、いずれかのリーフスイッチ33と接続されている。   The controller 31 is connected to all the leaf switches 33. The plurality of spine switches 32 and the plurality of leaf switches 33 are connected by a full mesh. Each of the plurality of servers 34 is connected to one of the leaf switches 33.

なお、経路広告、M(Management)プレーン、U(User)プレーンについては、図示の通りである。   The route advertisement, M (Management) plane, and U (User) plane are as illustrated.

次に、図2を参照して、クラスタ内の通信等について説明する。クラスタ3(図2では代表してCluster1)のコントローラ31は、DB(Data Base)311、設定制御部312、DHCP(Dynamic Host Configuration Protocol)サーバ部313、Syslogサーバ部314を備える。なお、DHCPサーバ部313は、ここではコントローラ31に物理的に内包されているものとするが、これに限定されず、物理的に外部に分離されていてもよい。DB311についても同様である。   Next, communication and the like in the cluster will be described with reference to FIG. The controller 31 of the cluster 3 (Cluster 1 as representative in FIG. 2) includes a DB (Data Base) 311, a setting control unit 312, a DHCP (Dynamic Host Configuration Protocol) server unit 313, and a Syslog server unit 314. Note that the DHCP server unit 313 is physically included in the controller 31 here, but is not limited thereto, and may be physically separated to the outside. The same applies to the DB 311.

DB311、DHCPサーバ部313を含むコントローラ31は、クラスタ3ごとに存在し、IPアドレスを用いて接続できるIP接続性で上位コントローラ1と通信する。   A controller 31 including a DB 311 and a DHCP server unit 313 exists for each cluster 3 and communicates with the host controller 1 with IP connectivity that can be connected using an IP address.

また、スパインスイッチ32とリーフスイッチ33の間の接続(データトラフィックが流通する接続)と独立に、スパインスイッチ32とリーフスイッチ33は、それぞれ、コントローラ31と接続する(図2の例ではスイッチ35を介して)。   Further, independent of the connection between the spine switch 32 and the leaf switch 33 (connection through which data traffic circulates), the spine switch 32 and the leaf switch 33 are each connected to the controller 31 (in the example of FIG. Through).

また、DHCPサーバ部313は、DHCPデータを受信するために、スパインスイッチ32、リーフスイッチ33と同じレイヤ2セグメントに存在する。
なお、本実施形態では、スパインスイッチ32、リーフスイッチ33は、例としてL3スイッチとして説明するが、同等機能を持つルータ、PC、サーバなどのホスト・ノードとして実現してもよい。
The DHCP server unit 313 exists in the same layer 2 segment as the spine switch 32 and the leaf switch 33 in order to receive DHCP data.
In the present embodiment, the spine switch 32 and the leaf switch 33 are described as L3 switches as an example, but may be realized as host nodes such as routers, PCs, and servers having equivalent functions.

本実施形態では、リーフスイッチ33を増設する際に、上位コントローラ1で自動的にそのアドレスを計算してコントローラ31に通知する仕組みについて説明する。   In the present embodiment, a mechanism will be described in which when the leaf switch 33 is added, the host controller 1 automatically calculates the address and notifies the controller 31 of the address.

まず、使用するパラメータについて説明する。
・インタフェースアドレス始点IPアドレス:X(入力値)
ループバックアドレス始点IPアドレス:Y(入力値。入力値がない場合、式(4)による)
・マネジメントアドレス始点IPアドレス:Z(入力値。入力値がない場合、式(6)による)
なお、各始点IPアドレスにおける「始点」とは、計算の始点の意味である。
First, parameters to be used will be described.
-Interface address start point IP address: X (input value)
Loopback address source IP address: Y (. When there is no input value input value, according to equation (4))
Management address start point IP address: Z (input value. If there is no input value, use equation (6))
The “start point” in each start point IP address means the start point of the calculation.

・クラスタID:C(開始値:1)
(Cは最大Spine台数と最大Leaf台数の積の降順順位)
図1の例では、Cluster1〜4の最大Spine台数と最大Leaf台数の積は、それぞれ、2×4=8、2×5=10、2×20=40、2×3=6である。よって、Cluster1〜4の積の降順順位は、3,2,1,4である。
したがって、Cluster1〜4のクラスタIDは、それぞれ、「3」、「2」、「1」、「4」となる。
Cluster ID: C (start value: 1)
(C is the descending order of the product of the maximum number of spines and maximum number of leaves)
In the example of FIG. 1, the products of the maximum number of spines and the maximum number of leafs of Cluster 1 to 4 are 2 × 4 = 8, 2 × 5 = 10, 2 × 20 = 40, and 2 × 3 = 6, respectively. Therefore, the descending order of the products of Cluster 1 to 4 is 3, 2, 1, and 4.
Accordingly, the cluster IDs of Cluster 1 to 4 are “3”, “2”, “1”, and “4”, respectively.

・最大Spine台数:SmaxC
・最大Leaf台数:LmaxC
・最大クラスタID:Cmax
・ Maximum number of Spine: Smax C
・ Maximum number of Leafs: Lmax C
・ Maximum cluster ID: Cmax

なお、ここでは、インタフェースアドレス、ループバックアドレス、マネジメントアドレスの各始点IPアドレスを使用するものとしたが、そのうち必須の情報はインタフェースアドレス始点IPアドレスである。これを上位コントローラ1が記憶部12の上位DBに他の情報(上記パラメータ等)とともに保持する。   Here, the starting IP addresses of the interface address, loopback address, and management address are used, but the essential information is the interface address starting IP address. The host controller 1 holds this together with other information (such as the above parameters) in the host DB of the storage unit 12.

そして、上位コントローラ1は、以下の計算を行う。

Figure 0006471066
(但し、C>1の場合のみ。C=1の場合U=0)。
なお、log2(Smaxi×Lmaxi)の両側の記号は、天井関数を表す。 Then, the host controller 1 performs the following calculation.
Figure 0006471066
(However, only when C> 1, U C = 0 when C = 1).
The symbols on both sides of log 2 (Smax i × Lmax i ) represent the ceiling function.

Figure 0006471066
(但し、C>1の場合のみ。C=1の場合V=0)
Figure 0006471066
(However, only when C> 1, V C = 0 when C = 1)

=X+U ・・・式(3)
Y=XCmax+1 ・・・式(4)
=Y+V ・・・式(5)
Z=YCmax+1 ・・・式(6)
=Z+V ・・・式(7)
但しSmax=0, Lmax=0
X C = X + U C ··· (3)
Y = X Cmax + 1 Formula (4)
Y C = Y + V C Formula (5)
Z = Y Cmax + 1 Expression (6)
Z C = Z + V C (7)
However, Smax 0 = 0, Lmax 0 = 0

ここで、クラスタIDが「C」のクラスタ3に着目すると、使用するパラメータは次の通りである。
・インタフェースアドレス始点IPアドレス:X(CLOSネットワーク別始点アドレス)
・ループバックアドレス始点IPアドレス:Y
・マネジメントアドレス始点IPアドレス:Z
・最大Spine台数:SmaxC
・最大Leaf台数:LmaxC
・Spine装置番号(開始値:1):S(n=1,2,3,・・・,SmaxC
・Leaf装置番号(開始値:1):L(k=1,2,3,・・・,LmaxC
Here, paying attention to the cluster 3 whose cluster ID is “C”, the parameters used are as follows.
-Interface address start point IP address: X C (Start point address by CLOS network)
-Loopback address start point IP address: Y C
Management address start point IP address: Z C
・ Maximum number of Spine: Smax C
-Maximum number of Leafs: Lmax C
・ Spine device number (start value: 1): S n (n = 1, 2, 3,..., Smax C )
Leaf device number (start value: 1): L k (k = 1, 2, 3,..., Lmax C )

そして、Sn−Lk間リンクSn側IPアドレスは、次の式(8)により計算する。
+((Sn−1)*Lmax+(Lk−1))*2 ・・・式(8)
Then, the Sn-Lk link Sn side IP address is calculated by the following equation (8).
X C + ((Sn-1 ) * Lmax C + (Lk-1)) * 2 ··· formula (8)

また、Sn−Lk間リンクLk側IPアドレスは、次の式(9)により計算する。
+((Sn−1)*Lmax+(Lk−1))*2+1 ・・・式(9)
The Sn-Lk link Lk side IP address is calculated by the following equation (9).
X C + ((Sn−1) * Lmax C + (Lk−1)) * 2 + 1 Expression (9)

また、以下の式(10)〜(13)の通り、各アドレスを計算する。
・SnループバックIPアドレス=Y+S ・・・式(10)
・SnマネージメントIPアドレス=Z+S ・・・式(11)
・LkループバックIPアドレス=Y+Smax+L ・・・式(12)
・LkマネージメントIPアドレス=Z+Smax+L ・・・式(13)
Also, each address is calculated as in the following formulas (10) to (13).
Sn loopback IP address = Y C + S n Expression (10)
Sn management IP address = Z C + S n Expression (11)
Lk loopback IP address = Y C + Smax C + L k Expression (12)
Lk management IP address = Z C + Smax C + L k Expression (13)

計算結果例を図3に示す。図3では、図1のCluster1に関し、X=10.0.0.0とする。式(8)、(9)による番号付与の考え方としては、Spine装置番号の昇順の先頭の装置のポート番号の先頭のポートから偶数アドレスを付与し、各Spine装置のポートの対向のLeaf装置のポートに+1のアドレスを付与する、というものである。 An example of the calculation result is shown in FIG. In FIG. 3, X C = 10.0.0.0 is assumed for Cluster1 in FIG. As the idea of number assignment according to equations (8) and (9), an even address is assigned from the first port of the first device number in the ascending order of the Spine device number, and the leaf device opposite to the port of each Spine device is assigned. The address of +1 is assigned to the port.

例えば、Spine1において、ポート「1」にはインタフェースアドレス「10.0.0.0(図3では「.0」と表記。以下同様)」が付与され、ポート「2」にはインタフェースアドレス「10.0.0.2」が付与されている。また、Leaf1において、ポート「1」にはインタフェースアドレス「10.0.0.1」が付与されている。また、Leaf2において、ポート「1」にはインタフェースアドレス「10.0.0.3」が付与されている。   For example, in Spine1, the interface address “10.0.0.0 (indicated as“ .0 ”in FIG. 3; the same applies hereinafter)” is assigned to the port “1”, and the interface address “10.0.0.2” is assigned to the port “2”. Has been granted. In Leaf1, the interface address “10.0.0.1” is assigned to the port “1”. In Leaf 2, the interface address “10.0.0.3” is assigned to the port “1”.

図4以降に、処理シーケンス、各コントローラが保有するデータ例等を示す。
図4は、事前の情報登録に関する説明図である。
まず、上位コントローラ管理者1Mが上位コントローラ1を用いて各クラスタ3内で使用するネットワーク機器を識別するスイッチ機種情報5(図4(b))を登録すると(図4(a)のステップS1)、上位コントローラ1の記憶部12の上位DB(図2)が更新される(ステップS2)。
FIG. 4 and subsequent figures show a processing sequence, examples of data held by each controller, and the like.
FIG. 4 is an explanatory diagram regarding prior information registration.
First, when the host controller administrator 1M registers the switch model information 5 (FIG. 4B) for identifying the network device used in each cluster 3 by using the host controller 1 (step S1 in FIG. 4A). The host DB (FIG. 2) in the storage unit 12 of the host controller 1 is updated (step S2).

図4(b)に示す例のスイッチ機種情報5では、機種ID、機種名に対応して、起動完了判定メッセージとして、その装置が起動したときに最後に送信すると想定されるメッセージを登録する。また、起動イメージファイルパスや起動コンフィグファイルも設定可能であれば設定する。   In the switch model information 5 of the example shown in FIG. 4B, a message that is supposed to be transmitted last when the apparatus is activated is registered as an activation completion determination message corresponding to the model ID and model name. Also, set the startup image file path and startup configuration file if possible.

次に、上位コントローラ管理者1Mが上位コントローラ1を用いてスイッチ機種情報5の配布指示をすると(ステップS3)、上位コントローラ1は各コントローラ31にスイッチ機種情報5を配布する(ステップS4)。   Next, when the host controller administrator 1M uses the host controller 1 to instruct distribution of the switch model information 5 (step S3), the host controller 1 distributes the switch model information 5 to each controller 31 (step S4).

次に、コントローラ管理者31Mがコントローラ31を用いてクラスタ内装置情報を登録すると(ステップS5)、コントローラ31はDB311を更新する(ステップS6)。具体的には、図4(c)に示すクラスタ内装置情報テーブル6において、装置種別ID、装置番号、機種ID、MAC(Media Access Control)アドレス(装置の個体識別用)、フラグ(ネットワークに存在している場合「1」、存在していない場合「0」)の各情報を登録する。   Next, when the controller manager 31M registers intra-cluster device information using the controller 31 (step S5), the controller 31 updates the DB 311 (step S6). Specifically, in the intra-cluster device information table 6 shown in FIG. 4C, the device type ID, device number, model ID, MAC (Media Access Control) address (for device individual identification), flag (present in the network) Each information of “1” when registered, “0” when not present) is registered.

次に、図5A,5Bを参照して、アドレスの配布方法について説明する。
まず、上位コントローラ管理者1Mが上位コントローラ1を用いてWAN情報7(図5B(a))を登録すると(図5A(a)のステップS11)、上位コントローラ1の上位DB(図2)が更新される(ステップS12)。
Next, an address distribution method will be described with reference to FIGS. 5A and 5B.
First, when the upper controller administrator 1M registers the WAN information 7 (FIG. 5B (a)) using the upper controller 1 (step S11 in FIG. 5A), the upper DB (FIG. 2) of the upper controller 1 is updated. (Step S12).

図5B(a)に示す例のWAN情報7では、インタフェースアドレス始点IPアドレス(始点IF(Interface)アドレス:「X」に相当する値)、ループバックアドレス始点IPアドレス(始点Loアドレス:「Y」に相当する値)、マネジメントアドレス始点IPアドレス(始点マネジメントアドレス:「Z」に相当する値)、クラスタ間始点IFアドレス(CLOSネットワーク間始点インタフェースアドレス)を入力値として指定している。   In the WAN information 7 in the example shown in FIG. 5B (a), the interface address start point IP address (start point IF (Interface) address: a value corresponding to “X”), the loopback address start point IP address (start point Lo address: “Y”) ), Management address start point IP address (start point management address: value corresponding to “Z”), and inter-cluster start point IF address (inter-CLOS network start point interface address) are specified as input values.

次に、上位コントローラ管理者1Mが上位コントローラ1を用いてクラスタ情報8(図5B(b))を登録すると(ステップS13)、コントローラ31のDB311が更新される(ステップS14)。   Next, when the host controller administrator 1M registers the cluster information 8 (FIG. 5B (b)) using the host controller 1 (step S13), the DB 311 of the controller 31 is updated (step S14).

図5B(b)に示す例のクラスタ情報8は、クラスタID、クラスタ最大Spine数、クラスタ最大Leaf数、コントローラアドレスの各項目を備えている。このようなクラスタ情報8がコントローラ31のDB311に格納される。   The cluster information 8 in the example shown in FIG. 5B (b) includes items of cluster ID, cluster maximum spine number, cluster maximum leaf number, and controller address. Such cluster information 8 is stored in the DB 311 of the controller 31.

次に、上位コントローラ管理者1Mが上位コントローラ1を用いてクラスタ始点アドレス等の計算を指示すると(ステップS15)、上位コントローラ1は当該計算等を行い、各コントローラ31に計算結果を配布する(ステップS16)。   Next, when the host controller manager 1M uses the host controller 1 to instruct the calculation of the cluster start point address and the like (step S15), the host controller 1 performs the calculation and distributes the calculation result to each controller 31 (step S15). S16).

図5B(c)は、計算結果としての例のCluster1に関するクラスタ情報8aで、Cluster1のコントローラ31に格納される。クラスタ情報8aは、クラスタ最大Spine数、クラスタ最大Leaf数、始点IFアドレス(CLOSネットワーク別始点アドレス)、始点Loアドレス、始点マネジメントアドレスの各情報を有している。図5Bの(d)(e)(f)のクラスタ情報8b、8c、8dについても同様である。   FIG. 5B (c) is cluster information 8a related to Cluster1 in the example as a calculation result, and is stored in the controller 31 of Cluster1. The cluster information 8a includes information on the maximum cluster spine number, the maximum cluster leaf number, the start point IF address (start point address for each CLOS network), the start point Lo address, and the start point management address. The same applies to the cluster information 8b, 8c, and 8d in (d), (e), and (f) of FIG. 5B.

次に、図6A,6Bを参照して、接続情報テーブルと論理IF情報テーブルの作成について説明する。上位コントローラ1が各コントローラ31に計算結果を配布すると(図6A(a)のステップS21。図5のステップS16に相当)、クラスタ情報(図5(c)〜(f))を得たコントローラ31はDB311内に自動的に図6B(b)の接続情報テーブル92と図6B(a)の論理IF情報テーブル91を作成する(ステップS22、S23)。   Next, creation of a connection information table and a logical IF information table will be described with reference to FIGS. 6A and 6B. When the host controller 1 distributes the calculation result to each controller 31 (step S21 in FIG. 6A (corresponding to step S16 in FIG. 5)), the controller 31 that obtained the cluster information (FIGS. 5C to 5F). Automatically creates the connection information table 92 in FIG. 6B (b) and the logical IF information table 91 in FIG. 6B (a) in the DB 311 (steps S22 and S23).

なお、図6B(a)の論理IF情報テーブル91では、論理IFID、装置種別ID,装置番号、物理IFに対応付けられるIPアドレス(インタフェースIPアドレス)は、図6A(b)に示す場合(始点アドレスが10.0.0.160、Spine数2、Leaf数4のCluster1)を前提とした値となっている。   In the logical IF information table 91 in FIG. 6B (a), the logical IF ID, device type ID, device number, and IP address (interface IP address) associated with the physical IF are as shown in FIG. 6A (starting point). The values are based on Cluster1) with an address of 10.0.0.160, a spine number of 2, and a leaf number of 4.

論理IF情報テーブル91では、各装置(Spine装置、Leaf装置)の物理IFの番号の昇順に論理IFを付与していく。この物理IFの番号を昇順に取得する方法としては、例えば、SNMP(Simple Network Management Protocol)のMIB(Management Information Base)でifIndexを取得しその昇順で用いる方法が考えられる。利用環境によっては図6B(a)のように物理IFが「1」から開始するとは限らず、図6B(a)の物理IFの値は一例に過ぎない。例えば、利用したいインタフェースの名前のルール(例:図4(b)のスイッチ機種情報5における機種ID「2」の行と同様に、Gigabit0,Gigabit1,・・・のようにGigabitが先頭につく)が決まっているならば、MIBでifNameを取得してifNameをその名前に抽出し、そのifIndexを昇順で使うという方法も考えられる。   In the logical IF information table 91, logical IFs are assigned in ascending order of physical IF numbers of each device (Spine device, Leaf device). As a method of acquiring the physical IF numbers in ascending order, for example, a method of acquiring ifIndex by SNMP (Simple Network Management Protocol) MIB (Management Information Base) and using it in ascending order is conceivable. Depending on the use environment, the physical IF does not always start from “1” as shown in FIG. 6B (a), and the value of the physical IF shown in FIG. 6B (a) is merely an example. For example, the rule for the name of the interface to be used (eg, Gigabit is prefixed like Gigabit0, Gigabit1,..., As in the case of the model ID “2” in the switch model information 5 in FIG. 4B). If it is determined, it is possible to obtain an ifName from the MIB, extract the ifName to the name, and use the ifIndex in ascending order.

また、図6B(a)の論理IF情報テーブル91での表記と異なり、実際には、物理IFにはクラスタで一意な番号を登録する。   Further, unlike the notation in the logical IF information table 91 in FIG. 6B (a), in practice, a unique number for each cluster is registered in the physical IF.

また、図6B(b)の接続情報テーブル92では、図6A(b)に示す場合を前提として、装置種別ID、装置番号、物理IF、対向装置種別ID、対向装置番号、対向物理IFの各情報が格納される。   In the connection information table 92 in FIG. 6B (b), each of the device type ID, device number, physical IF, counter device type ID, counter device number, and counter physical IF is assumed on the assumption of the case shown in FIG. 6A (b). Information is stored.

次に、図7を参照して、上述のアルゴリズムを活用した装置増設の方法について説明する。なお、図7は、図4〜6に示した動作が実施済みであることを前提とする。ここで、図1のCluster1において、Leaf5を増設したものとする。   Next, with reference to FIG. 7, a method for adding devices using the above-described algorithm will be described. 7 assumes that the operations shown in FIGS. 4 to 6 have been performed. Here, it is assumed that Leaf 5 is added in Cluster 1 of FIG.

まず、コントローラ管理者31Mはコントローラ31を用いて装置情報を登録する、つまり、クラスタ内装置情報テーブル6を更新する(ステップS301)。具体的には、図7のクラスタ内装置情報テーブル6に示すように、最下行にLeaf5の装置種別ID、装置番号、機種ID、MACアドレスが登録される。   First, the controller manager 31M registers device information using the controller 31, that is, updates the intra-cluster device information table 6 (step S301). Specifically, as shown in the intra-cluster device information table 6 of FIG. 7, Leaf5 device type ID, device number, model ID, and MAC address are registered in the bottom row.

装置情報が登録されると、DHCPサーバ部313が動作するDHCP設定を更新し(ステップS302)、MACアドレス(またはマネジメントアドレス)とIPアドレス(式(9)で計算)を関連づける。なお、スイッチ機種情報5(図4)における起動イメージファイルパスや、起動コンフィグファイルを利用してもよい。   When the device information is registered, the DHCP setting in which the DHCP server unit 313 operates is updated (step S302), and the MAC address (or management address) is associated with the IP address (calculated by Expression (9)). Note that the activation image file path or the activation configuration file in the switch model information 5 (FIG. 4) may be used.

次に、保守者Mは、増設対象装置A(Leaf5)の結線および起動を実施する(ステップS303)。
そうすると、増設対象装置A(Leaf5)はDHCP要求をし(ステップS304)、コントローラ31内のDHCPサーバ部313はDHCP応答する(ステップS305)。
Next, the maintenance person M performs connection and activation of the expansion target apparatus A (Leaf5) (step S303).
Then, the expansion target apparatus A (Leaf5) makes a DHCP request (step S304), and the DHCP server unit 313 in the controller 31 makes a DHCP response (step S305).

また、Syslogサーバ部314の設定としてコントローラ31のマネジメントアドレスを増設対象装置A(Leaf5)に付与する(ステップS306)この方法としては、例えばDHCPのoption7(http://www.iana.org/assignments/bootp-dhcp-parameters/bootp-dhcp-parameters.xhtml)を用いる。   Further, the management address of the controller 31 is assigned to the expansion target device A (Leaf5) as the setting of the syslog server unit 314 (step S306). As this method, for example, DHCP option7 (http://www.iana.org/assignments) /bootp-dhcp-parameters/bootp-dhcp-parameters.xhtml).

ステップS306の付与による設定を行った後、増設対象装置A(Leaf5)はコントローラ31に対して起動通知(起動完了判定メッセージを含む)を行う(ステップS307)。   After performing the setting by giving in step S306, the expansion target device A (Leaf5) sends a start notification (including a start completion determination message) to the controller 31 (step S307).

次に、コントローラ31は、DB311内のクラスタ内装置情報テーブル6(図4)のフラグを更新する、つまり、既にネットワークに存在していることを示すように「0」から「1」に書き換える(ステップS308)。   Next, the controller 31 updates the flag of the intra-cluster device information table 6 (FIG. 4) in the DB 311, that is, rewrites from “0” to “1” to indicate that it already exists in the network ( Step S308).

ステップS308の後、以下の設定を行う。
ステップS309では、コントローラ31は、増設対象装置A(Leaf5)に対して、本格設定として、インタフェースアドレスを設定するとともに、インタフェースへのIGP(Interior Gateway Protocol)有効化等を行う。
ステップS309では、増設対象装置A(Leaf5)は、コントローラ31に完了応答を行う。
After step S308, the following settings are made.
In step S309, the controller 31 sets an interface address as a full-scale setting for the expansion target apparatus A (Leaf5), and activates an IGP (Interior Gateway Protocol) for the interface.
In step S309, the expansion target device A (Leaf 5) sends a completion response to the controller 31.

また、ステップS311では、コントローラ31は、既設対象装置B(Spine1,2)に対して、設定として、増設対象装置A(Leaf5)と接続されているインタフェースへのインタフェースアドレスの設定とIGP(Interior Gateway Protocol)有効化等を行う。
ステップS311では、既設対象装置B(Spine1,2)は、コントローラ31に完了応答を行う。
In step S311, the controller 31 sets the interface address to the interface connected to the expansion target apparatus A (Leaf5) and the IGP (Interior Gateway) as settings for the existing target apparatus B (Spine1, 2). Protocol) Enable etc.
In step S <b> 311, the existing target device B (Spine1, 2) sends a completion response to the controller 31.

ステップS309〜S312は、例えば、CLI(Command Line Interface)による設定や、NetConfプロトコルを用いての設定により、実現することができる。そして、論理IF情報テーブル91(図6B(a))を用いることで、前記計算した装置個々のインタフェースのIPアドレスを付与し、また、必要に応じてループバックのIPアドレスを付与することができる。   Steps S309 to S312 can be realized, for example, by setting using CLI (Command Line Interface) or setting using the NetConf protocol. Then, by using the logical IF information table 91 (FIG. 6B (a)), the calculated IP address of each interface of the device can be given, and a loopback IP address can be given if necessary. .

ステップS313で、コントローラ31は、コントローラ管理者31Mに対して結果を応答(表示)する。   In step S313, the controller 31 responds (displays) the result to the controller manager 31M.

以上の仕組みによって、ネットワークSにおいて、始点となるインタフェースIPアドレス、装置(Spine装置、Leaf装置)台数を定めておくこと、及び、装置個体を識別する情報を持つのみで、クラスタ3内の接続性を確立することができる。   With the above mechanism, in the network S, the interface IP address as the starting point, the number of devices (Spine devices, Leaf devices) are determined, and the connectivity within the cluster 3 is obtained only by having information for identifying individual devices. Can be established.

次に、クラスタ3間を接続する方法について説明する。
図8Aに示すクラスタ3(図1のCluster1)の構成に関し、クラスタ3間を接続するための中継装置21に接続するための情報として、図8B(a)の論理IF情報テーブル91における下2行の情報と、図8B(b)の接続情報テーブル92における下2行の情報を、登録する。
Next, a method for connecting the clusters 3 will be described.
Regarding the configuration of the cluster 3 shown in FIG. 8A (Cluster 1 in FIG. 1), the lower two lines in the logical IF information table 91 in FIG. And the information on the lower two lines in the connection information table 92 in FIG. 8B (b) are registered.

この登録は、手作業で行ってもよいし、または、図6A(a)に記載するシーケンスにおけるステップS22、S23における初期情報に含めることで自動的に行ってもよい。このようにして、中継装置21に接続されているインタフェースと論理管理している論理インタフェースが関連付けられる。   This registration may be performed manually or automatically by including it in the initial information in steps S22 and S23 in the sequence described in FIG. 6A (a). In this way, the interface connected to the relay device 21 is associated with the logical interface that is logically managed.

次に、図9を参照して各装置の処理について説明する。ここでは、Cluster1とCluster2を接続する場合を例にとる。
まず、上位コントローラ管理者1Mは、上位コントローラ1に論理リンク情報を登録する(ステップS401)。論理リンク情報とは、各クラスタ3のコントローラ31で管理する論理インタフェース同士の接続を示す情報である。
Next, processing of each device will be described with reference to FIG. Here, a case where Cluster1 and Cluster2 are connected is taken as an example.
First, the host controller administrator 1M registers logical link information in the host controller 1 (step S401). The logical link information is information indicating connection between logical interfaces managed by the controller 31 of each cluster 3.

図9に示す例では、クラスタID「1」の論理インタフェース番号「17」(内部接続用インタフェースが2(Spine台数)×4(Leaf台数)×2(両端点)=16の次の番号)と、対向するクラスタID「2」の論理インタフェース番号「21」(内部接続用インタフェースが2(Spine台数)×5(Leaf台数)×2(両端点)=20の次の番号)を接続する。   In the example shown in FIG. 9, the logical interface number “17” of the cluster ID “1” (the number of internal connection interfaces is 2 (number of spines) × 4 (number of leafs) × 2 (both ends) = 16) The logical interface number “21” of the opposite cluster ID “2” (the number of the internal connection interface is 2 (number of spines) × 5 (number of leafs) × 2 (both ends) = 20) is connected.

上位コントローラ1は、図5B(a)のWAN情報7において、クラスタ間始点IFアドレスを保持している、つまり、クラスタ間のインタフェースに対して割り振るアドレス(CLOSネットワーク別インタフェースアドレス)の始点を保持している。これにより、上位コントローラ1は、以下の計算によりアドレスを自動決定し、Cluster1のコントローラ31aに通知する(ステップS402)。   The host controller 1 holds the inter-cluster start point IF address in the WAN information 7 of FIG. 5B (a), that is, holds the start point of the address allocated to the inter-cluster interface (interface address for each CLOS network). ing. Thereby, the host controller 1 automatically determines an address by the following calculation and notifies the controller 31a of Cluster1 (step S402).

(アドレス決定の考え方)
同一系の接続でアドレスを割り振る。
リンクは/31(IPv4), /127(IPv6)で割り振る。
(変数)
・自クラスタID:A(「1」始まり)[クラスタ情報8(図5B(b))から取得]
・対向クラスタID:B(「1」始まり)[クラスタ情報8(図5B(b))から取得]
・総クラスタ数:Cmax[クラスタ情報8(図5B(b))から取得、最大値をとる]
・設定系数:W(「0」始まり)[最大値はクラスタ情報8(図5B(b))から取得、クラスタ内最大Spineの最大値]
・始点アドレス:I(0系面のアドレス範囲に連続して1系面、2系面と続く。)
(Address determination concept)
Allocate addresses with the same system connection.
Links are allocated with / 31 (IPv4) and / 127 (IPv6).
(variable)
-Own cluster ID: A (beginning with “1”) [obtained from cluster information 8 (FIG. 5B (b))]
Opposite cluster ID: B (beginning with “1”) [obtained from cluster information 8 (FIG. 5B (b))]
Total number of clusters: Cmax [obtained from cluster information 8 (FIG. 5B (b)), taking the maximum value]
-Number of set units: W (starts with “0”) [Maximum value is obtained from cluster information 8 (FIG. 5B (b)), maximum value of maximum Spine within cluster]
-Start point address: I (continuous to the address range of the 0 system plane and continues with the 1 system plane and 2 system plane)

(計算式)
・if (A<B)
{I+W×Cmax×(Cmax-1)+式(14)
}
else if (A>B)
{
I+W×Cmax×(Cmax-1)+式(15)
}
(a formula)
・ If (A <B)
{I + W × Cmax × (Cmax-1) + Formula (14)
}
else if (A> B)
{
I + W x Cmax x (Cmax-1) + formula (15)
}

Figure 0006471066
ただし、a=0、a=Cmax−k
Figure 0006471066
However, a 0 = 0, a k = Cmax-k

Figure 0006471066
ただし、a=0、a=Cmax−k
Figure 0006471066
However, a 0 = 0, a k = Cmax-k

なお、ここでの系(設定系数W)は、特定のクラスタ間の何本目のレイヤ3対地接続かということを指しており、1本目であれば0系、2本目であれば1系として計算する。   Note that the system here (set number W) indicates the number of layer 3 ground connections between specific clusters, and is calculated as 0 system for the first cluster and 1 system for the second cluster. To do.

ステップS402で上位コントローラ1からCluster1コントローラ31aにアドレス(クラスタ番号、論理IF番号、Ipv4_addr/Ipv6_addr=上位コントローラ1の計算結果)通知があると、Cluster1コントローラ31aは、該当する論理インタフェースに対してIPアドレスを付与して自身のDB311を更新(図8B(a)の論理IF情報テーブル91aの論理インタフェース「17」「18」を更新)し(ステップS403)、Cluster1対象装置3a(各Spine、各Leaf)にアドレス設定を行う(ステップS404)。   If there is an address (cluster number, logical IF number, Ipv4_addr / Ipv6_addr = calculation result of the host controller 1) notification from the host controller 1 to the Cluster1 controller 31a in step S402, the Cluster1 controller 31a sends an IP address to the corresponding logical interface. To update its own DB 311 (update the logical interfaces “17” and “18” in the logical IF information table 91a in FIG. 8B) (step S403), and the Cluster1 target device 3a (each Spine, each Leaf) The address is set to (Step S404).

Cluster1コントローラ31aは、Cluster1対象装置3aからアドレス設定の完了応答を受けると(ステップS405)、上位コントローラ1に完了応答を行う(ステップS406)。   When receiving an address setting completion response from the Cluster1 target device 3a (step S405), the Cluster1 controller 31a sends a completion response to the host controller 1 (step S406).

ステップS407〜S411は、ステップS402〜S406と比べて、Cluster1コントローラ31a、Cluster1対象装置3aがCluster2コントローラ31b、Cluster2対象装置3bに変わっている以外は同様であるので、説明を省略する。   Steps S407 to S411 are the same as steps S402 to S406 except that the Cluster1 controller 31a and the Cluster1 target device 3a are changed to the Cluster2 controller 31b and the Cluster2 target device 3b.

上位コントローラ1は、ステップS406、S411の完了応答を受けて、記憶部12の上位DBを更新する。   The host controller 1 updates the host DB of the storage unit 12 in response to the completion responses in steps S406 and S411.

このように、本実施形態に係る上位コントローラ1等によれば、始点アドレス(インタフェースアドレス始点IPアドレス)、および、CLOSネットワークごとのSpine装置の台数とLeaf装置の台数を上位コントローラ1に登録しておくだけで、自動的にSpine装置とLeaf装置のアドレスを設定することができる。   As described above, according to the host controller 1 and the like according to the present embodiment, the start point address (interface address start point IP address) and the number of spine devices and the number of leaf devices for each CLOS network are registered in the host controller 1. You can set the address of Spine device and Leaf device automatically just by setting.

したがって、ネットワーク装置(Spine装置、Leaf装置)の増設時や、ネットワーク装置の故障交換時において、保守者が詳細な設定を投入することなく装置個体を識別する情報のみを登録すれば、自動的にネットワーク装置に設定が投入され接続性を確立することができる。また、それらの接続性を確立するために用いられるIPアドレスは集約可能となるため、CLOSネットワーク間の相互の接続を行う際に経路の増加を抑制することができる。   Therefore, when network devices (Spine devices, Leaf devices) are added or when a network device failure is replaced, if only the information that identifies the individual device is registered by the maintainer without entering detailed settings, it will automatically Settings can be entered into the network device to establish connectivity. In addition, since IP addresses used for establishing the connectivity can be aggregated, an increase in the path can be suppressed when the CLOS networks are connected to each other.

また、Spine装置、Leaf装置の増設時に、増設される装置のアドレスを決定し、当該増設される装置にその決定したアドレスを通知するとともに、既存のSpine装置、Leaf装置に対して当該増設される装置との通信用の設定情報を通知することができる。   In addition, when adding a Spine device or Leaf device, the address of the device to be added is determined, the determined address is notified to the added device, and added to the existing Spine device or Leaf device. The setting information for communication with the apparatus can be notified.

また、図8A〜図9を参照して説明したように、クラスタ3(CLOSネットワーク)同士の接続を自動的に行うことができる。   Further, as described with reference to FIGS. 8A to 9, the clusters 3 (CLOS networks) can be automatically connected to each other.

以上で実施形態の説明を終えるが、本発明の態様はこれらに限定されるものではない。
例えば、本実施形態ではもっとも単純な例として、物理インタフェースでの接続を想定したが、実際にはVLAN(Virtual Local Area Network)やLAG(Link Aggregation)などの仮想的なインタフェースを利用して対地間接続する場合もある。この場合については、論理IF情報テーブル91(図6B(a))、論理IF情報テーブル91a(図8B(a))において物理IFの代わりに上述の仮想的なインタフェースを管理すれば、同様の技術が実現できる。
その他、具体的な構成について、本発明の主旨を逸脱しない範囲で適宜変更が可能である。
This is the end of the description of the embodiments, but the aspects of the present invention are not limited to these.
For example, in the present embodiment, a connection using a physical interface is assumed as the simplest example, but in practice, a virtual interface such as a VLAN (Virtual Local Area Network) or LAG (Link Aggregation) is used to connect to the ground. Sometimes connected. In this case, if the above-described virtual interface is managed instead of the physical IF in the logical IF information table 91 (FIG. 6B (a)) and the logical IF information table 91a (FIG. 8B (a)), the same technique is used. Can be realized.
In addition, about a concrete structure, it can change suitably in the range which does not deviate from the main point of this invention.

1 上位コントローラ(ネットワーク管理装置)
2 バックボーンネットワーク
3 クラスタ
5 スイッチ機種情報
6 クラスタ内装置情報テーブル
7 WAN情報
8 クラスタ情報
12 記憶部
21 中継装置
31 コントローラ(CLOSネットワーク管理装置)
32 スパインスイッチ
33 リーフスイッチ
34 サーバ
35 スイッチ
91 論理IF情報テーブル
92 接続情報テーブル
312 設定制御部
313 DHCPサーバ部
314 Syslogサーバ部
1 Host controller (network management device)
2 Backbone Network 3 Cluster 5 Switch Model Information 6 Intra-cluster Device Information Table 7 WAN Information 8 Cluster Information 12 Storage Unit 21 Relay Device 31 Controller (CLOS Network Management Device)
32 Spine Switch 33 Leaf Switch 34 Server 35 Switch 91 Logical IF Information Table 92 Connection Information Table 312 Setting Control Unit 313 DHCP Server Unit 314 Syslog Server Unit

Claims (6)

複数のSpine装置と複数のLeaf装置とを有するCLOSネットワークを複数備えるネットワークにおいて、前記Spine装置と前記Leaf装置のアドレス設定を行うネットワーク管理装置であって、
前記Spine装置と前記Leaf装置に設定するアドレスの始点となる始点アドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数を記憶する記憶部と、
前記始点アドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数に基づいて、前記CLOSネットワークごとのアドレスの始点となるCLOSネットワーク別始点アドレスを決定し、
前記CLOSネットワークごとに、前記CLOSネットワーク別始点アドレス、および、前記Spine装置の台数と前記Leaf装置の台数に基づいて、前記Spine装置と前記Leaf装置のアドレスを設定する処理部と、
備え、
前記処理部は、
前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数の積の降順順位に基づいて、前記CLOSネットワークのクラスタIDを決定し、
前記降順順位が高い前記CLOSネットワークから順に並ぶように、前記CLOSネットワーク別始点アドレスを決定し、
一の前記CLOSネットワークの前記Spine装置と前記Leaf装置のアドレスを、当該CLOSネットワークのネットワーク別始点アドレス以降であって、次のクラスタIDの前記CLOSネットワークのネットワーク別始点アドレスよりも前に設定する
ことを特徴とするネットワーク管理装置。
In a network including a plurality of CLOS networks having a plurality of Spine devices and a plurality of Leaf devices, a network management device that performs address setting of the Spine device and the Leaf device,
A starting point address which is a starting point of an address set in the Spine device and the Leaf device, and a storage unit for storing the number of the Spine devices and the number of the Leaf devices for each CLOS network;
Based on the starting point address and the number of the Spine devices and the number of Leaf devices for each CLOS network, a starting point address for each CLOS network that is the starting point of the address for each CLOS network is determined,
For each CLOS network, a processing unit that sets the addresses of the Spine device and the Leaf device based on the start address for each CLOS network, and the number of the Spine devices and the number of Leaf devices;
Equipped with a,
The processor is
Based on the descending order of the product of the number of Spine devices and the number of Leaf devices for each CLOS network, the cluster ID of the CLOS network is determined,
The starting address for each CLOS network is determined so that the descending order is arranged in order from the CLOS network,
The addresses of the Spine device and Leaf device of the one CLOS network are set after the network-specific start address of the CLOS network and before the network-specific start address of the CLOS network of the next cluster ID. A network management device characterized by the above.
請求項1におけるネットワーク管理装置によって管理される前記CLOSネットワークごとに設置されるCLOSネットワーク管理装置であって、
自身の前記CLOSネットワークにおいて、前記Spine装置および前記Leaf装置のいずれかが増設される場合、
自身の前記CLOSネットワークにおける前記Spine装置の台数と前記Leaf装置の台数に基づいて、当該増設される装置のアドレスを決定し、
当該増設される装置に対して、前記決定したアドレスを通知し、
既存の前記Spine装置および前記Leaf装置のうち、当該増設される装置と接続されている装置に対して、当該増設される装置との通信用の設定情報を通知する
ことを特徴とするCLOSネットワーク管理装置。
A CLOS network management apparatus installed for each CLOS network managed by the network management apparatus according to claim 1,
If any of the Spine device and the Leaf device is added in its own CLOS network,
Based on the number of Spine devices and the number of Leaf devices in its own CLOS network, the address of the device to be added is determined,
Notify the determined address to the added device,
CLOS network management characterized in that among the existing Spine device and Leaf device, setting information for communication with the added device is notified to a device connected to the added device. apparatus.
前記記憶部は、前記CLOSネットワーク同士の接続に用いるCLOSネットワーク別インタフェースアドレスを決定するための始点となるCLOSネットワーク間始点インタフェースアドレスを記憶しており、
前記処理部は、
前記CLOSネットワーク間始点インタフェースアドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数に基づいて、それぞれの前記CLOSネットワーク別インタフェースアドレスを決定し、
前記決定したCLOSネットワーク別インタフェースアドレスを、前記CLOSネットワークごとに設置されるそれぞれのCLOSネットワーク管理装置に送信し、当該CLOSネットワーク管理装置に配下の前記Spine装置および前記Leaf装置に通知させることで、前記CLOSネットワーク同士の接続を行う
ことを特徴とする請求項1に記載のネットワーク管理装置。
The storage unit stores a CLOS network start point interface address which is a start point for determining a CLOS network-specific interface address used for connection between the CLOS networks,
The processor is
Based on the inter-CLOS network starting point interface address, and the number of Spine devices and the number of Leaf devices for each CLOS network, determine the interface address for each CLOS network,
The determined interface address for each CLOS network is transmitted to each CLOS network management device installed for each CLOS network, and the CLOS network management device is notified to the Spine device and the Leaf device under its control, The network management apparatus according to claim 1, wherein the CLOS networks are connected to each other.
複数のSpine装置と複数のLeaf装置とを有するCLOSネットワークを複数備えるネットワークにおいて、前記Spine装置と前記Leaf装置のアドレス設定を行うネットワーク管理装置によるアドレス設定方法であって、
前記ネットワーク管理装置は、
前記Spine装置と前記Leaf装置に設定するアドレスの始点となる始点アドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数を記憶する記憶部と、処理部と、を備えており、
前記処理部は、
前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数の積の降順順位に基づいて、前記CLOSネットワークのクラスタIDを決定し、
前記始点アドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数に基づいて、前記CLOSネットワークごとのアドレスの始点となるCLOSネットワーク別始点アドレスを、前記降順順位が高いCLOSネットワークから順に並ぶように決定し、
前記CLOSネットワークごとに、前記CLOSネットワーク別始点アドレス、および、前記Spine装置の台数と前記Leaf装置の台数に基づいて、一の前記CLOSネットワークの前記Spine装置と前記Leaf装置のアドレスが、当該CLOSネットワークのネットワーク別始点アドレス以降であって、次のクラスタIDの前記CLOSネットワークのネットワーク別始点アドレスよりも前となるように、前記Spine装置と前記Leaf装置のアドレスを設定する
ことを特徴とするアドレス設定方法。
In a network including a plurality of CLOS networks having a plurality of Spine devices and a plurality of Leaf devices, an address setting method by a network management device that performs address setting of the Spine device and the Leaf device,
The network management device includes:
A starting point address that is a starting point of an address set in the Spine device and the Leaf device, a storage unit that stores the number of the Spine devices and the number of Leaf devices for each CLOS network, and a processing unit. And
The processor is
Based on the descending order of the product of the number of Spine devices and the number of Leaf devices for each CLOS network, the cluster ID of the CLOS network is determined,
Based on the starting point address and the number of Spine devices and the number of Leaf devices for each CLOS network, the starting point address for each CLOS network that is the starting point of the address for each CLOS network is the CLOS network with the highest descending order. Decided to line up in order ,
For each CLOS network, based on the start address for each CLOS network, and the number of Spine devices and the number of Leaf devices, the addresses of the Spine device and Leaf device of one CLOS network are The address of the Spine device and the Leaf device is set so that it is after the network-specific start address and before the network-specific start address of the CLOS network of the next cluster ID. Method.
請求項4のアドレス設定方法を行う前記ネットワーク管理装置によって管理される前記CLOSネットワークごとに設置されるCLOSネットワーク管理装置によるアドレス設定方法であって、
前記CLOSネットワーク管理装置は、
自身の前記CLOSネットワークにおいて、前記Spine装置および前記Leaf装置のいずれかが増設される場合、
自身の前記CLOSネットワークにおける前記Spine装置の台数と前記Leaf装置の台数に基づいて、当該増設される装置のアドレスを決定し、
当該増設される装置に対して、前記決定したアドレスを通知し、
既存の前記Spine装置および前記Leaf装置のうち、当該増設される装置と接続されている装置に対して、当該増設される装置との通信用の設定情報を通知する
ことを特徴とするアドレス設定方法。
An address setting method by a CLOS network management device installed for each CLOS network managed by the network management device performing the address setting method of claim 4,
The CLOS network management device
If any of the Spine device and the Leaf device is added in its own CLOS network,
Based on the number of Spine devices and the number of Leaf devices in its own CLOS network, the address of the device to be added is determined,
Notify the determined address to the added device,
Of the existing Spine device and the Leaf device, a device connected to the added device is notified of setting information for communication with the added device. .
前記記憶部は、前記CLOSネットワーク同士の接続に用いるCLOSネットワーク別インタフェースアドレスを決定するための始点となるCLOSネットワーク間始点インタフェースアドレスを記憶しており、
前記処理部は、
前記CLOSネットワーク間始点インタフェースアドレス、および、前記CLOSネットワークごとの前記Spine装置の台数と前記Leaf装置の台数に基づいて、それぞれの前記CLOSネットワーク別インタフェースアドレスを決定し、
前記決定したCLOSネットワーク別インタフェースアドレスを、前記CLOSネットワークごとに設置されるそれぞれのCLOSネットワーク管理装置に送信し、当該CLOSネットワーク管理装置に配下の前記Spine装置および前記Leaf装置に通知させることで、前記CLOSネットワーク同士の接続を行う
ことを特徴とする請求項4に記載のアドレス設定方法。
The storage unit stores a CLOS network start point interface address which is a start point for determining a CLOS network-specific interface address used for connection between the CLOS networks,
The processor is
Based on the inter-CLOS network starting point interface address, and the number of Spine devices and the number of Leaf devices for each CLOS network, determine the interface address for each CLOS network,
The determined interface address for each CLOS network is transmitted to each CLOS network management device installed for each CLOS network, and the CLOS network management device is notified to the Spine device and the Leaf device under its control, The address setting method according to claim 4, wherein the CLOS networks are connected to each other.
JP2015158037A 2015-08-10 2015-08-10 Network management apparatus and address setting method Active JP6471066B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015158037A JP6471066B2 (en) 2015-08-10 2015-08-10 Network management apparatus and address setting method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015158037A JP6471066B2 (en) 2015-08-10 2015-08-10 Network management apparatus and address setting method

Publications (2)

Publication Number Publication Date
JP2017038209A JP2017038209A (en) 2017-02-16
JP6471066B2 true JP6471066B2 (en) 2019-02-13

Family

ID=58048385

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015158037A Active JP6471066B2 (en) 2015-08-10 2015-08-10 Network management apparatus and address setting method

Country Status (1)

Country Link
JP (1) JP6471066B2 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7091923B2 (en) 2018-08-07 2022-06-28 日本電信電話株式会社 Transfer device, transfer method and program
JP6988777B2 (en) 2018-11-30 2022-01-05 日本電信電話株式会社 Transfer device, transfer system, transfer method and program
CN109451093B (en) * 2018-12-13 2022-01-28 新华三技术有限公司 Loopback interface address allocation method and device
CN114039847B (en) * 2021-11-25 2024-03-12 新华三大数据技术有限公司 Networking planning method and device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3447687B2 (en) * 2000-10-13 2003-09-16 日本電気株式会社 Wireless network system and network address assignment method
JP2008236317A (en) * 2007-03-20 2008-10-02 Nec Corp Automatic setting system, basic system network device, connection terminal, automatic setting method and program
US9137198B2 (en) * 2011-10-21 2015-09-15 Hewlett-Packard Development Company, L.P. Centralized configuration with dynamic distributed address management
US9397957B2 (en) * 2013-12-23 2016-07-19 Google Inc. Traffic engineering for large scale data center networks

Also Published As

Publication number Publication date
JP2017038209A (en) 2017-02-16

Similar Documents

Publication Publication Date Title
CN109104318B (en) Method for realizing cluster self-adaptive deployment
Koerner et al. Multiple service load-balancing with OpenFlow
CN110636000B (en) Virtual cloud network control method, system and network device
JP5813885B2 (en) System and method for managing network protocol addressing in a controller
CN104243317B (en) A kind of method and apparatus for realizing IP routing forwardings
EP3270553B1 (en) Ospf point-to-multipoint over broadcast or nbma mode
JP6471066B2 (en) Network management apparatus and address setting method
CN103650437A (en) Anycast service registration, method and apparatus, switching equipment and systems
Matias et al. An OpenFlow based network virtualization framework for the cloud
CN104363159A (en) Virtual open network building system and method based on software definition network
JP6193473B2 (en) Computer-implemented method, computer program product and computer
CN106452857A (en) Method for generating configuration information and network control unit
US8868700B2 (en) Distributed network interfaces for application cloaking and spoofing
US20180077048A1 (en) Controller, control method and program
TW201603531A (en) Network-wide service controller
WO2014169969A1 (en) Identification of the paths taken through a network of interconnected devices
CN111182022B (en) Data transmission method and device, storage medium and electronic device
EP3701682B1 (en) Methods, controller manager and controller agent for enabling a connection between a switch of a communication network and a switch controller
WO2016019645A1 (en) Method and system for turning on a data communication network, and storage medium
FI3782334T3 (en) System and method for creating group networks between network devices
JP5894963B2 (en) Analysis server and analysis method
US20170063635A1 (en) Apparatus and method for controlling network service in environment of interworking between software defined network and legacy network
WO2016148002A1 (en) Control device, information processing device, method for presenting virtual network, and program
WO2019140486A1 (en) Provisioning network ports and virtual links
JP5580766B2 (en) Server apparatus, packet transmission system, packet transmission method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170830

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180712

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180724

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190115

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190121

R150 Certificate of patent or registration of utility model

Ref document number: 6471066

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150