JP2014060567A - ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラム - Google Patents

ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラム Download PDF

Info

Publication number
JP2014060567A
JP2014060567A JP2012203951A JP2012203951A JP2014060567A JP 2014060567 A JP2014060567 A JP 2014060567A JP 2012203951 A JP2012203951 A JP 2012203951A JP 2012203951 A JP2012203951 A JP 2012203951A JP 2014060567 A JP2014060567 A JP 2014060567A
Authority
JP
Japan
Prior art keywords
information
switch
node
distribution
group
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2012203951A
Other languages
English (en)
Other versions
JP6044218B2 (ja
Inventor
Eiji Nishiyama
英司 西山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2012203951A priority Critical patent/JP6044218B2/ja
Publication of JP2014060567A publication Critical patent/JP2014060567A/ja
Application granted granted Critical
Publication of JP6044218B2 publication Critical patent/JP6044218B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

【課題】マルチシャーシを構成する複数のスイッチで負荷分散を可能にしつつ、制御インタフェースにおける輻輳を回避するネットワークスイッチ、及びそのネットワークスイッチを制御するネットワークスイッチ制御プログラムとネットワークスイッチ制御方法を提供する。
【解決手段】スイッチ2000は、自身がパケットを中継している「送信元のノード10、送信先のノード20」の組み合わせにおける送信元のノード10又は送信先のノード20と通信ができなくなった場合に、上記中継を行うスイッチ2000を変更する。その際、上記組み合わせの間で送信されるパケットを新たに中継するスイッチ2000として、上記送信元のノード10及び送信先のノード20の双方と、別のスイッチ2000を介さずに通信可能であるスイッチ2000を選択する。
【選択図】図1

Description

本発明は、ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラムに関する。
ネットワークスイッチの可用性を高めるため、複数のネットワークスイッチを仮想的に1台の装置として動作させるマルチシャーシという技術がある。以下、ネットワークスイッチのことを、スイッチとも表記する。また、マルチシャーシにより、複数のスイッチで仮想的に構成された1台のスイッチを、マルチシャーシスイッチと呼ぶ。マルチシャーシスイッチを構成する各スイッチは、同じマルチシャーシスイッチを構成する他のスイッチのいずれか1つ以上と、制御インタフェースで接続されている。
マルチシャーシを構成する各スイッチは、あるノードから別のノードへ送信されるデータを中継する。ここでノードとは、ネットワークに対して論理的に1つの通信回線で接続されている1つ以上のネットワークインタフェースの組みを指す。ネットワークインタフェースは、例えばパーソナルコンピュータ(PC)、サーバ、又はスイッチなどに備えられている。1つ以上のネットワークインタフェースを論理的に1つの通信回線でネットワークに接続する技術として、リンクアグリゲーションがある。例えば1つのノードが、2つのネットワークインタフェース1及び2で構成されているとする。また、マルチシャーシスイッチがスイッチ1及び2で構成されているとする。そして、ネットワークインタフェース1はスイッチ1に、ネットワークインタフェース2はスイッチ2にそれぞれ接続されているとする。この場合、スイッチ1とネットワークインタフェース1の間、又はスイッチ2とネットワークインタフェース2の間のいずれかでデータを送受信することで、マルチシャーシスイッチとノードはデータの送受信を行うことができる。以下、ノードが送信又は受信するデータをパケットと呼ぶ。
マルチシャーシスイッチを構成する従来のスイッチは、あるノードと通信ができなくなった場合にそのノードを宛先とするパケットを受信すると、自身と共にマルチシャーシを構成している他のスイッチのうち、そのノードと通信可能なスイッチへパケットを転送する。このパケットの転送は、2つのスイッチ間を接続する制御インタフェースを介して行われる。転送されたパケットを受信したスイッチは、そのパケットを宛先のノードへ送信する。このように、マルチシャーシを構成する従来のスイッチは、ノードとの間で直接パケットを送受信できなくなった場合に、制御インタフェースを経由して他のスイッチを利用することで、パケットを送受信する。
しかし、制御インタフェースを経由してパケットを送受信する場合、制御インタフェースの帯域を越えたパケットデータを転送すると、制御インタフェースで輻輳が発生する。その結果、マルチシャーシスイッチ内でパケット廃棄が発生し、パケットデータが転送されない可能性がある。
特許文献1記載のパケット中継装置は、マルチシャーシを構成するパケット中継装置である。そして、特許文献1記載のパケット中継装置は、マルチシャーシを構成する複数のパケット中継装置間を接続するスタックポート(上述の制御インタフェースに相当)の輻輳を回避する。パケットの送受信を行うパケット中継装置(上述のノードに相当)は、マルチシャーシを構成する各パケット中継装置と、通信回線を介して接続されている。そして、上記マルチシャーシを介して、パケットの送受信を行う別のパケット中継装置との間で、パケットの送受信を行う。特許文献1記載のパケット中継装置は、パケットの送受信を行うパケット中継装置間の通信量を監視する。そして、特許文献1記載のパケット中継装置は、スタックポートにおける通信量が少なくなるように、パケットを送受信する各パケット中継装置について、マルチシャーシを構成する複数のパケット中継装置の中から、パケットを経由させるパケット中継装置を1つに定める。
特許文献2記載の通信中継システムは、仮想的な通信装置として認識される制御部を複数有する通信装置同士を接続して構成される。上記通信装置は、ある通信装置内の制御部の1つで障害が発生した場合に、その通信装置が有する別の制御部を迂回路として設定することで、データの中継を継続することができる。
特開2012−129759 特開2011−199799
本発明者は、制御インタフェースにおける輻輳を回避する際に、マルチシャーシスイッチを構成する複数のスイッチでパケットの送受信にかかる通信負荷を分散可能にする必要性を見出した。特許文献1の技術において、上述のノードに当たるパケット中継装置は、マルチシャーシを構成する複数のパケット中継装置のうちのいずれか1つのみを経由して全てのパケットの送信又は受信を行う。そのため、1つのパケット中継装置に負荷が集中してしまい、その通信回線上でパケットデータが破棄される可能性がある。
本発明の目的は、マルチシャーシを構成する複数のスイッチで負荷分散を可能にしつつ、制御インタフェースにおける輻輳を回避するネットワークスイッチ、及びそのネットワークスイッチを制御するネットワークスイッチ制御プログラムとネットワークスイッチ制御方法を提供することである。
本発明が提供する第1のネットワークスイッチは、通信可能に接続されている複数のノードとの間でパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチである。当該ネットワークスイッチは、当該ネットワークスイッチがパケットの中継を行う「パケット送信元のノード、パケット送信先のノード」の組み合わせを示す振り分け情報を格納する振り分け情報格納手段と、当該ネットワークスイッチと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得手段と、前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得手段を有する。さらに、当該ネットワークスイッチは、前記振り分け情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせの中に、パケット送信元のノード又はパケット送信先のノードのいずれかが前記障害情報で特定されるノードに該当する組み合わせがある場合は、前記該当する組み合わせが示すパケット送信元のノードから、前記該当する組み合わせが示すパケット送信先のノードへ送信されるパケットを、当該ネットワークスイッチが中継しないことを示すように前記振り分け情報を更新し、前記スイッチ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、前記該当する組み合わせが示すパケット送信元のノード及びパケット送信先のノードの双方と通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、前記該当する組み合わせと共に示す振り分け更新情報を生成する振り分け更新情報生成手段を有する。さらに、当該ネットワークスイッチは、前記振り分け更新情報が示すネットワークスイッチに対し、前記振り分け更新情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせを送信する振り分け更新情報送信手段と、前記他のネットワークスイッチから、「パケット送信元のノード、パケット送信先のノード」を受信する振り分け更新情報受信手段と、前記振り分け更新情報受信手段から「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードに対し、取得した組み合わせが示すパケット送信先のノードへパケットを送信する場合は、当該ネットワークスイッチへパケットを送信するように指示するスイッチ指定手段と、前記振り分け更新情報受信手段から「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードから、取得した組み合わせが示すパケット送信先のノードへ送信されるパケットを当該ネットワークスイッチが中継することを示すように前記振り分け情報を更新する振り分け情報更新手段を有する。
本発明が提供する第1のネットワークスイッチ制御プログラムは、上記本発明が提供する第1のネットワークスイッチの各機能構成部を実現するプログラムである。
本発明が提供する第1のネットワークスイッチ制御方法は、コンピュータを、通信可能に接続されている複数のノードとの間でパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチとして動作させるネットワークスイッチ制御方法である。当該制御方法は、前記コンピュータが、前記コンピュータによってパケットの中継を行う「パケット送信元のノード、パケット送信先のノード」の組み合わせを示す振り分け情報を格納する振り分け情報格納ステップと、前記コンピュータが、前記コンピュータと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得ステップと、前記コンピュータが、前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得ステップを有する。さらに、当該制御方法は、前記振り分け情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせの中に、パケット送信元のノード又はパケット送信先のノードのいずれかが前記障害情報で特定されるノードに該当する組み合わせがある場合は、前記コンピュータが、前記該当する組み合わせが示すパケット送信元のノードから、前記該当する組み合わせが示すパケット送信先のノードへ送信されるパケットを、前記コンピュータが中継しないことを示すように前記振り分け情報を更新し、前記コンピュータが、前記スイッチ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、前記該当する組み合わせが示すパケット送信元のノード及びパケット送信先のノードの双方と通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、前記該当する組み合わせと共に示す振り分け更新情報を生成する振り分け更新情報生成ステップを有する。さらに、当該制御方法は、前記コンピュータが、前記振り分け更新情報が示すネットワークスイッチに対し、前記振り分け更新情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせを送信する振り分け更新情報送信ステップと、前記コンピュータが、前記他のネットワークスイッチから、「パケット送信元のノード、パケット送信先のノード」を受信する振り分け更新情報受信ステップと、前記コンピュータが、前記振り分け更新情報受信で受信した「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードに対し、取得した組み合わせが示すパケット送信先のノードへパケットを送信する場合は、前記コンピュータへパケットを送信するように指示するスイッチ指定ステップと、前記コンピュータが、前記振り分け更新情報受信ステップで受信した「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードから、取得した組み合わせが示すパケット送信先のノードへ送信されるパケットを前記コンピュータが中継することを示すように前記振り分け情報を更新する振り分け情報更新ステップを有する。
本発明が提供する第2のネットワークスイッチは、通信可能に接続されている複数のノードとの間で、前記ノードが所属するグループの識別子であるグループIDが付与されたパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチである。当該ネットワークスイッチは、当該ネットワークスイッチが、どの前記グループIDが付与されているパケットの中継を行うかを示す振り分け情報を格納する振り分け情報格納手段と、「前記グループID、該グループに所属している前記ノード」の組み合わせを示すグループ情報を取得するグループ情報取得手段と、当該ネットワークスイッチと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得手段と、前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得手段と、前記障害情報で特定される前記ノードに関して前記グループ情報を参照し、該ノードが所属するグループのグループIDを抽出し、抽出したグループIDが前記振り分け情報に示されている場合は、該抽出したグループIDが付与されたパケットを、当該ネットワークスイッチが中継しないことを示すように前記振り分け情報を更新し、前記スイッチ情報及び前記グループ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、該抽出したグループIDで特定されるグループに所属している全ての前記ノードと通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、該抽出したグループIDと共に示す振り分け更新情報を生成する振り分け更新情報生成手段と、前記振り分け更新情報が示すネットワークスイッチに対し、該振り分け更新情報が示す前記グループIDを送信する振り分け更新情報送信手段と、前記他のネットワークスイッチから前記振り分け更新情報を受信する振り分け更新情報受信手段と、前記振り分け更新情報受信手段から前記グループIDを取得し、該グループIDで特定される前記グループに所属しているノードに対し、該グループIDが付与されたパケットを送信する場合は、当該ネットワークスイッチへ送信するように指示するスイッチ指定手段と、前記振り分け更新情報受信手段から前記グループIDを取得し、取得したグループIDが付与されたパケットを、当該ネットワークスイッチが中継することを示すように、前記振り分け情報を更新する振り分け情報更新手段を有する。
本発明が提供する第2のネットワークスイッチ制御プログラムは、上記本発明が提供する第2のネットワークスイッチの各機能構成部を実現するプログラムである。
本発明が提供する第2のネットワークスイッチ制御方法は、コンピュータを、通信可能に接続されている複数のノードとの間で、前記ノードが所属するグループの識別子であるグループIDが付与されたパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチとして動作させるネットワークスイッチ制御方法である。当該制御方法は、前記コンピュータが、前記コンピュータによってどの前記グループIDが付与されているパケットの中継を行うかを示す振り分け情報を格納する振り分け情報格納ステップと、「前記グループID、該グループに所属している前記ノード」の組み合わせを示すグループ情報を取得するグループ情報取得ステップと、前記コンピュータが、前記コンピュータと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得ステップと、前記コンピュータが、前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得ステップと、前記障害情報で特定される前記ノードに関して前記グループ情報を参照し、該ノードが所属するグループのグループIDを抽出し、抽出したグループIDが前記振り分け情報に示されている場合は、前記コンピュータが、該抽出したグループIDが付与されたパケットを、前記コンピュータが中継しないことを示すように前記振り分け情報を更新し、前記コンピュータが、前記スイッチ情報及び前記グループ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、該抽出したグループIDで特定されるグループに所属している全ての前記ノードと通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、該抽出したグループIDと共に示す振り分け更新情報を生成する振り分け更新情報生成ステップと、前記コンピュータが、前記振り分け更新情報が示すネットワークスイッチに対し、該振り分け更新情報が示す前記グループIDを送信する振り分け更新情報送信ステップと、前記コンピュータが、前記他のネットワークスイッチから前記振り分け更新情報を受信する振り分け更新情報受信ステップと、前記コンピュータが、前記振り分け更新情報受信ステップで受信した前記グループIDを取得し、該グループIDで特定される前記グループに所属しているノードに対し、該グループIDが付与されたパケットを送信する場合は、前記コンピュータへ送信するように指示するスイッチ指定ステップと、前記コンピュータが、前記振り分け更新情報受信ステップで受信した前記グループIDを取得し、取得したグループIDが付与されたパケットを、前記コンピュータが中継することを示すように、前記振り分け情報を更新する振り分け情報更新ステップを有する。
本発明によれば、マルチシャーシを構成する複数のスイッチで負荷分散を可能にしつつ、制御インタフェースにおける輻輳を回避するネットワークスイッチ、及びそのネットワークスイッチを制御するネットワークスイッチ制御プログラムとネットワークスイッチ制御方法を提供することができる。
実施形態1に係るスイッチを、その使用環境と共に示すブロック図である。 振り分け情報テーブルの構成を示す図である。 スイッチ情報テーブルの構成を示す図である。 実施形態1に係る振り分け更新情報の構成を示す図である。 実施形態1に係るスイッチの動作の流れの一例を示すフローチャートである。 実施形態2に係るスイッチを、その使用環境と共に示すブロック図である。 振り分け情報リストの構成を示す図である。 実施形態2に係る振り分け更新情報の構成を示す図である。 グループ情報テーブルの構成を示す図である。 実施形態2に係るスイッチの動作の流れの一例を示すフローチャートである。
以下、本発明の実施の形態について、図面を用いて説明する。尚、すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。
なお、以下に示す説明において、各装置の各構成要素は、ハードウエア単位の構成ではなく、機能単位のブロックを示している。各装置の各構成要素は、任意のコンピュータのCPU、メモリ、メモリにロードされた本図の構成要素を実現するプログラム、そのプログラムを格納するハードディスクなどの記憶メディア、ネットワーク接続用インタフェースを中心に、ハードウエア、ソフトウエア、又はハードウエア及びソフトウエアの組合せによって実現される。そして、その実現方法、装置には様々な変形例がある。
[実施形態1]
<概要>
図1は、本実施形態に係るスイッチ2000を、その使用環境と共に示す図である。図1において、矢印は情報の流れを表している。
スイッチ2000は、通信回線を介して接続されている他のスイッチ2000と共に、1つの仮想的なスイッチである仮想スイッチ3000として機能する。ここで、仮想スイッチ3000を構成するスイッチ2000同士を接続する通信回線を、制御インタフェース2300と呼ぶ。仮想スイッチ3000を構成する各スイッチ2000は、パケットの送信又は受信を行う複数のノードと、通信回線を介して接続されている。ここで、パケットを送信するノードを送信元のノード10、送信元のノード10が送信したパケットの宛先であるノードを送信先のノード20と呼ぶ。スイッチ2000は、送信元のノード10からパケットを受信し、送信先のノード20へパケットを送信する中継装置として機能する。
スイッチ2000は、振り分け情報格納部2020を有する。振り分け情報格納部2020は、振り分け情報を格納する。振り分け情報とは、スイッチ2000がパケットを中継する「パケット送信元のノード10、パケット送信先のノード20」の各組み合わせを示す情報である。例えば、振り分け情報が「ノード1、ノード2」という組み合わせを示しているとする。この場合、スイッチ2000は、ノード2を宛先とするパケットをノード1から受信し、ノード2へ送信する。
スイッチ2000は、障害情報取得部2040を有する。障害情報取得部2040は、障害情報を取得する。障害情報は、スイッチ2000と通信回線を介して接続されているノードのうち、スイッチ2000と通信ができなくなったノードを特定する情報である。以下、障害情報で特定されるノードを、障害ノードと呼ぶ。
スイッチ2000は、スイッチ情報取得部2060を有する。スイッチ情報取得部2060は、スイッチ情報を取得する。スイッチ情報は、スイッチ2000と共に仮想スイッチ3000を構成するスイッチ2000それぞれについて、別のスイッチ2000を介さずに通信可能であるノードを示す情報である。
スイッチ2000は、振り分け更新情報生成部2080を有する。振り分け更新情報生成部2080は、振り分け更新情報を生成する。振り分け更新情報とは、振り分け情報が示す「送信元のノード10、送信先のノード20」の組み合わせについて、パケットを中継するスイッチ2000を変更するための情報である。振り分け更新情報生成部2080は、障害情報取得部2040から障害情報を取得する。そして、振り分け更新情報生成部2080は、障害ノードが、振り分け情報格納部2020に格納されている振り分け情報が示すパケット送信元のノード10又はパケット送信先のノード10に該当するか否かを判定する。
障害ノードが、振り分け情報が示すノードに該当する場合、振り分け更新情報生成部2080は、次のように動作して振り分け更新情報を生成する。振り分け更新情報生成部2080は、振り分け情報格納部2020に格納されている振り分け情報から、送信元のノード10又は送信先のノード20が障害ノードに該当する「送信元のノード10、送信先のノード20」の組み合わせを抽出する。振り分け更新情報生成部2080は、抽出した組み合わせについて当該スイッチ2000がパケットを中継しないことを示すように、抽出した組み合わせに関する振り分け情報を更新する。振り分け更新情報生成部2080は、スイッチ情報取得部2060からスイッチ情報を取得する。振り分け更新情報生成部2080は、スイッチ情報に基づき、仮想スイッチ3000を構成する他のスイッチ2000の中から、抽出した組み合わせが示す送信元のノード10及び送信先のノード20の双方と、別のスイッチ2000を介さずに通信可能であるスイッチ2000を選択する。そして、振り分け更新情報生成部2080は、「送信元のノード10、送信先のノード20、選択したスイッチ2000」の組み合わせを示す振り分け更新情報を生成する。
抽出した「送信元のノード10、送信先のノード20」の組み合わせが複数ある場合は、組み合わせごとに振り分け更新情報を生成する。つまり、障害ノードが送信元のノード10又は送信先のノード20に該当する「送信元のノード10、送信先のノード20」の組み合わせごとに、送信元のノード10から送信先のノード20へ送信されるパケットを中継させるスイッチ2000を新たに選択する。
スイッチ2000は、振り分け更新情報送信部2120を有する。振り分け更新情報送信部2120は、振り分け更新情報が示すスイッチ2000へ、その振り分け更新情報が示す「送信元のノード10、送信先のノード20」の組み合わせを送信する。
スイッチ2000は、振り分け更新情報受信部2130を有する。振り分け更新情報受信部2130は、他のスイッチ2000の振り分け更新情報送信部2120から、「送信元のノード10、送信先のノード20」の組み合わせを取得する。
スイッチ2000は、振り分け情報更新部2140を有する。振り分け情報更新部2140は、振り分け更新情報受信部2130が受信した「送信元のノード10、送信先のノード20」の組み合わせを取得する。そして、振り分け情報更新部2140は、当該スイッチ2000が、取得した組み合わせの間で送信されるパケットの中継を行うことを示すように、振り分け情報を更新する。
スイッチ2000は、スイッチ指定部2100を有する。スイッチ指定部2100は、振り分け更新情報受信部2130が受信した「送信元のノード10、送信先のノード20」の組み合わせを取得する。そして、スイッチ指定部2100は、取得した組み合わせが示す送信元のノード10に対し、取得した組み合わせが示す送信先のノード20を宛先とするパケットを、当該スイッチ2000に対して送信するように指示する。
以上のように、本実施形態のスイッチ2000は、自身がパケットを中継している「送信元のノード10、送信先のノード20」の組み合わせにおける送信元のノード10又は送信先のノード20と通信ができなくなった場合に、上記組み合わせの間で送信されるパケットを中継するスイッチ2000を変更する動作を行う。その際、新たに中継を行うスイッチ2000として、上記送信元のノード10及び送信先のノード20の双方と、別のスイッチ2000を介さずに通信可能であるスイッチ2000を選択する。こうすることで、スイッチ2000とスイッチ2000間でパケットの転送が行われないようにする。その結果、スイッチ2000とスイッチ2000の間を接続する制御インタフェース2300で輻輳が発生することを防ぐことができる。
また、本実施形態のスイッチ2000は、「送信元のノード10、送信先のノード20」の組み合わせごとに、パケットを中継するスイッチ2000を決定する。したがって、スイッチ2000は、仮想スイッチ3000を構成する複数のスイッチ2000で、通信負荷を分散させることが可能である。
以下、本実施形態の詳細を述べる。
<構成詳細>
スイッチ2000は、ノードとの間でパケットの送受信を行うパケット送受信部2200を有する。ここで、スイッチにおいて、受信した各パケットをどのノードへ送信するかを判断する方法は、既知の技術であるため、説明を省略する。
<振り分け情報格納部2020の詳細>
振り分け情報格納部2020が有する振り分け情報は、例えば図2に示す振り分けテーブル200を有する。振り分けテーブル200は例えば、送信元ノードID202及び送信先ノードID204を有する。送信元ノードID202、送信先ノードID204はそれぞれ、送信元のノード10、送信先のノード20を特定する識別子である。振り分けテーブル200の各レコードは、送信元ノードID202で特定される送信元のノード10から、送信先ノードID204で特定される送信先のノード20を宛先として送信されるパケットを、上記振り分け情報を有するスイッチ2000が中継することを示す。
振り分け情報は、全ての「送信元のノード10、送信先のノード20」の組み合わせについて、その組み合わせの間で送信されるパケットを中継するスイッチ2000を示す情報であってもよい。
送信元ノードID202及び送信先ノードID204がノードを特定するために示す識別子は様々である。その識別子は例えば、ノードのMACアドレスである。その他にも例えば、上記識別子は、ノードのUUID(Universal Unique Identifier)などでもよい。
<障害情報取得部2040の詳細>
障害情報取得部2040が障害情報を取得する方法は様々である。例えば、スイッチ2000は、自身と接続されている各ノードとの通信可否を検知する障害検知部を有していてもよい。この場合、障害情報取得部2040は、上記障害検知部が生成した障害情報を取得する。一般に、ネットワークスイッチは、ポートごとに、そのポートに接続されているノードと通信できるか否かを検知する機能を有する。上記障害検知部は、あるポートに接続されているノードと通信できない場合に、そのポートに接続されているノードを示す障害情報を生成する。その他にも例えば、障害情報取得部2040は、スイッチ2000の状態や、スイッチ2000とノードの間の通信回線の状態を監視する外部装置から障害情報を取得してもよい。
<スイッチ情報取得部2060の詳細>
スイッチ情報取得部2060が取得するスイッチ情報は、例えば図3に示すスイッチ情報テーブル300で示される。スイッチ情報テーブル300は、例えばスイッチの識別子であるスイッチID302、及びノードの識別子であるノードID304を有する。スイッチ情報テーブル300の各レコードは、スイッチID302で特定されるスイッチ2000が、ノードID304で特定されるノードと通信可能であることを示す。
スイッチID302が示すスイッチの識別子は、例えば、仮想スイッチ3000を構成する各スイッチ2000を識別するために、各スイッチ2000に付与されたIDである。一般にマルチシャーシ機能を有するスイッチは、協調してマルチシャーシを構成する各スイッチを管理する機能を有する。上記管理機能は、マルチシャーシを構成する各スイッチを識別するために、各スイッチにIDを付与する場合がある。スイッチID302は、このようにマルチシャーシを管理する機能によって付与されたIDである。その他にも例えば、スイッチID302は、スイッチ2000のUUIDでもよい。
スイッチ情報は、スイッチ2000と、スイッチ2000と通信回線で接続されている各ノードとの組み合わせそれぞれについて、スイッチ2000とノードが通信可能か否かを示す情報であってもよい。以降の説明では、スイッチ情報は、スイッチ情報テーブル300で示されるとする。
<振り分け更新情報生成部2080の詳細>
振り分け更新情報生成部2080は、振り分け情報の中から、送信元のノード10又は送信先のノード20のいずれかが障害ノードに該当する「送信元のノード10、送信先のノード20」の組み合わせを抽出する。そして、振り分け更新情報生成部2080は、当該スイッチ2000が、抽出した組み合わせについてパケットの中継を行わないことを示すように、振り分け情報を更新する。例えば、振り分け情報が、振り分け情報テーブル200のように、当該スイッチ2000がパケットの中継を行う「送信元のノード10、送信先のノード20」の組み合わせを示しているとする。この場合、振り分け更新情報生成部2080は、抽出した「送信元のノード10、送信先のノード20」の組み合わせを、振り分け情報から削除する。
振り分け情報が、「送信元のノード10、送信先のノード20」の全ての組み合わせそれぞれについて、パケットの中継を行うスイッチ2000を対応付けているとする。この場合、振り分け更新情報生成部2080は、抽出した「送信元のノード10、送信先のノード20」に対応付けられているスイッチ2000が無いことを示すように、振り分け情報を更新する。例えば、振り分け更新情報生成部2080は、抽出した「送信元のノード10、送信先のノード20」に対応付けられているスイッチ2000を示すIDとして、空文字などを設定する。
振り分け更新情報生成部2080が生成する振り分け更新情報は、例えば図4に示す振り分け更新情報400で示される。振り分け更新情報400は、例えば送信元のノード10のIDを示す送信元ノードID402、送信先のノード20のIDを示す送信先ノードID404、及びスイッチのIDを示すスイッチID406を有する。振り分け更新情報は、送信元ノードID402で特定される送信元のノード10から送信先ノードID404で特定される送信先のノード20を宛先として送信されるパケットを中継するスイッチ2000を、スイッチID406で特定するスイッチ2000に変更することを示す。
送信元ノードID402及び送信先ノードID404がノードを特定するために示す識別子は、振り分けテーブル200における送信元ノードID202及び送信先ノードID204と同様である。また、スイッチID406が示すスイッチの識別子は、スイッチ情報テーブル300におけるスイッチID302と同様である。
<振り分け更新情報送信部2120及び振り分け更新情報受信部2130の詳細>
振り分け更新情報送信部2120は、制御インタフェース2300を介し、振り分け更新情報が示すスイッチ2000の振り分け更新情報受信部2130へ、振り分け更新情報が示す「送信元のノード10、送信先のノード20」の組み合わせを送信する。振り分け更新情報受信部2130は、制御インタフェース2300を介して、別のスイッチ2000の振り分け更新情報送信部2120から、「送信元のノード10、送信先のノード20」の組み合わせを受信する。ここで、振り分け更新情報送信部2120は、振り分け更新情報受信部2130に対して、振り分け更新情報を送信してもよい。
<振り分け情報更新部2140の詳細>
振り分け情報更新部2140は、振り分け更新情報受信部2130から、「送信元のノード10、送信先のノード20」の組み合わせを取得する。そして、振り分け情報更新部2140は、当該スイッチ2000が、取得した組み合わせの間で送信されるパケットの中継を行うことを示すように、振り分け情報を更新する。例えば、振り分け情報が、振り分け情報テーブル200のように、当該スイッチ2000がパケットの中継を行う「送信元のノード10、送信先のノード20」の組み合わせを示しているとする。この場合、振り分け情報更新部2140は、取得した「送信元のノード10、送信先のノード20」の組み合わせを、振り分け情報に登録する。
振り分け情報が、「送信元のノード10、送信先のノード20」の全ての組み合わせそれぞれについて、パケットの中継を行うスイッチ2000を対応付けているとする。この場合、振り分け更新情報生成部2140は、取得した「送信元のノード10、送信先のノード20」に当該スイッチ2000を対応付けるように、振り分け情報を更新する。
<動作の流れ>
図5は、スイッチ2000が、あるノードと通信できなくなった際に振り分け情報を更新する処理の流れの一例を示すフローチャートである。
ステップS102において、障害情報取得部2040は、障害情報を取得する。
ステップS104において、振り分け更新情報生成部2080は、上記障害情報で特定される障害ノードのIDをキーとして、振り分け情報格納部2020に格納されている振り分け情報テーブル200を検索する。具体的には、振り分け情報テーブル200から、送信元ノードID202又は送信先ノードID204が障害ノードのIDを示すレコードを検索する。
ステップS106において、振り分け更新情報生成部2080は、ステップS104の検索の結果を判定する。該当するレコードがある場合は、ステップS108に進む。該当するレコードがない場合は、図5のフローチャートで示す処理を終了する。
ステップS108において、スイッチ情報取得部2060は、スイッチ情報を取得する。
ステップS110〜ステップS120は、ステップS104において振り分け情報テーブル200を検索して取得した各レコードについて行うループ処理である。ステップS110において、検索結果の全てのレコードについて処理を行ったかを判定する。まだ処理を行っていないレコードがある場合は、その中の1つを選択する。選択したレコードをレコードiとする。そして、ステップS112に進む。全てのレコードについて処理を終えている場合は、図5のフローチャートに示す処理を終了する。
ステップS112において、振り分け更新情報生成部2080は、振り分け情報格納部2020に格納されている振り分け情報テーブル200から、レコードiを削除する。
ステップS114において、振り分け更新情報生成部2080は、スイッチ情報取得部2060が取得したスイッチ情報に基づいて、レコードiに示されている「送信元のノード10、送信先のノード20」の組み合わせについて、振り分け更新情報400を生成する。
ステップS118において、振り分け更新情報送信部2120は、上記振り分け更新情報400が示す「送信元のノード10、送信先のノード20」を、上記振り分け更新情報400が示すスイッチ2000へ送信する。以下、上記振り分け更新情報400が示すスイッチ2000を、変更先スイッチ2000と表記する。
変更先スイッチ2000が有する振り分け更新情報受信部2130は、上記振り分け更新情報400を受信する。そして、変更先スイッチ2000が有するスイッチ指定部2100は、振り分け更新情報受信部2130が受信した「送信元のノード10、送信先のノード20」の組み合わせを取得する。そして、上記スイッチ指定部2100は、取得した組み合わせが示す送信元のノード10へ、取得した組み合わせが示す送信先のノード20を宛先とするパケットを送信する場合は、変更先スイッチ2000へ送信するように指示する。
さらに、変更先スイッチ2000が有する振り分け情報更新部2140は、振り分け更新情報受信部2130が受信した振り分け更新情報400が示す「送信元のノード10、送信先のノード20」の組み合わせを、変更先スイッチ2000が有する振り分け情報格納部2020に格納されている振り分け情報テーブル200へ登録する。
ステップS120は、ステップS110から始まるループ処理の終端である。したがって、ステップS110に戻る。
スイッチ2000が、通信ができなくなったノードとの間でパケットをやりとりするスイッチ2000を変更する処理の流れは、上記に限定されない。例えば振り分け更新情報送信部2120は、ステップS118で行う「送信元のノード10、送信先のノード20」の組み合わせの送信を、全てのレコードiについて振り分け更新情報400を生成した後で行ってもよい。この場合、例えば振り分け更新情報送信部2120は、同じスイッチ2000へ送信する「送信元のノード10、送信先のノード20」の組み合わせを、そのスイッチ2000に対してまとめて送信する。これにより、スイッチ2000の間を接続する制御用ポートにかかる通信負荷を低減することができる。
<作用・効果>
以上の構成により、本実施形態によれば、スイッチ2000は、自身がパケットを中継している「送信元のノード10、送信先のノード20」の組み合わせにおける送信元のノード10又は送信先のノード20と通信ができなくなった場合に、上記中継を行うスイッチ2000を変更する。その際、新たに中継を行うスイッチ2000として、上記送信元のノード10及び送信先のノード20の双方と、別のスイッチ2000を介さずに通信可能であるスイッチ2000を選択する。こうすることで、送信元のノード10から送信先のノード20へパケットを送信する際に、スイッチ2000から別のスイッチ2000へパケットを転送しないようにする。その結果、スイッチ2000とスイッチ2000を接続する制御インタフェース2300で輻輳が発生することを防ぐことができる。
また、本実施形態のスイッチ2000は、「送信元のノード10、送信先のノード20」の組み合わせごとに、パケットを中継するスイッチ2000を決定する。したがって、スイッチ2000は、仮想スイッチ3000を構成する他のスイッチ2000との間で、パケットの送受信にかかる通信負荷を分散させることが可能である。
[実施形態2]
<概要>
図6は、実施形態2に係るスイッチ4000を、その使用環境と共に示すブロック図である。ここで、図6における矢印は、情報の流れを示している。
スイッチ4000は、通信回線を介して接続されている他のスイッチ4000と共に、1つの仮想的なスイッチである仮想スイッチ5000として機能する。ここで、仮想スイッチ5000を構成するスイッチ4000同士を接続する通信回線を、制御インタフェース4300と呼ぶ。仮想スイッチ5000を構成する各スイッチ4000は、パケットの送信又は受信を行う複数のノード30と、通信回線を介して接続されている。スイッチ4000は、ノード30からパケットを受信し、別のノード30へパケットを送信する中継装置として機能する。
ノード30は、1つ以上のノード30のまとまりであるグループに所属する。各グループに所属するノード30は、自身が所属するグループの識別子であるグループIDが付与されたパケットを送信、又は受信する。ノード30は、複数のグループに所属していてもよい。
スイッチ4000は、振り分け情報格納部4020を有する。振り分け情報格納部4020は、振り分け情報を格納する。本実施形態における振り分け情報は、当該スイッチ4000が、どのグループIDが付与されたパケットを中継するかを示す情報である。
スイッチ4000は、グループ情報取得部4160を有する。グループ情報取得部4160は、グループ情報を取得する。グループ情報は、グループごとに、そのグループに所属するノード30を示す情報である。
スイッチ4000は、障害情報取得部4040を有する。障害情報取得部4040は、障害情報を取得する。障害情報は、スイッチ4000と通信回線を介して接続されているノード30のうち、スイッチ4000と通信ができなくなったノード30を特定する情報である。以下、実施形態1の場合と同様に、障害情報で特定されるノードを障害ノードと呼ぶ。
スイッチ4000は、スイッチ情報取得部4060を有する。スイッチ情報取得部4060は、スイッチ情報を取得する。スイッチ情報は、スイッチ4000と共に仮想スイッチ5000を構成する他のスイッチ4000それぞれについて、通信可能であるノード30を示す情報である。
スイッチ4000は、振り分け更新情報生成部4080を有する。振り分け更新情報生成部4080は、振り分け更新情報を生成する。本実施形態における振り分け更新情報は、振り分け情報が示すグループについて、そのグループIDが付与されたパケットの中継を行うスイッチ4000を変更するための情報である。振り分け更新情報生成部4080は、障害情報取得部4040が取得する障害情報、振り分け情報格納部4020に格納されている振り分け情報、及びグループ情報取得部4160が取得するグループ情報を参照し、障害ノードが、上記振り分け情報で示されているグループに所属しているか否かを判定する。
障害ノードが、上記振り分け情報で示されているグループに所属している場合、振り分け更新情報生成部4080は、次のように動作して振り分け更新情報を生成する。まず、振り分け更新情報生成部4080は、上記振り分け情報の中から、障害ノードが所属しているグループのグループIDを抽出する。そして、振り分け更新情報生成部4080は、当該スイッチ4000が、抽出したグループIDが付与されたパケットを中継しないことを示すように、抽出したグループIDに関する振り分け情報を更新する。振り分け更新情報生成部4080は、スイッチ情報取得部4060からスイッチ情報を取得する。振り分け更新情報生成部4080は、スイッチ情報に基づき、仮想スイッチ5000を構成する他のスイッチ4000の中から、抽出したグループIDで特定されるグループに所属している全てのノード30と、別のスイッチ4000を介さずに通信可能であるスイッチ4000を選択する。そして、振り分け更新情報生成部4080は、「抽出したグループID、選択したスイッチ4000」の組み合わせを示す振り分け更新情報を生成する。
障害ノードが複数のグループに所属している場合は、そのグループごとに、振り分け更新情報を生成する。つまり、障害ノードが所属しているグループごとに、そのグループのグループIDが付与されたパケットを中継するスイッチ4000を新たに選択する。
スイッチ4000は、振り分け更新情報送信部4120を有する。振り分け更新情報送信部4120は、振り分け更新情報が示すスイッチ4000へ、その振り分け更新情報が示すグループIDを送信する。
スイッチ4000は、振り分け更新情報受信部4130を有する。振り分け更新情報受信部4130は、別のスイッチ4000が送信したグループIDを取得する。
スイッチ4000は、振り分け情報更新部4140を有する。振り分け更新情報受信部4130が受信したグループIDを取得する。そして、当該スイッチ4000が、取得したグループIDが付与されたパケットを中継するように、振り分け情報を更新する。
スイッチ4000は、スイッチ指定部4100を有する。スイッチ指定部4100は、振り分け更新情報受信部4130が受信したグループIDを取得する。そして、取得したグループIDで特定されるグループに所属しているノード30に対し、取得したグループIDが付与されたパケットを、当該スイッチ4000へ送信するように指示する。
以上のように、本実施形態のスイッチ4000は、自身との間でパケットをやりとりしているノード30と通信ができなくなった場合に、上記ノード30が所属するグループのグループIDが付与されたパケットを中継するスイッチ4000を変更する。その際、新たに中継を行うスイッチ4000として、上記ノード30が所属するグループに所属している全てのノード30と、別のスイッチ4000を介さずに通信可能であるスイッチ4000を選択する。こうすることで、スイッチ4000とスイッチ4000との間で、上記グループIDが付与されたパケットの転送が行われないようにする。その結果、スイッチ4000とスイッチ4000を接続する制御インタフェース4300で輻輳が発生することを防ぐことができる。
また、本実施形態のスイッチ4000は、パケットを中継するスイッチ4000をグループごとに決定することができる。これにより、パケットの中継にかかる通信負荷を、仮想スイッチ5000を構成する複数のスイッチ4000の間で分散することができる。
以下、本実施形態の詳細を述べる。
<構成詳細>
仮想スイッチ5000を構成する複数のスイッチ4000は、制御インタフェース4300により、互いに通信可能に接続されている。スイッチ4000の振り分け更新情報送信部4120は、制御インタフェース4300を介して、別のスイッチ4000の振り分け情報更新部4140へ振り分け更新情報を送信する。
スイッチ4000は、ノード30との間でパケットの送受信を行うパケット送受信部4200を有する。
本実施形態におけるグループは、例えばVLAN(Virtual Local Area Network)のグループである。同じグループに属するノード30は、同じVLANに属する。この場合、グループIDは、VLANのIDである。また、グループは、複数のVLANをまとめたものであってもよい。
<振り分け情報格納部4020の詳細>
振り分け情報格納部4020が有する振り分け情報は、例えば図7に示すように、振り分け情報リスト500を有する。振り分け情報リスト500は例えば、グループIDのリストである。スイッチ4000は、振り分け情報リスト500に示される各グループIDで特定されるグループに所属しているノード30との間で、そのグループのグループIDが付与されているパケットをやりとりする。
振り分け情報は、全てのグループIDそれぞれについて、各グループIDが付与されたパケットを中継するスイッチ4000を示す情報であってもよい。
<障害情報取得部4040の詳細>
障害情報取得部4040が障害情報を取得する方法は、実施形態1における障害情報取得部2040が障害情報を取得する方法と同様である。
<スイッチ情報取得部4060の詳細>
スイッチ情報取得部4060が取得するスイッチ情報は、例えば実施形態1におけるスイッチ情報と同様である(図3参照)。
<振り分け更新情報生成部4080の詳細>
振り分け更新情報生成部4080は、振り分け情報の中から、障害ノードが所属するグループのグループIDを抽出する。そして、振り分け更新情報生成部4080は、当該スイッチ2000が、抽出したグループIDが付与されたパケットの中継を行わないことを示すように、振り分け情報を更新する。例えば、振り分け情報が、振り分け情報リスト500のように、当該スイッチ4000がパケットの中継を行うグループのグループIDを示しているとする。この場合、振り分け更新情報生成部4080は、抽出したグループIDを、振り分け情報から削除する。
振り分け情報が、各グループIDについて、そのグループIDが付与されたパケットの中継を行うスイッチ4000を対応付けているとする。この場合、振り分け更新情報生成部4080は、抽出したグループIDに対応付けられているスイッチ4000が無いことを示すように、振り分け情報を更新する。例えば、振り分け更新情報生成部4080は、抽出したグループIDに対応付けられているスイッチ4000を示すIDとして、空文字などを設定する。
振り分け更新情報生成部4080が生成する振り分け更新情報は、例えば図8に示す振り分け更新情報600で表される。振り分け更新情報600は、例えばグループID602及びスイッチID604を有する。振り分け更新情報600の各レコードは、グループID602が付与されたパケットを中継するスイッチ4000を、スイッチID604で特定されるスイッチ4000に更新することを示す。
<グループ情報取得部4160の詳細>
グループ情報取得部4160が取得するグループ情報は、例えば図9に示すグループ情報テーブル700で表される。グループ情報テーブル700は、グループID702及びノードID704を有する。グループ情報テーブル700のレコードは、グループID702で特定されるグループに、ノードID704で特定されるノード30が所属していることを表す。言い換えると、ノードID704で特定されるノード30は、グループID702が示すグループIDが付与されたパケットの送信又は受信を行うことを表す。
<振り分け更新情報送信部4120及び振り分け更新情報受信部4130の詳細>
振り分け更新情報送信部4120は、制御インタフェース4300を介し、振り分け更新情報が示すスイッチ4000の振り分け更新情報受信部4130へ、振り分け更新情報が示すグループIDを送信する。振り分け更新情報受信部4130は、制御インタフェース4300を介して、別のスイッチ4000の振り分け更新情報送信部4120から、グループIDを受信する。ここで、振り分け更新情報送信部4120は、振り分け更新情報受信部4130に対して、振り分け更新情報を送信してもよい。
<振り分け情報更新部4140の詳細>
振り分け情報更新部4140は、振り分け更新情報受信部4130から、グループIDを取得する。そして、振り分け情報更新部4140は、当該スイッチ4000が、取得したグループIDが付与されたパケットの中継を行うことを示すように、振り分け情報を更新する。例えば、振り分け情報が、振り分け情報リスト500のように、当該スイッチ4000が、どのグループIDが付与されたパケットを中継するかを示しているとする。この場合、振り分け情報更新部4140は、取得したグループIDを、振り分け情報に登録する。
振り分け情報が、各グループIDについて、そのグループIDが付与されたパケットの中継を行うスイッチ4000を対応付けているとする。この場合、振り分け情報更新部4140は、取得したグループIDに当該スイッチ4000を対応付けるように、振り分け情報を更新する。
<動作の流れ>
図10は、スイッチ4000が、あるノード30との間で通信ができなくなった際に振り分け情報を更新する処理の流れの一例を示すフローチャートである。
ステップS202において、障害情報取得部4040は、障害情報を取得する。
ステップS204において、グループ情報取得部4160は、グループ情報テーブル700を取得する。
ステップS206において、振り分け更新情報生成部4080は、上記障害情報で特定される障害ノードのIDをキーとして、グループ情報取得部4160が取得したグループ情報テーブル700を検索する。具体的には、グループ情報テーブル700から、ノードID704が障害ノードのIDを示すレコードを検索する。
ステップS208〜ステップS224は、ステップS206において振り分け情報テーブル200を検索して取得した各レコードについて行うループ処理Aである。ステップS208において、検索結果の全てのレコードについて処理を行ったかを判定する。まだ処理を行っていないレコードがある場合は、その中の1つを選択する。選択したレコードをレコードiとする。そして、ステップS210に進む。全てのレコードについて処理を終えている場合は、図10のフローチャートに示す処理を終了する。なお、障害ノードがいずれのグループにも属していない場合は、ステップS206における検索でレコードが取得されない。したがって、スイッチ2000は、一度もループ処理Aを実行せずに、図10のフローチャートに示す処理を終了する。
ステップS210において、振り分け更新情報生成部4080は、レコードiが示すグループのIDをキーとして、振り分け情報リスト500を検索する。以降、レコードiが示すグループを、グループgと呼ぶ。
ステップS212において、ステップS210における検索の結果を判定する。グループgが振り分け情報リスト500に含まれている場合は、ステップS214に進む。グループgが振り分け情報リスト500に含まれていない場合は、ステップS224に進む。
ステップS214において、スイッチ情報取得部4060は、スイッチ情報を取得する。
ステップS216において、振り分け更新情報生成部4080は、振り分け情報を更新する。具体的には、振り分け更新情報生成部4080は、振り分け情報リスト500からグループgを削除する。
ステップS218において、振り分け更新情報生成部4080は、スイッチ情報取得部4060が取得したスイッチ情報に基づいて、グループgについて、振り分け更新情報600を生成する。
ステップS222において、振り分け更新情報送信部4120は、上記振り分け更新情報600が示すグループIDを、上記振り分け更新情報が示すスイッチ4000へ送信する。以下、上記振り分け更新情報が示すスイッチ4000を、変更先スイッチ4000と表記する。
変更先スイッチ4000が有する振り分け更新情報受信部4130は、上記グループIDを受信する。そして、変更先スイッチ4000が有するスイッチ指定部4100は、振り分け更新情報受信部4130が受信したグループIDを取得する。そして、上記スイッチ指定部4100は、取得したグループIDで特定されるグループに属しているノード30に対し、取得したグループIDが付与されたパケットを送信する場合は、変更先スイッチ4000へ送信するように指示する。
さらに、変更先スイッチ4000の振り分け情報更新部4140は、振り分け更新情報受信部4130がグループIDを、変更先スイッチ4000の振り分け情報格納部4020に格納されている振り分け情報リスト500へ登録する。
ステップS224は、ステップS208から始まるループ処理Aの終端である。したがって、ステップS208に戻る。
スイッチ4000が、ノード30と通信ができなくなった際に振り分け情報を更新する処理の流れは、上記に限定されない。例えば振り分け更新情報送信部4120は、ステップS222で行う振り分け更新情報600の送信を、全てのレコードiについて振り分け更新情報600を生成した後で行ってもよい。この場合、例えば振り分け更新情報送信部4120は、同じスイッチ4000を示す振り分け更新情報600を、そのスイッチ4000に対してまとめて送信する。これにより、スイッチ4000の間を接続する制御用ポートにかかる通信負荷を低減することができる。
<作用・効果>
以上の構成により、本実施形態によれば、スイッチ4000は、自身との間でパケットをやりとりしているノード30と通信ができなくなった場合に、上記ノード30が所属するグループのグループIDが付与されたパケットを中継するスイッチ4000を変更する。その際、新たに中継を行うスイッチ4000として、上記ノード30が所属するグループに所属している全てのノード30と、別のスイッチ4000を介さずに通信可能であるスイッチ4000を選択する。こうすることで、スイッチ4000とスイッチ4000との間で、上記グループIDが付与されたパケットの転送が行われないようにする。その結果、スイッチ4000とスイッチ4000を接続する制御インタフェース4300で輻輳が発生することを防ぐことができる。
また、本実施形態のスイッチ4000は、パケットを中継するスイッチ4000をグループごとに決定することができる。これにより、パケットの中継にかかる通信負荷を、仮想スイッチ5000を構成する複数のスイッチ4000の間で分散することができる。
以上、図面を参照して本発明の実施形態及び実施例について述べたが、これらは本発明の例示であり、上記以外の様々な構成を採用することもできる。
10 送信元のノード
20 送信先のノード
30 ノード
200 振り分け情報テーブル
202 送信元ノードID
204 送信先ノードID
300 スイッチ情報テーブル
302 スイッチID
304 ノードID
400 振り分け更新情報
402 送信元ノードID
404 送信先ノードID
406 スイッチID
500 振り分け情報リスト
600 振り分け更新情報
602 グループID
604 スイッチID
700 グループ情報テーブル
702 グループID
704 スイッチID
2000 スイッチ
2020 振り分け情報格納部
2040 障害情報取得部
2060 スイッチ情報取得部
2080 振り分け更新情報生成部
2100 スイッチ指定部
2120 振り分け更新情報送信部
2130 振り分け更新情報受信部
2140 振り分け情報更新部
2200 パケット送受信部
2300 制御インタフェース
3000 仮想スイッチ
4000 スイッチ
4020 振り分け情報格納部
4040 障害情報取得部
4060 スイッチ情報取得部
4080 振り分け更新情報生成部
4100 スイッチ指定部
4120 振り分け更新情報送信部
4130 振り分け更新情報受信部
4140 振り分け情報更新部
4160 グループ情報取得部
4200 パケット送受信部
4300 制御インタフェース
5000 仮想スイッチ

Claims (6)

  1. 通信可能に接続されている複数のノードとの間でパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチであって、
    当該ネットワークスイッチがパケットの中継を行う「パケット送信元のノード、パケット送信先のノード」の組み合わせを示す振り分け情報を格納する振り分け情報格納手段と、
    当該ネットワークスイッチと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得手段と、
    前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得手段と、
    前記振り分け情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせの中に、パケット送信元のノード又はパケット送信先のノードのいずれかが前記障害情報で特定されるノードに該当する組み合わせがある場合は、
    前記該当する組み合わせが示すパケット送信元のノードから、前記該当する組み合わせが示すパケット送信先のノードへ送信されるパケットを、当該ネットワークスイッチが中継しないことを示すように前記振り分け情報を更新し、
    前記スイッチ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、前記該当する組み合わせが示すパケット送信元のノード及びパケット送信先のノードの双方と通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、前記該当する組み合わせと共に示す振り分け更新情報を生成する振り分け更新情報生成手段と、
    前記振り分け更新情報が示すネットワークスイッチに対し、前記振り分け更新情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせを送信する振り分け更新情報送信手段と、
    前記他のネットワークスイッチから、「パケット送信元のノード、パケット送信先のノード」を受信する振り分け更新情報受信手段と、
    前記振り分け更新情報受信手段から「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードに対し、取得した組み合わせが示すパケット送信先のノードへパケットを送信する場合は、当該ネットワークスイッチへパケットを送信するように指示するスイッチ指定手段と、
    前記振り分け更新情報受信手段から「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードから、取得した組み合わせが示すパケット送信先のノードへ送信されるパケットを当該ネットワークスイッチが中継することを示すように前記振り分け情報を更新する振り分け情報更新手段と、
    を有するネットワークスイッチ。
  2. 通信可能に接続されている複数のノードとの間で、前記ノードが所属するグループの識別子であるグループIDが付与されたパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチであって、
    当該ネットワークスイッチが、どの前記グループIDが付与されているパケットの中継を行うかを示す振り分け情報を格納する振り分け情報格納手段と、
    「前記グループID、該グループに所属している前記ノード」の組み合わせを示すグループ情報を取得するグループ情報取得手段と、
    当該ネットワークスイッチと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得手段と、
    前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得手段と、
    前記障害情報で特定される前記ノードに関して前記グループ情報を参照し、該ノードが所属するグループのグループIDを抽出し、抽出したグループIDが前記振り分け情報に示されている場合は、
    該抽出したグループIDが付与されたパケットを、当該ネットワークスイッチが中継しないことを示すように前記振り分け情報を更新し、
    前記スイッチ情報及び前記グループ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、該抽出したグループIDで特定されるグループに所属している全ての前記ノードと通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、該抽出したグループIDと共に示す振り分け更新情報を生成する振り分け更新情報生成手段と、
    前記振り分け更新情報が示すネットワークスイッチに対し、該振り分け更新情報が示す前記グループIDを送信する振り分け更新情報送信手段と、
    前記他のネットワークスイッチから前記振り分け更新情報を受信する振り分け更新情報受信手段と、
    前記振り分け更新情報受信手段から前記グループIDを取得し、該グループIDで特定される前記グループに所属しているノードに対し、該グループIDが付与されたパケットを送信する場合は、当該ネットワークスイッチへ送信するように指示するスイッチ指定手段と、
    前記振り分け更新情報受信手段から前記グループIDを取得し、取得したグループIDが付与されたパケットを、当該ネットワークスイッチが中継することを示すように、前記振り分け情報を更新する振り分け情報更新手段と、
    を有するネットワークスイッチ。
  3. コンピュータを、通信可能に接続されている複数のノードとの間でパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして動作するネットワークスイッチとして機能させるネットワークスイッチ制御プログラムであって、
    当該プログラムは、前記コンピュータに、
    前記コンピュータがパケットの中継を行う「パケット送信元のノード、パケット送信先のノード」の組み合わせを示す振り分け情報を格納する振り分け情報格納機能と、
    前記コンピュータと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得機能と、
    前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得機能と、
    前記振り分け情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせの中に、パケット送信元のノード又はパケット送信先のノードのいずれかが前記障害情報で特定されるノードに該当する組み合わせがある場合は、
    前記該当する組み合わせが示すパケット送信元のノードから、前記該当する組み合わせが示すパケット送信先のノードへ送信されるパケットを、前記コンピュータが中継しないことを示すように前記振り分け情報を更新し、
    前記スイッチ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、前記該当する組み合わせが示すパケット送信元のノード及びパケット送信先のノードの双方と通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、前記該当する組み合わせと共に示す振り分け更新情報を生成する振り分け更新情報生成機能と、
    前記振り分け更新情報が示すネットワークスイッチに対し、前記振り分け更新情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせを送信する振り分け更新情報送信機能と、
    前記他のネットワークスイッチから、「パケット送信元のノード、パケット送信先のノード」を受信する振り分け更新情報受信機能と、
    前記振り分け更新情報受信機能が受信した「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードに対し、取得した組み合わせが示すパケット送信先のノードへパケットを送信する場合は、前記コンピュータへパケットを送信するように指示するスイッチ指定機能と、
    前記振り分け更新情報受信機能が受信した「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードから、取得した組み合わせが示すパケット送信先のノードへ送信されるパケットを前記コンピュータが中継することを示すように前記振り分け情報を更新する振り分け情報更新機能と、
    を持たせるネットワークスイッチ制御プログラム。
  4. コンピュータを、通信可能に接続されている複数のノードとの間で、前記ノードが所属するグループの識別子であるグループIDが付与されたパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして動作するネットワークスイッチとして機能させるネットワークスイッチ制御プログラムであって、
    当該プログラムは、前記コンピュータに、
    前記コンピュータが、どの前記グループIDが付与されているパケットを中継するかを示す振り分け情報を格納する振り分け情報格納機能と、
    「前記グループID、該グループに所属している前記ノード」の組み合わせを示すグループ情報を取得するグループ情報取得機能と、
    前記コンピュータと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得機能と、
    前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得機能と、
    前記障害情報で特定される前記ノードに関して前記グループ情報を参照し、該ノードが所属するグループのグループIDを抽出し、抽出したグループIDが前記振り分け情報に示されている場合は、
    該抽出したグループIDが付与されたパケットを、前記コンピュータが中継しないことを示すように前記振り分け情報を更新し、
    前記スイッチ情報及び前記グループ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、該抽出したグループIDで特定されるグループに所属している全ての前記ノードと通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、該抽出したグループIDと共に示す振り分け更新情報を生成する振り分け更新情報生成機能と、
    前記振り分け更新情報が示すネットワークスイッチに対し、該振り分け更新情報が示す前記グループIDを送信する振り分け更新情報送信機能と、
    前記他のネットワークスイッチから前記振り分け更新情報を受信する振り分け更新情報受信機能と、
    前記振り分け更新情報受信機能が受信した前記グループIDを取得し、該グループIDで特定される前記グループに所属しているノードに対し、該グループIDが付与されたパケットを送信する場合は、前記コンピュータへ送信するように指示するスイッチ指定機能と、
    前記振り分け更新情報受信機能が受信した前記グループIDを取得し、取得したグループIDが付与されたパケットを、前記コンピュータが中継することを示すように、前記振り分け情報を更新する振り分け情報更新機能と、
    を持たせるネットワークスイッチ制御プログラム。
  5. コンピュータを、通信可能に接続されている複数のノードとの間でパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチとして動作させるネットワークスイッチ制御方法であって、
    前記コンピュータが、前記コンピュータによってパケットの中継を行う「パケット送信元のノード、パケット送信先のノード」の組み合わせを示す振り分け情報を格納する振り分け情報格納ステップと、
    前記コンピュータが、前記コンピュータと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得ステップと、
    前記コンピュータが、前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得ステップと、
    前記振り分け情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせの中に、パケット送信元のノード又はパケット送信先のノードのいずれかが前記障害情報で特定されるノードに該当する組み合わせがある場合は、
    前記コンピュータが、前記該当する組み合わせが示すパケット送信元のノードから、前記該当する組み合わせが示すパケット送信先のノードへ送信されるパケットを、前記コンピュータが中継しないことを示すように前記振り分け情報を更新し、
    前記コンピュータが、前記スイッチ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、前記該当する組み合わせが示すパケット送信元のノード及びパケット送信先のノードの双方と通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、前記該当する組み合わせと共に示す振り分け更新情報を生成する振り分け更新情報生成ステップと、
    前記コンピュータが、前記振り分け更新情報が示すネットワークスイッチに対し、前記振り分け更新情報が示す「パケット送信元のノード、パケット送信先のノード」の組み合わせを送信する振り分け更新情報送信ステップと、
    前記コンピュータが、前記他のネットワークスイッチから、「パケット送信元のノード、パケット送信先のノード」を受信する振り分け更新情報受信ステップと、
    前記コンピュータが、前記振り分け更新情報受信ステップで受信した「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードに対し、取得した組み合わせが示すパケット送信先のノードへパケットを送信する場合は、前記コンピュータへパケットを送信するように指示するスイッチ指定ステップと、
    前記コンピュータが、前記振り分け更新情報受信ステップで受信した「パケット送信元のノード、パケット送信先のノード」の組み合わせを取得し、取得した組み合わせが示すパケット送信元のノードから、取得した組み合わせが示すパケット送信先のノードへ送信されるパケットを前記コンピュータが中継することを示すように前記振り分け情報を更新する振り分け情報更新ステップと、
    を有するネットワークスイッチ制御方法。
  6. コンピュータを、通信可能に接続されている複数のノードとの間で、前記ノードが所属するグループの識別子であるグループIDが付与されたパケットの送受信を行い、通信可能に接続されている他のネットワークスイッチと共に1台の仮想ネットワークスイッチとして機能するネットワークスイッチとして動作させるネットワークスイッチ制御方法であって、
    前記コンピュータが、前記コンピュータによってどの前記グループIDが付与されているパケットの中継を行うかを示す振り分け情報を格納する振り分け情報格納ステップと、
    「前記グループID、該グループに所属している前記ノード」の組み合わせを示すグループ情報を取得するグループ情報取得ステップと、
    前記コンピュータが、前記コンピュータと通信できなくなった前記ノードを特定する障害情報を取得する障害情報取得ステップと、
    前記コンピュータが、前記他のネットワークスイッチのそれぞれについて、前記ノードとの通信の可否を示すスイッチ情報を取得するスイッチ情報取得ステップと、
    前記障害情報で特定される前記ノードに関して前記グループ情報を参照し、該ノードが所属するグループのグループIDを抽出し、抽出したグループIDが前記振り分け情報に示されている場合は、
    前記コンピュータが、該抽出したグループIDが付与されたパケットを、前記コンピュータが中継しないことを示すように前記振り分け情報を更新し、
    前記コンピュータが、前記スイッチ情報及び前記グループ情報に基づいて、前記他のネットワークスイッチのうち、前記仮想ネットワークスイッチを構成している別のネットワークスイッチを介さずに、該抽出したグループIDで特定されるグループに所属している全ての前記ノードと通信可能であるネットワークスイッチのいずれか一つを選択し、選択したネットワークスイッチを、該抽出したグループIDと共に示す振り分け更新情報を生成する振り分け更新情報生成ステップと、
    前記コンピュータが、前記振り分け更新情報が示すネットワークスイッチに対し、該振り分け更新情報が示す前記グループIDを送信する振り分け更新情報送信ステップと、
    前記コンピュータが、前記他のネットワークスイッチから前記振り分け更新情報を受信する振り分け更新情報受信ステップと、
    前記コンピュータが、前記振り分け更新情報受信ステップで受信した前記グループIDを取得し、該グループIDで特定される前記グループに所属しているノードに対し、該グループIDが付与されたパケットを送信する場合は、前記コンピュータへ送信するように指示するスイッチ指定ステップと、
    前記コンピュータが、前記振り分け更新情報受信ステップで受信した前記グループIDを取得し、取得したグループIDが付与されたパケットを、前記コンピュータが中継することを示すように、前記振り分け情報を更新する振り分け情報更新ステップと、
    を有するネットワークスイッチ制御方法。
JP2012203951A 2012-09-18 2012-09-18 ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラム Expired - Fee Related JP6044218B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012203951A JP6044218B2 (ja) 2012-09-18 2012-09-18 ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012203951A JP6044218B2 (ja) 2012-09-18 2012-09-18 ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラム

Publications (2)

Publication Number Publication Date
JP2014060567A true JP2014060567A (ja) 2014-04-03
JP6044218B2 JP6044218B2 (ja) 2016-12-14

Family

ID=50616666

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012203951A Expired - Fee Related JP6044218B2 (ja) 2012-09-18 2012-09-18 ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラム

Country Status (1)

Country Link
JP (1) JP6044218B2 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008245062A (ja) * 2007-03-28 2008-10-09 Fujitsu Ltd 通信システム、中継器、中継方法
JP2008288880A (ja) * 2007-05-17 2008-11-27 Nec Corp ノード、通信方法およびノード用プログラム
JP2012129759A (ja) * 2010-12-15 2012-07-05 Alaxala Networks Corp パケット中継装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008245062A (ja) * 2007-03-28 2008-10-09 Fujitsu Ltd 通信システム、中継器、中継方法
JP2008288880A (ja) * 2007-05-17 2008-11-27 Nec Corp ノード、通信方法およびノード用プログラム
JP2012129759A (ja) * 2010-12-15 2012-07-05 Alaxala Networks Corp パケット中継装置

Also Published As

Publication number Publication date
JP6044218B2 (ja) 2016-12-14

Similar Documents

Publication Publication Date Title
JP5874726B2 (ja) 通信制御システム、制御サーバ、転送ノード、通信制御方法および通信制御プログラム
JP6490205B2 (ja) フローエントリ構成の方法、装置及びシステム
US8489913B2 (en) Network system and network relay apparatus
JP5590263B2 (ja) 情報システム、制御装置、仮想ネットワークの提供方法およびプログラム
EP2523403B1 (en) Network system and network redundancy method
WO2006095508A1 (ja) フラッディング抑制方法
JP2012090058A (ja) 通信システム、制御装置、処理規則の設定方法およびプログラム
US8243741B2 (en) Frame switching device and address learning method
CN102347905A (zh) 一种网络设备及其转发信息更新方法
US9401865B2 (en) Network appliance redundancy system, control apparatus, network appliance redundancy method and program
JP2011160363A (ja) コンピュータシステム、コントローラ、スイッチ、及び通信方法
JP2013545151A (ja) サーバ管理装置、サーバ管理方法およびプログラム
JP2007274305A (ja) リングネットワーク、通信装置及びそれらに用いる運用管理方法
JP2016225783A (ja) 仮想ネットワークシステムおよび仮想ネットワーク経路設定方法
JP2013183454A (ja) サーバ間接続システム、サーバ、およびデータ転送方法
WO2022062568A1 (zh) 一种交换机的配置方法及相关设备
US20160277251A1 (en) Communication system, virtual network management apparatus, communication node, communication method, and program
US20210112607A1 (en) Communication system and communication method
JP2014086884A (ja) ネットワーク機器、方法、及びプログラム
JP2014003408A (ja) 中継転送システム、経路制御装置およびエッジ装置
JP6044218B2 (ja) ネットワークスイッチ、ネットワークスイッチ制御方法、及びネットワークスイッチ制御プログラム
JP5601992B2 (ja) 通信システムおよびパケット処理ノード
JP2015046936A (ja) 通信システム、制御装置、処理規則の設定方法およびプログラム
JP2017028383A (ja) センサ収容システム、ゲートウェイ、管理サーバ、センサ収容方法及びセンサ収容プログラム
JP2017103703A (ja) ネットワークシステム、制御装置、及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150806

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160610

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160621

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160822

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161018

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161031

R150 Certificate of patent or registration of utility model

Ref document number: 6044218

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees