JP2009075718A - Method of managing virtual i/o path, information processing system, and program - Google Patents

Method of managing virtual i/o path, information processing system, and program Download PDF

Info

Publication number
JP2009075718A
JP2009075718A JP2007242216A JP2007242216A JP2009075718A JP 2009075718 A JP2009075718 A JP 2009075718A JP 2007242216 A JP2007242216 A JP 2007242216A JP 2007242216 A JP2007242216 A JP 2007242216A JP 2009075718 A JP2009075718 A JP 2009075718A
Authority
JP
Japan
Prior art keywords
virtual
path
port
information
node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007242216A
Other languages
Japanese (ja)
Inventor
Yoshiko Yasuda
淑子 保田
Takanari Baba
貴成 馬場
Jun Okitsu
潤 沖津
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2007242216A priority Critical patent/JP2009075718A/en
Publication of JP2009075718A publication Critical patent/JP2009075718A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To configure an I/O path virtualized between servers, and to guarantee end-to-end QoS. <P>SOLUTION: An information processing system has a global QoS management section, a local QoS management section corresponding to a processing node, and a logic I/O management section. The global QoS management section has: a QoS assignment management section that configures a virtual end-to-end I/O path in the information processing system and assigns, changes, and deletes a band to the virtual I/O path; a global QoS management table for holding state information on the entire switch fabric and all virtual I/O paths; and a band monitoring section for monitoring the state information of the entire switch fabric. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、スイッチファブリック等のI/Oスイッチを介して接続されたサーバ群において、仮想化されたI/Oの転送経路毎にエンド・ツー・エンドでI/Oアダプタ間のデータ転送量及び通信帯域を管理する方法とそれを用いた情報処理システムに関する。   The present invention provides a server group connected via an I / O switch such as a switch fabric, and an end-to-end data transfer amount between I / O adapters for each virtualized I / O transfer path and The present invention relates to a method for managing a communication band and an information processing system using the method.

プロセッサ(CPU)のマルチコア化および低消費電力化の流れが本格化し、サーバ分野におけるCPUの仮想化の本格導入が進みつつある。CPU仮想化とは、従来単一のOSしか使用できなかった単一システムのハードウェアリソース(たとえばCPUやメモリ)を、複数のOSが使えるように、論理的に複数のハードウェアリソースに分割して使用する技術である。CPUの仮想化により、ユーザは低コストで消費電力を削減して効率よく複数のサーバを一つまたは少数のサーバに統合できる。   The trend of multi-core processors (CPUs) and low power consumption has become serious, and full-scale introduction of CPU virtualization in the server field is progressing. CPU virtualization means that a single system hardware resource (for example, CPU and memory) that could only be used by a single OS is logically divided into a plurality of hardware resources so that a plurality of OSs can be used. Technology. By virtualization of the CPU, the user can efficiently consolidate a plurality of servers into one or a small number of servers at low cost and with reduced power consumption.

従来のサーバシステムにおけるCPUの仮想化はソフトウェアベースで実現していたためオーバヘッドが大きいという問題があった。しかしながら、近年、CPUベンダ各社がこのCPUの仮想化を支援するハードウェア機構をCPU内に搭載し、仮想化に伴うオーバヘッドを削減できるようになってきた。このような状況からもCPU仮想化機能のコモディティ化が今後一層進むと考えられる。   Since CPU virtualization in a conventional server system is realized on a software basis, there is a problem that overhead is large. However, in recent years, CPU vendors have been able to install a hardware mechanism for supporting the virtualization of the CPU in the CPU to reduce the overhead associated with the virtualization. From such a situation, it is considered that commoditization of the CPU virtualization function will further advance in the future.

従来のCPUの仮想化ではCPUやメモリなどのハードウェアリソースを分割して使用していたが、性能やセキュリティ等の問題からそのI/Oは仮想化対象とはせずに、独立して設けることが一般的であった。しかしながら、低消費電力化のニーズの高まりと継続的なネットワークの高速化により、今後I/Oの仮想化の流れも加速すると考えられる。   In conventional CPU virtualization, hardware resources such as CPU and memory were divided and used. However, due to problems such as performance and security, the I / O is not provided as a virtualization target but provided independently. It was common. However, with the growing need for low power consumption and continuous network speedup, the flow of I / O virtualization is expected to accelerate in the future.

I/Oの仮想化に関しては、近年CPUベンダ各社がI/Oの仮想化を支援するハードウェア機構を搭載したチップセットを市場投入しつつある。また、PCI関連の規格を策定するPCI−SIGにおいてもI/Oインタフェースカード、I/OスイッチにおいてI/Oを仮想化するための標準化が進められている。   Regarding I / O virtualization, CPU vendors have recently introduced a chip set equipped with a hardware mechanism that supports I / O virtualization. In addition, standardization for virtualizing I / O in an I / O interface card and an I / O switch is also being promoted in PCI-SIG that develops PCI-related standards.

I/Oインタフェースカード部におけるI/O仮想化の具体的な例としては、1つの物理I/Oインタフェースカードを複数のOSで共有する方法がある。たとえば、特許文献1では、CPUの仮想化により論理的に分割された仮想ホストと、物理I/Oインタフェースカード上で異なるQoS(Quality of Service)を持つ仮想I/Oインタフェースカードをサポートするための技術が開示されている。特許文献1では、ハイパバイザがシステムイメージに対して割当られる処理キューのセット毎にQoSの重み付けを設定することで、仮想I/Oインタフェースカードに対応してQoSを設定できるようにする。   As a specific example of I / O virtualization in the I / O interface card unit, there is a method in which one physical I / O interface card is shared by a plurality of OSs. For example, in Patent Document 1, a virtual host logically divided by CPU virtualization and a virtual I / O interface card having different QoS (Quality of Service) on a physical I / O interface card are supported. Technology is disclosed. In Patent Document 1, the hypervisor sets QoS weighting for each set of processing queues assigned to a system image, so that QoS can be set corresponding to a virtual I / O interface card.

一方、I/OスイッチによるI/O仮想化技術として、PCI−ExpressスイッチやInfiniBandスイッチがある。これらのI/Oスイッチではスイッチに接続するサーバ群がIPやFibre Channel等の複数のI/Oプロトコルを同じ経路を利用して転送できるため、低コストでI/Oを統合できる。しかしながら、このようなI/Oスイッチを導入する場合、I/Oスイッチの各ポートの接続関係を記録する、あるいはポートの状態情報を収集するための管理機能が必要である。  On the other hand, there are PCI-Express switches and InfiniBand switches as I / O virtualization technologies using I / O switches. In these I / O switches, a group of servers connected to the switch can transfer a plurality of I / O protocols such as IP and Fiber Channel using the same route, so that I / O can be integrated at low cost. However, when such an I / O switch is introduced, a management function for recording the connection relation of each port of the I / O switch or collecting port status information is required.

上記のようなI/Oスイッチを管理する方法として、I/Oスイッチ自体を高機能化する方法と、I/Oスイッチは高機能化せずに管理専用のサーバにより管理する方法がある。   As a method for managing the I / O switch as described above, there are a method for enhancing the functionality of the I / O switch itself, and a method for managing the I / O switch by a dedicated server without enhancing the functionality.

I/Oスイッチ自体を高機能化する方法として、たとえば、特許文献2では、ファイバチャネルスイッチシステムにおけるファブリックの状態情報を収集する方法が開示されている。ファイバチャネルスイッチシステムは複数のスイッチファブリックで構成されるため、各ファブリックの負荷状況をファイバチャネルスイッチシステム内でモニタ可能なファブリック情報収集方法を提供する必要がある。この課題を解決するため、特許文献2では、スイッチファブリックがCPUを装備し、そのCPUが状態の情報の収集要求を受け付けると、スイッチファブリックのCPUが主体的に負荷情報を収集する。   As a method for enhancing the functionality of the I / O switch itself, for example, Patent Document 2 discloses a method for collecting fabric state information in a fiber channel switch system. Since the fiber channel switch system is composed of a plurality of switch fabrics, it is necessary to provide a fabric information collection method capable of monitoring the load status of each fabric within the fiber channel switch system. In order to solve this problem, in Patent Document 2, when the switch fabric is equipped with a CPU and the CPU receives a request for collecting state information, the CPU of the switch fabric collects load information.

一方、I/Oスイッチの外側でI/Oスイッチ状態を管理する方法として、たとえば、非特許文献1には、ASI-SIGにおけるファブリック管理マネージャの仕様が開示されている。ファブリック管理マネージャは、ASI(Advanced Switch Interconnect)スイッチファブリックの構成管理を行なう。ASIスイッチファブリックはプロセッサを装備しないため、管理専用サーバのコンフィギュレーション空間にメモリマップされたレジスタにアクセスしてファブリックの情報を収集する。   On the other hand, as a method for managing the I / O switch state outside the I / O switch, for example, Non-Patent Document 1 discloses the specification of the fabric management manager in ASI-SIG. The fabric management manager performs configuration management of an ASI (Advanced Switch Interconnect) switch fabric. Since the ASI switch fabric is not equipped with a processor, the fabric information is collected by accessing a register that is memory-mapped in the configuration space of the management dedicated server.

ここで収集できるファブリックの情報としては、物理ポートに対応するアクティブ情報や送受信パケット数などである。ASIでは、これらの情報をASIがサポートするPI(プロトコルインタフェース)−4と呼ぶレジスタアクセスのためのパケットを利用してインバウンドで取得する。
米国特許出願公開第2006/0193327A1 特開2001−274794号公報 ASI Core Specification Revision 1.1 Final, ASI-SIG, 2004年
The fabric information that can be collected here includes active information corresponding to the physical port and the number of transmitted / received packets. In ASI, these pieces of information are acquired inbound using a register access packet called PI (Protocol Interface) -4 supported by ASI.
US Patent Application Publication No. 2006/0193327 A1 JP 2001-274794 A ASI Core Specification Revision 1.1 Final, ASI-SIG, 2004

特許文献1に開示されている方法により、単一の物理I/Oインタフェースカードを共有する仮想I/Oインタフェースカードと、仮想I/Oインターフェースカードに対応する仮想ホスト間のI/OのQoSを個々に設定することができる。   By the method disclosed in Patent Document 1, the QoS of I / O between a virtual I / O interface card sharing a single physical I / O interface card and a virtual host corresponding to the virtual I / O interface card is determined. Can be set individually.

しかしながら、特許文献1に開示された方法を用いた場合、I/Oスイッチに接続したサーバ群からなる情報処理システムにおけるI/Oインタフェースカードとサーバ間のQoSしか保証できない。すなわち、従来の手法ではI/Oスイッチを介してI/Oインタフェースカードで接続されたサーバ間あるいはサーバとI/Oデバイス間において仮想的に構成されたI/Oパスのエンド・ツー・エンドでのQoSを保証できないという問題があった(第1の問題)。   However, when the method disclosed in Patent Document 1 is used, only QoS between an I / O interface card and a server in an information processing system including a group of servers connected to an I / O switch can be guaranteed. In other words, in the conventional method, an I / O path is virtually configured between servers connected by an I / O interface card via an I / O switch or between a server and an I / O device. There is a problem that the QoS cannot be guaranteed (first problem).

すなわち、マルチプロトコルに対応したI/Oインターフェースカードでは、I/Oスイッチの物理ポートに異なるプロトコルの仮想化されたI/Oポートを構成することができ、一つの物理ポートにTCP/IPの仮想化されたI/Oポートと、iSCSIの仮想化されたI/Oポートを構成することができる。そして、I/OインターフェースカードとI/Oスイッチ及び他の計算機またはI/O装置間で、TCP/IPの仮想的なI/Oパスと、SCSIの仮想的なI/Oパスをそれぞれ構成することができる。しかしながら、上記特許文献1では、ひとつの物理的なI/Oインターフェースカードに、複数の仮想ホスト(ゲストOS)毎に仮想I/Oインターフェースカードを割り当てて、仮想I/Oインターフェースカード毎にQoSを制御することはできるが、上述のようにTCP/IPの仮想的なI/Oパスと、iSCSIの仮想的なI/Oパスについて、それぞれのQoSを確保することができない、という問題があった。   In other words, in an I / O interface card that supports multi-protocols, virtual I / O ports of different protocols can be configured on the physical port of the I / O switch, and the virtual port of TCP / IP can be configured on one physical port. It is possible to configure a virtualized I / O port and an iSCSI virtualized I / O port. Then, a TCP / IP virtual I / O path and a SCSI virtual I / O path are respectively configured between the I / O interface card, the I / O switch, and other computers or I / O devices. be able to. However, in Patent Document 1, a virtual I / O interface card is assigned to each physical I / O interface card for each of a plurality of virtual hosts (guest OSs), and QoS is assigned to each virtual I / O interface card. Although it can be controlled, there is a problem that the QoS cannot be secured for the virtual I / O path of TCP / IP and the virtual I / O path of iSCSI as described above. .

加えて、情報処理システム全体において仮想的に構成された複数のI/OパスのQoSを保証するためには、構成されたI/Oパス毎に仮想I/Oインターフェースカードのポートの利用情報を管理する必要がある。複数のI/Oパスが構成される場合には、単一の物理ポートにおいて複数のI/Oパスのそれぞれに対するポートの状態情報を管理する必要がある。特許文献2に開示されている技術では、スイッチファブリックがCPUを装備し、I/Oスイッチ(スイッチファブリック)上のCPUが管理のためにポート毎の負荷情報を収集することが前提であった。そのため、CPUを持たないI/Oスイッチにおいてはポート毎の負荷情報を収集できないという問題点があった。   In addition, in order to guarantee the QoS of a plurality of virtually configured I / O paths in the entire information processing system, port usage information of the virtual I / O interface card is provided for each configured I / O path. Need to manage. When a plurality of I / O paths are configured, it is necessary to manage port status information for each of the plurality of I / O paths in a single physical port. The technology disclosed in Patent Document 2 is based on the premise that the switch fabric is equipped with a CPU, and the CPU on the I / O switch (switch fabric) collects load information for each port for management. Therefore, there is a problem that load information for each port cannot be collected in an I / O switch without a CPU.

一方、非特許文献1に開示されている技術では、管理専用サーバがI/Oスイッチのポートの状態情報を取得するためのインタフェースが開示されている。このインタフェースを用いることによりI/OスイッチがCPUを持たない場合であっても、サーバを構成するI/Oスイッチのポートの状態情報を収集できる。しかしながら、非特許文献1の方法では、今後CPUの仮想化とI/O仮想化が本格化するのに伴い、I/Oスイッチに接続されたサーバ群においてサーバ間、あるいはサーバとI/O装置間で複数のプロトコル種に対応する仮想化されたI/Oパスが構成された場合に、仮想化されたI/Oパスそれぞれに対応するポートの状態情報を収集することはできないという問題があった(第2の問題)。   On the other hand, the technique disclosed in Non-Patent Document 1 discloses an interface for a management-dedicated server to acquire state information of a port of an I / O switch. By using this interface, even when the I / O switch does not have a CPU, it is possible to collect the state information of the ports of the I / O switch constituting the server. However, according to the method of Non-Patent Document 1, as CPU virtualization and I / O virtualization become full-scale in the future, between servers or servers and I / O devices in a server group connected to an I / O switch. When virtualized I / O paths corresponding to multiple protocol types are configured between them, there is a problem that it is not possible to collect port status information corresponding to each virtualized I / O path. (Second problem).

さらに、サーバ群を接続するI/Oスイッチの規模や、物理I/Oポートあたりの仮想化されたI/Oの数の増加に伴い、管理すべきI/Oポートの状態情報が増加する。その結果、ポートの状態情報の読み出し回数が増加する。I/Oポートの状態情報の読み出し回数が増加すると、他の処理に対して影響を及ぼし、その結果状態情報の取得のための処理時間が増加したり、その処理時間がばらついたりする問題があった(第3の問題)。   Further, as the scale of the I / O switch connecting the server group and the number of virtualized I / Os per physical I / O port increase, the status information of the I / O ports to be managed increases. As a result, the number of times the port state information is read increases. If the number of times I / O port status information is read increases, it affects other processes, resulting in an increase in processing time for obtaining status information and variations in processing time. (Third problem)

先に述べたように、CPUの仮想化の本格導入に向け、I/Oスイッチに接続されたサーバ群において、サーバ間、あるいはサーバとI/O装置間で構成された複数の仮想的なI/Oパスのデータ量及び転送速度の管理方法とそれを用いたシステムが必要である。   As described above, a plurality of virtual I / O devices configured between servers or between a server and an I / O device in a server group connected to an I / O switch for full-scale introduction of CPU virtualization. A method for managing the data amount and transfer rate of the / O path and a system using the same are required.

I/Oスイッチに接続されたサーバでCPUの仮想化を行う装置において、上記第1の問題を解決するため、複数の仮想化されたI/Oパスが構成された場合であっても、仮想化されたI/O毎のデータ転送経路(パス)に対してエンド・ツー・エンドでQoSを保証可能な、仮想化されたI/Oパスのデータ量及び転送速度(帯域幅)の管理方法が必要である。   Even if a plurality of virtualized I / O paths are configured in an apparatus that performs CPU virtualization on a server connected to an I / O switch, in order to solve the first problem, a virtual Of virtualized I / O path data amount and transfer rate (bandwidth) that can guarantee QoS end-to-end for each data transfer path (path) for each I / O is required.

上記第2の問題を解決するため、CPUを持たないI/Oスイッチにおいても、物理ポートへ仮想的に構成したI/Oポート毎の状態情報を収集することが可能な仮想化されたI/Oパスのデータ量及び転送速度(帯域幅)の管理方法が必要である。   In order to solve the second problem, a virtualized I / O capable of collecting status information for each I / O port virtually configured as a physical port even in an I / O switch having no CPU. A method for managing the data amount and transfer rate (bandwidth) of the O path is required.

上記第3の問題を解決するため、大規模なI/Oスイッチや物理ポートあたりの仮想化されたI/Oポート数が多い場合であっても、管理すべき仮想化されたI/Oポート毎の状態情報の読み出し処理を一定の時間で実行可能な仮想化されたI/Oパスのデータ量及び転送速度(帯域幅)の管理方法が必要である。   In order to solve the third problem, a virtual I / O port to be managed even when there are a large number of virtual I / O ports per physical port or a large-scale I / O switch There is a need for a method for managing the data amount and transfer rate (bandwidth) of the virtualized I / O path that can execute the state information read processing for each time in a certain time.

本発明の第1の課題は、I/Oスイッチに接続されたサーバ群からなる情報処理システムにおいて、複数の仮想化されたI/Oパスが構成された場合に、各I/Oパスのエンド・ツー・エンドでQoSを保証可能な、仮想化されたI/Oパスのデータ量及び転送速度(帯域幅)の管理方法を提供することにある。   A first problem of the present invention is that an information processing system including a group of servers connected to an I / O switch has an end of each I / O path when a plurality of virtualized I / O paths are configured. It is to provide a method for managing the data amount and transfer rate (bandwidth) of a virtualized I / O path that can guarantee QoS in a two-end manner.

本発明の第2の課題は、上記第1の課題に加えて、CPUを持たないI/Oスイッチであっても、物理ポートに仮想的に構成したI/Oポート毎の情報を収集することが可能な仮想化されたI/Oのデータ量及び転送速度(帯域幅)の管理方法を提供することにある。   A second problem of the present invention is to collect information for each I / O port virtually configured as a physical port even in an I / O switch having no CPU in addition to the first problem. It is an object of the present invention to provide a method for managing virtualized I / O data volume and transfer rate (bandwidth).

本発明の第3の課題は、上記第2の課題に加えて、大規模なI/Oスイッチや物理ポートあたりの仮想化されたI/Oポート数が多い場合であっても、管理すべき仮想化されたI/Oパス毎の状態情報の読み出し処理を一定の時間で実行可能な仮想化されたI/Oパスのデータ量及び転送速度の(帯域幅)管理方法を提供することにある。   The third problem of the present invention should be managed even in the case where there are a large number of virtual I / O ports per physical port or a large-scale I / O switch in addition to the second problem. To provide a method for managing a data amount and a transfer rate (bandwidth) of a virtualized I / O path that can execute a state information read process for each virtualized I / O path in a predetermined time. .

本発明は、物理I/Oポートに仮想I/Oポートを設定可能なI/Oアダプタを備えたノードを複数有し、前記ノードのI/OアダプタをI/Oスイッチのポートに接続し、前記複数のノード間で前記仮想I/Oポートを介してデータの転送を行う情報処理システムにおける仮想I/Oパスの管理方法であって、前記複数のノードのうちのいずれか一つが、前記I/Oスイッチのポートの情報を収集し、前記各ノードがそれぞれのノードが備えたI/Oアダプタの仮想I/Oポート毎に帯域を取得し、前記複数のノードのうちのいずれか一つが、前記I/Oスイッチのポートの情報と、前記帯域を取得し、前記I/Oスイッチのポートの情報と、前記帯域を取得した前記ノードが、送信元のノードの情報と送信先のノードの情報と帯域を含む仮想I/Oパスの生成要求を受け付けて、前記仮想I/Oパスの生成要求を受け付けたノードが、前記I/Oスイッチのポートの情報から前記送信元のノードから送信先のノードまでの仮想I/Oパスの経路を選択し、前記仮想I/Oパスの生成要求を受け付けたノードが、前記選択した仮想I/Oパスの経路上の仮想I/Oポートを抽出し、抽出した仮想I/Oポートに前記取得した帯域と前記生成要求に含まれる帯域から当該仮想I/Oパスを設定可能か否かを判定し、前記仮想I/Oパスの生成要求を受け付けたノードが、前記仮想I/Oパスを設定可能と判定しときに、前記仮想I/Oパス上のポートに当該仮想I/Oパスを設定する。   The present invention has a plurality of nodes each having an I / O adapter that can set a virtual I / O port as a physical I / O port, and connects the I / O adapter of the node to a port of an I / O switch. A method of managing a virtual I / O path in an information processing system that transfers data between the plurality of nodes via the virtual I / O port, wherein any one of the plurality of nodes is the I / O switch port information is collected, each node acquires a bandwidth for each virtual I / O port of an I / O adapter provided in each node, and any one of the plurality of nodes is The port information of the I / O switch, the band is acquired, the information of the port of the I / O switch, the node that acquired the band is the information of the source node and the information of the destination node And band included A node that receives a request to generate a virtual I / O path and receives a request to generate a virtual I / O path is a virtual node from the source node to the destination node based on the port information of the I / O switch. The node that selects the path of the I / O path, receives the virtual I / O path generation request, extracts the virtual I / O port on the path of the selected virtual I / O path, and extracts the extracted virtual I It is determined whether or not the virtual I / O path can be set from the acquired bandwidth and the bandwidth included in the generation request in the / O port, and the node that has received the virtual I / O path generation request When it is determined that an I / O path can be set, the virtual I / O path is set to a port on the virtual I / O path.

また、前記複数のノードのうちのいずれか一つが、前記I/Oスイッチのポートの情報を収集するステップは、前記複数のノードの稼動状態に基づいて一つのノードを選択するステップを含む。   In addition, the step in which any one of the plurality of nodes collects information on the port of the I / O switch includes a step of selecting one node based on an operating state of the plurality of nodes.

本発明により、I/Oスイッチを介して複数の処理ノードを接続する情報処理システムに対して、複数の仮想化されたI/Oパスを構成し、I/Oパス毎にデータ転送速度(帯域幅)を制御できるため、仮想化されたI/Oパス毎にエンド・ツー・エンドでのQoSを保証できる。また、CPUを持たないI/Oスイッチであっても、I/Oアダプタの物理ポートに仮想的に構成したI/Oポート毎の状態情報を管理し、それらの情報を収集できる。さらに、大規模なI/Oスイッチや物理ポートあたりの仮想I/Oポート数が多い場合であっても、高負荷となるI/Oスイッチの状態情報の読み出し処理を、I/Oスイッチに接続する複数の処理ノードの稼動状態に応じて分担することで、他の通信への影響を最小化して、I/Oスイッチの情報収集を一定の時間で実行できる。   According to the present invention, a plurality of virtualized I / O paths are configured for an information processing system that connects a plurality of processing nodes via an I / O switch, and a data transfer rate (bandwidth) is set for each I / O path. Width) can be controlled, so that end-to-end QoS can be guaranteed for each virtualized I / O path. Even an I / O switch that does not have a CPU can manage status information for each I / O port virtually configured on a physical port of an I / O adapter and collect the information. In addition, even when there are a large number of I / O switches or a large number of virtual I / O ports per physical port, I / O switch status information read processing is connected to the I / O switch. By sharing according to the operating states of a plurality of processing nodes, it is possible to minimize the influence on other communications and execute I / O switch information collection in a certain time.

以下、本発明の一実施形態を添付図面に基づいて説明する。   Hereinafter, an embodiment of the present invention will be described with reference to the accompanying drawings.

<第1実施形態>
図1は第1の実施形態を示し、本発明を適用する情報処理システムのブロック図である。
<First Embodiment>
FIG. 1 shows a first embodiment and is a block diagram of an information processing system to which the present invention is applied.

情報処理システムは、サービスを提供する複数の処理ノード(サーバ計算機)101、102と、これら処理ノード101、102を管理する管理ノード(管理計算機)103と、各ノードを接続して仮想的なI/Oパス(論理I/Oパス)を提供するために複数のスイッチファブリック170、171を備えたスイッチファブリック群105から構成される。なお、管理ノード103には管理者に対する入出力が可能なコンソール104が接続されている。また、各ノードは図示しないバックプレーンを介して接続され、図示しない筐体に格納されている。   The information processing system includes a plurality of processing nodes (server computers) 101 and 102 that provide services, a management node (management computer) 103 that manages these processing nodes 101 and 102, and a virtual I In order to provide an / O path (logical I / O path), the switch fabric group 105 includes a plurality of switch fabrics 170 and 171. The management node 103 is connected to a console 104 that can input and output to the administrator. Each node is connected via a backplane (not shown) and stored in a housing (not shown).

処理ノード101、102はそれぞれ、複数のCPU(プロセッサ)コア#0、#1を備えたCPU(所謂、マルチコアプロセッサ)10を複数備えている。なお、処理ノード101、102は同一の構成であるので、処理ノード101の構成についてのみ以下に説明する。   Each of the processing nodes 101 and 102 includes a plurality of CPUs (so-called multi-core processors) 10 including a plurality of CPU (processor) cores # 0 and # 1. Since the processing nodes 101 and 102 have the same configuration, only the configuration of the processing node 101 will be described below.

CPU#0は複数のCPUコア#0−0、#0−1を有し、CPU#1は複数のCPUコア#1−0、#1−1を有する。CPU#0、#1は、フロントサイドバス11を介してチップセット12に接続される。   The CPU # 0 has a plurality of CPU cores # 0-0 and # 0-1, and the CPU # 1 has a plurality of CPU cores # 1-0 and # 1-1. The CPUs # 0 and # 1 are connected to the chipset 12 via the front side bus 11.

チップセット12はメモリバスを介して主記憶13に接続され、CPU#0、#1のメモリアクセス要求に応じて主記憶13をアクセスする。また、チップセット12はI/Oバス14を介してI/OインターフェースカードとしてのI/Oアダプタ113に接続され、CPU#0、#1のI/Oアクセス要求に応じてスイッチファブリック群105にアクセスする。I/Oバス14は、例えば、PCI−EXPRESSで構成することができる。   The chip set 12 is connected to the main memory 13 via the memory bus, and accesses the main memory 13 in response to memory access requests from the CPUs # 0 and # 1. Further, the chip set 12 is connected to an I / O adapter 113 as an I / O interface card via an I / O bus 14 and is connected to the switch fabric group 105 in response to an I / O access request from the CPUs # 0 and # 1. to access. The I / O bus 14 can be configured by, for example, PCI-EXPRESS.

I/Oアダプタ113は、複数のプロトコルを提供し、物理的なI/Oポート(以下、)に複数の仮想的なI/Oポート(以下、仮想I/Oポートまたは論理I/Oポート)を構成することができ、各仮想I/Oポートごとにスイッチファブリック群105と通信を行う。I/Oアダプタ113は、後述するレジスタ180を備えたコントローラを備える。   The I / O adapter 113 provides a plurality of protocols, and a plurality of virtual I / O ports (hereinafter referred to as virtual I / O ports or logical I / O ports) as physical I / O ports (hereinafter referred to as “physical I / O ports”). And communicate with the switch fabric group 105 for each virtual I / O port. The I / O adapter 113 includes a controller including a register 180 described later.

管理ノード103のハードウェア構成は、上記処理ノード101と同様であり、CPU20、フロントサイドバス21チップセット22、メインメモリ23、I/Oバス24、I/Oアダプタ120を備え、I/Oアダプタ120がスイッチファブリック群105に接続される。   The hardware configuration of the management node 103 is the same as that of the processing node 101, and includes a CPU 20, a front side bus 21 chip set 22, a main memory 23, an I / O bus 24, and an I / O adapter 120, and an I / O adapter. 120 is connected to the switch fabric group 105.

CPU10は、後述するようにOSとアプリケーション及び各管理部を主記憶13にロードして実行する。   As will be described later, the CPU 10 loads the OS, applications, and management units to the main memory 13 and executes them.

図2に、本発明の第1の実施の形態の情報処理システム100のブロック図を示す。   FIG. 2 is a block diagram of the information processing system 100 according to the first embodiment of this invention.

情報処理システム100は、処理ノード101、102、管理ノード103、管理コンソール104、スイッチファブリック群105で構成される。処理ノード101、102、管理ノード103は、スイッチファブリック群105に接続される。スイッチファブリック群105と各ノードの接続には、共通の物理インタフェースを使用しているが、その上位のプロトコルはいかなるプロトコルを使用してよい。たとえば、独自の物理インタフェースを持つ独自のプロトコルであってもよいし、PCIのような標準の物理インタフェースを用いる独自プロトコルであってもよい。あるいはPCI Expressのような標準の物理インタフェースを持つ標準のプロトコルであってもよい。   The information processing system 100 includes processing nodes 101 and 102, a management node 103, a management console 104, and a switch fabric group 105. The processing nodes 101 and 102 and the management node 103 are connected to the switch fabric group 105. A common physical interface is used for connection between the switch fabric group 105 and each node, but any protocol may be used as an upper protocol. For example, it may be a unique protocol having a unique physical interface, or a unique protocol using a standard physical interface such as PCI. Alternatively, it may be a standard protocol having a standard physical interface such as PCI Express.

例えば、スイッチファブリック群105とI/Oアダプタ113,118,120は、物理層としてPCI Expressを採用し、上位層としてTCP/IP、FC(Fibre Channel)あるいはSCSIなどの複数のプロトコルで通信可能に構成される。   For example, the switch fabric group 105 and the I / O adapters 113, 118, and 120 adopt PCI Express as a physical layer and can communicate with a plurality of protocols such as TCP / IP, FC (Fibre Channel), or SCSI as an upper layer. Composed.

また、スイッチファブリック170,171は、各スイッチファブリックを構成する複数の物理I/Oポート及び仮想I/Oポートの設定状態を格納するレジスタ180、181を備える。   In addition, the switch fabrics 170 and 171 include registers 180 and 181 that store setting states of a plurality of physical I / O ports and virtual I / O ports that constitute each switch fabric.

処理ノード101,102は、アプリケーションを搭載するサーバ処理ノードあるいはI/Oデバイス(例えば、ディスクドライブなど)を搭載し、I/O処理を行うI/O処理ノードのいずれかである。本発明の第1の実施の形態では、処理ノード101,102はアプリケーションを実行するサーバ処理ノードとして機能し、処理ノード101、102と管理ノード103のみがスイッチファブリック群105に接続する例を図示しているが、I/Oデバイス等を搭載するI/O処理ノードがスイッチファブリック群105に接続していてもよい。その場合、I/Oノードも他ノードと共通の物理インタフェースで接続しており、I/OノードではI/Oデバイスを制御するI/Oコントローラと、I/Oデバイスが搭載されている。   The processing nodes 101 and 102 are either a server processing node on which an application is mounted or an I / O processing node on which an I / O device (for example, a disk drive) is mounted and performs I / O processing. In the first embodiment of the present invention, the processing nodes 101 and 102 function as server processing nodes that execute applications, and only the processing nodes 101 and 102 and the management node 103 are connected to the switch fabric group 105. However, an I / O processing node on which an I / O device or the like is mounted may be connected to the switch fabric group 105. In this case, the I / O node is also connected to other nodes through a common physical interface, and the I / O node includes an I / O controller that controls the I / O device and an I / O device.

処理ノード101、102はスイッチファブリック群105を介してデータの受け渡しを行なう。本発明の第1の実施の形態では、処理ノードを2台図示しているが、何台備えられていてもよい。   The processing nodes 101 and 102 exchange data via the switch fabric group 105. In the first embodiment of the present invention, two processing nodes are illustrated, but any number of processing nodes may be provided.

管理ノード103は、情報処理システム100の全体構成を管理し、スイッチファブリック群105を介して、処理ノード101、102と状態情報のやりとりをする。本発明の第1の実施の形態では、管理ノードを1台のみ図示しているが、信頼性を向上するため複数台備えられていてもよい。複数台の管理ノードが備えられている場合には、管理ノード間でデータの整合性を取られるように制御される。   The management node 103 manages the overall configuration of the information processing system 100 and exchanges status information with the processing nodes 101 and 102 via the switch fabric group 105. In the first embodiment of the present invention, only one management node is illustrated, but a plurality of management nodes may be provided in order to improve reliability. In the case where a plurality of management nodes are provided, control is performed so as to ensure data consistency between the management nodes.

管理コンソール104は、CPUとメモリ等を持つ計算機である。管理者からの管理要求、たとえば、スイッチファブリック群105に構成する仮想I/Oパス(論理I/Oパス)に対してQoS(Quality of Service)の割り当てを行なう要求等、を管理ノード103に送出する。なお、仮想I/Oパスは、後述するように管理コンソール104から管理ノード103への指令に基づいて各処理ノード101,102のQoS割当管理部131,134が各I/Oドライバに通知し、各I/Oドライバで設定される。あるいは、各処理ノード101,102のアプリケーション110,115がI/Oドライバに通知して仮想I/Oポートを設定してもよい。   The management console 104 is a computer having a CPU and a memory. A management request from an administrator, for example, a request to assign QoS (Quality of Service) to a virtual I / O path (logical I / O path) configured in the switch fabric group 105 is transmitted to the management node 103 To do. The virtual I / O path is notified to each I / O driver by the QoS allocation management units 131 and 134 of the processing nodes 101 and 102 based on a command from the management console 104 to the management node 103 as will be described later. Set by each I / O driver. Alternatively, the applications 110 and 115 of the processing nodes 101 and 102 may notify the I / O driver and set a virtual I / O port.

ここで、本実施形態でのQoSは、物理I/Oポート上に設定する複数の仮想I/Oポート(仮想I/Oポート)毎の帯域を保証することを示す。例えば、図5で示すように、I/Oアダプタ113の物理I/Oポート「0」に、仮想I/Oポート「1」と「4」を設定した場合、仮想I/Oポート「1」はTCP/IPを用いて、他の処理ノードと通信を行い、仮想I/Oポート「4」はFCのプロトコルでさらに他の処理ノード(例えば、ストレージ装置)と通信を行う。このとき、TCP/IPの帯域と、FCの帯域を各仮想I/Oポート(仮想I/Oポート)毎に保証することが、本実施形態におけるQoSとなる。   Here, QoS in the present embodiment indicates that a bandwidth for each of a plurality of virtual I / O ports (virtual I / O ports) set on a physical I / O port is guaranteed. For example, as shown in FIG. 5, when the virtual I / O ports “1” and “4” are set in the physical I / O port “0” of the I / O adapter 113, the virtual I / O port “1” is set. Communicates with other processing nodes using TCP / IP, and the virtual I / O port “4” communicates with other processing nodes (for example, storage devices) using the FC protocol. At this time, guaranteeing the TCP / IP bandwidth and the FC bandwidth for each virtual I / O port (virtual I / O port) is the QoS in this embodiment.

スイッチファブリック群105は、処理ノード101、102、管理ノード103間を接続する。スイッチファブリック群105の内部構成はバス、クロスバネットワーク、あるいは多段ネットワークのいずれでもよい。処理ノード間、処理ノードと管理ノード間で情報をやりとりできるのであれば、いかなる構成でもよい。本発明の第1の実施の形態では、スイッチファブリック群105は、ノンブロッキングのクロスバネットワークで構成される複数のスイッチファブリック170、171で構成されている例を示す。   The switch fabric group 105 connects the processing nodes 101 and 102 and the management node 103. The internal configuration of the switch fabric group 105 may be a bus, a crossbar network, or a multistage network. Any configuration is possible as long as information can be exchanged between processing nodes and between a processing node and a management node. In the first embodiment of the present invention, an example in which the switch fabric group 105 is configured by a plurality of switch fabrics 170 and 171 configured by a non-blocking crossbar network is shown.

処理ノード101は、アプリケーション110、ローカルQoS管理部111、論理I/O管理部112、I/Oアダプタ113を備える。処理ノード102も処理ノード101と同様の構成であり、図2において符号のみが異なる。   The processing node 101 includes an application 110, a local QoS management unit 111, a logical I / O management unit 112, and an I / O adapter 113. The processing node 102 has the same configuration as that of the processing node 101, and only the reference numerals are different in FIG.

アプリケーション110は、処理ノード101のCPU10が実行するユーザプログラムである。ローカルQoS管理部111は、ローカルQoS管理部111を搭載する処理ノード101と処理ノード101上のI/Oアダプタ113の仮想的なI/Oポートの設定情報を管理し、これらの情報を定期的に管理ノード103上のグローバルQoS管理部122(後述)に通知する。論理I/O管理部112は、物理I/Oアダプタ113と仮想化されたI/Oアダプタ113の状態情報と、データ転送量(あるいはデータ転送速度や帯域幅)の対応を管理する。I/Oアダプタ113は、スイッチファブリック群105とのインタフェースである。   The application 110 is a user program executed by the CPU 10 of the processing node 101. The local QoS management unit 111 manages the setting information of the virtual I / O ports of the processing node 101 on which the local QoS management unit 111 is mounted and the I / O adapter 113 on the processing node 101, and periodically stores these information. To the global QoS management unit 122 (described later) on the management node 103. The logical I / O management unit 112 manages the correspondence between the status information of the physical I / O adapter 113 and the virtualized I / O adapter 113 and the data transfer amount (or data transfer speed or bandwidth). The I / O adapter 113 is an interface with the switch fabric group 105.

ここで、ローカルQoS管理部111は、独立したアプリケーションとして実装されてもよいし、システム管理用のアプリケーションの一部として組み込まれてもよい。また、論理I/O管理部112は、OS350の管理下にあるI/Oドライバに組み込まれていてもよい。あるいは、I/Oドライバではなく、ハイパバイザなどの仮想化ソフトウェアの一部として組み込まれていてもよい。本発明の第1の実施の形態では、ローカルQoS管理部111はシステム管理用のアプリケーションとして組み込まれ、論理I/O管理部112は、OS350内のI/Oドライバに組み込まれている。本発明の第1の実施の形態では、処理ノード101、102がローカルQoS管理部111、116を備えるが、管理ノード103内のI/Oの帯域幅を管理したい場合には、管理ノード103にもローカルQoS管理部を備えればよい。   Here, the local QoS management unit 111 may be implemented as an independent application, or may be incorporated as a part of an application for system management. Further, the logical I / O management unit 112 may be incorporated in an I / O driver under the management of the OS 350. Alternatively, it may be incorporated as part of virtualization software such as a hypervisor instead of the I / O driver. In the first embodiment of the present invention, the local QoS management unit 111 is incorporated as a system management application, and the logical I / O management unit 112 is incorporated in an I / O driver in the OS 350. In the first embodiment of the present invention, the processing nodes 101 and 102 include the local QoS management units 111 and 116. However, when it is desired to manage the bandwidth of the I / O in the management node 103, the management node 103 May be provided with a local QoS management unit.

管理ノード103は、I/Oアダプタ120と、論理I/O管理部121と、グローバルQoS管理部122を備える。I/Oアダプタ120の構成は前述した処理ノード101のI/Oアダプタ113の構成と同じである。   The management node 103 includes an I / O adapter 120, a logical I / O management unit 121, and a global QoS management unit 122. The configuration of the I / O adapter 120 is the same as the configuration of the I / O adapter 113 of the processing node 101 described above.

論理I/O管理部121は、管理ノード103上の物理的なI/Oアダプタ120と、仮想化されたI/Oアダプタ120のポートの状態情報と、データ転送量(帯域幅)の対応を管理する。   The logical I / O management unit 121 correlates the physical I / O adapter 120 on the management node 103, the port status information of the virtualized I / O adapter 120, and the data transfer amount (bandwidth). to manage.

グローバルQoS管理部122は、情報処理システム100全体の状態情報と、管理ノード103を含む処理ノードの状態情報(ローカルQoS管理テーブル130の情報)、スイッチファブリック群105の状態情報(スイッチ情報303)、処理ノード101、102とスイッチファブリック群105に構成された仮想I/Oパスの状態情報(パス情報)を管理する。また、グローバルQoS管理部122は、スイッチファブリック群105および処理ノード101,102の状態を監視し、管理コンソール104経由で設定された構成情報に従って、仮想I/Oパスを構成する各コンポーネントへ(仮想I/Oポート等)の帯域の割当や変更や削除を行なう。たとえば、仮想I/Oパス毎の利用帯域等の状態情報と仮想I/Oパスの設定時の情報を比較し、利用帯域が設定帯域を満たしていない場合、あるいは設定帯域を超える場合に、仮想I/Oパスを構成する各コンポーネントにおいて設定帯域を変更する。ここで、本発明の第1の実施の形態では、管理ノード103がグローバルQoS管理部122を備えるが、管理ノード103ではなく、処理ノードの一部にグローバルQoS管理部122を備えてもよい。   The global QoS management unit 122 includes state information of the entire information processing system 100, state information of processing nodes including the management node 103 (information of the local QoS management table 130), state information of the switch fabric group 105 (switch information 303), It manages state information (path information) of virtual I / O paths configured in the processing nodes 101 and 102 and the switch fabric group 105. In addition, the global QoS management unit 122 monitors the states of the switch fabric group 105 and the processing nodes 101 and 102, and transmits the virtual I / O path to each component (virtual) according to the configuration information set via the management console 104. I / O port etc.) is allocated, changed or deleted. For example, the status information such as the used bandwidth for each virtual I / O path is compared with the information at the time of setting the virtual I / O path, and if the used bandwidth does not satisfy the set bandwidth or exceeds the set bandwidth, The set bandwidth is changed in each component constituting the I / O path. Here, in the first embodiment of the present invention, the management node 103 includes the global QoS management unit 122. However, instead of the management node 103, the global QoS management unit 122 may be provided in a part of the processing node.

処理ノード101のローカルQoS管理部111は、ローカルQoS管理テーブル130と、QoS割当管理部131及び帯域監視部132を備える。ローカルQoS管理テーブル130は、処理ノード101に搭載するI/Oアダプタ113のポート情報(ポート情報204、論理I/O情報205)を管理する。ローカルQoS管理テーブル130の詳細は後述する(図3参照)。QoS割当管理部131は、帯域監視部132と連携して動作し、ローカルQoS管理テーブル130の内容に従い、仮想化されたI/Oパス(仮想I/Oパス)に対応するI/Oアダプタ113の仮想I/Oポート(仮想I/Oポート)を生成、削除、変更、表示する。帯域監視部132は、ローカルQoS管理部111が管理するI/Oアダプタ113に構成された仮想I/Oポートの状態情報(ポート情報204,論理I/O情報205)を、定期的(所定の周期)にグローバルQoS管理部122に通知する。帯域監視部132の詳細は後述する(図8参照)。   The local QoS management unit 111 of the processing node 101 includes a local QoS management table 130, a QoS allocation management unit 131, and a bandwidth monitoring unit 132. The local QoS management table 130 manages port information (port information 204, logical I / O information 205) of the I / O adapter 113 mounted on the processing node 101. Details of the local QoS management table 130 will be described later (see FIG. 3). The QoS allocation management unit 131 operates in cooperation with the bandwidth monitoring unit 132, and in accordance with the contents of the local QoS management table 130, the I / O adapter 113 corresponding to a virtualized I / O path (virtual I / O path). Virtual I / O ports (virtual I / O ports) are generated, deleted, changed, and displayed. The bandwidth monitoring unit 132 periodically (predetermined predetermined status information (port information 204, logical I / O information 205) of virtual I / O ports configured in the I / O adapter 113 managed by the local QoS management unit 111). (Period)) to the global QoS management unit 122. Details of the bandwidth monitoring unit 132 will be described later (see FIG. 8).

管理ノード103のグローバルQoS管理部122は、グローバルQoS管理テーブル140、QoS割当管理部141、帯域監視部142を備える。グローバルQoS管理テーブル140は、スイッチファブリック群105の状態情報(スイッチ情報303)を管理する。グローバルQoS管理テーブル140の詳細は後述する(図4参照)。QoS管理割当部141は、グローバルQoS管理テーブル140の内容に従い、仮想化されたI/Oパスを構成する各関連ポート(各処理ノード上のI/Oアダプタ113,118とスイッチファブリック群105のポート)に対して帯域を割当て、関連するテーブルを変更する。QoS割当管理部141の詳細は後述する(図5参照)。帯域監視部142は、スイッチファブリック群105の状態情報(スイッチ情報303)を監視する。帯域監視部142の詳細は後述する(図6参照)。ここで、関連ポートは、起点となるI/Oアダプタ113から通信先(終点)のI/Oアダプタまでの装置の情報と仮想I/Oパスが利用するポートの情報で構成される。例えば、処理ノード101のI/Oアダプタ113からスイッチファブリック170,171を経由して処理ノード102のI/Oアダプタ118へ通信を行う仮想I/Oパスの場合、処理ノード101のI/Oアダプタ113の論理I/O情報205には、I/Oアダプタ113の物理I/Oポートと仮想I/Oポートの識別子と、スイッチファブリック170、171の識別子と、各スイッチファブリックで使用するポートの識別子と、終点となるI/Oアダプタ118の物理I/Oポートと仮想I/Oポートの識別子が論理I/O情報205の関連ポート情報に格納される。なお、スイッチファブリック群105の関連ポート情報は、入口のスイッチファブリックの識別子とポートの識別子及び出口となるスイッチファブリックの識別子とポートの識別子で表すことができる。   The global QoS management unit 122 of the management node 103 includes a global QoS management table 140, a QoS allocation management unit 141, and a bandwidth monitoring unit 142. The global QoS management table 140 manages state information (switch information 303) of the switch fabric group 105. Details of the global QoS management table 140 will be described later (see FIG. 4). The QoS management allocating unit 141 determines each related port (the I / O adapters 113 and 118 on each processing node and the switch fabric group 105 port) constituting the virtualized I / O path according to the contents of the global QoS management table 140. Allocate bandwidth to and change the associated table. Details of the QoS allocation management unit 141 will be described later (see FIG. 5). The bandwidth monitoring unit 142 monitors state information (switch information 303) of the switch fabric group 105. Details of the bandwidth monitoring unit 142 will be described later (see FIG. 6). Here, the related port is configured by information on a device from the I / O adapter 113 as a starting point to an I / O adapter as a communication destination (end point) and information on a port used by the virtual I / O path. For example, in the case of a virtual I / O path that communicates from the I / O adapter 113 of the processing node 101 to the I / O adapter 118 of the processing node 102 via the switch fabrics 170 and 171, the I / O adapter of the processing node 101 113 logical I / O information 205 includes identifiers of physical I / O ports and virtual I / O ports of the I / O adapter 113, identifiers of the switch fabrics 170 and 171 and identifiers of the ports used in each switch fabric. The identifiers of the physical I / O port and the virtual I / O port of the I / O adapter 118 serving as the end point are stored in the related port information of the logical I / O information 205. The related port information of the switch fabric group 105 can be expressed by an identifier of the switch fabric at the entrance, an identifier of the port, an identifier of the switch fabric as the exit, and an identifier of the port.

処理ノード101の論理I/O管理テーブル150は、I/Oアダプタ113の物理I/Oポートとその物理I/Oポート上に仮想的に構成された仮想I/Oポートの状態情報(ポート情報204、論理I/O情報205)と、仮想I/Oポートにおけるデータ転送量(帯域幅)の対応を保持する。処理ノード102及び管理ノード103の論理I/O管理テーブル151、152も上記論理I/O管理テーブル150の構成と同等である。論理I/O管理テーブル150の詳細は後述する(図5参照)。   The logical I / O management table 150 of the processing node 101 includes the state information (port information) of the physical I / O port of the I / O adapter 113 and the virtual I / O port virtually configured on the physical I / O port. 204, the correspondence between the logical I / O information 205) and the data transfer amount (bandwidth) in the virtual I / O port is held. The logical I / O management tables 151 and 152 of the processing node 102 and the management node 103 are also equivalent to the configuration of the logical I / O management table 150. Details of the logical I / O management table 150 will be described later (see FIG. 5).

I/Oアダプタ113のコントローラ16はレジスタ160を備える。このレジスタ160は、処理ノード101のI/Oアダプタ113のコンフィギュレーション空間にマップされたメモリマップドI/Oである。レジスタ160には、I/Oアダプタ113の各種設定を記録する。ここでは、各種設定のほか、I/Oアダプタ113の備える物理I/Oポートのアクティブ状態と送受信データ数等を記録する。I/Oアダプタのレジスタは他のノードも同様であり、処理ノード102のI/Oアダプタ118のコントローラ16はレジスタ161を備え、管理ノード103のI/Oアダプタ120のコントローラ26はレジスタ162を備えて、上述のようなデータを格納する。レジスタ161は処理ノード102のコンフィギュレーション空間にマップされ、レジスタ162は、管理ノード103の管理するコンフィギュレーション空間にマップされている。各レジスタは通常マップされたノードからアクセス可能であるが、管理ノード103のみ、処理ノード101および102のアドレス空間にマップされたレジスタ160、161にアクセス可能である。このとき、管理ノード103は、異なるアドレス空間にマップされたレジスタ160,161にアクセスするためのアドレス変換部(図示省略)を有する。   The controller 16 of the I / O adapter 113 includes a register 160. The register 160 is a memory mapped I / O mapped to the configuration space of the I / O adapter 113 of the processing node 101. Various settings of the I / O adapter 113 are recorded in the register 160. Here, in addition to various settings, the active state of the physical I / O port provided in the I / O adapter 113, the number of transmission / reception data, and the like are recorded. The register of the I / O adapter is the same for other nodes. The controller 16 of the I / O adapter 118 of the processing node 102 includes the register 161, and the controller 26 of the I / O adapter 120 of the management node 103 includes the register 162. Thus, the above data is stored. The register 161 is mapped to the configuration space of the processing node 102, and the register 162 is mapped to the configuration space managed by the management node 103. Each register is normally accessible from the mapped node, but only the management node 103 can access the registers 160 and 161 mapped to the address spaces of the processing nodes 101 and 102. At this time, the management node 103 has an address conversion unit (not shown) for accessing the registers 160 and 161 mapped to different address spaces.

スイッチファブリック170はスイッチファブリック群105を構成するI/Oスイッチである。スイッチファブリック171もスイッチファブリック170と同様の構成である。スイッチファブリック170の設定は、レジスタ180を介して行なう。レジスタ180は、管理ノード103がアクセス可能なアドレス空間(コンフィギュレーション空間)にマップされている。レジスタ180には、たとえば、各スイッチファブリックの物理I/Oポートのアクティブ状態や、物理I/Oポート当たりの送受信データ数などが記録されている。   The switch fabric 170 is an I / O switch that constitutes the switch fabric group 105. The switch fabric 171 has the same configuration as the switch fabric 170. Setting of the switch fabric 170 is performed via the register 180. The register 180 is mapped to an address space (configuration space) accessible by the management node 103. The register 180 records, for example, the active state of the physical I / O port of each switch fabric, the number of transmission / reception data per physical I / O port, and the like.

図3は、本発明の第1の実施の形態におけるローカルQoS管理テーブル130(133)の構成図である。ローカルQoS管理テーブル130は、ローカルQoS管理部111を搭載する処理ノード101と処理ノード101上のI/Oアダプタ113のローカルな状態情報を管理する。ここでは、処理ノード101にはI/Oアダプタ113のみが搭載される例を示しているが、複数のI/Oアダプタが搭載されていてもよい。ローカルQoS管理テーブル130は、ファブリック情報201、QoSサービス状態202、ノード情報203、ポート情報204、論理I/O情報205を保持する。ファブリック情報201は、スイッチファブリック群105において処理ノード101のオーナーとなるスイッチファブリックの識別子である。ここで、オーナーとはスイッチファブリック群105の中で処理ノード101の起点となるスイッチファブリックを示す。   FIG. 3 is a configuration diagram of the local QoS management table 130 (133) according to the first embodiment of this invention. The local QoS management table 130 manages local state information of the processing node 101 on which the local QoS management unit 111 is mounted and the I / O adapter 113 on the processing node 101. Here, an example in which only the I / O adapter 113 is mounted on the processing node 101 is shown, but a plurality of I / O adapters may be mounted. The local QoS management table 130 holds fabric information 201, QoS service status 202, node information 203, port information 204, and logical I / O information 205. The fabric information 201 is an identifier of the switch fabric that becomes the owner of the processing node 101 in the switch fabric group 105. Here, the owner indicates a switch fabric that is the starting point of the processing node 101 in the switch fabric group 105.

QoSサービス状態202は、グローバルQoS管理部122の起動状態を示す。すなわち、処理ノード101を管理する管理ノード103のグローバルQoS管理部122が起動しているか否かを示す値がQoSサービス状態202に格納される。   The QoS service state 202 indicates the activation state of the global QoS management unit 122. That is, a value indicating whether or not the global QoS management unit 122 of the management node 103 that manages the processing node 101 is activated is stored in the QoS service state 202.

ノード情報203は、ローカルQoS管理部111を搭載する処理ノード101の識別子と、その処理ノードに搭載したI/Oアダプタ113が有する物理I/Oポートの数を格納する。なお、I/Oアダプタが複数ある場合には、I/Oアダプタの識別子毎に物理I/Oポート数を格納すればよい。   The node information 203 stores the identifier of the processing node 101 on which the local QoS management unit 111 is mounted and the number of physical I / O ports included in the I / O adapter 113 mounted on the processing node. If there are a plurality of I / O adapters, the number of physical I / O ports may be stored for each identifier of the I / O adapter.

ポート情報204は、I/Oアダプタ113の物理I/Oポートの状態(使用中)やその最大帯域(転送速度の最大値)と、物理I/Oポートに論理的(仮想的)に生成された仮想I/Oポート数を格納する。処理ノード101のI/Oアダプタ113が複数の物理I/Oポートを有する場合には、物理I/Oポート数に対応したポート情報204を管理する。   The port information 204 is generated logically (virtually) in the physical I / O port state (in use) of the I / O adapter 113, its maximum bandwidth (maximum transfer rate), and the physical I / O port. The number of virtual I / O ports stored is stored. When the I / O adapter 113 of the processing node 101 has a plurality of physical I / O ports, the port information 204 corresponding to the number of physical I / O ports is managed.

論理I/O情報205は、ローカルQoS管理部111を搭載する処理ノード101上のI/Oアダプタ113の物理I/Oポートに仮想的に生成された仮想I/Oポートごとに、仮想I/Oポートの識別子と、プロトコルの識別子と、送信元ノードの識別子と、転送先のノード識別子と、ルーティング情報と、転送するデータの優先制御情報、関連ポート数、関連ポート情報などを管理する。ここで、関連ポート数は仮想I/Oパスを構成したエンド・ツー・エンドのデータ転送経路で通過する物理I/Oポート数であり、関連ポート情報は、その関連ポートの位置情報と帯域制御情報である。   The logical I / O information 205 is generated for each virtual I / O port virtually generated in the physical I / O port of the I / O adapter 113 on the processing node 101 on which the local QoS management unit 111 is mounted. It manages an O port identifier, a protocol identifier, a transmission source node identifier, a transfer destination node identifier, routing information, priority control information of data to be transferred, the number of related ports, related port information, and the like. Here, the number of related ports is the number of physical I / O ports that pass through the end-to-end data transfer path constituting the virtual I / O path, and the related port information includes the position information of the related ports and bandwidth control. Information.

図4は、本発明の第1の実施の形態におけるグローバルQoS管理テーブル140の構成図である。グローバルQoS管理テーブル140は、スイッチファブリック群105の全体の状態情報、情報処理システム100にエンド・ツー・エンドで構成された仮想化されたI/O(仮想I/Oパス)の状態情報を保持する。なお、エンド・ツー・エンドとは、例えば、処理ノード101のI/Oアダプタ113の仮想I/Oポートから処理ノード102のI/Oアダプタ118の仮想I/Oポートまでの経路を指す。グローバルQoS管理テーブル140は、ファブリック情報301、ノード情報302、スイッチ情報303、論理I/O情報304を備え、各情報301〜304に格納されたポインタがメインメモリ23上のデータテーブルの格納先を指し示す。   FIG. 4 is a configuration diagram of the global QoS management table 140 according to the first embodiment of this invention. The global QoS management table 140 holds state information of the entire switch fabric group 105 and state information of virtualized I / O (virtual I / O path) configured end-to-end in the information processing system 100. To do. Note that end-to-end refers to a path from the virtual I / O port of the I / O adapter 113 of the processing node 101 to the virtual I / O port of the I / O adapter 118 of the processing node 102, for example. The global QoS management table 140 includes fabric information 301, node information 302, switch information 303, and logical I / O information 304. The pointers stored in the information 301 to 304 indicate the storage location of the data table on the main memory 23. Point to.

ファブリック情報301(310)はスイッチファブリックの全体情報であり、本発明の第1の実施の形態では、スイッチファブリック群105に存在する処理ノード数と、スイッチファブリック数、ファブリックオーナの識別子、情報処理システム100に生成された仮想I/Oパス数を含む。本発明の第1の実施の形態では、ファブリック情報301は、ファブリック情報テーブル310で管理されており、グローバルQoS管理テーブル140はファブリック情報テーブル310へのポインタを管理している。   The fabric information 301 (310) is the entire information of the switch fabric. In the first embodiment of the present invention, the number of processing nodes, the number of switch fabrics, the identifier of the fabric owner, the information processing system existing in the switch fabric group 105 100 includes the number of virtual I / O paths generated. In the first embodiment of this invention, the fabric information 301 is managed by the fabric information table 310, and the global QoS management table 140 manages a pointer to the fabric information table 310.

ノード情報302は、情報処理システム100に存在する全ての処理ノードの情報を管理する。本発明の第1の実施の形態では、ノード情報302は、ノード情報テーブル320で管理されており、グローバルQoS管理テーブル140は、ノード識別子とそれに対応するノード情報テーブル320のポインタを管理する。ノード情報テーブル320は、ノード識別子ごとに、ローカルQoS管理部の稼動状態、ノードに搭載されるI/Oアダプタの物理I/Oポート数、物理I/Oポートごとの状態情報、物理I/Oポートに生成された仮想I/Oポートの状態情報を保持する。ここで、物理I/Oポートの状態情報と仮想I/Oポートの状態情報は、各ポートの識別子と使用状態を示す値が保持される。   The node information 302 manages information on all processing nodes existing in the information processing system 100. In the first embodiment of the present invention, the node information 302 is managed by the node information table 320, and the global QoS management table 140 manages the node identifier and the corresponding pointer of the node information table 320. The node information table 320 includes, for each node identifier, the operating status of the local QoS management unit, the number of physical I / O ports of the I / O adapter installed in the node, status information for each physical I / O port, and physical I / O. The status information of the virtual I / O port generated in the port is held. Here, the status information of the physical I / O port and the status information of the virtual I / O port hold an identifier of each port and a value indicating the usage status.

スイッチ情報303は、スイッチ情報テーブル330に保持され、スイッチファブリック群105に存在する全てのスイッチファブリックの状態情報を管理する。本発明の第1の実施の形態では、スイッチ情報303は、スイッチ情報テーブル330で管理されており、グローバルQoS管理テーブル140は、スイッチファブリック170,171のスイッチ識別子と、この識別子に対応するスイッチ情報テーブル330へのポインタを管理する。スイッチ情報テーブル330は、スイッチファブリックの識別子毎に管理され、個々のテーブルはスイッチファブリックの持つ物理I/Oポート数、物理I/Oポートの状態情報(使用状態)、物理I/Oポートに生成された仮想I/Oポートの状態情報(使用状態)を保持する。   The switch information 303 is held in the switch information table 330 and manages state information of all switch fabrics existing in the switch fabric group 105. In the first embodiment of this invention, the switch information 303 is managed by the switch information table 330, and the global QoS management table 140 is the switch identifier of the switch fabrics 170 and 171 and the switch information corresponding to this identifier. A pointer to the table 330 is managed. The switch information table 330 is managed for each switch fabric identifier, and individual tables are generated for the number of physical I / O ports of the switch fabric, physical I / O port status information (usage status), and physical I / O ports. The status information (usage status) of the virtual I / O port that has been set is retained.

論理I/O情報304は、情報処理システム100に生成された仮想I/Oパス(仮想I/Oパス)の構成情報と状態情報を管理する。これらの情報は仮想I/Oパスごとに論理I/O情報テーブル340で管理される。論理I/O情報テーブル340は、各仮想I/Oパスのプロトコル識別子、送信元ノード識別子、送信先ノード識別子、ルーティング情報、優先制御情報、帯域情報、仮想I/Oパスを構成する関連ポート数、関連ポート情報を保持する。   The logical I / O information 304 manages configuration information and status information of a virtual I / O path (virtual I / O path) generated in the information processing system 100. These pieces of information are managed in the logical I / O information table 340 for each virtual I / O path. The logical I / O information table 340 includes a protocol identifier, a transmission source node identifier, a transmission destination node identifier, routing information, priority control information, bandwidth information, and the number of related ports constituting the virtual I / O path for each virtual I / O path. , Hold related port information.

仮想I/Oパスは送信元ノードと送信先ノード間に構成されるエンド・ツー・エンドの仮想I/Oパスであるため、複数のノードと複数のスイッチファブリックの物理I/Oポートを利用する。この仮想I/Oパスを構成するのに利用する複数ノードと複数のスイッチファブリックの物理I/Oポートを関連ポートと呼ぶ。   Since the virtual I / O path is an end-to-end virtual I / O path configured between the transmission source node and the transmission destination node, the physical I / O ports of a plurality of nodes and a plurality of switch fabrics are used. . The physical I / O ports of a plurality of nodes and a plurality of switch fabrics used to configure this virtual I / O path are referred to as related ports.

図5は、本発明の第1の実施の形態における処理ノード101の論理I/O管理テーブル150の構成図である。論理I/O管理テーブル150は、処理ノード101のI/Oアダプタ113に構成された仮想I/Oポートの識別子と、物理I/Oポートの識別子と、仮想I/Oポートにおけるデータ転送量を保持する。論理I/O管理テーブル150は、仮想I/Oパス識別子401、物理I/Oポート識別子402、データ転送量403を備える。仮想I/Oパス識別子401は、情報処理システム100において仮想的に構成されたI/Oパスの識別子であり、情報処理システム100の中で一意である。   FIG. 5 is a configuration diagram of the logical I / O management table 150 of the processing node 101 according to the first embodiment of this invention. The logical I / O management table 150 indicates the identifier of the virtual I / O port configured in the I / O adapter 113 of the processing node 101, the identifier of the physical I / O port, and the data transfer amount in the virtual I / O port. Hold. The logical I / O management table 150 includes a virtual I / O path identifier 401, a physical I / O port identifier 402, and a data transfer amount 403. The virtual I / O path identifier 401 is an identifier of an I / O path virtually configured in the information processing system 100 and is unique within the information processing system 100.

図5では、I/Oアダプタ113の物理I/Oポート0に構成された仮想化されたI/Oポートが2つであり、それぞれ、仮想I/Oパス識別子が1と4であることを示している。その他の仮想I/Oパス識別子は、I/Oアダプタ113以外に構成されているため、処理ノード101上の論理I/O管理部112では管理していない。   In FIG. 5, there are two virtualized I / O ports configured on the physical I / O port 0 of the I / O adapter 113, and the virtual I / O path identifiers are 1 and 4, respectively. Show. Other virtual I / O path identifiers are configured other than the I / O adapter 113 and are not managed by the logical I / O management unit 112 on the processing node 101.

物理I/Oポート識別子402は、I/Oアダプタ113が有する物理I/Oポートの識別子であり、I/Oアダプタ113が物理的に2ポートを持つ場合には、各物理ポートに対して識別子が付与される。図5では、識別子「0」を持つ物理I/Oポートのみ使用されていることを示している。データ転送量403は、物理I/Oポート識別子で管理される物理I/Oポートに構成された仮想I/Oポート上に転送されたデータ転送量をパケット数で保持する。図5では、仮想I/Oパス識別子1を持つ仮想I/Oポートにおけるデータ転送量はX0パケットであり、仮想I/Oパス識別子4を持つ仮想I/Oポートにおけるデータ転送量はX2パケットである。なお、データ転送量403は、所定時間内に送受信したデータ及びコマンドのバイト数やビット数を用いることができる。   The physical I / O port identifier 402 is an identifier of a physical I / O port included in the I / O adapter 113. When the I / O adapter 113 has two physical ports, an identifier is assigned to each physical port. Is granted. FIG. 5 shows that only the physical I / O port having the identifier “0” is used. The data transfer amount 403 holds the data transfer amount transferred on the virtual I / O port configured as the physical I / O port managed by the physical I / O port identifier as the number of packets. In FIG. 5, the data transfer amount in the virtual I / O port having the virtual I / O path identifier 1 is X0 packet, and the data transfer amount in the virtual I / O port having the virtual I / O path identifier 4 is X2 packet. is there. As the data transfer amount 403, the number of bytes and bits of data and commands transmitted and received within a predetermined time can be used.

また、仮想I/Oパス識別子401が「1」の仮想I/Oポートに着目した場合、この仮想I/Oポートが設定された物理I/Oポート「0」上の他の仮想I/Oポート「4」が関連ポートとなる。   When attention is paid to a virtual I / O port whose virtual I / O path identifier 401 is “1”, another virtual I / O on the physical I / O port “0” in which this virtual I / O port is set. Port “4” is the associated port.

図6は、本発明の第1の実施の形態における管理ノード103のQoS割当管理部141のブロック図である。QoS割当管理部141は、グローバルQoS管理部122の処理機能の一つであり、管理コンソール104からの指令に基づいて仮想I/Oパスの生成、削除、割当、表示を行なう。QoS割当管理部141は、仮想I/Oパス生成部501、仮想I/Oパス削除部502、仮想I/Oパス変更部503、仮想I/Oパス表示部504を備える。   FIG. 6 is a block diagram of the QoS assignment management unit 141 of the management node 103 according to the first embodiment of this invention. The QoS allocation management unit 141 is one of the processing functions of the global QoS management unit 122, and generates, deletes, allocates, and displays a virtual I / O path based on a command from the management console 104. The QoS allocation management unit 141 includes a virtual I / O path generation unit 501, a virtual I / O path deletion unit 502, a virtual I / O path change unit 503, and a virtual I / O path display unit 504.

仮想I/Oパス生成部501は、仮想I/Oパス選択部510と、仮想I/Oパス登録部511を備える。仮想I/Oパス生成部501は、管理コンソール104経由の仮想I/Oパス生成要求を受けると、仮想I/Oパス選択部510により、仮想I/Oパスを構成する最短となる経路を選択する。   The virtual I / O path generation unit 501 includes a virtual I / O path selection unit 510 and a virtual I / O path registration unit 511. When the virtual I / O path generation unit 501 receives a virtual I / O path generation request via the management console 104, the virtual I / O path selection unit 510 selects the shortest path constituting the virtual I / O path. To do.

また、仮想I/Oパス登録部511が、グローバルQoS管理テーブル140の情報を参照して、仮想I/Oパス選択部510で選択した最短経路の各関連ポートに対し、新規仮想I/Oパスを設定可能かどうかをチェックし、設定可能である場合には、選択した最短経路を構成する関連ポートに対して仮想I/Oパスを設定して、情報処理システム100に仮想化されたI/Oパスを生成する。最短となる経路は、たとえば仮想I/Oパスを構成するスイッチファブリックの段数が最も少なくなる経路である。仮想I/Oパス生成要求は、送信元ノードの識別子、送信先ノードの識別子、仮想I/Oパスの設定帯域、優先度を含む。仮想I/Oパス生成処理のフローは後述する(図9)。   Further, the virtual I / O path registration unit 511 refers to the information in the global QoS management table 140, and creates a new virtual I / O path for each related port of the shortest path selected by the virtual I / O path selection unit 510. Is set, and if it can be set, a virtual I / O path is set for the related port constituting the selected shortest route, and the virtualized I / O in the information processing system 100 is set. An O path is generated. The shortest route is, for example, a route in which the number of switch fabric stages constituting the virtual I / O path is the smallest. The virtual I / O path generation request includes the identifier of the transmission source node, the identifier of the transmission destination node, the set bandwidth of the virtual I / O path, and the priority. The flow of the virtual I / O path generation process will be described later (FIG. 9).

仮想I/Oパス削除部502は、管理コンソール104等の外部からの仮想I/Oパス削除要求を受け付けて、情報処理システム100に既に構成された仮想I/Oパスを削除する。   The virtual I / O path deletion unit 502 receives a virtual I / O path deletion request from the outside such as the management console 104 and deletes a virtual I / O path already configured in the information processing system 100.

仮想I/Oパス変更部503は、管理コンソール104等の外部からの仮想I/Oパス変更要求を受け付けて、情報処理システム100に既に構成された仮想I/Oパスの設定帯域や優先度を変更する。   The virtual I / O path change unit 503 receives a virtual I / O path change request from the outside such as the management console 104, and sets the set bandwidth and priority of the virtual I / O path already configured in the information processing system 100. change.

仮想I/Oパス表示部504は、情報処理システム100に構成されている全ての仮想I/Oパスあるいは要求の対象とする仮想I/Oパスの状態情報を管理コンソール104等へ表示する。   The virtual I / O path display unit 504 displays all the virtual I / O paths configured in the information processing system 100 or the status information of the virtual I / O path to be requested on the management console 104 or the like.

図7は、本発明の第1の実施の形態における管理ノード103の帯域監視部142の構成図である。帯域監視部142は、グローバルQoS管理部122の処理機能の一つである。帯域監視部142は、ローカルQoS管理情報受信部(ローカル情報取得部)601、ローカルQoS稼動確認部602、スイッチ情報取得部603、グローバルQoS情報保持部604、グローバルQoS情報送信部605を備える。   FIG. 7 is a configuration diagram of the bandwidth monitoring unit 142 of the management node 103 according to the first embodiment of this invention. The bandwidth monitoring unit 142 is one of the processing functions of the global QoS management unit 122. The bandwidth monitoring unit 142 includes a local QoS management information reception unit (local information acquisition unit) 601, a local QoS operation confirmation unit 602, a switch information acquisition unit 603, a global QoS information holding unit 604, and a global QoS information transmission unit 605.

ローカルQoS管理情報受信部601は、情報処理システム100を構成する処理ノード101、102のうち、ローカルQoS管理処理が稼動している処理ノードから、ローカルQoS管理情報を受信する。受信するローカルQoS管理情報としては、各処理ノードで管理されているローカルQoS管理テーブル130,133のうち変更があった更新情報や、処理ノードの稼動率である。なお、処理ノードの稼動率は、OS350、351が取得したCPU10の使用率(負荷率)を用いることができる。また、稼動率としてはCPU10の使用率の他に、仮想I/Oポートの利用率(実際に利用している帯域/設定帯域)などを用いることができ、複数の仮想I/Oポートの利用率の平均値などを処理ノード毎の仮想I/Oポートの利用率としてもよい。   The local QoS management information receiving unit 601 receives local QoS management information from a processing node in which the local QoS management processing is operating, among the processing nodes 101 and 102 constituting the information processing system 100. The local QoS management information to be received includes update information that has been changed in the local QoS management tables 130 and 133 managed by each processing node, and the operating rate of the processing node. Note that the utilization rate (load factor) of the CPU 10 acquired by the OSs 350 and 351 can be used as the operation rate of the processing node. Further, as the operation rate, in addition to the usage rate of the CPU 10, the usage rate of the virtual I / O port (the bandwidth actually used / the set bandwidth) can be used, and the usage of a plurality of virtual I / O ports can be used. The average value of the rate may be used as the virtual I / O port usage rate for each processing node.

ローカルQoS稼動確認部602は、グローバルQoS管理テーブル140を参照して、各ローカルQoS管理部111,116の稼動状況を確認する。具体的には、図4に示すグローバルQoS管理テーブル140のノード情報302に記録されているローカルQoS管理部111およびローカルQoS管理部116の稼動状況を確認する。これにより、各処理ノードが正常に動作していることを示すハートビートとして、管理ノード103が管理する処理ノードの動作状態を把握することができる。   The local QoS operation confirmation unit 602 refers to the global QoS management table 140 and confirms the operation status of each local QoS management unit 111, 116. Specifically, the operating status of the local QoS management unit 111 and the local QoS management unit 116 recorded in the node information 302 of the global QoS management table 140 shown in FIG. 4 is confirmed. As a result, the operating state of the processing node managed by the management node 103 can be grasped as a heartbeat indicating that each processing node is operating normally.

スイッチ情報取得部603は、情報処理システム100を構成するスイッチファブリック170、171の上述のスイッチ情報を取得する。なお、このスイッチ情報取得部603は、管理ノード103からの指令があったときにスイッチファブリック群105全体のスイッチ情報を取得する。   The switch information acquisition unit 603 acquires the above-described switch information of the switch fabrics 170 and 171 constituting the information processing system 100. The switch information acquisition unit 603 acquires switch information of the entire switch fabric group 105 when a command is issued from the management node 103.

グローバルQoS情報保持部604は、グローバルQoS管理部122が管理するグローバルQoS管理テーブル140に、ローカルQoS稼動確認部602とスイッチ情報取得部603により取得した情報に変更があればその内容を保持する。   The global QoS information holding unit 604 holds the contents of the global QoS management table 140 managed by the global QoS management unit 122 if the information acquired by the local QoS operation confirmation unit 602 and the switch information acquisition unit 603 is changed.

グローバルQoS情報送信部605は、グローバルQoS管理テーブル140で管理されるスイッチファブリック群105や処理ノードの構成情報に変更があった場合に、変更内容を全てのローカルQoS管理部111,116に通知する。   When there is a change in the configuration information of the switch fabric group 105 or processing node managed by the global QoS management table 140, the global QoS information transmission unit 605 notifies the change contents to all the local QoS management units 111 and 116. .

スイッチ情報取得部603は、さらに、ノード選択部610、取得要求送付部611、取得応答受信部612を備える。ノード選択部610は、グローバルQoS管理部122がグローバルQoS管理テーブル140に保持された処理ノードの状態情報をチェックし、低稼動率の処理ノードを選択する。ノード選択部610が低稼動率の処理ノードを選択することで、スイッチ情報取得処理がそのノードの他の処理、たとえばアプリケーション処理やローカルQoS管理処理に及ぼす影響を最小化する。なお、処理ノードの選択は、例えば、OS350、351が取得したCPU10の使用率を読み込んで、この使用率が最も小さいもの、あるいは、使用率が所定の閾値未満のものを選択すればよい。なお、稼動率としては、各処理ノードの仮想I/Oポートの帯域の設定値と、実際に利用した帯域(最大帯域)の比率の平均値を稼動率として用いてもよい。   The switch information acquisition unit 603 further includes a node selection unit 610, an acquisition request transmission unit 611, and an acquisition response reception unit 612. The node selection unit 610 checks the status information of the processing node held in the global QoS management table 140 by the global QoS management unit 122 and selects a processing node with a low operation rate. The node selection unit 610 selects a processing node with a low operation rate, thereby minimizing the influence of the switch information acquisition processing on other processing such as application processing and local QoS management processing. For example, the processing node may be selected by reading the usage rate of the CPU 10 acquired by the OSs 350 and 351 and selecting the one with the lowest usage rate or the usage rate less than a predetermined threshold. As the operation rate, an average value of the ratio between the set value of the virtual I / O port bandwidth of each processing node and the actually used bandwidth (maximum bandwidth) may be used as the operation rate.

取得要求送付部612は、ノード選択部610にて選択した低稼動率の処理ノードに対してスイッチ情報の取得要求を送付する。取得応答受信部613は、取得要求を送信した処理ノードから取得要求に対する応答(スイッチ情報)を受け付ける。   The acquisition request sending unit 612 sends a switch information acquisition request to the processing node with the low operation rate selected by the node selection unit 610. The acquisition response reception unit 613 receives a response (switch information) to the acquisition request from the processing node that has transmitted the acquisition request.

以上のように、管理ノード103の帯域監視部142は、各処理ノード101,102からローカルQoS管理部111、116が管理する処理ノードのローカルQoS管理テーブル130,133を受信し、各処理ノード101,102のI/Oアダプタに設定されている仮想I/Oポートの帯域などの情報を取得してグローバルQoS管理テーブル140を更新する。また、帯域監視部142は、グローバルQoS管理テーブル140が更新されたときに各処理ノード101,102へ更新された情報を通知し、管理ノード103で設定した仮想I/Oパスに対する変更を伝達する。そして、帯域監視部142は、複数の処理ノードのうち低稼動率の処理ノードを選択してスイッチ情報の取得要求を発行し、スイッチファブリック群105のスイッチ情報を収集させることができる。   As described above, the bandwidth monitoring unit 142 of the management node 103 receives the local QoS management tables 130 and 133 of the processing nodes managed by the local QoS management units 111 and 116 from the respective processing nodes 101 and 102, and each processing node 101 , 102, the information such as the bandwidth of the virtual I / O port set in the I / O adapter is acquired, and the global QoS management table 140 is updated. Further, the bandwidth monitoring unit 142 notifies the processing nodes 101 and 102 of the updated information when the global QoS management table 140 is updated, and transmits a change to the virtual I / O path set by the management node 103. . Then, the bandwidth monitoring unit 142 can collect a switch information of the switch fabric group 105 by selecting a processing node having a low operation rate from a plurality of processing nodes and issuing a switch information acquisition request.

図8は、本発明の第1の実施の形態における処理ノード101の帯域監視部132の構成図である。帯域監視部132は、ローカルQoS管理部111の機能の一部である。処理ノード102のローカルQoS管理部116の帯域監視部135も、処理ノード101の帯域監視部132と同様な構成である。   FIG. 8 is a configuration diagram of the bandwidth monitoring unit 132 of the processing node 101 according to the first embodiment of this invention. The bandwidth monitoring unit 132 is a part of the function of the local QoS management unit 111. The bandwidth monitoring unit 135 of the local QoS management unit 116 of the processing node 102 has the same configuration as the bandwidth monitoring unit 132 of the processing node 101.

帯域監視部132は、論理I/O帯域算出部701、レジスタ情報取得部702、ローカルQoS情報保持部703、ローカルQoS情報送信部704、グローバルQoS稼動確認部705、グローバルQoS情報受信部706、スイッチ情報取得部707を備える。   The bandwidth monitoring unit 132 includes a logical I / O bandwidth calculation unit 701, a register information acquisition unit 702, a local QoS information holding unit 703, a local QoS information transmission unit 704, a global QoS operation confirmation unit 705, a global QoS information reception unit 706, a switch An information acquisition unit 707 is provided.

論理I/O帯域算出部701は、I/Oアダプタ113の物理I/Oポートに設定された仮想I/Oポート毎の帯域(転送速度)を算出する。レジスタ情報取得部702は、I/Oアダプタ113にアクセスし、I/Oアダプタ113のレジスタ160の状態情報(アダプタ情報)を取得する。なお、アダプタ情報は、I/Oアダプタ113の物理I/Oポートの識別子と、物理I/Oポートに設定された仮想I/Oポートの識別子と、仮想I/Oポートの利用状態を示す値を含み、ローカルQoS管理テーブル130,133のポート情報204、論理I/O情報205に格納される。   The logical I / O bandwidth calculation unit 701 calculates a bandwidth (transfer rate) for each virtual I / O port set as a physical I / O port of the I / O adapter 113. The register information acquisition unit 702 accesses the I / O adapter 113 and acquires state information (adapter information) of the register 160 of the I / O adapter 113. The adapter information includes a physical I / O port identifier of the I / O adapter 113, a virtual I / O port identifier set for the physical I / O port, and a value indicating the usage status of the virtual I / O port. And stored in the port information 204 and the logical I / O information 205 of the local QoS management tables 130 and 133.

ローカルQoS情報保持部703は、論理I/O帯域算出部701およびレジスタ情報取得部702により取得した情報(帯域とアダプタ情報)をローカルQoS管理テーブル130に保持する。   The local QoS information holding unit 703 holds the information (bandwidth and adapter information) acquired by the logical I / O band calculation unit 701 and the register information acquisition unit 702 in the local QoS management table 130.

ローカルQoS情報送信部704は、ローカルQoS情報保持部703にて更新したローカルQoS管理テーブル130の情報を管理ノード103のグローバルQoS管理部122に送付する。グローバルQoSサービス稼動確認部705は、管理ノード103のグローバルQoS管理部122の稼動状況を確認する。   The local QoS information transmission unit 704 sends the information of the local QoS management table 130 updated by the local QoS information holding unit 703 to the global QoS management unit 122 of the management node 103. The global QoS service operation confirmation unit 705 confirms the operation status of the global QoS management unit 122 of the management node 103.

グローバルQoS情報取得部706は、管理ノード103のグローバルQoS管理テーブル140に保持された情報のうち更新された情報を取得する。すなわち、管理ノード103のグローバルQoS管理テーブル140の情報のうち、当該処理ノード101に関する情報(設定値)が更新されていれば、グローバルQoS情報取得部706がローカルQoS管理テーブル130を更新する。これにより、管理ノード103が設定した仮想I/Oポートの設定などを各処理ノード101,102に伝達する。   The global QoS information acquisition unit 706 acquires updated information among the information held in the global QoS management table 140 of the management node 103. That is, if the information (setting value) regarding the processing node 101 among the information of the global QoS management table 140 of the management node 103 has been updated, the global QoS information acquisition unit 706 updates the local QoS management table 130. As a result, the virtual I / O port settings set by the management node 103 are transmitted to the processing nodes 101 and 102.

スイッチ情報取得部707は、取得判定部720と、スイッチ情報取得処理部721を備える。取得判定部720は、管理ノード103のグローバルQoS管理部122の帯域監視部142から送付されるスイッチ状態情報取得要求の有無をチェックし、スイッチ状態取得要求が有る場合には、スイッチ情報取得処理部721を実行し、スイッチファブリック群105の全てのスイッチ情報を取得し、スイッチ情報の取得結果を管理ノード103の帯域監視部142に返送する。   The switch information acquisition unit 707 includes an acquisition determination unit 720 and a switch information acquisition processing unit 721. The acquisition determination unit 720 checks whether or not there is a switch state information acquisition request sent from the bandwidth monitoring unit 142 of the global QoS management unit 122 of the management node 103. If there is a switch state acquisition request, the acquisition determination unit 720 721 is executed, all switch information of the switch fabric group 105 is acquired, and the switch information acquisition result is returned to the bandwidth monitoring unit 142 of the management node 103.

スイッチ情報取得処理部721は、スイッチファブリック群105を構成するスイッチファブリック170,171のレジスタ160,161にアクセスし、スイッチファブリック群105を構成する全てのスイッチファブリック群105の全ポートのスイッチ情報として取得する。スイッチ情報は、上述のように物理I/Oポートと仮想I/Oポートの識別子と状態情報(使用状態など)を含む。   The switch information acquisition processing unit 721 accesses the registers 160 and 161 of the switch fabrics 170 and 171 configuring the switch fabric group 105 and acquires the switch information of all ports of all the switch fabric groups 105 configuring the switch fabric group 105. To do. As described above, the switch information includes identifiers of physical I / O ports and virtual I / O ports, and status information (usage status, etc.).

論理I/O帯域算出部701は、さらに、差分時刻算出部710と、論理I/O情報取得部711、論理I/O帯域算出部712、論理I/O情報リセット部713、前監視時刻714を供える。   The logical I / O band calculation unit 701 further includes a difference time calculation unit 710, a logical I / O information acquisition unit 711, a logical I / O band calculation unit 712, a logical I / O information reset unit 713, and a previous monitoring time 714. Serve.

差分時刻算出部710は、現在の時刻を取得し、前監視時刻714に記録された前回監視時の時刻との差分を計算する。論理I/O情報取得部711は、処理ノード101上の論理I/O管理部112にアクセスし、処理ノード101の論理I/O管理テーブル150に保持された仮想I/Oパス毎のデータ転送量403を取得する。   The difference time calculation unit 710 obtains the current time and calculates the difference from the previous monitoring time recorded in the previous monitoring time 714. The logical I / O information acquisition unit 711 accesses the logical I / O management unit 112 on the processing node 101 and transfers data for each virtual I / O path held in the logical I / O management table 150 of the processing node 101. The quantity 403 is acquired.

論理I/O帯域算出部712は、差分時刻算出部710で算出した差分時刻と、論理I/O情報取得部711で取得した仮想I/Oパス毎のデータ転送量を用いて仮想I/Oポートとスイッチファブリック群105のポート毎の帯域(転送速度)を算出する。論理I/O情報リセット部713は、論理I/O管理テーブル150に記録された仮想I/Oパス毎のデータ転送量をリセットする。この処理により、仮想I/Oポート毎の単位時間当たりの帯域(転送速度)が算出される。なお、仮想I/Oパス毎のデータ転送量のリセット時には、前監視時刻714を現在の時刻に更新する。   The logical I / O bandwidth calculation unit 712 uses the difference time calculated by the difference time calculation unit 710 and the data transfer amount for each virtual I / O path acquired by the logical I / O information acquisition unit 711. The bandwidth (transfer rate) for each port of the port and switch fabric group 105 is calculated. The logical I / O information reset unit 713 resets the data transfer amount for each virtual I / O path recorded in the logical I / O management table 150. By this processing, the bandwidth (transfer rate) per unit time for each virtual I / O port is calculated. When the data transfer amount for each virtual I / O path is reset, the previous monitoring time 714 is updated to the current time.

図9は、本発明の第1の実施の形態における管理ノード103のグローバルQoS管理部122の仮想I/Oパス生成部501で実行される仮想I/Oパスの生成処理フローを示す図である。仮想I/Oパス生成部501は管理コンソール104上の管理プログラムあるいは処理ノード上の管理アプリケーションからスイッチファブリック群105を介して仮想I/Oパス生成要求を受けると、仮想I/Oパス生成処理を開始する(ステップ801)。ここで、仮想I/Oパス生成要求は、新たな仮想I/Oパスの送信元識別子と、新たな仮想I/Oパスの送信先識別子、新たな仮想I/Oパスの設定帯域(転送速度)、新たな仮想I/Oパスの優先度を引数として含む。   FIG. 9 is a diagram illustrating a virtual I / O path generation processing flow executed by the virtual I / O path generation unit 501 of the global QoS management unit 122 of the management node 103 according to the first embodiment of this invention. . When the virtual I / O path generation unit 501 receives a virtual I / O path generation request via the switch fabric group 105 from a management program on the management console 104 or a management application on the processing node, the virtual I / O path generation processing is performed. Start (step 801). Here, the virtual I / O path generation request includes a new virtual I / O path transmission source identifier, a new virtual I / O path transmission destination identifier, a new virtual I / O path setting bandwidth (transfer rate). ), The priority of the new virtual I / O path is included as an argument.

ステップ802では、仮想I/Oパス生成要求の引数をデコードし、要求に含まれる送信元識別子と送信先識別子から、新たな仮想I/Oパスで利用する処理ノードとスイッチファブリックの関連ポートを決定する(ステップ802)。ここで、関連ポートを決定する方法としては、最短経路を構成するように選択する。あるいは複数の経路の候補の中から選択してもよい。すなわち、仮想I/Oパス生成部501は受信した仮想I/Oパスの生成要求に含まれる、仮想I/Oパスの起点と終点から最短の経路を選択し、選択した経路上のポートを関連ポートとして抽出する。   In step 802, the argument of the virtual I / O path generation request is decoded, and the processing node used in the new virtual I / O path and the related port of the switch fabric are determined from the transmission source identifier and transmission destination identifier included in the request. (Step 802). Here, the method for determining the related port is selected so as to form the shortest path. Alternatively, it may be selected from a plurality of route candidates. That is, the virtual I / O path generation unit 501 selects the shortest route from the start and end points of the virtual I / O path included in the received virtual I / O path generation request, and relates the ports on the selected route. Extract as a port.

次に、仮想I/Oパス上の関連ポートを決定した後、グローバルQoS管理テーブル140を検索して、それぞれの関連ポートについて、要求された仮想I/Oパスの帯域を新規に割り当てられるかどうかをチェックする(ステップ803)。この処理は、例えば、各関連ポートに設定された帯域と、新たに設定する仮想I/Oパスの帯域を加算した値が、仮想I/Oパス上の各ポートの物理的な帯域以内であれば新たな仮想I/Oパスを設定可能と判定することができる。あるいは、各関連ポートが利用している帯域と、新たな仮想I/Oパスの帯域を加算した値が、各ポートの物理的な帯域以内であれば新たな仮想I/Oパスを設定可能と判定してもよい。この場合、関連ポートが使用した最大の帯域と新たな仮想I/Oパスの帯域を加えた値を、仮想I/Oパス上の各ポートの物理的な帯域と比較するのが望ましい。すべての関連ポートについて、割当可能である場合には、ステップ805の処理を行い、割当不可能である場合にはステップ810の処理を行なう。   Next, after determining the related port on the virtual I / O path, the global QoS management table 140 is searched to determine whether or not the bandwidth of the requested virtual I / O path can be newly allocated for each related port. Is checked (step 803). This processing is performed, for example, when the bandwidth set for each related port and the newly added virtual I / O path bandwidth are within the physical bandwidth of each port on the virtual I / O path. Thus, it can be determined that a new virtual I / O path can be set. Alternatively, a new virtual I / O path can be set if the value obtained by adding the bandwidth used by each related port and the bandwidth of the new virtual I / O path is within the physical bandwidth of each port. You may judge. In this case, it is desirable to compare the value obtained by adding the maximum bandwidth used by the related port and the bandwidth of the new virtual I / O path with the physical bandwidth of each port on the virtual I / O path. If all the related ports can be allocated, the process of step 805 is performed, and if the allocation is impossible, the process of step 810 is performed.

また、仮想I/Oパスの生成要求の引数に含まれる帯域と優先度に基づいて、新規に仮想I/Oパスの帯域を割り当てられるかどうかをチェックする場合は次のような処理を行うことが望ましい。たとえば、新規に高優先度の仮想I/Oパスとして設定する物理帯域が不足し、かつ優先度の低い仮想I/Oパスの帯域がすでに割当られている場合には、優先度の低い帯域を削減し、新規割当を行ってよいかどうかを管理ノードを介して管理者にメッセージ等を利用して通知し、管理者からの承認があった場合にのみ、既存の優先度の低い仮想I/Oパスの物理帯域を削減して、優先度の高い仮想I/Oパスの帯域を確保する。あるいは、新規の仮想I/Oパスの物理帯域が不足している状況で、新規割当対象の仮想I/Oパスと同じ優先度の帯域がすでに設定される場合、管理者に対してメッセージを送信し、新規生成処理を中断するか、あるいは既割当帯域を削減するか、あるいは新規割当帯域を許容される物理帯域で確保するか、などの選択肢を示し、管理者が選択した指示に基づき、帯域の割当制御を行う。ここでは、管理者に新規割当をするか否かを選択させる例を示したが、別の方法として、あらかじめ管理ノードに、新規に構成する仮想I/Oパスの物理帯域が不足する場合の帯域割当てポリシーを設定しておくことで、管理者への問い合わせを行うことなく、仮想I/Oパスの生成処理を自動化する方法も考えられる。たとえば、優先度がより低い帯域を削減して新規仮想I/Oパスの物理帯域を確保するといったポリシーがあらかじめ設定される場合には、仮想I/Oパスの生成処理では、高優先度の仮想I/OOパスを生成時に物理帯域が不足する場合には、低優先度の既存の仮想I/Oパスの物理帯域を削減して、新規の仮想I/Oパスの帯域を確保する。   In addition, when checking whether or not a new virtual I / O path bandwidth can be allocated based on the bandwidth and priority included in the argument of the virtual I / O path generation request, the following processing is performed. Is desirable. For example, if the physical bandwidth to be newly set as a high priority virtual I / O path is insufficient and the bandwidth of a virtual I / O path with a low priority has already been allocated, a bandwidth with a low priority is assigned. It is notified to the administrator via a management node whether or not new allocation can be performed using a message or the like, and only when there is an approval from the administrator, the existing low priority virtual I / O The bandwidth of the virtual I / O path with high priority is secured by reducing the physical bandwidth of the O path. Alternatively, if the physical bandwidth of the new virtual I / O path is insufficient and a bandwidth with the same priority as the virtual I / O path to be newly assigned is already set, a message is sent to the administrator Then, the options such as whether to interrupt the new generation process, reduce the allocated bandwidth, or secure the newly allocated bandwidth with an allowable physical bandwidth are shown. Perform allocation control. Here, an example has been shown in which the administrator selects whether or not to make a new allocation. However, as another method, the bandwidth when the physical bandwidth of the newly configured virtual I / O path is insufficient in the management node in advance. A method of automating the virtual I / O path generation process without making an inquiry to the administrator by setting an allocation policy is also conceivable. For example, if a policy is set in advance to reduce the lower priority bandwidth and secure the physical bandwidth of the new virtual I / O path, the virtual I / O path generation process uses a high priority virtual If the physical bandwidth is insufficient when generating the I / OO path, the physical bandwidth of the existing virtual I / O path with low priority is reduced to secure the bandwidth of the new virtual I / O path.

ステップ805では、全ての関連ポートについて帯域を新規に割当可能であるため、グローバルQoS管理テーブル140に対して、新規に生成した仮想I/Oパス識別子を登録する。次に、関連ポートを持つ処理ノード上の論理I/O管理テーブルに新規の仮想I/Oパス識別子を登録する(ステップ807)。関連ポートが複数存在する場合には、ステップ807の処理を関連ポートの数に応じて繰り返す。   In step 805, since the bandwidth can be newly allocated for all the related ports, the newly generated virtual I / O path identifier is registered in the global QoS management table 140. Next, a new virtual I / O path identifier is registered in the logical I / O management table on the processing node having the related port (step 807). If there are a plurality of related ports, the processing in step 807 is repeated according to the number of related ports.

ステップ808では、仮想I/Oパス生成要求に対する応答として仮想I/Oパス識別子を管理コンソール104の管理プログラム等に通知し、生成処理を終了する。なお、仮想I/Oパス識別子は、仮想I/Oパス生成部501が情報処理システム100内で一意に付与する値である。   In step 808, the virtual I / O path identifier is notified to the management program of the management console 104 as a response to the virtual I / O path generation request, and the generation process is terminated. The virtual I / O path identifier is a value that is uniquely assigned by the virtual I / O path generation unit 501 within the information processing system 100.

ステップ804で、新規割当が不可と判断した場合には、ステップ810において新たな仮想I/Oパスを生成不可である旨をコンソール104へ通知し処理を終了する。あるいは、上記ステップ801を行なう代わりに、ステップ802に戻り、仮想I/Oパスを別の経路を通るように自動あるいは手動で仮想I/Oパスを選択しなおしてもよい。この場合、どのような経路を選択しても仮想I/Oパスを生成できないときのみステップ810を行い、生成不可である旨を通知すればよい。以上の処理フローにより新たな仮想I/Oパス生成処理が完了する。この結果、生成された新たな仮想I/Oパスの情報は、グローバルQoS管理テーブル140に設定される。グローバルQoS管理テーブル140に設定された新たな仮想I/Oパスの情報は、処理ノード101のグローバルQoS情報取得部706が取得し、処理ノード101のQoS割当管理部131がOS350に通知して、OS350内のI/OドライバがI/Oアダプタ113に新たな仮想I/Oパス、すなわち仮想I/Oポートを設定することになる。   If it is determined in step 804 that new allocation is not possible, in step 810, the console 104 is notified that a new virtual I / O path cannot be generated, and the process ends. Alternatively, instead of performing step 801, the process may return to step 802 and automatically or manually select a virtual I / O path so that the virtual I / O path passes through another route. In this case, step 810 is performed only when a virtual I / O path cannot be generated no matter what route is selected, and notification that it cannot be generated. The new virtual I / O path generation process is completed by the above processing flow. As a result, information on the generated new virtual I / O path is set in the global QoS management table 140. Information on the new virtual I / O path set in the global QoS management table 140 is acquired by the global QoS information acquisition unit 706 of the processing node 101, and the QoS allocation management unit 131 of the processing node 101 notifies the OS 350, The I / O driver in the OS 350 sets a new virtual I / O path, that is, a virtual I / O port, in the I / O adapter 113.

図10は、本発明の第1の実施の形態における管理ノード103のグローバルQoS管理部122における仮想I/Oパス(仮想I/Oパス)の帯域監視処理のフローである。グローバルQoS管理部122が帯域監視処理を起動すると、帯域監視処理が開始される(ステップ901)。グローバルQoS管理部122は、帯域監視処理を所定時間毎に実行するため、最初に一定時間、処理をスリープする(ステップ902)。スリープ時間は、帯域監視の精度を向上したい場合には短くし、精度を求めない場合には長く設定する。たとえば、帯域監視を一般的なハートビート処理と同等レベルで行なう場合には、スリープ時間を1秒程度に設定する。   FIG. 10 is a flow diagram of bandwidth monitoring processing of a virtual I / O path (virtual I / O path) in the global QoS management unit 122 of the management node 103 according to the first embodiment of this invention. When the global QoS management unit 122 starts the bandwidth monitoring process, the bandwidth monitoring process is started (step 901). The global QoS management unit 122 first sleeps for a certain period of time in order to execute the bandwidth monitoring process at predetermined time intervals (step 902). The sleep time is set short when it is desired to improve the accuracy of bandwidth monitoring, and is set long when accuracy is not required. For example, when performing bandwidth monitoring at the same level as general heartbeat processing, the sleep time is set to about 1 second.

次にローカルQoS情報受信処理(ローカルQoS管理情報受信部601の上記処理)を行なう(ステップ903)。このステップでは、情報処理システム100を構成する処理ノード101、102のうち、ローカルQoS管理処理が稼動している処理ノードから、ローカルQoS管理情報を取得する。グローバルQoS管理部122は、応答の有無から各処理ノード101,102が正常に稼動しているか否かを判定することができる。そして、グローバルQoS管理部122は、稼動中の全てのローカルQoS管理部111,116からローカルQoS管理情報(ローカルQoS管理テーブル130,133の情報)を受信する。   Next, local QoS information reception processing (the above processing of the local QoS management information receiving unit 601) is performed (step 903). In this step, local QoS management information is acquired from the processing node in which the local QoS management processing is operating among the processing nodes 101 and 102 constituting the information processing system 100. The global QoS management unit 122 can determine whether each processing node 101, 102 is operating normally from the presence or absence of a response. Then, the global QoS management unit 122 receives local QoS management information (information of the local QoS management tables 130 and 133) from all the local QoS management units 111 and 116 that are in operation.

続いて、ローカルQoS稼動確認処理(ローカルQoS稼動確認部602の上記処理)を行なう(ステップ904)。ローカルQoS稼動確認処理では、ステップ904で処理ノードから送付されたローカルQoS管理情報をチェックし、全てのローカルQoS管理部111,116が稼動状態にあるかどうかを確認する。あるいは、グローバルQoS管理テーブル140のノード情報テーブル320に記録された情報を用いて、各処理ノード101,102の稼動状態を確認してもよい。   Subsequently, local QoS operation confirmation processing (the above processing of the local QoS operation confirmation unit 602) is performed (step 904). In the local QoS operation confirmation process, the local QoS management information sent from the processing node is checked in step 904 to confirm whether all the local QoS management units 111 and 116 are in an operating state. Alternatively, the operating status of each processing node 101 or 102 may be confirmed using information recorded in the node information table 320 of the global QoS management table 140.

次に、グローバルQoS管理部122は、ノード選択処理(ノード選択部610の処理)を行なう(ステップ905)。ノード選択処理では、ローカルQoS情報に含まれる各処理ノードの稼動状況を確認し、低稼動率の処理ノードを選択する。このとき、低稼動率の処理ノードが複数存在する場合には、ランダムで選択してもよいし、ラウンドロビンで処理ノードを選択した上でその処理ノードが低稼動率かどうかを判断し、稼動率が高い場合には次の処理ノードを選択するようにしてもよい。なお、処理ノードの稼動率は、上述したように、例えば、各処理ノードのCPU10の使用率を用い、CPU10の使用率が最も低い処理ノードを低稼動率の処理ノードとして選択すればよい。   Next, the global QoS management unit 122 performs node selection processing (processing by the node selection unit 610) (step 905). In the node selection process, the operating status of each processing node included in the local QoS information is confirmed, and a processing node with a low operating rate is selected. At this time, when there are a plurality of processing nodes with a low operation rate, they may be selected at random, or after selecting a processing node by round robin, it is determined whether the processing node has a low operation rate, If the rate is high, the next processing node may be selected. Note that, as described above, for example, the usage rate of the CPU 10 of each processing node may be used as the operating rate of the processing node, and the processing node with the lowest usage rate of the CPU 10 may be selected as a processing node with a low operating rate.

ステップ906では、選択した処理ノードが自ノード(管理ノード103)であるかどうかを判断する。選択された処理ノードが自ノードである場合には、スイッチ情報取得処理を行なう(ステップ907)。ステップ907のスイッチ情報取得処理では、スイッチファブリック群105を構成する各スイッチファブリック170、171のレジスタ180、181にアクセスし、レジスタ180、181からスイッチファブリック群105の全ポートの状態情報(スイッチ情報)を読み出す。取得したスイッチ情報は、グローバルQoS管理テーブル140のスイッチ情報303に反映する。   In step 906, it is determined whether or not the selected processing node is its own node (management node 103). If the selected processing node is its own node, switch information acquisition processing is performed (step 907). In the switch information acquisition processing in step 907, the registers 180 and 181 of the switch fabrics 170 and 171 constituting the switch fabric group 105 are accessed, and the status information (switch information) of all the ports of the switch fabric group 105 from the registers 180 and 181. Is read. The acquired switch information is reflected in the switch information 303 of the global QoS management table 140.

一方、ステップ906において、選択した処理ノードが自ノードでない場合には、他の処理ノードに対してスイッチ情報の取得要求送付処理(取得要求送付部611の処理)を行なう(ステップ908)。取得要求送付処理では、選択した処理ノードに対して、スイッチファブリック群105の状態情報を取得するための取得要求を送信する。次に、取得応答受信処理(取得応答受信部612の処理)では、取得要求の送付先の処理ノードからの応答を受信する(ステップ909)。   On the other hand, if the selected processing node is not its own node in step 906, switch information acquisition request sending processing (processing of the acquisition request sending unit 611) is performed on other processing nodes (step 908). In the acquisition request sending process, an acquisition request for acquiring the status information of the switch fabric group 105 is transmitted to the selected processing node. Next, in the acquisition response reception processing (processing of the acquisition response reception unit 612), a response from the processing node to which the acquisition request is sent is received (step 909).

続いて、グローバルQoS情報更新処理を行ない、ステップ903のローカルQoS情報受信処理で受信した処理ノード毎のローカルQoS管理テーブル130,133と、ステップ909の取得応答受信処理において取得したスイッチ情報の更新分をグローバルQoS管理テーブル140に反映する(ステップ910)。最後に、グローバルQoS情報送信処理を行なう(ステップ911)。グローバルQoS情報送信処理では、グローバルQoS管理部122の稼動状況(グローバルQoS管理テーブル140の情報)を全ローカルQoS管理部111,116へ送信すると共に、グローバルQoS管理部122が管理するスイッチファブリック群105の構成や処理ノードの構成に変更があった場合に、これらの情報を全ローカルQoS管理部111,116に送信する。これらの処理は帯域監視処理が中断されるまで継続する(ステップ911)。   Subsequently, the global QoS information update process is performed, and the local QoS management tables 130 and 133 for each processing node received in the local QoS information reception process in step 903 and the update information of the switch information acquired in the acquisition response reception process in step 909 Is reflected in the global QoS management table 140 (step 910). Finally, global QoS information transmission processing is performed (step 911). In the global QoS information transmission process, the operating status of the global QoS management unit 122 (information of the global QoS management table 140) is transmitted to all the local QoS management units 111 and 116, and the switch fabric group 105 managed by the global QoS management unit 122 is used. And the processing node configuration are changed, the information is transmitted to all local QoS management units 111 and 116. These processes continue until the bandwidth monitoring process is interrupted (step 911).

本発明の第1の実施の形態では、ローカルQoS情報受信処理(ステップ902)と、グローバルQoS情報送信処理(ステップ911)を分けて示したが、ローカルQoS情報受信処理が送信元のローカルQoS管理部に返送する応答の中に、グローバルQoS情報送信処理で送付する情報を追加してもよい。その場合は、ステップ911の処理は必要ない。   In the first embodiment of the present invention, the local QoS information reception process (step 902) and the global QoS information transmission process (step 911) are shown separately. However, the local QoS information reception process is a local QoS management of the transmission source. Information sent in the global QoS information transmission process may be added to the response sent back to the part. In that case, the process of step 911 is not necessary.

以上の処理により、グローバルQoS管理部122は、各処理ノード101,102からローカルQoS管理テーブル130,133を受信してグローバルQoS管理テーブル140を更新する。そして、グローバルQoS管理部122は、低稼動率と判定した処理ノードに対してスイッチファブリック群105のスイッチ情報の収集を指令する。したがって、スイッチファブリック群105が大規模な場合や、物理I/Oポートあたりの仮想I/Oポート数が多い場合であっても、高負荷となるスイッチファブリック170,171の状態情報の読み出し処理を、スイッチファブリック群105に接続する複数の処理ノードのうち低稼動率の処理ノードが分担することで、特定の処理ノードに負荷が集中するのを防いで、スイッチファブリック群105の情報収集を一定の時間で実行可能となる。   Through the above processing, the global QoS management unit 122 receives the local QoS management tables 130 and 133 from the processing nodes 101 and 102 and updates the global QoS management table 140. Then, the global QoS management unit 122 instructs the processing node determined to have a low operation rate to collect switch information of the switch fabric group 105. Therefore, even when the switch fabric group 105 is large or when the number of virtual I / O ports per physical I / O port is large, the state information read processing of the switch fabrics 170 and 171 that become a heavy load is performed. The processing node having a low operation rate among the plurality of processing nodes connected to the switch fabric group 105 prevents the load from being concentrated on a specific processing node, thereby collecting information on the switch fabric group 105 at a certain level. It can be executed in time.

図11は、本発明の第1の実施の形態における処理ノード101、102のローカルQoS管理部111,116で実行されるローカル帯域監視処理のフローを示す図である。なお、処理ノード102のローカルQoS管理部116も同様の処理を実施するので、以下では処理ノード101のみについて説明する。   FIG. 11 is a diagram illustrating a flow of local bandwidth monitoring processing executed by the local QoS management units 111 and 116 of the processing nodes 101 and 102 according to the first embodiment of this invention. Since the local QoS management unit 116 of the processing node 102 also performs the same processing, only the processing node 101 will be described below.

ローカルQoS管理部111がローカル帯域監視処理を起動すると、ローカルQoS管理部111においてローカル帯域監視処理が開始される(ステップ1001)。ローカル帯域監視処理は一定時間毎に実行するため、最初に予め設定した一定時間だけ処理をスリープする(ステップ1002)。スリープ時間は、I/Oアダプタ113のI/Oポートの帯域監視の精度を向上する場合には短く、精度を求めない場合には長く設定する。たとえば、帯域監視を一般的なハートビート処理と同等レベルで行なう場合には、スリープ時間を1秒程度に設定する。   When the local QoS management unit 111 starts the local bandwidth monitoring process, the local QoS monitoring unit 111 starts the local bandwidth monitoring process (step 1001). Since the local bandwidth monitoring process is executed at regular time intervals, the process first sleeps for a predetermined time period (step 1002). The sleep time is set short when the accuracy of bandwidth monitoring of the I / O port of the I / O adapter 113 is improved, and is set long when accuracy is not required. For example, when performing bandwidth monitoring at the same level as general heartbeat processing, the sleep time is set to about 1 second.

次にグローバルQoS情報受信処理(グローバルQoS情報取得部706の処理)を行なう(ステップ1003)。このステップ1003では、管理ノード103のグローバルQoS管理部122からグローバルQoS管理テーブル140の情報を受信する。この情報は、グローバルQoS管理テーブル140が保持する情報のうち、スイッチファブリック群105の構成や処理ノード数が変更になった場合は、その情報を受信する。   Next, global QoS information reception processing (processing of the global QoS information acquisition unit 706) is performed (step 1003). In step 1003, information on the global QoS management table 140 is received from the global QoS management unit 122 of the management node 103. This information is received from the information held in the global QoS management table 140 when the configuration of the switch fabric group 105 or the number of processing nodes is changed.

続いて、グローバルQoSサービス稼動確認処理(グローバルQoSサービス稼動確認部705の処理)を行なう(ステップ1004)。グローバルQoSサービス稼動確認処理では、ステップ1003で管理ノード103から送付されたグローバルQoS管理テーブル140の情報をチェックし、管理ノード103のグローバルQoS管理部122が稼動状態にあるかどうかを確認する。これにより、管理ノード103が正常に動作していることを確認できる。   Subsequently, a global QoS service operation confirmation process (a process of the global QoS service operation confirmation unit 705) is performed (step 1004). In the global QoS service operation confirmation process, the information in the global QoS management table 140 sent from the management node 103 is checked in step 1003 to confirm whether the global QoS management unit 122 of the management node 103 is in an operating state. Thereby, it can be confirmed that the management node 103 is operating normally.

次に、スイッチ情報取得処理(スイッチ情報取得部707の処理)を行なう(ステップ1005)。スイッチ情報取得処理は、取得判定処理(ステップ1006)とスイッチ情報取得処理(ステップ1007)からなる。ステップ1006では、上記取得判定部720の処理であり、管理ノード103からのスイッチ情報取得要求の有無をチェックする。スイッチ情報の取得要求がない場合にはステップ1007は行なわず、次のステップを行なう。   Next, switch information acquisition processing (processing of the switch information acquisition unit 707) is performed (step 1005). The switch information acquisition process includes an acquisition determination process (step 1006) and a switch information acquisition process (step 1007). In step 1006, the process of the acquisition determination unit 720 checks whether there is a switch information acquisition request from the management node 103. If there is no switch information acquisition request, step 1007 is not performed and the next step is performed.

一方、ステップ1006において、スイッチ情報の取得要求有りの場合、ステップ1007において、スイッチ情報取得処理を行なう。スイッチ情報取得処理(スイッチ情報取得処理部721の処理)では、スイッチファブリック群105を構成するスイッチファブリック170,171の各レジスタ180,181にアクセスし、スイッチファブリック群105を構成する全ポートの状態情報を取得する。これらのポートの状態情報を取得した後、スイッチ情報取得要求に対する応答を送信元のグローバルQoS管理部122に対して送付する。   On the other hand, if there is a switch information acquisition request in step 1006, switch information acquisition processing is performed in step 1007. In the switch information acquisition processing (processing of the switch information acquisition processing unit 721), the registers 180 and 181 of the switch fabric 170 and 171 constituting the switch fabric group 105 are accessed, and the status information of all the ports constituting the switch fabric group 105 is obtained. To get. After acquiring the status information of these ports, a response to the switch information acquisition request is sent to the global QoS management unit 122 of the transmission source.

ステップ1008では、レジスタ情報取得処理を行なう。レジスタ情報取得処理では、自処理ノードのI/Oアダプタ113のレジスタ160にアクセスして、レジスタ160に設定されている物理I/Oポートの状態情報(アダプタ情報)を取得する。具体的には、物理I/Oポートの稼動状況とデータ転送量を取得する。   In step 1008, register information acquisition processing is performed. In the register information acquisition process, the status information (adapter information) of the physical I / O port set in the register 160 is acquired by accessing the register 160 of the I / O adapter 113 of the self-processing node. Specifically, the operating status of the physical I / O port and the data transfer amount are acquired.

ステップ1009では、論理I/O帯域算出処理(論理I/O帯域算出部712の処理)を行なう。論理I/O帯域算出処理では、現在の時刻と、論理I/O管理テーブル150に記録された仮想I/Oパスに対応するデータ転送量から、仮想I/Oパス毎の帯域(転送速度)を算出する。詳細は後述する(図12)。   In step 1009, logical I / O band calculation processing (processing of the logical I / O band calculation unit 712) is performed. In the logical I / O bandwidth calculation processing, the bandwidth (transfer rate) for each virtual I / O path is calculated from the current time and the data transfer amount corresponding to the virtual I / O path recorded in the logical I / O management table 150. Is calculated. Details will be described later (FIG. 12).

続いて、ローカルQoS情報送信処理(ローカルQoS情報送信部704の処理)を行ない、ローカルQoS管理テーブル130で管理される情報に更新が有った場合には、その情報を全てのローカルQoS管理部151に送付する(ステップ1010)。そして、ローカルQoS情報更新処理では、ローカルQoS管理テーブル130に更新情報を反映する(ステップ1011)。   Subsequently, when local QoS information transmission processing (processing of the local QoS information transmission unit 704) is performed and information managed by the local QoS management table 130 is updated, the information is transferred to all local QoS management units. 151 (step 1010). In the local QoS information update process, the update information is reflected in the local QoS management table 130 (step 1011).

ローカル帯域監視処理は、中断されるまでステップ1002からステップ1011の上記処理を継続する(ステップ1012)。なお、本発明の第1の実施の形態では、グローバルQoS情報受信処理(ステップ1003)と、ローカルQoS情報送信処理(ステップ1010)を分けて記載しているが、グローバルQoS情報受信処理の応答に、ローカルQoS情報送信処理で送付するローカルQoS管理テーブルの更新情報を含めてもよい。この場合、ステップ1010のローカルQoS情報送信処理を省略できる。   The local bandwidth monitoring process continues from step 1002 to step 1011 until interrupted (step 1012). In the first embodiment of the present invention, the global QoS information reception process (step 1003) and the local QoS information transmission process (step 1010) are described separately, but the response of the global QoS information reception process is described. The update information of the local QoS management table sent in the local QoS information transmission process may be included. In this case, the local QoS information transmission process in step 1010 can be omitted.

以上の処理により、処理ノード101のローカルQoS管理部111は所定時間毎にグローバルQoS管理テーブル140の情報を管理ノード103から取得し、また、自処理ノードのアダプタ情報を取得して、これら取得した情報のうち自処理ノードに関する情報をローカルQoS管理テーブル130へ反映する。また、ローカルQoS管理部111では、当該処理ノード101のローカルQoS管理テーブル130に更新があったときには、他の処理ノードへの更新された情報を通知する。   Through the above processing, the local QoS management unit 111 of the processing node 101 acquires the information of the global QoS management table 140 from the management node 103 every predetermined time, and also acquires the adapter information of the own processing node, and acquires these. Of the information, information related to the own processing node is reflected in the local QoS management table 130. In addition, the local QoS management unit 111 notifies the updated information to other processing nodes when the local QoS management table 130 of the processing node 101 is updated.

また、処理ノード101のローカルQoS管理部111は、管理ノード103からの要求があったときにはスイッチファブリック群105のスイッチ情報を取得して、管理ノード103に送信する。   In addition, when there is a request from the management node 103, the local QoS management unit 111 of the processing node 101 acquires switch information of the switch fabric group 105 and transmits it to the management node 103.

図12は、上記図11のステップ1009で行われる論理I/O帯域算出処理のフローを示す図である。処理ノード101の帯域監視部132が実行する論理I/O帯域算出処理では、まず現時の時刻を取得し、前回の帯域算出処理を実行した時刻との差分を計算し、現在の時刻を前監視時刻714に反映する(ステップ1101)。   FIG. 12 is a diagram showing a flow of logical I / O bandwidth calculation processing performed in step 1009 of FIG. In the logical I / O bandwidth calculation processing executed by the bandwidth monitoring unit 132 of the processing node 101, first, the current time is acquired, the difference from the time when the previous bandwidth calculation processing was executed is calculated, and the current time is pre-monitored. Reflected in time 714 (step 1101).

次に、論理I/O管理テーブル150にアクセスし、登録された仮想I/Oパス識別子それぞれに対するデータ転送量を取得する(ステップ1102)。続いて、ステップ1101で算出した時刻の差分と、ステップ1102で取得したデータ転送量から各仮想I/Oパス識別子に対する単位時間当たりの帯域(転送速度)を算出する(ステップ1103)。算出した各仮想I/Oポートの帯域と、ローカルQoS管理テーブル130のポート情報204に格納された最大帯域とを比較して、算出した帯域の値が大きい場合には、ポート情報204を更新する。そして、論理I/O管理テーブル150に登録された仮想I/Oパス識別子に対するデータ転送量をリセットする(ステップ1104)。以上のステップにより、仮想I/Oパス(仮想I/Oポート)毎の帯域(転送速度)を算出する。   Next, the logical I / O management table 150 is accessed, and the data transfer amount for each registered virtual I / O path identifier is acquired (step 1102). Subsequently, a bandwidth (transfer rate) per unit time for each virtual I / O path identifier is calculated from the time difference calculated in step 1101 and the data transfer amount acquired in step 1102 (step 1103). The calculated bandwidth of each virtual I / O port is compared with the maximum bandwidth stored in the port information 204 of the local QoS management table 130. If the calculated bandwidth value is large, the port information 204 is updated. . Then, the data transfer amount for the virtual I / O path identifier registered in the logical I / O management table 150 is reset (step 1104). Through the above steps, the bandwidth (transfer rate) for each virtual I / O path (virtual I / O port) is calculated.

以上のように、本発明によればスイッチファブリック群105(I/Oスイッチ)を介して複数の処理ノード101,102を接続する情報処理システム100に対して、複数の仮想化されたI/Oパス(仮想I/Oパス)を構成し、仮想I/Oパス毎に転送速度(帯域)を制御できるため、仮想化されたI/Oパス毎にエンド・ツー・エンドでのQoSを保証できる。また、CPUを持たないスイッチファブリック群105のようなI/Oスイッチであっても、物理I/Oポートに仮想的に構成したI/Oポート毎の状態情報(スイッチ情報)を管理し、それらの情報を収集できる。さらに、大規模なスイッチファブリック群105や物理I/Oポートあたりの仮想I/Oポート数が多い場合であっても、高負荷となるスイッチファブリックの状態情報の読み出し処理を、スイッチファブリック群105に接続する複数の処理ノードのうち稼動率の低い処理ノードに分担させることで、他の通信の影響を最小化して、スイッチファブリック群105の情報収集を一定の時間で実行できる。   As described above, according to the present invention, a plurality of virtualized I / Os are provided to the information processing system 100 that connects a plurality of processing nodes 101 and 102 via the switch fabric group 105 (I / O switch). Since paths (virtual I / O paths) can be configured and the transfer rate (bandwidth) can be controlled for each virtual I / O path, end-to-end QoS can be guaranteed for each virtualized I / O path . In addition, even an I / O switch such as the switch fabric group 105 without a CPU manages state information (switch information) for each I / O port virtually configured as a physical I / O port. Information can be collected. Furthermore, even when there are a large number of switch fabric groups 105 and a large number of virtual I / O ports per physical I / O port, the switch fabric group 105 can perform a process of reading the state information of the switch fabric that is highly loaded. By sharing the processing nodes with a low operating rate among the plurality of processing nodes to be connected, the influence of other communications can be minimized and information collection of the switch fabric group 105 can be executed in a certain time.

<変形例1>
本発明の第1の実施の形態では、仮想I/Oパス生成部510が、仮想I/Oパス選択部510により仮想I/Oパスが最短となるような経路を選択していた。しかしながら、仮想I/Oパスに最短経路を選択した場合に、その仮想I/Oパスの一部に障害が発生した場合や、特定のポートに多くの仮想I/Oパスが設定された場合は、仮想I/Oパスをより柔軟に選択可能にすれば、障害時や経路混雑時にも安定した通信を提供することができる。
<Modification 1>
In the first embodiment of the present invention, the virtual I / O path generation unit 510 selects a route with the shortest virtual I / O path by the virtual I / O path selection unit 510. However, when the shortest path is selected for the virtual I / O path, when a failure occurs in a part of the virtual I / O path or when many virtual I / O paths are set for a specific port If the virtual I / O path can be selected more flexibly, stable communication can be provided even in the event of a failure or route congestion.

そこで、本発明の変形例1では、仮想I/Oパスの生成時に、最短経路ではなく、仮想I/Oパスに設定する帯域の合計値や、仮想I/Oパスの実際の利用帯域に基づき複数の候補の中から選択できるようにする。仮想I/Oパスの一部に障害が発生した場合にも、仮想I/Oパス生成部510において、迂回可能な経路を構成できるようにする。   Therefore, in the first modification of the present invention, when the virtual I / O path is generated, not based on the shortest path but based on the total bandwidth set for the virtual I / O path and the actual used bandwidth of the virtual I / O path. Make it possible to select from multiple candidates. Even when a failure occurs in a part of the virtual I / O path, the virtual I / O path generation unit 510 can configure a bypassable route.

図13は、管理ノード103で実行されるグローバルQoS管理部122のQoS割当管理部141の仮想I/Oパス生成部510のブロック図である。   FIG. 13 is a block diagram of the virtual I / O path generation unit 510 of the QoS allocation management unit 141 of the global QoS management unit 122 executed by the management node 103.

仮想I/Oパス生成部510は、仮想I/Oパスリスト作成部1201、仮想I/Oパス利用率算出部1202、仮想I/Oパス選択部1203、仮想I/Oパス登録部1204、仮想I/Oパス候補リスト1205、条件フラグ1206を備える。   The virtual I / O path generation unit 510 includes a virtual I / O path list creation unit 1201, a virtual I / O path utilization rate calculation unit 1202, a virtual I / O path selection unit 1203, a virtual I / O path registration unit 1204, a virtual An I / O path candidate list 1205 and a condition flag 1206 are provided.

仮想I/Oパスリスト作成部1201は、管理コンソール104から仮想I/Oパスの生成要求を受け付けると、仮想I/Oパスの送信元ノードと、宛先ノードから仮想I/Oパスを構成可能な経路のリストを作成する。仮想I/Oパスリスト作成部1201は、グローバルQoS管理テーブル140を参照し、予め設定した有限数の経路を探索し、仮想I/Oパス候補リスト1205に探索した経路を登録する。   Upon receiving a virtual I / O path generation request from the management console 104, the virtual I / O path list creation unit 1201 can configure a virtual I / O path from the transmission source node and the destination node of the virtual I / O path. Create a list of routes. The virtual I / O path list creation unit 1201 refers to the global QoS management table 140, searches for a preset finite number of routes, and registers the searched routes in the virtual I / O path candidate list 1205.

仮想I/Oパス利用率算出部1202は、仮想I/Oパス候補リスト1205が探索したそれぞれの経路について、グローバルQoS管理テーブル140を参照して、設定帯域の合計値の最大値と利用帯域の合計値の最大値を算出し、仮想I/Oパス候補リスト1205に反映する。   The virtual I / O path usage rate calculation unit 1202 refers to the global QoS management table 140 for each route searched by the virtual I / O path candidate list 1205, and determines the maximum value of the total set bandwidth and the used bandwidth. The maximum value of the total value is calculated and reflected in the virtual I / O path candidate list 1205.

仮想I/Oパス選択部1203は、仮想I/Oパス候補リスト1205から、条件フラグ1206に設定された値に応じて、仮想I/Oパスを選択する。   The virtual I / O path selection unit 1203 selects a virtual I / O path from the virtual I / O path candidate list 1205 according to the value set in the condition flag 1206.

仮想I/Oパス候補リスト1205は、論理I/O識別子に対応して作成するリストである。仮想I/Oパス候補リスト1205は、候補番号1210、経路長1211、最大設定帯域1212、最大利用帯域1213を備える。経路長1211は、仮想I/Oパスを構成する送信元ノードと送信先ノード間のスイッチファブリック170,171の段数である。最大設定帯域1212は、仮想I/Oパスを構成する各関連ポートに設定済の帯域の合計値のうち、最大の設定帯域を示す。設定済の帯域の合計値は、グローバルQoS管理テーブル140を参照することにより求められる。最大利用帯域1213は、仮想I/Oパスを構成する各関連ポートの利用帯域の合計値のうち、最大の利用帯域を示す。利用帯域の合計値も、グローバルQoS管理テーブル140を参照することにより求められる。   The virtual I / O path candidate list 1205 is a list created corresponding to the logical I / O identifier. The virtual I / O path candidate list 1205 includes a candidate number 1210, a route length 1211, a maximum set bandwidth 1212, and a maximum use bandwidth 1213. The path length 1211 is the number of stages of the switch fabrics 170 and 171 between the transmission source node and the transmission destination node constituting the virtual I / O path. The maximum set bandwidth 1212 indicates the maximum set bandwidth out of the total value of the bandwidths already set for each related port constituting the virtual I / O path. The total value of the set bandwidth is obtained by referring to the global QoS management table 140. The maximum used bandwidth 1213 indicates the maximum used bandwidth among the total values of the used bandwidths of the related ports constituting the virtual I / O path. The total value of the used bandwidth is also obtained by referring to the global QoS management table 140.

条件フラグ1206は、仮想I/Oパスの経路を選定する条件を保持する。条件フラグ1206で利用する選択条件は、仮想I/Oパス生成要求の選択条件パラメータに含まれる。たとえば、選択条件パラメータには、経路長が最短の経路を選択する場合には「1」、設定帯域が最小の経路を選択する場合には「2」、利用帯域が最小の経路を選択する場合には「3」が設定される。仮想I/Oパス生成要求の選択条件パラメータに「1」が設定されている場合、仮想I/Oパス選択部1203は、仮想I/Oパス候補リスト1205の中から、利用帯域が最小の候補番号を持つ仮想I/Oパスを選択する。変形例1では、3通りの条件を示したが、これ以外の条件により仮想I/Oパスの経路を選択してもよい。また、変形例1では、条件フラグ1206が仮想I/Oパス生成要求のパラメータとして含まれていたが、パラメータに含むのではなく、あらかじめ管理プログラム等により条件フラグ1206に条件値が一意に設定されてもよい。   The condition flag 1206 holds a condition for selecting a virtual I / O path route. The selection condition used in the condition flag 1206 is included in the selection condition parameter of the virtual I / O path generation request. For example, the selection condition parameter is “1” when a route with the shortest path length is selected, “2” when a route with the minimum set bandwidth is selected, and a route with the minimum use bandwidth is selected. Is set to “3”. When “1” is set in the selection condition parameter of the virtual I / O path generation request, the virtual I / O path selection unit 1203 selects the candidate with the smallest available bandwidth from the virtual I / O path candidate list 1205. A virtual I / O path having a number is selected. In the first modification, three conditions are shown, but a virtual I / O path route may be selected based on other conditions. In Modification 1, the condition flag 1206 is included as a parameter for the virtual I / O path generation request. However, the condition flag 1206 is uniquely set in advance by the management program or the like instead of being included in the parameter. May be.

以上のように変形例1では、仮想I/Oパスの経路の選択を、選択条件パラメータに応じて変更することができ、障害発生時や経路の混雑時にも仮想I/Oパスをより柔軟に設定可能となって、仮想I/Oパスを用いて安定した通信を提供することができる。   As described above, in the first modification, the route selection of the virtual I / O path can be changed according to the selection condition parameter, and the virtual I / O path can be made more flexible even when a failure occurs or the route is congested. Setting is possible, and stable communication can be provided using a virtual I / O path.

<変形例2>
本発明の第1の実施の形態では、論理I/O管理部112がOS350のI/Oドライバに組みこまれ、各仮想I/Oパスの状態情報をI/Oドライバが管理していた。本発明の変形例2では、論理I/O管理部112は、ハイパバイザ等の仮想化マシンモニタに組み込まれている点が第1の実施の形態とは異なる。論理I/O管理部112をハイパバイザに組み込むことにより、OS内のI/Oドライバを変更することなく、仮想I/Oパスの状態情報を管理できる。また、本発明の変形例2では、ローカルQoS管理部もハイパバイザに組み込む。そのため、論理パーティション(LPAR)に搭載したアプリケーションの性能を低下させることなく、仮想ホスト(LPAR上のゲストOS)間あるいは仮想ホストと他の処理ノード(I/Oデバイス)間においてエンド・ツー・エンドの仮想的なI/Oパスを構成し、管理できる。以下、本発明の第1の実施の形態と異なる部分について説明する。
<Modification 2>
In the first embodiment of the present invention, the logical I / O management unit 112 is incorporated in the I / O driver of the OS 350, and the status information of each virtual I / O path is managed by the I / O driver. The second modification of the present invention is different from the first embodiment in that the logical I / O management unit 112 is incorporated in a virtual machine monitor such as a hypervisor. By incorporating the logical I / O management unit 112 into the hypervisor, it is possible to manage the status information of the virtual I / O path without changing the I / O driver in the OS. In the second modification of the present invention, the local QoS management unit is also incorporated in the hypervisor. Therefore, end-to-end between the virtual host (guest OS on the LPAR) or between the virtual host and another processing node (I / O device) without degrading the performance of the application installed in the logical partition (LPAR). The virtual I / O path can be configured and managed. Hereinafter, a different part from the 1st Embodiment of this invention is demonstrated.

図14は、本発明の変形例2における情報処理システム100のブロック図である。情報処理システム100は、処理ノード1301、1302と管理ノード1303、管理コンソール1304、スイッチファブリック群1309を含む。変形例2では、管理者からのQoSのための管理要求、たとえば、構成する仮想I/Oパスに対してQoS割り当てを行なう要求等を管理コンソール3104から管理ノード1303に送出するだけではなく、LPARの管理要求を管理コンソール3104からハイパバイザ1310、1311に対して送出する。変形例2では、管理コンソール1304が直接ハイパバイザ1310、1311に対して管理要求を送付する例を示すが、管理ノード1303、スイッチファブリック群1309経由でハイパバイザ1310、1311に管理要求を送付してもよい。   FIG. 14 is a block diagram of the information processing system 100 in the second modification of the present invention. The information processing system 100 includes processing nodes 1301 and 1302, a management node 1303, a management console 1304, and a switch fabric group 1309. In the second modification, not only a management request for QoS from an administrator, for example, a request for assigning a QoS to a virtual I / O path to be configured, is sent from the management console 3104 to the management node 1303 but also the LPAR. Is sent from the management console 3104 to the hypervisors 1310 and 1311. In the second modification, the management console 1304 directly sends a management request to the hypervisors 1310 and 1311. However, the management request may be sent to the hypervisors 1310 and 1311 via the management node 1303 and the switch fabric group 1309. .

処理ノード1301は、ハイパバイザ1310、I/Oアダプタ1312、LPAR1320〜1321を含む。ハイパバイザ1310は、処理ノード1301のハードウェアリソースを論理的に分割して管理するための仮想化ソフトウェアであり、LPAR管理部1330はハイパバイザ1310上に生成する論理パーティションを管理する公知の技術である。   The processing node 1301 includes a hypervisor 1310, an I / O adapter 1312, and LPARs 1320 to 1321. The hypervisor 1310 is virtualization software for logically dividing and managing hardware resources of the processing node 1301, and the LPAR management unit 1330 is a known technique for managing logical partitions generated on the hypervisor 1310.

変形例2では、LPAR管理部1330に加えて、ローカルQoS管理部1332と、論理I/O管理部1334を有する。ここで、変形例2では、ハイパバイザ1310がローカルQoS管理部1332と論理I/O管理部1334を含む点が第1の実施の形態とは異なる部分である。一方、ローカルQoS管理部1332と論理I/O管理部1334の機能は第1の実施の形態で説明した機能と同等である。但し、第1の実施の形態では、処理ノードの状態情報と論理I/O情報を対応付けていたのに加えて、変形例2では、LPAR−仮想I/Oパス情報対応表1336とマッピング部1337を更に有する点が異なる。   The second modification includes a local QoS management unit 1332 and a logical I / O management unit 1334 in addition to the LPAR management unit 1330. Here, in the second modification, the hypervisor 1310 includes a local QoS management unit 1332 and a logical I / O management unit 1334, which is different from the first embodiment. On the other hand, the functions of the local QoS management unit 1332 and the logical I / O management unit 1334 are equivalent to the functions described in the first embodiment. However, in the first embodiment, in addition to associating the processing node state information with the logical I / O information, in the second modification, the LPAR-virtual I / O path information correspondence table 1336 and the mapping unit 1337 is further different.

LPAR−仮想I/Oパス情報対応表1336は、LPAR管理部1330が管理するLPARの状態情報と仮想I/Oパス情報の対応を保持する。マッピング部1337は、LPAR管理部1330にアクセスするためのインタフェースを有する。マッピング部1337は、LPAR管理部1330にアクセスして、LPAR管理部1330が管理するLPAR識別子とリソースの対応表であるLPAR管理テーブル(図示省略)を参照し、LPAR識別子と仮想I/Oパス情報を対応付ける。   The LPAR-virtual I / O path information correspondence table 1336 holds the correspondence between the LPAR status information managed by the LPAR management unit 1330 and the virtual I / O path information. The mapping unit 1337 has an interface for accessing the LPAR management unit 1330. The mapping unit 1337 accesses the LPAR management unit 1330, refers to an LPAR management table (not shown) that is a correspondence table between LPAR identifiers and resources managed by the LPAR management unit 1330, and refers to LPAR identifiers and virtual I / O path information. Associate.

また、変形例2では、管理コンソール3104からの仮想I/Oパスの構成要求(生成要求、削除要求、変更要求)に含まれる送信元ノード識別子および転送先ノード識別子の構造が第1の実施例と異なる。変形例2では、仮想ホスト間あるいは仮想ホストと処理ノード(またはI/Oノード)間に仮想I/Oパスを構成することになるため、仮想ホストを特定するために、送信元ノード識別子にLPAR識別子を含む。あるいはハイパバイザ1310が識別子を有する場合には、ハイパバイザ識別子とLPAR識別子の組み合わせたものをノード識別子として扱い、仮想ホストを特定できるようにする。
グローバルQoS管理部1322の機能も第1の実施の形態と同等であるが、ハイパバイザに搭載したローカルQoS管理部1332と情報をやり取りするための通信インタフェースをハイパバイザ1310が備える点が異なる。
In the second modification, the structure of the source node identifier and the transfer destination node identifier included in the virtual I / O path configuration request (generation request, deletion request, change request) from the management console 3104 is the first embodiment. And different. In the second modification, a virtual I / O path is configured between virtual hosts or between a virtual host and a processing node (or I / O node). Contains an identifier. Alternatively, when the hypervisor 1310 has an identifier, a combination of the hypervisor identifier and the LPAR identifier is treated as a node identifier so that a virtual host can be specified.
The function of the global QoS management unit 1322 is also the same as that of the first embodiment, except that the hypervisor 1310 includes a communication interface for exchanging information with the local QoS management unit 1332 installed in the hypervisor.

以上のように、処理ノード1301,1302で計算機資源の仮想化を行う場合には、ハイパバイザなどの仮想化システムにローカルQoS管理部1332、1333と、論理I/O管理部1334,1335を組み込むことで、仮想ホスト(ゲストOS)間や仮想ホストと他の処理ノード間で仮想I/Oパスを設定し、前記実施形態と同様に管理することができる。   As described above, when the computer resources are virtualized by the processing nodes 1301 and 1302, the local QoS management units 1332 and 1333 and the logical I / O management units 1334 and 1335 are incorporated in a virtualization system such as a hypervisor. Thus, virtual I / O paths can be set between virtual hosts (guest OSs) or between virtual hosts and other processing nodes and managed in the same manner as in the above embodiment.

<変形例3>
上記変形例2では、ハイパバイザ1310がローカルQoS管理部1332と論理I/O管理部1334を備える例を示した。変形例3では、ハイパバイザ1310がローカルQoS管理部1332を備えるのではなく、LPAR1321がローカルQoS管理部1332を備える点が異なる。LPAR1321にローカルQoS管理部1332を備えることにより、ローカルQoS管理部1332が帯域監視に使用するCPUやメモリ等のハードウェアリソースを一定の利用率に制限できる。
<Modification 3>
In the second modification, the hypervisor 1310 includes the local QoS management unit 1332 and the logical I / O management unit 1334. The third modification is different in that the hypervisor 1310 does not include the local QoS management unit 1332 but the LPAR 1321 includes the local QoS management unit 1332. By providing the local QoS management unit 1332 in the LPAR 1321, hardware resources such as a CPU and a memory used by the local QoS management unit 1332 for bandwidth monitoring can be limited to a certain utilization rate.

なお、上記変形例2、3では、ハイパバイザ1310により計算機資源の仮想化を行う例を示したが、仮想マシンモニタ(Virtual Machine Monitor)を用いて仮想化を行う処理ノードにも適用することができる。   In the second and third modification examples, the computer resource is virtualized by the hypervisor 1310. However, the present invention can be applied to a processing node that performs virtualization using a virtual machine monitor. .

<変形例4>
本発明の第1の実施例では、グローバルQoS管理部122のみが、情報処理システム100全体の状態情報、管理ノード103を含む処理ノードの状態情報、スイッチファブリック群の状態情報、処理ノードとスイッチファブリック群に構成された仮想I/Oパスの状態情報を管理していた。そのため、グローバルQoS管理部122に障害が発生した場合に、グローバルQoS管理テーブルの内容が消失してしまう可能性があった。そこで、変形例4では、グローバルQoS管理部を搭載する管理ノードを複数箇所に設け、信頼性を向上できるようにする。
<Modification 4>
In the first embodiment of the present invention, only the global QoS management unit 122 has the state information of the entire information processing system 100, the state information of the processing node including the management node 103, the state information of the switch fabric group, the processing node and the switch fabric. The status information of virtual I / O paths configured in groups is managed. Therefore, when a failure occurs in the global QoS management unit 122, the contents of the global QoS management table may be lost. Thus, in the fourth modification, management nodes on which the global QoS management unit is mounted are provided at a plurality of locations so that the reliability can be improved.

図15は、本発明の変形例4における情報処理システム100のブロック図である。情報処理システム100は、処理ノード101、102、マスタ管理ノード1401、サブ管理ノード1402、管理コンソール1405、スイッチファブリック群1409を含む。   FIG. 15 is a block diagram of the information processing system 100 in Modification 4 of the present invention. The information processing system 100 includes processing nodes 101 and 102, a master management node 1401, a sub management node 1402, a management console 1405, and a switch fabric group 1409.

変形例4では、第1の実施の形態とは異なり、グローバルQoS管理部を搭載した管理ノード1401,1402を複数台備え、そのうちの一つがマスタ管理ノード1401、それ以外がサブ管理ノード1402として機能する。また、各処理ノードおよび各管理ノードに搭載するローカルQoS管理部111、116およびグローバルQoS管理部1414,1415の機能の一部が第1の実施の形態とは異なる。以下、第1の実施の形態との差異部分に特化して説明する。   In the fourth modification, unlike the first embodiment, a plurality of management nodes 1401 and 1402 each equipped with a global QoS management unit are provided, one of which functions as a master management node 1401, and the other functions as a sub management node 1402. To do. Further, some of the functions of the local QoS management units 111 and 116 and the global QoS management units 1414 and 1415 mounted on each processing node and each management node are different from those of the first embodiment. Hereinafter, a description will be given focusing on differences from the first embodiment.

変形例4では、処理ノード101のローカルQoS管理部111は、新たに管理ノード情報1452を有する。管理ノード情報1452は、マスタ管理ノード1401とサブ管理ノード1402のノードの識別情報をそれぞれ保持する。管理ノード情報1450、1451、1453も上記管理ノード情報1452と同じ構成である。   In the fourth modification, the local QoS management unit 111 of the processing node 101 has management node information 1452 newly. The management node information 1452 holds node identification information of the master management node 1401 and the sub management node 1402, respectively. The management node information 1450, 1451, 1453 has the same configuration as the management node information 1452.

次に、処理ノード101の帯域監視部1460の基本的な構成は第1の実施の形態に示した帯域監視部132と同じであるが、ローカルQoS管理情報(ローカルQoS管理テーブル130)の送信先ノードと、グローバルQoS稼動状況確認の対象ノードが第1の実施の形態とは異なる。具体的には、処理ノード101の帯域監視部142は、ローカルQoS管理情報をマスタ管理ノード1401のグローバルQoS管理部1414に送信し、サブ管理ノード1402のグローバルQoS管理部1415の稼動状況を確認する。   Next, the basic configuration of the bandwidth monitoring unit 1460 of the processing node 101 is the same as that of the bandwidth monitoring unit 132 shown in the first embodiment, but the transmission destination of the local QoS management information (local QoS management table 130). The node and the target node for checking the global QoS operation status are different from those in the first embodiment. Specifically, the bandwidth monitoring unit 142 of the processing node 101 transmits local QoS management information to the global QoS management unit 1414 of the master management node 1401 and confirms the operation status of the global QoS management unit 1415 of the sub management node 1402. .

マスタ管理ノード1401のグローバルQoS管理部1414の帯域監視部1445は、管理ノード情報1450を参照し、処理ノード101、102のローカルQoS情報(ローカルQoS管理テーブル130,133の情報)を収集してローカルQoS管理部111,116の稼動状況を確認する。そして、帯域監視部1445は収集したローカルQoS情報でグローバルQoS管理テーブル1443を更新してから、グローバルQoS管理テーブル1443のコピーをサブ管理ノード1402のグローバルQoS管理部1415に送付する。   The bandwidth monitoring unit 1445 of the global QoS management unit 1414 of the master management node 1401 refers to the management node information 1450, collects local QoS information (information of the local QoS management tables 130 and 133) of the processing nodes 101 and 102, and performs local processing. The operating status of the QoS management units 111 and 116 is confirmed. Then, the bandwidth monitoring unit 1445 updates the global QoS management table 1443 with the collected local QoS information, and then sends a copy of the global QoS management table 1443 to the global QoS management unit 1415 of the sub management node 1402.

サブ管理ノード1402のグローバルQoS管理部1415の帯域監視部1446は、管理ノード情報1451を参照し、マスタ管理ノード1401のグローバルQoS管理テーブル1443の更新情報を収集してマスタ側のグローバルQoS管理部1414の稼動状況を確認し、グローバルQoS管理テーブル1448に更新情報を反映する。そして帯域監視部1446は、更新したグローバルQoS管理テーブル1448の内容を処理ノード101,102のローカルQoS管理部111、116に送付する。   The bandwidth monitoring unit 1446 of the global QoS management unit 1415 of the sub management node 1402 refers to the management node information 1451, collects update information of the global QoS management table 1443 of the master management node 1401, and acquires the global QoS management unit 1414 on the master side. And the update information is reflected in the global QoS management table 1448. Then, the bandwidth monitoring unit 1446 sends the updated contents of the global QoS management table 1448 to the local QoS management units 111 and 116 of the processing nodes 101 and 102.

図16は、本発明の変形例4におけるグローバルQoS管理部1414および1415の帯域監視処理のフローを示す図である。自ノードがマスタ管理ノード1401であり、ローカルQoS管理部111,116すべてが正常に稼動している場合のフローは図10と同じであるため、変形例4では、図10と異なるフローに絞って説明する。   FIG. 16 is a diagram showing a flow of bandwidth monitoring processing of the global QoS management units 1414 and 1415 according to the fourth modification of the present invention. Since the flow in the case where the own node is the master management node 1401 and all the local QoS management units 111 and 116 are operating normally is the same as that in FIG. 10, in the fourth modification, the flow is different from that in FIG. explain.

ステップ1503では、自ノードがマスタ管理ノード1401かサブ管理ノード1402かを管理ノード情報1450を参照して判定する。自ノードがサブ管理ノード1402の場合、マスタ管理ノード1401からグローバルQoS管理テーブル1443の更新情報を受信する(ステップ1520)。   In step 1503, it is determined with reference to the management node information 1450 whether the own node is the master management node 1401 or the sub management node 1402. When the own node is the sub management node 1402, the update information of the global QoS management table 1443 is received from the master management node 1401 (step 1520).

そして、マスタ管理ノード1401のグローバルQoS管理部1414の稼動状況を確認する(ステップ1521)。マスタ管理ノード1401が正常稼動中であれば、サブ管理ノード1402のグローバルQoS管理テーブル1448の内容を更新する(ステップ1508)。稼動の確認が出来ない場合には、マスタ管理ノード1401に障害が発生したと判定して、マスタ管理ノード1401の変更処理を行なう(ステップ1523)。マスタ管理ノード1401の変更処理では、サブ管理ノード1402の管理ノード情報1451のマスタ管理ノードにサブ管理ノード1402の識別情報を保持する。   Then, the operating status of the global QoS management unit 1414 of the master management node 1401 is confirmed (step 1521). If the master management node 1401 is operating normally, the contents of the global QoS management table 1448 of the sub management node 1402 are updated (step 1508). If the operation cannot be confirmed, it is determined that a failure has occurred in the master management node 1401, and the master management node 1401 is changed (step 1523). In the change process of the master management node 1401, the identification information of the sub management node 1402 is held in the master management node of the management node information 1451 of the sub management node 1402.

続いて、サブ管理ノード1402を選択し、グローバルQoS管理テーブル1448の初期化と、グローバルQoS管理部1415の初期化を行い、各処理ノードにサブ管理ノード1402がマスタ管理ノード1401を引き継いだことを通知して、各処理ノード101,102の管理ノード情報1452、1453を更新させる(ステップ1524)。   Subsequently, the sub management node 1402 is selected, the global QoS management table 1448 is initialized, and the global QoS management unit 1415 is initialized, and the sub management node 1402 takes over the master management node 1401 to each processing node. The management node information 1452 and 1453 of each processing node 101 and 102 is updated (step 1524).

自ノードがマスタ管理ノード1401である場合に、ローカルQoS稼動状況確認を行なった結果(ステップ1505)、ローカルQoS管理部111、116の一部の稼動確認が出来ない場合には、あらかじめ設定した障害処理(たとえば、ローカルQoS管理部111,116の再起動など)を行う(ステップ1530)。   If the local node is the master management node 1401 and the local QoS operation status is confirmed (step 1505), and if the operation of some of the local QoS managers 111 and 116 cannot be confirmed, a preset failure Processing (for example, restarting the local QoS management units 111 and 116, etc.) is performed (step 1530).

ローカルQoS管理部111の帯域監視部1460の処理フローは図11と同様であるが、ステップ1003ではサブ管理ノード1402からグローバルQoS情報を受信し、ステップ1004では、サブ管理ノード1402の稼動状況を確認する点が前記第1の実施例とは異なる。   The processing flow of the bandwidth monitoring unit 1460 of the local QoS management unit 111 is the same as that in FIG. 11, but global QoS information is received from the sub management node 1402 in step 1003, and the operating status of the sub management node 1402 is confirmed in step 1004. This is different from the first embodiment.

以上のように、情報処理システム100全体の状態情報を管理する管理ノードを複数設けて、マスタ管理ノード1401に障害が発生するとサブ管理ノード1402がマスタ管理ノード1401を引き継ぐことにより、マスタ管理ノード1401のグローバルQoS管理テーブル1443の内容が消失するのを防いで、仮想I/Oパスを利用する情報処理システムの信頼性を向上することができる。   As described above, a plurality of management nodes that manage state information of the entire information processing system 100 are provided, and when a failure occurs in the master management node 1401, the sub management node 1402 takes over the master management node 1401, thereby the master management node 1401. The contents of the global QoS management table 1443 can be prevented from being lost, and the reliability of the information processing system using the virtual I / O path can be improved.

本発明は、複数のサーバやI/O装置をスイッチファブリックなどのI/Oスイッチで接続して仮想I/Oパスを利用する計算機システムに利用することができ、複数のサーバ間,あるいはサーバと処理ノード間に生成された仮想的なI/Oパス毎にエンド・ツー・エンドの性能を保証することができる。   The present invention can be used for a computer system that uses a virtual I / O path by connecting a plurality of servers and I / O devices with an I / O switch such as a switch fabric. End-to-end performance can be guaranteed for each virtual I / O path generated between processing nodes.

本発明の第1の実施の形態における情報処理システムのハードウェアの一例を示すブロック図である。It is a block diagram which shows an example of the hardware of the information processing system in the 1st Embodiment of this invention. 本発明の第1の実施の形態における情報処理システムの機能要素の一例を示すブロック図である。It is a block diagram which shows an example of the functional element of the information processing system in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるローカルQoS管理テーブルの一例を示す構成図である。It is a block diagram which shows an example of the local QoS management table in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるグローバルQoS管理テーブルの一例を示す構成図である。It is a block diagram which shows an example of the global QoS management table in the 1st Embodiment of this invention. 本発明の第1の実施の形態における論理I/O管理テーブルの一例を示す構成図である。It is a block diagram which shows an example of the logical I / O management table in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるQoS割当管理部の一例を示すブロック図である。It is a block diagram which shows an example of the QoS allocation management part in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるグローバルQoS管理部の帯域監視部の一例を示すブロック図である。It is a block diagram which shows an example of the bandwidth monitoring part of the global QoS management part in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるローカルQoS管理部の帯域監視部の一例を示すブロック図である。It is a block diagram which shows an example of the zone | band monitoring part of the local QoS management part in the 1st Embodiment of this invention. 本発明の第1の実施の形態における仮想I/Oパス生成処理の一例を示すフローチャートである。It is a flowchart which shows an example of the virtual I / O path | pass production | generation process in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるグローバルQoS管理部におけるグローバル帯域監視処理の一例を示すフローチャートである。It is a flowchart which shows an example of the global bandwidth monitoring process in the global QoS management part in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるローカルQoS管理部におけるローカル帯域監視処理の一例を示すフローチャートである。It is a flowchart which shows an example of the local bandwidth monitoring process in the local QoS management part in the 1st Embodiment of this invention. 本発明の第1の実施の形態におけるローカル帯域監視処理の中の論理I/O帯域算出処理の一例を示すフローチャートである。It is a flowchart which shows an example of the logical I / O band calculation process in the local band monitoring process in the 1st Embodiment of this invention. 本発明の変形例1におけるQoS割当管理部の仮想I/Oパス生成部の一例を示すブロック図である。It is a block diagram which shows an example of the virtual I / O path generation part of the QoS allocation management part in the modification 1 of this invention. 本発明の変形例2における情報処理システムの一例を示すブロック図である。It is a block diagram which shows an example of the information processing system in the modification 2 of this invention. 本発明の変形例4における情報処理システムの一例を示すブロック図である。It is a block diagram which shows an example of the information processing system in the modification 4 of this invention. 本発明の変形例4におけるグローバルQoS管理部におけるグローバル帯域監視処理の一例を示すフローチャートである。It is a flowchart which shows an example of the global band monitoring process in the global QoS management part in the modification 4 of this invention.

符号の説明Explanation of symbols

100 情報処理システム
101、102 処理ノード
103 管理ノード
104 管理コンソール
105 スイッチファブリック群
111、116 ローカルQoS管理部
112、117 論理I/O管理部
122 グローバルQoS管理部
130、133ローカルQoS管理テーブル
131、134 QoS割当管理部
132、135、142帯域監視部
140 グローバルQoS管理テーブル
150、151、152 論理I/O管理テーブル
701 論理I/O帯域算出部
707 スイッチ情報取得部
100 Information processing system 101, 102 Processing node 103 Management node 104 Management console 105 Switch fabric group 111, 116 Local QoS management unit 112, 117 Logical I / O management unit 122 Global QoS management unit 130, 133 Local QoS management table 131, 134 QoS allocation management unit 132, 135, 142 Bandwidth monitoring unit 140 Global QoS management table 150, 151, 152 Logical I / O management table 701 Logical I / O bandwidth calculation unit 707 Switch information acquisition unit

Claims (16)

物理I/Oポートに仮想I/Oポートを設定可能なI/Oアダプタを備えたノードを複数有し、前記ノードのI/OアダプタをI/Oスイッチのポートに接続し、前記複数のノード間で前記仮想I/Oポートを介してデータの転送を行う情報処理システムにおける仮想I/Oパスの管理方法であって、
前記複数のノードのうちのいずれか一つが、前記I/Oスイッチのポートの情報を収集するステップと、
前記各ノードがそれぞれのノードが備えたI/Oアダプタの仮想I/Oポート毎に帯域を取得するステップと、
前記複数のノードのうちのいずれか一つが、前記I/Oスイッチのポートの情報と、前記帯域を取得するステップと、
前記I/Oスイッチのポートの情報と、前記帯域を取得した前記ノードが、送信元のノードの情報と送信先のノードの情報と帯域を含む仮想I/Oパスの生成要求を受け付けるステップと、
前記仮想I/Oパスの生成要求を受け付けたノードが、前記I/Oスイッチのポートの情報から前記送信元のノードから送信先のノードまでの仮想I/Oパスの経路を選択するステップと、
前記仮想I/Oパスの生成要求を受け付けたノードが、前記選択した仮想I/Oパスの経路上の仮想I/Oポートを抽出し、抽出した仮想I/Oポートに前記取得した帯域と前記生成要求に含まれる帯域から当該仮想I/Oパスを設定可能か否かを判定するステップと、
前記仮想I/Oパスの生成要求を受け付けたノードが、前記仮想I/Oパスを設定可能と判定しときに、前記仮想I/Oパス上のポートに当該仮想I/Oパスを設定するステップと、
を含むことを特徴とする仮想I/Oパスの管理方法。
A plurality of nodes having I / O adapters capable of setting virtual I / O ports as physical I / O ports; connecting the I / O adapters of the nodes to I / O switch ports; and the plurality of nodes A method of managing a virtual I / O path in an information processing system that transfers data via the virtual I / O port between
Any one of the plurality of nodes collecting information of a port of the I / O switch;
Each node obtaining a bandwidth for each virtual I / O port of an I / O adapter provided in each node;
Any one of the plurality of nodes acquires the information of the port of the I / O switch and the bandwidth;
Receiving a request for generating a virtual I / O path including information on a port of the I / O switch and the node that has acquired the bandwidth, including information on a source node, information on a destination node, and a bandwidth;
A node that has received the virtual I / O path generation request selects a path of the virtual I / O path from the source node to the destination node from the port information of the I / O switch;
The node that has received the virtual I / O path generation request extracts a virtual I / O port on the route of the selected virtual I / O path, and the acquired bandwidth and the extracted virtual I / O port Determining whether the virtual I / O path can be set from the bandwidth included in the generation request;
A step of setting the virtual I / O path to a port on the virtual I / O path when the node that has received the virtual I / O path generation request determines that the virtual I / O path can be set When,
A method of managing a virtual I / O path.
前記仮想I/Oパスを設定するステップは、
前記仮想I/Oパスの生成要求を受け付けたノードが、前記I/Oアダプタの物理ポートに設定した仮想I/Oパスに対応する仮想I/Oポートに仮想I/Oパス識別子を付与し、
前記仮想I/Oパスを設定したI/Oアダプタの物理ポートに関連する仮想I/Oパス識別子と、該仮想I/Oパス識別子に対応する仮想I/Oポートの状態情報を保持するステップをさらに含むことを特徴とする請求項1に記載の仮想I/Oパスの管理方法。
The step of setting the virtual I / O path includes:
The node that has received the virtual I / O path generation request gives a virtual I / O path identifier to the virtual I / O port corresponding to the virtual I / O path set as the physical port of the I / O adapter;
Holding a virtual I / O path identifier associated with a physical port of an I / O adapter that has set the virtual I / O path, and status information of a virtual I / O port corresponding to the virtual I / O path identifier; The virtual I / O path management method according to claim 1, further comprising:
前記I/Oスイッチのポートの情報を収集するステップは、
前記I/Oスイッチの情報と、I/Oスイッチのポートの情報と、前記ポートに設定された仮想I/Oパスの情報を収集することを特徴とする請求項1に記載の仮想I/Oパスの管理方法。
The step of collecting port information of the I / O switch includes:
The virtual I / O according to claim 1, wherein information on the I / O switch, information on a port of the I / O switch, and information on a virtual I / O path set in the port are collected. Path management method.
前記仮想I/Oパスを設定するステップは、
前記I/Oアダプタの物理ポートに設定した仮想I/Oパスに対応する仮想I/Oポートに仮想I/Oパス識別子を付与し、
前記仮想I/Oポート毎に帯域を取得するステップは、
前記I/Oアダプタの物理ポートに関連する仮想I/Oパス識別子と、該仮想I/Oパス識別子に対応して構成される仮想I/Oポートで送受信する帯域を取得することを特徴とする請求項1に記載の仮想I/Oパスの管理方法。
The step of setting the virtual I / O path includes:
A virtual I / O path identifier is assigned to the virtual I / O port corresponding to the virtual I / O path set in the physical port of the I / O adapter;
The step of acquiring a bandwidth for each virtual I / O port includes:
A virtual I / O path identifier associated with a physical port of the I / O adapter and a bandwidth transmitted / received by a virtual I / O port configured corresponding to the virtual I / O path identifier are acquired. The virtual I / O path management method according to claim 1.
前記複数のノードのうちのいずれか一つが、前記I/Oスイッチのポートの情報を収集するステップは、
前記複数のノードの稼動状態に基づいて一つのノードを選択するステップを含み、
前記仮想I/Oポート毎に帯域を取得するステップは、
前記仮想I/Oパスが設定されたI/Oスイッチのポートの帯域を取得するステップを含み、
前記仮想I/Oパスを設定可能か否かを判定するステップは、
前記仮想I/Oパスの生成要求を受け付けたノードが、前記選択した仮想I/Oパスの経路上のポートを抽出し、抽出したポートから取得した帯域と、前記仮想I/Oポートの帯域及び前記生成要求に含まれる帯域から当該仮想I/Oパスを設定可能か否かを判定し、
前記選択されたノードは、前記収集したI/Oスイッチのポートの情報を、前記仮想I/Oパスの生成要求を受け付けるノードへ送信することを特徴とする請求項1に記載の仮想I/Oパスの管理方法。
The step in which any one of the plurality of nodes collects information of the port of the I / O switch includes:
Selecting one node based on operating states of the plurality of nodes;
The step of acquiring a bandwidth for each virtual I / O port includes:
Obtaining a bandwidth of a port of the I / O switch in which the virtual I / O path is set,
The step of determining whether or not the virtual I / O path can be set includes:
The node that has received the virtual I / O path generation request extracts the port on the route of the selected virtual I / O path, the bandwidth acquired from the extracted port, the bandwidth of the virtual I / O port, and Determining whether the virtual I / O path can be set from the bandwidth included in the generation request;
2. The virtual I / O according to claim 1, wherein the selected node transmits the collected I / O switch port information to a node that accepts the virtual I / O path generation request. Path management method.
物理I/Oポートに仮想I/Oポートを設定可能なI/Oアダプタを備えたノードを複数有し、前記各ノードのI/Oアダプタを接続するポートを備えたI/Oスイッチを備えて、前記複数のノード間で前記仮想I/Oポートを介してデータの転送を行う情報処理システムであって、
前記ノードは、
前記I/Oスイッチのポートの情報を収集するスイッチ情報取得部と、
前記I/Oアダプタの仮想I/Oポート毎に帯域を取得するローカル管理部と、を備え、
前記複数のノードのうちの少なくとも一つは、前記複数のノードのI/Oアダプタの仮想I/Oポート間を接続する仮想I/Oパスを設定するグローバルQoS管理部を有し、
前記グローバルQoS管理部は、
前記スイッチ情報取得部とローカル管理部から前記I/Oスイッチのポートの情報と仮想I/Oポート毎の帯域を各ノードから取得するローカル情報取得部と、
送信元のノードの情報と送信先のノードの情報と帯域を含む仮想I/Oパスの生成要求を受け付けて、前記I/Oスイッチのポートの情報から前記送信元のノードから送信先のノードまでの仮想I/Oパスの経路を選択する仮想I/Oパス選択部と、
前記選択した仮想I/Oパスの経路上の仮想I/Oポートを抽出し、当該抽出した仮想I/Oポートに前記取得した帯域と前記生成要求に含まれる帯域から当該仮想I/Oパスを設定可能か否かを判定し、当該仮想I/Oパスを設定可能なときには、前記仮想I/Oパス上のポートに当該仮想I/Oパスを設定する仮想I/Oパス設定部と、
を有することを特徴とする情報処理システム。
A plurality of nodes having I / O adapters capable of setting virtual I / O ports as physical I / O ports, and an I / O switch having ports for connecting the I / O adapters of the respective nodes. An information processing system for transferring data between the plurality of nodes via the virtual I / O port,
The node is
A switch information acquisition unit that collects information of the ports of the I / O switch;
A local management unit that obtains a bandwidth for each virtual I / O port of the I / O adapter,
At least one of the plurality of nodes includes a global QoS management unit that sets a virtual I / O path that connects virtual I / O ports of the I / O adapters of the plurality of nodes,
The global QoS management unit
A local information acquisition unit that acquires information on the port of the I / O switch and a bandwidth for each virtual I / O port from each node from the switch information acquisition unit and the local management unit;
Accepts a request for generating a virtual I / O path including information on a source node, information on a destination node, and a bandwidth, from the port information of the I / O switch to the destination node from the source node A virtual I / O path selection unit for selecting a virtual I / O path route;
A virtual I / O port on the route of the selected virtual I / O path is extracted, and the virtual I / O path is extracted from the acquired bandwidth and the bandwidth included in the generation request in the extracted virtual I / O port. It is determined whether or not setting is possible, and when the virtual I / O path can be set, a virtual I / O path setting unit that sets the virtual I / O path to a port on the virtual I / O path;
An information processing system comprising:
前記仮想I/Oパス設定部は、
前記I/Oアダプタの物理ポートに設定した仮想I/Oパスに対応する仮想I/Oポートに仮想I/Oパス識別子を付与し、前記仮想I/Oパスを設定したI/Oアダプタの物理ポートに関連する仮想I/Oパス識別子と、該仮想I/Oパス識別子に対応する仮想I/Oポートの状態情報を保持することを特徴とする請求項6に記載の情報処理システム。
The virtual I / O path setting unit
A virtual I / O path identifier is assigned to a virtual I / O port corresponding to a virtual I / O path set in the physical port of the I / O adapter, and the physical of the I / O adapter in which the virtual I / O path is set The information processing system according to claim 6, wherein a virtual I / O path identifier associated with a port and status information of a virtual I / O port corresponding to the virtual I / O path identifier are retained.
前記スイッチ情報取得部は、
前記I/Oスイッチの情報と、I/Oスイッチのポートの情報と、前記ポートに設定された仮想I/Oパスの情報を収集することを特徴とする請求項6に記載の情報処理システム。
The switch information acquisition unit
The information processing system according to claim 6, wherein the information on the I / O switch, the information on the port of the I / O switch, and the information on the virtual I / O path set in the port are collected.
前記仮想I/Oパス設定部は、
前記I/Oアダプタの物理ポートに設定した仮想I/Oパスに対応する仮想I/Oポートに仮想I/Oパス識別子を付与し、
前記ローカル管理部は、
前記I/Oアダプタの物理ポートに関連する仮想I/Oパス識別子と、該仮想I/Oパス識別子に対応して構成される仮想I/Oポートで送受信する帯域を取得することを特徴とする請求項6に記載の情報処理システム。
The virtual I / O path setting unit
A virtual I / O path identifier is assigned to the virtual I / O port corresponding to the virtual I / O path set in the physical port of the I / O adapter;
The local management unit
A virtual I / O path identifier associated with a physical port of the I / O adapter and a bandwidth transmitted / received by a virtual I / O port configured corresponding to the virtual I / O path identifier are acquired. The information processing system according to claim 6.
前記ローカル管理部は、
前記I/Oアダプタの仮想I/Oポート毎の帯域と、前記I/Oスイッチのポートの帯域を取得し、
前記仮想I/Oパス設定部は、
前記選択した仮想I/Oパスの経路上のポートを関連ポートとして抽出し、抽出した関連ポートから取得し帯域と、前記仮想I/Oポートの帯域及び前記生成要求に含まれる帯域から当該仮想I/Oパスを設定可能か否かを判定し、当該仮想I/Oパスを設定可能なときには、前記仮想I/Oパス上のポートに当該仮想I/Oパスを設定することを特徴とする請求項6に記載の情報処理システム。
The local management unit
Obtain the bandwidth for each virtual I / O port of the I / O adapter and the bandwidth of the port of the I / O switch,
The virtual I / O path setting unit
The port on the route of the selected virtual I / O path is extracted as a related port, the virtual I / O port is acquired from the extracted related port, the virtual I / O port bandwidth, and the bandwidth included in the generation request. It is determined whether or not an / O path can be set, and when the virtual I / O path can be set, the virtual I / O path is set to a port on the virtual I / O path. Item 7. The information processing system according to Item 6.
前記仮想I/Oパス選択部は、
予め設定した仮想I/Oパスの候補の中から、予め設定された条件に従って仮想I/Oパスを選択することを特徴とする請求項6に記載の情報処理システム。
The virtual I / O path selection unit
The information processing system according to claim 6, wherein a virtual I / O path is selected from preset virtual I / O path candidates according to a preset condition.
前記仮想I/Oパス選択部は、
前記仮想I/Oパスの経路長または仮想I/Oパスを構成する各ポートに設定された帯域あるいは仮想I/Oパスを構成する各ポートの利用帯域のいずれかを選択条件として予め設定した仮想I/Oパスの候補の中から仮想I/Oパスを選択することを特徴とする請求項11に記載の情報処理システム。
The virtual I / O path selection unit
A virtual set in advance as a selection condition using either the path length of the virtual I / O path, the bandwidth set for each port constituting the virtual I / O path or the bandwidth used for each port constituting the virtual I / O path The information processing system according to claim 11, wherein a virtual I / O path is selected from I / O path candidates.
前記グローバルQoS管理部は、
前記設定した仮想I/Oパスを削除する仮想I/Oパス削除部と、
前記設定した仮想I/Oパスを変更するする仮想I/Oパス変更部と、を備えたことを特徴とする請求項6に記載の情報処理システム。
The global QoS management unit
A virtual I / O path deleting unit for deleting the set virtual I / O path;
The information processing system according to claim 6, further comprising: a virtual I / O path changing unit that changes the set virtual I / O path.
前記ノードは、
計算機資源を論理区画に分割する仮想化部と、
前記論理区画を管理する論理区画管理部とを備え、
前記ローカル管理部は、
論理区画管理部により管理される論理区画の識別子との対応を保持するマッピング部を備え、
前記仮想I/Oパス選択部は、
前記論理区画から他のノードへの仮想I/Oパスを選択することを特徴とする請求項6に記載の情報処理システム。
The node is
A virtualization unit that divides computer resources into logical partitions;
A logical partition management unit for managing the logical partition;
The local management unit
A mapping unit that retains correspondence with identifiers of logical partitions managed by the logical partition management unit;
The virtual I / O path selection unit
The information processing system according to claim 6, wherein a virtual I / O path from the logical partition to another node is selected.
前記I/Oスイッチのポートの情報と、前記帯域を取得した前記ノードが、送信元のノードの情報と送信先のノードの情報と帯域を含む仮想I/Oパスの生成要求を受け付けるステップは、
前記仮想I/Oパスの生成要求に、新たに設定する仮想I/Oパスの優先度を含み、
前記仮想I/Oパス上のポートに当該仮想I/Oパスを設定するステップは、
前記帯域と優先度に基づいて前記仮想I/Oパス上のポートに当該仮想I/Oパスを設定することを特徴とする請求項1に記載の仮想I/Oパスの管理方法。
The step of receiving a request for generating a virtual I / O path including information on the port of the I / O switch and the node that has acquired the bandwidth includes information on a source node, information on a destination node, and a bandwidth.
The virtual I / O path generation request includes the priority of the virtual I / O path to be newly set,
The step of setting the virtual I / O path to a port on the virtual I / O path includes:
2. The virtual I / O path management method according to claim 1, wherein the virtual I / O path is set to a port on the virtual I / O path based on the bandwidth and priority.
物理I/Oポートに仮想I/Oポートを設定可能なI/Oアダプタを備えたノードを複数有し、前記ノードのI/OアダプタをI/Oスイッチのポートに接続し、前記複数のノード間で前記仮想I/Oポートをデータの転送を行う仮想I/Oパスを設定するプログラムであって、
前記I/Oスイッチのポートの情報を取得する手順と、
前記各ノードから前記I/Oアダプタの仮想I/Oポート毎の帯域を取得する手順と、
前記I/Oスイッチのポートの情報と、前記帯域を取得する手順と、
送信元のノードの情報と送信先のノードの情報と帯域を含む仮想I/Oパスの生成要求を受け付ける手順と、
前記I/Oスイッチのポートの情報から前記送信元のノードから送信先のノードまでの仮想I/Oパスの経路を選択する手順と、
前記選択した仮想I/Oパスの経路上の仮想I/Oポートを抽出し、抽出した仮想I/Oポートに前記取得した帯域と前記生成要求に含まれる帯域から当該仮想I/Oパスを設定可能か否かを判定する手順と、
前記仮想I/Oパスを設定可能と判定しときに、前記仮想I/Oパス上のポートに当該仮想I/Oパスを設定するステップと、
を計算機に機能させることを特徴とするプログラム。
A plurality of nodes having I / O adapters capable of setting virtual I / O ports as physical I / O ports; connecting the I / O adapters of the nodes to I / O switch ports; and the plurality of nodes A program for setting a virtual I / O path for transferring data to and from the virtual I / O port,
A procedure for acquiring port information of the I / O switch;
Obtaining a bandwidth for each virtual I / O port of the I / O adapter from each node;
Information on the port of the I / O switch, and a procedure for acquiring the bandwidth;
A procedure for receiving a virtual I / O path generation request including information on a source node, information on a destination node, and a bandwidth;
A procedure for selecting a route of a virtual I / O path from the source node to the destination node from the information of the port of the I / O switch;
The virtual I / O port on the route of the selected virtual I / O path is extracted, and the virtual I / O path is set to the extracted virtual I / O port from the acquired bandwidth and the bandwidth included in the generation request A procedure for determining whether it is possible;
Setting the virtual I / O path to a port on the virtual I / O path when it is determined that the virtual I / O path can be set;
A program characterized by causing a computer to function.
JP2007242216A 2007-09-19 2007-09-19 Method of managing virtual i/o path, information processing system, and program Pending JP2009075718A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007242216A JP2009075718A (en) 2007-09-19 2007-09-19 Method of managing virtual i/o path, information processing system, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007242216A JP2009075718A (en) 2007-09-19 2007-09-19 Method of managing virtual i/o path, information processing system, and program

Publications (1)

Publication Number Publication Date
JP2009075718A true JP2009075718A (en) 2009-04-09

Family

ID=40610644

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007242216A Pending JP2009075718A (en) 2007-09-19 2007-09-19 Method of managing virtual i/o path, information processing system, and program

Country Status (1)

Country Link
JP (1) JP2009075718A (en)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011151930A1 (en) * 2010-06-01 2011-12-08 株式会社日立製作所 I/o device management method, computer system and i/o device management program
WO2012157038A1 (en) * 2011-05-13 2012-11-22 株式会社日立製作所 Connection path management method, i/o virtualization device, and connection path management program
CN102821041A (en) * 2012-07-19 2012-12-12 中国联合网络通信集团有限公司 Protection method and device of services
JP2013526234A (en) * 2010-05-03 2013-06-20 ブロケード コミュニケーションズ システムズ インコーポレイテッド Virtual cluster exchange
WO2015121998A1 (en) * 2014-02-17 2015-08-20 株式会社日立製作所 Storage system
WO2015155997A1 (en) * 2014-04-11 2015-10-15 日本電気株式会社 Setting device, control device, setting method, and network switch
WO2016103506A1 (en) * 2014-12-26 2016-06-30 株式会社日立製作所 Path management device and path management method
JP2016524879A (en) * 2013-06-21 2016-08-18 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation Computer-implemented processes, computer program products, and devices for dynamic management of integrated protocols (dynamic management of integrated protocols)
WO2016159113A1 (en) * 2015-03-31 2016-10-06 日本電気株式会社 Control device, control method, and program
WO2016159057A1 (en) * 2015-03-31 2016-10-06 日本電気株式会社 Control device, control method, and program
WO2016159192A1 (en) * 2015-03-31 2016-10-06 日本電気株式会社 Control device, control method, and program
WO2022044344A1 (en) * 2020-08-31 2022-03-03 日本電信電話株式会社 Management device, configuration setting method, and program
JP7367873B2 (en) 2020-06-26 2023-10-24 日本電信電話株式会社 Data nodes, data node management methods, and data node management programs

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013526234A (en) * 2010-05-03 2013-06-20 ブロケード コミュニケーションズ システムズ インコーポレイテッド Virtual cluster exchange
JP5515157B2 (en) * 2010-06-01 2014-06-11 株式会社日立製作所 I / O device management method and computer system
US9292469B2 (en) 2010-06-01 2016-03-22 Hitachi, Ltd. I/O device management method, computer system, and I/O device management program product
WO2011151930A1 (en) * 2010-06-01 2011-12-08 株式会社日立製作所 I/o device management method, computer system and i/o device management program
WO2012157038A1 (en) * 2011-05-13 2012-11-22 株式会社日立製作所 Connection path management method, i/o virtualization device, and connection path management program
CN102821041A (en) * 2012-07-19 2012-12-12 中国联合网络通信集团有限公司 Protection method and device of services
JP2016524879A (en) * 2013-06-21 2016-08-18 インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation Computer-implemented processes, computer program products, and devices for dynamic management of integrated protocols (dynamic management of integrated protocols)
US10348588B2 (en) 2013-06-21 2019-07-09 International Business Machines Corporation Dynamic management of integration protocols
US10013216B2 (en) 2014-02-17 2018-07-03 Hitachi, Ltd. Storage system
WO2015121998A1 (en) * 2014-02-17 2015-08-20 株式会社日立製作所 Storage system
WO2015155997A1 (en) * 2014-04-11 2015-10-15 日本電気株式会社 Setting device, control device, setting method, and network switch
WO2016103506A1 (en) * 2014-12-26 2016-06-30 株式会社日立製作所 Path management device and path management method
WO2016159113A1 (en) * 2015-03-31 2016-10-06 日本電気株式会社 Control device, control method, and program
CN107534602A (en) * 2015-03-31 2018-01-02 日本电气株式会社 controller, control method and program
JPWO2016159113A1 (en) * 2015-03-31 2018-01-18 日本電気株式会社 Control device, control method and program
JPWO2016159057A1 (en) * 2015-03-31 2018-03-08 日本電気株式会社 Control device, control method and program
WO2016159192A1 (en) * 2015-03-31 2016-10-06 日本電気株式会社 Control device, control method, and program
RU2676452C1 (en) * 2015-03-31 2018-12-28 Нек Корпорейшн Controller, management method and program
WO2016159057A1 (en) * 2015-03-31 2016-10-06 日本電気株式会社 Control device, control method, and program
JP7367873B2 (en) 2020-06-26 2023-10-24 日本電信電話株式会社 Data nodes, data node management methods, and data node management programs
WO2022044344A1 (en) * 2020-08-31 2022-03-03 日本電信電話株式会社 Management device, configuration setting method, and program
JP7459950B2 (en) 2020-08-31 2024-04-02 日本電信電話株式会社 Management device, configuration setting method and program

Similar Documents

Publication Publication Date Title
JP2009075718A (en) Method of managing virtual i/o path, information processing system, and program
US7606965B2 (en) Information handling system with virtualized I/O adapter ports
US11218364B2 (en) Network-accessible computing service for micro virtual machines
US9569245B2 (en) System and method for controlling virtual-machine migrations based on processor usage rates and traffic amounts
US8095701B2 (en) Computer system and I/O bridge
US8874952B2 (en) Computer system and availability method thereof
US8825964B1 (en) Adaptive integration of cloud data services with a data storage system
US7395367B2 (en) Method using a master node to control I/O fabric configuration in a multi-host environment
US9569244B2 (en) Implementing dynamic adjustment of I/O bandwidth for virtual machines using a single root I/O virtualization (SRIOV) adapter
JP5272709B2 (en) Address assignment method, computer, physical machine, program, and system
KR101054698B1 (en) Method and system for managing virtual instances of physical ports attached to the network
US11379265B2 (en) Resource management method, host, and endpoint based on performance specification
US20180189109A1 (en) Management system and management method for computer system
JP2005165702A (en) Device connection method of cluster storage
WO2019233322A1 (en) Resource pool management method and apparatus, resource pool control unit, and communication device
JP2012226427A (en) Resource management method and computer system
JP2016170669A (en) Load distribution function deployment method, load distribution function deployment device, and load distribution function deployment program
US9111046B2 (en) Implementing capacity and user-based resource allocation for a shared adapter in a virtualized system
JP5515157B2 (en) I / O device management method and computer system
US20110320602A1 (en) Discovery of logical images at storage area network endpoints
US10331581B2 (en) Virtual channel and resource assignment
WO2013086861A1 (en) Method for accessing multi-path input/output (i/o) equipment, i/o multi-path manager and system
CN113497747B (en) Storage system, storage device thereof and operation method thereof
JP6244496B2 (en) Server storage system management system and management method
US20140250214A1 (en) Computer system, program-cooperative method, and program