JP4634202B2 - ネットワークトポロジー表示方法、管理サーバ、及びネットワーク管理プログラム - Google Patents

ネットワークトポロジー表示方法、管理サーバ、及びネットワーク管理プログラム Download PDF

Info

Publication number
JP4634202B2
JP4634202B2 JP2005106245A JP2005106245A JP4634202B2 JP 4634202 B2 JP4634202 B2 JP 4634202B2 JP 2005106245 A JP2005106245 A JP 2005106245A JP 2005106245 A JP2005106245 A JP 2005106245A JP 4634202 B2 JP4634202 B2 JP 4634202B2
Authority
JP
Japan
Prior art keywords
port
switch
network
storage
volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005106245A
Other languages
English (en)
Other versions
JP2006285757A (ja
Inventor
恭介 阿知和
知樹 荘司
正史 野沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2005106245A priority Critical patent/JP4634202B2/ja
Priority to US11/155,571 priority patent/US7475131B2/en
Publication of JP2006285757A publication Critical patent/JP2006285757A/ja
Application granted granted Critical
Publication of JP4634202B2 publication Critical patent/JP4634202B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12Discovery or management of network topologies
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • G06F3/0605Improving or facilitating administration, e.g. storage management by facilitating the interaction with a user or administrator
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0635Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0662Virtualisation aspects
    • G06F3/0665Virtualisation aspects at area level, e.g. provisioning of virtual or logical volumes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0689Disk arrays, e.g. RAID, JBOD
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F2003/0697Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers device management, e.g. handlers, drivers, I/O schedulers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12Discovery or management of network topologies
    • H04L41/122Discovery or management of network topologies of virtualised topologies, e.g. software-defined networks [SDN] or network function virtualisation [NFV]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/22Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks comprising specially adapted graphical user interfaces [GUI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Description

本発明はネットワークトポロジー表示システム、管理サーバ、及びネットワーク管理プログラムに関する。
政府、官公庁、地方自治体、企業、教育機関等では、多種多量のデータを取り扱うために、比較的大規模なストレージシステムを用いてデータを管理する。このストレージシステムは、例えば、ディスクアレイ装置等から構成される。ディスクアレイ装置は、多数の記憶デバイスをアレイ状に配設して構成されるもので、例えば、RAID(Redundant Arrays of Independent Inexpensive Disks)に基づく記憶領域を提供する。近年、SAN(Storage Area Network)環境の普及とともに、ストレージシステムの統合が急速に進められている。SAN環境においては、複数のストレージシステムが高速のFC(Fibre Channel)スイッチを介して複数のホスト装置に接続される形態となり、SAN構成の容易な管理、障害の早期検出と、迅速な対処、適切なアクセス制御によるセキュリティ確保といった、運用管理機能が求められている。SAN環境のネットワーク構成を管理する技術として、例えば、特許文献1〜3が知られている。
特開2003−316671号 特開2003−141054号 特開2004−254270号
しかし、従来のSAN管理ソフトウェアでは、ホスト装置からストレージシステムへのアクセスパスについて、ホスト装置のHBA(Host Bus Adapter)からFCスイッチのどのポートを通り、更にストレージシステムのどのポートを通過しているか、更には論理ボリュームと物理ボリュームとのマッピング関係について、グラフィカルに表示することができたものの、外部接続機能を有するストレージシステムの仮想ボリュームが外部接続ポートを経由して外部ボリュームに至るまでのアクセスパスを表示することはできなかった。これは、バックエンド側のアクセスパスは、ストレージシステム内部の構成に係るものであるから、管理者に提示する必要性に乏しかったことに起因する。
また、ホスト装置が仮想化スイッチを介してストレージシステムに接続する場合においても、従来のSAN管理ソフトウェアでは、仮想化スイッチ内の仮想ボリュームとストレージシステム内のボリュームとの間のアクセスパスを表示することはできなかった。
本発明は、上記の問題点に鑑みてなされたもので、本発明の目的は、外部ストレージ接続機能を有する記憶制御装置の仮想ボリュームと、外部ストレージシステムの外部ボリュームとの間のアクセスパスを表示する技術を提供することにある。
上記の課題を解決するため、本発明のネットワークトポロジー表示システムは、仮想ボリュームを備える記憶制御装置と、外部ボリュームを備える外部ストレージシステムとを含み、外部ボリュームが仮想ボリュームにマッピングされたストレージネットワークのネットワークトポロジーを表示するための方法であって、仮想ボリュームと外部ボリュームとの間に定義されたアクセスパスのポート接続情報を収集し、記憶制御装置のアクセスパス上にあるアクセスポートを識別する第一のネットワークアドレスを収集し、外部ストレージシステムのアクセスパス上にあるアクセスポートを識別する第二のネットワークアドレスを収集し、外部ボリュームを識別する識別情報を収集し、ポート接続情報、第一のネットワークアドレス、第二のネットワークアドレス、及び識別情報を基に、仮想ボリュームと外部ボリュームとの間におけるネットワークトポロジーを表示する。ここで、記憶制御装置には、ディスクアレイ装置のようなストレージシステムだけでなく、例えば、それ自体がSCSIターゲットになる仮想化スイッチを含む。外部ボリュームを識別する識別情報としては、例えば、記憶制御装置のアクセスポートのWWNと、外部ストレージシステムのアクセスポートのWWNから定まるLUN番号と、外部ストレージの外部ボリュームを記憶制御装置の仮想ボリュームにマッピングするマッピング情報等が用いられる。
外部ストレージ接続機能を備える記憶制御装置の仮想ボリュームと、外部ストレージシステムの外部ボリュームとの間のネットワークトポロジーを表示するために必要な情報として、例えば、次の情報がある。
(1)ストレージネットワークのポート接続情報。
(2)仮想ボリュームにマッピングされている外部ボリュームに関する以下の情報。
(2a)記憶制御装置のアクセスポートの識別情報。例えば、イニシエータポート(外部接続ポート)のネットワークアドレス(WWN等)である。
(2b)外部ストレージシステムのアクセスポートの識別情報。例えば、ターゲットポートのネットワークアドレス(WWN等)である。
(2c)外部ストレージのアクセスポートにアサインされている外部ボリュームの識別情報。例えば、記憶制御装置のアクセスポートのWWNと、外部ストレージシステムのアクセスポートのWWNから定まるLUN番号等である。
(2d)どの外部ボリュームがどの仮想ボリュームにマッピングされているかを示すマッピング情報。
(1)の情報により、ストレージネットワーク内部のトポロジーを表示できる。(1)の情報に(2a)と(2b)の情報を加えることで、記憶制御装置のアクセスポートから外部ストレージシステムのアクセスポートへ至るトポロジーを表示できる。(1)、(2a)、(2b)の情報に(2c)と(2d)の情報を加えることで、更に、記憶制御装置の仮想ボリュームと、外部ストレージシステムの外部ボリュームとの対応関係を表示できる。
ネットワークトポロジーを表示するために必要な情報は、例えば、ディスカバリの際にネットワークノードから収集してもよく、或いはネットワーク障害発生時にネットワークノードから収集してもよい。
ネットワークトポロジーを表示する手段は、例えば、ストレージネットワークの各ノードに接続する管理サーバに実装されているネットワーク管理プログラムによって、実現することができる。ネットワーク管理プログラムは、各ノードから(1)、(2a)、(2b)、(2c)、及び(2d)の情報を収集することにより、外部ストレージ接続機能を備える記憶制御装置の仮想ボリュームと、外部ストレージシステムの外部ボリュームとの間のネットワークトポロジーを表示する。ネットワークトポロジーを表示するタイミングとして、例えば、画面に表示されている仮想ボリュームのアイコンに対するオペレータの指示に応答して、ネットワークトポロジーを表示するように構成してもよい。
ネットワーク管理プログラムは、管理サーバ等の主記憶装置に実装してもよく、或いは記録媒体に格納しておいてもよい。記録媒体として、例えば、光記録媒体(CD−RAM、CD−ROM、DVD−RW、DVD−ROM、DVD−R、PDディスク、MDディスク、MOディスク等の光学的にデータの読み取りが可能な記録媒体)や、磁気記録媒体(フレキシブルディスク、磁気カード、磁気テープ等の磁気的にデータの読み取りが可能な記録媒体)、或いはメモリ素子(DRAM等の半導体メモリ素子、FRAM等の強誘電体メモリ素子等)などを用いることができる。
本発明によれば、外部ストレージ接続機能を有する記憶制御装置の仮想ボリュームと、外部ストレージシステムの外部ボリュームとの間のアクセスパスを表示することが可能になる。
以下、各図を参照して、本発明の実施形態について説明する。各実施例は特許請求の範囲を限定するものではなく、また実施例で説明されている特徴の全てが発明の解決手段に必須であるとは限らない。
図1は外部サブシステム接続機能を備えたストレージシステム10を中心とするストレージネットワーク構成を示している。ホスト装置60は、CPUやメモリ等の情報処理資源を備えたコンピュータシステムであり、具体的には、ワークステーション、メインフレーム、パーソナルコンピュータ等である。ホスト装置60には、ストレージシステム10が提供する記憶資源を利用するアプリケーションプログラム61と、通信ネットワーク70を介してストレージシステムにアクセスするためのポート62が実装されている。
通信ネットワーク70としては、例えば、SAN(Storage Area Network)、LAN(Local Area Network)、インターネット網、専用回線、公衆回線等を適宜用いることができる。通信ネットワーク70として、SANが用いられる場合、ホスト装置60は、ファイバチャネルプロコルに従って、複数のディスクドライブにより提供される記憶領域のデータ管理単位であるブロックを単位として、ストレージシステム10に対してデータ入出力を要求する。このとき、ホスト装置60が備えるポート62として、ホストバスアダプタが用いられる。一方、通信ネットワーク70として、LANが用いられる場合、ホスト装置60は、TCP/IP(Transmission Control Protocol/Internet Protocol)により、ストレージシステム10に対し、ファイル名を指定してファイル単位でのデータ入出力を要求する。このとき、ホスト装置60が備えるポート62として、LAN対応ネットワークカードが用いられる。
ストレージシステム10は、主に、ディスク制御装置20と、記憶装置30とから構成される。ディスク制御装置20は、複数のチャネルアダプタ(CHA)21と、複数のディスクアダプタ(DKA)22と、コントロールユニット(CU)23と、キャッシュメモリ(CM)24と、共有メモリ(SM)25と、接続部26とを備えている。
各々のチャネルアダプタ21は、ホスト装置60との間でデータ通信を行うためのポート21Aを備えている。チャネルアダプタ21は、CPUやメモリ等を備えたマイクロコンピュータシステムとして構成されており、ホスト装置60から受信したコマンド等を解釈して実行する。各々のチャネルアダプタ21には、それぞれを識別するためのネットワークアドレス、例えば、IPアドレスやWWN(World Wide Name)などが割り当てられており、それぞれが個別にNAS(Network Attached Storage)として機能することができる。ホスト装置60が複数存在する場合は、各チャネルアダプタ21は、各ホスト装置60からの要求をそれぞれ個別に受け付けることができる。
また、ストレージシステム10は、通信ネットワーク70を介して外部ストレージシステム40,50に接続するための外部サブシステム接続用ポート(Externalポート)21Bを備えている。外部サブシステム接続用ポート21Bは、イニシエータ機能を有し、SCSIコマンドを発行することができる。
各ディスクアダプタ22は、記憶装置30の記憶デバイス31,32との間のデータ授受を行うものである。各ディスクアダプタ22は、記憶デバイス31,32に接続するための通信ポート22Aを備えている。また、各ディスクアダプタ22は、CPUやメモリ等を備えたマイクロコンピュータシステムとして構成されている。各ディスクアダプタ22は、チャネルアダプタ21がホスト装置10から受信したデータを、ホスト装置10からの書き込み命令に基づいて、所定の記憶デバイス31,32の所定のアドレスに書込み、また、ホスト装置10からの読み出し命令に基づいて、所定の記憶デバイス31,32の所定のアドレスからデータを読み出し、ホスト装置10に返送する。記憶デバイス31,32との間でデータ入出力を行う場合、各ディスクアダプタ22は、論理的なアドレスを物理的なアドレスに変換する。各ディスクアダプタ22は、記憶デバイス31,32がRAIDに従って管理されている場合は、RAID構成に応じたデータアクセスを行う。
コントロールユニット23は、ストレージシステム全体の作動を制御する。コントロールユニット23には、例えば、管理用のコンソール(図示せず)が接続され、システム内の障害発生を検出してコンソールに表示させたり、或いはコンソールからの指示に基づいてシステムの閉塞処理を実行させたりできるように構成されている。
キャッシュメモリ24には、ホスト装置60と論理ボリュームA♯,B♯,C♯との間で入出力されるデータが一時的に格納される。共有メモリ25には、ホスト装置60からの各種コマンドが書き込まれ、チャネルアダプタ21とディスクアダプタ22との間におけるコマンドの授受に利用される他、システムの構成情報等が格納される。
接続部26は、各チャネルアダプタ21、各ディスクアダプタ22、コントロールユニット23、キャッシュメモリ24、共有メモリ25を相互に接続する。接続部26は、例えば、高速スイッチング動作によってデータ伝送を行う超高速クロスバスイッチや高速バス等である。
記憶装置30は、複数の記憶デバイス31を備えている。記憶デバイス31としては、例えば、ハードディスク、フレキシブルディスク、磁気テープ、半導体メモリ、光ディスク等のようなデバイスを用いることができる。記憶資源として、ハードディスクを用いる場合には、ATA(Advanced Technology Attachment)ディスクドライブ、SCSI(Small Computer System Interface)ディスクドライブ、ファイバチャネルディスクドライブ等のディスクドライブを用いることができる。記憶装置30内に点線で示される記憶デバイス32は、外部ストレージシステム40,50がそれぞれ有する記憶デイバス42,52をストレージシステム10内に取り込んだ様子を示している。つまり、記憶デバイス32は仮想記憶デバイスである。本実施例では、ストレージシステム10から見て外部に存在する記憶デバイス42,52をストレージシステム10の内部記憶デイバスとして認識し、ホスト装置60に外部記憶デバイス42,52の記憶資源を提供する。より詳細には、記憶デバイス42,52に形成された論理デバイスを、ストレージシステム10の仮想ボリュームにマッピングすることで、外部記憶デバイス42,52をストレージシステム10の内部記憶デバイスとして、ホスト装置10に提供している。
外部ストレージシステム40,50は、それぞれポート41,51を備え、通信ネットワーク70を介してストレージシステム10に接続している。ここでは、説明を簡略化するため、外部ストレージシステム40,50の内部構成として、ポート41,51と、記憶デバイス42,52のみを図示しているが、実際の構成はストレージシステム10と同様である。
図2はストレージシステム10のネットワーク環境を管理するためのシステム構成を示している。以下の説明においては、通信ネットワーク70として、FC−SAN(Fibre Channel Storage Area Network)を例示するが、IP−SAN(Internet Protocol Storage Area Network)その他のネットワークでも本発明を適用できる。実際の運用においては、FC−SANには、FCスイッチ、FCハブ、ルータ、ゲートウェイ、ブリッジ等の各種ネットワークコンポーネントが使用されるが、ここでは、説明を簡略化するため、FC−SANのネットワークコンポーネントとして、FCスイッチ91,92を例示する。
ストレージネットワークを構成する各ノード(ホスト装置、ストレージシステム、FCスイッチ等)は、LAN110を介して管理サーバ100に接続している。管理サーバ100は、FC−SAN環境を管理するためのコンピュータシステムであり、FC−SAN構成管理機能、障害管理機能、アクセスパス管理機能等を備えている。構成管理機能は、例えば、後述するネットワーク管理プログラム101によって実現される。障害管理機能と、アクセスパス管理機能については、それぞれネットワーク管理プログラム101によって実現されるものでもよく、或いはネットワーク管理プログラム101とは別のプログラムによって個別に実現されるものでもよい。また、これらの各機能は、ネットワーク管理プログラム101或いはその他のプログラムによって実現される他、管理サーバ100がハードウェア的に実現する機能であってもよい。尚、障害管理機能とアクセスパス管理機能は、ネットワーク管理の利便性向上を目的とした付随的な機能であり、本発明に必須の機能ではない。
FC−SAN構成管理機能とは、FC−SANのネットワークトポロジーを、本発明のネットワークトポロジー表示方法によって認識し、各ノードの論理的な接続関係をGUI(Graphical User Interface)等でグラフィカルに表示する機能である。ノードの追加又は変更等により、FC−SANのネットワーク構成が変更された場合でも、管理サーバ100は、ディスカバリの際にネットワーク構成変更を、本発明のネットワークトポロジー表示方法によって検出し、最新のネットワークトポロジービューを表示できるように構成されている。
障害管理機能とは、FCスイッチ91,92やストレージシステム10,40,50で発生した障害事象と、ホスト装置60で発生したパス閉塞に関する障害事象を自動検出し、これらの障害事象をGUI等でグラフィカルに表示する機能である。ストレージシステム10,40,50やFCスイッチ91,92が異常の場合には、それぞれ専用の保守画面を起動し、故障診断を行えるように構成してもよい。
アクセスパス管理機能とは、ホスト装置60からストレージシステム10,40,50へのアクセスパス(論理パス)を管理する機能である。例えば、誤った設定等により、セキュリティ定義ミス、ケーブル抜けによるアクセスパス使用不可状態など、運用環境に問題がある場合には、これらの不具合を自動的に検出し、GUI等でグラフィカルに表示してもよい。
管理サーバ100は、上述した各機能を実現するためのネットワーク管理プログラム101と、FC−SAN構成管理を行うための各種の管理テーブル80と、ネットワークトポロジーをグラフィカルに表示するための表示装置102を備えている。ネットワーク管理プログラム101や管理テーブル80は、管理サーバ100に内蔵されている記憶装置に格納される。管理テーブル80は、後述するノード管理テーブル81、ポート管理テーブル82、ホストボリューム管理テーブル83、LDEV管理テーブル84、自ボリュームグループ管理テーブル85、対応ボリュームグループ管理テーブル86によって構成されている。
尚、ストレージシステム10は、記憶デバイス32上に形成された論理ボリュームA#,B#,C#を備えている。ストレージシステム40は、記憶デバイス42上に形成された論理ボリュームDを備えている。ストレージシステム50は、記憶デバイス52上に形成された論理ボリュームEを備えている。ストレージシステム10は、論理ボリュームD,Eから成る対応ボリュームグループを、論理ボリュームA♯,B♯,C♯から成る自ボリュームグループへマッピングしている。ここでは、3:2の対応関係を示しているが、本発明はm:nの対応関係にも適用できる(m,nは共に自然数とする。)。ここで、自ボリュームグループとは、外部接続元ストレージシステム10のボリュームグループをいい、対応ボリュームグループとは、外部接続先ストレージシステム40,50のボリュームグループをいう。また、本明細書において、論理ボリューム名称に「♯」の記号を付するときは、当該論理ボリュームは、仮想ボリュームを意味するものとする。
ホスト装置60は、管理サーバ100によるディスカバリの際に、ホスト装置60の情報を送信するエージェント63を備えている。便宜上、ホスト装置60が備えるポートの名称を「ポートA」とする。
また、ストレージシステム10の名称を「ストレージシステムA」とし、ストレージシステム10が備える各ポートの名称を「ポートI」、「ポートJ」とする。「ポートJ」は、外部サブシステム接続用ポートである。ストレージシステム40の名称を「ストレージシステムB」とし、ストレージシステム40が備えるポートの名称を「ポートK」とする。ストレージシステム50の名称を「ストレージシステムC」とし、ストレージシステム50が備えるポートの名称を「ポートL」とする。
また、FCスイッチ91の名称を「FCスイッチA」とし、FCスイッチ91が備える各ポートの名称を「ポートB」、「ポートC」、「ポートD」、「ポートE」、「ポートF」、「ポートM」とする。FCスイッチ92の名称を「FCスイッチB」とし、FCスイッチ92が備える各ポートの名称を「ポートG」、「ポートH」、「ポートN」とする。
ストレージシステム10は、論理ボリュームA#をポートIからポートAへLUNマスキング(アサイン)している。つまり、ホスト装置60がポートAからポートIを経由して、論理ボリュームA#へアクセスするためのアクセスパスが定義されている。論理ボリュームA#は、例えば、ホスト装置60の「D:ドライブ」に対応付けられている。ストレージシステム40は、論理ボリュームDをポートKからポートJへLUNマスキングしている。つまり、ストレージシステム10がポートJからポートKを経由して、論理ボリュームDへアクセスするためのアクセスパスが定義されている。ストレージシステム50は、論理ボリュームEをポートLからポートJへLUNマスキングしている。つまり、ストレージシステム10がポートJからポートLを経由して、論理ボリュームEへアクセスするためのアクセスパスが定義されている。FCスイッチ91,92は、これらのアクセスパスにおけるポート間のルーティングを行う。ポートLからポートJへ至る経路は、経路L→H→G→F→D→Jと、経路L→H→N→M→D→Jの二つある。
図3はノード管理テーブル81を示している。同テーブル81は、FC−SANのノードを管理するテーブルである。同テーブル81のノード管理テーブルエントリには、ノードの名称を示す「ノード名」、ノードの種別(ホスト装置、FCスイッチ、ストレージシステム等の種別)を示す「タイプ」、ノードの「ポート数」、ノードが備える各ポートの「ポート管理テーブル番号」が「ノード番号」に対応付けられて、格納される。ノード管理テーブルエントリの各項目は、ディスカバリの際に、管理サーバ100が各ノードから収集した情報を基に作成される。ノード管理テーブルエントリの例として、ホスト装置60を例示すると、「ノード名」には、ホスト装置60の名称「アプリケーションサーバ」が格納される。「タイプ」には、「ホスト装置」が格納される。「ポート数」には、「1」が格納される。「ポート管理テーブル番号」には、ポートAの「ポート管理テーブル番号」が格納される。
図4はポート管理テーブル82を示している。同テーブル82は、ポートを管理するテーブルである。同テーブル82のポート管理テーブルエントリには、ポートの名称を示す「ポート名」、ポートのWWNを示す「自WWN」、当該ポートに接続するポートのWWNを示す「隣接WWN」、ポートが属するノードの「ノード番号」、ポートの機能(イニシエータ、ターゲット、外部接続用ポート等)を示す「役割」が「ポート管理テーブル番号」に対応付けられて、格納される。ポート管理テーブルエントリの各項目は、ディスカバリの際に、管理サーバ100が各ノードから収集した情報を基に作成される。ポート管理テーブルエントリの例として、ポートIの場合を例示すると、「ポート名」には、ポートIの名称が格納される。「自WWN」には、ポートIのWWNが格納される。「隣接WWN」には、ポートCのWWNが格納される。「ノード番号」には、ポートIが属するノード(ストレージシステム10)のノード番号が格納される。「役割」には、ポートIの役割(ターゲット)が格納される。
図5はホストボリューム管理テーブル83を示している。同テーブル83は、ホスト装置のドライブレターと論理ボリュームの対応関係を示すテーブルである。同テーブル83のホストボリューム管理テーブルエントリには、ホスト装置の「ドライブレター」、ホスト装置のアクセスポートのWWNを示す「自WWN」、ストレージシステムのアクセスポートのWWNを示す「相手WWN」、ストレージシステムのアクセスポートからホスト装置のアクセスポートへアサインされている論理ボリュームの「LUN番号」が「ホストボリューム管理テーブル番号」に対応付けられて、格納される。ホストボリューム管理テーブルエントリの各項目は、ディスカバリの際に、管理サーバ100が各ノードから収集した情報を基に作成される。ホストボリューム管理テーブルエントリの例として、「D:ドライブ」の場合を例示すると、「自WWN」には、ポートAのWWNが格納される。「相手WWN」には、ポートIのWWNが格納される。「LUN番号」には、「自WWN」と「相手WWN」とで定まる論理ボリュームA#のLUN番号が格納される。
図6はLDEV管理テーブル84を示している。同テーブル84は、ストレージシステムの各論理ボリュームについて、ホスト装置のアクセスポートとストレージシステムのアクセスポートの対応関係を管理するテーブルである。同テーブル84のLDEV管理テーブルエントリには、自サブシステムのアクセスポートのWWNを示す「自WWN」、当該論理ボリュームが仮想ボリュームであるか否かを示す「仮想LDEVフラグ」、当該論理ボリュームが属する自ボリュームグループの番号を示す「自ボリュームグループ番号」、ホスト装置のアクセスポートの数を示す「相手数」、ホスト装置のアクセスポートのWWNを示す「相手WWN」、「自WWN」と「相手WWN」とで定まる当該論理ボリュームの「LUN番号」が「LDEV番号」に対応付けられて、格納される。本実施例では、説明を簡略化するために、一つの論理ボリュームは、一つのサブシステムポートから一つ以上のホストポートにアサインされるものとしているが、本発明は複数のサブシステムポートから複数のホストポートにアサインできるストレージシステムにも適用できる。LDEV管理テーブルエントリの各項目は、ディスカバリの際に、管理サーバ100が各ノードから収集した情報を基に作成される。LDEV管理テーブルエントリの例として、論理ボリュームA#の場合を例示すると、「自WWN」には、ポートIのWWNが格納される。「仮想LDEVフラグ」には、仮想ボリュームを示す値が格納される。「自ボリュームグループ番号」には、論理ボリュームA#が属する自ボリュームグループの番号が格納される。「LUN番号」には、「自WWN」と「相手WWN」とで定まる論理ボリュームA#のLUN番号が格納される。
図7は自ボリュームグループ管理テーブル85を示している。同テーブル85は、自ボリュームグループを管理するためのテーブルである。同テーブル85の自ボリュームグループ管理テーブルエントリには、自ボリュームグループの名称を示す「自ボリュームグループ名」、自ボリュームグループに属する論理ボリュームの数を示す「LDEV数」、自ボリュームグループに属する論理ボリュームの「LDEV番号」、自ボリュームグループにマッピングされている対応ボリュームグループの番号を示す「対応ボリュームグループ番号」が「自ボリュームグループ番号」に対応付けられて、格納される。自ボリュームグループ管理テーブルエントリの各項目は、ディスカバリの際に、管理サーバ100が各ノードから収集した情報を基に作成される。
図8は対応ボリュームグループ管理テーブル86を示している。同テーブル86は、対応ボリュームグループを管理するためのテーブルである。同テーブル86の対応ボリュームグループ管理テーブルエントリには、対応ボリュームグループの名称を示す「対応ボリュームグループ名」、対応ボリュームグループに属する論理ボリュームの数を示す「対応ボリューム数」、自サブシステムの外部接続用ポートのWWNを示す「自WWN」、外部サブシステムのポートのWWNを示す「相手WWN」、「自WWN」と「相手WWNとで定まる対応ボリュームの「LUN番号」が「対応ボリュームグループ番号」に対応付けられて、格納されている。対応ボリュームグループ管理テーブルエントリの各項目は、ディスカバリの際に、管理サーバ100が各ノードから収集した情報を基に作成される。
次に、FC−SANネットワークトポロジーを解析するためのアクセスパス探索アルゴリズムについて、図9と図10を参照しながら説明を加える。当該アルゴリズムは、以下の3つのルールを適用することにより、アクセスパスを探索する。(1)ケーブルで接続されているポート、或いは同一スイッチ内のポートへは進める。(2)アクセスパスが同一装置をループする場合は、候補対象から外れる。(3)終点ポートが目的ポートに一致しない場合は、候補対象から外れる。図9は、ポートA→ポートIへのアクセスパスを探索する手順を示している。図中のアルファベットは、ポート名称の略記である。経路A→B→D→Jと、経路A→B→E→Kと、経路A→B→F→G→H→Lは、何れも終点ポートが目的ポートに一致しないため、候補対象から外れる。経路A→B→F→G→N→Mと、経路A→B→M→N→G→Fは、何れも同一スイッチ91をループするため、候補対象から外れる。すると、経路A→B→C→Iのみが求めるアクセスパスとなる。図10は、ポートJ→ポートLへのアクセスパスを探索する手順を示している。経路J→D→B→Aと、経路J→D→C→Iと、経路J→D→E→Kは、何れも終点ポートが目的ポートに一致しないため、候補対象から外れる。経路J→D→F→G→N→Mと、経路J→D→M→N→G→Fは、何れも同一スイッチ91をループするため、候補対象から外れる。すると、経路J→D→F→G→H→Lと、経路J→D→M→N→H→Lのみが求めるアクセスパスとなる。
次に、FC−SANのネットワークトポロジービューを作成する処理手順について、各図を参照しながら説明を加える。図13はオペレータがホスト装置60の「D:ドライブ」を指定して、End-to-Endホストボリュームトポロジービューを選択したときに表示されるトポロジービューを示している。図11乃至図12はこのトポロジービューを作成する処理手順を示すフローチャートである。
オペレータが管理サーバ100を操作し、ホスト装置60の「D:ドライブ」を指定して、End-to-Endトポロジービュー表示を選択すると、管理サーバ100は、指定されたトポロジービューを表示するための新規ビューを用意し(S101)、ホストボリュームアイコンを表示する(S102)。この例では、「D:ドライブ」のホストボリュームアイコンが表示される。次いで、管理サーバ100は、ノード管理テーブル81からホスト装置60のノード管理テーブルエントリを検索し、ホスト装置60の名称「アプリケーションサーバ」と、ホストアイコンとを表示して、このホストアイコンとホストボリュームアイコンとを結線する(S103)。
次いで、管理サーバ100は、ホスト装置60に対応するホストボリューム管理テーブル83を検索し(S104)、同テーブル83の中から指定ドライブレターに対応するホストボリューム管理テーブルエントリを検索する(S105)。この例では、「D:ドライブ」に対応するホストボリューム管理テーブルエントリが検索される。次いで、管理サーバ100は、当該エントリの「自WWN」と一致する「自WWN」を有するポート管理テーブルエントリを、ポート管理テーブル82から検索する(S106)。この例では、「自WWN」は、ポートAの「WWN」であるから、ポートAの「WWN」と一致する「自WWN」を有するポート管理テーブルエントリが検索される。次いで、管理サーバ100は、当該ポート管理テーブルエントリに格納されている「ポート名」と、ポートアイコンとを表示して、このポートアイコンとホストアイコンとを結線する(S107)。
次いで、管理サーバ100は、ホストボリューム管理テーブルエントリに格納されている「自WWN」から「相手WWN」へ至るアクセスパスを探索する(S108)。この例では、ポートAからポートIに至るアクセスパスの探索が行われる。上述の如く、ポートAからポートIに至るアクセスパスは、ポートA→ポートB→ポートC→ポートIである。次いで、管理サーバ100は、探索されたアクセスパスの中から何れか一つの経路を選択する(S109)。この例では、ポートAからポートIに至るアクセスパスは一つのみである。次いで、管理サーバ100は、アクセスパスの中で既にトポロジービューの作成に用いた箇所をスキップする(S110)。
次いで、管理サーバ100は、始点ポートに接続する次のポートを選択する(S111)。この例では、ポートBが選択される。管理サーバ100は、選択したポートの「ポート名」と、ポートアイコンとを表示して、このポートアイコンと隣接ポートアイコンとを結線する(S112)。この例では、ポートBのアイコンが表示され、ポートBのアイコンとポートAのアイコンが結線される。
次いで、管理サーバ100は、選択したポートのポート名称を格納しているポート管理テーブルエントリを検索し、当該ポート管理テーブルエントリの「ノード番号」から、当該ポートが属するノードの「ノード名」をノード管理テーブルエントリから検索し、「ノード名」と、ノードアイコンとを表示して、このノードアイコンとポートアイコンとを結線する(S113)。この例では、ポートBが属するFCスイッチAのアイコンがノードアイコンとして表示され、FCスイッチAのアイコンとポートBのアイコンが結線される。
次いで、管理サーバ100は、次のポートを選択し、そのポートの「ポート名」と、ポートアイコンとを表示して、このポートアイコンとノードアイコンとを結線する(S114)。この例では、ポートCのアイコンが表示され、ポートCのアイコンとFCスイッチAのアイコンが結線される。
次いで、管理サーバ100は、次のポートが終点ポートであるか否かを判定する(S115)。この例では、ポートIは終点ポートである。終点ポートでない場合は(S115;NO)、S110〜S114の処理を再度繰り返す。終点ポートである場合は(S115;YES)、未だ選択されていない別のアクセスパスが存在するか否かを判定する(S116)。別のアクセスパスが存在する場合は(S116;YES)、S109〜S115の処理を再度繰り返す。この例では、アクセスパスは一本のみである。
別のアクセスパスが存在しない場合は(S116;NO)、終点ポートの「ポート名」と、ポートアイコンとを表示して、このポートアイコンと隣接ポートアイコンとを結線する(S117)。この例では、ポートIのアイコンが表示され、ポートIのアイコンとポートCのアイコンが結線される。次いで、管理サーバ100は、終点ポートのポート名が格納されているポート管理テーブルエントリから、終点ポートが属するノードの「ノード番号」を検索し、この「ノード番号」に対応するノードの「ノード名」をノード管理テーブルエントリから検索し、「ノード名」と、ノードアイコンとを表示して、このノードアイコンとポートアイコンとを結線する(S118)。この例では、ポートIが属するストレージシステムAのアイコンが表示され、ストレージシステムAのアイコンとポートIのアイコンとが結線される。
次いで、管理サーバ100は、指定ドライブレターに対応するホストボリューム管理テーブルエントリに格納されている「自WWN」、「相手WWN」、「LUN番号」のそれぞれと一致する「相手WWN」、「自WWN」、「LUN番号」を有する論理ボリュームを、LDEV管理テーブルエントリから検索する(S119)。次いで、管理サーバ100は、当該論理ボリュームのアイコンを表示し、更に当該論理ボリュームが仮想ボリュームである場合には、ボリューム名に続いて「#」を表示して、この論理ボリュームアイコンとノードアイコンとを結線する(S120)。この例では、ポートAのWWNとポートIのWWNから定まるLUN番号は、論理ボリュームA#を示しているので、LDEV A#のアイコンが表示され、このアイコンはストレージシステムAのアイコンと結線される。以上の処理手順を経て、図13に示すネットワークトポロジービューが作成される。
図16はオペレータが論理ボリュームA#を指定して、外部接続のEnd-to-Endトポロジービューを選択したときに表示されるトポロジービューを示している。図14乃至図15はこのトポロジービューを作成する処理手順を示すフローチャートである。
オペレータが管理サーバ100を利用して、ストレージシステム10の論理ボリュームA#のアイコンに対する操作により、End-to-Endトポロジービュー表示を選択すると、管理サーバ100は、指定されたトポロジービューを表示するための新規ビューを用意する(S201)。次いで、管理サーバ100は、指定された論理ボリュームのLDEV番号と一致するLDEV番号を有する自ボリュームグループ管理テーブルエントリを検索し(S202)、「自ボリュームグループ名」と、ボリュームグループアイコンとを表示する(S203)。次いで、管理サーバ100は、自ボリュームグループ管理テーブルエントリを参照して、自ボリュームグループに属する「LDEV番号」と、ボリュームアイコンとを表示する(S204)。この例では、LDEV A#、LDEV B#、LDEV C#の各ボリュームアイコンが表示される。
次いで、管理サーバ100は、ストレージシステム10の「ノード名」と、ノードアイコンを表示し、このノードアイコンとボリュームグループアイコンとを結線する(S205)。この例では、ストレージシステムAのアイコンが表示され、ストレージシステムAのアイコンがボリュームグループアイコンと結線される。
次いで、管理サーバ100は、自ボリュームグループ管理テーブルエントリに格納されている「対応ボリュームグループ番号」から対応ボリューム管理テーブルエントリを検索する(S206)。この例では、ポートJの「自WWN」、ポートKの「相手WWN」、論理ボリュームDの「LUN番号」を有する対応ボリュームと、ポートJの「自WWN」、ポートLの「相手WWN」、論理ボリュームEの「LUN番号」を有する対応ボリュームとが検索される。
次いで、管理サーバ100は、外部接続元ストレージシステムのアクセスポートのWWNと、外部接続先ストレージシステムのアクセスポートのWWN及び「LUN番号」のそれぞれが、「自WWN」と、「相手WWN」及び「LUN番号」に一致する対応ボリュームを検索する(S207)。この例では、論理ボリュームD,Eが対応ボリュームとして検索される。
次いで、管理サーバ100は、「自WWN」に対応するポート管理テーブルエントリを検索し(S208)、「自WWN」を有するポートの「ポート名」と、ポートアイコンとを表示し、このポートアイコンとノードアイコンとを結線する(S209)。この例では、ポートJのアイコンを表示し、ポートJのアイコンとストレージシステムAのアイコンとを結線する。
次いで、管理サーバ100は、対応ボリューム管理テーブルエントリの「自WWN」から「相手WWN」へ至るアクセスパスを探索する(S210)。この例では、ポートJからポートKに至るアクセスパスの探索が行われる。ポートJからポートKに至るアクセスパスは、ポートJ→ポートD→ポートE→ポートKである。次いで、管理サーバ100は、探索されたアクセスパスの中から何れか一つの経路を選択する(S211)。この例では、ポートJからポートKに至るアクセスパスは一つのみである。次いで、管理サーバ100は、アクセスパスの中で既にトポロジービューの作成に用いた箇所をスキップする(S212)。
次いで、管理サーバ100は、始点ポートに接続する次のポートを選択する(S213)。この例では、ポートDが選択される。管理サーバ100は、選択したポートの「ポート名」と、ポートアイコンとを表示して、このポートアイコンと隣接ポートアイコンとを結線する(S214)。この例では、ポートDのアイコンが表示され、ポートDのアイコンとポートJのアイコンが結線される。
次いで、管理サーバ100は、選択したポートのポート名称を格納しているポート管理テーブルエントリを検索し、当該ポート管理テーブルエントリの「ノード番号」から、当該ポートが属するノードの「ノード名」をノード管理テーブルエントリから検索し、「ノード名」と、ノードアイコンとを表示して、このノードアイコンとポートアイコンとを結線する(S215)。この例では、ポートDが属するFCスイッチAのアイコンがノードアイコンとして表示され、FCスイッチAのアイコンとポートDのアイコンが結線される。
次いで、管理サーバ100は、次のポートを選択し、そのポートの「ポート名」と、ポートアイコンとを表示して、このポートアイコンとノードアイコンとを結線する(S216)。この例では、ポートEのアイコンが表示され、ポートEのアイコンとFCスイッチAのアイコンが結線される。
次いで、管理サーバ100は、次のポートが終点ポートであるか否かを判定する(S217)。この例では、ポートKは終点ポートである。終点ポートでない場合は(S217;NO)、S212〜S216の処理を再度繰り返す。終点ポートである場合は(S217;YES)、未だ選択されていない別のアクセスパスが存在するか否かを判定する(S218)。別のアクセスパスが存在する場合は(S218;YES)、S211〜S217の処理を再度繰り返す。この例では、アクセスパスは一本のみである。
別のアクセスパスが存在しない場合は(S218;NO)、終点ポートの「ポート名」と、ポートアイコンとを表示して、このポートアイコンと隣接ポートアイコンとを結線する(S219)。この例では、ポートKのアイコンが表示され、ポートKのアイコンとポートEのアイコンが結線される。次いで、管理サーバ100は、終点ポートのポート名が格納されているポート管理テーブルエントリから、終点ポートが属するノードの「ノード番号」を検索し、この「ノード番号」に対応するノードの「ノード名」をノード管理テーブルエントリから検索し、「ノード名」と、ノードアイコンとを表示して、このノードアイコンとポートアイコンとを結線する(S220)。この例では、ポートKが属するストレージシステムBのアイコンが表示され、ストレージシステムBのアイコンとポートKのアイコンとが結線される。
次いで、管理サーバ100は、対応ボリューム管理テーブルエントリに格納されている「自WWN」、「相手WWN」、「LUN番号」のそれぞれと一致する「相手WWN」、「自WWN」、「LUN番号」を有する論理ボリュームを、LDEV管理テーブルエントリから検索する(S221)。次いで、管理サーバ100は、当該論理ボリュームのアイコンを表示し、更に当該論理ボリュームが仮想ボリュームである場合には、ボリューム名に続いて「#」を表示して、この論理ボリュームアイコンとノードアイコンとを結線する(S222)。この例では、ポートJのWWNとポートKのWWNから定まるLUN番号は、論理ボリュームDを示しているので、LDEV Dのアイコンが表示され、このアイコンはストレージシステムBのアイコンと結線される。
次いで、管理サーバ100は、S207で選択した対応ボリュームを全て表示したか否かをチェックする(S223)。表示してない対応ボリュームが存在する場合は(S223;NO)、S221〜S222の処理を繰り返す。次いで、管理サーバ100は、未だ選択していない対応ボリュームが存在するか否かをチェックする(S224)。この例では、論理ボリュームEが未選択である。未選択の対応ボリュームが存在する場合は(S224;YES)、S207〜S223の処理を繰り返す。これにより、ポートJからポートLに至るトポロジービューが作成される。上述の如く、ポートJからポートLに至るアクセスパスは、ポートJ→ポートD→ポートF→ポートG→ポートH→ポートLと、ポートJ→ポートD→ポートM→ポートN→ポートH→ポートLである。対応ボリュームの表示処理が全て完了すると(S224;NO)、管理サーバ100は、対応ボリュームグループアイコンを表示する(S225)。以上の処理手順を経て、図16に示すネットワークトポロジービューが作成される。
尚、図13に示すEnd-to-Endホストボリュームトポロジービューと、図16に示すEnd-to-End外部接続トポロジービューは、別ウインドウで表示してもよく、或いは同一ウインドウ内に表示してもよい。例えば、オペレータがホスト装置60の「D:ドライブ」を指定して、End-to-Endホストボリュームトポロジービューを選択し、ホスト装置60からストレージシステム10に至るトポロジービューを表示させた後で、更に、論理ボリュームA#のアイコンに対する操作により、End-to-End外部接続トポロジービューを選択すると、図17に示すように、外部接続部分のトポロジービューも表示される。
尚、上述の説明では、オペレータの操作により、End-to-End外部接続トポロジービューを表示する例について説明したが、管理サーバ100がストレージネットワークの障害発生(イベント)を検出すると、障害箇所のネットワークトポロジーを自動的に認識し、表示装置102に表示するように構成してもよい。例えば、障害が生じたノードのアイコンを赤く表示する等して、視覚的に注意を喚起できるように構成してもよい。また、障害原因等も併せて表示するように構成してもよい。また、ネットワークトポロジーを表示する上で、各ノードやポート等のアイコンは、視覚的に見易い座標位置にレイアウトするのが好ましい。
本実施例では、外部ストレージシステムがカスケード接続されている場合のネットワークトポロジービュー表示について説明する。FC−SANのネットワークトポロジービューの具体的な作成処理は、上述の処理手順と同様であるため、その説明を省略する。
図18は外部ストレージシステムがカスケード接続されているFC−SANのネットワーク構成を示している。ストレージシステム10の論理ボリュームA#は、ストレージシステムBの論理ボリュームB#にマッピングされている。また、ストレージシステム40の論理ボリュームB#は、ストレージシステム50の論理ボリュームCにマッピングされている。より詳細には、ストレージシステム40は、論理ボリュームB#をポートHからポートEへLUNマスキングしており、ストレージシステム10がポートEからポートHを経由して、論理ボリュームB#へアクセスするためのアクセスパスが定義されている。また、ストレージシステム50は、論理ボリュームCをポートLからポートIへLUNマスキングしており、ストレージシステム40がポートIからポートLを経由して、論理ボリュームCへアクセスするためのアクセスパスが定義されている。
かかるFC−SAN環境において、オペレータがホスト装置60の「D:ドライブ」を指定して、End-to-Endトポロジービューを選択すると、図19に示すトポロジービューが表示される。更に、論理ボリュームA#のアイコンに対する操作により、外部接続のEnd-to-Endトポロジービューを選択すると、図20に示すように、ストレージシステム10,40間の外部接続部分のトポロジービューが表示される。更に、論理ボリュームB#のアイコンに対する操作により、外部接続のEnd-to-Endトポロジービューを選択すると、図21に示すように、ストレージシステム40,50間の外部接続部分のトポロジービューが表示される。
本実施例によれば、外部ストレージシステムがカスケード接続されている場合のネットワークトポロジーを表示することができる。
本実施例では、外部接続機能を有するストレージシステムに替えて、仮想化スイッチを適用した場合のネットワークトポロジービュー表示について説明する。FC−SANのネットワークトポロジービューの具体的な作成処理は、上述の処理手順と同様であるため、その説明を省略する。
図22はホスト装置60とストレージシステム10,40の間に仮想化スイッチ200が介挿されているFC−SANのネットワーク構成を示している。仮想化スイッチ200は、外部接続ストレージシステム10,40の記憶資源をホスト装置60に提供する機能を有しており、それ自身がSCSIターゲットとなることができる。ストレージシステム10,40が有する論理ボリュームC,D,Eから成る対応ボリュームグループは、仮想化スイッチ200が有する論理ボリュームA#,B#から成る自ボリュームグループにマッピングされている。仮想化スイッチ200は、ホスト装置60から論理ボリュームA#,B#へのI/Oを、論理ボリュームC,D,EへのI/Oに変換する。
より詳細には、ストレージシステム10は、論理ボリュームCをポートDからポートCへLUNマスキングしており、仮想化スイッチ200がポートCからポートDを経由して、論理ボリュームCへアクセスするためのアクセスパスが定義されている。また、ストレージシステム40は、論理ボリュームD,EをポートFからポートEへLUNマスキングしており、仮想化スイッチ200がポートEからポートFを経由して、論理ボリュームD,Eへアクセスするためのアクセスパスが定義されている。
かかるFC−SAN環境において、オペレータがホスト装置60の「D:ドライブ」を指定して、End-to-Endトポロジービューを選択すると、図23に示すトポロジービューが表示される。更に、論理ボリュームA#のアイコンに対する操作により、外部接続のEnd-to-Endトポロジービューを選択すると、図24に示すように、仮想化スイッチ200と、ストレージシステムA,B間の外部接続部分のトポロジービューが表示される。
本実施例によれば、ホスト装置60とストレージシステム10,40の間に仮想化スイッチ200が介挿されているFC−SANのネットワークのネットワークトポロジーを表示することができる。
実施例1のストレージシステムのネットワーク構成図である。 実施例1のネットワーク環境を管理するためのシステム構成図である。 ノード管理テーブルの説明図である。 ポート管理テーブルの説明図である。 ホストボリューム管理テーブルの説明図である。 LDEV管理テーブルの説明図である。 自ボリュームグループ管理テーブルの説明図である。 対応ボリュームグループ管理テーブルの説明図である。 アクセスパス探索アルゴリズムの概要説明図である。 アクセスパス探索アルゴリズムの概要説明図である。 ホストボリュームトポロジー表示処理のフローチャートである。 ホストボリュームトポロジー表示処理のフローチャートである。 ホストボリュームトポロジービューの表示例である。 外部接続トポロジー表示処理のフローチャートである。 外部接続トポロジー表示処理のフローチャートである。 外部接続トポロジービューの表示例である。 トポロジービューの表示例である。 実施例2のストレージシステムのネットワーク構成図である。 ホストボリュームトポロジービューの表示例である。 外部接続トポロジービューの表示例である。 外部接続トポロジービューの表示例である。 実施例3のストレージシステムのネットワーク構成図である。 ホストボリュームトポロジービューの表示例である。 外部接続トポロジービューの表示例である。
符号の説明
10,40,50…ストレージシステム
60…ホスト装置
80…管理テーブル
91,92,93…FCスイッチ
100…管理サーバ
101…ネットワーク管理プログラム
102…表示装置
200…仮想化スイッチ

Claims (12)

  1. ホスト装置と、
    仮想ボリュームを備える第1のストレージシステムと、
    第1のスイッチと第2のスイッチとを有するストレージネットワークスイッチと、
    外部ボリュームを備え、前記第1のストレージに外部接続する第2のストレージシステムと
    が構成するストレージネットワークであり、
    前記第1のスイッチが前記ホスト装置と前記第1のストレージ装置に接続し、前記第2のスイッチが前記第2のストレージシステムに接続し、前記第1のストレージシステムの前記仮想ボリュームが前記第1のスイッチと前記第2のスイッチとを介して前記第2のストレージシステムの前記外部ボリュームにマッピングされるように、前記仮想ボリュームと前記外部ボリュームとの間のアクセスパスを探索して、探索されたアクセスパスのネットワークトポロジーを表示装置に表示する前記ストレージネットワークのネットワークトポロジーを表示するシステムであって、
    前記第1のストレージ装置の前記仮想ボリュームに接続する第1のポートを指定する手段と、
    前記第2のストレージ装置の前記外部ボリュームに接続する第2のポートを指定する手段と、
    前記第1のポートと前記第2のポートとの間の複数のポート間の接続情報を収集する手段と、
    前記収集した接続情報から、前記第1のスイッチを前記第2のスイッチに接続し、次いで、前記第2のスイッチを前記第1のスイッチに接続する複数のポート間の接続情報を除いて、前記仮想ボリュームと前記外部ボリュームとの間アクセスパスのポート接続を探索する手段と、
    前記第1のストレージシステムの前記アクセスパス上にあるアクセスポートを識別する第一のネットワークアドレスを収集する手段と、
    前記第2のストレージシステムの前記アクセスパス上にあるアクセスポートを識別する第二のネットワークアドレスを収集する手段と、
    前記第1のスイッチと前記第2のスイッチとの前記アクセスパス上にあるアクセスポートを識別する第三のネットワークアドレスを収集する手段と、
    前記外部ボリュームを識別する識別情報を収集する手段と、
    前記ポート接続情報、前記第一のネットワークアドレス、前記第二のネットワークアドレス、前記第三のネットワークアドレス、及び、前記識別情報を基に、前記仮想ボリュームと前記外部ボリュームとの間におけるネットワークトポロジーを表示する手段と、
    実行する、ネットワークトポロジー表示システム
  2. 請求項1に記載のネットワークトポロジー表示システムであって、
    前記ストレージネットワークは、カスケード接続された複数の外部ボリュームを備えており、それぞれの外部ボリュームは、接続先の外部ボリュームに順次マッピングされている、ネットワークトポロジー表示システム
  3. 請求項1に記載のネットワークトポロジー表示システムであって、
    前記第1のストレージシステムは、仮想化スイッチである、ネットワークトポロジー表示システム。
  4. 請求項1に記載のネットワークトポロジー表示システムであって、
    前記仮想ボリュームのアイコンに対するオペレータの指示に応答して、前記ネットワークトポロジーを表示する、ネットワークトポロジー表示システム
  5. ホスト装置と、
    仮想ボリュームを備える第1のストレージシステムと、
    第1のスイッチと前記第1のスイッチに接続する第2のスイッチを有するストレージネットワークスイッチと、
    外部ボリュームを備え、前記第1のストレージに外部接続する第2のストレージシステムと、
    が構成するストレージネットワークにLANを介して接続し、
    前記第1のスイッチが前記ホスト装置と前記第1のストレージ装置に接続し、前記第2のスイッチが前記第2のストレージシステムに接続し、前記第1のストレージシステムの前記仮想ボリュームが前記第1のスイッチと前記第2のスイッチとを介して前記第2のストレージシステムの前記外部ボリュームにマッピングされるように、前記仮想ボリュームと前記外部ボリュームとの間のアクセスパスを探索して、探索されたアクセスパスのネットワークトポロジーを表示装置に表示する前記ストレージネットワークのネットワークトポロジーを表示するための管理サーバであって、
    前記第1のストレージ装置の前記仮想ボリュームに接続する第1のポートを指定する手段と、
    前記第2のストレージ装置の前記外部ボリュームに接続する第2のポートを指定する手段と、
    前記第1のポートと前記第2のポートとの間の複数のポート間の接続情報を収集する手段と、
    前記収集した接続情報から、前記第1のスイッチを前記第2のスイッチに接続し、次いで、前記第2のスイッチを前記第1のスイッチに接続する複数のポート間の接続情報を除いて、前記仮想ボリュームと前記外部ボリュームとの間のアクセスパスのポート接続を探索する手段と、
    前記第1のストレージシステムの前記アクセスパス上にあるアクセスポートを識別する第一のネットワークアドレスを収集する手段と、
    前記第2のストレージシステムの前記アクセスパス上にあるアクセスポートを識別する第二のネットワークアドレスを収集する手段と、
    前記第1のスイッチと前記第2のスイッチとの前記アクセスパス上にあるアクセスポートを識別する第三のネットワークアドレスを収集する手段と、
    前記外部ボリュームを識別する識別情報を収集する手段と、
    前記ポート接続情報、前記第一のネットワークアドレス、前記第二のネットワークアドレス、前記第三のネットワークアドレス、及び、前記識別情報を基に、前記仮想ボリュームと前記外部ボリュームとの間におけるネットワークトポロジーを表示する手段と、
    を有する、ネットワークトポロジー表示するための管理サーバ。
  6. 請求項5に記載の管理サーバであって、
    前記ストレージネットワークは、カスケード接続された複数の外部ボリュームを備えており、それぞれの外部ボリュームは、接続先の外部ボリュームに順次マッピングされている、管理サーバ。
  7. 請求項5に記載の管理サーバであって、
    前記第1のストレージシステムは、仮想化スイッチである、管理サーバ。
  8. 請求項5に記載の管理サーバであって、
    前記仮想ボリュームのアイコンに対するオペレータの指示に応答して、前記ネットワークトポロジーを表示する、管理サーバ。
  9. ホスト装置と、
    仮想ボリュームを備える第1のストレージシステムと、
    第1のスイッチと前記第1のスイッチに接続する第2のスイッチを有するストレージネットワークスイッチと、
    外部ボリュームを備え、前記第1のストレージに外部接続する第2のストレージシステムと、
    が構成するストレージネットワークにLANを介して接続し、
    前記第1のスイッチが前記ホスト装置と前記第1のストレージ装置に接続し、前記第2のスイッチが前記第2のストレージシステムに接続し、前記第1のストレージシステムの前記仮想ボリュームが前記第1のスイッチと前記第2のスイッチとを介して前記第2のストレージシステムの前記外部ボリュームにマッピングされるように、前記仮想ボリュームと前記外部ボリュームとの間のアクセスパスを探索して、探索されたアクセスパスのネットワークトポロジーを表示装置に表示する処理をコンピュータシステムに実行させるための、ストレージネットワークの管理プログラムであって、
    前記コンピュータシステムに
    前記第1のストレージ装置の前記仮想ボリュームに接続する第1のポートを指定するステップと、
    前記第2のストレージ装置の前記外部ボリュームに接続する第2のポートを指定するステップと、
    前記第1のポートと前記第2のポートとの間の複数のポート間の接続情報を収集するステップと、
    前記収集した接続情報から、前記第1のスイッチを前記第2のスイッチに接続し、次いで、前記第2のスイッチを前記第1のスイッチに接続する複数のポート間の接続情報を除いて、前記仮想ボリュームと前記外部ボリュームとの間のアクセスパスのポート接続を探索するステップと、
    前記第1のストレージシステムの前記アクセスパス上にあるアクセスポートを識別する第一のネットワークアドレスを収集するステップと、
    前記第2のストレージシステムの前記アクセスパス上にあるアクセスポートを識別する第二のネットワークアドレスを収集するステップと、
    前記第1のスイッチと前記第2のスイッチとの前記アクセスパス上にあるアクセスポートを識別する第三のネットワークアドレスを収集するステップと、
    前記外部ボリュームを識別する識別情報を収集するステップと、
    前記ポート接続情報、前記第一のネットワークアドレス、前記第二のネットワークアドレス、前記第三のネットワークアドレス、及び、前記識別情報を基に、前記仮想ボリュームと前記外部ボリュームとの間におけるネットワークトポロジーを表示するステップと、
    を実行させる、ストレージネットワークのネットワーク管理プログラム。
  10. 請求項9に記載のネットワーク管理プログラムであって、
    前記ストレージネットワークは、カスケード接続された複数の外部ボリュームを備えており、それぞれの外部ボリュームは、接続先の外部ボリュームに順次マッピングされている、ネットワーク管理プログラム。
  11. 請求項9に記載のネットワーク管理プログラムであって、
    前記第1のストレージシステムは、仮想化スイッチである、ネットワーク管理プログラム。
  12. 請求項9に記載のネットワーク管理プログラムであって、
    前記仮想ボリュームのアイコンに対するオペレータの指示に応答して、前記ネットワークトポロジーを表示するステップを更に実行させる、ネットワーク管理プログラム。
JP2005106245A 2005-04-01 2005-04-01 ネットワークトポロジー表示方法、管理サーバ、及びネットワーク管理プログラム Expired - Fee Related JP4634202B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2005106245A JP4634202B2 (ja) 2005-04-01 2005-04-01 ネットワークトポロジー表示方法、管理サーバ、及びネットワーク管理プログラム
US11/155,571 US7475131B2 (en) 2005-04-01 2005-06-20 Network topology display method, management server, and computer program product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005106245A JP4634202B2 (ja) 2005-04-01 2005-04-01 ネットワークトポロジー表示方法、管理サーバ、及びネットワーク管理プログラム

Publications (2)

Publication Number Publication Date
JP2006285757A JP2006285757A (ja) 2006-10-19
JP4634202B2 true JP4634202B2 (ja) 2011-02-16

Family

ID=37069536

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005106245A Expired - Fee Related JP4634202B2 (ja) 2005-04-01 2005-04-01 ネットワークトポロジー表示方法、管理サーバ、及びネットワーク管理プログラム

Country Status (2)

Country Link
US (1) US7475131B2 (ja)
JP (1) JP4634202B2 (ja)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4842593B2 (ja) * 2005-09-05 2011-12-21 株式会社日立製作所 ストレージ仮想化装置のデバイス制御引継ぎ方法
JP4331742B2 (ja) 2006-10-25 2009-09-16 株式会社日立製作所 I/oの割り振り比率に基づいて性能を管理する計算機システム、計算機及び方法
JP5020601B2 (ja) * 2006-11-10 2012-09-05 株式会社日立製作所 アクセス環境構築システム及び方法
JP5058582B2 (ja) * 2006-12-21 2012-10-24 日本電気株式会社 ストレージデバイスのマルチパスシステム、その障害箇所特定方法及びプログラム
JP5068081B2 (ja) * 2007-01-24 2012-11-07 株式会社日立製作所 管理装置および管理方法
JP4979078B2 (ja) 2007-07-05 2012-07-18 Kddi株式会社 メッセージ代理応答システム
US8255450B2 (en) * 2007-11-20 2012-08-28 Verizon Patent And Licensing, Inc. Display of end-to-end physical layer signal flow
JP2009129261A (ja) * 2007-11-26 2009-06-11 Hitachi Ltd ストレージシステム及びストレージシステムの外部ボリューム接続経路探索方法
US9225610B2 (en) * 2008-03-31 2015-12-29 Hitachi, Ltd. User interface providing information system topology presentation
JP5159421B2 (ja) 2008-05-14 2013-03-06 株式会社日立製作所 ストレージシステム及び管理装置を用いたストレージシステムの管理方法
US8050261B2 (en) * 2008-06-17 2011-11-01 Brocade Communications Systems, Inc. Method and apparatus for frame redirection in a storage area network environment
US20110029236A1 (en) * 2009-07-28 2011-02-03 Sony Corporation Gps-based wireless network connection selection and network topology overlay on satellite geographic map
WO2011042941A1 (en) * 2009-10-09 2011-04-14 Hitachi, Ltd. Storage system and storage system communication path management method
US8694768B2 (en) * 2010-05-13 2014-04-08 Brocade Communications Systems, Inc. Determination and display of LUN encryption paths
US8352620B2 (en) 2010-07-27 2013-01-08 Hewlett-Packard Development Company, L.P. Displaying a network topology map with a reduced number of objects
JP5195955B2 (ja) 2011-03-15 2013-05-15 オムロン株式会社 設計支援システム
US8832503B2 (en) 2011-03-25 2014-09-09 Adc Telecommunications, Inc. Dynamically detecting a defective connector at a port
ES2553090T3 (es) * 2011-03-25 2015-12-04 Adc Telecommunications, Inc. Esquema de codificación de identificador para su uso con conectores multivía
WO2012134932A2 (en) 2011-03-25 2012-10-04 Adc Telecommunications, Inc. Event-monitoring in a system for automatically obtaining and managing physical layer information using a reliable packet-based communication protocol
US8792397B2 (en) * 2012-03-22 2014-07-29 Intel Corporation Automated discovery of communication ports coupled to a switch
US9081502B2 (en) * 2012-10-18 2015-07-14 Hitachi, Ltd. Method and apparatus of storage volume migration in cooperation with takeover of storage area network configuration
US9477276B2 (en) * 2013-06-13 2016-10-25 Dell Products L.P. System and method for switch management
US10664397B2 (en) 2018-07-31 2020-05-26 EMC IP Holding Company LLC Cache recovery method in a distributed storage system
US10489321B1 (en) * 2018-07-31 2019-11-26 EMC IP Holding Company LLC Performance improvement for an active-active distributed non-ALUA system with address ownerships
CN113300964B (zh) * 2021-04-29 2023-04-07 西安诺瓦星云科技股份有限公司 Led控制系统拓扑信息生成方法、装置及系统和存储介质
CN113300896A (zh) * 2021-06-11 2021-08-24 云宏信息科技股份有限公司 获取存储网络的链路的方法、绘制拓扑图的方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004013215A (ja) * 2002-06-03 2004-01-15 Hitachi Ltd ストレージシステム、ストレージサブシステム、および、それらを含む情報処理システム
JP2004152282A (ja) * 2002-10-31 2004-05-27 Hewlett-Packard Development Co Lp ストレージエリアネットワーク管理装置
JP2004152275A (ja) * 2002-10-31 2004-05-27 Hewlett-Packard Development Co Lp ストレージエリアネットワーク(san)のマップ作成
JP2004254270A (ja) * 2002-05-29 2004-09-09 Hitachi Ltd ストレージネットワーク管理のシステムと方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003141054A (ja) 2001-11-07 2003-05-16 Hitachi Ltd ストレージ管理計算機
JP2003316671A (ja) 2002-04-19 2003-11-07 Hitachi Ltd ストレージネットワークの構成表示方法
JP4100968B2 (ja) * 2002-06-06 2008-06-11 株式会社日立製作所 データマッピング管理装置
JP4202709B2 (ja) * 2002-10-07 2008-12-24 株式会社日立製作所 ストレージ装置を有するネットワークにおける、ボリューム及び障害管理方法
US20050108375A1 (en) * 2003-11-13 2005-05-19 Michele Hallak-Stamler Method and graphical user interface for managing and configuring multiple clusters of virtualization switches
JP4230410B2 (ja) * 2004-05-11 2009-02-25 株式会社日立製作所 仮想ストレージの通信品質制御装置
US20060041559A1 (en) * 2004-08-17 2006-02-23 International Business Machines Corporation Innovation for managing virtual storage area networks

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004254270A (ja) * 2002-05-29 2004-09-09 Hitachi Ltd ストレージネットワーク管理のシステムと方法
JP2004013215A (ja) * 2002-06-03 2004-01-15 Hitachi Ltd ストレージシステム、ストレージサブシステム、および、それらを含む情報処理システム
JP2004152282A (ja) * 2002-10-31 2004-05-27 Hewlett-Packard Development Co Lp ストレージエリアネットワーク管理装置
JP2004152275A (ja) * 2002-10-31 2004-05-27 Hewlett-Packard Development Co Lp ストレージエリアネットワーク(san)のマップ作成

Also Published As

Publication number Publication date
US20060220533A1 (en) 2006-10-05
JP2006285757A (ja) 2006-10-19
US7475131B2 (en) 2009-01-06

Similar Documents

Publication Publication Date Title
JP4634202B2 (ja) ネットワークトポロジー表示方法、管理サーバ、及びネットワーク管理プログラム
JP4698316B2 (ja) アクセスパス管理方法及びプログラム
US8301854B2 (en) Storage system and virtualization method
JP4723925B2 (ja) ボリューム活動に従ってストレージポリシーをコントロールするための方法
JP4646574B2 (ja) データ処理システム
US9367265B2 (en) Storage system and method for efficiently utilizing storage capacity within a storage system
JP4744955B2 (ja) データ管理システム
KR100644011B1 (ko) 저장 도메인 관리 시스템
US7464235B2 (en) Storage system and control method thereof, and computer program product
US9202304B1 (en) Path performance mini-charts
US9619171B2 (en) Storage system and virtualization method
US8185707B2 (en) Storage system and path management method for multi-host environment
JP4939154B2 (ja) ストレージ装置及び構成設定方法
JP2007058484A (ja) ストレージ管理方法およびストレージシステム
US20060190550A1 (en) Storage system and controlling method thereof, and device and recording medium in storage system
JP4783086B2 (ja) ストレージシステム、ストレージアクセス制限方法、及びコンピュータプログラム
JP2006184949A (ja) 記憶制御システム
JP2005165444A (ja) ディスクアレイ装置、及びディスクアレイ装置の制御方法
US7313650B2 (en) Server and method for managing volume storing digital archive
US7613720B2 (en) Selectively removing entities from a user interface displaying network entities
JP2007257667A (ja) データ処理システム
EP2849074A1 (en) Network system, maintenance work management method, processing device, and program
JP4326819B2 (ja) ストレージシステムの制御方法、ストレージシステム、プログラム、及び記録媒体
JP2006134049A (ja) ホスト装置が接続される制御装置の接続部とその制御装置が備える記憶デバイスとの間の論理パスを生成する装置及び方法
US20100306348A1 (en) Method and system for displaying and comparing storage zoning configurations

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080122

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090217

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20090903

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100708

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100906

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101026

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101118

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131126

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees