JP4039794B2 - マルチパス計算機システム - Google Patents
マルチパス計算機システム Download PDFInfo
- Publication number
- JP4039794B2 JP4039794B2 JP2000248157A JP2000248157A JP4039794B2 JP 4039794 B2 JP4039794 B2 JP 4039794B2 JP 2000248157 A JP2000248157 A JP 2000248157A JP 2000248157 A JP2000248157 A JP 2000248157A JP 4039794 B2 JP4039794 B2 JP 4039794B2
- Authority
- JP
- Japan
- Prior art keywords
- multipath
- path
- input
- host
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/06—Management of faults, events, alarms or notifications
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer And Data Communications (AREA)
- Debugging And Monitoring (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、サーバ間とデバイス間を接続するに際し、マルチパスでデバイスにアクセスするマルチパス計算機システムに関し、特に、マルチパスデバイス制御の信頼性を確保したマルチパス計算機システムに関するものである。
【０００２】
【従来の技術】
近年、サーバとデバイス装置を接続するに際し、単なる１対１の接続から複数対複数の接続を行ったマルチパスのデバイス制御が、信頼性確保の為に重要視されている。
上記マルチパスデバイス制御においては、ユーザがデバイスにアクセスするためのマルチパスを設定し、マルチパスデバイス制御機構が、上記マルチパス設定に基づきアクセスパスを振り分ける。
【０００３】
【発明が解決しようとする課題】
上記マルチパスの環境を実現するためのシステムを構築する上で、以下の問題点があった。
（１）マルチパス構成設定の誤りによりデータ破壊等が発生する可能性があった。
マルチパス構成設定はユーザにより行われるため、この設定間違えがあると、２つのパスで別の領域にアクセスしてしまうこととなり、デバイス装置のデータを破壊する可能性があった。また、例えば、アクセスパスを設定した後に、保守を行った際に誤ってアクセスパスをつなぎ代えてしまう可能性もあり、このような場合にも、データを破壊する可能性があった。
特に、近年ファイバチャネルが普及し、どこのデバイス装置に接続されているか分かりずらくなってしまっているため、マルチパスの構成設定が間違え易くなってしまっている。
（２）複数装置から同一パスを使用している時の保守方法が明確になっていなかった。
例えば、デバイス装置のチャネルアダプタの交換を行う際、他の装置からも該チャネルアダプタと同一交換単位のチャネルアダプタを用いたアクセスパスが設定されている場合には、他の装置にチャネルアダプタの交換を行うことを通知しないと、他の装置に影響を与えてしまう。従来においては、このような場合に対応する方法が明確でなく、保守作業を効率的に行うことができなかった。
（３）パス切換の時間が掛かりすぎ、無駄なエラー処理時間が発生した。
例えば、デバイス装置のチャネルアダプタが故障した際、マルチパスデバイス制御機構のフェールオーバ機能が働き、該チャネルアダプタを使用したアクセスパスは停止される。このため、当該チャネルアダプタを使用した複数のアクセスパスが設定されている場合、各アクセスパスを経由してアクセスを行う毎にエラー処理を行ってパス切換えをすることとなり、無駄なエラー処理時間が生ずることとなる。特にファィバチャネルはエラー検出まで時間が掛かる（例えば数十秒）ため、ファィバチャネルを用いたシステムにおいては、効率の良いパス切替手法が求められていた。
本発明は上記事情を考慮してなされたものであって、本発明の目的は、マルチパス計算機システムにおいて、マルチパスの誤ったユーザ設定による問題を解消するとともに、フェールオーバ時のリカバリ時間を短縮し、さらに、デバイス装置の保守作業時間の短縮を図ることである。
【０００４】
【課題を解決するための手段】
図１は本発明の概要を示す図である。同図において、１は上位装置であり、上位装置１はインタフェース２を介して複数の入出力装置３に接続されている。上位装置１と入力装置間のインタフェースとしては、例えば前記したファイバ・チャネル・ネットワークを用いることができるが、ＳＣＳＩやバブを用いてもよい。上位装置１は複数のホストアダプタ１ｃを備え、ホストアダプタ１ｃと入出力装置３のチャネルアダプタ３ａに対して複数のアクセスパス（経路）が設定される。
上位装置１のホストアプリケーション１ａからのＩ／Ｏ要求はマルチパス制御部１ｂに渡され、マルチパス制御部１ｂは、複数のアクセスパスにＩ／Ｏを振り分ける。振り分けられたＩ／Ｏは、ホストアダプタ１ｃ−アクセスパス−チャネルアダプタ３ａを経由して入出力装置３に対して送られて処理され、同一経路を経由してホストアプリケーション１ａに応答が返される。
上記構成のシステムにおいて、本発明においては、次のようにして前記課題を解決する。
（１）入出力装置３は、上位装置１からアクセス可能な複数の領域と、当該複数の領域のそれぞれに対応した領域情報と、当該入出力装置を特定するための装置情報と、前記複数の経路に接続され前記上位装置１からのアクセスを前記領域情報に従い前記領域単位で許可又は禁止するチャネルアダプタ３ａとを備える。
また、上位装置１は、複数の経路に接続され入出力装置３へのアクセスを行う複数のホストアダプタ１ｃと、前記複数のホストアダプタのそれぞれからアクセス可能な前記入出力装置の領域を示すアクセス経路情報と、上位装置１で動作しているソフトウエアからの前記入出力装置３の特定領域へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタ１ｃを選択するマルチパス制御部１ｂとを備える。
更に、入出力装置３のチャネルアダプタ３ａは、上位装置１に対して前記装置情報と前記領域情報とからなる識別情報▲１▼を応答する識別情報応答部を備え、前記上位装置１は、前記アクセス経路情報と前記識別情報▲１▼とから前記複数の経路の正常性を判断する。
上記のように領域を特定する識別情報▲１▼によりアクセスパスの設定誤りを検出しているので、誤って２つのパスで別の領域にアクセスしてしまうことがなく、アクセスパス構成設定の誤りによりデータ破壊等を防ぐことができる。
また、電源オン時および定期的に、入出力装置３内のチャネルアダプタ３ａから上記情報を取得することにより、保守時の接続誤りにも対応することができる。
（２）入出力装置３は、入出力装置３を特定するための装置情報と、該装置内のチャネルアダプタ番号情報と、前記複数の経路に接続される前記上位装置からのアクセスを禁止又は許可するチャネルアダプタ３ａを備える。
また、上位装置１は、前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタ１ｃと、前記複数のホストアダプタ１ｃのそれぞれからアクセス経路情報と、上位装置１で動作しているソフトウェアからの入出力装置３へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタ１ｃを選択するマルチパス制御部１ｂを備える。
更に、入出力装置３のチャネルアダプタ３ａは、上位装置１に対して、前記装置情報と前記アダプタ番号情報とからなる識別情報▲２▼を応答する識別情報応答部を備え、上位装置１は、エラーパスを検出した際、エラーパスに関連する上記識別情報を自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する。
上記のように、エラーパスを検出した際、エラーパスに関連する識別情報▲２▼を自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知しているので、自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部は、パスエラーが検出されたとき、そのアクセスパスの動作を停止させパスフェールオーバ動作を事前に実施することができ、これにより、無駄なエラー処理時間が生ずるのを防止することができる。
（３）入出力装置３は、入出力装置３を特定するための装置情報と、該装置内における部品交換単位情報と、前記複数の経路に接続される上位装置１からのアクセスを禁止又は、許可するチャネルアダプタ３ａを備える。
また上位装置１は、前記複数の経路に接続され入出力装置３へのアクセスを行う複数のホストアダプタ１ｃと、ホストアダプタ１ｃのそれぞれからアクセス経路情報と、上位装置１で動作しているソフトウェアからの入出力装置３へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタ１ｃを選択するマルチパス制御部１ｂを備える。
更に、入出力装置３のチャネルアダプタ３ａは、上位装置１に対して、前記装置情報と前記部品交換単位情報とからなる識別情報▲３▼を応答する識別情報応答部を備え、上位装置１は、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に上記識別情報▲３▼を通知して、同一交換単位情報を持つチャネルアダプタを使用しているパスに関しての動作を停止させる。
上記のように、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパスデバイス制御部に、上記識別情報▲３▼を通知して、同一交換単位情報を持つチャネルアダプタを使用しているパスに関しての動作を停止させるようにしているので、入出力装置３のチャネルアダプタ等の交換を、自装置内の他のアプリケーション、他装置のＩ／Ｏ要求に影響を与えずに行うことができる。
また、部品交換が正常終了し再起動する際、上記識別情報▲３▼をパスが復旧されたということで、自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に通知することによりリカバリ時間の短縮を図ることができる。
なお、インタフェースとしてファイバチャネルを用いる場合には、上記装置を特定する識別情報として、チャネルアダプタが所有するファイバチャネルのＷＷＮ（Ｗｏｒｌｄ ｗｉｄｅ ｎａｍｅ）を利用することができる。また、上記交換部品単位情報として、ＷＷＮのノード名を使用してもよい。
【０００５】
【発明の実施の形態】
図２は本発明の実施例のマルチパスデバイス制御システムの構成を示す図である。同図において、ホストサーバ＃１００は複数のホストアダプタ＃１２０、＃１２１、＃１２２を持ち、それらのホストアダプタ＃１２０〜＃１２２より複数のデバイス装置＃３００、＃４００の複数のチャネルアダプタ＃３１０、＃３１１、＃３１２、＃４１０に対して複数のアクセスパスが設定される。ここでは、アクセスパス＃２００、＃２０１、＃２０２、＃２０３、＃２０４が設定されていたとする。
ホストサーバ＃１００とデバイス装置＃３００、＃４００間のインターフェイスは特に規定されず、例えば、ハブ、ＳＣＳＩ等で接続されていてもよいが、ここでは、普及が進み始めたファイバー・チャネル・ネットワーク（ＦｉｎｂｒｅＣｈａｎｎｅｌ ｎｅｔｗｏｒｋ）を想定し、柔軟なアクセスパスが設定出来る環境であるとする。
デバイス装置＃３００、＃４００はチャネルアダプタからデバイス内の各領域Ａ〜Ｃがアクセスできる。ここではチャネルアダプタ＃３１０と＃３１１より領域Ａ、チャネルアダプ＃３１２より領域Ｂ、チャネルアダプタ＃４１０より領域Ｃを割り当てている。
【０００６】
以下に図２に示すシステムのＩ／Ｏ要求の流れを示す。
ホストサーバ＃１００はホストアプリケーション＃１０１が動作しており、領域Ａに対するＩ／Ｏ要求はマルチパスデバイス制御機構＃１０２に渡される。マルチパスデバイス制御機構＃１０２は、領域Ａをアクセスするためにアクセスパス＃２００か＃２０１のどちらかにＩ／Ｏを振り分ける。
振り分けられたＩ／Ｏは、ホストアダプタ＃１２０−アクセスパス＃２００−チャネルアダプタ＃３１０か、ホストアダプタ＃１２１−アクセスパス＃２０１−チャネルアダプタ＃３１１を経由して領域Ａに対して送られ処理され、同一経路を経由してホストアプリケーション＃１０１に応答を返す。
【０００７】
次に、上記マルチパスデバイス制御システムにおいて、前記問題点を解決する本発明の実施例について説明する。
（１）実施例１
上記図２に示すシステムにおいて、マルチパスデバイス制御機構＃１０２のアクセスパス設定は、通常ホストサーバ＃１００から、ユーザがマルチパスデバイス制御に対して設定する。
つまり、図２の例ではアクセスパス＃２００と＃２０１でマルチパスデバイスを構成するという設定をユーザがしなくてはならない。
しかし、ここで誤ってユーザがアクセスパス＃２００と＃２０２でマルチパスデバイス制御を構成してしまうと、２つのパスで別の領域Ａ，Ｂをアクセスしてしまい、関係のない領域Ｂを破壊してしまうこととなる。
この誤った設定をプロテクトするため、本実施例では、チャネルアダプタにデバイス装置＃３００の装置名＃３３０、シリアル番号情報＃３４０とチャネルアダプタが接続された領域情報を返す仕組みを搭載する。
【０００８】
ホストサーバ＃１００はチャネルアダプタからこの情報を読み取り、それらを組み合わせることによって世界で唯一の領域名を作成し識別子として利用する。
つまりホストサーバ＃１００はチャネルアダプタ＃３１０，＃３１１，＃３１２，＃４１０より、この情報を確保して、例えば以下の識別子を生成する。ここでは、デバイス装置＃３００の装置名がＦ６４９４、シリアル番号が０１２３、デバイス装置＃４００の装置名がＦ６４９５、シリアル番号が０１２４とする。
(a) チャネルアダプタ＃３１０より上記情報を確保し、領域Ａに対して以下の識別子とする。
Ｆ６４９４−０１２３−Ａ
(b) チャネルアダプタ＃３１１より上記情報を確保し、領域Ａに対して以下の識別子とする。
Ｆ６４９４−０１２３−Ａ
(c) チャネルアダプタ＃３１２より上記情報を確保し、領域Ｂに対して以下の識別子とする。
Ｆ６４９４−０１２３−Ｂ
(d) チャネルアダプタ＃４１０より上記情報を確保し、領域Ｃに対して以下の識別子とする。
Ｆ６４９５−０１２４−Ｃ
【０００９】
マルチパスデバイス制御機構＃１０２に、同一識別子が作成できないアクセスパスの指定は拒否する仕組みを組み込むことにより、誤ったマルチパスデバイス構成を設定することを防ぐことが可能となる。
つまり、この例においては、チャネルアダプタ＃３１０、＃３１１は同一識別子なのでアクセスパスの設定を受け付けるが、チャネルアダプタ＃３１２、＃４１０は識別子が異なるのでアクセスパスの設定を受け付けない。
【００１０】
また、アクセスパスを一度設定してからホストサーバ＃１００の電源を切った後、保守を行った際に誤ってアクセスパス＃２０１を＃２０２につなぎかえてしまうと、上記と同様に領域Ｂは破壊される。
そこで、ホストサーバ＃１００の立ち上がり時に、マルチパスデバイス制御機構＃１０２がアクセスパス毎の識別子を上記のように計算しマルチパスデバイス制御を構成するアクセスパス正しいかどうかを確認する。
もし、識別子がアクセスパス毎異なる場合は、マルチパスデバイス制御機構＃１０２は、マルチパス処理を行わない。
【００１１】
さらに、アクセスパスを一度設定してからホストサーバ＃１００の電源をいれたままアクセスパス＃２０１を＃２０２につなぎかえてしまった場合も、上記と同様に領域Ｂは破壊される。
そこで、ホストサーバ＃１００のマルチパスデバイス制御機構＃１０２は定期的に、チャネルアダプタに対して各情報の要求を行い、上記と同様にアクセスパス毎の識別子を計算し、マルテパスデバイス制御を構成するアクセスパスが正しいかどうかを確認する。
もし、識別子がアクセスパス毎異なる場合は、マルチパスデバイス制御機構＃１０２は、マルチパス処理を中断する。
【００１２】
図３は上記マルチパスデバイス制御機構＃１０２における処理の概要を示すフローチャートである。
図３において、まず、ユーザによるマルチパスのアクセスパス設定コマンドが実行されアクセスパス設定が行われる。これにより、例えば、前記図２におけるアクセスパス＃２００、＃２０１が設定される。
マルチパスデバイス制御機構＃１０２はデバイス装置から、パス毎に、装置名、シリアル番号・領域を確保して識別子を作成する。例えば、前記例では、アクセスパス＃２００、＃２０１に対してそれぞれ識別子Ｆ６４９４−０１２３−Ａが、アクセスパス＃２０２に対してＦ６４９４−０１２３−Ｂが、アクセスパス＃２０３に対してＦ６４９５−０１２４−Ｃが、アクセスパス＃２０４に対してＦ６４９４−０１２３−Ｂが作成される。
領域に対するＩ／Ｏ要求があると、マルチパスデバイス制御機構＃１０２はコマンドのパスの識別子を比較する。そして識別子が不一致であれば、エラー終了し、また一致しているば正常終了し、マルチパス処理を実行する。
例えば、ユーザがアクセスパス＃２００と＃２０１でマルチパスを構成している場合には、識別子Ｆ６４９４−０１２３−Ａが一致するのでマルチパス処理が実行されるが、誤って、アクセスパス＃２００と＃２０２でマルチパスを構成している場合には、それぞれの識別子がＦ６４９４−０１２３−ＡとＦ６４９４−０１２３−Ｂであるので、不一致となり、マルチパスデバイス制御機構＃１０２はマルチパス処理を中断する。
また、電源オン時および定期的に、マルチパスデバイス制御機構＃１０２はデバイス装置から、パス毎に、装置名、シリアル番号・領域を確保して識別子を作成し、上記のようにＩ／Ｏ要求があったとき、コマンドのパスの識別子を比較する。これにより、保守時の接続誤りにも対応することができる。
【００１３】
（２）実施例２
図４に示す構成のシステムにおいて、次のようなマルチパス構成を設定した場合を想定する。
・ホストサーバ＃１００のマルチパスデバイス制御機構（領域Ａ用）＃１０２に、デバイス装置＃３００の領域Ａに対してアクセスパス＃２００、＃２０１からのマルチパス構成を設定する。
・ホストサーバ＃１００のマルチパスデバイス制御機構（領域Ｄ用）＃１０３に、デバイス装置＃３００の領域Ｄに対してもアクセスパス＃２００、＃２０１からのマルチパス構成を設定する。
この状態で領域Ａに対する処理を行っている際に、チャネルアグプタ＃３１０でエラーが発生した場合マルチパスデバイス制御機構＃１０２のフェールオーバ機能が働き、アクセスパス＃２００は停止されて、アクセスパス＃２０１経由でチャネルアダプタ＃３１１を使用して領域Ａに対してコマンドが発行される。
しかし、この際に領域Ｄに対する、マルチパスデバイス制御機構＃１０３のアクセスパスの設定はそのままで、ホストアプリケーション＃１０１からコマンドが領域Ｄに対して発行された際は、マルチパスデバイス制御機構（領域Ｄ用）＃１０３はアクセスパス＃２００経由でチャネルアダプタ＃３１０を使用しようとする。
しかし、チャネルアダプタ＃３１０はエラーとなっているため使用できない。この時、チャネルアダプ＃３１０に対して無駄なエラー処理時間が発生する。特に前記したようにファィバチャネルはエラー検出まで時間が掛かるため、この無駄なエラー処理時間は特に問題となる。
この問題を解決するため、本実施例においては、エラーとなったチャネルアダプタをホストサーバで認識できるようにする。
そのため、チャネルアダプタにデバイス装置の装置名＃３３０、シリアル番号情報＃３４０と装置内で唯一のアダプタ番号情報を返す仕組みを搭載する。
【００１４】
ホストサーバはチャネルアダプタからこの情報を読み取り組み合わせることよって世界で唯一のチャネル場所識別子を作成し利用できることとなる。
つまりホストサーバ＃１００はチャネルアダプタよりこの情報を確保して、例えば以下の識別子を生成する。ここでは、デバイス装置＃３００の装置名がＦ６４９４、シリアル番号が０１２３、デバイス装置＃４００の装置名がＦ６４９５、シリアル番号が０１２４とする。
(a) チャネルアダプタ＃３１０（アダプタ番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−１
(b) チャネルアダプタ＃３１１（アダプタ番号２）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−２
(c) チャネルアダプタ＃３１２（アダプタ番号３）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−３
(d) チャネルアダプタ＃４１０（アダプタ番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９５−０１２４−４
【００１５】
全てのマルチパスデバイス制御がパスエラーを検出する前に予めパス毎にこの情報を確保しておく。
マルチパスデバイス制御は、パスエラーを検出した際には、エラーパスに関連するチャネルアダプタの識別子をホスト内の他のマルチパスデバイス制御に通知する。
この例では、マルチパスデバイス制御機構＃１０２からマルチパスデバイス制御機構＃１０３に通知される。
このエラー識別子情報を受けたマルチパスデバイス制御機構＃１０３は、自分のパス設定内に同一識別と関連されているアクセスパスがないかをチェックし、あった場合そのアクセスパスの動作を停止させパスフェールオーバ動作を事前に実施する。これにより、マルチパスデバイス制御がアクセスパス＃２００に不用意にアクセスする事を防止することが可能となる。
【００１６】
上記説明は１台のホストサーバ内における処理であるが、この処理はホストサーバを超えて実現することもできる。
図４に示すように、ホストサーバ＃１００とホストサーバ＃５００がＬＡＮ＃６００により接続されている場合を想定する。
このような構成において、前記したようにデバイス装置＃３００の領域Ａに対してアクセスパス＃２００、＃２０１からのマルチパス構成が設定され、デバイス装置＃３００の領域Ｄに対してもアクセスパス＃２００、＃２０１からのマルチパス構成が設定されており、さらに、デバイス装置＃３００のチャネルアダプタ＃３１０は、ホストサーバ＃１００からだけでなく、ホストサーバ＃５００でも使用されている場合を想定する。
この場合、チャネルアダプタ＃３１０の障害は、ホストサーバ＃５００でも同等に検出される。従って、チャネルアダプタ＃３１０に障害が発生すると、それぞれのホストサーバ＃１００、＃５００によりエラー処理が行われ無駄なエラー処理時間が発生することとなる。
そこで、例えばチャネルアダプタ＃３００に障害が発生すると、マルチパスデバイス制御機構＃１０２から、前記したエラーチャネルアダプタ識別子情報（例えばＦ６４９４−０１２３−１）を、他のサーバ＃５００にも通知する。これにより、他ホストサーバ＃５００での不用意なエラー検出を防ぐことができ、リカバリ時間を短縮させることが可能となる。
他ホストサーバ＃５００で起動中のマルチパスデバイス制御機構＃５０２は、上記エラーチャネルアダプタの識別子を受け取ると、自分のパス設定内に同一識別と関連されているアクセスパスがないかをチェックし、あった場合そのアクセスパスの動作を停止させ、パスフェールオーバ機能を実施する。
【００１７】
（３）実施例３
上記実施例は、マルチパスデバイス制御がパスエラーを検出した場合の処理であるが、以下に説明する実施例では、デバイスの活性交換単位を考慮して、ホスト内で交換単位に関連するアクセスパスの停止を実現させる。
図５により本実施例について説明する。
図５において、デバイス装置＃３００のチャネルアダプタ＃３１０、＃３１１は同一パッケージになっている同一活性交換単位（以下交換単位１という）のチャネルアダプタであり、チャネルアダプタを交換する場合、チャネルアダプタ＃３１０、＃３１１は同時に交換される。同様にチャネルアダプタ＃３１２、＃３１３も同一活性交換単位（以下交換単位２という）のチャネルアダプタである。
また、ホストサーバ＃１００より、アクセスパス＃２００、＃２０１を経由して、デバイス装置＃３００の領域Ａをアクセスするようにマルチパスデバイス制御機構＃１０２が設定されている。
さらに、アクセスパス＃２０２、＃２０３を経由して、デバイス装置＃３００の領域Ｂをアクセスするようにマルチパスデバイス制御機構＃１５２が設定されている。上記アクセスパス＃２００、＃２０２は交換単位１のチャネルアダプタ＃３１０、＃３１１を使用しており、また、アクセスパス＃２０１、＃２０３は交換単位２のチャネルアダプタ＃３１２、＃３１３を使用している。
【００１８】
この環境で、チャネルアダプタ＃３１０で障害が発生した際には、マルチパスデバイス制御機構＃１５２配下のパスには影響はない。
しかし、チャネルアダプタ＃３１０の障害を取り除くため、チャネルアダプタ＃３１０を交換しようとした際に、チャネルアダプタ＃３１０がチャネルアダプタ＃３１１と同一パッケージとなっている為に、チャネルアダプタ＃３１１も影響を受けてしまう。
そこで、本実施例においては、チャネルアダプタ＃３１０を交換する際に＃３１１の処理を事前に停止させるようにする。
このため、チャネルアダプタにデバイス装置の装置名＃３３０、シリアル番号情報＃３４０と装置内で部品交換単位情報を返す仕組みを搭載する。
ホストサーバ＃１００はチャネルアダプタからこのこの情報を読み取り組み合わせることよって世界で唯一の部品交換単位識別子を作成し利用できることとなる。
【００１９】
つまりホストサーバ＃１００はチャネルアダプタよりこの情報を取得して、例えば以下の部品交換識別子を生成する。ここでは、デバイス装置＃３００の装置名がＦ６４９４、シリアル番号が０１２３、デバイス装置＃４００の装置名がＦ６４９５、シリアル番号が０１２４とする。
(a) チャネルアダプタ＃３１０（交換単位番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−１
(b) チャネルアダプタ＃３１１（交換単位番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−１
(c) チャネルアダプタ＃３１２（交換単位番号２）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−２
(d) チャネルアダプタ＃３１３（交換単位番号２）より上記情報を確保し、以下の識別子とする。
Ｆ６４９５−０１２３−２
【００２０】
図５において、ユーザからチャネルアダプタ＃３１０を交換するというコマンドをマルチパスデバイス制御機構＃１０２が受け付けた際に、チャネルアダプタ＃３１０に関連する部品交換識別子（上記例ではＦ６４９４−０１２３−１）を当該ホストの別マルチパスデバイス制御機構＃１５２に転送する。
マルチパスデバイス制御機構＃１５２はこの識別子を受け付けると、この部品交換識別子に関連するアクセスパス＃２０２を停止させ、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をホストアプリケーション＃１５１のＩ／Ｏ要求に影響を与えずに実行させる。
【００２１】
上記説明は１台のホストサーバ内における処理であるが、上記処理はホストを超えて実現することもできる。
次に、図６により、デバイスの活性交換単位を考慮して、ホストを超えたアクセスパスの停止を実現させる場合について説明する。
図６に示すように、ホストサーバ＃１００より、アクセスパス＃２００、＃２０１を経由して、デバイス装置＃３００の領域Ａをアクセスするようにマルチパスデバイス制御機構＃１０２が設定されている。また、ホストサーバ＃５００より、アクセスパス＃２０２、＃２０３を経由して、デバイス装置＃３００の領域Ｂをアクセスするようにマルチパスデバイス制御機構＃５０２が設定されている。なお、部品交換識別子は前記図５で説明したのと同じ識別子であるとする。
【００２２】
図６において、ユーザからチャネルアダプタ＃３１０を交換するというコマンドをマルチパスデバイス制御機構＃１０２が受け付けると、マルチパスデバイス制御機構＃１０２はチャネルアダプタ＃３１０に関連する部品交換識別子（Ｆ６４９４−０１２３−１）を他ホスト＃５００の別マルチパスデバイス制御機構＃５０２に転送する。
マルチパスデバイス制御機構＃５０２は、この識別子を受け付けると、この部品交換識別子に関連するアクセスパス＃２０２のアクセスを停止させる。これにより、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をホストアプリケーション＃５０１のＩ／Ｏ要求に影響を与えずに実行させることができる。
【００２３】
また、上記デバイスの活性交換単位を考慮して、ホスト内の関連するアクセスパスの再起動を実現することもできる。
前記図５において、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をする際には、マルチパスデバイス制御機構＃１０２および＃１５２からアクセスパス＃２００、＃２０２は停止される。
交換が正常終了した際に、ユーザはマルチパスデバイス制御機構＃１０２にアクセスパスの再起動コマンドを発行する。
マルチパスデバイス制御機構＃１０２はこれによりアクセスパス＃２００の再起動を行うが、これと同時に、当該アクセスパス＃２００に関連する交換単位識別子（Ｆ６４９４−０１２３−１）を当該ホスト内の他のマルチパスデバイス制御部＃１５２にパス復旧されたということで通知する。マルチパスデバイス制御部＃１５２は、上記交換識別子に関連するアクセスパスが停止していた場合は、これを再起動させるコマンドを自分自身に発行し、再起動を実現する。
【００２４】
上記と同様に、デバイスの活性交換単位を考慮してホストを超えたアクセスパスを再起動を実現させることができる。
前記図６において、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をする際は、マルチパスデバイス制御機構＃１０２および＃１５２からアクセスパス＃２００、＃２０２は停止される。
交換を正常終了した際、ユーザはマルチパスデバイス制御機構＃１０２にパスの再起動コマンドを発行する。
マルチパスデバイス制御機構＃１０２はこれを受けて、アクセスパス＃２００の再起動を行うが、これと同時に、当該アクセスパス＃２００に関連する部品交換単位識別子（Ｆ６４９４−０１２３−１）を他のホスト＃５００内の他マルチパスデバイス制御機構＃１５２にパス復旧されたということで通知する。
マルチパスデバイス制御＃１５２は、上記部品交換識別子に関連するアクセスパスが停止していた場合は、これを再起動させるコマンドを自分自身に発行し、再起動を実現する。
これにより、ホストを超えた活性交換時のマルチパスデバイス制御へのコマンドの簡素化が実現でき、マルチパスデバイス制御に対しての誤操作とリカバリ時間の短縮を実現することができる。
【００２５】
図７は、本実施例の処理の概要を示すフローチャートである。
図７において、まず、ホストサーバはチャネルアダプタからデバイス装置の装置名、シリアル番号情報と装置内での部品交換単位情報を取得し、前記した部品交換識別子を生成する。
そして、障害が発生すると、マルチパスデバイス制御機構は、当該チャネルアダプタに関連する部品交換識別子を自ホストもしくは他ホストの別マルチパスデバイス制御機構に転送する。
他のマルチパスデバイス制御機構は、この識別子を受け付けると、この部品交換識別子に関連するアクセスパスのアクセスを停止させる。
ついで、再起動コマンドを発行されると、マルチパスデバイス制御機構は、当該チャネルアダプタに関連する部品交換識別子をパス復旧されたということで自ホストもしくは他ホストのマルチパスデバイス制御機構に転送し、アクセスパスを再開する。
【００２６】
上記実施例では、装置を特定する識別子としてシリアル番号を用いる場合について説明したが、ファイバチャネルを用いる場合には、シリアル番号の代りに、チャネルアダプタが所有するファイバチャネルのＷＷＮ（Ｗｏｒｌｄ ｗｉｄｅ
ｎａｍｅ）を利用することができる。
ファイバチャネルのＷＷＮは世界で唯一の値であるため、上記実施例の識別子として使用する上では問題がない。但し、このＷＷＮが使用できるのは、ファイバチャネル接続環境のみであるので、オールマイティとはいえないが、装置のシリアル番号を読み込めない装置などに使用できる。
また、上記第３の実施例の交換部品単位を特定する識別子として、ＷＷＮのノード名を使用することができる。ＷＷＮのノード名は世界唯一であり、かつ複数のポート名を図８に示すように同一ノード内にもてるために、交換部品を特定する識別子と利用できる。
なお、上記説明では、第１〜第３の実施例についてそれぞれ説明したが、これらを単独で用いてもよいし、また第１〜第３の実施例を組み合わせてもよい。
【００２７】
（付記１）上位装置と入出力装置とが複数の経路により接続されるマルチパス計算機システムであって、
該入出力装置は、
上位装置からアクセス可能な複数の領域と、
当該複数の領域のそれぞれに対応した領域情報と、
当該入出力装置を特定するための装置情報と、
前記複数の経路に接続され前記上位装置からのアクセスを前記領域情報に従い前記領域単位で許可又は禁止するチャネルアダプタと、を備え
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからアクセス可能な前記入出力装置の領域を示すアクセス経路情報と、
前記上位装置で動作しているソフトウエアからの前記入出力装置の特定領域へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、上位装置に対して前記装置情報と前記領域情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置は、更に、前記アクセス経路情報と前記識別情報とから前記複数の経路の正常性を判断する経路判断部を備えること
を特徴とするマルチパス計算機システム。
（付記２）複数のアクセス領域を有する入出力装置と複数の経路によって接続される装置であって、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからアクセス可能な前記入出力装置の領域を示すアクセス経路情報と、
前記装置で動作しているソフトウエアからの前記入出力装置の特定領域へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、
前記入出力装置から応答される該入出力装置の装置情報と領域情報とからなる識別情報と、前記アクセス経路情報とから前記複数の経路の正常性を判断する経路判断部と、
を備えることを特徴とする装置。
（付記３）上位装置と複数の経路により接続される入出力装置であって、上位装置からアクセス可能な複数の領域と、
当該複数の領域のそれぞれに対応した領域情報と、
当該入出力装置を特定するための装置情報と、
前記複数の経路に接続され前記上位装置からのアクセスを前記領域情報に従い前記領域単位で許可又は禁止するチャネルアダプタと、
上位装置に対して前記装置情報と前記領域情報とからなる識別情報を応答する識別情報応答部と、
を備えたことを特徴とする入出力装置。
（付記４）上位装置の立ち上がり時に、経路判断部は、前記複数の経路の正常性を判断し、
上記識別情報が経路毎異なる場合に、マルチパス設定を行わないようにした
ことを特徴とする付記１のマルチパス計算機システム。
（付記５）定期的に、経路判断部は、前記複数の経路の正常性を判断し、上記識別情報が経路毎異なる場合に、マルチパス設定を行わないようにした
ことを特徴とする付記１のマルチパス計算機システム。
（付記６）上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムであって、
該入出力装置は、入出力装置を特定するための装置情報と、
該装置内のチャネルアダプタ番号情報と、
前記複数の経路に接続される前記上位装置からのアクセスを禁止又は許可するチャネルアダプタと、を備え、
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからのアクセス経路情報と、
前記上位装置で動作しているソフトウェアからの前記入出力装置へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、前記上位装置に対して、前記装置情報とチャネルアダプタ番号情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置は、更に、エラーパスを検出した際、エラーパスに関連する上記識別情報を自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する手段を備える
ことを特徴とするマルチパス計算機システム。
（付記７）入出力装置と複数の経路によって接続される装置であって、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数の経路に接続され、前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタからのそれぞれからアクセス可能な前記入出力装置のチャネルアダプタを示すアクセス経路情報と、
前記装置で動作しているソフトウェアからの前記入出力装置のアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、
エラーパスを検出した際、該エラーパスに関連する、前記入出力装置から応答される該入出力装置の装置情報とチャネルアダプタ番号情報とからなる識別情報を、自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する手段と、
を備えることを特徴とする装置。
（付記８）上位装置と複数の経路により接続される入出力装置であって、
当該入出力装置を特定するための装置情報と、
該装置内のチャネルアダプタ番号情報と、
前記複数の経路に接続され前記上位装置からのアクセスを許可または禁止するチャネルアダプタと、
上位装置に対して前記装置情報と、前記チャネルアダプタ番号情報とからなる識別情報を応答する識別情報応答部とを備えた
ことを特徴とする入出力装置。
（付記９）上記入出力装置を特定するための情報として、チャネルアダプタが所有するファイバチャネルのワールド・ワイド・ネームを用いることを特徴とする付記１または付記６のマルチパス計算機システム。
（付記１０）上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムであって、
該入出力装置は、入出力装置を特定するための装置情報と、
該装置内における部品交換単位情報と、
前記複数の経路に接続される前記上位装置からのアクセスを禁止又は、許可するチャネルアダプタと、を備え、
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからアクセス経路情報と、
前記上位装置で動作しているソフトウェアからの前記入出力装置へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、前記上位装置に対して、前記装置情報と前記部品交換単位情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置は、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に上記識別情報を通知する手段を備える
ことを特徴とするマルチパス計算機システム。
（付記１１）入出力装置と複数の経路によって接続される装置であって、前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタからのそれぞれからアクセス可能な前記入出力装置のチャネルアダプタを示すアクセス経路情報と、
前記装置で動作しているソフトウェアからの前記入出力装置のアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、
チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に、前記入出力装置から応答される該入出力装置の装置情報と部品交換単位情報とからなる識別情報を通知する手段とを備えることを特徴とする装置。
（付記１２）上位装置と複数の経路により接続される入出力装置であって、
当該入出力装置を特定するための装置情報と、
該装置内における部品交換単位情報と、
前記複数の経路に接続され前記上位装置からのアクセスを許可または禁止するチャネルアダプタと、
上位装置に対して前記装置情報と、前記部品交換単位情報とからなる識別情報を応答する識別情報応答部とを備えた
ことを特徴とする入出力装置。
（付記１３）チャネルアダプタを交換し、再起動するという要求があったとき、そのチャネルアダプタを使用しているパスの動作を再起動させ、また、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に上記識別情報を通知して、同一交換単位識別子を持つチャネルアダプタを使用しているパスに関しての動作を再起動させる
ことを特徴とする付記１０のマルチパス計算機システム。
（付記１４）上記部品交換単位を特定する識別情報として、チャネルアダプタが所有するファイバチャネルのワールド・ワイド・ネームのノード名を使用する
ことを特徴とする付記１０のマルチパス計算機システム。
（付記１５）上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムの上位装置における処理プログラムを記録した記録媒体であって、上記処理プログラムは、入出力装置内のチャネルアダプタから、該入出力装置の装置情報と、アクセス可能な複数の領域のそれぞれに対応した領域情報、該装置内のチャネルアダプタ番号情報、および／または、該装置内における部品交換単位情報を取得し、
前記アクセス経路情報と、上記装置情報と領域情報からなる識別情報から前記複数の経路の正常性を判断し、
エラーパスを検出した際、エラーパスに関連する上記装置情報とチャネルアダプタ番号情報とからなる識別情報をを自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知し、
チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に、上記装置情報と部品交換単位情報とからなる識別情報を通知する
ことを特徴とするマルチパス計算機システムにおける処理プログラムを記録した記録媒体。
【００２８】
【発明の効果】
以上説明したように、本発明においては、マルチパス制御部がチャネルアダプタから、チャネルアダプタが接続された領域情報、アダプタを特定する情報、および／または、部品交換単位を表す情報を取得して、入出力装置側のパス情報を正確に認識するようにしているので、誤ったユーザ設定を防ぐことができ、また、フェールオーバ時のリカバリ時間を短縮することができ、さらに、活性交換時の作業時間の短縮を実現することが可能となる。
【図面の簡単な説明】
【図１】本発明の概要を説明する図である。
【図２】本発明の実施例のマルチパスデバイス制御システムの構成を示す図である。
【図３】本発明の第１の実施例の処理の概要を示すフローチャートである。
【図４】本発明の第２の実施例を説明する図である。
【図５】本発明の第３の実施例を説明する図（１）である。
【図６】本発明の第３の実施例を説明する図（２）である。
【図７】本発明の第３の実施例の処理の概要を示すフローチャートである。
【図８】部品交換単位とＷＷＮのノード名との関係を説明する図である。
【符号の説明】
１ 上位装置
１ｂ マルチパス制御部
１ｃ ホストアダプタ
２ 通信インタフェース
３ 入出力装置
３ａ チャネルアダプタ
＃１００，＃５００ ホストサーバ
＃１０２〜＃１０３ マルチパスデバイス制御機構
＃１５２，＃５０２ マルチパスデバイス制御機構
＃１２０〜＃１２２ ホストアダプタ
＃１７０，＃１７１ ホストアダプタ
＃５２０，＃５２１ ホストアダプタ
＃３００，＃４００ デバイス装置
＃３１０〜＃３１３ チャネルアダプタ
＃４１０ チャネルアダプタ
＃２００〜＃２０４ アクセスパス
【発明の属する技術分野】
本発明は、サーバ間とデバイス間を接続するに際し、マルチパスでデバイスにアクセスするマルチパス計算機システムに関し、特に、マルチパスデバイス制御の信頼性を確保したマルチパス計算機システムに関するものである。
【０００２】
【従来の技術】
近年、サーバとデバイス装置を接続するに際し、単なる１対１の接続から複数対複数の接続を行ったマルチパスのデバイス制御が、信頼性確保の為に重要視されている。
上記マルチパスデバイス制御においては、ユーザがデバイスにアクセスするためのマルチパスを設定し、マルチパスデバイス制御機構が、上記マルチパス設定に基づきアクセスパスを振り分ける。
【０００３】
【発明が解決しようとする課題】
上記マルチパスの環境を実現するためのシステムを構築する上で、以下の問題点があった。
（１）マルチパス構成設定の誤りによりデータ破壊等が発生する可能性があった。
マルチパス構成設定はユーザにより行われるため、この設定間違えがあると、２つのパスで別の領域にアクセスしてしまうこととなり、デバイス装置のデータを破壊する可能性があった。また、例えば、アクセスパスを設定した後に、保守を行った際に誤ってアクセスパスをつなぎ代えてしまう可能性もあり、このような場合にも、データを破壊する可能性があった。
特に、近年ファイバチャネルが普及し、どこのデバイス装置に接続されているか分かりずらくなってしまっているため、マルチパスの構成設定が間違え易くなってしまっている。
（２）複数装置から同一パスを使用している時の保守方法が明確になっていなかった。
例えば、デバイス装置のチャネルアダプタの交換を行う際、他の装置からも該チャネルアダプタと同一交換単位のチャネルアダプタを用いたアクセスパスが設定されている場合には、他の装置にチャネルアダプタの交換を行うことを通知しないと、他の装置に影響を与えてしまう。従来においては、このような場合に対応する方法が明確でなく、保守作業を効率的に行うことができなかった。
（３）パス切換の時間が掛かりすぎ、無駄なエラー処理時間が発生した。
例えば、デバイス装置のチャネルアダプタが故障した際、マルチパスデバイス制御機構のフェールオーバ機能が働き、該チャネルアダプタを使用したアクセスパスは停止される。このため、当該チャネルアダプタを使用した複数のアクセスパスが設定されている場合、各アクセスパスを経由してアクセスを行う毎にエラー処理を行ってパス切換えをすることとなり、無駄なエラー処理時間が生ずることとなる。特にファィバチャネルはエラー検出まで時間が掛かる（例えば数十秒）ため、ファィバチャネルを用いたシステムにおいては、効率の良いパス切替手法が求められていた。
本発明は上記事情を考慮してなされたものであって、本発明の目的は、マルチパス計算機システムにおいて、マルチパスの誤ったユーザ設定による問題を解消するとともに、フェールオーバ時のリカバリ時間を短縮し、さらに、デバイス装置の保守作業時間の短縮を図ることである。
【０００４】
【課題を解決するための手段】
図１は本発明の概要を示す図である。同図において、１は上位装置であり、上位装置１はインタフェース２を介して複数の入出力装置３に接続されている。上位装置１と入力装置間のインタフェースとしては、例えば前記したファイバ・チャネル・ネットワークを用いることができるが、ＳＣＳＩやバブを用いてもよい。上位装置１は複数のホストアダプタ１ｃを備え、ホストアダプタ１ｃと入出力装置３のチャネルアダプタ３ａに対して複数のアクセスパス（経路）が設定される。
上位装置１のホストアプリケーション１ａからのＩ／Ｏ要求はマルチパス制御部１ｂに渡され、マルチパス制御部１ｂは、複数のアクセスパスにＩ／Ｏを振り分ける。振り分けられたＩ／Ｏは、ホストアダプタ１ｃ−アクセスパス−チャネルアダプタ３ａを経由して入出力装置３に対して送られて処理され、同一経路を経由してホストアプリケーション１ａに応答が返される。
上記構成のシステムにおいて、本発明においては、次のようにして前記課題を解決する。
（１）入出力装置３は、上位装置１からアクセス可能な複数の領域と、当該複数の領域のそれぞれに対応した領域情報と、当該入出力装置を特定するための装置情報と、前記複数の経路に接続され前記上位装置１からのアクセスを前記領域情報に従い前記領域単位で許可又は禁止するチャネルアダプタ３ａとを備える。
また、上位装置１は、複数の経路に接続され入出力装置３へのアクセスを行う複数のホストアダプタ１ｃと、前記複数のホストアダプタのそれぞれからアクセス可能な前記入出力装置の領域を示すアクセス経路情報と、上位装置１で動作しているソフトウエアからの前記入出力装置３の特定領域へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタ１ｃを選択するマルチパス制御部１ｂとを備える。
更に、入出力装置３のチャネルアダプタ３ａは、上位装置１に対して前記装置情報と前記領域情報とからなる識別情報▲１▼を応答する識別情報応答部を備え、前記上位装置１は、前記アクセス経路情報と前記識別情報▲１▼とから前記複数の経路の正常性を判断する。
上記のように領域を特定する識別情報▲１▼によりアクセスパスの設定誤りを検出しているので、誤って２つのパスで別の領域にアクセスしてしまうことがなく、アクセスパス構成設定の誤りによりデータ破壊等を防ぐことができる。
また、電源オン時および定期的に、入出力装置３内のチャネルアダプタ３ａから上記情報を取得することにより、保守時の接続誤りにも対応することができる。
（２）入出力装置３は、入出力装置３を特定するための装置情報と、該装置内のチャネルアダプタ番号情報と、前記複数の経路に接続される前記上位装置からのアクセスを禁止又は許可するチャネルアダプタ３ａを備える。
また、上位装置１は、前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタ１ｃと、前記複数のホストアダプタ１ｃのそれぞれからアクセス経路情報と、上位装置１で動作しているソフトウェアからの入出力装置３へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタ１ｃを選択するマルチパス制御部１ｂを備える。
更に、入出力装置３のチャネルアダプタ３ａは、上位装置１に対して、前記装置情報と前記アダプタ番号情報とからなる識別情報▲２▼を応答する識別情報応答部を備え、上位装置１は、エラーパスを検出した際、エラーパスに関連する上記識別情報を自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する。
上記のように、エラーパスを検出した際、エラーパスに関連する識別情報▲２▼を自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知しているので、自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部は、パスエラーが検出されたとき、そのアクセスパスの動作を停止させパスフェールオーバ動作を事前に実施することができ、これにより、無駄なエラー処理時間が生ずるのを防止することができる。
（３）入出力装置３は、入出力装置３を特定するための装置情報と、該装置内における部品交換単位情報と、前記複数の経路に接続される上位装置１からのアクセスを禁止又は、許可するチャネルアダプタ３ａを備える。
また上位装置１は、前記複数の経路に接続され入出力装置３へのアクセスを行う複数のホストアダプタ１ｃと、ホストアダプタ１ｃのそれぞれからアクセス経路情報と、上位装置１で動作しているソフトウェアからの入出力装置３へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタ１ｃを選択するマルチパス制御部１ｂを備える。
更に、入出力装置３のチャネルアダプタ３ａは、上位装置１に対して、前記装置情報と前記部品交換単位情報とからなる識別情報▲３▼を応答する識別情報応答部を備え、上位装置１は、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に上記識別情報▲３▼を通知して、同一交換単位情報を持つチャネルアダプタを使用しているパスに関しての動作を停止させる。
上記のように、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパスデバイス制御部に、上記識別情報▲３▼を通知して、同一交換単位情報を持つチャネルアダプタを使用しているパスに関しての動作を停止させるようにしているので、入出力装置３のチャネルアダプタ等の交換を、自装置内の他のアプリケーション、他装置のＩ／Ｏ要求に影響を与えずに行うことができる。
また、部品交換が正常終了し再起動する際、上記識別情報▲３▼をパスが復旧されたということで、自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に通知することによりリカバリ時間の短縮を図ることができる。
なお、インタフェースとしてファイバチャネルを用いる場合には、上記装置を特定する識別情報として、チャネルアダプタが所有するファイバチャネルのＷＷＮ（Ｗｏｒｌｄ ｗｉｄｅ ｎａｍｅ）を利用することができる。また、上記交換部品単位情報として、ＷＷＮのノード名を使用してもよい。
【０００５】
【発明の実施の形態】
図２は本発明の実施例のマルチパスデバイス制御システムの構成を示す図である。同図において、ホストサーバ＃１００は複数のホストアダプタ＃１２０、＃１２１、＃１２２を持ち、それらのホストアダプタ＃１２０〜＃１２２より複数のデバイス装置＃３００、＃４００の複数のチャネルアダプタ＃３１０、＃３１１、＃３１２、＃４１０に対して複数のアクセスパスが設定される。ここでは、アクセスパス＃２００、＃２０１、＃２０２、＃２０３、＃２０４が設定されていたとする。
ホストサーバ＃１００とデバイス装置＃３００、＃４００間のインターフェイスは特に規定されず、例えば、ハブ、ＳＣＳＩ等で接続されていてもよいが、ここでは、普及が進み始めたファイバー・チャネル・ネットワーク（ＦｉｎｂｒｅＣｈａｎｎｅｌ ｎｅｔｗｏｒｋ）を想定し、柔軟なアクセスパスが設定出来る環境であるとする。
デバイス装置＃３００、＃４００はチャネルアダプタからデバイス内の各領域Ａ〜Ｃがアクセスできる。ここではチャネルアダプタ＃３１０と＃３１１より領域Ａ、チャネルアダプ＃３１２より領域Ｂ、チャネルアダプタ＃４１０より領域Ｃを割り当てている。
【０００６】
以下に図２に示すシステムのＩ／Ｏ要求の流れを示す。
ホストサーバ＃１００はホストアプリケーション＃１０１が動作しており、領域Ａに対するＩ／Ｏ要求はマルチパスデバイス制御機構＃１０２に渡される。マルチパスデバイス制御機構＃１０２は、領域Ａをアクセスするためにアクセスパス＃２００か＃２０１のどちらかにＩ／Ｏを振り分ける。
振り分けられたＩ／Ｏは、ホストアダプタ＃１２０−アクセスパス＃２００−チャネルアダプタ＃３１０か、ホストアダプタ＃１２１−アクセスパス＃２０１−チャネルアダプタ＃３１１を経由して領域Ａに対して送られ処理され、同一経路を経由してホストアプリケーション＃１０１に応答を返す。
【０００７】
次に、上記マルチパスデバイス制御システムにおいて、前記問題点を解決する本発明の実施例について説明する。
（１）実施例１
上記図２に示すシステムにおいて、マルチパスデバイス制御機構＃１０２のアクセスパス設定は、通常ホストサーバ＃１００から、ユーザがマルチパスデバイス制御に対して設定する。
つまり、図２の例ではアクセスパス＃２００と＃２０１でマルチパスデバイスを構成するという設定をユーザがしなくてはならない。
しかし、ここで誤ってユーザがアクセスパス＃２００と＃２０２でマルチパスデバイス制御を構成してしまうと、２つのパスで別の領域Ａ，Ｂをアクセスしてしまい、関係のない領域Ｂを破壊してしまうこととなる。
この誤った設定をプロテクトするため、本実施例では、チャネルアダプタにデバイス装置＃３００の装置名＃３３０、シリアル番号情報＃３４０とチャネルアダプタが接続された領域情報を返す仕組みを搭載する。
【０００８】
ホストサーバ＃１００はチャネルアダプタからこの情報を読み取り、それらを組み合わせることによって世界で唯一の領域名を作成し識別子として利用する。
つまりホストサーバ＃１００はチャネルアダプタ＃３１０，＃３１１，＃３１２，＃４１０より、この情報を確保して、例えば以下の識別子を生成する。ここでは、デバイス装置＃３００の装置名がＦ６４９４、シリアル番号が０１２３、デバイス装置＃４００の装置名がＦ６４９５、シリアル番号が０１２４とする。
(a) チャネルアダプタ＃３１０より上記情報を確保し、領域Ａに対して以下の識別子とする。
Ｆ６４９４−０１２３−Ａ
(b) チャネルアダプタ＃３１１より上記情報を確保し、領域Ａに対して以下の識別子とする。
Ｆ６４９４−０１２３−Ａ
(c) チャネルアダプタ＃３１２より上記情報を確保し、領域Ｂに対して以下の識別子とする。
Ｆ６４９４−０１２３−Ｂ
(d) チャネルアダプタ＃４１０より上記情報を確保し、領域Ｃに対して以下の識別子とする。
Ｆ６４９５−０１２４−Ｃ
【０００９】
マルチパスデバイス制御機構＃１０２に、同一識別子が作成できないアクセスパスの指定は拒否する仕組みを組み込むことにより、誤ったマルチパスデバイス構成を設定することを防ぐことが可能となる。
つまり、この例においては、チャネルアダプタ＃３１０、＃３１１は同一識別子なのでアクセスパスの設定を受け付けるが、チャネルアダプタ＃３１２、＃４１０は識別子が異なるのでアクセスパスの設定を受け付けない。
【００１０】
また、アクセスパスを一度設定してからホストサーバ＃１００の電源を切った後、保守を行った際に誤ってアクセスパス＃２０１を＃２０２につなぎかえてしまうと、上記と同様に領域Ｂは破壊される。
そこで、ホストサーバ＃１００の立ち上がり時に、マルチパスデバイス制御機構＃１０２がアクセスパス毎の識別子を上記のように計算しマルチパスデバイス制御を構成するアクセスパス正しいかどうかを確認する。
もし、識別子がアクセスパス毎異なる場合は、マルチパスデバイス制御機構＃１０２は、マルチパス処理を行わない。
【００１１】
さらに、アクセスパスを一度設定してからホストサーバ＃１００の電源をいれたままアクセスパス＃２０１を＃２０２につなぎかえてしまった場合も、上記と同様に領域Ｂは破壊される。
そこで、ホストサーバ＃１００のマルチパスデバイス制御機構＃１０２は定期的に、チャネルアダプタに対して各情報の要求を行い、上記と同様にアクセスパス毎の識別子を計算し、マルテパスデバイス制御を構成するアクセスパスが正しいかどうかを確認する。
もし、識別子がアクセスパス毎異なる場合は、マルチパスデバイス制御機構＃１０２は、マルチパス処理を中断する。
【００１２】
図３は上記マルチパスデバイス制御機構＃１０２における処理の概要を示すフローチャートである。
図３において、まず、ユーザによるマルチパスのアクセスパス設定コマンドが実行されアクセスパス設定が行われる。これにより、例えば、前記図２におけるアクセスパス＃２００、＃２０１が設定される。
マルチパスデバイス制御機構＃１０２はデバイス装置から、パス毎に、装置名、シリアル番号・領域を確保して識別子を作成する。例えば、前記例では、アクセスパス＃２００、＃２０１に対してそれぞれ識別子Ｆ６４９４−０１２３−Ａが、アクセスパス＃２０２に対してＦ６４９４−０１２３−Ｂが、アクセスパス＃２０３に対してＦ６４９５−０１２４−Ｃが、アクセスパス＃２０４に対してＦ６４９４−０１２３−Ｂが作成される。
領域に対するＩ／Ｏ要求があると、マルチパスデバイス制御機構＃１０２はコマンドのパスの識別子を比較する。そして識別子が不一致であれば、エラー終了し、また一致しているば正常終了し、マルチパス処理を実行する。
例えば、ユーザがアクセスパス＃２００と＃２０１でマルチパスを構成している場合には、識別子Ｆ６４９４−０１２３−Ａが一致するのでマルチパス処理が実行されるが、誤って、アクセスパス＃２００と＃２０２でマルチパスを構成している場合には、それぞれの識別子がＦ６４９４−０１２３−ＡとＦ６４９４−０１２３−Ｂであるので、不一致となり、マルチパスデバイス制御機構＃１０２はマルチパス処理を中断する。
また、電源オン時および定期的に、マルチパスデバイス制御機構＃１０２はデバイス装置から、パス毎に、装置名、シリアル番号・領域を確保して識別子を作成し、上記のようにＩ／Ｏ要求があったとき、コマンドのパスの識別子を比較する。これにより、保守時の接続誤りにも対応することができる。
【００１３】
（２）実施例２
図４に示す構成のシステムにおいて、次のようなマルチパス構成を設定した場合を想定する。
・ホストサーバ＃１００のマルチパスデバイス制御機構（領域Ａ用）＃１０２に、デバイス装置＃３００の領域Ａに対してアクセスパス＃２００、＃２０１からのマルチパス構成を設定する。
・ホストサーバ＃１００のマルチパスデバイス制御機構（領域Ｄ用）＃１０３に、デバイス装置＃３００の領域Ｄに対してもアクセスパス＃２００、＃２０１からのマルチパス構成を設定する。
この状態で領域Ａに対する処理を行っている際に、チャネルアグプタ＃３１０でエラーが発生した場合マルチパスデバイス制御機構＃１０２のフェールオーバ機能が働き、アクセスパス＃２００は停止されて、アクセスパス＃２０１経由でチャネルアダプタ＃３１１を使用して領域Ａに対してコマンドが発行される。
しかし、この際に領域Ｄに対する、マルチパスデバイス制御機構＃１０３のアクセスパスの設定はそのままで、ホストアプリケーション＃１０１からコマンドが領域Ｄに対して発行された際は、マルチパスデバイス制御機構（領域Ｄ用）＃１０３はアクセスパス＃２００経由でチャネルアダプタ＃３１０を使用しようとする。
しかし、チャネルアダプタ＃３１０はエラーとなっているため使用できない。この時、チャネルアダプ＃３１０に対して無駄なエラー処理時間が発生する。特に前記したようにファィバチャネルはエラー検出まで時間が掛かるため、この無駄なエラー処理時間は特に問題となる。
この問題を解決するため、本実施例においては、エラーとなったチャネルアダプタをホストサーバで認識できるようにする。
そのため、チャネルアダプタにデバイス装置の装置名＃３３０、シリアル番号情報＃３４０と装置内で唯一のアダプタ番号情報を返す仕組みを搭載する。
【００１４】
ホストサーバはチャネルアダプタからこの情報を読み取り組み合わせることよって世界で唯一のチャネル場所識別子を作成し利用できることとなる。
つまりホストサーバ＃１００はチャネルアダプタよりこの情報を確保して、例えば以下の識別子を生成する。ここでは、デバイス装置＃３００の装置名がＦ６４９４、シリアル番号が０１２３、デバイス装置＃４００の装置名がＦ６４９５、シリアル番号が０１２４とする。
(a) チャネルアダプタ＃３１０（アダプタ番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−１
(b) チャネルアダプタ＃３１１（アダプタ番号２）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−２
(c) チャネルアダプタ＃３１２（アダプタ番号３）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−３
(d) チャネルアダプタ＃４１０（アダプタ番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９５−０１２４−４
【００１５】
全てのマルチパスデバイス制御がパスエラーを検出する前に予めパス毎にこの情報を確保しておく。
マルチパスデバイス制御は、パスエラーを検出した際には、エラーパスに関連するチャネルアダプタの識別子をホスト内の他のマルチパスデバイス制御に通知する。
この例では、マルチパスデバイス制御機構＃１０２からマルチパスデバイス制御機構＃１０３に通知される。
このエラー識別子情報を受けたマルチパスデバイス制御機構＃１０３は、自分のパス設定内に同一識別と関連されているアクセスパスがないかをチェックし、あった場合そのアクセスパスの動作を停止させパスフェールオーバ動作を事前に実施する。これにより、マルチパスデバイス制御がアクセスパス＃２００に不用意にアクセスする事を防止することが可能となる。
【００１６】
上記説明は１台のホストサーバ内における処理であるが、この処理はホストサーバを超えて実現することもできる。
図４に示すように、ホストサーバ＃１００とホストサーバ＃５００がＬＡＮ＃６００により接続されている場合を想定する。
このような構成において、前記したようにデバイス装置＃３００の領域Ａに対してアクセスパス＃２００、＃２０１からのマルチパス構成が設定され、デバイス装置＃３００の領域Ｄに対してもアクセスパス＃２００、＃２０１からのマルチパス構成が設定されており、さらに、デバイス装置＃３００のチャネルアダプタ＃３１０は、ホストサーバ＃１００からだけでなく、ホストサーバ＃５００でも使用されている場合を想定する。
この場合、チャネルアダプタ＃３１０の障害は、ホストサーバ＃５００でも同等に検出される。従って、チャネルアダプタ＃３１０に障害が発生すると、それぞれのホストサーバ＃１００、＃５００によりエラー処理が行われ無駄なエラー処理時間が発生することとなる。
そこで、例えばチャネルアダプタ＃３００に障害が発生すると、マルチパスデバイス制御機構＃１０２から、前記したエラーチャネルアダプタ識別子情報（例えばＦ６４９４−０１２３−１）を、他のサーバ＃５００にも通知する。これにより、他ホストサーバ＃５００での不用意なエラー検出を防ぐことができ、リカバリ時間を短縮させることが可能となる。
他ホストサーバ＃５００で起動中のマルチパスデバイス制御機構＃５０２は、上記エラーチャネルアダプタの識別子を受け取ると、自分のパス設定内に同一識別と関連されているアクセスパスがないかをチェックし、あった場合そのアクセスパスの動作を停止させ、パスフェールオーバ機能を実施する。
【００１７】
（３）実施例３
上記実施例は、マルチパスデバイス制御がパスエラーを検出した場合の処理であるが、以下に説明する実施例では、デバイスの活性交換単位を考慮して、ホスト内で交換単位に関連するアクセスパスの停止を実現させる。
図５により本実施例について説明する。
図５において、デバイス装置＃３００のチャネルアダプタ＃３１０、＃３１１は同一パッケージになっている同一活性交換単位（以下交換単位１という）のチャネルアダプタであり、チャネルアダプタを交換する場合、チャネルアダプタ＃３１０、＃３１１は同時に交換される。同様にチャネルアダプタ＃３１２、＃３１３も同一活性交換単位（以下交換単位２という）のチャネルアダプタである。
また、ホストサーバ＃１００より、アクセスパス＃２００、＃２０１を経由して、デバイス装置＃３００の領域Ａをアクセスするようにマルチパスデバイス制御機構＃１０２が設定されている。
さらに、アクセスパス＃２０２、＃２０３を経由して、デバイス装置＃３００の領域Ｂをアクセスするようにマルチパスデバイス制御機構＃１５２が設定されている。上記アクセスパス＃２００、＃２０２は交換単位１のチャネルアダプタ＃３１０、＃３１１を使用しており、また、アクセスパス＃２０１、＃２０３は交換単位２のチャネルアダプタ＃３１２、＃３１３を使用している。
【００１８】
この環境で、チャネルアダプタ＃３１０で障害が発生した際には、マルチパスデバイス制御機構＃１５２配下のパスには影響はない。
しかし、チャネルアダプタ＃３１０の障害を取り除くため、チャネルアダプタ＃３１０を交換しようとした際に、チャネルアダプタ＃３１０がチャネルアダプタ＃３１１と同一パッケージとなっている為に、チャネルアダプタ＃３１１も影響を受けてしまう。
そこで、本実施例においては、チャネルアダプタ＃３１０を交換する際に＃３１１の処理を事前に停止させるようにする。
このため、チャネルアダプタにデバイス装置の装置名＃３３０、シリアル番号情報＃３４０と装置内で部品交換単位情報を返す仕組みを搭載する。
ホストサーバ＃１００はチャネルアダプタからこのこの情報を読み取り組み合わせることよって世界で唯一の部品交換単位識別子を作成し利用できることとなる。
【００１９】
つまりホストサーバ＃１００はチャネルアダプタよりこの情報を取得して、例えば以下の部品交換識別子を生成する。ここでは、デバイス装置＃３００の装置名がＦ６４９４、シリアル番号が０１２３、デバイス装置＃４００の装置名がＦ６４９５、シリアル番号が０１２４とする。
(a) チャネルアダプタ＃３１０（交換単位番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−１
(b) チャネルアダプタ＃３１１（交換単位番号１）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−１
(c) チャネルアダプタ＃３１２（交換単位番号２）より上記情報を確保し、以下の識別子とする。
Ｆ６４９４−０１２３−２
(d) チャネルアダプタ＃３１３（交換単位番号２）より上記情報を確保し、以下の識別子とする。
Ｆ６４９５−０１２３−２
【００２０】
図５において、ユーザからチャネルアダプタ＃３１０を交換するというコマンドをマルチパスデバイス制御機構＃１０２が受け付けた際に、チャネルアダプタ＃３１０に関連する部品交換識別子（上記例ではＦ６４９４−０１２３−１）を当該ホストの別マルチパスデバイス制御機構＃１５２に転送する。
マルチパスデバイス制御機構＃１５２はこの識別子を受け付けると、この部品交換識別子に関連するアクセスパス＃２０２を停止させ、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をホストアプリケーション＃１５１のＩ／Ｏ要求に影響を与えずに実行させる。
【００２１】
上記説明は１台のホストサーバ内における処理であるが、上記処理はホストを超えて実現することもできる。
次に、図６により、デバイスの活性交換単位を考慮して、ホストを超えたアクセスパスの停止を実現させる場合について説明する。
図６に示すように、ホストサーバ＃１００より、アクセスパス＃２００、＃２０１を経由して、デバイス装置＃３００の領域Ａをアクセスするようにマルチパスデバイス制御機構＃１０２が設定されている。また、ホストサーバ＃５００より、アクセスパス＃２０２、＃２０３を経由して、デバイス装置＃３００の領域Ｂをアクセスするようにマルチパスデバイス制御機構＃５０２が設定されている。なお、部品交換識別子は前記図５で説明したのと同じ識別子であるとする。
【００２２】
図６において、ユーザからチャネルアダプタ＃３１０を交換するというコマンドをマルチパスデバイス制御機構＃１０２が受け付けると、マルチパスデバイス制御機構＃１０２はチャネルアダプタ＃３１０に関連する部品交換識別子（Ｆ６４９４−０１２３−１）を他ホスト＃５００の別マルチパスデバイス制御機構＃５０２に転送する。
マルチパスデバイス制御機構＃５０２は、この識別子を受け付けると、この部品交換識別子に関連するアクセスパス＃２０２のアクセスを停止させる。これにより、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をホストアプリケーション＃５０１のＩ／Ｏ要求に影響を与えずに実行させることができる。
【００２３】
また、上記デバイスの活性交換単位を考慮して、ホスト内の関連するアクセスパスの再起動を実現することもできる。
前記図５において、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をする際には、マルチパスデバイス制御機構＃１０２および＃１５２からアクセスパス＃２００、＃２０２は停止される。
交換が正常終了した際に、ユーザはマルチパスデバイス制御機構＃１０２にアクセスパスの再起動コマンドを発行する。
マルチパスデバイス制御機構＃１０２はこれによりアクセスパス＃２００の再起動を行うが、これと同時に、当該アクセスパス＃２００に関連する交換単位識別子（Ｆ６４９４−０１２３−１）を当該ホスト内の他のマルチパスデバイス制御部＃１５２にパス復旧されたということで通知する。マルチパスデバイス制御部＃１５２は、上記交換識別子に関連するアクセスパスが停止していた場合は、これを再起動させるコマンドを自分自身に発行し、再起動を実現する。
【００２４】
上記と同様に、デバイスの活性交換単位を考慮してホストを超えたアクセスパスを再起動を実現させることができる。
前記図６において、デバイス装置＃３００のチャネルアダプタ＃３１０−＃３１１の交換をする際は、マルチパスデバイス制御機構＃１０２および＃１５２からアクセスパス＃２００、＃２０２は停止される。
交換を正常終了した際、ユーザはマルチパスデバイス制御機構＃１０２にパスの再起動コマンドを発行する。
マルチパスデバイス制御機構＃１０２はこれを受けて、アクセスパス＃２００の再起動を行うが、これと同時に、当該アクセスパス＃２００に関連する部品交換単位識別子（Ｆ６４９４−０１２３−１）を他のホスト＃５００内の他マルチパスデバイス制御機構＃１５２にパス復旧されたということで通知する。
マルチパスデバイス制御＃１５２は、上記部品交換識別子に関連するアクセスパスが停止していた場合は、これを再起動させるコマンドを自分自身に発行し、再起動を実現する。
これにより、ホストを超えた活性交換時のマルチパスデバイス制御へのコマンドの簡素化が実現でき、マルチパスデバイス制御に対しての誤操作とリカバリ時間の短縮を実現することができる。
【００２５】
図７は、本実施例の処理の概要を示すフローチャートである。
図７において、まず、ホストサーバはチャネルアダプタからデバイス装置の装置名、シリアル番号情報と装置内での部品交換単位情報を取得し、前記した部品交換識別子を生成する。
そして、障害が発生すると、マルチパスデバイス制御機構は、当該チャネルアダプタに関連する部品交換識別子を自ホストもしくは他ホストの別マルチパスデバイス制御機構に転送する。
他のマルチパスデバイス制御機構は、この識別子を受け付けると、この部品交換識別子に関連するアクセスパスのアクセスを停止させる。
ついで、再起動コマンドを発行されると、マルチパスデバイス制御機構は、当該チャネルアダプタに関連する部品交換識別子をパス復旧されたということで自ホストもしくは他ホストのマルチパスデバイス制御機構に転送し、アクセスパスを再開する。
【００２６】
上記実施例では、装置を特定する識別子としてシリアル番号を用いる場合について説明したが、ファイバチャネルを用いる場合には、シリアル番号の代りに、チャネルアダプタが所有するファイバチャネルのＷＷＮ（Ｗｏｒｌｄ ｗｉｄｅ
ｎａｍｅ）を利用することができる。
ファイバチャネルのＷＷＮは世界で唯一の値であるため、上記実施例の識別子として使用する上では問題がない。但し、このＷＷＮが使用できるのは、ファイバチャネル接続環境のみであるので、オールマイティとはいえないが、装置のシリアル番号を読み込めない装置などに使用できる。
また、上記第３の実施例の交換部品単位を特定する識別子として、ＷＷＮのノード名を使用することができる。ＷＷＮのノード名は世界唯一であり、かつ複数のポート名を図８に示すように同一ノード内にもてるために、交換部品を特定する識別子と利用できる。
なお、上記説明では、第１〜第３の実施例についてそれぞれ説明したが、これらを単独で用いてもよいし、また第１〜第３の実施例を組み合わせてもよい。
【００２７】
（付記１）上位装置と入出力装置とが複数の経路により接続されるマルチパス計算機システムであって、
該入出力装置は、
上位装置からアクセス可能な複数の領域と、
当該複数の領域のそれぞれに対応した領域情報と、
当該入出力装置を特定するための装置情報と、
前記複数の経路に接続され前記上位装置からのアクセスを前記領域情報に従い前記領域単位で許可又は禁止するチャネルアダプタと、を備え
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからアクセス可能な前記入出力装置の領域を示すアクセス経路情報と、
前記上位装置で動作しているソフトウエアからの前記入出力装置の特定領域へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、上位装置に対して前記装置情報と前記領域情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置は、更に、前記アクセス経路情報と前記識別情報とから前記複数の経路の正常性を判断する経路判断部を備えること
を特徴とするマルチパス計算機システム。
（付記２）複数のアクセス領域を有する入出力装置と複数の経路によって接続される装置であって、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからアクセス可能な前記入出力装置の領域を示すアクセス経路情報と、
前記装置で動作しているソフトウエアからの前記入出力装置の特定領域へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、
前記入出力装置から応答される該入出力装置の装置情報と領域情報とからなる識別情報と、前記アクセス経路情報とから前記複数の経路の正常性を判断する経路判断部と、
を備えることを特徴とする装置。
（付記３）上位装置と複数の経路により接続される入出力装置であって、上位装置からアクセス可能な複数の領域と、
当該複数の領域のそれぞれに対応した領域情報と、
当該入出力装置を特定するための装置情報と、
前記複数の経路に接続され前記上位装置からのアクセスを前記領域情報に従い前記領域単位で許可又は禁止するチャネルアダプタと、
上位装置に対して前記装置情報と前記領域情報とからなる識別情報を応答する識別情報応答部と、
を備えたことを特徴とする入出力装置。
（付記４）上位装置の立ち上がり時に、経路判断部は、前記複数の経路の正常性を判断し、
上記識別情報が経路毎異なる場合に、マルチパス設定を行わないようにした
ことを特徴とする付記１のマルチパス計算機システム。
（付記５）定期的に、経路判断部は、前記複数の経路の正常性を判断し、上記識別情報が経路毎異なる場合に、マルチパス設定を行わないようにした
ことを特徴とする付記１のマルチパス計算機システム。
（付記６）上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムであって、
該入出力装置は、入出力装置を特定するための装置情報と、
該装置内のチャネルアダプタ番号情報と、
前記複数の経路に接続される前記上位装置からのアクセスを禁止又は許可するチャネルアダプタと、を備え、
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからのアクセス経路情報と、
前記上位装置で動作しているソフトウェアからの前記入出力装置へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、前記上位装置に対して、前記装置情報とチャネルアダプタ番号情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置は、更に、エラーパスを検出した際、エラーパスに関連する上記識別情報を自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する手段を備える
ことを特徴とするマルチパス計算機システム。
（付記７）入出力装置と複数の経路によって接続される装置であって、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数の経路に接続され、前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタからのそれぞれからアクセス可能な前記入出力装置のチャネルアダプタを示すアクセス経路情報と、
前記装置で動作しているソフトウェアからの前記入出力装置のアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、
エラーパスを検出した際、該エラーパスに関連する、前記入出力装置から応答される該入出力装置の装置情報とチャネルアダプタ番号情報とからなる識別情報を、自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する手段と、
を備えることを特徴とする装置。
（付記８）上位装置と複数の経路により接続される入出力装置であって、
当該入出力装置を特定するための装置情報と、
該装置内のチャネルアダプタ番号情報と、
前記複数の経路に接続され前記上位装置からのアクセスを許可または禁止するチャネルアダプタと、
上位装置に対して前記装置情報と、前記チャネルアダプタ番号情報とからなる識別情報を応答する識別情報応答部とを備えた
ことを特徴とする入出力装置。
（付記９）上記入出力装置を特定するための情報として、チャネルアダプタが所有するファイバチャネルのワールド・ワイド・ネームを用いることを特徴とする付記１または付記６のマルチパス計算機システム。
（付記１０）上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムであって、
該入出力装置は、入出力装置を特定するための装置情報と、
該装置内における部品交換単位情報と、
前記複数の経路に接続される前記上位装置からのアクセスを禁止又は、許可するチャネルアダプタと、を備え、
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタのそれぞれからアクセス経路情報と、
前記上位装置で動作しているソフトウェアからの前記入出力装置へのアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、前記上位装置に対して、前記装置情報と前記部品交換単位情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置は、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に上記識別情報を通知する手段を備える
ことを特徴とするマルチパス計算機システム。
（付記１１）入出力装置と複数の経路によって接続される装置であって、前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記複数のホストアダプタからのそれぞれからアクセス可能な前記入出力装置のチャネルアダプタを示すアクセス経路情報と、
前記装置で動作しているソフトウェアからの前記入出力装置のアクセスに際して、前記アクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、
チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に、前記入出力装置から応答される該入出力装置の装置情報と部品交換単位情報とからなる識別情報を通知する手段とを備えることを特徴とする装置。
（付記１２）上位装置と複数の経路により接続される入出力装置であって、
当該入出力装置を特定するための装置情報と、
該装置内における部品交換単位情報と、
前記複数の経路に接続され前記上位装置からのアクセスを許可または禁止するチャネルアダプタと、
上位装置に対して前記装置情報と、前記部品交換単位情報とからなる識別情報を応答する識別情報応答部とを備えた
ことを特徴とする入出力装置。
（付記１３）チャネルアダプタを交換し、再起動するという要求があったとき、そのチャネルアダプタを使用しているパスの動作を再起動させ、また、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に上記識別情報を通知して、同一交換単位識別子を持つチャネルアダプタを使用しているパスに関しての動作を再起動させる
ことを特徴とする付記１０のマルチパス計算機システム。
（付記１４）上記部品交換単位を特定する識別情報として、チャネルアダプタが所有するファイバチャネルのワールド・ワイド・ネームのノード名を使用する
ことを特徴とする付記１０のマルチパス計算機システム。
（付記１５）上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムの上位装置における処理プログラムを記録した記録媒体であって、上記処理プログラムは、入出力装置内のチャネルアダプタから、該入出力装置の装置情報と、アクセス可能な複数の領域のそれぞれに対応した領域情報、該装置内のチャネルアダプタ番号情報、および／または、該装置内における部品交換単位情報を取得し、
前記アクセス経路情報と、上記装置情報と領域情報からなる識別情報から前記複数の経路の正常性を判断し、
エラーパスを検出した際、エラーパスに関連する上記装置情報とチャネルアダプタ番号情報とからなる識別情報をを自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知し、
チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に、上記装置情報と部品交換単位情報とからなる識別情報を通知する
ことを特徴とするマルチパス計算機システムにおける処理プログラムを記録した記録媒体。
【００２８】
【発明の効果】
以上説明したように、本発明においては、マルチパス制御部がチャネルアダプタから、チャネルアダプタが接続された領域情報、アダプタを特定する情報、および／または、部品交換単位を表す情報を取得して、入出力装置側のパス情報を正確に認識するようにしているので、誤ったユーザ設定を防ぐことができ、また、フェールオーバ時のリカバリ時間を短縮することができ、さらに、活性交換時の作業時間の短縮を実現することが可能となる。
【図面の簡単な説明】
【図１】本発明の概要を説明する図である。
【図２】本発明の実施例のマルチパスデバイス制御システムの構成を示す図である。
【図３】本発明の第１の実施例の処理の概要を示すフローチャートである。
【図４】本発明の第２の実施例を説明する図である。
【図５】本発明の第３の実施例を説明する図（１）である。
【図６】本発明の第３の実施例を説明する図（２）である。
【図７】本発明の第３の実施例の処理の概要を示すフローチャートである。
【図８】部品交換単位とＷＷＮのノード名との関係を説明する図である。
【符号の説明】
１ 上位装置
１ｂ マルチパス制御部
１ｃ ホストアダプタ
２ 通信インタフェース
３ 入出力装置
３ａ チャネルアダプタ
＃１００，＃５００ ホストサーバ
＃１０２〜＃１０３ マルチパスデバイス制御機構
＃１５２，＃５０２ マルチパスデバイス制御機構
＃１２０〜＃１２２ ホストアダプタ
＃１７０，＃１７１ ホストアダプタ
＃５２０，＃５２１ ホストアダプタ
＃３００，＃４００ デバイス装置
＃３１０〜＃３１３ チャネルアダプタ
＃４１０ チャネルアダプタ
＃２００〜＃２０４ アクセスパス
Claims (5)
- 上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムであって、
該入出力装置は、
前記複数の経路に接続される前記上位装置からのアクセスを禁止又は許可するチャネルアダプタとを備え、入出力装置を特定するための装置情報と、該装置内で唯一のチャネルアダプタ番号情報とを保持し、
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記上位装置で動作しているソフトウェアからの前記入出力装置へのアクセスに際して、前記複数のホストアダプタのそれぞれからのアクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、前記上位装置に対して、前記装置情報とチャネルアダプタ番号情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置のマルチパス制御部は、エラーパスを検出した際、該エラーパスに関連する、前記入出力装置から応答される識別情報を、自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する手段と、
他のマルチパス制御部から、上記エラーパスに関連する識別情報の通知を受け取ると、自分の管理しているパスの中で関連しているアクセスパスがないかをチェックし、あった場合、そのアクセスパスの動作を停止させフェールオーバ機能を実施する手段と、を備える
ことを特徴とするマルチパス計算機システム。 - 入出力装置と複数の経路によって接続される装置であって、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記装置で動作しているソフトウェアからの前記入出力装置のアクセスに際して、前記複数のホストアダプタからのそれぞれからアクセス可能な前記入出力装置のチャネルアダプタを示すアクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部とを備え、
上記入出力装置は、入出力装置を特定するための装置情報と、該装置内で唯一のチャネルアダプタ番号情報とからなる識別情報とを保持し、
上記マルチパス制御部は、エラーパスを検出した際、該エラーパスに関連する、前記入出力装置から応答される該入出力装置の装置情報とチャネルアダプタ番号情報とからなる識別情報を、該マルチパス制御部から自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知する手段と、
他のマルチパス制御部から、上記識別情報の通知を受け取ると、自分の管理しているパスの中で関連しているアクセスパスがないかをチェックし、あった場合、そのアクセスパスの動作を停止させフェールオーバ機能を実施する手段と、を備える
ことを特徴とする装置。 - 上位装置と入出力装置とが複数の経路により接続されるマルチパス制御システムであって、
該入出力装置は、
前記複数の経路に接続される前記上位装置からのアクセスを禁止又は、許可するチャネルアダプタとを備え、入出力装置を特定するための装置情報と、該装置内における部品交換単位情報とを保持し、
前記上位装置は、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記上位装置で動作しているソフトウェアからの前記入出力装置へのアクセスに際して、前記複数のホストアダプタのそれぞれからのアクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部と、を備え、
前記入出力装置のチャネルアダプタは、更に、前記上位装置に対して、前記装置情報と前記部品交換単位情報とからなる識別情報を応答する識別情報応答部を備え、
前記上位装置のマルチパス制御部は、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に、交換を要求されたチャネルアダプタを示す上記部品交換単位情報からなる識別情報を通知する手段と、
上記識別情報の通知を受け取ると、自分の管理しているパスの中で関連しているアクセスパスがないかをチェックし、あった場合、そのアクセスパスの動作を停止させ、上記チャネルアダプタの交換を、ホストアプリケーションのＩ／Ｏ要求に影響を与えずに実行される手段と、
交換が終了し、アクセスパスの再起動コマンドが発行されたとき、停止していたアクセスパスの再起動を行なうと同時に、当該アクセスパスに関連する上記識別情報を自装置内の他のマルチパス制御部にパスが復旧したということで通知し、
また、他のマルチパス制御部から、パスが復旧したということで上記識別情報を通知されたとき、該識別情報に関連するアクセスパスが停止していた場合に、このアクセスパスを再起動させる手段を備える
ことを特徴とするマルチパス計算機システム。 - 入出力装置と複数の経路によって接続される装置であって、
前記複数の経路に接続され前記入出力装置へのアクセスを行う複数のホストアダプタと、
前記装置で動作しているソフトウェアからの前記入出力装置のアクセスに際して、前記複数のホストアダプタからのそれぞれからアクセス可能な前記入出力装置のチャネルアダプタを示すアクセス経路情報に従って特定のホストアダプタを選択するマルチパス制御部とを備え、
上記マルチパス制御部は、チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に該マルチパス制御部から自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に、交換を要求されたチャネルアダプタを示す上記部品交換単位情報からなる識別情報を通知する手段と、
上記識別情報の通知を受け取ると、自分の管理しているパスの中で関連しているアクセスパスがないかをチェックし、あった場合、そのアクセスパスの動作を停止させ、上記チャネルアダプタの交換を、ホストアプリケーションのＩ／Ｏ要求に影響を与えずに実行される手段と、
交換が終了し、アクセスパスの再起動コマンドが発行されたとき、停止していたアクセスパスの再起動を行なうと同時に、当該アクセスパスに関連する上記識別情報を自装置内の他のマルチパス制御部にパスが復旧したということで通知し、
また、他のマルチパス制御部から、パスが復旧したということで上記識別情報を通知されたとき、該識別情報に関連するアクセスパスが停止していた場合に、このアクセスパスを再起動させる手段を備える
ことを特徴とする装置。 - 上位装置と入出力装置とが複数の経路により接続される、マルチパス制御システムの上位装置において実行される処理プログラムを記録した記録媒体であって、
上記処理プログラムは、入出力装置内のチャネルアダプタから、該入出力装置の装置情報と、該装置内のチャネルアダプタ番号情報、および／または、該装置内における部品交換単位情報を取得し、
アクセス経路情報と、上記識別情報から前記複数の経路の正常性を判断し、
エラーパスを検出した際、該エラーパスに関連する、前記入出力装置から応答される該入出力装置の装置情報とチャネルアダプタ番号情報とからなる識別情報を、自装置内の他のマルチパス制御部もしくは他装置のマルチパス制御部に通知し、
上記識別情報の通知を受け取ると、自分の管理しているパスの中で関連しているアクセスパスがないかをチェックし、あった場合、そのアクセスパスの動作を停止させフェールオーバ機能を実施し、
チャネルアダプタを交換する要求があったとき、そのチャネルアダプタを使用しているパスの動作を停止させ、また、同時に自装置内の他のマルチパス制御部および／または他装置のマルチパス制御部に、交換を要求されたチャネルアダプタを示す上記部品交換単位情報からなる識別情報を通知し、
上記識別情報の通知を受け取ると、自分の管理しているパスの中で関連しているアクセスパスがないかをチェックし、あった場合、そのアクセスパスの動作を停止させ、上記チャネルアダプタの交換を、ホストアプリケーションのＩ／Ｏ要求に影響を与えずに実行させ、
交換が終了し、アクセスパスの再起動コマンドが発行されたとき、停止していたアクセスパスの再起動を行なうと同時に、当該アクセスパスに関連する上記識別情報を自装置内の他のマルチパス制御部にパスが復旧したということで通知し、
また、他のマルチパス制御部から、パスが復旧したということで上記識別情報を通知されたとき、該識別情報に関連するアクセスパスが停止していた場合に、このアクセスパスを再起動させる
ことを特徴とするマルチパス計算機システムの上位装置で実行される処理プログラムを記録した記録媒体。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000248157A JP4039794B2 (ja) | 2000-08-18 | 2000-08-18 | マルチパス計算機システム |
| US09/799,945 US6725295B2 (en) | 2000-08-18 | 2001-03-06 | Multi-path computer system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2000248157A JP4039794B2 (ja) | 2000-08-18 | 2000-08-18 | マルチパス計算機システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002063126A JP2002063126A (ja) | 2002-02-28 |
| JP4039794B2 true JP4039794B2 (ja) | 2008-01-30 |
Family
ID=18738110
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2000248157A Expired - Fee Related JP4039794B2 (ja) | 2000-08-18 | 2000-08-18 | マルチパス計算機システム |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US6725295B2 (ja) |
| JP (1) | JP4039794B2 (ja) |
Families Citing this family (128)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7152178B1 (en) * | 2001-03-22 | 2006-12-19 | Emc Corporation | Method and system for detecting path failure and performing input/output recovery in a multi-path input/output system |
| US6983397B2 (en) * | 2001-11-29 | 2006-01-03 | International Business Machines Corporation | Method, system, and program for error handling in a dual adaptor system where one adaptor is a master |
| DE10231424B4 (de) * | 2002-07-11 | 2006-11-09 | Pro Design Electronic & Cad-Layout Gmbh | Vorrichtung und Verfahren zur Datenkommunikation |
| CN100520724C (zh) * | 2002-08-02 | 2009-07-29 | 草谷(U.S)公司 | 用于实现故障切换恢复的网络系统及方法 |
| US7421710B2 (en) * | 2003-10-08 | 2008-09-02 | Lsi Corporation | System and method of creating virtual data paths using a multiple-path driver |
| US9264384B1 (en) | 2004-07-22 | 2016-02-16 | Oracle International Corporation | Resource virtualization mechanism including virtual host bus adapters |
| US7676558B2 (en) * | 2004-11-12 | 2010-03-09 | International Business Machines Corporation | Configuring shared devices over a fabric |
| US7487403B2 (en) * | 2004-11-12 | 2009-02-03 | International Business Machines Corporation | Method for handling a device failure |
| US7568121B2 (en) * | 2004-11-16 | 2009-07-28 | International Business Machines Corporation | Recovery from failure in data storage systems |
| JP2006195703A (ja) * | 2005-01-13 | 2006-07-27 | Hitachi Ltd | ディスクレス計算機の運用管理システム |
| JP4620483B2 (ja) * | 2005-02-07 | 2011-01-26 | 富士通株式会社 | コンピュータシステム，コンピュータ，ｉｏ拡張装置およびｉｏ拡張装置接続認識方法 |
| US9813283B2 (en) | 2005-08-09 | 2017-11-07 | Oracle International Corporation | Efficient data transfer between servers and remote peripherals |
| US20070174849A1 (en) * | 2006-01-12 | 2007-07-26 | Cheung Yan M | Non-disruptive multipath device driver update system and method |
| JP4414399B2 (ja) * | 2006-01-30 | 2010-02-10 | 富士通株式会社 | ディスク制御装置 |
| JP5068023B2 (ja) * | 2006-03-29 | 2012-11-07 | 株式会社日立製作所 | 計算機システム及び論理パス切替方法 |
| US7610429B2 (en) * | 2007-01-30 | 2009-10-27 | Hewlett-Packard Development Company, L.P. | Method and system for determining device criticality in a computer configuration |
| WO2008114360A1 (ja) * | 2007-03-16 | 2008-09-25 | Fujitsu Limited | ストレージシステム、ストレージ装置、ファームウェアの活性交換方法 |
| JP5096799B2 (ja) * | 2007-05-29 | 2012-12-12 | 株式会社野村総合研究所 | クラスタシステム、計算機、および障害対処方法 |
| US7788530B2 (en) * | 2007-06-27 | 2010-08-31 | International Business Machines Corporation | Storage server configuration despite an out-of-service storage adapter |
| US8204980B1 (en) * | 2007-06-28 | 2012-06-19 | Emc Corporation | Storage array network path impact analysis server for path selection in a host-based I/O multi-path system |
| JP4635032B2 (ja) * | 2007-08-07 | 2011-02-16 | 株式会社東芝 | 記憶制御装置の制御プログラムの更新方法 |
| JP4483947B2 (ja) * | 2008-01-17 | 2010-06-16 | 日本電気株式会社 | 入出力制御装置 |
| JP2009211544A (ja) * | 2008-03-05 | 2009-09-17 | Toshiba Corp | 計算機システム |
| JP4482044B2 (ja) | 2008-03-18 | 2010-06-16 | 株式会社東芝 | 情報処理装置およびデバイスコントローラの駆動制御方法 |
| US8108732B2 (en) * | 2008-06-18 | 2012-01-31 | International Business Machines Corporation | Apparatus and method to minimize performance degradation during communication path failure in a data processing system |
| US8055736B2 (en) * | 2008-11-03 | 2011-11-08 | International Business Machines Corporation | Maintaining storage area network (‘SAN’) access rights during migration of operating systems |
| US8041987B2 (en) * | 2008-11-10 | 2011-10-18 | International Business Machines Corporation | Dynamic physical and virtual multipath I/O |
| US9973446B2 (en) | 2009-08-20 | 2018-05-15 | Oracle International Corporation | Remote shared server peripherals over an Ethernet network for resource virtualization |
| US9331963B2 (en) | 2010-09-24 | 2016-05-03 | Oracle International Corporation | Wireless host I/O using virtualized I/O controllers |
| EP2725496A1 (en) * | 2011-06-21 | 2014-04-30 | Fujitsu Limited | Information processing device, virtual machine control method and program |
| JPWO2012176278A1 (ja) * | 2011-06-21 | 2015-02-23 | 富士通株式会社 | 情報処理装置、仮想マシン制御方法およびプログラム |
| JP5490067B2 (ja) * | 2011-08-16 | 2014-05-14 | 株式会社三菱東京Ｕｆｊ銀行 | 障害管理装置及びプログラム |
| JP5425146B2 (ja) * | 2011-08-16 | 2014-02-26 | 株式会社三菱東京Ｕｆｊ銀行 | 障害管理装置及びプログラム |
| KR101254911B1 (ko) | 2012-01-31 | 2013-04-18 | 서울대학교산학협력단 | 다중 경로를 통해 데이터 입출력을 수행하기 위한 방법, 시스템 및 컴퓨터 판독 가능 기록 매체 |
| WO2013128490A1 (en) * | 2012-03-01 | 2013-09-06 | Hitachi, Ltd. | Method for reusing resource and storage sub-system using the same |
| JP5928581B2 (ja) * | 2012-05-08 | 2016-06-01 | 富士通株式会社 | ネットワークシステム，保守作業管理方法及びプログラム |
| US9083550B2 (en) | 2012-10-29 | 2015-07-14 | Oracle International Corporation | Network virtualization over infiniband |
| GB2536515A (en) * | 2013-11-28 | 2016-09-21 | Hitachi Ltd | Computer system, and a computer system control method |
| US9258242B1 (en) | 2013-12-19 | 2016-02-09 | Emc Corporation | Path selection using a service level objective |
| RU2013156784A (ru) | 2013-12-20 | 2015-06-27 | ИЭмСи КОРПОРЕЙШН | Способ и устройство выбора маршрута чтения и записи данных |
| JP5921734B2 (ja) * | 2015-02-16 | 2016-05-24 | 株式会社日立製作所 | ストレージシステム、ストレージシステム管理方法、及び計算機システム |
| US10652206B1 (en) | 2017-10-27 | 2020-05-12 | EMC IP Holding Company LLC | Storage system with network-wide configurable device names |
| US10757189B2 (en) | 2018-04-30 | 2020-08-25 | EMC IP Holding Company LLC | Service level objection based input-output selection utilizing multi-path layer of host device |
| US11050660B2 (en) | 2018-09-28 | 2021-06-29 | EMC IP Holding Company LLC | Host device with multi-path layer implementing path selection based at least in part on fabric identifiers |
| US11044313B2 (en) | 2018-10-09 | 2021-06-22 | EMC IP Holding Company LLC | Categorizing host IO load pattern and communicating categorization to storage system |
| US10754572B2 (en) | 2018-10-09 | 2020-08-25 | EMC IP Holding Company LLC | Migrating control of a multi-path logical device from a current MPIO driver to a target MPIO driver |
| US10880217B2 (en) | 2018-12-24 | 2020-12-29 | EMC IP Holding Company LLC | Host device with multi-path layer configured for detection and resolution of oversubscription conditions |
| US10754559B1 (en) | 2019-03-08 | 2020-08-25 | EMC IP Holding Company LLC | Active-active storage clustering with clock synchronization |
| US11277335B2 (en) | 2019-12-26 | 2022-03-15 | EMC IP Holding Company LLC | Host device with path selection modification responsive to mismatch in initiator-target negotiated rates |
| US11099755B2 (en) | 2020-01-06 | 2021-08-24 | EMC IP Holding Company LLC | Multipath device pseudo name to logical volume mapping for host devices |
| US11231861B2 (en) | 2020-01-15 | 2022-01-25 | EMC IP Holding Company LLC | Host device with active-active storage aware path selection |
| US11461026B2 (en) | 2020-01-21 | 2022-10-04 | EMC IP Holding Company LLC | Non-disruptive update of host multipath device dependency |
| US11520671B2 (en) | 2020-01-29 | 2022-12-06 | EMC IP Holding Company LLC | Fast multipath failover |
| US11175840B2 (en) | 2020-01-30 | 2021-11-16 | EMC IP Holding Company LLC | Host-based transfer of input-output operations from kernel space block device to user space block device |
| US11050825B1 (en) | 2020-01-30 | 2021-06-29 | EMC IP Holding Company LLC | Storage system port usage information sharing between host devices |
| US11093144B1 (en) | 2020-02-18 | 2021-08-17 | EMC IP Holding Company LLC | Non-disruptive transformation of a logical storage device from a first access protocol to a second access protocol |
| US11449257B2 (en) | 2020-02-21 | 2022-09-20 | EMC IP Holding Company LLC | Host device with efficient automated seamless migration of logical storage devices across multiple access protocols |
| US11204699B2 (en) | 2020-03-05 | 2021-12-21 | EMC IP Holding Company LLC | Storage system port maintenance information sharing with host device |
| US11397589B2 (en) | 2020-03-06 | 2022-07-26 | EMC IP Holding Company LLC | Snapshot transmission from storage array to cloud using multi-path input-output |
| US11042327B1 (en) | 2020-03-10 | 2021-06-22 | EMC IP Holding Company LLC | IO operation cloning using change information sharing with a storage system |
| US11265261B2 (en) | 2020-03-18 | 2022-03-01 | EMC IP Holding Company LLC | Access path management based on path condition |
| US11368399B2 (en) | 2020-03-27 | 2022-06-21 | EMC IP Holding Company LLC | Congestion aware multipathing based on network congestion notifications |
| US11080215B1 (en) | 2020-03-31 | 2021-08-03 | EMC IP Holding Company LLC | Host device providing automated prediction of change intervals to reduce adverse impacts on applications |
| US11169941B2 (en) | 2020-04-09 | 2021-11-09 | EMC IP Holding Company LLC | Host device with automated connectivity provisioning |
| US11366756B2 (en) | 2020-04-13 | 2022-06-21 | EMC IP Holding Company LLC | Local cached data coherency in host devices using remote direct memory access |
| US11561699B2 (en) | 2020-04-24 | 2023-01-24 | EMC IP Holding Company LLC | Input-output path selection using switch topology information |
| US11216200B2 (en) | 2020-05-06 | 2022-01-04 | EMC IP Holding Company LLC | Partition utilization awareness of logical units on storage arrays used for booting |
| US11099754B1 (en) | 2020-05-14 | 2021-08-24 | EMC IP Holding Company LLC | Storage array with dynamic cache memory configuration provisioning based on prediction of input-output operations |
| US11175828B1 (en) | 2020-05-14 | 2021-11-16 | EMC IP Holding Company LLC | Mitigating IO processing performance impacts in automated seamless migration |
| US11012512B1 (en) | 2020-05-20 | 2021-05-18 | EMC IP Holding Company LLC | Host device with automated write throttling responsive to storage system write pressure condition |
| US11023134B1 (en) | 2020-05-22 | 2021-06-01 | EMC IP Holding Company LLC | Addition of data services to an operating system running a native multi-path input-output architecture |
| US11151071B1 (en) | 2020-05-27 | 2021-10-19 | EMC IP Holding Company LLC | Host device with multi-path layer distribution of input-output operations across storage caches |
| US11226851B1 (en) | 2020-07-10 | 2022-01-18 | EMC IP Holding Company LLC | Execution of multipath operation triggered by container application |
| US11256446B1 (en) | 2020-08-03 | 2022-02-22 | EMC IP Holding Company LLC | Host bus adaptor (HBA) virtualization aware multi-pathing failover policy |
| US11157432B1 (en) * | 2020-08-28 | 2021-10-26 | EMC IP Holding Company LLC | Configuration of block devices based on provisioning of logical volumes in a storage system |
| US11916938B2 (en) | 2020-08-28 | 2024-02-27 | EMC IP Holding Company LLC | Anomaly detection and remediation utilizing analysis of storage area network access patterns |
| US11392459B2 (en) | 2020-09-14 | 2022-07-19 | EMC IP Holding Company LLC | Virtualization server aware multi-pathing failover policy |
| US11320994B2 (en) | 2020-09-18 | 2022-05-03 | EMC IP Holding Company LLC | Dynamic configuration change control in a storage system using multi-path layer notifications |
| US11397540B2 (en) | 2020-10-12 | 2022-07-26 | EMC IP Holding Company LLC | Write pressure reduction for remote replication |
| US11032373B1 (en) | 2020-10-12 | 2021-06-08 | EMC IP Holding Company LLC | Host-based bandwidth control for virtual initiators |
| US11630581B2 (en) | 2020-11-04 | 2023-04-18 | EMC IP Holding Company LLC | Host bus adaptor (HBA) virtualization awareness for effective input-output load balancing |
| US11204777B1 (en) | 2020-11-30 | 2021-12-21 | EMC IP Holding Company LLC | Boot from SAN operation support on multi-pathing devices |
| US11397539B2 (en) | 2020-11-30 | 2022-07-26 | EMC IP Holding Company LLC | Distributed backup using local access |
| US11543971B2 (en) | 2020-11-30 | 2023-01-03 | EMC IP Holding Company LLC | Array driven fabric performance notifications for multi-pathing devices |
| US11385824B2 (en) | 2020-11-30 | 2022-07-12 | EMC IP Holding Company LLC | Automated seamless migration across access protocols for a logical storage device |
| US11620240B2 (en) | 2020-12-07 | 2023-04-04 | EMC IP Holding Company LLC | Performance-driven access protocol switching for a logical storage device |
| US11409460B2 (en) | 2020-12-08 | 2022-08-09 | EMC IP Holding Company LLC | Performance-driven movement of applications between containers utilizing multiple data transmission paths with associated different access protocols |
| US11455116B2 (en) | 2020-12-16 | 2022-09-27 | EMC IP Holding Company LLC | Reservation handling in conjunction with switching between storage access protocols |
| US11651066B2 (en) | 2021-01-07 | 2023-05-16 | EMC IP Holding Company LLC | Secure token-based communications between a host device and a storage system |
| US11308004B1 (en) | 2021-01-18 | 2022-04-19 | EMC IP Holding Company LLC | Multi-path layer configured for detection and mitigation of slow drain issues in a storage area network |
| US11449440B2 (en) | 2021-01-19 | 2022-09-20 | EMC IP Holding Company LLC | Data copy offload command support across multiple storage access protocols |
| US11494091B2 (en) | 2021-01-19 | 2022-11-08 | EMC IP Holding Company LLC | Using checksums for mining storage device access data |
| US11467765B2 (en) | 2021-01-20 | 2022-10-11 | EMC IP Holding Company LLC | Detection and mitigation of slow drain issues using response times and storage-side latency view |
| US11386023B1 (en) | 2021-01-21 | 2022-07-12 | EMC IP Holding Company LLC | Retrieval of portions of storage device access data indicating access state changes |
| US11640245B2 (en) | 2021-02-17 | 2023-05-02 | EMC IP Holding Company LLC | Logical storage device access in an encrypted storage environment |
| US11755222B2 (en) | 2021-02-26 | 2023-09-12 | EMC IP Holding Company LLC | File based encryption for multi-pathing devices |
| US11797312B2 (en) | 2021-02-26 | 2023-10-24 | EMC IP Holding Company LLC | Synchronization of multi-pathing settings across clustered nodes |
| US11928365B2 (en) | 2021-03-09 | 2024-03-12 | EMC IP Holding Company LLC | Logical storage device access using datastore-level keys in an encrypted storage environment |
| US11294782B1 (en) | 2021-03-22 | 2022-04-05 | EMC IP Holding Company LLC | Failover affinity rule modification based on node health information |
| US11782611B2 (en) | 2021-04-13 | 2023-10-10 | EMC IP Holding Company LLC | Logical storage device access using device-specific keys in an encrypted storage environment |
| US11422718B1 (en) | 2021-05-03 | 2022-08-23 | EMC IP Holding Company LLC | Multi-path layer configured to provide access authorization for software code of multi-path input-output drivers |
| US11550511B2 (en) | 2021-05-21 | 2023-01-10 | EMC IP Holding Company LLC | Write pressure throttling based on service level objectives |
| US11822706B2 (en) | 2021-05-26 | 2023-11-21 | EMC IP Holding Company LLC | Logical storage device access using device-specific keys in an encrypted storage environment |
| US11625232B2 (en) | 2021-06-07 | 2023-04-11 | EMC IP Holding Company LLC | Software upgrade management for host devices in a data center |
| US11526283B1 (en) | 2021-06-08 | 2022-12-13 | EMC IP Holding Company LLC | Logical storage device access using per-VM keys in an encrypted storage environment |
| US11762588B2 (en) | 2021-06-11 | 2023-09-19 | EMC IP Holding Company LLC | Multi-path layer configured to access storage-side performance metrics for load balancing policy control |
| US11954344B2 (en) | 2021-06-16 | 2024-04-09 | EMC IP Holding Company LLC | Host device comprising layered software architecture with automated tiering of logical storage devices |
| US11750457B2 (en) | 2021-07-28 | 2023-09-05 | Dell Products L.P. | Automated zoning set selection triggered by switch fabric notifications |
| US11625308B2 (en) | 2021-09-14 | 2023-04-11 | Dell Products L.P. | Management of active-active configuration using multi-pathing software |
| US11586356B1 (en) | 2021-09-27 | 2023-02-21 | Dell Products L.P. | Multi-path layer configured for detection and mitigation of link performance issues in a storage area network |
| US11656987B2 (en) | 2021-10-18 | 2023-05-23 | Dell Products L.P. | Dynamic chunk size adjustment for cache-aware load balancing |
| US11418594B1 (en) | 2021-10-20 | 2022-08-16 | Dell Products L.P. | Multi-path layer configured to provide link availability information to storage system for load rebalancing |
| US12001595B2 (en) | 2021-12-03 | 2024-06-04 | Dell Products L.P. | End-to-end encryption of logical storage devices in a Linux native multi-pathing environment |
| US11567669B1 (en) | 2021-12-09 | 2023-01-31 | Dell Products L.P. | Dynamic latency management of active-active configurations using multi-pathing software |
| US12045480B2 (en) | 2021-12-14 | 2024-07-23 | Dell Products L.P. | Non-disruptive switching of multi-pathing software |
| US12001679B2 (en) | 2022-03-31 | 2024-06-04 | Dell Products L.P. | Storage system configured to collaborate with host device to provide fine-grained throttling of input-output operations |
| US11620054B1 (en) | 2022-04-21 | 2023-04-04 | Dell Products L.P. | Proactive monitoring and management of storage system input-output operation limits |
| US11983432B2 (en) | 2022-04-28 | 2024-05-14 | Dell Products L.P. | Load sharing of copy workloads in device clusters |
| US11789624B1 (en) | 2022-05-31 | 2023-10-17 | Dell Products L.P. | Host device with differentiated alerting for single points of failure in distributed storage systems |
| US11886711B2 (en) | 2022-06-16 | 2024-01-30 | Dell Products L.P. | Host-assisted IO service levels utilizing false-positive signaling |
| CN114785629B (zh) * | 2022-06-17 | 2022-09-02 | 天津市职业大学 | 一种智能网关交互方法和交互系统 |
| US11983429B2 (en) | 2022-06-22 | 2024-05-14 | Dell Products L.P. | Migration processes utilizing mapping entry timestamps for selection of target logical storage devices |
| US12001714B2 (en) | 2022-08-16 | 2024-06-04 | Dell Products L.P. | Host device IO selection using buffer availability information obtained from storage system |
| US12105956B2 (en) | 2022-09-23 | 2024-10-01 | Dell Products L.P. | Multi-path layer configured with enhanced awareness of link performance issue resolution |
| US11934659B1 (en) | 2022-09-28 | 2024-03-19 | Dell Products L.P. | Host background copy process with rate adjustment utilizing input-output processing pressure feedback from storage system |
| US12032842B2 (en) | 2022-10-10 | 2024-07-09 | Dell Products L.P. | Host device with multi-path layer configured for alignment to storage system local-remote designations |
| US12099733B2 (en) | 2022-10-18 | 2024-09-24 | Dell Products L.P. | Spoofing of device identifiers in non-disruptive data migration |
| US11989156B1 (en) | 2023-03-06 | 2024-05-21 | Dell Products L.P. | Host device conversion of configuration information to an intermediate format to facilitate database transitions |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS6168664A (ja) | 1984-09-12 | 1986-04-09 | Fujitsu Ltd | 入出力装置アドレス設定方式 |
| US5787304A (en) * | 1996-02-05 | 1998-07-28 | International Business Machines Corporation | Multipath I/O storage systems with multipath I/O request mechanisms |
| US5889935A (en) * | 1996-05-28 | 1999-03-30 | Emc Corporation | Disaster control features for remote data mirroring |
| US6526521B1 (en) * | 1999-06-18 | 2003-02-25 | Emc Corporation | Methods and apparatus for providing data storage access |
| US6343324B1 (en) * | 1999-09-13 | 2002-01-29 | International Business Machines Corporation | Method and system for controlling access share storage devices in a network environment by configuring host-to-volume mapping data structures in the controller memory for granting and denying access to the devices |
| US6625747B1 (en) * | 2000-06-30 | 2003-09-23 | Dell Products L.P. | Computer storage system and failover method |
-
2000
- 2000-08-18 JP JP2000248157A patent/JP4039794B2/ja not_active Expired - Fee Related
-
2001
- 2001-03-06 US US09/799,945 patent/US6725295B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| US6725295B2 (en) | 2004-04-20 |
| US20020023151A1 (en) | 2002-02-21 |
| JP2002063126A (ja) | 2002-02-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4039794B2 (ja) | マルチパス計算機システム | |
| JP4794068B2 (ja) | ストレージエリア・ネットワーク管理システム | |
| US7650446B2 (en) | Storage system for back-end communications with other storage system | |
| JP4414961B2 (ja) | 管理サーバによる管理方法、管理サーバ、計算機システムおよび管理プログラム | |
| US6571354B1 (en) | Method and apparatus for storage unit replacement according to array priority | |
| US7890792B2 (en) | Server switching method and server system equipped therewith | |
| JP4939102B2 (ja) | ネットワークブート計算機システムの高信頼化方法 | |
| JP4448878B2 (ja) | 障害回復環境の設定方法 | |
| JP4566874B2 (ja) | Ｉｐネットワークにおけるストレージアクセス管理機能及びシステム | |
| US7853767B2 (en) | Dual writing device and its control method | |
| US20100162043A1 (en) | Method, Apparatus, and System for Restarting an Emulated Mainframe IOP | |
| JP2002526821A (ja) | 複数のファイルサーバ間における永続状況情報の調整 | |
| JP2007072571A (ja) | 計算機システム及び管理計算機ならびにアクセスパス管理方法 | |
| JP2008186296A (ja) | ストレージシステム、ストレージ装置、ファームウェアの活性交換方法、ファームウェアの活性交換プログラム | |
| JP2004094774A (ja) | ループ状インタフェースの障害解析方法及び障害解析機能を有するシステム | |
| US8015434B2 (en) | Management apparatus, storage system, and storage apparatus management method | |
| US8347142B2 (en) | Non-disruptive I/O adapter diagnostic testing | |
| CN108108255A (zh) | 虚拟机故障的检测和恢复方法及装置 | |
| JP4155399B2 (ja) | コンピュータ処理方法及びその実施システム並びにその処理プログラム | |
| JP3957065B2 (ja) | ネットワーク計算機システムおよび管理装置 | |
| JP2006139477A (ja) | 計算機システム、管理方法及びストレージネットワークシステム | |
| JP5022062B2 (ja) | プールｉ／ｏデバイス動作確認方法、及び計算機システム | |
| JP4734259B2 (ja) | 運用管理プログラム、運用管理方法および運用管理装置 | |
| EP1816564A1 (en) | Resource exchange processing program and resource exchange processing method | |
| KR102018225B1 (ko) | 연결 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051202 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060110 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060309 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20061024 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061219 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20070207 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070925 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20071004 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20071106 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20071106 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101116 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4039794 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101116 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111116 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111116 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121116 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121116 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131116 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |