JP4412685B2 - 記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法 - Google Patents
記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法 Download PDFInfo
- Publication number
- JP4412685B2 JP4412685B2 JP27288398A JP27288398A JP4412685B2 JP 4412685 B2 JP4412685 B2 JP 4412685B2 JP 27288398 A JP27288398 A JP 27288398A JP 27288398 A JP27288398 A JP 27288398A JP 4412685 B2 JP4412685 B2 JP 4412685B2
- Authority
- JP
- Japan
- Prior art keywords
- storage
- control device
- storage control
- logical unit
- network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
- G06F3/0605—Improving or facilitating administration, e.g. storage management by facilitating the interaction with a user or administrator
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0614—Improving the reliability of storage systems
- G06F3/0617—Improving the reliability of storage systems in relation to availability
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0632—Configuration or reconfiguration of storage systems by initialisation or re-initialisation of storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2089—Redundant storage control functionality
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Description
【０００１】
【発明の属する技術分野】
本発明は、磁気ディスク装置、磁気テープ装置、光ディスク装置、光磁気ディスク装置、ライブラリ装置その他の記憶装置を制御し、これらと上位装置に対するデータの入出力（アクセス）を制御する記憶制御装置に関し、特に、記憶装置に対するアクセス経路としてファイバチャネルを用いた制御装置及びこれを用いたデータ格納システムに関する。
【０００２】
更に具体的には、本発明は、ＡＮＳＩ Ｘ３Ｔ１１で標準化されたファイバチャネルを上位装置、磁気ディスク装置その他の記憶装置及び記憶制御装置のインターフェースとするコンピュータシステムに関し、コンピュータシステムのオンライン中に新たな記憶制御装置を追加し、記憶制御装置間の負荷の分散又は複数の記憶制御装置が行っていた機能の統合を可能とするデータ格納システムに関する。
【０００３】
【従来の技術】
記憶制御装置の増設に関しては特開平７−２０９９４号公報に大型計算機の記憶システムにおいて、当該記憶システム内での上位装置との接続アダプタ、ディスクドライブ装置との接続アダプタ及び共有キャッシュメモリの増設による規模拡張及び活線挿抜機能について記載されており、前記記憶システム内の内部バス上に前記上位装置との接続アダプタ、ディスクドライブ装置との接続アダプタ及び共有キャッシュメモリを順次増設していく手法を提案している。
【０００４】
上記特開平７−２０９９４号公報の技術は前記大型計算機の記憶システムで一般的に用いられている共有キャッシュメモリ方式を採用しており、前記上位装置との接続アダプタが内部バス上の共有キャッシュメモリに置かれたロジカルユニットの制御情報を逐次読込むことで、前記上位装置との接続アダプタ間でのロジカルユニットの制御情報の引継ぎ過程を必要とすることなく、任意のロジカルユニットへのアクセスを可能としている。
【０００５】
また、キャッシュメモリを個々に持つ記憶制御装置の多重化に関しては、特開平７−１６０４３２号公報に記憶制御装置の二重化を行い、片方の記憶制御装置を障害時のスタンバイ記憶制御装置として待機させておくことで記憶制御装置の冗長化を実現する手法について記載されている。さらに、特開平８−３３５１４４号公報に記憶制御装置の二重化による負荷分散及び記憶制御装置の障害発生時の冗長化について記載されている。
【０００６】
【発明が解決しようとする課題】
上記特開平７−２０９９４号公報の技術では、ロジカルユニットの制御情報を内部バス上の共有キャッシュメモリ上に格納してしまうため、１記憶システム筐体内での規模拡張しか行なえない。
【０００７】
上記特開平７−１６０４３２号公報及び特開平８−３３５１４４号公報の技術では、二重化する記憶制御装置において、予めオフライン時に各記憶制御装置を物理的に接続し、正常時及び障害時における各記憶制御装置が担当するロジカルユニットの設定を行なう必要があり、さらにロジカルユニットの制御情報を内部バスを用いて転送するため、初期設定に依存し、オンライン中の拡張性を持たない。
【０００８】
【課題を解決するための手段】
柔軟な機能拡張を行なうには、内部バスや共有キャッシュメモリの制限を受けないように、新たな記憶制御装置を追加するバス又は経路は上位装置との接続に使用されるインターフェースを用い、さらに追加する記憶制御装置が個々のキャッシュメモリを持ち、記憶装置の論理的まとまりであるロジカルユニット（１つの論理ドライブ又は複数の論理ドライブ群）の制御情報を前記キャッシュメモリへコピーすれば良い。
【０００９】
本発明では、ＡＮＳＩ Ｘ３Ｔ１１で標準化されたファイバチャネルを上位装置、磁気ディスク装置その他の記憶装置及び記憶制御装置のインターフェースとするデータ格納システムを構築する。
【００１０】
そして該システムにおいて、ファイバチャネルネットワーク上に新たな記憶制御装置をオンライン中に追加し、既存の記憶制御装置から制御情報を引継ぎ、新たに追加した記憶制御装置と既存の記憶制御装置との間の負荷分散を行う。
【００１１】
新たな記憶制御装置は、コンピュータシステムのオンライン中に既存のファイバチャネルネットワークへ追加されると、ファイバチャネルネットワーク上の既存の記憶制御装置から、ロジカルユニット単位で制御情報を、ファイバチャネルネットワークを経由して取得する（引継ぐ）手段又は機能を有する。制御情報の取得又は引継ぎ完了により、所定のロジカルユニットが追加された記憶制御装置の配下に入る。
【００１２】
追加された新たな記憶制御装置は、その配下に入ったロジカルユニットに対して、上位装置からコマンド処理要求があれば、これを処理する。こうして新たに追加された記憶制御装置と、既存の記憶制御装置との間の負荷分散を行う。
【００１３】
本発明の負荷分散は、ファイバチャネルネットワーク上の既存の複数の記憶制御装置が、オンライン中の負荷分散及び統合を行う手段又は機能を持たない場合であっても、適用可能である。尚、本発明を実施する場合には、既存の記憶制御装置に、制御情報の引継ぎを行う機能を設定する必要がある。
【００１４】
更に、ロジカルユニット単位の制御情報引継ぎに際し、オペレータがファイバチャネルネットワーク、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）その他のネットワークに接続された上位装置上で動作するマネージメントツールを用いて、又は、記憶制御装置のパネルを用いて、ロジカルユニットの引継ぎ開始や、引継ぎ中の動作モードを指定する手段又は機能を上位装置又は記憶制御装置に設け、新たな記憶制御装置の追加を適切なタイミングで行うことができる。
【００１５】
更に具体的には、新たにファイバチャネルネットワークへ接続された記憶制御装置は、ロジカルユニット単位の制御情報の引継ぎに際し、上位装置から記憶制御装置を一意に識別する情報であるＮ_Ｐｏｒｔアドレスを、前記ファイバチャネルネットワーク上に接続され且つ引継ぎ対象のロジカルユニットを所有している既存の記憶制御装置から引継ぐ手段又は機能を有する。これにより、上位装置から発っせられたコマンド処理要求の経路を変更しなくて済む。
【００１６】
本発明の記憶制御装置は、制御メモリを有し、当該制御メモリ上に、磁気ディスク装置その他の記憶装置の種別、記憶装置の記憶容量、ブロック数、各記憶装置の状態及びＲＡＩＤ（Ｒｅｄｕｎｄａｎｔ Ａｒｒａｙｓ ｏｆ Ｉｎｅｘｐｅｎｓｉｖｅ Ｄｉｓｋｓ）構成情報を格納する物理ドライブ制御テーブルやロジカルユニットの先頭ＬＢＡ（Ｌｏｇｉｃａｌ Ｂｌｏｃｋ Ａｄｄｒｅｓｓ）及び最後尾ＬＢＡを格納するロジカルユニット制御テーブルに代表されるロジカルユニット引継ぎの際に必要となる制御情報を記憶する手段又は機能を有する。
【００１７】
そして、同一ファイバチャネルネットワーク上に新たに追加される記憶制御装置は前記ファイバチャネルネットワーク上に既に存在していた記憶制御装置上の制御メモリから前記制御情報を当該新たに追加される記憶制御装置の制御メモリ上にコピーする手段又は機能を有する。
【００１８】
記憶制御装置上の前記制御メモリは揮発性メモリであっても良いが、通常は、不揮発性メモリとする。また、制御メモリの内容（制御テーブル上の設定情報ほか）をファイバチャネルネットワークに接続された磁気ディスク装置その他の記憶装置へ書き込むことで、制御メモリを不揮発性としたのと同様の効果が得られる。つまり、万一、電源の瞬断が生じても、記憶制御装置は、当該設定情報の再設定が行われるまでは、恒久的に設定情報を維持することができる。
【００１９】
また、本発明のロジカルユニット単位で制御情報をオンライン中に引継ぐことを用いれば、複数の記憶制御装置が行なっていたいくつかの処理を、任意の記憶制御装置へ統合することもできる。
【００２０】
新たな記憶制御装置の追加の仕方については、１）新たな記憶制御装置をファイバチャネルネットワークへ物理的に接続した後、２）当該記憶制御装置側からファイバチャネルネットワークに対してリンクリセットを発行し、ファイバチャネルネットワーク内への論理的なログインを行う。３）その後、オペレータがファイバチャネルネットワークへ接続された上位装置上のマネージメントツールから、又は、記憶制御装置のパネルから、新たに追加された記憶制御装置の認識を行い、４）新たに追加された記憶制御装置が担当するロジカルユニットの指定、ロジカルユニットの引継ぎ開始の指示及びファイバチャネルネットワークに既に存在する記憶制御装置に対して当該ロジカルユニットの引継ぎ中に上位装置から処理要求があった場合の応答方法を設定し、５）ファイバチャネルネットワーク上に既に存在していた記憶制御装置から新たに追加した記憶制御装置に対して、ロジカルユニットの制御情報の転送を行なわせる。６）更に、前記ファイバチャネルネットワーク上に既に存在していた記憶制御装置において、上位装置から記憶制御装置を一意に識別する情報であるＮ＿Ｐｏｒｔアドレスを複数設定しておき、７）ファイバチャネルネットワークへ新たに追加された記憶制御装置が前記Ｎ＿Ｐｏｒｔアドレスの一部を引継ぐことにより、上位装置からのコマンド処理要求経路の変更を不要とする。８）更に、コンピュータシステムのオンライン中にファイバチャネルネットワーク上に存在する記憶制御装置が同一ファイバチャネルネットワークに接続された別の記憶制御装置からロジカルユニット単位で制御情報を引継ぎ、９）これ以降の上位装置から当該引き継いだロジカルユニットに対して行われるコマンド処理要求を担当し、１０）ファイバチャネルネットワーク上に存在する記憶制御装置間の負荷分散を行う。１１）必要に応じ、複数の記憶制御装置が行なっていたいくつかの処理を、任意の記憶制御装置へ統合することを、ロジカルユニットの制御情報をオンライン中に引継ぐ技術を適用して行う。
【００２１】
【発明の実施の形態】
本発明の一実施例を図面を用いて以下に説明する。尚、記憶装置として磁気ディスク装置（以下、ディスクドライブ装置と記す）のみを用いた実施例としたが、光ディスク装置、テープ記憶装置であっても良い。
【００２２】
図１は本発明の一実施形態であり、ファイバチャネルネットワークにＦＣ−ＡＬ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ａｒｂｉｔｒａｔｅｄ Ｌｏｏｐ ）の接続形態（トポロジ）を採用した場合のハードウェア構成図である。
【００２３】
図１において、１０はデータ処理を行う中央処理装置（ＣＰＵ）をもつ上位装置である。６０はＦＣ−ＡＬ・トポロジで動作し、ＦＣ−ＡＬハブにて各種装置が接続されたファイバチャネルネットワークである。
【００２４】
２０は上位装置Ａ（１０）からのデータを格納しておくディスクドライブ装置であり、複数の磁気ディスクドライブで構成される。ディスクドライブ装置２０を構成する複数のディスクドライブを論理的に分割し、分割した区画を任意のＲＡＩＤレベルに定義することで、ディスクドライブ障害時における冗長性を持たせ、ディスクドライブ障害時におけるデータ消失を防ぐことができる。この区画をＲＡＩＤグループと呼ぶ。このＲＡＩＤグループをさらに論理的に分割したＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）のアクセス単位である領域をロジカルユニットと呼び、この領域はＬＵＮ（Ｌｏｇｉｃａｌ Ｕｎｉｔ Ｎｕｍｂｅｒ）という番号をもつ。本実施例ではディスクドライブ装置２０はロジカルユニット０（２１）及びロジカルユニット１（２２）を持っているが、ロジカルユニットの個数は図１に示す２個でなくても良い（ＳＣＳＩ−３規格に準拠したファイバチャネルではファイバチャネルＩＤ毎に最大６４個のロジカルユニットを持つことができる）。また、図１ではディスクドライブ装置が１個の場合の例を示しているが、ファイバチャネルネットワーク上にディスクドライブ装置が複数あってもかまわない。複数のディスクドライブ装置からなる大容量のデータ格納システムでは記憶制御装置の処理能力不足に陥ることが多々あり、本発明はコンピュータシステムが記憶制御装置の処理能力不足に陥った際に特に有効である。
【００２５】
３０、４０は上位装置Ａ（１０）とディスクドライブ装置２０の間に論理的に介在し、上位装置Ａ（１０）とディスクドライブ装置２０間の情報（データ）の授受を制御する記憶制御装置である。特に、記憶制御装置３０は本発明で必要となるファイバチャネル上に既に存在していた記憶制御装置を示し、記憶制御装置４０は新たに追加される記憶制御装置を示す。図１では記憶制御装置３０及び４０が各々１装置となっているが、記憶制御装置３０、４０は複数あっても良い。また、図２において示される記憶制御装置３０、４０の内部構成図において、３１はファイバチャネルネットワーク上でのデータ転送を制御し、さらに上位装置１０から送られてくるコマンドの解析を行い、データをキャッシュ制御部３４へＤＭＡ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）転送するファイバチャネル制御部である。３２は記憶制御装置の動作を制御するマイクロプログラム及びロジカルユニット引継ぎ時に必要となる制御情報を格納する不揮発性の制御メモリである。３３は記憶制御装置全体を制御する中央処理装置（ＣＰＵ）である。３４はキャッシュへのデータの読み書きを制御するキャッシュ制御部、３５はディスクドライブ装置２０への書込みデータ及び読み出しデータを一時的に格納しておくキャッシュである。３６は記憶制御装置の動作設定を変更及び参照するパネルである。
【００２６】
５０は記憶制御装置３０、４０の動作を制御するマネージメントツールをもつ上位装置である。本実施例では上位装置Ｂ（５０）にマネージメントツールを持たせているが、マネージメントツールは上位装置Ａ（１０）にあってもかまわない。さらに、マネージメントツールを搭載する上位装置Ｂ（５０）と記憶制御装置３０、４０のインターフェースはＬＡＮその他の遠隔操作が可能なネットワークシステムであっても良い。
【００２７】
次に、上位装置Ａ（１０）が記憶制御装置３０経由でディスクドライブ装置２０とデータ転送を行う場合を例にとり、制御の流れ、データの流れを説明する。上位装置Ａ（１０）がアクセス要求を出すと、その要求を認識したファイバチャネル制御部３１はＣＰＵ３３に対して割り込み要求を発行する。ＣＰＵ３３は、上位装置Ａ（１０）からのコマンドを解析し、制御メモリ３２内にある磁気ディスクドライブの記憶容量、ブロック数、各磁気ディスクドライブの状態及びＲＡＩＤ構成情報を格納する物理ディスクドライブ制御テーブルやロジカルユニットの先頭ＬＢＡ（Ｌｏｇｉｃａｌ Ｂｌｏｃｋ Ａｄｄｒｅｓｓ）及び最後尾ＬＢＡを格納するロジカルユニット制御テーブルから情報を読み出す。
【００２８】
上位装置Ａ（１０）からのアクセス要求がライトコマンドの場合は、ＣＰＵ３３はファイバチャネル制御部３１にデータ転送を指示し、上位装置Ａ（１０）から転送されたライトデータをキャッシュ制御部３４を経由してキャッシュ３５に格納し、上位装置Ａ（１０）に対して、ファイバチャネル制御部３１がライト完了報告を行う。ライト完了報告後、ＣＰＵ３３はファイバチャネル制御部３１を制御し、ファイバチャネルネットワークを介してディスクドライブ装置のロジカルユニット２１または２２へ前記ライトデータ及び冗長データを書き込む。この時、ライトデータを格納するロジカルユニットのＲＡＩＤレベルがＲＡＩＤ５であった場合、ライトデータを格納するために行われる旧データと旧冗長データの読み出し処理、新冗長データの生成処理及び前記ライトデータと新冗長データの格納処理という記憶制御装置３０及びディスクドライブ装置２０に対して非常に負荷の高い処理を必要とする。これをＷｒｉｔｅペナルティと呼ぶ。このＷｒｉｔｅペナルティ処理においては、ディスクドライブ装置２０へのアクセスが多数発生することも性能劣化の一因となるが、それ以前にディスクドライブ装置２０を制御する記憶制御装置３０のマイクロプログラムの実行に多大な時間を要し、記憶制御装置３０のＣＰＵ３３が処理能力不足になることも多い。本発明ではオンライン中に記憶制御装置４０を増設することで、記憶制御装置３０の処理能力不足を解消する効果がある。
【００２９】
一方、上位装置Ａ（１０）からのアクセス要求がリードコマンドの場合は、ＣＰＵ３３は、ファイバチャネル制御部３１に指示を出し、当該アクセス要求のデータブロックが格納されたディスクドライブ装置２０内のロジカルユニット２１、２２へアクセスしてデータを読み出し、キャッシュ制御部３４を経由してキャッシュ３５へリードデータを格納する。キャッシュ３５にリードデータを格納した後、ＣＰＵ３３はファイバチャネル制御部３１に指示を出し、キャッシュ３５に格納したリードデータを上位装置Ａ（１０）に転送し、転送終了後、上位装置Ａ（１０）へリード完了報告を行なう。
【００３０】
次にファイバチャネルネットワーク６０の特長を説明する。ファイバチャネルは最大１０ｋｍのデータ転送距離及び最大１００ＭＢ/ｓのデータ転送速度を実現する長距離、高速インタフェースである。また、ファイバチャネルは上位論理層に位置するＳＣＳＩ、ＩＰ、ＩＰＩ等の種々のプロトコルを下位論理層のファイバチャネルプロトコルにマッピングする機能を持っており、上位装置Ａ（１０）からはＳＣＳＩやＩＰのように異なったプロトコルを持つデバイスを同一のファイバチャネルネットワークに接続し、データ転送を行なうことができる。 即ち、他のインタフェースと論理的に互換性を持つ。
【００３１】
ファイバチャネルでは３つの接続形態（トポロジ）が定義されている。一つ目は上位装置とデバイスが一対一に接続されるポイント・ツー・ポイント・トポロジである。二つ目は複数の上位装置とデバイスが一つのループを形成して接続されるＦＣ−ＡＬ・トポロジである。ＦＣ−ＡＬ接続はＦＣ−ＡＬハブと呼ばれる装置を介して接続される。三つ目はファブリック・トポロジであり、Ｆａｂｒｉｃスイッチと呼ばれる装置を介して上位装置とデバイスがスター状に配置される。
【００３２】
図１で示す本実施例はファイバチャネルネットワークにＦＣ−ＡＬ・トポロジを採用し、さらにファイバチャネルネットワーク上に接続された各種装置はＳＣＳＩマッピングプロトコルを用いて動作するコンピュータシステムであるが、図３で示すようにＦａｂｒｉｃスイッチを用いて各種装置を接続し、Ｆａｂｒｉｃ・トポロジで動作する構成も考えられる。また、図１においてはファイバチャネルネットワークが１個のＦＣ−ＡＬループを形成しているが、図４で示すように複数のＦＣ−ＡＬハブを用いてファイバチャネルネットワークを複数のＦＣ−ＡＬループで形成し、さらに上位装置Ａ（１０）と記憶制御装置３０、４０間のファイバチャネルネットワークと記憶制御装置３０、４０とディスクドライブ装置２０間のファイバチャネルネットワークを異なるループとし、ロジカルユニット制御情報の引継ぎにおいては上位装置Ａ（１０）と記憶制御装置３０、４０間のファイバチャネルネットワークと記憶制御装置３０、４０とディスクドライブ装置２０間のファイバチャネルネットワークの双方の引継ぎが必要なコンピュータシステムも考えられる。
【００３３】
ファイバチャネル上の情報のやりとりはＯｒｄｅｒｅｄ Ｓｅｔと呼ばれる信号レベルの情報と、フレームと呼ばれる固定フォーマットを持った情報を用いて行われる。Ｏｒｄｅｒｅｄ Ｓｅｔの代表的なものにはフレームの先頭を識別するために使用するＳＯＦ（Ｓｔａｒｔ Ｏｆ Ｆｒａｍｅ）、フレームの最後尾を識別するために使用するＥＯＦ（Ｅｎｄ Ｏｆ Ｆｒａｍｅ）、ループ上をフレームが転送されていない事を示すＩｄｌｅ、ＦＣ−ＡＬ・ループ初期化開始要求に使用するＬＩＰ（Ｌｏｏｐ Ｉｎｉｔｉａｌｉｚａｔｉｏｎ）等の信号がある。
【００３４】
次にファイバチャネルがデータのやりとり行なう基本単位であるフレームについて説明を行なう。フレームは機能に基づいてデータフレームとリンク制御フレームとに大別される。データフレームは情報を転送するために用い、データフィールドのペイロード部にＳＣＳＩ等の上位プロトコルで使用するデータ、コマンドを搭載する。
【００３５】
一方、リンク制御フレームは一般にフレーム配信の成功あるいは不成功を示すのに使われる。フレームを受領したことを示すＡＣＫフレームやログインする場合に転送に関するパラメータを通知したりするフレーム等がある。
【００３６】
フレームのフォーマットについて、図５を用いて説明を行なう。フレーム７０は、ＳＯＦ７１、フレームヘッダ７２、データフィールド７３、ＣＲＣ７４、ＥＯＦ７５で構成される。
【００３７】
ＳＯＦ（Ｓｔａｒｔ Ｏｆ Ｆｒａｍｅ）７１はフレームの先頭に置く４バイトの識別子である。ＥＯＦ（Ｅｎｄ Ｏｆ Ｆｒａｍｅ）７５はフレームの最後につける４バイトの識別子で、ＳＯＦ７１とＥＯＦ７５によりフレームの境界を示す。
【００３８】
フレームヘッダ７２はフレームタイプ、上位プロトコルタイプ、送信元と送信先のＮ＿Ｐｏｒｔアドレス情報を含む。Ｎ＿Ｐｏｒｔアドレスはファイバチャネルネットワークに接続される上位装置１０、５０及び記憶制御装置３０、４０等のアドレスを表わす。
【００３９】
データフィールド７３の先頭部には上位レイヤのヘッダを置くことができる。これにデータそのものを運ぶペイロード部が続く。ＣＲＣ（Ｃｙｃｌｉｃ Ｒｅｄｕｎｄａｎｃｙ Ｃｈｅｃｋ）７４はフレームヘッダとデータフィールドのデータをチェックするための、４バイトのチェックコードである。
【００４０】
次に図６にフレームヘッダのフォーマットを示す。フレームヘッダ８０のＤ＿ＩＤ（Ｄｅｓｔｉｎａｔｉｏｎ ＩＤ）８１はフレーム受け取り側の、また、Ｓ＿ＩＤ（Ｓｏｕｒｃｅ ＩＤ）８２はフレーム送信側のＮ＿Ｐｏｒｔアドレスである。ＦＣ−ＡＬ・トポロジでは２４ビットのＮ＿Ｐｏｒｔアドレスの内、下位８ビットを用いてアドレスを示し、特にＦＣ−ＡＬのＮ＿ＰｏｒｔアドレスをＡＬ−ＰＡ（Ａｒｂｉｔｒａｔｅｄ Ｌｏｏｐ Ｐｈｙｓｉｃａｌ Ａｄｄｒｅｓｓ）と呼ぶ。
【００４１】
次にフレームを構成するデータフィールド７３のペイロードの一部であるＦＣＰ＿ＣＭＮＤ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ｐｒｏｔｏｃｏｌ ｆｏｒ ＳＣＳＩＣｏｍｍａｎｄ）及びＦＣＰ＿ＲＳＰ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ｐｒｏｔｏｃｏｌ ｆｏｒ ＳＣＳＩ Ｒｅｓｐｏｎｓｅ）について説明する。
【００４２】
ＦＣＰ＿ＣＭＮＤのフォーマットを図７に示す。ＦＣＰ＿ＬＵＮ（ＦＣＰ Ｌｏｇｉｃａｌ Ｕｎｉｔ Ｎｕｍｂｅｒ）フィールド９１にはコマンドを発行するロジカルユニット番号が指定される。ＦＣＰ＿ＣＮＴＬ（ＦＣＰ Ｃｏｎｔｒｏｌ）９２にはコマンド制御パラメータが指定される。
【００４３】
ＦＣＰ＿ＣＤＢ（ＦＣＰ Ｃｏｍｍａｎｄ Ｄｉｓｃｒｉｐｔｏｒ Ｂｌｏｃｋ）９３にＳＣＳＩインターフェースでのコマンド授受に用いられるＳＣＳＩ ＣＤＢが格納され、Ｏｐｅｒａｔｉｏｎ Ｃｏｄｅ９５ではＩｎｑｕｉｒｙやＲｅａｄ、Ｗｒｉｔｅ、Ｍｏｄｅ ｓｅｎｓｅ、Ｍｏｄｅ Ｓｅｌｅｃｔコマンド等を示す番号が格納される。さらにＬＵＮや論理ブロックアドレス、転送ブロック長等の情報も格納される。ＦＣＰ＿ＤＬ（ＦＣＰ Ｄａｔａ Ｌｅｎｇｔｈ）９４には本コマンドで転送されるデータ量がバイト数で指定される。このように構成されたフレームによってファイバチャネルネットワーク上でＳＣＳＩコマンドのやりとりが行われる。
【００４４】
ＦＣＰ＿ＲＳＰのフォーマットを図８に示す。ＦＣＰ＿ＲＳＰ１００はＦＣＰ＿ＣＭＮＤで指示されたＳＣＳＩコマンドの動作の結果を報告するために使用される。ＦＣＰ＿ＳＴＡＴＵＳ１０１にはコマンドが正常に完了したことを報告するＧｏｏｄステータス、コマンドが異常終了したことを示すＣｈｅｃｋ Ｃｏｎｄｉｔｉｏｎステータス、デバイスが上位装置からのコマンドを受け付けられない状態にあることを示すＢｕｓｙステータス等のＳＣＳＩステータスが格納される。
【００４５】
次に、ＦＣＰ＿ＣＭＮＤ９０におけるＩｎｑｕｉｒｙ、Ｍｏｄｅ Ｓｅｎｓｅ、Ｍｏｄｅ Ｓｅｌｅｃｔの役割について説明する。図９にＩｎｑｕｉｒｙコマンドのシーケンスを示す。Ｉｎｑｕｒｙコマンドは上位装置１０、５０がファイバチャネルネットワークに接続された各種装置のデバイスタイプやサポートしている機能、装置のメーカ名、製品名を調べるために使用される。これらの情報はＩｎｑｕｉｒｙコマンドを受領した記憶制御装置３０、４０が上位装置１０、５０に対して送信するＩｎｑｕｉｒｙデータに格納されている。
【００４６】
図１０にＭｏｄｅ Ｓｅｎｓｅコマンドのシーケンスを示す。Ｍｏｄｅ Ｓｅｎｓｅコマンドは上位装置１０、５０がファイバチャネルネットワークに接続している各種装置のパラメータを参照するために使用される。Ｍｏｄｅ Ｓｅｎｓｅコマンドで参照できるページは複数の固定ページとベンダユニークページが存在し、Ｐａｇｅ Ｃｏｄｅにて参照するページを指定できる。これらの情報はＭｏｄｅ Ｓｅｎｓｅコマンドを受領した記憶制御装置が送信するＭｏｄｅ Ｓｅｎｓｅデータに格納されている。
【００４７】
一方、図１１で示すＭｏｄｅ Ｓｅｌｅｃｔコマンドは前記Ｍｏｄｅ Ｓｅｎｓｅコマンドで参照できるパラメータを変更するためのコマンドである。パラメータを変更するには変更したいページをＰａｇｅ Ｃｏｄｅにて指定し、Ｍｏｄｅ Ｓｅｌｅｃｔパラメータリストを記憶制御装置に対して送信すれば良い。
【００４８】
次に、本発明において、記憶制御装置間でのロジカルユニットの引継ぎを行なう場合に必要となる情報を格納した制御メモリ３２について説明を行なう。制御メモリ３２は不揮発メモリであり、万一の電源瞬断時にも格納された情報を恒久的に維持することができる。
【００４９】
制御メモリ３２には記憶制御装置３０、４０の動作を制御するマイクロプログラムの他に、物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０が格納されている。物理ディスクドライブ制御テーブルのフォーマットを図１２で示す。物理ディスクドライブ制御テーブル１１０において、物理ディスクドライブ番号１１１はディスクドライブ装置内の磁気ディスクドライブに一意に割り当てられた番号である。物理ディスクドライブ位置１１２は当該磁気ディスクドライブの位置を示す論理的なアドレスを格納している。記憶容量１１３及びブロック数１１４は当該磁気ディスクドライブの全記憶容量及び全ブロック数を、ＲＡＩＤグループ番号１１５は当該磁気ディスクドライブが所属するＲＡＩＤグループ番号を格納している。また、状態１１６は当該磁気ディスクドライブが使用可能なオンライン状態か、または使用不可能な閉塞状態かを示す情報が格納されている。また、記憶装置の種類１１７はファイバチャネルネットワーク６０上の記憶装置が磁気ディスク装置、光ディスク装置、光磁気ディスク装置、磁気テープ装置、または各種ライブラリ装置のいずれであるかを識別するために用いる。
【００５０】
ロジカルユニット制御テーブルのフォーマットを図１３で示す。ロジカルユニット制御テーブル１２０において、ロジカルユニット番号１２１はディスクドライブ装置内のロジカルユニットに対して一意に割り当てられる番号である。ＲＡＩＤグループ番号は当該ロジカルユニットが所属するＲＡＩＤグループ番号であり、ＲＡＩＤレベル１２３はそのＲＡＩＤレベルである。先頭アドレス１２４及び最終アドレス１２５は当該ロジカルユニットのＲＡＩＤグループでの位置を示すために使用する先頭ロジカルブロックアドレス及び最終のロジカルブロックアドレスである。前記制御メモリ３２内の物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０の情報は他の装置が発行するＭｏｄｅ Ｓｅｎｓｅコマンドによる参照、及びＭｏｄｅ Ｓｅｌｅｃｔコマンドによるパラメータ変更が可能とする。
【００５１】
次に本発明における、ファイバチャネルネットワーク６０への新たな記憶制御装置４０のオンライン中の追加及びロジカルユニットの引継ぎ処理手順を示す。この処理手順は記憶制御装置４０の動作シーケンスと上位装置Ｂ（５０）に搭載されたマネージメントツールの動作シーケンスに大別される。図１４に記憶制御装置４０の動作シーケンス、図１５に上位装置Ｂ（５０）に搭載されたマネージメントツールの動作シーケンスを示す。
【００５２】
まず、ファイバチャネルネットワーク６０への記憶制御装置４０の追加及びＡＬ−ＰＡ確定手順について説明する。ファイバチャネルネットワーク６０を構成するＦＣ−ＡＬハブと新たに追加する記憶制御装置４０をファイバチャネルケーブルで接続した後、新たに追加する記憶制御装置４０の電源を投入する（オン）。電源をオンにすることで、記憶制御装置４０はリンク初期化処理を実行し、ファイバチャネルネットワーク６０上をフレームの送受信可能な状態にする。
【００５３】
次に、新たに追加された記憶制御装置４０はループ初期化処理を実行する。ＦＣ−ＡＬ・トポロジをもつファイバチャネルネットワークに新たに追加された記憶制御装置４０は電源投入時には有効なＡＬ−ＰＡを持っていない。そこで、新たに追加された記憶制御装置４０がループ初期化処理を実行することで有効なＡＬ−ＰＡが割り当てられる。ＡＬ−ＰＡが確定した記憶制御装置４０は一旦処理を停止し、上位装置Ｂ（５０）に搭載されたマネージメントツールからの指示を待つ。
【００５４】
次に、前記マネージメントツールの動作について説明を行なう。前記マネージメントツールは図１６で示すマネージメントツール管理テーブル１３０をファイル形式で所有している。前記マネージメントツール管理テーブル１３０はファイバチャネルネットワーク６０上に接続されている記憶制御装置３０のＡＬ−ＰＡ１３１及び担当ＬＵＮ１３２の情報が格納されている。
【００５５】
前記マネージメントツールはファイバチャネルネットワーク６０へ新たに追加された記憶制御装置４０のＡＬ−ＰＡを入手するために、 ＦＣＰ＿ＣＭＮＤ９０の１種であるＩｎｑｕｉｒｙコマンドをファイバチャネルネットワーク６０上に接続された全ての装置に対して発行する。そして、その応答であるＩｎｑｕｉｒｙデータに格納された装置のメーカ名及び製品名を調べ、さらにフレーム送信側のＡＬ−ＰＡを参照し、マネージメントツール管理テーブル１３０に登録されていない装置を見つける。これにより、新規に追加された記憶制御装置４０のＡＬ−ＰＡが特定でき、そのＡＬ−ＰＡをマネージメントツール管理テーブル１３０に新規に書き込む。
【００５６】
新規に追加された記憶制御装置４０のＡＬ−ＰＡが特定されると、マネージメントツールは記憶制御装置４０に対して、引継ぎを行なうロジカルユニット、当該ロジカルユニットを担当していた記憶制御装置３０のＡＬ−ＰＡ及び当該ロジカルユニットを担当していた記憶制御装置３０のロジカルユニット引継ぎ中の動作モードの指示を行なう。
【００５７】
上記に示したマネージメントツールの役割は記憶制御装置４０及び記憶制御装置４０に搭載されるパネル３６を用いて実現することも可能である。この場合はオペレータが記憶制御装置４０へ引継がせたいロジカルユニットをパネル３６を用いて入力し、当該ロジカルユニットを担当している記憶制御装置３０をＩｎｑｕｉｒｙコマンドを用いて探し出す。そして、引継ぎ対象のロジカルユニットを所有している記憶制御装置３０のＡＬ−ＰＡを記憶しておけば良い。また、引継ぎを行なうロジカルユニット及び当該ロジカルユニットを担当していた記憶制御装置３０のロジカルユニット引継ぎ中の動作モードはオペレータによってパネル３６を用いて入力される。
【００５８】
次に、引継ぎを行なうロジカルユニットが決定した記憶制御装置４０はロジカルユニット引継ぎ処理に入る。まず、記憶制御装置４０は記憶制御装置３０に対してＦＣＰ＿ＣＭＮＤの１種であるＭｏｄｅ Ｓｅｎｓｅコマンドを発行し、当該ロジカルユニットの状態を調べる。当該ロジカルユニットの状態が正常であれば引継ぎ処理に入るが、ロジカルユニットが使用不可能な閉塞状態であった場合はマネージメントツールを持つ上位装置Ｂ（５０）またはパネル３６を使ってオペレータへ通知する。
【００５９】
次に、当該ロジカルユニットを担当していた記憶制御装置３０のロジカルユニット引継ぎ中の動作モードの設定方法を説明する。これは記憶制御装置４０がＦＣＰ＿ＣＭＮＤの１種であるＭｏｄｅ Ｓｅｌｅｃｔコマンドを発行することで、記憶制御装置３０の設定変更を行なう。これ以降、ロジカルユニット引継ぎ中に上位装置が記憶制御装置３０に対して行なう当該ロジカルユニットへの処理要求に対して、記憶制御装置３０はＦＣＰ＿ＲＥＰ１００にてＢｕｓｙステータスを返す。ここで、上位装置からのコマンド処理要求に対してＢｕｓｙステータスで応答し続けた場合、上位装置のコマンド処理要求がタイムアウトになる恐れがあるため、ロジカルユニット引継ぎ処理の時間はタイムアウトとならない範囲で行なわせる。
【００６０】
次に、記憶制御装置３０は当該ロジカルユニットに対して、上位装置から処理要求を受領したがまだ処理を行なっていないコマンド（キューイングコマンド）があった場合はそのコマンドの処理を実行し、さらに、当該キャッシュ上に残っていた当該ロジカルユニットに対する全てのＷｒｉｔｅデータをディスクドライブ装置２０へ書き込む。これにより、ロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移った場合でもディスクドライブ装置２０内のデータの整合性が保証される。
【００６１】
次に、記憶制御装置４０は記憶制御装置３０から記憶制御装置４０へ当該ロジカルユニット引継ぎ時に必要な物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０の格納された制御メモリ３２の内容を記憶制御装置３０からコピーする。この制御メモリ３２のコピーは記憶制御装置４０が記憶制御装置３０へＦＣＰ＿ＣＭＮＤ９０の１種であるＭｏｄｅ Ｓｅｎｓｅコマンドを発行し、記憶制御装置３０の制御メモリ３２の情報を読み出し、その内容を記憶制御装置４０の制御メモリ３２へ書き込むことで実現する。
【００６２】
記憶制御装置４０はロジカルユニットの引継ぎ時に必要な物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０の情報を受領すると、コマンド処理可能な状態にするために内部処理を実行し、上位装置１０からのコマンド処理要求に備える。上位装置１０からは当該ロジカルユニットのアクセス経路を既に存在していた記憶制御装置３０から新たに追加された記憶制御装置４０へ変更することで継続して処理を行なうことができる。さらに、上記で示した記憶制御装置３０、４０間でロジカルユニットの制御情報をオンライン中に引継ぐ手法は、コンピュータシステムのオンライン中にファイバチャネルネットワーク上に存在する記憶制御装置が同一ファイバチャネルネットワークに接続された別の記憶制御装置からロジカルユニット単位で制御情報を引継ぎ、これ以降の上位装置から当該ロジカルユニットに対して行われるコマンド処理要求を担当し、ファイバチャネルネットワーク上に存在する記憶制御装置間の負荷分散及び複数からなる記憶制御装置が行なっていたいくつかの処理を任意の記憶制御装置へ統合する手段にも適用可能である。
【００６３】
次に、ロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移った場合に、オペレータによる上位装置からのアクセス経路の変更を不要とする方法を説明する。図１７に示すように、記憶制御装置は予め担当しているロジカルユニットと同数のファイバチャネルアダプタを搭載し、各々にＡＬ−ＰＡを設定しておく。各々のＡＬ−ＰＡは担当するロジカルユニットと組みにして管理する。ロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移動した場合、ロジカルユニットの制御情報だけでなく、ロジカルユニットと組になっているＡＬ−ＰＡも引継がせる。これにより、上位装置からはロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移ったこと認識しないため、当該ロジカルユニット引継ぎ以前と同様に処理要求を行なうことができ、アクセス経路変更は不要となる。
【００６４】
このように、本発明を応用することにより、ファイバチャネルネットワーク６０へ記憶制御装置４０をオンライン中に追加し、記憶制御装置間の負荷分散を行うことが可能である。さらに同手法はファイバチャネルネットワーク６０上の複数の記憶制御装置が担当するロジカルユニットを自由に替えていくことが可能であり、既存の記憶制御装置間での負荷分散及び統合が実現できる。
【００６５】
【発明の効果】
本発明は、ファイバチャネルネットワークに接続された既存の記憶制御装置に対し、当該ファイバチャネルネットワーク上に新たな記憶制御装置をオンライン中に追加し、ロジカルユニットの処理担当を引継がせることで、記憶制御装置間の負荷分散、処理の統合を行うことができ、データ格納システム全体の処理能力の向上が図れる。
【００６６】
具体的には、ＡＮＳＩ Ｘ３Ｔ１１で標準化されたファイバチャネルネットワークに接続された既存の記憶制御装置が処理能力不足に陥った場合に、新たな記憶制御装置をコンピュータシステムのオンライン中に追加でき、負荷分散が図れる。
【００６７】
また、本発明は、ＦＣ−ＡＬ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ａｒｂｉｔｒａｔｅｄ Ｌｏｏｐ）トポロジで最大１２７台、Ｆａｂｒｉｃトポロジで約１７００万台の装置を接続でき、さらにオンライン中にファイバチャネルネットワークへ装置を物理的に接続し、装置側からリンクリセットを発行することにより自動的にファイバチャネルネットワーク内へのログインが可能であるという特長をもつファイバチャネルをインターフェースとして採用することで、２台の記憶制御装置のみならず、オンライン中に複数台の記憶制御装置の追加が可能であり、初期設定にとらわれない柔軟なデータ格納システムの拡張を行なうことができる。
【図面の簡単な説明】
【図１】本発明の一実施形態を示すハードウエア構成図である。
【図２】実施形態における記憶制御装置の内部ハードウェア構成図である。
【図３】ファイバチャネルネットワークにＦａｂｒｉｃ・トポロジを採用したハードウェア構成図である。
【図４】ファイバチャネルネットワークに複数のＦＣ−ＡＬループを用いたハードウェア構成図である。
【図５】実施形態におけるファイバチャネルがデータをやりとりする基本単位であるフレームのフォーマットを示した図である。
【図６】図５で示したフレームを構成するフレームヘッダのフォーマットを示した図である。
【図７】図５で示したフレームの一構成要素であるＦＣＰ＿ＣＭＮＤのペイロードのフォーマット及び当該ペイロードを構成するＦＣＰ＿ＣＤＢのフォーマットを示した図である。
【図８】図５で示したフレームの一構成要素であるＦＣＰ＿ＲＳＰのペイロードのフォーマットを示した図である。
【図９】Ｉｎｑｕｉｒｙコマンドのシーケンスを示した図である。
【図１０】Ｍｏｄｅ Ｓｅｎｓｅコマンドのシーケンスを示した図である。
【図１１】Ｍｏｄｅ Ｓｅｌｅｃｔコマンドのシーケンスを示した図である。
【図１２】実施形態における記憶制御装置内部の制御メモリに格納される物理ディスクドライブ制御テーブルのフォーマットを示した図である。
【図１３】実施形態における記憶制御装置内部の制御メモリに格納されるロジカルユニット制御テーブルのフォーマットを示した図である。
【図１４】実施形態におけるファイバチャネルネットワークに新規に追加した記憶制御装置の動作シーケンスを示すフローチャートである
【図１５】実施形態における上位装置に搭載されるマネージメントツールの動作シーケンスを示すフローチャートである
【図１６】実施形態における上位装置に搭載されるマネージメントツールの管理情報を格納するマネージメントツール管理テーブルのフォーマットを示した図である。
【図１７】実施形態において、記憶制御装置間でロジカルユニット引継ぎが行われた後、上位装置からのアクセス経路の変更を不要とすることを実現したデータ格納システム構成図である。
【符号の説明】
１０ 上位装置Ａ ２０ ディスクドライブ装置
２１ ロジカルユニット０ ２２ ロジカルユニット１
３０ 記憶制御装置 ３１ ファイバチャネル制御部
３２ 制御メモリ ３３ ＣＰＵ
３４ キャッシュ制御部 ３５ キャッシュ
３６ パネル ４０ 記憶制御装置（新規追加）
５０ 上位装置Ｂ（マネージメントツール）
６０ ファイバチャネルネットワーク（ＦＣ−ＡＬ）
７０ フレームのフォーマット
７１ ＳＯＦ（Ｓｔａｒｔ Ｏｆ Ｆｒａｍｅ）
７２ フレームヘッダ ７３ データフィールド
７４ ＣＲＣ（Ｃｙｃｌｉｃ Ｒｅｄｕｎｄａｎｃｙ Ｃｈｅｃｋ）
７５ ＥＯＦ（Ｅｎｄ Ｏｆ Ｆｒａｍｅ）
８０ フレームヘッダのフォーマット
８１ Ｄ＿ＩＤ（Ｄｅｓｔｉｎａｔｉｏｎ ＩＤ）
８２ Ｓ＿ＩＤ（Ｓｏｕｒｃｅ ＩＤ）
９０ ＦＣＰ＿ＣＭＮＤペイロード
（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ｐｒｏｔｏｃｏｌ ｆｏｒ ＳＣＳＩ
Ｃｏｍｍａｎｄ）
９１ ＦＣＰ＿ＬＵＮ（ＦＣＰ Ｌｏｇｉｃａｌ Ｕｎｉｔ Ｎｕｍｂｅｒ）
９２ ＦＣＰ＿ＣＮＴＬ（ＦＣＰ Ｃｏｎｔｒｏｌ）
９３ ＦＣＰ＿ＣＤＢ
（ＦＣＰ Ｃｏｍｍａｎｄ Ｄｅｓｃｒｉｐｔｏｒ Ｂｌｏｃｋ）
９４ ＦＣＰ＿ＤＬ
（ＦＣＰ Ｄａｔａ Ｌｅｎｇｔｈ）
９５ Ｏｐｅｒａｉｏｎ Ｃｏｄｅ
１００ ＦＣＰ＿ＲＳＰペイロード
１０１ ＦＣＰ＿ＳＴＡＴＵＳ（ＦＣＰ Ｓｔａｔｕｓ）
１１０ 物理ディスクドライブ制御テーブル
１１１ 物理ディスクドライブ番号
１１２ 物理ディスクドライブ位置
１１３ 記憶容量 １１４ ブロック数
１１５ ＲＡＩＤグループ番号
１１６ 状態
１２０ ロジカルユニット制御テーブル
１２１ ロジカルユニット番号
１２２ ＲＡＩＤグループ番号
１２３ ＲＡＩＤレベル １２４ 先頭アドレス
１２５ 最終アドレス
１３０ マネージメントツール管理テーブル
１３１ 記憶制御装置のＡＬ−ＰＡ
１３２ 担当ＬＵＮ
【発明の属する技術分野】
本発明は、磁気ディスク装置、磁気テープ装置、光ディスク装置、光磁気ディスク装置、ライブラリ装置その他の記憶装置を制御し、これらと上位装置に対するデータの入出力（アクセス）を制御する記憶制御装置に関し、特に、記憶装置に対するアクセス経路としてファイバチャネルを用いた制御装置及びこれを用いたデータ格納システムに関する。
【０００２】
更に具体的には、本発明は、ＡＮＳＩ Ｘ３Ｔ１１で標準化されたファイバチャネルを上位装置、磁気ディスク装置その他の記憶装置及び記憶制御装置のインターフェースとするコンピュータシステムに関し、コンピュータシステムのオンライン中に新たな記憶制御装置を追加し、記憶制御装置間の負荷の分散又は複数の記憶制御装置が行っていた機能の統合を可能とするデータ格納システムに関する。
【０００３】
【従来の技術】
記憶制御装置の増設に関しては特開平７−２０９９４号公報に大型計算機の記憶システムにおいて、当該記憶システム内での上位装置との接続アダプタ、ディスクドライブ装置との接続アダプタ及び共有キャッシュメモリの増設による規模拡張及び活線挿抜機能について記載されており、前記記憶システム内の内部バス上に前記上位装置との接続アダプタ、ディスクドライブ装置との接続アダプタ及び共有キャッシュメモリを順次増設していく手法を提案している。
【０００４】
上記特開平７−２０９９４号公報の技術は前記大型計算機の記憶システムで一般的に用いられている共有キャッシュメモリ方式を採用しており、前記上位装置との接続アダプタが内部バス上の共有キャッシュメモリに置かれたロジカルユニットの制御情報を逐次読込むことで、前記上位装置との接続アダプタ間でのロジカルユニットの制御情報の引継ぎ過程を必要とすることなく、任意のロジカルユニットへのアクセスを可能としている。
【０００５】
また、キャッシュメモリを個々に持つ記憶制御装置の多重化に関しては、特開平７−１６０４３２号公報に記憶制御装置の二重化を行い、片方の記憶制御装置を障害時のスタンバイ記憶制御装置として待機させておくことで記憶制御装置の冗長化を実現する手法について記載されている。さらに、特開平８−３３５１４４号公報に記憶制御装置の二重化による負荷分散及び記憶制御装置の障害発生時の冗長化について記載されている。
【０００６】
【発明が解決しようとする課題】
上記特開平７−２０９９４号公報の技術では、ロジカルユニットの制御情報を内部バス上の共有キャッシュメモリ上に格納してしまうため、１記憶システム筐体内での規模拡張しか行なえない。
【０００７】
上記特開平７−１６０４３２号公報及び特開平８−３３５１４４号公報の技術では、二重化する記憶制御装置において、予めオフライン時に各記憶制御装置を物理的に接続し、正常時及び障害時における各記憶制御装置が担当するロジカルユニットの設定を行なう必要があり、さらにロジカルユニットの制御情報を内部バスを用いて転送するため、初期設定に依存し、オンライン中の拡張性を持たない。
【０００８】
【課題を解決するための手段】
柔軟な機能拡張を行なうには、内部バスや共有キャッシュメモリの制限を受けないように、新たな記憶制御装置を追加するバス又は経路は上位装置との接続に使用されるインターフェースを用い、さらに追加する記憶制御装置が個々のキャッシュメモリを持ち、記憶装置の論理的まとまりであるロジカルユニット（１つの論理ドライブ又は複数の論理ドライブ群）の制御情報を前記キャッシュメモリへコピーすれば良い。
【０００９】
本発明では、ＡＮＳＩ Ｘ３Ｔ１１で標準化されたファイバチャネルを上位装置、磁気ディスク装置その他の記憶装置及び記憶制御装置のインターフェースとするデータ格納システムを構築する。
【００１０】
そして該システムにおいて、ファイバチャネルネットワーク上に新たな記憶制御装置をオンライン中に追加し、既存の記憶制御装置から制御情報を引継ぎ、新たに追加した記憶制御装置と既存の記憶制御装置との間の負荷分散を行う。
【００１１】
新たな記憶制御装置は、コンピュータシステムのオンライン中に既存のファイバチャネルネットワークへ追加されると、ファイバチャネルネットワーク上の既存の記憶制御装置から、ロジカルユニット単位で制御情報を、ファイバチャネルネットワークを経由して取得する（引継ぐ）手段又は機能を有する。制御情報の取得又は引継ぎ完了により、所定のロジカルユニットが追加された記憶制御装置の配下に入る。
【００１２】
追加された新たな記憶制御装置は、その配下に入ったロジカルユニットに対して、上位装置からコマンド処理要求があれば、これを処理する。こうして新たに追加された記憶制御装置と、既存の記憶制御装置との間の負荷分散を行う。
【００１３】
本発明の負荷分散は、ファイバチャネルネットワーク上の既存の複数の記憶制御装置が、オンライン中の負荷分散及び統合を行う手段又は機能を持たない場合であっても、適用可能である。尚、本発明を実施する場合には、既存の記憶制御装置に、制御情報の引継ぎを行う機能を設定する必要がある。
【００１４】
更に、ロジカルユニット単位の制御情報引継ぎに際し、オペレータがファイバチャネルネットワーク、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）その他のネットワークに接続された上位装置上で動作するマネージメントツールを用いて、又は、記憶制御装置のパネルを用いて、ロジカルユニットの引継ぎ開始や、引継ぎ中の動作モードを指定する手段又は機能を上位装置又は記憶制御装置に設け、新たな記憶制御装置の追加を適切なタイミングで行うことができる。
【００１５】
更に具体的には、新たにファイバチャネルネットワークへ接続された記憶制御装置は、ロジカルユニット単位の制御情報の引継ぎに際し、上位装置から記憶制御装置を一意に識別する情報であるＮ_Ｐｏｒｔアドレスを、前記ファイバチャネルネットワーク上に接続され且つ引継ぎ対象のロジカルユニットを所有している既存の記憶制御装置から引継ぐ手段又は機能を有する。これにより、上位装置から発っせられたコマンド処理要求の経路を変更しなくて済む。
【００１６】
本発明の記憶制御装置は、制御メモリを有し、当該制御メモリ上に、磁気ディスク装置その他の記憶装置の種別、記憶装置の記憶容量、ブロック数、各記憶装置の状態及びＲＡＩＤ（Ｒｅｄｕｎｄａｎｔ Ａｒｒａｙｓ ｏｆ Ｉｎｅｘｐｅｎｓｉｖｅ Ｄｉｓｋｓ）構成情報を格納する物理ドライブ制御テーブルやロジカルユニットの先頭ＬＢＡ（Ｌｏｇｉｃａｌ Ｂｌｏｃｋ Ａｄｄｒｅｓｓ）及び最後尾ＬＢＡを格納するロジカルユニット制御テーブルに代表されるロジカルユニット引継ぎの際に必要となる制御情報を記憶する手段又は機能を有する。
【００１７】
そして、同一ファイバチャネルネットワーク上に新たに追加される記憶制御装置は前記ファイバチャネルネットワーク上に既に存在していた記憶制御装置上の制御メモリから前記制御情報を当該新たに追加される記憶制御装置の制御メモリ上にコピーする手段又は機能を有する。
【００１８】
記憶制御装置上の前記制御メモリは揮発性メモリであっても良いが、通常は、不揮発性メモリとする。また、制御メモリの内容（制御テーブル上の設定情報ほか）をファイバチャネルネットワークに接続された磁気ディスク装置その他の記憶装置へ書き込むことで、制御メモリを不揮発性としたのと同様の効果が得られる。つまり、万一、電源の瞬断が生じても、記憶制御装置は、当該設定情報の再設定が行われるまでは、恒久的に設定情報を維持することができる。
【００１９】
また、本発明のロジカルユニット単位で制御情報をオンライン中に引継ぐことを用いれば、複数の記憶制御装置が行なっていたいくつかの処理を、任意の記憶制御装置へ統合することもできる。
【００２０】
新たな記憶制御装置の追加の仕方については、１）新たな記憶制御装置をファイバチャネルネットワークへ物理的に接続した後、２）当該記憶制御装置側からファイバチャネルネットワークに対してリンクリセットを発行し、ファイバチャネルネットワーク内への論理的なログインを行う。３）その後、オペレータがファイバチャネルネットワークへ接続された上位装置上のマネージメントツールから、又は、記憶制御装置のパネルから、新たに追加された記憶制御装置の認識を行い、４）新たに追加された記憶制御装置が担当するロジカルユニットの指定、ロジカルユニットの引継ぎ開始の指示及びファイバチャネルネットワークに既に存在する記憶制御装置に対して当該ロジカルユニットの引継ぎ中に上位装置から処理要求があった場合の応答方法を設定し、５）ファイバチャネルネットワーク上に既に存在していた記憶制御装置から新たに追加した記憶制御装置に対して、ロジカルユニットの制御情報の転送を行なわせる。６）更に、前記ファイバチャネルネットワーク上に既に存在していた記憶制御装置において、上位装置から記憶制御装置を一意に識別する情報であるＮ＿Ｐｏｒｔアドレスを複数設定しておき、７）ファイバチャネルネットワークへ新たに追加された記憶制御装置が前記Ｎ＿Ｐｏｒｔアドレスの一部を引継ぐことにより、上位装置からのコマンド処理要求経路の変更を不要とする。８）更に、コンピュータシステムのオンライン中にファイバチャネルネットワーク上に存在する記憶制御装置が同一ファイバチャネルネットワークに接続された別の記憶制御装置からロジカルユニット単位で制御情報を引継ぎ、９）これ以降の上位装置から当該引き継いだロジカルユニットに対して行われるコマンド処理要求を担当し、１０）ファイバチャネルネットワーク上に存在する記憶制御装置間の負荷分散を行う。１１）必要に応じ、複数の記憶制御装置が行なっていたいくつかの処理を、任意の記憶制御装置へ統合することを、ロジカルユニットの制御情報をオンライン中に引継ぐ技術を適用して行う。
【００２１】
【発明の実施の形態】
本発明の一実施例を図面を用いて以下に説明する。尚、記憶装置として磁気ディスク装置（以下、ディスクドライブ装置と記す）のみを用いた実施例としたが、光ディスク装置、テープ記憶装置であっても良い。
【００２２】
図１は本発明の一実施形態であり、ファイバチャネルネットワークにＦＣ−ＡＬ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ａｒｂｉｔｒａｔｅｄ Ｌｏｏｐ ）の接続形態（トポロジ）を採用した場合のハードウェア構成図である。
【００２３】
図１において、１０はデータ処理を行う中央処理装置（ＣＰＵ）をもつ上位装置である。６０はＦＣ−ＡＬ・トポロジで動作し、ＦＣ−ＡＬハブにて各種装置が接続されたファイバチャネルネットワークである。
【００２４】
２０は上位装置Ａ（１０）からのデータを格納しておくディスクドライブ装置であり、複数の磁気ディスクドライブで構成される。ディスクドライブ装置２０を構成する複数のディスクドライブを論理的に分割し、分割した区画を任意のＲＡＩＤレベルに定義することで、ディスクドライブ障害時における冗長性を持たせ、ディスクドライブ障害時におけるデータ消失を防ぐことができる。この区画をＲＡＩＤグループと呼ぶ。このＲＡＩＤグループをさらに論理的に分割したＳＣＳＩ（Ｓｍａｌｌ Ｃｏｍｐｕｔｅｒ Ｓｙｓｔｅｍ Ｉｎｔｅｒｆａｃｅ）のアクセス単位である領域をロジカルユニットと呼び、この領域はＬＵＮ（Ｌｏｇｉｃａｌ Ｕｎｉｔ Ｎｕｍｂｅｒ）という番号をもつ。本実施例ではディスクドライブ装置２０はロジカルユニット０（２１）及びロジカルユニット１（２２）を持っているが、ロジカルユニットの個数は図１に示す２個でなくても良い（ＳＣＳＩ−３規格に準拠したファイバチャネルではファイバチャネルＩＤ毎に最大６４個のロジカルユニットを持つことができる）。また、図１ではディスクドライブ装置が１個の場合の例を示しているが、ファイバチャネルネットワーク上にディスクドライブ装置が複数あってもかまわない。複数のディスクドライブ装置からなる大容量のデータ格納システムでは記憶制御装置の処理能力不足に陥ることが多々あり、本発明はコンピュータシステムが記憶制御装置の処理能力不足に陥った際に特に有効である。
【００２５】
３０、４０は上位装置Ａ（１０）とディスクドライブ装置２０の間に論理的に介在し、上位装置Ａ（１０）とディスクドライブ装置２０間の情報（データ）の授受を制御する記憶制御装置である。特に、記憶制御装置３０は本発明で必要となるファイバチャネル上に既に存在していた記憶制御装置を示し、記憶制御装置４０は新たに追加される記憶制御装置を示す。図１では記憶制御装置３０及び４０が各々１装置となっているが、記憶制御装置３０、４０は複数あっても良い。また、図２において示される記憶制御装置３０、４０の内部構成図において、３１はファイバチャネルネットワーク上でのデータ転送を制御し、さらに上位装置１０から送られてくるコマンドの解析を行い、データをキャッシュ制御部３４へＤＭＡ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）転送するファイバチャネル制御部である。３２は記憶制御装置の動作を制御するマイクロプログラム及びロジカルユニット引継ぎ時に必要となる制御情報を格納する不揮発性の制御メモリである。３３は記憶制御装置全体を制御する中央処理装置（ＣＰＵ）である。３４はキャッシュへのデータの読み書きを制御するキャッシュ制御部、３５はディスクドライブ装置２０への書込みデータ及び読み出しデータを一時的に格納しておくキャッシュである。３６は記憶制御装置の動作設定を変更及び参照するパネルである。
【００２６】
５０は記憶制御装置３０、４０の動作を制御するマネージメントツールをもつ上位装置である。本実施例では上位装置Ｂ（５０）にマネージメントツールを持たせているが、マネージメントツールは上位装置Ａ（１０）にあってもかまわない。さらに、マネージメントツールを搭載する上位装置Ｂ（５０）と記憶制御装置３０、４０のインターフェースはＬＡＮその他の遠隔操作が可能なネットワークシステムであっても良い。
【００２７】
次に、上位装置Ａ（１０）が記憶制御装置３０経由でディスクドライブ装置２０とデータ転送を行う場合を例にとり、制御の流れ、データの流れを説明する。上位装置Ａ（１０）がアクセス要求を出すと、その要求を認識したファイバチャネル制御部３１はＣＰＵ３３に対して割り込み要求を発行する。ＣＰＵ３３は、上位装置Ａ（１０）からのコマンドを解析し、制御メモリ３２内にある磁気ディスクドライブの記憶容量、ブロック数、各磁気ディスクドライブの状態及びＲＡＩＤ構成情報を格納する物理ディスクドライブ制御テーブルやロジカルユニットの先頭ＬＢＡ（Ｌｏｇｉｃａｌ Ｂｌｏｃｋ Ａｄｄｒｅｓｓ）及び最後尾ＬＢＡを格納するロジカルユニット制御テーブルから情報を読み出す。
【００２８】
上位装置Ａ（１０）からのアクセス要求がライトコマンドの場合は、ＣＰＵ３３はファイバチャネル制御部３１にデータ転送を指示し、上位装置Ａ（１０）から転送されたライトデータをキャッシュ制御部３４を経由してキャッシュ３５に格納し、上位装置Ａ（１０）に対して、ファイバチャネル制御部３１がライト完了報告を行う。ライト完了報告後、ＣＰＵ３３はファイバチャネル制御部３１を制御し、ファイバチャネルネットワークを介してディスクドライブ装置のロジカルユニット２１または２２へ前記ライトデータ及び冗長データを書き込む。この時、ライトデータを格納するロジカルユニットのＲＡＩＤレベルがＲＡＩＤ５であった場合、ライトデータを格納するために行われる旧データと旧冗長データの読み出し処理、新冗長データの生成処理及び前記ライトデータと新冗長データの格納処理という記憶制御装置３０及びディスクドライブ装置２０に対して非常に負荷の高い処理を必要とする。これをＷｒｉｔｅペナルティと呼ぶ。このＷｒｉｔｅペナルティ処理においては、ディスクドライブ装置２０へのアクセスが多数発生することも性能劣化の一因となるが、それ以前にディスクドライブ装置２０を制御する記憶制御装置３０のマイクロプログラムの実行に多大な時間を要し、記憶制御装置３０のＣＰＵ３３が処理能力不足になることも多い。本発明ではオンライン中に記憶制御装置４０を増設することで、記憶制御装置３０の処理能力不足を解消する効果がある。
【００２９】
一方、上位装置Ａ（１０）からのアクセス要求がリードコマンドの場合は、ＣＰＵ３３は、ファイバチャネル制御部３１に指示を出し、当該アクセス要求のデータブロックが格納されたディスクドライブ装置２０内のロジカルユニット２１、２２へアクセスしてデータを読み出し、キャッシュ制御部３４を経由してキャッシュ３５へリードデータを格納する。キャッシュ３５にリードデータを格納した後、ＣＰＵ３３はファイバチャネル制御部３１に指示を出し、キャッシュ３５に格納したリードデータを上位装置Ａ（１０）に転送し、転送終了後、上位装置Ａ（１０）へリード完了報告を行なう。
【００３０】
次にファイバチャネルネットワーク６０の特長を説明する。ファイバチャネルは最大１０ｋｍのデータ転送距離及び最大１００ＭＢ/ｓのデータ転送速度を実現する長距離、高速インタフェースである。また、ファイバチャネルは上位論理層に位置するＳＣＳＩ、ＩＰ、ＩＰＩ等の種々のプロトコルを下位論理層のファイバチャネルプロトコルにマッピングする機能を持っており、上位装置Ａ（１０）からはＳＣＳＩやＩＰのように異なったプロトコルを持つデバイスを同一のファイバチャネルネットワークに接続し、データ転送を行なうことができる。 即ち、他のインタフェースと論理的に互換性を持つ。
【００３１】
ファイバチャネルでは３つの接続形態（トポロジ）が定義されている。一つ目は上位装置とデバイスが一対一に接続されるポイント・ツー・ポイント・トポロジである。二つ目は複数の上位装置とデバイスが一つのループを形成して接続されるＦＣ−ＡＬ・トポロジである。ＦＣ−ＡＬ接続はＦＣ−ＡＬハブと呼ばれる装置を介して接続される。三つ目はファブリック・トポロジであり、Ｆａｂｒｉｃスイッチと呼ばれる装置を介して上位装置とデバイスがスター状に配置される。
【００３２】
図１で示す本実施例はファイバチャネルネットワークにＦＣ−ＡＬ・トポロジを採用し、さらにファイバチャネルネットワーク上に接続された各種装置はＳＣＳＩマッピングプロトコルを用いて動作するコンピュータシステムであるが、図３で示すようにＦａｂｒｉｃスイッチを用いて各種装置を接続し、Ｆａｂｒｉｃ・トポロジで動作する構成も考えられる。また、図１においてはファイバチャネルネットワークが１個のＦＣ−ＡＬループを形成しているが、図４で示すように複数のＦＣ−ＡＬハブを用いてファイバチャネルネットワークを複数のＦＣ−ＡＬループで形成し、さらに上位装置Ａ（１０）と記憶制御装置３０、４０間のファイバチャネルネットワークと記憶制御装置３０、４０とディスクドライブ装置２０間のファイバチャネルネットワークを異なるループとし、ロジカルユニット制御情報の引継ぎにおいては上位装置Ａ（１０）と記憶制御装置３０、４０間のファイバチャネルネットワークと記憶制御装置３０、４０とディスクドライブ装置２０間のファイバチャネルネットワークの双方の引継ぎが必要なコンピュータシステムも考えられる。
【００３３】
ファイバチャネル上の情報のやりとりはＯｒｄｅｒｅｄ Ｓｅｔと呼ばれる信号レベルの情報と、フレームと呼ばれる固定フォーマットを持った情報を用いて行われる。Ｏｒｄｅｒｅｄ Ｓｅｔの代表的なものにはフレームの先頭を識別するために使用するＳＯＦ（Ｓｔａｒｔ Ｏｆ Ｆｒａｍｅ）、フレームの最後尾を識別するために使用するＥＯＦ（Ｅｎｄ Ｏｆ Ｆｒａｍｅ）、ループ上をフレームが転送されていない事を示すＩｄｌｅ、ＦＣ−ＡＬ・ループ初期化開始要求に使用するＬＩＰ（Ｌｏｏｐ Ｉｎｉｔｉａｌｉｚａｔｉｏｎ）等の信号がある。
【００３４】
次にファイバチャネルがデータのやりとり行なう基本単位であるフレームについて説明を行なう。フレームは機能に基づいてデータフレームとリンク制御フレームとに大別される。データフレームは情報を転送するために用い、データフィールドのペイロード部にＳＣＳＩ等の上位プロトコルで使用するデータ、コマンドを搭載する。
【００３５】
一方、リンク制御フレームは一般にフレーム配信の成功あるいは不成功を示すのに使われる。フレームを受領したことを示すＡＣＫフレームやログインする場合に転送に関するパラメータを通知したりするフレーム等がある。
【００３６】
フレームのフォーマットについて、図５を用いて説明を行なう。フレーム７０は、ＳＯＦ７１、フレームヘッダ７２、データフィールド７３、ＣＲＣ７４、ＥＯＦ７５で構成される。
【００３７】
ＳＯＦ（Ｓｔａｒｔ Ｏｆ Ｆｒａｍｅ）７１はフレームの先頭に置く４バイトの識別子である。ＥＯＦ（Ｅｎｄ Ｏｆ Ｆｒａｍｅ）７５はフレームの最後につける４バイトの識別子で、ＳＯＦ７１とＥＯＦ７５によりフレームの境界を示す。
【００３８】
フレームヘッダ７２はフレームタイプ、上位プロトコルタイプ、送信元と送信先のＮ＿Ｐｏｒｔアドレス情報を含む。Ｎ＿Ｐｏｒｔアドレスはファイバチャネルネットワークに接続される上位装置１０、５０及び記憶制御装置３０、４０等のアドレスを表わす。
【００３９】
データフィールド７３の先頭部には上位レイヤのヘッダを置くことができる。これにデータそのものを運ぶペイロード部が続く。ＣＲＣ（Ｃｙｃｌｉｃ Ｒｅｄｕｎｄａｎｃｙ Ｃｈｅｃｋ）７４はフレームヘッダとデータフィールドのデータをチェックするための、４バイトのチェックコードである。
【００４０】
次に図６にフレームヘッダのフォーマットを示す。フレームヘッダ８０のＤ＿ＩＤ（Ｄｅｓｔｉｎａｔｉｏｎ ＩＤ）８１はフレーム受け取り側の、また、Ｓ＿ＩＤ（Ｓｏｕｒｃｅ ＩＤ）８２はフレーム送信側のＮ＿Ｐｏｒｔアドレスである。ＦＣ−ＡＬ・トポロジでは２４ビットのＮ＿Ｐｏｒｔアドレスの内、下位８ビットを用いてアドレスを示し、特にＦＣ−ＡＬのＮ＿ＰｏｒｔアドレスをＡＬ−ＰＡ（Ａｒｂｉｔｒａｔｅｄ Ｌｏｏｐ Ｐｈｙｓｉｃａｌ Ａｄｄｒｅｓｓ）と呼ぶ。
【００４１】
次にフレームを構成するデータフィールド７３のペイロードの一部であるＦＣＰ＿ＣＭＮＤ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ｐｒｏｔｏｃｏｌ ｆｏｒ ＳＣＳＩＣｏｍｍａｎｄ）及びＦＣＰ＿ＲＳＰ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ｐｒｏｔｏｃｏｌ ｆｏｒ ＳＣＳＩ Ｒｅｓｐｏｎｓｅ）について説明する。
【００４２】
ＦＣＰ＿ＣＭＮＤのフォーマットを図７に示す。ＦＣＰ＿ＬＵＮ（ＦＣＰ Ｌｏｇｉｃａｌ Ｕｎｉｔ Ｎｕｍｂｅｒ）フィールド９１にはコマンドを発行するロジカルユニット番号が指定される。ＦＣＰ＿ＣＮＴＬ（ＦＣＰ Ｃｏｎｔｒｏｌ）９２にはコマンド制御パラメータが指定される。
【００４３】
ＦＣＰ＿ＣＤＢ（ＦＣＰ Ｃｏｍｍａｎｄ Ｄｉｓｃｒｉｐｔｏｒ Ｂｌｏｃｋ）９３にＳＣＳＩインターフェースでのコマンド授受に用いられるＳＣＳＩ ＣＤＢが格納され、Ｏｐｅｒａｔｉｏｎ Ｃｏｄｅ９５ではＩｎｑｕｉｒｙやＲｅａｄ、Ｗｒｉｔｅ、Ｍｏｄｅ ｓｅｎｓｅ、Ｍｏｄｅ Ｓｅｌｅｃｔコマンド等を示す番号が格納される。さらにＬＵＮや論理ブロックアドレス、転送ブロック長等の情報も格納される。ＦＣＰ＿ＤＬ（ＦＣＰ Ｄａｔａ Ｌｅｎｇｔｈ）９４には本コマンドで転送されるデータ量がバイト数で指定される。このように構成されたフレームによってファイバチャネルネットワーク上でＳＣＳＩコマンドのやりとりが行われる。
【００４４】
ＦＣＰ＿ＲＳＰのフォーマットを図８に示す。ＦＣＰ＿ＲＳＰ１００はＦＣＰ＿ＣＭＮＤで指示されたＳＣＳＩコマンドの動作の結果を報告するために使用される。ＦＣＰ＿ＳＴＡＴＵＳ１０１にはコマンドが正常に完了したことを報告するＧｏｏｄステータス、コマンドが異常終了したことを示すＣｈｅｃｋ Ｃｏｎｄｉｔｉｏｎステータス、デバイスが上位装置からのコマンドを受け付けられない状態にあることを示すＢｕｓｙステータス等のＳＣＳＩステータスが格納される。
【００４５】
次に、ＦＣＰ＿ＣＭＮＤ９０におけるＩｎｑｕｉｒｙ、Ｍｏｄｅ Ｓｅｎｓｅ、Ｍｏｄｅ Ｓｅｌｅｃｔの役割について説明する。図９にＩｎｑｕｉｒｙコマンドのシーケンスを示す。Ｉｎｑｕｒｙコマンドは上位装置１０、５０がファイバチャネルネットワークに接続された各種装置のデバイスタイプやサポートしている機能、装置のメーカ名、製品名を調べるために使用される。これらの情報はＩｎｑｕｉｒｙコマンドを受領した記憶制御装置３０、４０が上位装置１０、５０に対して送信するＩｎｑｕｉｒｙデータに格納されている。
【００４６】
図１０にＭｏｄｅ Ｓｅｎｓｅコマンドのシーケンスを示す。Ｍｏｄｅ Ｓｅｎｓｅコマンドは上位装置１０、５０がファイバチャネルネットワークに接続している各種装置のパラメータを参照するために使用される。Ｍｏｄｅ Ｓｅｎｓｅコマンドで参照できるページは複数の固定ページとベンダユニークページが存在し、Ｐａｇｅ Ｃｏｄｅにて参照するページを指定できる。これらの情報はＭｏｄｅ Ｓｅｎｓｅコマンドを受領した記憶制御装置が送信するＭｏｄｅ Ｓｅｎｓｅデータに格納されている。
【００４７】
一方、図１１で示すＭｏｄｅ Ｓｅｌｅｃｔコマンドは前記Ｍｏｄｅ Ｓｅｎｓｅコマンドで参照できるパラメータを変更するためのコマンドである。パラメータを変更するには変更したいページをＰａｇｅ Ｃｏｄｅにて指定し、Ｍｏｄｅ Ｓｅｌｅｃｔパラメータリストを記憶制御装置に対して送信すれば良い。
【００４８】
次に、本発明において、記憶制御装置間でのロジカルユニットの引継ぎを行なう場合に必要となる情報を格納した制御メモリ３２について説明を行なう。制御メモリ３２は不揮発メモリであり、万一の電源瞬断時にも格納された情報を恒久的に維持することができる。
【００４９】
制御メモリ３２には記憶制御装置３０、４０の動作を制御するマイクロプログラムの他に、物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０が格納されている。物理ディスクドライブ制御テーブルのフォーマットを図１２で示す。物理ディスクドライブ制御テーブル１１０において、物理ディスクドライブ番号１１１はディスクドライブ装置内の磁気ディスクドライブに一意に割り当てられた番号である。物理ディスクドライブ位置１１２は当該磁気ディスクドライブの位置を示す論理的なアドレスを格納している。記憶容量１１３及びブロック数１１４は当該磁気ディスクドライブの全記憶容量及び全ブロック数を、ＲＡＩＤグループ番号１１５は当該磁気ディスクドライブが所属するＲＡＩＤグループ番号を格納している。また、状態１１６は当該磁気ディスクドライブが使用可能なオンライン状態か、または使用不可能な閉塞状態かを示す情報が格納されている。また、記憶装置の種類１１７はファイバチャネルネットワーク６０上の記憶装置が磁気ディスク装置、光ディスク装置、光磁気ディスク装置、磁気テープ装置、または各種ライブラリ装置のいずれであるかを識別するために用いる。
【００５０】
ロジカルユニット制御テーブルのフォーマットを図１３で示す。ロジカルユニット制御テーブル１２０において、ロジカルユニット番号１２１はディスクドライブ装置内のロジカルユニットに対して一意に割り当てられる番号である。ＲＡＩＤグループ番号は当該ロジカルユニットが所属するＲＡＩＤグループ番号であり、ＲＡＩＤレベル１２３はそのＲＡＩＤレベルである。先頭アドレス１２４及び最終アドレス１２５は当該ロジカルユニットのＲＡＩＤグループでの位置を示すために使用する先頭ロジカルブロックアドレス及び最終のロジカルブロックアドレスである。前記制御メモリ３２内の物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０の情報は他の装置が発行するＭｏｄｅ Ｓｅｎｓｅコマンドによる参照、及びＭｏｄｅ Ｓｅｌｅｃｔコマンドによるパラメータ変更が可能とする。
【００５１】
次に本発明における、ファイバチャネルネットワーク６０への新たな記憶制御装置４０のオンライン中の追加及びロジカルユニットの引継ぎ処理手順を示す。この処理手順は記憶制御装置４０の動作シーケンスと上位装置Ｂ（５０）に搭載されたマネージメントツールの動作シーケンスに大別される。図１４に記憶制御装置４０の動作シーケンス、図１５に上位装置Ｂ（５０）に搭載されたマネージメントツールの動作シーケンスを示す。
【００５２】
まず、ファイバチャネルネットワーク６０への記憶制御装置４０の追加及びＡＬ−ＰＡ確定手順について説明する。ファイバチャネルネットワーク６０を構成するＦＣ−ＡＬハブと新たに追加する記憶制御装置４０をファイバチャネルケーブルで接続した後、新たに追加する記憶制御装置４０の電源を投入する（オン）。電源をオンにすることで、記憶制御装置４０はリンク初期化処理を実行し、ファイバチャネルネットワーク６０上をフレームの送受信可能な状態にする。
【００５３】
次に、新たに追加された記憶制御装置４０はループ初期化処理を実行する。ＦＣ−ＡＬ・トポロジをもつファイバチャネルネットワークに新たに追加された記憶制御装置４０は電源投入時には有効なＡＬ−ＰＡを持っていない。そこで、新たに追加された記憶制御装置４０がループ初期化処理を実行することで有効なＡＬ−ＰＡが割り当てられる。ＡＬ−ＰＡが確定した記憶制御装置４０は一旦処理を停止し、上位装置Ｂ（５０）に搭載されたマネージメントツールからの指示を待つ。
【００５４】
次に、前記マネージメントツールの動作について説明を行なう。前記マネージメントツールは図１６で示すマネージメントツール管理テーブル１３０をファイル形式で所有している。前記マネージメントツール管理テーブル１３０はファイバチャネルネットワーク６０上に接続されている記憶制御装置３０のＡＬ−ＰＡ１３１及び担当ＬＵＮ１３２の情報が格納されている。
【００５５】
前記マネージメントツールはファイバチャネルネットワーク６０へ新たに追加された記憶制御装置４０のＡＬ−ＰＡを入手するために、 ＦＣＰ＿ＣＭＮＤ９０の１種であるＩｎｑｕｉｒｙコマンドをファイバチャネルネットワーク６０上に接続された全ての装置に対して発行する。そして、その応答であるＩｎｑｕｉｒｙデータに格納された装置のメーカ名及び製品名を調べ、さらにフレーム送信側のＡＬ−ＰＡを参照し、マネージメントツール管理テーブル１３０に登録されていない装置を見つける。これにより、新規に追加された記憶制御装置４０のＡＬ−ＰＡが特定でき、そのＡＬ−ＰＡをマネージメントツール管理テーブル１３０に新規に書き込む。
【００５６】
新規に追加された記憶制御装置４０のＡＬ−ＰＡが特定されると、マネージメントツールは記憶制御装置４０に対して、引継ぎを行なうロジカルユニット、当該ロジカルユニットを担当していた記憶制御装置３０のＡＬ−ＰＡ及び当該ロジカルユニットを担当していた記憶制御装置３０のロジカルユニット引継ぎ中の動作モードの指示を行なう。
【００５７】
上記に示したマネージメントツールの役割は記憶制御装置４０及び記憶制御装置４０に搭載されるパネル３６を用いて実現することも可能である。この場合はオペレータが記憶制御装置４０へ引継がせたいロジカルユニットをパネル３６を用いて入力し、当該ロジカルユニットを担当している記憶制御装置３０をＩｎｑｕｉｒｙコマンドを用いて探し出す。そして、引継ぎ対象のロジカルユニットを所有している記憶制御装置３０のＡＬ−ＰＡを記憶しておけば良い。また、引継ぎを行なうロジカルユニット及び当該ロジカルユニットを担当していた記憶制御装置３０のロジカルユニット引継ぎ中の動作モードはオペレータによってパネル３６を用いて入力される。
【００５８】
次に、引継ぎを行なうロジカルユニットが決定した記憶制御装置４０はロジカルユニット引継ぎ処理に入る。まず、記憶制御装置４０は記憶制御装置３０に対してＦＣＰ＿ＣＭＮＤの１種であるＭｏｄｅ Ｓｅｎｓｅコマンドを発行し、当該ロジカルユニットの状態を調べる。当該ロジカルユニットの状態が正常であれば引継ぎ処理に入るが、ロジカルユニットが使用不可能な閉塞状態であった場合はマネージメントツールを持つ上位装置Ｂ（５０）またはパネル３６を使ってオペレータへ通知する。
【００５９】
次に、当該ロジカルユニットを担当していた記憶制御装置３０のロジカルユニット引継ぎ中の動作モードの設定方法を説明する。これは記憶制御装置４０がＦＣＰ＿ＣＭＮＤの１種であるＭｏｄｅ Ｓｅｌｅｃｔコマンドを発行することで、記憶制御装置３０の設定変更を行なう。これ以降、ロジカルユニット引継ぎ中に上位装置が記憶制御装置３０に対して行なう当該ロジカルユニットへの処理要求に対して、記憶制御装置３０はＦＣＰ＿ＲＥＰ１００にてＢｕｓｙステータスを返す。ここで、上位装置からのコマンド処理要求に対してＢｕｓｙステータスで応答し続けた場合、上位装置のコマンド処理要求がタイムアウトになる恐れがあるため、ロジカルユニット引継ぎ処理の時間はタイムアウトとならない範囲で行なわせる。
【００６０】
次に、記憶制御装置３０は当該ロジカルユニットに対して、上位装置から処理要求を受領したがまだ処理を行なっていないコマンド（キューイングコマンド）があった場合はそのコマンドの処理を実行し、さらに、当該キャッシュ上に残っていた当該ロジカルユニットに対する全てのＷｒｉｔｅデータをディスクドライブ装置２０へ書き込む。これにより、ロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移った場合でもディスクドライブ装置２０内のデータの整合性が保証される。
【００６１】
次に、記憶制御装置４０は記憶制御装置３０から記憶制御装置４０へ当該ロジカルユニット引継ぎ時に必要な物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０の格納された制御メモリ３２の内容を記憶制御装置３０からコピーする。この制御メモリ３２のコピーは記憶制御装置４０が記憶制御装置３０へＦＣＰ＿ＣＭＮＤ９０の１種であるＭｏｄｅ Ｓｅｎｓｅコマンドを発行し、記憶制御装置３０の制御メモリ３２の情報を読み出し、その内容を記憶制御装置４０の制御メモリ３２へ書き込むことで実現する。
【００６２】
記憶制御装置４０はロジカルユニットの引継ぎ時に必要な物理ディスクドライブ制御テーブル１１０及びロジカルユニット制御テーブル１２０の情報を受領すると、コマンド処理可能な状態にするために内部処理を実行し、上位装置１０からのコマンド処理要求に備える。上位装置１０からは当該ロジカルユニットのアクセス経路を既に存在していた記憶制御装置３０から新たに追加された記憶制御装置４０へ変更することで継続して処理を行なうことができる。さらに、上記で示した記憶制御装置３０、４０間でロジカルユニットの制御情報をオンライン中に引継ぐ手法は、コンピュータシステムのオンライン中にファイバチャネルネットワーク上に存在する記憶制御装置が同一ファイバチャネルネットワークに接続された別の記憶制御装置からロジカルユニット単位で制御情報を引継ぎ、これ以降の上位装置から当該ロジカルユニットに対して行われるコマンド処理要求を担当し、ファイバチャネルネットワーク上に存在する記憶制御装置間の負荷分散及び複数からなる記憶制御装置が行なっていたいくつかの処理を任意の記憶制御装置へ統合する手段にも適用可能である。
【００６３】
次に、ロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移った場合に、オペレータによる上位装置からのアクセス経路の変更を不要とする方法を説明する。図１７に示すように、記憶制御装置は予め担当しているロジカルユニットと同数のファイバチャネルアダプタを搭載し、各々にＡＬ−ＰＡを設定しておく。各々のＡＬ−ＰＡは担当するロジカルユニットと組みにして管理する。ロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移動した場合、ロジカルユニットの制御情報だけでなく、ロジカルユニットと組になっているＡＬ−ＰＡも引継がせる。これにより、上位装置からはロジカルユニットの担当が記憶制御装置３０から記憶制御装置４０へ移ったこと認識しないため、当該ロジカルユニット引継ぎ以前と同様に処理要求を行なうことができ、アクセス経路変更は不要となる。
【００６４】
このように、本発明を応用することにより、ファイバチャネルネットワーク６０へ記憶制御装置４０をオンライン中に追加し、記憶制御装置間の負荷分散を行うことが可能である。さらに同手法はファイバチャネルネットワーク６０上の複数の記憶制御装置が担当するロジカルユニットを自由に替えていくことが可能であり、既存の記憶制御装置間での負荷分散及び統合が実現できる。
【００６５】
【発明の効果】
本発明は、ファイバチャネルネットワークに接続された既存の記憶制御装置に対し、当該ファイバチャネルネットワーク上に新たな記憶制御装置をオンライン中に追加し、ロジカルユニットの処理担当を引継がせることで、記憶制御装置間の負荷分散、処理の統合を行うことができ、データ格納システム全体の処理能力の向上が図れる。
【００６６】
具体的には、ＡＮＳＩ Ｘ３Ｔ１１で標準化されたファイバチャネルネットワークに接続された既存の記憶制御装置が処理能力不足に陥った場合に、新たな記憶制御装置をコンピュータシステムのオンライン中に追加でき、負荷分散が図れる。
【００６７】
また、本発明は、ＦＣ−ＡＬ（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ａｒｂｉｔｒａｔｅｄ Ｌｏｏｐ）トポロジで最大１２７台、Ｆａｂｒｉｃトポロジで約１７００万台の装置を接続でき、さらにオンライン中にファイバチャネルネットワークへ装置を物理的に接続し、装置側からリンクリセットを発行することにより自動的にファイバチャネルネットワーク内へのログインが可能であるという特長をもつファイバチャネルをインターフェースとして採用することで、２台の記憶制御装置のみならず、オンライン中に複数台の記憶制御装置の追加が可能であり、初期設定にとらわれない柔軟なデータ格納システムの拡張を行なうことができる。
【図面の簡単な説明】
【図１】本発明の一実施形態を示すハードウエア構成図である。
【図２】実施形態における記憶制御装置の内部ハードウェア構成図である。
【図３】ファイバチャネルネットワークにＦａｂｒｉｃ・トポロジを採用したハードウェア構成図である。
【図４】ファイバチャネルネットワークに複数のＦＣ−ＡＬループを用いたハードウェア構成図である。
【図５】実施形態におけるファイバチャネルがデータをやりとりする基本単位であるフレームのフォーマットを示した図である。
【図６】図５で示したフレームを構成するフレームヘッダのフォーマットを示した図である。
【図７】図５で示したフレームの一構成要素であるＦＣＰ＿ＣＭＮＤのペイロードのフォーマット及び当該ペイロードを構成するＦＣＰ＿ＣＤＢのフォーマットを示した図である。
【図８】図５で示したフレームの一構成要素であるＦＣＰ＿ＲＳＰのペイロードのフォーマットを示した図である。
【図９】Ｉｎｑｕｉｒｙコマンドのシーケンスを示した図である。
【図１０】Ｍｏｄｅ Ｓｅｎｓｅコマンドのシーケンスを示した図である。
【図１１】Ｍｏｄｅ Ｓｅｌｅｃｔコマンドのシーケンスを示した図である。
【図１２】実施形態における記憶制御装置内部の制御メモリに格納される物理ディスクドライブ制御テーブルのフォーマットを示した図である。
【図１３】実施形態における記憶制御装置内部の制御メモリに格納されるロジカルユニット制御テーブルのフォーマットを示した図である。
【図１４】実施形態におけるファイバチャネルネットワークに新規に追加した記憶制御装置の動作シーケンスを示すフローチャートである
【図１５】実施形態における上位装置に搭載されるマネージメントツールの動作シーケンスを示すフローチャートである
【図１６】実施形態における上位装置に搭載されるマネージメントツールの管理情報を格納するマネージメントツール管理テーブルのフォーマットを示した図である。
【図１７】実施形態において、記憶制御装置間でロジカルユニット引継ぎが行われた後、上位装置からのアクセス経路の変更を不要とすることを実現したデータ格納システム構成図である。
【符号の説明】
１０ 上位装置Ａ ２０ ディスクドライブ装置
２１ ロジカルユニット０ ２２ ロジカルユニット１
３０ 記憶制御装置 ３１ ファイバチャネル制御部
３２ 制御メモリ ３３ ＣＰＵ
３４ キャッシュ制御部 ３５ キャッシュ
３６ パネル ４０ 記憶制御装置（新規追加）
５０ 上位装置Ｂ（マネージメントツール）
６０ ファイバチャネルネットワーク（ＦＣ−ＡＬ）
７０ フレームのフォーマット
７１ ＳＯＦ（Ｓｔａｒｔ Ｏｆ Ｆｒａｍｅ）
７２ フレームヘッダ ７３ データフィールド
７４ ＣＲＣ（Ｃｙｃｌｉｃ Ｒｅｄｕｎｄａｎｃｙ Ｃｈｅｃｋ）
７５ ＥＯＦ（Ｅｎｄ Ｏｆ Ｆｒａｍｅ）
８０ フレームヘッダのフォーマット
８１ Ｄ＿ＩＤ（Ｄｅｓｔｉｎａｔｉｏｎ ＩＤ）
８２ Ｓ＿ＩＤ（Ｓｏｕｒｃｅ ＩＤ）
９０ ＦＣＰ＿ＣＭＮＤペイロード
（Ｆｉｂｒｅ Ｃｈａｎｎｅｌ Ｐｒｏｔｏｃｏｌ ｆｏｒ ＳＣＳＩ
Ｃｏｍｍａｎｄ）
９１ ＦＣＰ＿ＬＵＮ（ＦＣＰ Ｌｏｇｉｃａｌ Ｕｎｉｔ Ｎｕｍｂｅｒ）
９２ ＦＣＰ＿ＣＮＴＬ（ＦＣＰ Ｃｏｎｔｒｏｌ）
９３ ＦＣＰ＿ＣＤＢ
（ＦＣＰ Ｃｏｍｍａｎｄ Ｄｅｓｃｒｉｐｔｏｒ Ｂｌｏｃｋ）
９４ ＦＣＰ＿ＤＬ
（ＦＣＰ Ｄａｔａ Ｌｅｎｇｔｈ）
９５ Ｏｐｅｒａｉｏｎ Ｃｏｄｅ
１００ ＦＣＰ＿ＲＳＰペイロード
１０１ ＦＣＰ＿ＳＴＡＴＵＳ（ＦＣＰ Ｓｔａｔｕｓ）
１１０ 物理ディスクドライブ制御テーブル
１１１ 物理ディスクドライブ番号
１１２ 物理ディスクドライブ位置
１１３ 記憶容量 １１４ ブロック数
１１５ ＲＡＩＤグループ番号
１１６ 状態
１２０ ロジカルユニット制御テーブル
１２１ ロジカルユニット番号
１２２ ＲＡＩＤグループ番号
１２３ ＲＡＩＤレベル １２４ 先頭アドレス
１２５ 最終アドレス
１３０ マネージメントツール管理テーブル
１３１ 記憶制御装置のＡＬ−ＰＡ
１３２ 担当ＬＵＮ
Claims (6)
- 単一又は複数の記憶装置と、上位装置と、前記上位装置からの指示に応答して前記記憶装置に格納されたデータの転送を制御する記憶制御装置とを備え、且つ前記記憶制御装置が、前記上位装置とネットワークを介して接続されているデータ格納システムの取り扱い方法であって、
オンライン中の前記データ格納システムに追加された新たな記憶制御装置が、前記ネットワーク上をフレームの送受信可能な状態とするためのリンク初期化処理を実行するステップと、
前記新たな記憶制御装置が、前記リンク初期化処理の後、ループ初期化処理を実行するステップと、
前記上位装置で動作するツールが、前記ネットワークに接続された全ての装置に対して、Ｉｎｑｕｉｒｙコマンドを発行し、その応答から前記新たな記憶制御装置を特定するステップと、
前記ネットワークに既に接続されている前記記憶制御装置が、前記新たな記憶制御装置への引継ぎ対象の論理ユニットに対して、前記上位装置から処理要求を受領したときに、キューイングコマンドがあった場合は、前記キューイングコマンドの処理を実行するとともに、キャッシュ上に残っていたライトデータのうち引継ぎ対象の論理ユニットに対するライトデータを前記記憶装置に書き込む処理を実行するステップと、
前記新たな記憶制御装置が、前記ネットワークに既に接続されている前記記憶制御装置の制御メモリに格納されている情報のうち、前記引継ぎ対象の論理ユニットの情報を前記新たな記憶制御装置の制御メモリに書込みするステップと、
前記新たな記憶制御装置が、前記引継ぎ対象の論理ユニットの情報を受領した後、前記上位装置からのコマンド処理を可能にするための内部処理を実行するステップと、
を備える、データ格納システムの取り扱い方法。 - 請求項１に記載のデータ格納システムの取り扱い方法であって、前記記憶装置は、磁気ディスク装置、光ディスク装置、光磁気ディスク装置、磁気テープ装置、又はライブラリ装置である、データ格納システムの取り扱い方法。
- 単一又は複数の記憶装置と、上位装置と、前記上位装置からの指示に応答して前記記憶装置に格納されたデータの転送を制御する記憶制御装置とを備え、且つ前記記憶制御装置が、前記上位装置とネットワークを介して接続されているデータ格納システムであって、
オンライン中の前記データ格納システムに追加された新たな記憶制御装置を備え、
前記新たな記憶制御装置は、
前記ネットワーク上をフレームの送受信可能な状態とするためのリンク初期化処理を実行する手段と、
前記リンク初期化処理の後、ループ初期化処理を実行する手段とを備え、
前記上位装置で動作するツールは、
前記ネットワークに接続された全ての装置に対して、Ｉｎｑｕｉｒｙコマンドを発行し、その応答から前記新たな記憶制御装置を特定する手段を備え、
前記ネットワークに既に接続されている前記記憶制御装置は、
前記新たな記憶制御装置への引継ぎ対象の論理ユニットに対して、前記上位装置から処理要求を受領したときに、キューイングコマンドがあった場合は、前記キューイングコマンドの処理を実行するとともに、キャッシュ上に残っていたライトデータのうち前記引継ぎ対象の論理ユニットに対するライトデータを前記記憶装置に書き込む処理を実行する手段とを備え、
さらに、前記新たな記憶制御装置は、
前記ネットワークに既に接続されている前記記憶制御装置の制御メモリに格納されている情報のうち、前記引継ぎ対象の論理ユニットの情報を前記新たな記憶制御装置の制御メモリに書込みする手段と、
前記引継ぎ対象の論理ユニットの情報を受領した後、前記上位装置からのコマンド処理を可能にするための内部処理を実行する手段、
を備える、データ格納システム。 - 請求項３に記載のデータ格納システムであって、前記ネットワークは、ファイバチャネルネットワークである、データ格納システム。
- 請求項４に記載のデータ格納システムであって、前記ネットワークは、ＡＮＳＩＸ３Ｔ１１で標準化されたファイバチャネルネットワークである、データ格納システム。
- 請求項３乃至請求項５のうち何れか１項に記載のデータ格納システムであって、前記記憶装置は、磁気ディスク装置、光ディスク装置、光磁気ディスク装置、磁気テープ装置、又はライブラリ装置である、データ格納システム。
Priority Applications (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP27288398A JP4412685B2 (ja) | 1998-09-28 | 1998-09-28 | 記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法 |
| EP99117153A EP0990988A3 (en) | 1998-09-28 | 1999-08-31 | Storage control unit and method for handling data storage system |
| EP07014093A EP1860562A1 (en) | 1998-09-28 | 1999-08-31 | Storage control method for handling a data storage system |
| US09/406,838 US6480934B1 (en) | 1998-09-28 | 1999-09-28 | Storage control unit and method for handling data storage system using thereof |
| US10/191,275 US6889286B2 (en) | 1998-09-28 | 2002-07-10 | Storage control unit and method for handling data storage system using thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP27288398A JP4412685B2 (ja) | 1998-09-28 | 1998-09-28 | 記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| JP2000099272A JP2000099272A (ja) | 2000-04-07 |
| JP2000099272A5 JP2000099272A5 (ja) | 2005-11-04 |
| JP4412685B2 true JP4412685B2 (ja) | 2010-02-10 |
Family
ID=17520097
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP27288398A Expired - Fee Related JP4412685B2 (ja) | 1998-09-28 | 1998-09-28 | 記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法 |
Country Status (3)
| Country | Link |
|---|---|
| US (2) | US6480934B1 (ja) |
| EP (2) | EP0990988A3 (ja) |
| JP (1) | JP4412685B2 (ja) |
Families Citing this family (61)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6854034B1 (en) * | 1999-08-27 | 2005-02-08 | Hitachi, Ltd. | Computer system and a method of assigning a storage device to a computer |
| JP4462711B2 (ja) * | 2000-04-18 | 2010-05-12 | 株式会社日立製作所 | 記憶システム |
| JP2001350707A (ja) * | 2000-06-06 | 2001-12-21 | Hitachi Ltd | 情報処理システム、記憶装置の割り当て方法 |
| JP2002007077A (ja) | 2000-06-21 | 2002-01-11 | Nec Corp | ディスクアレイ装置のループ診断システム及びその方法 |
| US7103686B1 (en) * | 2000-10-12 | 2006-09-05 | Adaptec, Inc. | Method and apparatus for device discovery |
| JP4073161B2 (ja) | 2000-12-06 | 2008-04-09 | 株式会社日立製作所 | ディスクストレージのアクセスシステム |
| ATE480822T1 (de) * | 2001-02-13 | 2010-09-15 | Candera Inc | Failover-verarbeitung in einem speicherungssystem |
| JP4032670B2 (ja) * | 2001-06-21 | 2008-01-16 | 株式会社日立製作所 | ホストコンピュータの認証を行う記憶装置システム |
| JP2003015826A (ja) | 2001-07-04 | 2003-01-17 | Hitachi Ltd | ディスクアレイ制御装置における共有メモリコピー機能 |
| JP2004110367A (ja) | 2002-09-18 | 2004-04-08 | Hitachi Ltd | 記憶装置システムの制御方法、記憶制御装置、および記憶装置システム |
| US20040103220A1 (en) * | 2002-10-21 | 2004-05-27 | Bill Bostick | Remote management system |
| US7085883B1 (en) * | 2002-10-30 | 2006-08-01 | Intransa, Inc. | Method and apparatus for migrating volumes and virtual disks |
| AU2003290706A1 (en) | 2002-11-08 | 2004-06-03 | Crossroads Systems, Inc. | System and method for controlling access to media libraries |
| JP2004164072A (ja) * | 2002-11-11 | 2004-06-10 | Hitachi Ltd | ディスク制御装置およびディスク制御装置の制御方法 |
| US7649880B2 (en) * | 2002-11-12 | 2010-01-19 | Mark Adams | Systems and methods for deriving storage area commands |
| US8005918B2 (en) | 2002-11-12 | 2011-08-23 | Rateze Remote Mgmt. L.L.C. | Data storage devices having IP capable partitions |
| US7742473B2 (en) * | 2002-11-12 | 2010-06-22 | Mark Adams | Accelerator module |
| US7170890B2 (en) | 2002-12-16 | 2007-01-30 | Zetera Corporation | Electrical devices with improved communication |
| AU2002361716A1 (en) * | 2002-11-12 | 2004-06-03 | Zetera Corporation | Data storage devices having ip capable partitions |
| US7263593B2 (en) | 2002-11-25 | 2007-08-28 | Hitachi, Ltd. | Virtualization controller and data transfer control method |
| JP2004220450A (ja) | 2003-01-16 | 2004-08-05 | Hitachi Ltd | ストレージ装置、その導入方法、及びその導入プログラム |
| US7237021B2 (en) * | 2003-04-04 | 2007-06-26 | Bluearc Uk Limited | Network-attached storage system, device, and method supporting multiple storage device types |
| US7225274B2 (en) * | 2003-05-23 | 2007-05-29 | Applied Micro Circuits Corporation | Method and apparatus for transferring data across a protocol bridge |
| JP4278444B2 (ja) * | 2003-06-17 | 2009-06-17 | 株式会社日立製作所 | 仮想ポート名の管理装置 |
| GB0320388D0 (en) * | 2003-08-30 | 2003-10-01 | Ibm | Method and apparatus for improved error avoidance in a redundant data path system |
| JP4386694B2 (ja) | 2003-09-16 | 2009-12-16 | 株式会社日立製作所 | 記憶システム及び記憶制御装置 |
| US20050071546A1 (en) * | 2003-09-25 | 2005-03-31 | Delaney William P. | Systems and methods for improving flexibility in scaling of a storage system |
| US7277995B2 (en) * | 2003-10-29 | 2007-10-02 | Dot Hill Systems Corporation | Storage controller and method for performing host access control in the host interface adapter |
| JP2005190106A (ja) | 2003-12-25 | 2005-07-14 | Hitachi Ltd | 論理ボリュームを管理する記憶制御サブシステム |
| JP2005202893A (ja) | 2004-01-19 | 2005-07-28 | Hitachi Ltd | 記憶デバイス制御装置、ストレージシステム、プログラムを記録した記録媒体、情報処理装置、及びストレージシステムの制御方法 |
| JP4516322B2 (ja) * | 2004-01-28 | 2010-08-04 | 株式会社日立製作所 | 複数の上位装置で共有される記憶装置システムを持つサイト間での共有排他制御方式を備えたコンピュータシステム |
| JP4477906B2 (ja) * | 2004-03-12 | 2010-06-09 | 株式会社日立製作所 | ストレージシステム |
| US8984175B1 (en) * | 2004-04-26 | 2015-03-17 | Symantec Operating Corporation | Method and apparatus for providing redundant paths to a storage volume |
| US7454565B1 (en) | 2004-06-29 | 2008-11-18 | Crossroads Systems, Inc | System and method for distributed partitioned library mapping |
| US7428613B1 (en) | 2004-06-29 | 2008-09-23 | Crossroads Systems, Inc. | System and method for centralized partitioned library mapping |
| JP4646574B2 (ja) | 2004-08-30 | 2011-03-09 | 株式会社日立製作所 | データ処理システム |
| JP2006127028A (ja) | 2004-10-27 | 2006-05-18 | Hitachi Ltd | 記憶システム及び記憶制御装置 |
| US7519693B2 (en) * | 2004-11-18 | 2009-04-14 | International Business Machines Corporation | Apparatus, system, and method for integrating an enclosure |
| US20060106947A1 (en) * | 2004-11-18 | 2006-05-18 | Benhase Michael T | Information storage and retrieval system comprising a storage controller and a fibre channel switch controller |
| US20060155724A1 (en) * | 2005-01-13 | 2006-07-13 | Filmloop, Inc. | Loop channels |
| US7370173B2 (en) | 2005-01-28 | 2008-05-06 | Crossroads Systems, Inc. | Method and system for presenting contiguous element addresses for a partitioned media library |
| US7451291B2 (en) | 2005-01-28 | 2008-11-11 | Crossroads Systems, Inc. | System and method for mode select handling for a partitioned media library |
| US7971006B2 (en) * | 2005-01-28 | 2011-06-28 | Crossroads Systems, Inc. | System and method for handling status commands directed to partitioned media library |
| US7702850B2 (en) * | 2005-03-14 | 2010-04-20 | Thomas Earl Ludwig | Topology independent storage arrays and methods |
| US7788413B1 (en) | 2005-04-29 | 2010-08-31 | Crossroads Systems, Inc. | Method and system for handling commands requesting movement of a data storage medium between physical media libraries |
| JP5057656B2 (ja) * | 2005-05-24 | 2012-10-24 | 株式会社日立製作所 | ストレージシステム及びストレージシステムの運用方法 |
| US7620981B2 (en) * | 2005-05-26 | 2009-11-17 | Charles William Frank | Virtual devices and virtual bus tunnels, modules and methods |
| US7743214B2 (en) | 2005-08-16 | 2010-06-22 | Mark Adams | Generating storage system commands |
| US8819092B2 (en) * | 2005-08-16 | 2014-08-26 | Rateze Remote Mgmt. L.L.C. | Disaggregated resources and access methods |
| JP4842593B2 (ja) * | 2005-09-05 | 2011-12-21 | 株式会社日立製作所 | ストレージ仮想化装置のデバイス制御引継ぎ方法 |
| US9270532B2 (en) | 2005-10-06 | 2016-02-23 | Rateze Remote Mgmt. L.L.C. | Resource command messages and methods |
| JP4997784B2 (ja) * | 2006-02-16 | 2012-08-08 | 日本電気株式会社 | データ記憶システム、データ記憶方法、データ記憶プログラム |
| US7924881B2 (en) * | 2006-04-10 | 2011-04-12 | Rateze Remote Mgmt. L.L.C. | Datagram identifier management |
| JP5040970B2 (ja) | 2009-07-24 | 2012-10-03 | 富士通株式会社 | システム制御サーバ、ストレージシステム、設定方法および設定プログラム |
| US8843459B1 (en) | 2010-03-09 | 2014-09-23 | Hitachi Data Systems Engineering UK Limited | Multi-tiered filesystem |
| JP5335848B2 (ja) * | 2011-04-18 | 2013-11-06 | 株式会社日立製作所 | ストレージシステム及びストレージシステムの運用方法 |
| US8914584B1 (en) | 2012-03-31 | 2014-12-16 | Emc Corporation | System and method for improving cache performance upon detection of a LUN control event |
| US8914585B1 (en) * | 2012-03-31 | 2014-12-16 | Emc Corporation | System and method for obtaining control of a logical unit number |
| US8874799B1 (en) | 2012-03-31 | 2014-10-28 | Emc Corporation | System and method for improving cache performance |
| US10268383B2 (en) * | 2016-09-06 | 2019-04-23 | Seagate Technology Llc | Selectable read modes for a two dimensional magnetic recording system |
| KR102227189B1 (ko) * | 2020-04-03 | 2021-03-15 | 주식회사엔클라우드 | 서버에 장착되어 블록레벨 스토리지 및 리소스를 공유하는 모듈 |
Family Cites Families (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5337414A (en) * | 1992-09-22 | 1994-08-09 | Unisys Corporation | Mass data storage and retrieval system |
| US5689678A (en) * | 1993-03-11 | 1997-11-18 | Emc Corporation | Distributed storage array system having a plurality of modular control units |
| US5579491A (en) * | 1994-07-07 | 1996-11-26 | Dell U.S.A., L.P. | Local proactive hot swap request/acknowledge system |
| US5615352A (en) * | 1994-10-05 | 1997-03-25 | Hewlett-Packard Company | Methods for adding storage disks to a hierarchic disk array while maintaining data availability |
| DE69528431T2 (de) * | 1994-10-31 | 2003-07-03 | Hewlett Packard Co | System zur Unterdrückung der Leistungstransienten beim Zuschalten eines Plattenantriebes in einem RAID-Betriebssystem |
| JP3732869B2 (ja) * | 1995-06-07 | 2006-01-11 | 株式会社日立製作所 | 外部記憶装置 |
| US5875456A (en) * | 1995-08-17 | 1999-02-23 | Nstor Corporation | Storage device array and methods for striping and unstriping data and for adding and removing disks online to/from a raid storage array |
| US5822782A (en) * | 1995-10-27 | 1998-10-13 | Symbios, Inc. | Methods and structure to maintain raid configuration information on disks of the array |
| EP0858036A3 (en) * | 1997-02-10 | 1999-12-22 | Compaq Computer Corporation | Fibre channel attached storage architecture |
| US5986880A (en) * | 1997-06-16 | 1999-11-16 | Compaq Computer Corporation | Electronic apparatus having I/O board with cable-free redundant adapter cards thereon |
| US6085332A (en) * | 1998-08-07 | 2000-07-04 | Mylex Corporation | Reset design for redundant raid controllers |
-
1998
- 1998-09-28 JP JP27288398A patent/JP4412685B2/ja not_active Expired - Fee Related
-
1999
- 1999-08-31 EP EP99117153A patent/EP0990988A3/en not_active Ceased
- 1999-08-31 EP EP07014093A patent/EP1860562A1/en not_active Withdrawn
- 1999-09-28 US US09/406,838 patent/US6480934B1/en not_active Expired - Lifetime
-
2002
- 2002-07-10 US US10/191,275 patent/US6889286B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| EP0990988A2 (en) | 2000-04-05 |
| EP0990988A3 (en) | 2006-10-25 |
| US6889286B2 (en) | 2005-05-03 |
| JP2000099272A (ja) | 2000-04-07 |
| US20020184439A1 (en) | 2002-12-05 |
| EP1860562A1 (en) | 2007-11-28 |
| US6480934B1 (en) | 2002-11-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4412685B2 (ja) | 記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法 | |
| JP4252301B2 (ja) | 記憶システム及びそのデータバックアップ方法 | |
| JP4041656B2 (ja) | ストレージシステム及びストレージシステムにおけるデータ送受信方法 | |
| US7937527B2 (en) | Storage system for sending an access request from a host to a storage subsystem | |
| JP3633436B2 (ja) | コンピュータシステム | |
| US7650446B2 (en) | Storage system for back-end communications with other storage system | |
| US6073209A (en) | Data storage controller providing multiple hosts with access to multiple storage subsystems | |
| US7209986B2 (en) | Method for controlling storage system, and storage control apparatus | |
| US7302541B2 (en) | System and method for switching access paths during data migration | |
| EP1310876B1 (en) | Computer data migration system and method therefor | |
| US6425049B1 (en) | Disk array system and method of changing the configuration of the disk array system | |
| JP4606711B2 (ja) | 仮想化制御装置およびデータ移行制御方法 | |
| JP2004518217A (ja) | 交換環境におけるリモートミラーリング | |
| JP4874515B2 (ja) | 記憶装置システム | |
| JP2007193839A (ja) | ストレージシステム、ストレージシステムにおけるデータ送受信方法及びシステム | |
| JP2004362600A (ja) | 記憶制御装置及び記憶システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050908 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050908 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20050908 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080425 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080609 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080804 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20090220 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090526 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090709 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090807 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090929 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091112 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091116 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121127 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121127 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131127 Year of fee payment: 4 |
|
| LAPS | Cancellation because of no payment of annual fees |