JP2008134986A

JP2008134986A - 情報システム、データ転送方法及びデータ保護方法

Info

Publication number: JP2008134986A
Application number: JP2007085675A
Authority: JP
Inventors: Hiroaki Akutsu; 弘明圷; Takanari Iwamura; 卓成岩村; Kenta Futase; 健太二瀬; Takao Watanabe; 恭男渡辺; Yasutomo Yamamoto; 康友山本; Kentetsu Eguchi; 賢哲江口; Hisao Honma; 久雄本間
Original assignee: Hitachi Ltd
Current assignee: Hitachi Ltd
Priority date: 2006-10-30
Filing date: 2007-03-28
Publication date: 2008-06-12
Anticipated expiration: 2027-03-28
Also published as: US8281179B2; US20100205479A1; US7925914B2; US7739540B2; US20080104443A1; JP5244332B2; US20110154102A1

Abstract

【課題】２台以上のストレージ装置間でリモートコピーを行うストレージシステムと当該ストレージシステムを利用するホストを含めた情報システムの可用性を向上させることを目的とする。
【解決手段】第１のストレージ装置に、第３のボリュームを有する第３のストレージ装置が接続されると共に、第１のストレージ装置に接続された第２のストレージ装置に第４のボリュームを有する第４のストレージ装置が接続され、第１及び第３のストレージ装置が、第１のボリュームに格納されたデータを第３のボリュームにリモートコピーし、第１及び第２のストレージ装置が、第１のボリュームに格納されたデータを第２のボリュームにリモートコピーし、第３及び第４のストレージ装置が、第３のボリュームに格納されたデータを第４のボリュームにリモートコピーするようにした。
【選択図】図３８

Description

本発明は、複数の記憶領域を備えたストレージシステムとストレージシステムに接続されたホストコンピューターに関する。

一般に、情報システムでは、記憶デバイスとしてＨＤＤ（ハードディスクドライブ）を用いるストレージ装置が備えられ、そのストレージ装置を含むストレージシステムが、ストレージエリアネットワーク（ＳＡＮ：Storage Area Network）経由で、複数の上位装置（例えばホスト）からアクセスされる。一般的にストレージ装置では、ＲＡＩＤ（Redundant Array of Independent (or Inexpensive) Disks）技術に従う高信頼化方法が採用されることでＨＤＤ単体の信頼性を超えた信頼性をストレージ装置として提供している。しかし、近年の情報化社会の進化によって上記ＲＡＩＤによる信頼性が貢献する情報システムの可用性（サービス継続性）では不足してきた。

このような状況に対応する高可用化技術として、特許文献１に開示された技術がある。当該技術では、ホストコンピューター（以後ホストと省略する）とストレージ装置をそれぞれ有するプロダクションサイトとバックアップサイトを用意し、プロダクションサイトのストレージ装置が保存するデータをバックアップサイトのストレージ装置にミラーリングする。もし、プロダクションサイトのストレージ装置が障害停止した場合は、バックアップサイトのストレージ装置とホストを用いて装置停止の結果停止していたアプリケーション処理を再開させる。本技術は一般的にリモートコピー又はリモートミラーリングと呼ばれる。

特開平７‐２４４５９７号米国特許７，０８０，１９７号

特許文献１の技術ではストレージ装置の障害停止の結果、異なるホストでアプリケーションを再開させるため、アプリケーションの再起動処理が必要になる。当然ながらアプリケーション停止から再起動完了まではアプリケーションは通常動作ができないため、可用性については問題がある。

本発明は、２台以上のストレージ装置間でリモートコピーを行うストレージシステムと当該ストレージシステムを利用するホストを含めた情報システムの可用性を向上させることを目的とする。

かかる課題を解決するため本発明においては、上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムであって、前記第１のストレージ装置に接続され、第３のボリュームを有する第３のストレージ装置と、前記第２のストレージ装置に接続され、第４のボリュームを有する第４のストレージ装置とを備え、前記第１及び第２のストレージ装置は、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行し、前記第１及び第３のストレージ装置は、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行し、前記第２及び第４のストレージ装置は、前記第２のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行するようにした。

また本発明においては、上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムにおけるデータ保護方法であって、前記第１のストレージ装置に、第３のボリュームを有する第３のストレージ装置が接続されると共に、前記第２のストレージ装置に第４のボリュームを有する第４のストレージ装置が接続され、前記第１及び第２のストレージ装置が、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行する第１のステップと、前記第１及び第３のストレージ装置が、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行すると共に、前記第２及び第４のストレージ装置が、前記第２のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行する第２のステップとを備えることを特徴とする。

さらに本発明においては、上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムであって、前記第１及び第２のストレージ装置に接続され、第３のボリュームを有する第３のストレージ装置と、前記第３のストレージ装置に接続され、第４のボリュームを有する第４のストレージ装置とを備え、前記第１及び第２のストレージ装置は、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行し、前記第１及び第３のストレージ装置は、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行し、前記第３及び第４のストレージ装置は、前記第３のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行することを特徴とする。

さらに本発明においては、上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムにおけるデータ保護方法であって、前記第１及び第２のストレージ装置に、第３のボリュームを有する第３のストレージ装置が接続され、前記第３のストレージ装置に、第４のボリュームを有する第４のストレージ装置が接続され、前記第１及び第２のストレージ装置が、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行すると共に、前記第１及び第３のストレージ装置が、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行する第１のステップと、前記第３及び第４のストレージ装置が、前記第３のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行する第２のステップとを備えることを特徴とする。

本発明によれば、２台以上のストレージ装置間でリモートコピーを行うストレージシステムと当該ストレージシステムを利用するホストを含めた情報システムの可用性を向上させることができる。

以下、図面を参照して、本発明の実施の形態を説明する。

（１）第１の実施の形態
＜１．情報システムの構成＞
図１は、本発明の一実施の形態に係る情報システムのハードウェア構成の一例を示す図である。

情報システムは、例えば、ストレージ装置１５００、ホストコンピューター（以後ホストと省略する）１１００、管理ホスト１２００と、２台以上の仮想化ストレージ装置１０００とから構成される。ストレージ装置１５００、ホストコンピューター（以後ホストと省略する）１１００、管理ホスト１２００の数は、それぞれ、１以上とすることができる。仮想化ストレージ装置１０００とホスト１１００は、Ｉ／Ｏネットワーク１３００を介して、相互に接続される。仮想化ストレージ装置１０００とストレージ装置１５００と管理ホスト１２００は、管理ネットワーク（図示せず）又はＩ／Ｏネットワーク１３００を介して相互に接続される。

ホスト１１００には、ホスト内部ネットワーク１１０４があり、そのネットワーク１１０４に、プロセッサ（図中ではProcと略記）１１０１と、メモリ（図中ではMemと略記）１１０２と、Ｉ／Ｏポート（図中ではI/O Pと略記）１１０３とが接続されている。管理ホスト１２００も、ホスト１１００と同じハードウェア構成を有することができる。なお、Ｉ／Ｏポートをホスト１１００に追加する拡張カードをＨＢＡ（Host Bas Adapter)と呼ぶことがある。

管理ホスト１２００は、表示装置を有し、その表示装置に、仮想化ストレージ装置１０００とストレージ装置１５００の管理用の画面を表示することができる。また、管理ホスト１２００は、管理操作リクエストを、ユーザー（例えば管理ホスト１２００のオペレーター）から受付け、その受け付けた管理操作リクエストを、仮想化ストレージ装置１０００やストレージ装置１５００に送信することができる。管理操作リクエストは、仮想化ストレージ装置１０００やストレージ装置１５００の操作のためのリクエストであり、例えば、パリティグループ作成リクエスト、内部ＬＵ（Logical Unit）作成リクエスト、パス定義リクエスト、及び仮想化機能に関する操作がある。

Ｉ／Ｏネットワーク１３００は、ファイバーチャネルによる接続が第一に考えられる
が、それ以外でも、ＦＩＣＯＮ（FIbre CONnection：登録商標）やＥｔｈｅｒｎｅｔ（登録商標）とＴＣＰ／ＩＰ（Transmission Control Protocol/Internet Protocol）とｉＳＣＳＩ（internet ＳＣＳＩ（Small Computer System Interface））の組み合わせや、Ｅｔｈｅｒｎｅｔ（登録商標）とＮＦＳ(Network File System)やＣＩＦＳ(Common Internet File System)等のネットワークファイルシステムの組み合わせ等が考えられる。さらに、Ｉ／Ｏネットワーク１３００は、Ｉ／Ｏリクエストを転送可能な通信装置であればこれ以外でもよい。また、仮想化ストレージ装置１０００とストレージ装置１５００を接続するネットワークについてもＩ／Ｏネットワーク１３００と同様である。

仮想化ストレージ装置１０００は、コントローラー（図中はCTLと表記）１０１０と、キャッシュメモリ（図中はCMと表記）１０２０と、複数のＨＤＤ１０３０とを備える。好ましい形態としては、コントローラー１０１０及びキャッシュメモリ１０２０は、それぞれ複数のコンポーネントから構成することが考えられる。なぜなら、コンポーネント単体に障害が発生して閉塞した場合でも、残りのコンポーネントを用いてリードやライトに代表されるＩ／Ｏリクエストを引き続き受けることができるためである。

コントローラー１０１０は、仮想化ストレージ装置１０００の動作を制御する装置（例えば回路基盤）である。コントローラー１０１０には、内部ネットワーク１０１７があり、その内部ネットワーク１０１７に、Ｉ／Ｏポート１０１３、キャッシュポート（図中ではC Pと表記）１０１５、管理ポート（図中ではM Pと表記）１０１６、バックエンドポート（図中ではB/E Pと表記）１０１４、プロセッサ（例えばＣＰＵ（Central Processing Unit））１０１１及びメモリ１０１２が接続されている。コントローラー１０１０同士とキャッシュメモリ１０２０は、ストレージ内部ネットワーク１０５０にて相互に接続される。また、コントローラー１０１０と各ＨＤＤ１０３０は、複数のバックエンドネットワーク１０４０にて相互接続される。

ストレージ装置１５００のハードウェア構成は仮想化ストレージ装置１０００と同種の部品から構成される。なお、仮想化ストレージ装置１０００がＨＤＤを持たない仮想化専用装置またスイッチの場合は、ストレージ装置１５００は仮想化ストレージ装置１０００と同種の部品から構成されなくてもいい。さらに、ホスト１１００及び仮想化ストレージ装置１０００の内部のネットワークは、好ましくは、Ｉ／Ｏポート１０１３の有する転送帯域より広帯域であり、また、バスやスイッチ型のネットワークによって全てまた一部が代替されてもよい。また、図１では、Ｉ／Ｏポート１０１３は、コントローラー１０１０に一つ存在することになっているが、実際には、複数のＩ／Ｏポート１０１３がコントローラー１０１０に存在してもよい。

以上のハードウェア構成によって、仮想化ストレージ装置１０００やストレージ装置１５００のＨＤＤに保存された全て又は一部のデータを、ホスト１１００が読出したり書き込んだりすることができるようになる。なお、以後の説明では、データ保存を担当するシステムをストレージクラスタと呼ぶ。また、ストレージクラスタ内部に当該システムを２系統含むことで高可用化を実現するサブシステムで、仮想化ストレージ装置１０００とストレージ装置１５００の片方又は両方を含むサブシステムをストレージサブシステムと呼ぶ。

＜２．本実施の形態の概要＞
本実施の形態では、他のストレージ装置内のボリューム等の記憶領域を仮想化する仮想化機能を有する仮想化ストレージ装置１０００を含むストレージシステムの可用性を向上させるため、もう一台の仮想化ストレージ装置１０００を用いた二重化構成を採用する。図２はその概要を示した図である。

本概要では、ストレージシステムに仮想化ストレージ装置１０００Ｌ、仮想化ストレージ装置１０００Ｒ、ストレージ装置１５００Ｌ、ストレージ装置１５００Ｒが含まれる。なお、以下においては、説明を容易にするため、仮想化ストレージ装置１０００Ｌ及びストレージ装置１５００Ｌを正系（プロダクション系）、仮想化ストレージ装置１０００Ｒ及びストレージ装置１５００Ｒを副系（バックアップ系）の役割をもっているものとする。しかし、それぞれの仮想化ストレージ装置１０００Ｌ，１０００Ｒがホスト１１００へ提供するボリュームが二つ以上の場合は、仮想化ストレージ装置単位で正系・副系を担当する代わりにボリューム単位で正系を担当する仮想化ストレージ装置１０００Ｌ，１０００Ｒが定まっていればよい。

それぞれの仮想化ストレージ装置１０００Ｌ，１０００Ｒは自身が有するＨＤＤ１０３０を構成要素とするパリティグループ（ＲＡＩＤ技術によって構成される）の一部又は全ての領域をボリューム３０００ＬＡやボリューム３０００ＲＡとしてホスト１１００に提供する（図中の円柱内に'Ａ'と記された部分が対応）。また、仮想化ストレージ装置１０００はオプションとして仮想化機能による仮想ボリューム３０００ＬＢ，３０００ＲＢ（対応するＨＤＤ等の不揮発記憶領域が仮想化ストレージ装置１０００Ｌ，１０００Ｒの外部に存在するボリュームのこと）を提供することができる。本概要ではストレージ装置１５００Ｌ、１５００Ｒが提供するボリューム３５００ＬＢ、３５００ＲＢの一部又は全てを対応する不揮発記憶領域として用いている。なお、以後の説明では「ボリュームのデータ」と書いた場合は、ＨＤＤ１０３０に保存されたデータに加えてキャッシュメモリ１０２０に一時保存されたデータも含む。また、後ほど述べる「仮想ボリュームのデータ」に関してはストレージ装置１５００Ｌ，１５００Ｒのボリューム３５００ＬＢ、３５００ＲＢに保存されたデータに加えて仮想化ストレージ装置１０００Ｌ，１０００Ｒのキャッシュメモリ１０２０に一時保存されたデータを含む。

一方、ホスト１１００上ではアプリケーションプログラム（以後、アプリケーションと略すことがある）２０１０と、ＯＳと、ＯＳの設定・処理を補佐するデーモンや管理プログラムに代表されるシステムプログラムとが動作している。ＯＳはアプリケーション２０１０に対して仮想化ストレージ装置１０００Ｌ，１０００Ｒが提供するボリューム３０００ＬＡ，３０００ＬＢ，３０００ＲＡ，３０００ＲＢ内に存在するデータに対するＩ／Ｏリクエスト用インターフェースを提供し、アプリケーション２０１０からの要求に応じて適切な仮想化ストレージ装置１０００Ｌ，１０００Ｒ及びボリューム３０００ＬＡ，３０００ＬＢ，３０００ＲＡ，３０００ＲＢに対するＩ／Ｏリクエストを送信する。通常状態ではホスト１１００は仮想化ストレージ装置１０００Ｌのボリューム３０００ＬＡ，３０００ＬＢに対してリードやライトに代表されるＩ／Ｏリクエストを発行し、データの送受信を行う。つまり、リードリクエストを受け取った場合、仮想化ストレージ装置１０００Ｌは、リクエスト対象のボリューム３０００ＬＡ，３０００ＬＢ，３５００ＬＢが仮想化ストレージ装置１０００Ｌ内部のＨＤＤ１０３０に対応している場合は当該ＨＤＤ１０３０からデータを読み上げてこれをホスト１１００に返したり、ストレージ装置１５００Ｌに対してリードリクエストを発行することで必要なデータを取得し、そのデータ（の全て又は一部）をホスト１１００に返す。

ライトリクエストの場合は、データの冗長化のために、ライトデータを受け取った仮想化ストレージ装置１０００Ｌは副系である仮想化ストレージ装置１０００Ｒへライトデータを送信し、仮想化ストレージ装置１０００Ｌがライトデータの受け取り完了メッセージを仮想化ストレージ装置１０００Ｒから受け取った後にホスト１１００に対してライト完了メッセージを返す。なお、仮想化ストレージ装置１０００Ｌに対するライトデータも仮想化ストレージ装置１０００Ｒが仮想化ストレージ装置１０００Ｌを経由して受け取ったライトデータも、各仮想化ストレージ装置１０００Ｌ，１０００Ｒ内のキャッシュメモリ１０２０Ｌ，１０２０Ｒに一時保持されてもよい。なお、本実施の形態の一つとして、このライトデータの転送はストレージリモートコピーによって行われる。

図３は通常状態下で仮想化ストレージ装置１０００Ｌに障害が発生した後の情報システムの処理概要を示している。

正系の仮想化ストレージ装置１０００Ｌが障害によって停止した場合、ホスト１１００上のシステムプログラムはその障害を検知し、Ｉ／Ｏリクエストの発行先を正系の仮想化ストレージ装置１０００Ｌから副系の仮想化ストレージ装置１０００Ｒへ切り替える。ただし、その場合もアプリケーション２０１０はＩ／Ｏリクエストの発行先が切り替わったことを認識せずにＩ／Ｏを継続することができる。そのために、通常時からシステムプログラムはＯＳレイヤ（より具体的にはファイルシステムより下位のレイヤ）にて、アプリケーション２０１０やファイルシステムからＩ／Ｏリクエスト時に指定されるボリューム識別子として仮想的なボリューム識別子（又はデバイスファイル）を指定させるようにしておき、ＯＳの下位レイヤは当該識別子と実際のボリュームに対して割り当てられた識別子（又はデバイスファイル）の対応を管理しておく。Ｉ／Ｏリクエストの発行先を切り替える場合は、その対応関係をこれまでの仮想化ストレージ装置１０００Ｌのボリューム３０００ＬＡ、ボリューム３０００ＬＢ宛であったものを仮想化ストレージ装置１０００Ｒのボリューム３０００ＲＡとボリューム３０００ＲＢ宛に切り替えることでアプリケーション２０１０に対して透過に切り替えを実現する。

さらに、仮想化ストレージ装置１０００Ｒもホスト１１００からの当該ボリューム３０００ＲＡ，３０００ＲＢに対するライトリクエストの到着やその他明示的なフェイルオーバー要求に応じて、ライトリクエストを処理できるようにする。この変更処理の一例としては、仮想化ストレージ装置１０００Ｌから仮想化ストレージ装置１０００Ｒに対するデータコピーに伴い、仮想化ストレージ装置１０００Ｒのボリューム３０００ＲＡ，３０００ＲＢに対するホスト１１００からのライトリクエストの拒否が設定されている場合はそれを解除する。また、リモートコピーを用いてライトデータの転送を行っている場合はリモートコピーのコピー状態の変更を行うことも考えられる。

図４は仮想化ストレージ装置１０００Ｌ，１０００Ｒ間のネットワークに障害が発生した後の情報システムの処理概要を示している。

ネットワーク障害を検知した仮想化ストレージ装置１０００Ｌはホスト１１００に当該障害を通知する。障害通知を受けたホスト１１００は、副系の仮想化ストレージ装置１０００Ｒに対してライトリクエストを処理できるように要求し、以後のライトリクエストは正系の仮想化ストレージ装置１０００Ｌ及び副系の仮想化ストレージ装置１０００Ｒの両方に発行することで、正系と副系のデータを同一にする。

＜３．ホスト１１００で実行されるプログラム及び情報＞
図５はホスト１１００上で実行されるソフトウェアプログラムと、当該ソフトウェアプログラムが用いる情報とに加えて、各ソフトウェアプログラムが提供する概念について記した図である。なお、当該ソフトウェアプログラムはメモリ１１０２（図１）とプロセッサ１１０１（図１）とによって保持と実行がされるが、その一部をハードウェア化して実行してもよい。

ホスト１１００上ではアプリケーション２０１０、リモートコピーマネージャー５０３０に加えて、ＯＳ又はＫｅｒｎｅｌ内部のプログラムモジュールとしてファイルシステム５０２０、Ｉ／Ｏパスマネージャー５０００及びＨＢＡデバイスドライバー５０１０が実行される（ファイルシステム５０２０、Ｉ／Ｏパスマネージャー５０００又はＨＢＡデバイスドライバー５０１０は、全ての処理がＫｅｒｎｅｌ内部で実行される必要はない）。

ＨＢＡデバイスドライバー５０１０はＨＢＡに搭載されたＩ／Ｏポート１１０３（図１）を通じてＩ／Ｏリクエストやそれに伴うデータを送受信したり、その他の仮想化ストレージ装置１０００Ｌ，１０００Ｒやストレージ装置１５００Ｌ，１５００Ｒ等との通信を制御するプログラムである。ＨＢＡデバイスドライバー５０１０は、また、上位レイヤに対して仮想化ストレージ装置１０００Ｌ，１０００Ｒが提供するボリューム３０００ＬＡ，３０００ＬＢ，３０００ＲＡ，３０００ＲＢに対応する識別子を提供し、その識別子を伴ったＩ／Ｏリクエストを受け付けることができる。ボリューム５０４０はその概念を示したもので、仮想ストレージ装置１０００Ｌ，１０００Ｒが提供するボリューム３０００ＬＡ，３０００ＬＢ，３０００ＲＡ，３０００ＲＢにそれぞれ対応している。

Ｉ／Ｏパスマネージャー５０００は、アプリケーション２０１０のＩ／Ｏリクエスト発信先を切り替えるためのモジュールである。当該モジュールはＨＢＡデバイスドライバー５０１０が提供するボリューム５０４０に対応する識別子と同種のホスト１１００内での仮想的なボリュームに対応する識別子及びＩ／Ｏリクエスト用インターフェースをファイルシステム５０２０に対して提供する。このホスト１１００内での仮想的なボリュームに対応する識別子は当該モジュール内でＨＢＡデバイスドライバー５０１０が提供するボリューム５０４０に対応する識別子と対応しており、デバイス関係テーブル５００１がその対応関係を保持している。ボリューム５０５０はこのホスト１１００内での仮想的なボリュームの概念を示したもので、本図ではその対応関係の一例として仮想化ストレージ装置１０００Ｌのボリューム３０００ＬＡ，３０００ＬＢに対応する識別子と対応している（他の言い方をすると、ホスト１１００内での仮想的なボリューム５０５０の実体は仮想化ストレージ装置１０００Ｌのボリューム３０００ＬＡ，３０００ＬＢであるともいえる）。

ここまでのレイヤでのＩ／Ｏリクエストは通常固定長ブロックアクセス形式で指定する。ただし、ホスト１１００がメインフレームの場合はこれに限定されず、ＣＫＤ（Count Key Data）形式で指定してもよい。

ファイルシステム５０２０は、ＨＢＡデバイスドライバー５０１０が提供するボリューム５０４０に対応する識別子及びＩ／Ｏインターフェースと、Ｉ／Ｏパスマネージャー５０００が提供するホスト１１００内での仮想的なボリューム５０５０に対応する識別子及びＩ／Ｏインターフェースとを通じて、仮想化ストレージ装置１０００Ｌ，１０００ＲへのＩ／Ｏリクエストを送信したり、データの送受信を行うモジュールである。図５では例としてファイルシステム５０２０内部にディレクトリツリーの構造を示し、そのツリー構造の一部５０５２が、Ｉ／Ｏパスマネージャー５０００がホスト１１００内での仮想化で提供したボリューム５０５０に保存されている状態を示している（これまで説明した通り、より正確にはＩ／Ｏパスマネージャー５０００のホスト１１００内での仮想的なボリューム５０５０の提供は識別子を通じたものであり、さらに、そのボリューム５０５０に保存されていると書いたデータは実際にはデバイス関係テーブル５００１にて示される仮想化ストレージ装置１０００Ｌ，１０００Ｒが提供するボリューム３０００ＬＡ，３０００ＬＢ，３０００ＲＡ，３０００ＰＢに保存されている）。ファイルシステム５０２０はアプリケーション２０１０に対してファイルＩ／Ｏのインターフェースを提供する。ファイルＩ／Ｏインターフェースを通じてアプリケーション２０１０から呼び出されたファイルシステム５０２０は、ファイル名とファイル内でのデータオフセットを伴ったリード又はライトリクエストをディレクトリファイルやｉｎｏｄｅといったファイルシステム５０２０内の構造化情報を参照しつつ、ブロック形式のリード又はライトリクエストに変換し、Ｉ／Ｏパスマネージャー５０００又はＨＢＡデバイスドライバー５０１０へリード又はライトリクエストを渡す。

なお、Ｕｎｉｔ系やＷｉｎｄｏｗｓ（登録商標）系のＯＳではファイルＩ／Ｏのインターフェースを用いて直接ボリュームのデータを操作するためのインターフェースとしてデバイスファイルシステムと呼ばれる機能を提供している。通常、デバイスファイルシステムはファイル空間の'/dev'ディレクトリ配下に展開されており、当該ディレクトリ以下のファイル（図中の例では、rsda等）のファイル名はファイルシステム５０２０の下位レイヤ（ＨＢＡデバイスドライバー５０１０やＩ／Ｏパスマネージャー５０００）が提供するボリューム５０４０，５０５０に対応する。そして、当該ボリューム５０４０，５０５０に保存されたデータはデバイスファイル５０７０，５０８０に保存されたデータであるかのようにファイルＩ／Ｏ用インターフェースで読み書き可能となる。なお、図５では例としてデバイスファイル５０７０（rsda, rsdb, rsdc, rsdd）はＨＢＡデバイスドライバー５０１０が認識し、提供しているボリューム５０４０に対応し、デバイスファイル５０８０（vsda, vsdb）はＩ／Ｏパスマネージャー５０００が提供しているボリューム５０５０に対応している。このデバイスファイル５０７０，５０８０は、アプリケーション２０１０がデータベースである場合に、独自のデータ編成やバッファ管理を実現する目的で使われることがある。

リモートコピーマネージャー５０３０は仮想化ストレージ装置１０００Ｌ，１０００Ｒとの間のデータ転送を実現するリモートコピーの状態を取得したり、ホスト１１００やＩ／Ｏパスマネージャー５０００がリモートコピーの操作を行うためのプログラムで、当該プログラムを使用するプログラム、ユーザー又はＩ／Ｏパスマネージャー５０００の要求に応じて仮想化ストレージ装置１０００Ｌ，１０００Ｒと通信を行う。

なお、これまで説明した通りＨＢＡデバイスドライバー５０１０やＩ／Ｏパスマネージャー５０００は一部又は全ての機能がＫｅｒｎｅｌ内部のモジュールとしてインストールやアンインストールすることができることが望ましい。なぜならば、ＨＢＡデバイスドライバー５０２０はＨＢＡを制御するプログラムであるが故、ＨＢＡの製造会社が提供することが多い。同様にＩ／Ｏパスマネージャー５０００は仮想化ストレージ装置１０００Ｌ，１０００Ｒの処理を前提として処理が決定されるため、一部又は全てのモジュールが仮想化ストレージ装置１０００Ｌ，１０００Ｒの製造会社が提供することが考えられる。したがって、当該プログラムがインストール・アンインストールできることによって幅広いＨＢＡと仮想化ストレージ装置１０００Ｌ，１０００Ｒの組み合わせによる情報システムを構築することができる。また、本発明ではアプリケーション２０１０に対して透過に正系と副系の切り替えを行うためにＫｅｒｎｅｌ内部で処理を実行することでアプリケーション２０１０の再コンパイル等が不要な透過的な切り替えが可能である。さらに、Ｉ／Ｏパスマネージャー５０００がファイルシステム５０２０とＨＢＡデバイスドライバー５０１０の中間レイヤに存在することで、ファイルシステム５０２０に対する再コンパイル等を不要とし、さらにファイルシステム透過性も確保している。そして、Ｉ／Ｏパスマネージャー５０００がＨＢＡデバイスドライバー５０１０の機能を利用することができるようになっている。

また、Ｋｅｒｎｅｌ内部にいるＩ／Ｏパスマネージャー５０００がリモートコピーマネージャー５０３０を呼び出す場合やその逆の通信方法として以下の二通りが考えられる。

（Ａ）Ｉ／Ｏパスマネージャー５０００は通信用の仮想的なボリュームを作成し、ファイルシステム５０２０はこの通信用ボリュームをデバイスファイルとしてファイル空間に作成する。リモートコピーマネージャー５０３０は定期的にデバイスファイルに対してリードシステムコールを実行した状態で待つ。Ｉ／Ｏパスマネージャー５０００はリモートコピーマネージャー５０３０からのＩ／Ｏリクエストを受信するが、内部で保留する。そして、当該モジュールがリモートコピーマネージャー５０３０に対するメッセージ送信をする必要が出てきたらＩ／Ｏリクエストの返り値として定められたメッセージを含むデータをファイルシステム５０２０を通じてリモートコピーマネージャー５０３０に返す。なおこの際リモートコピーマネージャーが発行するリードシステムコールは長時間Ｋｅｒｎｅｌ内部で待たされることになる。それが好ましくない場合は、Ｉ／Ｏパスマネージャー５０００が、一定時間経過後に何もメッセージがない旨のデータをファイルシステム５０２０を通じてリモートコピーマネージャー５０３０へ返し、それを受信したリモートコピーマネージャー５０３０が再度リードシステムコールを実行すればよい。

（Ｂ）Ｕｎｉｘ（登録商標）ドメインソケットを用いて仮想的なネットワーク通信として扱う。具体的には、ソケットの一方のエンドをリモートコピーマネージャー５０３０が操作し、残りのエンドをＩ／Ｏパスマネージャー５０００が操作する。

なお、以後の説明ではＩ／Ｏパスマネージャー５０００がリモートコピーの操作や状態参照を行う場合はこのような通信によってリモートコピーマネージャー５０３０を呼び出すことで操作を行っているものとする。

＜４．仮想ストレージ装置１０００で実行されるプログラム及び情報＞
図６は、仮想化ストレージ装置１０００（１０００Ｌ，１０００Ｒ）とストレージ装置１５００（１５００Ｌ，１５００Ｒ）とで実行されるプログラムと、当該プログラムにより管理される情報とについて示した図である。なお、当該プログラムはメモリ１０１２（図１）と、プロセッサ１０１１（図１）と、キャッシュメモリ１０２０とによって保持と実行がされるが、その一部をハードウェア化して実行してもよい。

＜４．１．Ｉ／Ｏ処理プログラム６０２０、パリティグループ情報６０６０及びボリューム情報６０５０＞
パリティグループ情報６０６０には、パリティグループ毎の以下の構成に関連する情報が含まれる。
（１）パリティグループを構成するＨＤＤ１０３０の識別子。パリティグループには複数のＨＤＤ１０３０が参加しているため、当該情報はパリティグループ毎に複数存在する。
（２）ＲＡＩＤレベル

また、ボリューム情報６０５０には、ボリューム毎の以下の構成に関連する情報が含まれる。
（１）ボリューム容量
（２）ボリュームに対応するデータが保存されるパリティグループの識別子とパリティグループ内の領域（開始アドレスと終了アドレスの片方又は両方）。

Ｉ／Ｏ処理プログラム６０２０は、ボリューム情報６０５０やパリティグループ情報６０６０を参照してホスト１１００から受信したＩ／Ｏリクエストに関する以下の処理を実行する。

（Ａ）ステージング：ＨＤＤ１０３０に保存されたデータをキャッシュメモリ１０２０上にコピーする。
（Ｂ）デステージング：キャッシュメモリ１０２０に保存されたデータをＨＤＤ１０３０へコピーする。なお、その前の処理としてＲＡＩＤ技術による冗長データを作成してもよい。

（Ｃ）リード処理：ホスト１１００から受信したリードリクエストに対して、当該リクエストに対応するデータがキャッシュメモリ１０２０上に存在するかどうか判定する。そして、当該リクエストに対応するデータがキャッシュメモリ１０２０上に存在しない場合は、ステージング処理を実行して当該データをキャッシュメモリ１０２０上にコピーした後に、そのデータをホスト１１００に対して送信する。なお、キャッシュメモリ１０２０上にかかるデータが存在する場合は、当該データをホスト１１００に対して送信する。

（Ｄ）ライト処理：ホスト１１００から受信したライトデータをキャッシュメモリ１０２０上に保存する。なお、当該処理時にキャッシュメモリ１０２０上に十分な空き領域が無い場合はデステージング処理を実行して適切なデータをＨＤＤ１０３０上にコピーした後にキャッシュメモリ１０２０上の当該領域を流用する。また既にキャッシュメモリ１０２０上に保存された領域がライトリクエストに含まれる場合は、そのまま既存のキャッシュメモリ１０２０上の領域へ上書きすることもある。

（Ｅ）キャッシュアルゴリズム：キャッシュメモリ１０２０上のデータの参照頻度や参照時期等を元にＬＲＵ等のアルゴリズムによってステージングすべきＨＤＤ１０３０上のデータやデステージングすべきキャッシュメモリ１０２０上のデータを決定する。

＜４．２．仮想化プログラム６０３０と仮想化情報６０７０＞
仮想化情報６０７０には、仮想化ボリューム毎の以下の構成に関連する情報が含まれる。

（１）ストレージ装置１５００内のボリューム内の領域とその領域が仮想ボリューム上のアドレス空間のどの領域としてホスト１１００に提供するかに関する以下の情報。仮想ボリュームが複数で構成される場合は下記情報も複数存在する。
（１ー１）仮想ボリュームを構成する、ストレージ装置１５００の識別子（又はポートの識別子）と、ボリュームの識別子と、ボリューム内の領域（開始アドレスと終了アドレス）
（１ー２）仮想ボリュームにおける領域（開始アドレスと終了アドレス）

（２）仮想ボリュームの容量
仮想化プログラム６０３０は、仮想化ストレージ装置１０００が、ストレージ装置１５００が提供するボリュームを用いてホスト１１００にボリュームを提供するためのプログラムである。なお、仮想化プログラム６０３０が提供する仮想ボリュームと、それに対応するストレージ装置１５００上のボリュームとの対応関係として、以下のパターンがある。

（Ａ）ストレージ装置１５００上のボリューム全体を仮想ボリュームの記憶領域として用いる場合。この場合、仮想ボリュームの容量は選択したボリュームとおおよそ同容量となる（制御情報や冗長情報をストレージ装置１５００上のボリュームに保存する場合。当該情報等がない場合は同一容量）。
（Ｂ）ストレージ装置１５００上のボリュームの一部の領域を仮想化ボリュームに対応する保存領域として用いる場合。この場合、仮想ボリュームの容量は当該利用対象の領域容量と大体同じとなる。

（Ｃ）複数のストレージ装置１５００上の複数のボリュームを仮想ボリュームの記憶領域として結合して用いる場合。この場合、仮想ボリュームの容量は各ボリューム容量の合計値とおおよそ同容量となる。なお、この結合方式としてはストライピングやＣｏｎｃａｔｅｎａｔｅ（複数ボリュームを連結して一つのボリュームとして扱う方法）等がある。
（Ｄ）（Ｃ）のパターンに付随してパリティ情報やミラーデータを保存する場合。この場合、仮想ボリュームの容量はミラーデータを保存する場合は（Ｃ）の半分で、パリティを保存する場合はパリティ計算方式に依存する。ストレージ装置１５００内部でＲＡＩＤによる高信頼化と組み合わせることによって仮想ボリュームに保存されたデータについての信頼性がより向上する。

なお、いずれのパターンについても、Ｉ／Ｏリクエストで指定するストレージ装置識別子（又はポート識別子）とボリューム識別子（Ｉ／Ｏリクエストで用いる、仮想化ストレージ装置内又はポート配下のボリュームを識別する情報で、ＬＵＮ（Logical Unit Number）や、ＣＫＤ形式のＣＵ番号とＬＤＥＶ（Logical DEVice）番号等がある）が元々のボリュームと異なる。

仮想化プログラム６０３０は、ステージングやデステージング対象となるデータが仮想ボリュームに対応する場合にＩ／Ｏ処理プログラム６０２０により呼び出され、仮想化情報６０７０を用いて以下の処理を実行する。

（Ａ）ステージング：仮想化ボリュームとストレージ装置１５００のボリュームの対応関係を元に、どのストレージ装置１５００のボリュームに保存されたデータをキャッシュメモリ１０２０上にコピーすべきかを決定した後に、キャッシュメモリ１０２０上へデータコピーする。

（Ｂ）デステージング：仮想化ボリュームとストレージ装置１５００のボリュームの対応関係を元に、どのストレージ装置１５００のボリュームへキャッシュメモリ１０２０上のデータをコピーすべきかを決定した後に、ストレージ装置１５００のボリュームへデータコピーする。なお、その前の処理としてＲＡＩＤ技術による冗長データを作成してもよい。

＜４．３．リモートコピープログラム６０１０とコピーペア情報６０４０＞
コピーペア情報６０４０はリモートコピーのコピー元ボリュームとコピー先ボリュームのコピーペア（ペアと省略することがある）毎に以下の情報を持つ。なお、本実施の形態では、コピー元ボリューム及びコピー先ボリュームは高可用性を実現する対象ボリュームが指定されることになる：

（１）コピー元ボリュームを持つ仮想化ストレージ装置１０００の識別子及びボリュームの識別子
（２）コピー先ボリュームを持つ仮想化ストレージ装置１０００の識別子とボリュームの識別子
（３）コピーペアの状態（詳細は後ほど述べる）

リモートコピープログラム６０１０は、コピー元ボリュームに保存されたデータをコピー先ボリュームにミラーリングするプログラムであり、コピーペア情報６０４０を参照して処理を行う。以下にリモートコピー（特に同期リモートコピー）の処理概要とペア状態について説明する。

＜４．３．１．同期リモートコピーのコピー処理動作＞
同期リモートコピーとは、前述の様に、コピー元の仮想化ストレージ装置１０００がホスト１１００からコピー元ボリュームに対するライトリクエストを受け付けた場合、ライトデータをコピー先の仮想化ストレージ装置１０００に送信した後に、ホスト１１００に対してライトリクエスト完了を返すリモートコピー方法である。

同期リモートコピーが実行される際、コピー元ボリュームとコピー先ボリュームとのペア間におけるリモートコピーの状況を管理１２００に表示したり、リモートコピーの状態を操作するために、仮想化ストレージ装置１０００のコントローラー１０１０は、コピーペア状態（Ｓｉｍｐｌｅｘ、Ｉｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ、Ｄｕｐｌｅｘ、Ｓｕｓｐｅｎｄ及びＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ）と呼ばれる情報を管理する。図７に同期リモートコピーのペア状態に関する状態遷移図を示す。以下、各ペア状態について説明する。

＜４．３．１．１．Ｓｉｍｐｌｅｘ状態＞
Ｓｉｍｐｌｅｘ状態は、ペアを構成するコピー元ボリュームとコピー先ボリュームとの間でコピーが開始されていない状態である。

＜４．３．１．２．Ｄｕｐｌｅｘ状態＞
Ｄｕｐｌｅｘ状態は、同期リモートコピーが開始され、後述する初期化コピーも完了してペアを構成するコピー元ボリューム及びコピー先ボリュームのデータ内容が同一となった状態である。本状態では、書き込み途中の領域を除けば、コピー元ボリュームのデータ及びコピー先ボリュームのデータの内容は同じとなる。なお、Ｄｕｐｌｅｘ中及びＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ及びＩｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態ではホスト１１００からコピー先ボリュームへのライトリクエストは拒否される。

＜４．３．１．３．Ｉｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態＞
Ｉｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態は、Ｓｉｍｐｌｅｘ状態からＤｕｐｌｅｘ状態へ遷移するまでの中間状態であり、この期間中に、必要ならばコピー元ボリュームからコピー先ボリュームへの初期化コピー（コピー元ボリュームに既に格納されていたデータのコピー先ボリュームへのコピー）が行われる。初期化コピーが完了し、Ｄｕｐｌｅｘ状態へ遷移するために必要な処理が終わったら、ペア状態はＤｕｐｌｅｘとなる。

＜４．３．１．４．Ｓｕｓｐｅｎｄ状態＞
Ｓｕｓｐｅｎｄ状態は、コピー元ボリュームに対する書き込みの内容をコピー先ボリュームに反映させない状態である。この状態では、ペアを構成しているコピー元ボリューム及びコピー先ボリュームのデータの内容は同じでない。ユーザーやホスト１１００からの指示を契機に、ペア状態は他の状態からＳｕｓｐｅｎｄ状態へ遷移する。それ以外に、仮想化ストレージ装置１０００間のネットワーク障害等が原因で同期リモートコピーを行うことが出来なくなった場合に自動的にペア状態がＳｕｓｐｅｎｄ状態に遷移することが考えられる。

以後の説明では、後者の場合、即ち障害により生じたＳｕｓｐｅｎｄ状態を障害Ｓｕｓｐｅｎｄ状態と呼ぶことにする。障害Ｓｕｓｐｅｎｄ状態となる代表的な原因としては、ネットワーク障害のほかに、コピー元ボリュームやコピー先ボリュームの障害、コントローラー１０１０の障害が考えられる。

Ｓｕｓｐｅｎｄ状態となった場合、コピー元ストレージ１０００は、Ｓｕｓｐｅｎｄ状態となった時点以降にコピー元ボリュームに対するライトリクエストがあると、ライトリクエストに従ってライトデータを受信し、コピー元ボリュームに保存するが、コピー先の仮想化ストレージ装置１０００にはライトデータを送信しない。またコピー元の仮想化ストレージ装置１０００は、書き込まれたライトデータのコピー元ボリューム上での書き込み位置を差分ビットマップ等として記憶する。

なおＳｕｓｐｅｎｄ状態となった時点以降にコピー先ボリュームに対してライトリクエストがあった場合には、コピー先の仮想化ストレージ装置１０００も上記の動作を行う。また、ペアが障害Ｓｕｓｐｅｎｄ状態となるより前に、当該ペアに対してフェンスと呼ばれる設定を行った場合、ペア状態が障害Ｓｕｓｐｅｎｄに遷移するとコピー元ボリュームに対するライトを拒否する。なお、コピー先の仮想化ストレージ装置１０００は障害Ｓｕｓｐｅｎｄ状態中のコピー先ボリュームに対するライトリクエストを拒否してもよい。

＜４．３．１．５．Ｄｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態＞
Ｄｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態は、Ｓｕｓｐｅｎｄ状態からＤｕｐｌｅｘ状態に遷移するまでの中間状態である。この状態では、コピー元ボリューム及びコピー先ボリュームのデータの内容を一致させるために、コピー元ボリュームからコピー先ボリュームへのデータのコピーが実行される。コピー元ボリューム及びコピー先ボリュームのデータの内容が同一になった後、ペア状態はＤｕｐｌｅｘとなる。

なお、Ｄｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態におけるデータのコピーは、Ｓｕｓｐｅｎｄ状態の間、コピー元の仮想化ストレージ装置１０００又はコピー先の仮想化ストレージ装置１０００が記録した書き込み位置（例えば上述の差分ビットマップ等）を利用して、更新が必要な部分（即ちコピー元ボリュームとコピー先ボリュームとのデータの不一致部分）だけをコピーする差分コピーによって実行される。

また、以上の説明ではＩｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態とＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態は別々な状態としたが、これらをまとめて一つの状態として管理ホスト１２００の画面に表示したり、状態を遷移させても良い。

＜４．３．１．６．ペア操作指示＞
ペア状態はホスト１１００や管理ホスト１２００からの以下の指示によって他の状態へ遷移する。

（Ａ）初期化指示：Ｓｉｍｐｌｅｘ状態にて本指示を受信するとＩｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態へ遷移する。
（Ｂ）再同期指示：Ｓｕｐｅｎｄ状態又は障害Ｓｕｓｐｅｎｄ状態にて本指示を受信するとＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態へ遷移する。
（Ｃ）分割指示：Ｄｕｐｌｅｘ状態にて本指示を受信するとＳｕｓｐｅｎｄ状態へ遷移する。
（Ｄ）コピー方向反転指示：Ｄｕｐｌｅｘ状態、Ｓｕｓｐｅｎｄ状態又は障害Ｓｕｓｐｅｎｄ状態にて本指示を受信すると、コピー元とコピー先との関係が反転する。Ｄｕｐｌｅｘ状態の場合は、本指示を受信することでコピー方向も反転する。

なお、初期化指示はコピー元の仮想化ストレージ装置１０００及びコピー元ボリュームと、コピー先の仮想化ストレージ装置１０００及びコピー先ボリュームとを指定することが考えられ、その他の指示については既にペア関係が出来上がっているため当該関係を示す識別子（コピー元の仮想化ストレージ装置１０００及びコピー元ボリュームと、コピー先の仮想化ストレージ装置１０００及びコピー先ボリュームとの組み合わせもその識別子の一つである）を指示すればよい。

＜５．ストレージ装置１５００で実行されるプログラム及び情報＞
図６にはストレージ装置１５００にて実行されるプログラム及び情報について記されているが、それぞれのプログラム及び情報は仮想化ストレージ装置１０００と同様の動作を行う。

＜６．デバイス関係テーブル５００１＞
図８はデバイス関係テーブル５００１が有する情報を示した図である。デバイス関係テーブル５００１は、Ｉ／Ｏパスマネージャー５０００が提供するホスト１１００内で仮想的なボリューム（より正確には当該ボリュームに対応する識別子）毎に以下の情報を管理する。

（Ａ）ホスト１１００内で仮想的なボリュームの識別子
（Ｂ）関係ボリューム識別子リスト：上記ホスト１１００で仮想的なボリュームの実体となりうるストレージ装置１５００のボリュームの識別子が入る。なお、個々の識別子はＩ／Ｏパスマネージャー５０００の下位レイヤであるＨＢＡデバイスドライバー５０１０が割り当てた識別子を用いる。本実施の形態においては、正系の仮想化ストレージ装置１０００（１０００Ｌ）が有するボリュームと副系の仮想化ストレージ装置１０００（１０００Ｒ）が有するボリュームの識別子がリストアップされる（通常状態ならば）。

（Ｃ）正系ボリューム：（Ｂ）でリストアップしたどちらのボリュームが正系かを示す。
（Ｄ）障害状態
（Ｅ）ペア状態

なお、ファイルシステム５０２０の視点からは（Ａ）の識別子も（Ｂ）の識別子も同様の扱いとするため、（Ａ）や（Ｂ）の識別子はそれぞれ重複が許されない。また（Ａ）と（Ｂ）をあわせた場合にも重複が許されないため、Ｉ／Ｏパスマネージャー５０００はその点を考慮して（Ａ）の識別子を生成する必要がある。

＜７．初期化処理＞
図９は、Ｉ／Ｏパスマネージャー５０００の初期化処理について記したフローチャートである。以下、このフローチャートを参照して、かかる初期化処理について説明する。なお、以下においては各種処理の処理主体を「Ｉ／Ｏパスマネージャー５０００」として説明する場合があるが、実際上は、ホスト１１００のプロセッサ１１０１（図１）が「Ｉ／Ｏパスマネージャー５０００」というプログラムに基づいて対応する処理を実行することは言うまでもない。

（Ｓ９００１）Ｉ／Ｏパスマネージャー５０００は、管理ホスト１２００やホスト１１００のユーザーからの以下の情報を含んだ初期化指示を受信する。尚、二重化システムの初期化処理として、ＨＡ（ハイアベイラビリティ）初期化指示ともいう。
（Ａ）正系の仮想化ストレージ装置１０００とその中のボリューム
（Ｂ）副系の仮想化ストレージ装置１０００とその中のボリューム

（Ｓ９００２）Ｉ／Ｏパスマネージャー５０００は、Ｓ９００１で指示された仮想化ストレージ装置１０００の両方と通信をしてボリュームの存在の有無及び容量を取得する。
（Ｓ９００３）Ｉ／Ｏパスマネージャー５０００は、Ｓ９００１で指定されたボリュームが存在し、同容量であることを確認する。確認できない場合は、Ｉ／Ｏパスマネージャー５０００は指示発信元へエラーを返す。

（Ｓ９００４）Ｉ／Ｏパスマネージャー５０００は、仮想化ストレージ装置１０００の一つ又は両方に対して、リモートコピー初期化指示を送信する。この初期化指示には正系のボリュームをコピー元ボリューム、副系のボリュームをコピー先ボリュームとして指示を出す。本指示によって仮想化ストレージ装置１０００はリモートコピーを開始する。

（Ｓ９００５）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１に以下の情報を登録し、その後初期化指示の発信元へ初期化開始応答を返す。
（Ａ）ホスト１１００内で仮想的なボリュームの識別子（＝Ｉ／Ｏパスマネージャー５０００が作成した値）
（Ｂ）関係ボリューム識別子リスト（＝Ｓ９００１で指定された仮想化ストレージ装置１０００とボリュームに対応する識別子が二つ（正系及び副系の両方））。
（Ｃ）正系ボリューム（＝Ｓ９００１で指定された正系ボリューム）の識別子
（Ｄ）障害状態（＝副系準備中）
（Ｅ）ペア状態（＝Ｉｎｉｔｉａｌ−Ｃｏｐｙｉｎｇ）

（Ｓ９００６）Ｉ／Ｏパスマネージャー５０００は、リモートコピーのペア状態を監視し、Ｄｕｐｌｅｘ状態に遷移したらデバイス関係テーブル５００１を以下の情報に更新する。
（Ｄ）障害状態（＝通常状態）
（Ｅ）ペア状態（＝Ｄｕｐｌｅｘ）

以上の処理によって、Ｉ／Ｏパスマネージャー５０００は、ユーザー指示に応じてリモートコピーの設定を含めた高可用化のための準備を開始することができる。なお、実際にはＳ９００５の直後にＩ／Ｏパスマネージャー５０００がホスト１１００内で仮想的なボリュームを提供できるため、ファイル形式でアクセスしたいユーザーは当該ボリュームに対するマウント指示等を出して、ファイルＩ／Ｏを開始することができる。また、別な方法としてＩ／Ｏパスマネージャー５０００はリモートコピー設定前に既に高可用化すべきボリュームに対応するホスト１１００内で仮想的なボリュームを定義し、ファイルシステム５０２０も当該ボリュームをマウントした状態から、ユーザーが副系となるボリュームを指定することによって上記の処理を開始してもよい。

＜８．ライトリクエスト処理フロー＞
図１０は、Ｉ／Ｏパスマネージャー５０００がファイルシステム５０２０からライトリクエストを受信した時の処理フローを示した図である。

（Ｓ１０００１）Ｉ／Ｏパスマネージャー５０００は、ファイルシステム５０２０より、ライト先となるホスト１１００内の仮想的なボリュームの識別子と、当該ボリュームのライト位置と、ライト長とを含むライトリクエスト関数を呼び出される（又はメッセージを受信する）。
（Ｓ１０００２）Ｉ／Ｏパスマネージャー５０００は、当該仮想的なボリュームの障害状態を確認し、リモートコピー失敗状態ならばＳ１００２０の両書き処理に制御を移し、それ以外ならばＳ１０００３を実行する。

（Ｓ１０００３）Ｉ／Ｏパスマネージャー５０００は、正系ボリュームに対してライトリクエストを発行する。なお、当該ライトリクエストの発行は実際は下位レイヤのＨＢＡデバイスドライバー５０１０を呼び出すことで実現する。
（Ｓ１０００４）Ｉ／Ｏパスマネージャー５０００は、ライトリクエストの応答を確認し、正常終了ならばファイルシステム５０２０に対して完了応答を返し、リモートコピー失敗ならＳ１００２０の両書き処理に制御を移し、無応答など、これ以外の場合はＳ１００１０の切り替え処理に制御を移す。

なお、Ｓ１００２０の両書き処理は以下のステップで実行される。
（Ｓ１００２１）リモートコピーの設定によって、正系又は副系のボリュームに対するライトが拒否されている場合は、Ｉ／Ｏパスマネージャー５０００はこの設定を解除する。
（Ｓ１００２２）Ｉ／Ｏパスマネージャー５０００は、正系ボリュームに対してライトリクエストを発行する。
（Ｓ１００２３）Ｉ／Ｏパスマネージャー５０００は、副系ボリュームに対してライトリクエストを発行する。Ｉ／Ｏパスマネージャー５０００は、正系と副系の両方からのライトリクエスト応答の到着を待って、ファイルシステム５０２０に対して完了応答を返す。

＜８．１．切り替え処理のフロー＞
以下、引き続き切り替え処理にて実現される処理を説明する。

（Ｓ１００１１）Ｉ／Ｏパスマネージャー５０００は、まず、デバイス関係テーブル５００１の障害状態を参照することで副系ボリュームが使用可能であるか確認し、使用不可能だと判断した場合はファイルシステム５０２０に対してエラー応答を返し、利用可能であればＳ１００１２を実行する。なお、使用不可能と判断できる状態としては、副系なし（障害によって副系の仮想化ストレージ装置１０００が機能してない場合や、初めから副系の仮想化ストレージ装置１０００を設定していないボリュームの場合）の状態や、前述の初期化準備中の状態がある。

（Ｓ１００１２）Ｉ／Ｏパスマネージャー５０００は、副系の仮想化ストレージ装置１０００に対してリモートコピーの停止指示を発行し、コピー状態がＳｕｓｐｅｎｄ状態となったことを確認後、コピー方向反転指示を指示する。
（Ｓ１００１３）Ｉ／Ｏパスマネージャー５０００は、副系の仮想化ストレージ装置１０００に対してリモートコピーの再同期指示を発行する。なお、実際に再同期が完了してペア状態がＤｕｐｌｅｘ状態に遷移するまで待つ必要はない。

（Ｓ１００１４）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１の正系ボリューム識別子をこれまで副系であったボリューム識別子に更新し、正系と副系を入れ替える。そして新たに正系となったボリュームに対してライトリクエストを、ＨＢＡデバイスドライバー５０１０を通じて送信する。
（Ｓ１００１５）Ｉ／Ｏパスマネージャー５０００は、ライトリクエストの応答を確認し、正常終了ならばファイルシステム５０２０に対して完了応答を返し、エラーならばエラー応答を返して終了する。

＜８．１．１．両書き処理中のライトリクエスト失敗への対策＞
Ｓ１００２０の両書き処理中にＳ１００２２の正系ボリュームに対するライトリクエストが失敗に終わった場合は、Ｓ１００１０の切り替え処理に制御を移すことが考えられる。また、Ｓ１００２３の副系ボリュームに対するライトリクエストが失敗に終わった場合は、デバイス関係テーブル５００１の障害状態を'副系なし'に変更し、ライト完了とする。

また、両書き処理中はペア状態が障害Ｓｕｓｐｅｎｄ状態であるため、仮想化ストレージ装置１０００のボリュームにはリモートコピーの差分ビットマップによってライト位置が記される。しかし、両書き処理によって両ボリュームに書かれるライトデータは同一であるため、両書き処理が正常に行われている間はこの差分ビットマップへの記録を回避し、通信障害回復後の再同期処理では差分データだけコピーできるようにすることが望ましい。その解決策として、両書き処理が正常に行われている間は正系と副系両方の仮想化ストレージ装置１０００の当該ボリュームの差分ビットマップを一定時間ごとに繰り返しクリアすることが考えられる。この方式ではクリア指示をライトリクエスト毎に発行する必要がなく、かつリモートコピーの再同期では対象ボリュームの全領域コピーは回避できる。なぜならば、直近に実施したクリア以後に行われた両書きのライトリクエストは両書きが失敗したライトリクエストと共にライト位置が差分ビットマップに記録されるが、両書きにて記録されたデータ領域が再同期でコピーされた場合もコピー先のデータ内容が変わらないため、データ不整合やコピー漏れ領域が発生しないからである。

なお、上記解決策では正系と副系両方の差分ビットマップをクリアするために一時的にライトリクエストの処理を停止してもよい。その停止方法としてはＩ／Ｏパスマネージャー５０００がファイルシステム５０２０から受け取ったライトリクエストを、両方の差分ビットマップのクリアが完了するまで、仮想化ストレージ装置１０００へ転送しない方法が考えられるし、正系の仮想化ストレージ装置１０００にて、両方の差分ビットマップのクリアが完了するまでライトリクエストの処理を保留する方法も考えられる。

第２の回避策としては、正系と副系のボリュームに対してそれぞれ２面の差分ビットマップを割り当てる方式がある。以下にその処理内容を示す。

（初期状態）正系と副系の仮想化ストレージ装置１０００は、それぞれ２面の差分ビットマップの片面に対してライトリクエストの位置を記録する。そのために、両仮想化ストレージ装置１０００は、アクティブ面（ライトリクエスト到着時にライト位置を記録する面を指し、もう一面の差分ビットマップは非アクティブ面と呼ぶ）に関する情報を保持・管理する。また、非アクティブ面の差分ビットマップは何も記録されていない状態が望ましい。

（Ｓｔｅｐ１）正系の仮想化ストレージ装置１０００は、アクティブ面の管理情報を非アクティブ面になっていたもう一つの差分ビットマップへ更新することで、ライトリクエストの位置の記録先となる差分ビットマップを切り替え、以後のライトリクエストは切り替え後の差分ビットマップへ記録する。副系の仮想化ストレージ装置１０００も同様に切り替える。なお、当該切り替え処理開始の契機はＩ／Ｏパスマネージャー５０００が両仮想化ストレージ装置１０００へ与える。なお、正系と副系の切り替え処理はどちらが先に実行してもよく、並列に実行してもよい。

（Ｓｔｅｐ２）Ｉ／Ｏパスマネージャー５０００は、両仮想化ストレージ装置１０００からの切り替え完了の応答を待ってから、両仮想化ストレージ装置１０００に対して差分ビットマップのクリア指示を出す。クリア指示を受信した仮想化ストレージ装置１０００は、非アクティブ面となっている差分ビットマップのライト位置をクリアし、Ｉ／Ｏパスマネージャー５０００へ応答を返す。切り替え処理と同様に、正系と副系のクリア処理はどちらが先に実行してもよく、並列に実行してもよい。

（Ｓｔｅｐ３）Ｉ／Ｏパスマネージャー５０００は、両仮想化ストレージ装置１０００からのクリア完了の応答を待ち、時間経過後にＳｔｅｐ１から再度実行する。

本解決策の場合、通信障害回復後の再同期処理では、正系と副系のビットマップ４面の論理和を計算することで、Ｄｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態中に差分コピーを行う領域を決定することができる。また本方式ではビットマップの面数が多いものの、ライトリクエストの保留は必要ない。

第３の解決策としては、上記第２の解決策の変形の以下の方式がある。
（初期状態）正系及び副系の仮想化ストレージ装置１０００は、それぞれ２面の差分ビットマップの両面に対してライトリクエストの位置を記録する。また、両仮想化ストレージ装置１０００は前回クリアを行った差分ビットマップ面に関する情報を保持・管理しておく。

（Ｓｔｅｐ１）Ｉ／Ｏパスマネージャー５０００は、両仮想化ストレージ装置１０００に対して差分ビットマップのクリア指示を出す。クリア指示を受信した仮想化ストレージ装置１０００は、前回クリアした差分ビットマップでないもう一つの差分ビットマップのライト位置をクリアし、Ｉ／Ｏパスマネージャーへ応答を返す。
（Ｓｔｅｐ３）Ｉ／Ｏパスマネージャー５０００は、両仮想化ストレージ装置１０００からのクリア完了の応答を待ち、時間経過後にＳｔｅｐ１から再度実行する。

＜９．リードリクエスト処理フロー＞
図１１はＩ／Ｏパスマネージャー５０００がファイルシステム５０２０からリードリクエストを受信したときの処理内容を示すフローチャートである。

（Ｓ１１００１）Ｉ／Ｏパスマネージャー５０００は、ファイルシステム５０２０より、リード先となるホスト内の仮想的なボリュームの識別子と、当該ボリュームのライト位置と、ライト長とを含むライトリードリクエスト関数を呼び出される（又はメッセージを受信する）。

（Ｓ１１００２）Ｉ／Ｏパスマネージャー５０００は、当該仮想的なボリュームの障害状態を確認し、通常状態でかつ正系ボリュームに対するＩ／Ｏ負荷が高い場合（たとえば、一定ＩＯＰＳを超える場合や一定帯域を超える場合等）と判断したときにはＳ１１０２１を実行し、それ以外の状態（副系なし、副系準備中、通常状態等）のときにはＳ１１００３を実行する。

（Ｓ１１００３）Ｉ／Ｏパスマネージャー５０００は、正系ボリュームに対してリードリクエストを発行する。
（Ｓ１１００４）Ｉ／Ｏパスマネージャー５０００は、リードリクエストの応答を確認し、正常終了ならばファイルシステム５０２０に対して完了応答を返し、それ以外ならばＳ１１０１０の切り替え処理に制御を移す。

（Ｓ１１０２１）Ｉ／Ｏパスマネージャー５０００は、副系ボリュームに対してリードリクエストを発行する。
（Ｓ１１０２２）Ｉ／Ｏパスマネージャー５０００は、リードリクエストの応答を確認し、正常終了ならばファイルシステム５０２０に対して完了応答を返し、それ以外ならばＳ１１０２３を実行する。
（Ｓ１１０２３）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１の障害状態を'副系なし'に更新し、Ｓ１１００３を実行する。

＜９．１．切り替え処理のフロー＞
以下、引き続き切り替え処理にて実現される処理を説明する。
（Ｓ１１０１１）Ｉ／Ｏパスマネージャー５０００は、まず、デバイス関係テーブル５００１の障害状態を参照することで副系ボリュームが使用可能であるか確認し、使用不可能だと判断した場合はファイルシステム５０２０に対してエラー応答を返し、利用可能だと判断した場合はＳ１１０１２を実行する。なお、使用不可能と判断できる状態としては、副系なし（障害によって副系の仮想化ストレージ装置１０００が機能してない場合や、初めから副系の仮想化ストレージ装置１０００を設定していないボリュームの場合）の状態や、前述の初期化準備中の状態がある。

（Ｓ１００１４）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１の正系ボリューム識別子をこれまで副系であったボリュームの識別子に更新し、正系と副系を入れ替える。そして新たに正系となったボリュームに対してリードリクエストを、ＨＢＡデバイスドライバー５０１０を通じて送信する。
（Ｓ１００１５）Ｉ／Ｏパスマネージャー５０００は、リードリクエストの応答を確認し、正常終了ならばファイルシステム５０２０に対して完了応答を返し、エラーならばエラー応答を返して終了する。

＜１０．障害対策処理フロー＞
本章では、Ｉ／Ｏパスマネージャー５０００が障害を検知してから回復を完了するまでの処理の流れを説明する。なお、本処理は定期的にバックグラウンドで実行される。

＜１０．１．仮想化ストレージ装置１０００間のネットワーク障害＞
（Ｓｔｅｐ１）Ｉ／Ｏパスマネージャー５０００は、リモートコピーのペア状態を監視し、障害Ｓｕｓｐｅｎｄ状態を発見することで何らかの障害発生を検知する。

（Ｓｔｅｐ２）Ｉ／Ｏパスマネージャー５０００は、副系の仮想化ストレージ装置１０００に対してリモートコピーの停止指示を発行し、コピー状態がＳｕｓｐｅｎｄ状態となった事を確認後、コピー方向を反転し、各仮想化ストレージ装置１０００に対して状態問い合わせを行い、仮想化ストレージ装置１０００自体に障害が発生しておらず、ネットワーク障害が原因であることを確認したら、デバイス関係テーブル５００１の障害状態を'リモートコピー失敗'に更新する。なお、本処理はストレージ管理者が行った作業結果を利用してもよい。

（Ｓｔｅｐ３）当該ネットワークが回復するまで待つ。
（Ｓｔｅｐ４）Ｉ／Ｏパスマネージャー５０００は、正系の仮想化ストレージ装置１０００に対してペアの再同期指示を発行する。
（Ｓｔｅｐ５）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１の障害状態を'副系準備中'に更新する。
（Ｓｔｅｐ６）Ｉ／Ｏパスマネージャー５０００は、ペア状態がＤｕｐｌｅｘになるまで待った後に、デバイス関係テーブル５００１の障害状態を'通常状態'に更新する。

＜１０．２．正系仮想化ストレージ装置１０００の障害停止＞
（Ｓｔｅｐ１）Ｉ／Ｏパスマネージャー５０００は、正系の仮想化ストレージ装置１０００の状態を監視することで障害発生を検知する。
（Ｓｔｅｐ２）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１の正系ボリュームの識別子を副系ボリュームの識別子に変更することで以後のＩ／Ｏリクエスト先を副系の仮想化ストレージ装置１０００に切り替え、さらに障害状態を'副系なし'に更新する。
（Ｓｔｅｐ３）Ｉ／Ｏパスマネージャー５０００は、旧正系（Ｓｔｅｐ２にて切り替えたので現副系）の仮想化ストレージ装置１０００が回復するまで待つ。

（Ｓｔｅｐ４）Ｉ／Ｏパスマネージャー５０００は、正系の仮想化ストレージ装置１０００に対してペアの再同期指示又は初期化指示を発行する。
（Ｓｔｅｐ５）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１の障害状態を'副系準備中'に更新する。
（Ｓｔｅｐ６）Ｉ／Ｏパスマネージャー５０００は、ペア状態がＤｕｐｌｅｘになるまで待った後に、デバイス関係テーブル５００１の障害状態を'通常状態'に更新する。

＜１０．３．副系仮想化ストレージ装置１０００の障害停止＞
（Ｓｔｅｐ１）Ｉ／Ｏパスマネージャー５０００は、副系の仮想化ストレージ装置１０００の状態を監視することで障害発生を検知する。
（Ｓｔｅｐ２）Ｉ／Ｏパスマネージャー５０００は、デバイス関係テーブル５００１の障害状態を'副系なし'に更新する。
（Ｓｔｅｐ３）Ｉ／Ｏパスマネージャー５０００は、副系の仮想化ストレージ装置１０００が回復するまで待つ。

＜１１．もう一つの初期化方法＞
これまでの説明では、Ｉ／Ｏパスマネージャー５０００に出された初期化要求に応じて仮想化ストレージ装置１０００にリモートコピーの設定を行ったが、以下に示す逆の方法も考えられる。

（Ｓｔｅｐ１）管理ホスト１２００は、仮想化ストレージ装置１０００に対してリモートコピーのペア初期化指示を出することで、リモートコピーを開始する。
（Ｓｔｅｐ２）Ｉ／Ｏパスマネージャー５０００は、スキャニング要求を受信する。
（Ｓｔｅｐ３）Ｉ／Ｏパスマネージャー５０００は、ＨＢＡデバイスドライバー５０１０を通じて各ボリュームに対するリモートコピーの設定（リモートコピー設定の有無やコピー元かコピー先か、ペアの相手となる仮想化ストレージ装置１０００とボリューム）を取得する。なお、この取得方法としてＩ／Ｏネットワーク上でＳＣＳＩコマンドを使うことも考えられるし、それ以外の通信ネットワークを用いて情報を取得してもよい。

（Ｓｔｅｐ４）Ｉ／Ｏパスマネージャー５０００は、前ステップで取得した情報を元に、デバイス関係テーブル５００１を作成し、これまで説明してきた処理を開始する。なお、当該デバイス関係テーブル５００１の作成例としては以下がある。
（Ａ）ホスト１１００内で仮想的なボリュームの識別子＝Ｉ／Ｏパスマネージャー５０００が作成した値
（Ｂ）関係ボリューム識別子リスト＝リモートコピーのコピー元ボリュームとコピー先ボリュームの識別子
（Ｃ）正系ボリューム＝リモートコピーのコピー元ボリューム
（Ｄ）障害状態＝仮想化ストレージ装置１０００から取得したペア状態がＤｕｐｌｅｘ状態ならば'通常状態'、Ｉｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ又はＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態ならば'副系準備中'、Ｓｕｓｐｅｎｄ又は障害Ｓｕｓｐｅｎｄ状態ならば'リモートコピー失敗'
（Ｅ）ペア状態＝仮想化ストレージ装置１０００から取得したペア状態

以上、これまで説明したハードウェア及びプログラムの動作によって本実施の形態では高可用性を実現する。なお、図１０と図１１等に記した切り替え処理に長時間要する場合の対策として、Ｉ／Ｏパスマネージャー５０００がＩ／Ｏリクエストを再送信する必要が出てきた場合に、予備処理として前記切り替え処理の一部を実行してもよい。この場合、再送信したＩ／Ｏリクエストが正常応答で返ってきた場合は先行して行った切り替え処理を元に戻せば良く、一方で再送信したＩ／Ｏリクエストがエラー応答で返ってきたり、まったく応答がなければ前記切り替え処理の残り部分を実行すればよい。また、本実施の形態は全てのボリュームが仮想化ストレージ装置１０００によって仮想化され、実体がストレージ装置１５００にある仮想ボリュームで、仮想化ストレージ装置１０００は仮想化専用のアプライアンスであってもよく、またその逆に全てのボリュームの実体が仮想化ストレージ装置１０００の内部にある構成であってもよい。また、仮想化ストレージ装置１０００が提供するボリュームには容量以外にもさまざまな属性が設定されることがある（たとえば、エミュレーションタイプやＳＣＳＩ規格で定められたＩｎｑｕｉｒｙコマンドで取得可能なボリューム識別番号がある）。

こうした属性情報や属性変更もリモートコピーによって正系の仮想化ストレージ装置から副系の仮想化ストレージ装置へ転送し、両方の仮想化ストレージ装置にて管理することも考えられる。

＜１２．もう一つのリード・ライト処理＞
図１０や図１１に記したライト・リード処理では、Ｉ／Ｏパスマネージャー５０００が明示的にリモートコピーの操作を仮想化ストレージ装置１０００へ転送する。しかし、当該リモートコピーの操作が仮想化ストレージ装置１０００のベンダー毎に異なる場合があるため、Ｉ／Ｏパスマネージャー５０００のライト処理やリード処理に含めないほうが好ましい場合がある。図２５〜図２７にこうした形態での処理内容を示す。なお、以下においては各種処理の処理主体を「仮想化ストレージ装置１０００」として説明する場合があるが、実際上は、その仮想化ストレージ装置１０００内のプロセッサ１０１１（図１）がメモリ１０１２（図１）に格納されたプログラムに基づいて対応する処理を実行することは言うまでもない。

＜１２．１．Ｉ／Ｏパスマネージャーのライト処理＞
図２５は、Ｉ／Ｏパスマネージャー５０００で実行される図１０の大体処理を示したフローチャートである。以下の点が図１０と異なる。
（相違点１）リモートコピーの操作Ｓ１００１２、Ｓ１００１３，Ｓ１００２１がスキップされる。
（相違点２）リモートコピー失敗時のフローＳ１００２０に到達しない。ただし、本相違点は通常のリード／ライト処理ではリモートコピー失敗を意味するエラーメッセージを識別できない場合に限った話である。

＜１２．２．ストレージ装置１０００の処理＞
図２７は、仮想化ストレージ装置１０００がライトリクエストを受信した時に行うリモートコピーの操作について示した図である。

（Ｓ２７００１）仮想化ストレージ装置１０００は、ライトリクエストを受信する。
（Ｓ２７００２）仮想化ストレージ装置１０００は、ライトリクエストが対象とするボリュームがリモートコピーに関係するかどうか判断し、無関係の場合はＳ２７００３を実行し、関係する場合はＳ２７００４を実行する。
（Ｓ２７００３）仮想化ストレージ装置１０００は、通常のライト処理を行い、ホスト１１００へ応答を返して終了する。

（Ｓ２７００４）仮想化ストレージ装置１０００は、ライトリクエストが対象とするボリュームのリモートコピーの属性を判断し、コピー元属性の場合はＳ２７００５を実行し、コピー先属性の場合はＳ２７０１１を実行する。
（Ｓ２７００５）仮想化ストレージ装置１０００は、同期リモートコピー処理を実行し、副系ストレージへライトデータを転送し、応答を待つ。
（Ｓ２７００６）仮想化ストレージ装置１０００は、コピーが成功したかどうか判断し、成功ならばＳ２７００８を実行し、失敗ならばＳ２７００７を実行する。
（Ｓ２７００７）仮想化ストレージ装置１０００は、対象ボリュームがコピー元となるリモートコピーペアの状態を障害Ｓｕｓｐｅｎｄ状態に遷移する。ただし、当該ボリュームに対するライトは禁止しない。

（Ｓ２７００８）仮想化ストレージ装置１０００は、通常のライト処理を行い、ホスト１１００へ応答を返して終了する。
（Ｓ２７０１１）仮想化ストレージ装置１０００は、リモートコピーを停止し、コピー元とコピー先の関係を反転する。
（Ｓ２７０１２）仮想化ストレージ装置１０００は、再同期処理を開始する。
（Ｓ２７０１３）仮想化ストレージ装置１０００は、通常のライト処理を行い、ホスト１１００へ応答を返して終了する。

なお、Ｓ２７０１２の再同期処理は完了まで待たなくても良い。なぜならば、Ｓ２７０１２を実行する仮想化ストレージ装置１０００は副系であり、正系の仮想化ストレージ装置１０００が正常動作しているとは限らないこと、及び再同期処理が完了するまでの時間が長いことが考えられるからである。なお、こうしたケースは＜１０．障害対策処理フロー＞で述べた処理によって回復される点はこれまでと同じである。

＜１２．３．Ｉ／Ｏパスマネージャーのリード処理＞
図２６は、Ｉ／Ｏパスマネージャー５０００で実行される図１１の大体処理を示したフローチャートである。以下の点が図１１と異なる。
（相違点１）リモートコピーの操作Ｓ１１０１２、Ｓ１１０１３がスキップされる。

なお、図１１ではリード処理に応じてリモートコピーの向きが反転したが、本処理では反転させない。なぜならば、副系の仮想化ストレージ装置１０００に対するリードリクエストは正系の仮想化ストレージ装置１０００が（ホスト＝仮想化ストレージ装置間の通信障害による原因を含めて）応答を返さない場合に加えて、正系の仮想化ストレージ装置１０００の過負荷が原因の場合もあるからである。そのため、副系の仮想化ストレージ装置１０００がコピー先ボリュームに対するリードリクエストを契機としてリモートコピーのペア反転を行うと、たまたま副系の仮想化ストレージ装置１０００に出されたリードリクエストでペアが反転し、その次のリードリクエストで再びペアが反転してしまうため、リード性能が悪化する結果となるからである。

ただし、Ｓ１１０２１の実行が抑制される場合は、仮想化ストレージ装置１０００はリード処理に際して以下の処理を行うことでリモートコピーのペア反転を行っても良い。
（Ｓｔｅｐ１）仮想化ストレージ装置１０００は、リードリクエストを受信する。
（Ｓｔｅｐ２）仮想化ストレージ装置１０００は、通常のリード処理を行う。
（Ｓｔｅｐ３）仮想化ストレージ装置１０００は、リード対象のボリュームがリモートコピーのコピー先ボリュームであるかどうかを判断し、該当する場合は次のＳｔｅｐ４を実行し、そうでない場合は終了する。
（Ｓｔｅｐ４）仮想化ストレージ装置１０００は、リモートコピーを停止し、コピー元とコピー先の関係を反転する。

（２）第２の実施の形態
次に第２の実施の形態について図１２を用いて説明する。第１の実施の形態と異なる点は、ストレージ装置１５００Ｌが複数の仮想化ストレージ装置１０００Ｌ，１０００Ｒに接続され、これら仮想化ストレージ装置１０００Ｌ，１０００Ｒがストレージ装置１５００Ｌ内のボリュームを共有することによって、仮想化ストレージ装置１０００Ｌ，１０００Ｒの片方が停止した場合でも第１の実施の形態よりも低コストでサービスが継続できるようになる点である。

ただし、仮想化ストレージ装置１０００Ｌ，１０００Ｒはキャッシュメモリ１０２０Ｌ，１０２０Ｒを有するため、仮想化ボリュームに対してライトデータを書き込んだ直後に正系の仮想化ストレージ装置１０００Ｌが災害停止した場合に備えて、ライトデータを副系の仮想化ストレージ装置１０００Ｒのキャッシュメモリ１０２０Ｒにも保存する必要があり、また両方の仮想化ストレージ装置１０００Ｌ，１０００Ｒのデステージングやステージングに対して工夫が必要となる。

通常状態におけるライトリクエストは以下のステップにて処理される。

（Ｓｔｅｐ１）ホスト１１００からライトリクエストを受信した正系の仮想化ストレージ装置１０００Ｌは当該ライトリクエストが当該仮想化ストレージ装置１０００Ｌ内部のＨＤＤ１０３０に対応するボリューム３０００ＬＡ宛なのか、両方の仮想化ストレージ装置１０００Ｌ，１０００Ｒがストレージ装置１５００Ｌのボリューム３５００Ｌを共有して提供する仮想化ボリューム（以後、共有仮想化ボリュームと呼ぶ）３０００ＬＢ宛なのか、通常の仮想化ボリューム宛なのかを判断する。なお、共有仮想化ボリューム３０００ＬＢ以外の処理については第１の実施の形態と同様の処理を行う。

（Ｓｔｅｐ２）正系の仮想化ストレージ装置１０００Ｌは自身のキャッシュメモリ１０２０Ｌに当該ライトデータを保存すると共に、当該ライトデータをリモートコピープログラムによって副系の仮想化ストレージ装置１０００Ｒのキャッシュメモリ１０２０Ｒに保存した後に、ホスト１１００に対して正常応答を返す。

（Ｓｔｅｐ３）正系の仮想化ストレージ装置１０００Ｌのキャッシングアルゴリズムが出ステージすべきキャッシュメモリ１０２０Ｌ上のデータを決定し、当該データをストレージ装置１５００Ｌのボリュームにデステージする。

（Ｓｔｅｐ４）デステージ完了後、正系の仮想化ストレージ装置１０００Ｌはデステージしたキャッシュメモリ１０２０Ｌ上のデータのアドレスを破棄するように副系の仮想化ストレージ装置１０００Ｒに指示する。なお、指示を受けた副系の仮想化ストレージ装置１０００Ｒは指示を受けたデータをキャッシュメモリ１０２０Ｒから破棄する。

なお、本構成では仮想化ストレージ装置１０００Ｌ，１０００Ｒ間のネットワークが切断された状態で副系の仮想化ストレージ装置１０００ＲにＩ／Ｏリクエストの切り替えを行った場合、仮想化ストレージ装置１０００Ｌ，１０００Ｒの両方が正系として自立的にデステージングを行う場合がある。そういった状況を回避するため、両仮想化ストレージ装置１０００Ｌ，１０００Ｒは自らを正系として処理する場合は先にストレージ装置１５００Ｌ内のかかる共有化されたボリューム３５００Ｌに対してＳＣＳＩＲｅｓｅｒｖｅ等の機能を用いて排他制御を行ってもよい。また、これ以外の方式として共有仮想化ボリューム３０００ＬＢについては仮想化ストレージ装置１０００Ｌのキャッシングを無効化してもよく、この場合は当該共有仮想ボリューム３０００ＬＢのアクセス権限がリードオンリーのアクセス権限へ変更された場合は当該変更に応じてキャッシングを有効にすることが考えられる。

（３）第３の実施の形態
次に第３の実施の形態について図１３を用いて説明する。本実施の形態はこれまでの実施の形態に記した情報システムをこれまでのプロダクションサイトと異なる遠隔地（バックアップサイト）に別途用意し、リモートコピーを行うもので、これによりプロダクションサイト被災時にバックアップサイトでサービスを再開することができる。

なお、これ以後の説明では、上述の「仮想化ストレージ装置」をストレージ装置と、「コピー元ボリューム」を正ボリュームと、「コピー先ボリューム」を副ボリュームと、「正系」をアクティブ側と、「副系」をスタンバイ側と呼ぶことがある。また、プロダクションサイトとバックアップサイトの情報システムをあわせてリモートコピーシステムと呼ぶことがある。

＜１．リモートコピーシステムの構成＞
本実施の形態では、各サイトはホスト１３０１０，１３０２０と複数のストレージサブシステム１３００１，１３００２，１３００３，１３００４とから構成されている。そしてプロダクションサイトでは、ストレージサブシステム１３００１，１３００２同士でこれまで説明してきた高可用化構成を採用している。またバックアップサイトでも同様に、ストレージサブシステム１３００３，１３００４同士でかかる高可用化構成を採用している。

さらに本実施の形態では、プロダクションサイトのアクティブ側のストレージサブシステム（コピー元ボリュームを持つ）１３００１からバックアップサイトのアクティブ側のストレージサブシステム（コピー先ボリュームを持つ）１３００３に対して同期又は非同期リモートコピーを行う。そしてプロダクションサイト被災時にはバックアップサイトのホスト１３０１０が高可用構成のストレージサブシステム１３００３，１３００４のいずれかアクティブな側に対してＩ／Ｏリクエストを発行することで、再起動したアプリケーション２０１０が処理を再開する。

なお、前述の通り、ストレージサブシステムとは仮想化ストレージ装置１０００（図１）の仮想化機能を用いない設定の構成や、仮想化ストレージ装置１０００とストレージ装置１５００（図１）の組み合わせで仮想化ストレージ装置１０００が仮想化機能を用いて仮想化ボリュームを提供している構成のどちらの概念も含んだものとして呼んでいる。また、本実施の形態では個々のストレージサブシステム１３００１、１３００２、１３００３、１３００４が別々な内部構成（例えば、ストレージサブシステム１３００１だけ仮想化ストレージ装置１０００のみで構成し、仮想化機能を用いない場合や、バックアップサイトのストレージサブシステム１３００３と１３００４でストレージ装置１５００（図１）を共有し、プロダクションサイト側では共有しない場合）を採用してもよい。

なお、以下においては各種処理の処理主体を「ストレージサブシステム」として説明する場合があるが、実際上は、そのストレージサブシステム内のプロセッサが当該ストレージサブシステム内のメモリに格納されたプログラムに基づいて対応する処理を実行することは言うまでもない。

＜２．処理＞
プロダクションサイトのホスト１３０１０のアプリケーション２０１０がライトリクエストを発行すると、ＯＳによってプロダクションサイト内のアクティブ側のストレージサブシステムを判断し、そちらにライトリクエストを転送する。なお、本図ではストレージサブシステム１３００１がこれに対応する。

プロダクションサイトのアクティブ側のストレージサブシステム１３００１は同期リモートコピーによってライトデータをプロダクションサイト内のスタンバイ側のストレージサブシステム（本図では１３００２が対応する）へ転送する。また、アクティブ側のストレージサブシステム１３００１はバックアップサイトのアクティブ側のストレージサブシステム（本図では１３００３が対応する）へ向けて同期又は非同期のリモートコピーとしてライトデータを転送する（本実施の形態による高可用構成ではアクティブ側にのみライトリクエストを処理するようにしているため、リモートコピーであっても同様にアクティブ側にて処理を行う）。ライトデータを受信したバックアップサイト内のアクティブ側のストレージサブシステム１３００３は受け取ったライトデータをサイト内のスタンバイ側のストレージサブシステム１３００４へ同期リモートコピーによって転送する。

そのため、プロダクションサイトのストレージサブシステム１３００１，１３００２はバックアップサイトのアクティブ側のストレージサブシステムを把握しており、バックアップサイトのストレージサブシステム１３００３，１３００４も想定外のストレージサブシステムからのリモートコピーを受け付けないために、プロダクションサイトのアクティブなストレージサブシステム（ストレージサブシステム１３０１）を把握している。

以上の処理によってプロダクションサイト、バックアップサイト共にサイト内の高い可用性を実現している。ただしバックアップサイト側では、コスト削減のために高可用構成をとらない構成であってもよい。

＜３．非同期リモートコピー＞
これまで説明してきた同期リモートコピーとは異なり、非同期リモートコピーはホスト１３０１０からのライトリクエストが到着した時点でライトデータを転送するのではなく、当該リクエスト完了応答後に転送する（言い方を変えると、非同期リモートコピーはホスト１３０１０へのリクエスト応答とは独立なタイミングでライトデータを転送する）。そのため、非同期リモートコピーはサイト間の距離が長く通信遅延が大きな場合でもライトリクエストの応答時間を低下させずにリモートコピーを行うことができる。しかし、非同期リモートコピーではプロダクションサイト側のストレージサブシステム１３００１にてライトデータをバッファリングする必要がある。このライトデータのバッファリング方式としては以下が考えられる。

（１）プロダクションサイトのストレージサブシステム１３００１は、コピー元ボリュームへのライトデータとライトデータの順序情報を含むジャーナルを作成し、これを自身のキャッシュメモリ又は専用ボリュームに保存すると共に、このジャーナルをバックアップサイトのストレージサブシステム１３００３へ転送し、バックアップサイトのストレージサブシステム１３００３はジャーナルの順序情報を参考にコピー先ボリュームへライトデータを保存する。これにより、プロダクションサイト災害時にはライト順序が守られた（より正確には依存関係のあるライトデータ）データをバックアップサイト側で提供できる。

（２）プロダクションサイトのストレージサブシステム１３００１は、ある期間毎のコピー元ボリュームへライトされたデータをグループ化して自身のキャッシュメモリ又は専用ボリュームへ保存し、非同期にバックアップサイトのストレージサブシステム１３００３へ転送し、当該グループ単位でバックアップサイトのストレージサブシステム１３００３が有するコピー先ボリュームへデータを保存する。

そのため、これら非同期リモートコピーのためにバッファリングされるライトデータもスタンバイ側のストレージサブシステム１３００２で保持しなければ、アクティブ側ストレージサブシステム１３００１が停止したときに非同期リモートコピーを引き継ぐことができない。よって、プロダクションサイトのアクティブ側のストレージサブシステム１３００１はライトデータだけではなく、コピー先ボリュームの情報や、前述の順序情報や、グループ化するタイミング等をスタンバイ側のストレージサブシステム１３００２へ伝え、スタンバイ側のストレージサブシステム１３００２はそれに従ってアクティブ側と同じ非同期リモートコピーのためのバッファリングデータを作成する。

なお、バックアップサイトのストレージサブシステム１３００３もプロダクションサイトから受け取ったライトデータを直ぐにコピー先ボリュームへ保存せずに、バッファリングを行うため、プロダクションサイト側と同様にアクティブ側の指示に従ってスタンバイ側も同様のバッファリングデータを作成し、また同様のタイミングでコピー先ボリュームにライトデータを保存する必要がある。

（４）第４の実施の形態
次に第４の実施の形態について図１４を用いて説明する。本実施の形態では、２台のストレージ装置により先に説明した同期リモートコピーを用いて冗長構成された情報システムにおいて、ストレージ装置が提供する機能を制御するインターフェース（機能Ｉ／Ｆ）の構成について述べる。

なお、本実施の形態から第１４の実施の形態までは、これまで仮想化ストレージ装置１０００Ｌ，１０００Ｒ、ストレージ装置１５００Ｌ，１５００Ｒと呼んでいたコンポーネントを、それぞれストレージ装置１５０００Ａ，１５０００Ｂ及び外部ストレージ装置１６０００Ａ，１６０００Ｂと呼ぶ。また、以下においては各種処理の処理主体を「ストレージ装置１５０００Ａ，１５０００Ｂ」や「外部ストレージ装置１６０００Ａ，１６０００Ｂ」として説明する場合があるが、実際上は、そのストレージ装置１５０００Ａ，１５０００Ｂ内の図示しないプロセッサやその外部ストレージ装置１６０００Ａ，１６０００Ｂ内のプロセッサが当該ストレージ装置１５０００Ａ，１５０００Ｂ又は外部ストレージ装置１６０００Ａ，１６０００Ｂ内のメモリに格納されたプログラムに基づいて対応する処理を実行することは言うまでもない。

本実施の形態は、ホスト１４０００からの機能制御要求が、ストレージ装置１５０００Ａに送信された後、ストレージ装置１５０００Ａが機能制御要求をストレージ装置１５０００Ｂに転送し、ストレージ装置１５０００Ａ，１５０００Ｂの双方が当該機能制御要求を解釈し実行する例を示している。

コマンドデバイス１５００２Ａ，コマンドデバイス１５００２Ｂはそれぞれストレージ装置１５０００Ａ、ストレージ装置１５０００Ｂが提供する論理ボリュームであり、機能を制御するホスト１４０００とのインターフェースとなる。なお、本実施の形態ではコマンドデバイス１５００２Ａがアクティブ側と仮定している。

また、同期リモートコピーにより、コマンドデバイス１５００２Ａの内容はコマンドデバイス１５００２Ｂの内容と常に一致している。コマンドデバイス１５００２Ａ、コマンドデバイス１５００２Ｂはオペレーティングシステム１４００１が提供するパス管理機能（Ｉ／Ｏパスマネージャー５０００（図１）が提供する機能に相当する）によりひとつのボリューム１４００４として機能管理プログラム１４００３に提供される。

論理ボリューム１５００１Ａ、論理ボリューム１５００１Ｂはそれぞれストレージ装置１５０００Ａ、ストレージ装置１５０００Ｂが提供する論理ボリュームであり、機能制御対象の論理ボリュームである。なお、本実施の形態では論理ボリューム１５００１Ａがアクティブ側と仮定している。

また、同期リモートコピーにより、論理ボリューム１５００１Ａの内容は、論理ボリューム１５００１Ｂの内容と常に一致している。論理ボリューム１５００１Ａ、論理ボリューム１５００１Ｂはオペレーティングシステム１４００１が提供するパス管理機能によりひとつのボリューム１４００５としてアプリケーションプログラム１４００２に提供される。

なお、ここで説明した機能制御対象の論理ボリュームは複数あってもよい。

機能管理プログラム１４００３の機能制御要求処理部１４００５は、ユーザーあるいはホスト１４０００内の他のプログラムあるいはホスト１４０００とは別のホスト（管理ホストなど）内のプログラムから、機能制御要求を受け付ける。機能制御要求を受け付けた機能制御要求処理部１４００５はボリューム１４００４に対する制御要求の内容をボリューム１４００４に対してライト／リードする。本実施の形態ではコマンドデバイス１５００２Ａがアクティブ側であるため、ライト／リードはコマンドデバイス１５００２Ａに対して発行される。

コマンドデバイス１５００２Ａに対するライトは機能制御を起動するときに用いられ、コマンドデバイス１５００２Ａに対するリードは機能制御の結果の出力値を得るために用いられる。

機能制御要求処理部１４００５が受け付ける制御要求には制御対象のストレージ装置１５０００Ａ，１５０００Ｂを一意に識別する情報（装置情報とも呼ぶ）と、制御対象の論理ボリューム１５００１Ａ，１５０００１Ｂを一意に識別する情報（ボリューム情報とも呼ぶ）と、機能制御に付随する情報とが含まれる。

ストレージ装置１５０００Ａの制御I／Ｆ処理部１５００３Ａはコマンドデバイス１５００２Ａに制御要求がライトされたことを検出する。制御Ｉ／Ｆ処理部１５００３Ａは制御要求の装置情報が自ストレージ装置（ストレージ装置１５０００Ａ）に一致するか判定する（判定１００）。本実施の形態ではコマンドデバイス１５００２Ａがアクティブ側なので、判定の結果は「一致する」となる。一致した場合、制御Ｉ／Ｆ処理部１５００３Ａはボリューム情報に対応する論理ボリューム１５００１Ａに対して所定の機能制御を実行するよう機能処理部１５００４Ａを呼び出す。具体的な例としては、ストレージ装置１５０００Ａが提供する機能のひとつであるローカルコピー機能（後で説明）のペア状態の参照操作がある。当該操作が論理ボリューム１５００１Ａに対して呼び出された場合、機能処理部１５００４Ａは、ローカルコピー機能の管理情報を参照し、ペア状態を取得した後、制御Ｉ／Ｆ処理部１５００３Ａ、コマンドデバイス１５００２Ａ及びボリューム１４００４を介して、機能制御要求処理部１４００５に対して、ペア状態を送信する。

一方、ストレージ装置１５０００Ｂの制御Ｉ／Ｆ処理部１５００３Ｂも同様の処理を行うが、本実施の形態では、コマンドデバイス１５００２Ｂはスタンバイ側なので、判定１００の結果は「一致しない」となる。この場合、制御Ｉ／Ｆ処理部１５００３Ｂは同期リモートコピーのペアの管理情報を参照し、ボリューム情報（論理ボリューム１５００１Ａに対応）に対応する自ストレージ装置（ストレージ装置１５０００Ｂ）内の論理ボリューム（論理ボリューム１５００１Ｂに対応）を特定する。そして、制御Ｉ／Ｆ処理部１５００３Ｂは論理ボリューム１５００１Ｂに対して所定の機能制御を実行するよう機能処理部１５００４Ｂを呼び出す。

以上により、ストレージ装置１５０００Ａの論理ボリューム１５００１Ａ、ストレージ装置１５０００Ｂの論理ボリューム１５００１Ｂに対して、所定の機能の制御が実行される。

本実施の形態では、ストレージ装置１５０００Ａ，１５０００Ｂが提供するローカルコピー機能のペア状態の参照操作を例にとって説明したが、（１）ローカルコピー機能のその他のペア操作（ペアの作成、ペアの分割等）、（２）ストレージ装置１５０００Ａ，１５０００Ｂが提供するローカルコピー機能の各種ペア操作、（３）ストレージ装置１５０００Ａ，１５０００Ｂが提供する論理ボリューム１５００１Ａ，１５００１Ｂに対するセキュリティ機能（後で説明するＬＤＥＶガード機能）の操作、（４）ストレージ装置１５０００Ａ，１５０００Ｂが提供する論理スナップショット機能（後で説明）の操作、等、ストレージ装置１５０００Ａ，１５０００Ｂが提供する各種機能の操作について適用できる。

なお、別な実行形態としては、アクティブ側とスタンバイ側両方のストレージ装置１５０００Ａ，１５０００Ｂに発行すべきコマンドを受けた場合は、アクティブ側のストレージ装置１５０００Ａは受取ったコマンドを処理すると共に、スタンバイ側のストレージ装置１５０００Ｂへ転送してコマンド処理をしてもらうことで、ホスト１４０００からは１回のコマンドで両方のストレージ処理を開始することも考えられる。また、プログラムの状態取得に関するコマンドの場合は、コマンドを受取ったアクティブ側のストレージ装置１５０００Ａがスタンバイ側のストレージ装置１５０００Ｂに同じコマンドを転送して状態を取得し、アクティブ側のストレージ装置１５０００Ａが両方の状態を比較した後にコマンド発信元へ状態を返すことも考えられる。

（５）第５の実施の形態
本実施の形態では機能Ｉ／Ｆの別の構成について述べる。図１５を用いて本実施の形態の構成を説明する。

本実施の形態の構成は図１４とほぼ同様である。図１４との違いは、
（１）コマンドデバイス１５００２Ａ、コマンドデバイス１５００２Ｂが同期リモートコピーのペアでない。
（２）機能管理プログラム１４００３からはコマンドデバイス１５００２Ａ及びコマンドデバイス１５００２Ｂが別々のボリューム１４００４Ａ、１４００４Ｂとして認識されている。
（３）機能制御要求処理部１４００５は機能制御要求をコマンドデバイス１５００２Ａ及びコマンドデバイス１５００２Ｂに送信する。
という３点である。

本実施の形態では、第４の実施の形態と同様に、機能制御要求処理部１４００５が受け付ける制御要求には制御対象のストレージ装置１５０００Ａ，１５０００Ｂを一意に識別する情報（装置情報とも呼ぶ）と、制御対象の論理ボリューム１５００１Ａ，１５００１Ｂを一意に識別する情報（ボリューム情報とも呼ぶ）と、機能制御に付随する情報とが含まれる。

本実施の形態では、第４の実施の形態と異なり、前述のように、ユーザーあるいはホスト１４０００内の他のプログラムあるいはホスト１４０００とは別のホスト内のプログラムから機能制御要求を受け付けた機能制御要求処理部１４００５は、両方のコマンドデバイス１５００２Ａ、１５００２Ｂに制御要求を送信する。

なお、機能制御要求処理部１４００５が装置情報を判定し、コマンドデバイス１５００２Ａに対しては、ボリューム情報として論理ボリューム１５００１Ａを指定し、コマンドデバイス１５００２Ｂに対しては、ボリューム情報として論理ボリューム１５００１Ｂを指定するように制御要求を書き換えてもよい。

さらにまた、ユーザーあるいはホスト１４０００内の他のプログラムあるいはホスト１４０００とは別のホスト内のプログラムがストレージ装置１５０００Ａ，１５０００Ｂを識別し、ストレージ装置１５０００Ａ、１５０００Ｂに対して二重に異なる制御要求を出してもよい。即ち、コマンドデバイス１５００２Ａに対して、論理ボリューム１５００１Ａの制御要求を出し、コマンドデバイス１５００２Ｂに対して、論理ボリューム１５００１Ｂの制御要求を出す。

（６）第６の実施の形態
本実施の形態では機能Ｉ／Ｆの更に別の構成について述べる。図１６を用いて本実施の形態の構成を説明する。

第６の実施の形態は第４の実施の形態とほぼ同様である。第４の実施の形態との違いは以下の点である。
（１）ホスト１４０００、ストレージ装置１５０００Ａ、ストレージ装置１５０００Ｂは互いにＬＡＮ（Local Area Network）のような相互結合網により接続されている。なお、これらはＬＡＮにより直結されていてもよいし、スイッチを経由して接続されていてもよい。

（２）コマンドデバイスがない構成であり、３者（ホスト１４０００、ストレージ装置１５０００Ａ、ストレージ装置１５０００Ｂ）間の通信はＬＡＮを介して行なわれる。
（３）機能制御要求処理部１４００５はＬＡＮを介して、制御要求を制御Ｉ／Ｆ処理部１５００３Ａに送信する。
（４）制御要求を受け取った制御Ｉ／Ｆ処理部１５００３ＡはＬＡＮを介して、制御要求を制御Ｉ／Ｆ処理部１５００３Ｂに送信する。

制御Ｉ／Ｆ処理部１５００３Ａ、１５００３Ｂが受け取った制御要求を処理する点は第４の実施の形態と同様であり、第６の実施の形態は第４の実施の形態と同等の機能Ｉ／Ｆを提供することができる。

（７）第７の実施の形態
本実施の形態では機能Ｉ／Ｆの更に別の構成について述べる。図１７を用いて本実施の形態の構成を説明する。

第７の実施の形態は第６の実施の形態とほぼ同様である。第６の実施の形態との違いは以下の点である。
（１）機能制御要求処理部１４００５はＬＡＮを介して、制御要求を両方の制御Ｉ／Ｆ処理部１５００３Ａ、１５００３Ｂに送信する。
（２）制御Ｉ／Ｆ処理部１５００３Ａは制御Ｉ／Ｆ処理部１５００３Ｂに対して、制御要求を送信しない。

制御Ｉ／Ｆ処理部１５００３Ａ、１５００３Ｂが受け取った制御要求を処理する点は第６の実施の形態と同様であり、第７の実施の形態は第６の実施の形態と同等の機能Ｉ／Ｆを提供することができる。

（８）第８の実施の形態
本実施の形態では、ストレージ装置内の論理ボリュームに対してセキュリティ機能（ＬＤＥＶセキュリティ機能）を適用する場合の例を説明する。

図１８はＬＤＥＶセキュリティ機能の一実施の形態を示したものである。本実施の形態の構成は第４の実施の形態の図１４とほぼ同一である。図１４と異なる点は論理ボリュームセキュリティ情報１５００５Ａ、１５００５Ｂが追加された点である。論理ボリュームセキュリティ情報１５００５Ａ、１５００５Ｂは、ホスト１４０００からストレージ装置１５０００Ａ，１５０００Ｂ内の論理ボリューム１５００１Ａ，１５００１Ｂに対するアクセス制御を行うために用いられる。アクセス制御の例としては、論理ボリューム１５００１Ａ，１５００１Ｂ内のデータの改ざんを抑止するために論理ボリューム１５００１Ａ，１５００１Ｂに対するライトアクセスを一切禁止する制御がある。また、別の例としては、法令等により一定期間の保存を義務付けられたデータに対して、所定の期間ライトを禁止する機能がある。さらに、別の例としては、機密情報の保護の観点等から特定のホストからのリード／ライトアクセスを禁止する機能がある。

図１８のように２台のストレージ構成１５０００Ａ，１５０００Ｂを用いて同期リモートコピーにより冗長化を図った構成においてもＬＤＥＶセキュリティ機能を適用したい場合が考えられる。この場合においても第４の実施の形態で説明した機能Ｉ／Ｆを用いてＬＤＥＶセキュリティ機能を制御することができる。具体的には、機能処理部１５００４において、対象ボリュームに対するセキュリティ情報を格納する論理ボリュームセキュリティ情報１５００５Ａ、１５００５Ｂに、ＬＤＥＶセキュリティに関するパラメータを設定したり、参照したりすればよい。

（９）第９の実施の形態
本実施の形態では、ストレージ装置内の論理ボリュームにローカルコピー機能を適用した場合の例を説明する。

ローカルコピー機能とは、ユーザーから指定されたボリュームの複製を、コピー元ボリュームと同じストレージ装置内において作成する機能である。本機能を用いて作成されたボリュームの複製はデータマイニングやテープバックアップのためにホストがアクセスを行ったり、あるいはバックアップデータとして長時間保存される。ローカルコピー機能は複製を作成したいボリュームと複製先ボリュームをペア（コピーペア）として指定し、そのペアに対してユーザーが操作を行うことでユーザーは複製を作成する。以後の説明では複製対象ボリュームを正ボリュームと呼び、複製先ボリュームを副ボリュームと呼ぶことがある。本実施の形態ではこのローカルコピー機能についてもアクティブ側のストレージとスタンバイ側のストレージで連携することで可用性を向上させる。

図１９はローカルコピー機能の一実施の形態を示したものである。図１９においては、ホスト１４０００はストレージ装置１５０００Ａとストレージ装置１５０００Ｂに接続されている。また、ストレージ装置１５０００Ａは外部ストレージ装置１６０００Ａと接続され、ストレージ装置１５０００Ｂは外部ストレージ装置１６０００Ｂと接続されている。また、ローカルコピー機能及び差分ビットマップ（正ボリューム１５００６Ａ，１５００６Ｂと副ボリューム１５００７Ａ，１５００７Ｂの間の差分の有無を示す情報）がストレージ装置１５０００Ａとストレージ装置１５０００Ｂにて実行及び管理される。

本実施の形態は正ボリューム１５００６Ａ，１５００６Ｂがストレージ装置１５０００Ａ，１５０００Ｂ内にあり、副ボリューム１５００７Ａ，１５００７Ｂが外部ストレージ装置１６０００Ａ，１６０００Ｂ内にある構成例を示している。正ボリューム１５００６Ａと副ボリューム１５００７Ａはペアであり、副ボリューム１５００７Ａの実体は外部ボリューム１６００１Ａ内にある。同様に、正ボリューム１５００６Ｂと副ボリューム１５００７Ｂはペアであり、副ボリューム１５００７Ｂの実体は外部ボリューム１６００１Ｂ内にある。

＜Ｄｕｐｌｅｘ状態における動作＞
Ｄｕｐｌｅｘ状態とはペア状態のひとつで正ボリューム１５００６Ａ，１５００６Ｂから副ボリューム１５００７Ａ，１５００７Ｂへ後述するバックグラウンドコピーが行われている状態である。

以下ではＤｕｐｌｅｘ状態におけるリード／ライト処理について述べる。なお、以下のリード／ライト処理の説明は、リード／ライト処理の対象ボリューム（正ボリューム１５００６Ａ，１５００６Ｂ）のアクティブ側がストレージ装置１５０００Ａであるという前提である。

まずリード処理について説明する。アプリケーションプログラム１４００２からリード要求を受け付けたオペレーティングシステム１４００１はパス管理機能により、（リード対象の正ボリュームに関して）アクティブ側のストレージがストレージ装置１５０００Ａとストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにリード要求を発行する。リード要求を受信したストレージ装置１５０００Ａはリード対象データをホスト１４０００に送信する。アプリケーション１４００２はオペレーティングシステム１４００１を介してリード対象データを受信する。以上によりリード処理は完了する。

次にライト処理について説明する。アプリケーションプログラム１４００２からライトリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能により、（リード対象の正ボリュームに関して）アクティブ側のストレージ装置がストレージ装置１５０００Ａとストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにライトリクエストを発行する。ライトリクエストを受信したストレージ装置１５０００Ａは、ライトデータを受信し、図示しないキャッシュメモリにライトデータを格納すると共にライトデータに対応する差分ビットマップのビットを１（オン）に設定する。

その後、当該ライトデータはリモートコピー機能により、ストレージ装置１５０００Ａ内のキャッシュメモリからストレージ装置１５０００Ｂ内の正ボリューム１５００６Ｂにコピー（同期リモートコピー）する。なお、同期リモートコピーの方法はこれまで説明した通りである。同期リモートコピーによりストレージ装置１５０００Ａからライトデータを受信したストレージ装置１５０００Ｂは、図示しないキャッシュメモリにライトデータを格納すると共にライトデータに対応する差分ビットマップのビットを１（オン）に設定する。その後、ストレージ装置１５０００Ｂはストレージ装置１５０００Ａに対してライト完了報告に送信し、ライト完了報告を受信したストレージ装置１５０００Ａはホスト１４０００に対してライト完了報告を送信する。

なお、ストレージ装置１５０００Ａの正ボリューム１５００６Ａ、ストレージ装置１５０００Ｂの正ボリューム１５００６Ｂにライトされたデータは、正ボリューム１５００６Ａ，１５００６Ｂへのライトとは非同期に副ボリューム１５００７Ａ，１５００７Ｂへコピーされる（以後、本処理をバックグラウンドコピー処理と呼ぶ）。バックグラウンドコピーは、差分ビットマップ定期的に監視し、差分あり（すなわちビットがオン）と記録された領域のデータを正ボリューム１５００６Ａ，１５００６Ｂから副ボリューム１５００７Ａ，１５００７Ｂへコピーし、コピーが終了したらビットをクリア（オフ又は０に）することにより行なわれる。

一方、スタンバイ側のストレージ装置１５０００Ｂも同期リモートコピーによってライトデータが到着した時点を契機として同様の処理を行う。

なお、本発明は上記例以外の構成、たとえば正ボリューム１５００６Ａ，１５００６Ｂは外部ストレージ装置１６０００Ａ内にあってもよいし、ストレージ装置１５０００Ａ，１５０００Ｂ内にあってもよい。副ボリューム１５００７Ａ，１５００７Ｂもまた、外部ストレージ装置１６０００Ａ内にあってもよいし、ストレージ装置１５０００Ａ，１５０００Ｂ内にあってもよい。

何らかの障害が発生し、アクティブ側の正ボリューム１５００６Ａに対するＩ／Ｏリクエストが処理できなくなった場合には、すでに説明した通り、オペレーティングシステム１４００１は、Ｉ／Ｏリクエストの対象を正ボリューム１５００６Ｂに切り替えてアクセスを継続する。この場合でも、ストレージ装置１５０００Ｂ内にはローカルコピー機能のペアが存在するため、副ボリューム１５００７Ｂを用いて先に述べたバックアップ等の処理を行なうことができる。

＜ペアＳｐｌｉｔとＳｐｌｉｔ状態の動作＞
Ｓｐｌｉｔ状態とはペア状態のひとつで、副ボリュームのイメージが確定した状態のことを指す。この状態では、正ボリュームと副ボリュームの内容が一致しておらず、正ボリュームと副ボリュームの間の差分が差分ビットマップで管理されている。また、この状態においては、副ボリュームが静止した状態になるため、ユーザーは先に述べたバックアップ等の処理を行なうことができる。

ホスト１４０００はローカルコピーのＤｕｐｌｅｘ状態のペアをＳｐｌｉｔ状態にする場合、これまで説明してきたバックグラウンドコピーの動作を停止させる（これをペアＳｐｌｉｔと呼ぶ）。ペアＳｐｌｉｔは第４〜第７の実施の形態で説明した機能Ｉ／Ｆを介して実施する。

（１）ホスト１４０００は機能Ｉ／Ｆを介してストレージ装置１５０００Ａ，１５０００Ｂにローカルコピーの停止命令を出す。通常、ホスト側ではこの停止命令直前にＩ／Ｏリクエストの発行を停止する。
（２）アクティブ側及びスタンバイ側のストレージ装置１５０００Ａ，１５０００Ｂはそれぞれ差分ビットマップ上でオンとなった領域のバックグラウンドコピーを完了させる。ホスト１４０００は両ストレージ装置１５０００Ａ，１５０００Ｂにおけるバックグラウンドコピーが完了ことを認識するメッセージをアクティブ側のストレージ装置１５０００Ａ、もしくは両ストレージ装置１５０００Ａ，１５０００Ｂから受領する。
（３）ホスト１４０００は当該メッセージを受領した後、Ｉ／Ｏ発行を再開する。

（２）までの処理により、アクティブ側及びスタンバイ側のストレージ装置１５０００Ａ，１５０００Ｂ内のペアはＳｐｌｉｔ状態になったことが確定する。この時点で両ストレージ装置１５０００Ａ，１５０００Ｂ内のペア状態はＳｐｌｉｔ状態となっている。なお、Ｓｐｌｉｔ中に行われた正ボリュームまたは副ボリュームへ行われたライトリクエストのライト位置は、後ほど説明するペア再同期のために差分ビットマップに記録される。

その後のＩ／Ｏリクエストの処理はＤｕｐｌｅｘ状態とほぼ同様である。Ｄｕｐｌｅｘ状態との違いは、バックグラウンドコピー処理が動作しない点である。

＜ペア作成＞
正ボリュームと副ボリュームがペア関係にない状態をＳｉｍｐｌｅｘ状態と呼ぶ。Ｓｉｍｐｌｅｘ状態からＤｕｐｌｅｘ状態に遷移させるための処理をペア作成と呼ぶ。ペア状態がＳｉｍｐｌｅｘ状態からＤｕｐｌｅｘ状態に遷移している過渡状態をＩｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態と呼ぶ。

ペア作成の指示は、第４〜第７の実施の形態で説明した機能Ｉ／Ｆを介して実施する。
（１）ホスト１４０００は機能Ｉ／Ｆを介して、ストレージ装置１５０００Ａに対してペア作成指示を出す。この結果アクティブ側及びスタンバイ側の両ストレージ装置１５０００Ａ，１５０００Ｂでペア作成処理が開始される。
（２）両ストレージ装置１５０００Ａ，１５０００Ｂはペア状態をＩｎｉｔｉａｌ−Ｃｏｐｙｉｎｇ状態に設定し、差分ビットマップ上のビットを全てオンにし、バックグラウンドコピーを開始する。
（３）バックグラウンドコピーが差分ビットマップの最後まで完了したら、ストレージ装置１５０００Ａ，１５０００Ｂはペア状態をＤｕｐｌｅｘ状態に設定する。

Ｉｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態におけるリード／ライト処理はＤｕｐｌｅｘ状態におけるリード／ライト処理と同様である。

＜ペア再同期＞
ペア状態をＳｕｓｕｐｅｎｄ状態からＤｕｐｌｅｘ状態に遷移させる操作をペア再同期と呼ぶ。ペア状態がＳｕｓｕｐｅｎｄ状態からＤｕｐｌｅｘ状態に遷移している過渡状態をＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態と呼ぶ。

ペア再同期の指示は、第４〜第７の実施の形態で説明した機能Ｉ／Ｆを介して実施する。
（１）ホスト１４０００は機能Ｉ／Ｆを介して、ストレージ装置１５０００Ａに対してペア再同期指示を出す。この結果アクティブ側及びスタンバイ側の両ストレージ装置１５０００Ａ，１５０００Ｂでペア再同期処理が開始される。
（２）両ストレージ装置１５０００Ａ，１５０００Ｂはペア状態をＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇに設定し、バックグラウンドコピーを開始する。
（３）バックグラウンドコピーが差分ビットマップの最後まで完了したら、ストレージ装置１５０００Ａ，１５０００Ｂはペア状態をＤｕｐｌｅｘ状態に設定する。

Ｄｕｐｌｅｘ‐Ｐｅｎｄｉｎｇ状態におけるリード／ライト処理はＤｕｐｌｅｘ状態におけるリード／ライト処理と同様である。

（１０）第１０の実施の形態
本実施の形態では第９の実施の形態とは異なるローカルコピー機能の実施の形態を説明する。本実施の形態の一構成例を図２０に示す。

まず、本実施の形態と第９の実施の形態との構成の違いは、外部ストレージ装置１６０００Ｂが存在せず、副ボリューム１５００７Ａ，１５００７Ｂの実体がいずれも外部ストレージ装置１６０００Ａ内の外部ボリューム１６００１Ａとなるようにマッピングされている点である。その他の構成は第９の実施の形態と同様である。

このように構成することにより、副ボリューム１５００７Ａ，１５００７Ｂに必要とされる物理的な記憶装置を削減することができる。

本実施の形態と第９の実施の形態の処理動作との大きな違いはスタンバイ側のストレージ装置１５０００Ｂが外部ボリューム１６００１Ａに対するバックグラウンドコピーを行なわず、ストレージ装置１５０００Ａとの通信により、ペアに関する制御情報であるペア状態と差分ビットマップ１５０１０Ｂのみを操作する点である。

以下では処理動作を詳細に説明する。

＜Ｄｕｐｌｅｘ状態における動作＞
以下ではＤｕｐｌｅｘ状態におけるリード／ライト処理について述べる。

まず、リード処理は第９の実施の形態でのリード処理と同様である。

次にライト処理について説明する。アプリケーションプログラム１４００２からライトリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能により、（リード対象の正ボリューム１５００６Ａに関して）アクティブ側のストレージ装置がストレージ装置１５０００Ａ及びストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにライトリクエストを発行する。ライトリクエストを受信したストレージ装置１５０００Ａは、ライトデータを受信し、図示しないキャッシュメモリにライトデータを格納すると共にライトデータに対応する差分ビットマップ１５０１０Ａのビットを１（オン）に設定する。

その後、当該ライトデータは同期リモートコピー機能により、ストレージ装置１５０００Ａ内の正ボリューム１５００６Ａからストレージ装置１５０００Ｂ内の正ボリューム１５００６Ｂにコピーされる。なお、同期リモートコピーの方法はこれまで説明した通りである。同期リモートコピー機能によりストレージ装置１５０００Ａからライトデータを受信したストレージ装置１５０００Ｂは、図示しないキャッシュメモリにライトデータを格納すると共にライトデータに対応する差分ビットマップ１５０１０Ｂのビットを１（オン）に設定する。その後、ストレージ装置１５０００Ｂはストレージ装置１５０００Ａに対してライト完了報告に送信し、ライト完了報告を受信したストレージ装置１５０００Ａはホスト１４０００に対してライト完了報告を送信する。

なお、ストレージ装置１５０００Ａの正ボリューム１５００６Ａにライトされたデータは、正ボリューム１５００６Ａへのライトとは非同期に副ボリューム１５００７Ａへバックグラウンドコピーされる。第９の実施の形態でのライト処理と異なり、ストレージ装置１５０００Ｂの正ボリューム１５００６Ｂにライトされたデータはバックグラウンドコピーされない。

ストレージ装置１５０００Ａにおけるバックグラウンドコピーは、差分ビットマップ１５０１０Ａを定期的に監視し、差分あり（すなわちビットがオン）と記録された領域のデータを正ボリューム１５００６Ａから副ボリューム１５００７Ａへコピーし、コピーが終了したらビットをクリア（オフ又は０に）することにより行なわれる。なお、本実施の形態では、第９の実施の形態でのライト処理と異なり、ストレージ装置１５０００Ｂにおいてはバックグラウンドコピーが行なわれない。

その後、第９の実施の形態でのライト処理と異なり、ストレージ装置１５０００Ａはクリアした差分ビットマップ１５０１０Ａ上のビットの位置情報をストレージ装置１５０００Ｂに通知する。通知を受信したストレージ装置１５０００Ｂは当該ビットに対応するストレージ装置１５０００Ｂ内の差分ビットマップ１５０１０Ｂ上のビット（差分ビット）をクリアする。なお、差分ビットの位置情報の通知はストレージ装置１５０００Ｂ内のコマンドデバイスを介して行なわれる。また、本実施の形態における構成では、コマンドデバイスを介して通知を行なったが、ストレージ装置１５０００Ａ，１５０００Ｂ間がＬＡＮで接続された構成である場合は、ＬＡＮを介した通信により通知を行なってもよい。以後、ストレージ装置１５０００Ａとストレージ装置１５０００Ｂとの間における、差分ビットやペア状態等といった機能の制御情報に関する通信はコマンドデバイスやＬＡＮを介して行うものとする。

何らかの障害が発生し、アクティブ側の正ボリューム１５００６Ａに対するＩ／Ｏリクエストが処理できなくなった場合、オペレーティングシステム１４００１は、第９の実施の形態と同様に、Ｉ／Ｏリクエストの対象を正ボリューム１５００６Ｂに切り替えてアクセスを継続する。

＜ペアＳｐｌｉｔとＳｐｌｉｔ状態の動作＞
ホスト１４０００はローカルコピーのＤｕｐｌｅｘ状態のペアをＳｐｌｉｔ状態にする場合、第９の実施の形態と同様にペアＳｐｌｉｔを行なう。なお、ペアＳｐｌｉｔにおいては、バックグラウンドコピーの終了処理が行なわれるが、本実施の形態ではストレージ装置１５０００Ｂにおいては、バックグラウンドコピーは動作していないため、実際には終了処理は行なわれない。

その後のＩ／Ｏリクエストの処理はＤｕｐｌｅｘ状態とほぼ同様である。Ｄｕｐｌｅｘ状態との違いは、ストレージ装置１５０００Ｂにおいてバックグラウンドコピー処理が動作しない点である。

＜ペア作成＞
ペア作成の指示は、第４〜第７の実施の形態で説明した機能Ｉ／Ｆを介して実施されるのは第９の実施の形態と同様である。

（１）ホスト１４０００は機能Ｉ／Ｆを介して、ストレージ装置１５０００Ａに対してペア作成指示を出す。この結果アクティブ側及びスタンバイ側の両ストレージ装置１５０００Ａ，１５０００Ｂでペア作成処理が開始される。
（２）両ストレージ装置１５０００Ａ，１５０００Ｂはペア状態をＩｎｉｔｉａｌ−Ｃｏｐｙｉｎｇ状態に設定する。ストレージ装置１５０００Ａは差分ビットマップ１５０１０Ａ上のビットを全てオンにし、バックグラウンドコピーを開始する。第９の実施の形態と異なり、ストレージ装置１５０００Ｂは差分ビットマップ１５０１０Ｂ上のビットを全てオンにするが、バックグラウンドコピーを行なわない。

（３）ストレージ装置１５０００Ａはバックグラウンドコピーが完了した領域に対応する差分ビットをクリアする処理とそれに付随する動作（差分ビットの位置情報の通知と差分ビットのクリア）はＤｕｐｌｅｘ状態における動作と同様である。
（４）第９の実施の形態と異なり、ストレージ装置１５０００Ａは、バックグラウンドコピーが差分ビットマップ１５０１０Ａの最後まで完了したら、ペア状態をＤｕｐｌｅｘ状態に設定し、ペア状態がＤｕｐｌｅｘ状態に変わったことをストレージ装置１５０００Ｂに通知する。通知を受信したストレージ装置１５０００Ｂはペア状態をＤｕｐｌｅｘ状態に設定する。

＜ペア再同期＞
ペア再同期の指示は、第４〜第７の実施の形態で説明した機能Ｉ／Ｆを介して実施されるのは第９の実施の形態と同様である。

（１）ホスト１４０００は機能Ｉ／Ｆを介して、ストレージ装置１５０００Ａに対してペア再同期指示を出す。この結果アクティブ側及びスタンバイ側の両ストレージ装置１５０００Ａ，１５０００Ｂでペア再同期処理が開始される。
（２）ストレージ装置１５０００Ａはペア状態をＤｕｐｌｅｘ‐Ｐｅｎｄｉｎｇに設定し、バックグラウンドコピーを開始する。第９の実施の形態と異なり、ストレージ装置１５０００Ｂにおいては、バックグラウンドコピーは行なわない。

（３）ストレージ装置１５０００Ａは、バックグラウンドコピーが差分ビットマップ１５０１０Ａの最後まで完了したら、ペア状態をＤｕｐｌｅｘ状態に設定する。ただし、第９の実施の形態と異なり、この処理を行なうのはストレージ装置１５０００Ａのみである。その後、ストレージ装置１５０００Ａは、ペア状態がＤｕｐｌｅｘ状態に変わったことをストレージ装置１５０００Ｂに通知する。通知を受信したストレージ装置１５０００Ｂはペア状態をＤｕｐｌｅｘ状態に設定する。

（１１）第１１の実施の形態
ＡＯＵ（Allocation On Use）機能の構成について述べる。ＡＯＵ機能はホストから使用された（ライトされた）領域に関してのみ実記憶領域を割り当てる機能である。

ＡＯＵ機能はデータが実際に格納される実ボリュームの集合体であるプールと、ホストに見せるボリュームである仮想ボリュームから構成される。本実施の形態における仮想ボリュームはライトが行われた部分のみ実データが割り当てられるという意味で仮想的である。ホストに見せているボリュームの全アドレス空間に実データが割り当てられている訳ではない。なお、実ボリュームは外部ストレージ装置内にあってもよいし、仮想ボリュームと同じストレージ装置内にあってもよい。

図２１はＡＯＵ機能の一実施の形態を示したものである。図２１においては、ホスト１４０００はストレージ装置１５０００Ａとストレージ装置１５０００Ｂに接続されている。また、ストレージ装置１５０００Ａは外部ストレージ装置１６０００Ａと接続され、ストレージ装置１５０００Ｂは外部ストレージ装置１６０００Ｂと接続されている。

本実施の形態は実ボリューム１６００２Ａが外部ストレージ装置１６０００Ａ，１６０００Ｂ内にある構成例を示している。仮想ボリューム１５００８Ａ内のデータはプール１６００３Ａの実ボリューム１６００２Ａ内のデータと対応付けられる。同様に仮想ボリューム１５００８Ｂ内のデータはプール１６００３Ｂの実ボリューム１６００２Ｂ内のデータと対応付けられる。また、仮想ボリューム１５００８Ａと仮想ボリューム１５００８Ｂは同期リモートコピー機能により内容が一致するように構成される。同期リモートコピーの方法はこれまで説明したとおりである。

次に本構成におけるリード／ライト処理について述べる。なお、以下のリード／ライト処理の説明は、リード／ライト処理の対象ボリュームのアクティブ側がストレージ装置１５０００Ａであるという前提である。

まずリード処理について説明する。アプリケーションプログラム１４００２からリードリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能によりアクティブ側のストレージがストレージ装置１５０００Ａ及びストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにリードリクエストを発行する。リードリクエストを受け付けたストレージ装置１５０００Ａは、仮想アドレス実アドレス変換テーブル１５００９Ａを参照し、リードデータにプール１６００３Ａ内の実領域が割り当てられているか判定する。

前述の判定で実領域が割り当てられている場合、ストレージ装置１５０００Ａは、当該実領域からリードデータを読み出してホスト１４０００に送信する。アプリケーション１４００２はオペレーティングシステム１４００１を介してリードデータを受信する。以上によりリード処理は完了する。

次にライト処理について説明する。アプリケーションプログラム１４００２からライトリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能によりアクティブ側のストレージ装置がストレージ装置１５０００Ａとストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにライトリクエストを発行する。ライトリクエストを受け取ったストレージ装置１５０００Ａは仮想アドレス実アドレス変換テーブル１５００９Ａを参照し、ライト対象データにプール１６００３Ａ内の実領域が割り当てられているか判定する（判定２００）。

前述の判定で実領域が割り当てられている場合、ストレージ装置１５０００Ａは、ホスト１４０００からライトデータを受信し、当該実領域に対応する図示しないキャッシュメモリ内の領域にライトデータを格納する。そして、同期リモートコピー機能によりライトデータをストレージ装置１５０００Ｂにライトリクエストを送信する。ストレージ装置１５０００Ａからライトリクエストを受信したストレージ装置１５０００Ｂは、ライトデータにプール１６００３Ａ内の実領域が割り当てられているか判定する。ここで、仮想ボリューム１５００８Ａの内容と仮想ボリューム１５００８Ｂの内容は同期リモートコピー機能により一致しているため、実領域は割り当てられていると判定される。その後、ストレージ装置１５０００Ｂは、ストレージ装置１５０００Ａからライトデータを受信し、当該実領域に対応する図示しないキャッシュメモリ内の領域にライトデータを格納し、ストレージ装置１５０００Ａにライト完了報告を行う。

前述の判定（判定２００）で実領域が割り当てられていない場合、ストレージ装置１５０００Ａは、仮想アドレス実アドレス変換テーブル１５００９Ａにライトデータのアドレスを登録し、実領域を確保する。その後、ストレージ装置１５０００Ａは、ホスト１４０００からライトデータを受信し、当該実領域に対応する図示しないキャッシュメモリ内の領域にライトデータを格納する。そして、同期リモートコピー機能によりライトデータをストレージ装置１５０００Ｂにライトリクエストを送信する。

ストレージ装置１５０００Ａからライトリクエストを受信したストレージ装置１５０００Ｂは、ライトデータにプール１６００３Ｂ内の実領域が割り当てられているか判定する。ここで、仮想ボリューム１５００８Ａの内容と仮想ボリューム１５００８Ｂの内容は同期リモートコピー機能により一致しているため、実領域は割り当てられていないと判定される。その後、ストレージ装置１５０００Ｂは、仮想アドレス実アドレス変換テーブル１５００９Ｂにライトデータのアドレスを登録し、実領域を確保する。そして、ストレージ装置１５０００Ｂは、ストレージ装置１５０００Ｂからライトデータを受信し、当該実領域に対応する図示しないキャッシュメモリ内の領域にライトデータを格納した後、ストレージ装置１５０００Ａにライト完了報告を行う。ライト完了報告を受信したストレージ装置１５０００Ａはホスト１４０００にライト完了報告を行う。ホスト１４０００がライト完了報告を受信し、ライト処理は完了する。

なお、キャッシュメモリに格納されたデータはキャッシュメモリへの格納とは非同期に実ボリューム１６００２Ａ，１６００２Ｂへライトされる。

何らかの障害により、アプリケーション１４００２がストレージ装置１５０００Ａ内の仮想ボリューム１５００８Ａ経由でのリード／ライト処理が不可能になった場合、オペレーティングシステム１４００１の提供するパス管理機能は障害を検出し、リード／ライト処理のアクセス経路をストレージ装置１５０００Ｂ内の仮想ボリューム１５００８Ｂ経由に切り替える。仮想ボリューム１５００８Ａの内容と仮想ボリューム１５００８Ｂの内容は同期リモート機能により一致しているため、アクセス経路が切り替わっても、継続して正常にリード／ライト処理を行うことができる。

（１２）第１２の実施の形態
本実施の形態ではＡＯＵ機能の第１１の実施の形態とは異なる実施の形態について述べる。本実施の形態の一構成例を図２２に示す。

まず、本実施の形態と第１１の実施の形態との構成の違いは、外部ストレージ装置１６０００Ｂが存在せず、仮想ボリューム１５００８Ａ、１５００８Ｂの実領域がいずれも外部ストレージ装置１６０００Ａ内のプール１６００３Ａ内の領域に割り当てられている点である。その他の構成は第１１の実施の形態と同様である。

なお、本実施の形態はストレージ装置１５０００Ａ及びストレージ装置１５０００Ｂが共通のプールとして、共通の外部ストレージ装置１６０００Ａ内の実ボリューム１６００２Ａを用いるため、第１１の実施の形態と異なり、実ボリューム１６００２Ａが外部ストレージ装置１６０００Ａ内にある構成に限定される。

このように構成することにより、プールに必要とされる物理的な記憶装置（ＨＤＤなど）の容量を削減することができる。

本実施の形態と第１１の実施の形態の処理動作の大きな違いは、スタンバイ側のストレージ装置１５０００Ｂがキャッシュメモリから外部ストレージ装置１６０００Ａ内の実ボリューム１６００２Ａに対してライトを行なわない点と、ストレージ装置１５０００Ａが仮想アドレス実アドレス変換テーブル１５００９Ａへの更新をストレージ装置１５０００Ｂに通知し、通知を受けたストレージ装置１５０００Ｂが仮想アドレス実アドレス変換テーブル１５００９Ｂを更新する点である。

以下では処理動作を詳細に説明する。

まずリード処理は第１１の実施の形態におけるリード処理と同様である。

次にライト処理について説明する。アプリケーションプログラム１４００２からライトリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能によりアクティブ側のストレージがストレージ装置１５０００Ａ及びストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにライトリクエストを発行する。ライトリクエストを受け取ったストレージ装置１５０００Ａは仮想アドレス実アドレス変換テーブル１５００９Ａを参照し、ライトデータにプール１６００３Ａ内の実領域が割り当てられているか判定する（判定３００）。

前述の判定で実領域が割り当てられている場合、ストレージ装置１５０００Ａは、ホスト１４０００からライトデータを受信し、当該実領域に対応するキャッシュメモリ内の領域にライトデータを格納する。そして、同期リモートコピー機能によりライトデータをストレージ装置１５０００Ｂにライトリクエストを送信する。次に、本実施の形態では、第１１の実施の形態と異なり、ストレージ装置１５０００Ａからライトリクエストを受信したストレージ装置１５０００Ｂは、即座にストレージ装置１５０００Ａからライトデータを受信し、キャッシュメモリに当該データを格納した後、ストレージ装置１５０００Ａにライト完了報告を行なう。ストレージ装置１５０００Ｂからライト完了報告を受信したストレージ装置１５０００Ａはホスト１４０００に対してライト完了報告を送信する。

前述の判定（判定３００）で実領域が割り当てられていない場合、ストレージ装置１５０００Ａは、仮想アドレス実アドレス変換テーブル１５００９Ａにライトデータのアドレスを登録し、実領域を確保する。その後、ストレージ装置１５０００Ａは、ホスト１４０００からライトデータを受信し、当該実領域に対応するキャッシュメモリ内の領域にライトデータを格納する。そして、ストレージ装置１５０００Ａは、同期リモートコピー機能によりライトデータをストレージ装置１５０００Ｂにライトリクエストを送信する。

次に、本実施の形態では、第１１の実施の形態と異なり、ストレージ装置１５０００Ａからライトリクエストを受信したストレージ装置１５０００Ｂは、即座にストレージ装置１５０００Ａからライト対象データを受信し、キャッシュメモリに当該データを格納した後、ストレージ装置１５０００Ａにライト完了報告を行なう。ストレージ装置１５０００Ａは、ストレージ装置１５０００Ｂからライト完了報告を受信した後、仮想アドレス実アドレス変換テーブル１５００９Ａへの変更内容をストレージ装置１５０００Ｂに送信する。

仮想アドレス実アドレス変換テーブル１５００９Ａへの変更内容を受信したストレージ装置１５０００Ｂは、同様の変更を仮想アドレス実アドレス変換テーブル１５００９Ｂに対して行なう。これによりストレージ装置１５０００Ｂ内の仮想ボリューム１５００８Ｂ内の当該ライト領域の実領域が共通の外部ストレージ装置１６０００Ａの実ボリューム１６００２Ａ内の（ストレージ装置１５０００Ａにより割り当てられた）実領域にマッピングされることになる。ストレージ装置１５０００Ｂは仮想アドレス実アドレス変換テーブル１５００９Ｂを更新した旨をストレージ装置１５０００Ａに通知する。その後、通知を受信したストレージ装置１５０００Ａはホスト１４０００に対してライト完了報告を行なう。なお、ストレージ装置１５０００Ａは（１）同期リモートコピーのデータ送信と、（２）仮想アドレス実アドレス変換テーブル１５００９Ａへの変更内容の送信を同時に行い、（１）及び（２）の処理の完了報告を受信した後ホスト１４０００に対してライト完了報告を行なってもよい。その後、ホスト１４０００がライト完了報告を受信し、ライト処理は完了する。

なお、ストレージ装置１５０００Ａ内のキャッシュメモリに格納されたデータはキャッシュメモリへの格納とは非同期に、ストレージ装置１５０００Ａにより実ボリューム１６００２Ａへライト（デステージ）される。デステージが完了した後、ストレージ装置１５０００Ａはストレージ装置１５０００Ｂにその旨を通知する。通知を受けたストレージ装置１５０００Ｂは当該ライトに対応するキャッシュメモリの領域を破棄する。なお、破棄せずに当該ライトに対応するキャッシュメモリの領域の属性をクリーン（キャッシュメモリの内容と記憶装置（ＨＤＤなど）内のデータの内容が一致している状態）としてもよい。

（１３）第１３の実施の形態
本実施の形態ではストレージ装置内のボリュームに論理スナップショット機能を適用した場合の例を説明する。

論理スナップショット機能とは、ローカルレプリケーションと類似した機能であり、ユーザーの指示時点の複製データをホストに提供する機能である。しかし、複製データを有する副ボリュームは、プールに属する実ボリュームの領域に保存された複製作成指示以後のライトデータと、正ボリュームのデータを用いて提供される仮想的な存在である。仮想的な副ボリュームの実体は実ボリュームの集合体であるプールに保持される。正ボリュームと副ボリュームの関係をスナップショットペアもしくは単にペアと呼ぶこともある。論理スナップショット機能においては、静止化ポイントにおける正ボリュームの内容と同一の内容の論理ボリュームが実際に作成される訳ではないという意味で、副ボリュームは仮想的である。論理スナップショット機能は先に説明したローカルコピー機能とは異なり、正ボリュームのサイズと同一のサイズの副ボリュームが不要である。これにより、副ボリュームの内容を保持するために必要な記憶装置（ＨＤＤなど）の容量を削減することが可能である。

本実施の形態ではこの論理スナップショット機能についてもアクティブ側のストレージとスタンバイ側のストレージで連携することで可用性を向上させることができる。

図２３はスナップショット機能の一実施の形態を示したものである。図２３においては、ホスト１４０００はストレージ装置１５０００Ａとストレージ装置１５０００Ｂに接続されている。また、ストレージ装置１５０００Ａは外部ストレージ装置１６０００Ａと接続され、ストレージ装置１５０００Ｂは外部ストレージ装置１６０００Ｂと接続されている。また、スナップショット機能及び差分ビットマップ（静止化ポイントにおける正ボリューム１５００６Ａ，１５００６Ｂと現時点における正ボリューム１５００６Ａ，１５００６Ｂの間の差分の有無を示す情報）１５０１０Ａ，１５０１０Ｂと仮想アドレス実アドレス変換テーブル（仮想的な副ボリューム１５００７Ａ，１５００７Ｂの実体の位置を管理するテーブル）１５００９Ａ，１５００９Ｂがストレージ装置１５０００Ａとストレージ装置１５０００Ｂにて実行及び管理される。更に、ストレージ装置１５０００Ａ内の正ボリューム１５００６Ａとストレージ装置１５０００Ｂ内の正ボリューム１５００６Ｂはリモートコピーのペアとなるように構成される。

本実施の形態は正ボリューム１５００６Ａ，１５００６Ｂがストレージ装置１５０００Ａ，１５０００Ｂ内にあり、プール１６００３Ａ，１６００３Ｂが外部ストレージ装置１６０００Ａ，１６０００Ｂ内にある構成例を示している。なお、プール１６００３Ａ，１６００３Ｂはストレージ装置１５０００Ａ，１５０００Ｂ内にあってもよい。

＜論理スナップショット作成指示＞
ホスト１４０００を利用するユーザーが論理スナップショット作成を指示すると、前記実施の形態に記載の方式によって、アクティブ側のストレージ装置１５０００Ａとスタンバイ側のストレージ装置１５０００Ｂに作成指示を発行する。作成指示を受信したストレージ装置１５０００Ａ，１５０００Ｂは当該指示を受けて、仮想的な副ボリューム１５００７Ａ，１５００７Ｂを準備し、この副ボリューム１５００７Ａ，１５００７Ｂに全て０（差分なしの意味）の差分ビットマップ１５０１０Ａ，１５０１０Ｂと仮想アドレス実アドレス変換テーブル１５００９Ａ，１５００９Ｂとを割り当てる。

＜正ボリュームに対するリード処理＞
これまで述べた実施の形態と同じである。

＜正ボリュームに対するライト処理＞
アプリケーションプログラム１４００２からライトリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能により、（ライト対象の正ボリュームに関して）アクティブ側のストレージがストレージ装置１５０００Ａ及びストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにライトリクエストを発行する。ライトリクエストを受信したストレージ装置１５０００Ａは、ライト対象アドレスの差分ビットマップ１５０１０Ａをチェックする。結果、１であればキャッシュメモリに正ボリューム１５００６Ａのライトデータとして、格納する。一方、０の場合は正ボリューム１５００６Ａの更新前のデータを副ボリューム１５００７Ａ用のデータとして用いるための以下に示すＣｏｐｙ‐Ｏｎ‐Ｗｒｉｔｅ処理を行う。

（Ｓｔｅｐ１）プール１６００３Ａに属する実ボリューム１６００２Ａの記憶領域を確保する。
（Ｓｔｅｐ２）正ボリューム１５００６Ａから当該記憶領域へ更新前データをキャッシュメモリを利用しつつコピーする。
（Ｓｔｅｐ３）退避する更新前データの保存先を管理するプール管理情報を更新し、当該データがプール１６００３Ａ内の実ボリューム１６００２Ａのどの領域に保存されたかわかるようにする。
（Ｓｔｅｐ４）受信したライトデータをキャッシュメモリに正ボリューム１５００６Ａの当該アドレス宛のデータとして保存し、ライト完了応答を返す。

これと並行して、当該ライトデータはリモートコピー機能により、ストレージ装置１５０００Ａ内の正ボリューム１５００６Ａからストレージ装置１５０００Ｂ内の正ボリューム１５００６Ｂにコピーされ、同様の処理がなされる。そのため、各ストレージ装置１５０００Ａ，１５０００Ｂはそれぞれで仮想アドレス実アドレス変換テーブル１５００９Ａ，１５００９Ｂや差分ビットマップ１５０１０Ａ，１５０１０Ｂの管理を行う。

＜副ボリュームに対するリード処理＞
アプリケーションプログラム１４００２からライトリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能により、（リード対象の副ボリュームに関して）アクティブ側のストレージがストレージ装置１５０００Ａ及びストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにリードリクエストを発行する。リードリクエストを受信したストレージ装置１５０００Ａは、正ボリューム１５００６Ａに対して記録していた差分ビットマップ１５０１０Ａをチェックする。結果、リード対象アドレスのビットが０であれば正ボリューム１５００６Ａの同じアドレスに保存されたデータをホスト１４０００へ返し、オペレーティングシステム１４００１は当該データをアプリケーション１４００２へ返す。一方、リード対象アドレスのビットが１の場合は仮想アドレス実アドレス変換テーブル１５００９Ａを参照して、正ボリューム１５００６Ａのリード対象アドレスに関する更新前のデータの場所を決定し、プール１６００３Ａに属する実ボリューム１６００２Ａからデータをホスト１４０００(アプリケーション１４００２)へ返す。

＜副ボリュームに対するライト処理＞
アプリケーションプログラム１４００２からライトリクエストを受け付けたオペレーティングシステム１４００１はパス管理機能により、（ライト対象の副ボリュームに関して）アクティブ側のストレージがストレージ装置１５０００Ａとストレージ装置１５０００Ｂのどちらかを判断し、アクティブ側のストレージ装置１５０００Ａにライトリクエストを発行する。ライトリクエストを受信したストレージ装置１５０００Ａは、正ボリューム１５００６Ａに割り当てられたライト対象アドレスの差分ビットマップ１５０１０Ａをチェックする。結果、１であれば仮想アドレス実アドレス変換テーブル１５００９Ａを参照することで、正ボリューム１５００６Ａの当該アドレスの更新前データが保存されたプール１６００３Ａ内の実ボリューム１６００２Ａの記憶領域を探し、当該領域へライトデータを保存する。一方、０の場合は以下の処理を行う。

（Ａ）プール１６００３Ａに属する実ボリューム１６００２Ａの領域を確保する。
（Ｂ）確保した領域にライトデータを保存し、仮想アドレス実アドレス変換テーブル１５００９Ａを更新することで当該ライトデータがプール１６００３Ａ内の実ボリューム１６００２Ａのどの領域に保存されたかわかるようにする。
（Ｃ）差分ビットマップ１５０１０Ａの当該アドレスに対応するビットを１に更新する。

＜Ｃｏｐｙ‐Ａｆｔｅｒ‐Ｗｒｉｔｅ処理＞
ストレージ装置１５０００Ａ，１５０００Ｂは、正ボリューム１５００６Ａ，１５００６Ｂに対するライト時に実行されるＣｏｐｙ‐Ｏｎ‐Ｗｒｉｔｅ処理の代わりとして以下に示すＣｏｐｙ‐Ａｆｔｅｒ‐Ｗｒｉｔｅ処理を実行してもよい。

（Ｓｔｅｐ１）受信したライトデータをキャッシュメモリに正ボリューム１５００６Ａ，１５００６Ｂの当該アドレス宛のデータとして保存し、ライト完了応答を返す。ただし、当該ライトデータのデステージングは抑制する。
（Ｓｔｅｐ２）プール１６００３Ａ，１６００３Ｂに属する実ボリューム１６００２Ａ，１６００２Ｂの記憶領域を確保する。
（Ｓｔｅｐ３）正ボリューム１５００６Ａ，１５００６Ｂから当該記憶領域に更新前データをキャッシュメモリを利用しつつコピーする。

（Ｓｔｅｐ４）退避した更新前データの保存先を管理するプール管理情報を更新し、当該データがプール１６００３Ａ，１６００３Ｂ内の実ボリューム１６００２Ａ，１６００２Ｂのどの領域に保存されたかわかるようにする。
（Ｓｔｅｐ５）抑制していたライトデータのデステージを許可する。

＜障害＞
何らかの障害が発生し、アクティブ側の正ボリューム１５００６Ａ及び副ボリューム１５００７Ａに対するＩ／Ｏリクエストが処理できなくなった場合には、すでに説明した通り、オペレーティングシステム１４００１は、Ｉ／Ｏリクエストの対象を正ボリューム１５００６Ｂ及び副ボリューム１５００７Ｂに切り替えてアクセスを継続することができる。なお、前述の通り、好ましくはスナップショット機能の正ボリューム１５００６Ａ，１５００６Ｂ及び副ボリューム１５００７Ａ，１５００７Ｂは同一のストレージ装置１５０００Ａ，１５０００Ｂに対してライトリクエストを発行したいため、正ボリューム１５００６Ａ，１５００６Ｂに対する切り替えが必要な場合は副ボリューム１５００７Ａ，１５００７Ｂも同時に行い、逆に副ボリューム１５００７Ａ，１５００７Ｂに対する切り替えが必要な場合は正ボリューム１５００６Ａ，１５００６Ｂに対しても切り替えを行う連携を行うことがこのましい。

（１４）第１４の実施の形態
本実施の形態では、第１３の実施の形態とは異なる論理スナップショット機能の実施の形態を説明する。図２４に本実施の形態の一構成例を示す。

まず、本実施の形態と第１３の実施の形態との構成の違いは、外部ストレージ装置１６０００Ｂが存在せず、仮想的な副ボリューム１５００７Ａ，１５００７Ｂの実領域がいずれも外部ストレージ装置１６０００Ａ内のプール１６００３Ａ内の領域に割り当てられている点である。その他の構成は第１３の実施の形態と同様である。

なお、本実施の形態はストレージ装置１５０００Ａとストレージ装置１５０００Ｂが共通のプール１６００３Ａとして、共通の外部ストレージ装置１６０００Ａ内の実ボリューム１６００２Ａを用いるため、第１３の実施の形態と異なり、実ボリューム１６００２Ａが外部ストレージ装置１６０００Ａ内にある構成に限定される。

このように構成することにより、プール１６００３Ａに必要とされる物理的な記憶装置（ＨＤＤなど）の容量を削減することができる。

本実施の形態と第１３の実施の形態の処理動作の大きな違いは以下の通りである。
（Ａ）通常時はスタンバイ側のストレージ装置１５０００Ｂがキャッシュメモリから外部ストレージ装置１６０００Ａ内の実ボリューム１６００２Ａに対してライトを行なわない代わりに、アクティブ側のストレージ装置１５０００Ａが正ボリューム１５００６Ａ、副ボリューム１５００７Ａ、プール１６００３Ａ内の実ボリューム１６００２Ａに対応するデータをデステージングする時にスタンバイ側のストレージ装置１５０００Ｂにこれを伝え、スタンバイ側のストレージ装置１５０００Ｂではこれによってキャッシュメモリ上のデータを破棄する。

（Ｂ）ストレージ装置１５０００Ａが仮想アドレス実アドレス変換テーブル１５００９Ａへの更新をストレージ装置１５０００Ｂに通知し、通知を受けたストレージ装置１５０００Ｂが仮想アドレス実アドレス変換テーブル１５００９Ｂを更新する。

また、（Ａ）の処理に変えて、副ボリューム１５００７Ａ，１５００７Ｂ又はプール１６００３Ａ内の実ボリューム１６００２Ａに対応するデータについてはキャッシングを無効化してもよい。この場合、前述のＣｏｐｙ‐Ｏｎ‐ライト処理による更新前データ退避では正ボリューム１５００６Ａ，１５００６Ｂに対するライト完了までにプール１６００３Ａ内の実ボリューム１６００２Ａへの退避データ保存が含まれるため、性能が悪化するが、Ｃｏｐｙ‐Ａｆｔｅｒ‐ライト方式ではそれが無いため、好適である。

以上、本発明の幾つかの実施態様を説明したが、これらの実施の形態は本発明の説明のための例示にすぎず、本発明の範囲をそれらの実施の形態にのみ限定する趣旨ではない。本発明は、その要旨を逸脱することなく、その他の様々な態様でも実施することができる。例えば、ＨＤＤ１０３０やキャッシュメモリ１０２０の代わりに不揮発性メモリを使用することができる。不揮発性メモリとしては、例えば、フラッシュメモリ（具体的には、例えば、ＮＡＮＤ型フラッシュメモリ）、ＭＲＡＭ（Magnetoresistive Random Access Memory）、ＰＲＡＭ（Parameter Random Access Memory）など、種々の不揮発性メモリを採用することができる。

（１５）第１５の実施の形態
図１との対応部分に同一符号を付して示す図２８は、仮想化機能を持つネットワークスイッチ（仮想化スイッチ）２８０００Ｌ，２８０００Ｒを適用した場合の実施の形態を示した概要図である。

＜１．本実施の形態のハードウェア構成＞
仮想化スイッチ２８０００Ｌ，２８０００Ｒは、複数のネットワークポートを持ち、ネットワークポート制御用のプロセッサが各ポートの転送制御や障害の検知や後術する仮想化を行う。なお、本概要図には図示されていないが、図１について上述した第１の実施の形態と同様に仮想化スイッチ２８０００Ｌ，２８０００Ｒには管理ホストが接続され、この管理ホストを介して仮想化スイッチ２８０００Ｌ，２８０００Ｒに対する設定を行ったり、仮想化スイッチ２８０００Ｌ，２８０００Ｒ間の設定コピーを行うことができる。なお、その他コンポーネントについては第１〜第１４の実施の形態と同じであるため、説明を省略する。

＜２．仮想化スイッチを用いた本実施の形態の特徴＞
仮想化スイッチ２８０００Ｌ，２８０００Ｒが提供する仮想化は第１〜第１４の実施の形態と異なる以下の特徴を持つ。

（特徴１）仮想的なＷＷＮ（又はポートネーム）を提供できる。ファイバーチャネルスイッチのポートはＦポート又はＥポートと呼ばれ、通常のホストやストレージが持つＮポート（通信の始点又は終点となることを意味する）とは異なる属性を持つ。そのため、仮想化スイッチ２８０００Ｌ，２８０００Ｒにおいて仮想化を行う場合、内部で実際に接続されていない仮想的なＷＷＮを仮想化スイッチ２８０００Ｌ，２８０００Ｒの両方で作成・提供すれば、ホスト１１００上のソフトウェアが明示的にＩ／Ｏパスを切り替える必要がなくなる。なお、より具体的にはファイバーチャネルの通信は前述のポートネームによって行われるが、これはファイバーチャネルスイッチが割り当てる識別子であり、識別子内部にはルーティング用に用いられるスイッチを識別するための情報が含まれている。そのため、両仮想化スイッチ２８０００Ｌ，２８０００Ｒは、ホスト１１００に対して、仮想的なＷＷＮを持つＮポートが仮想的なスイッチを経由して両仮想化スイッチ２８０００Ｌ，２８０００Ｒに接続されているかのごとく模擬できるように、ポートネームを割り当てて、ルーティングを行う。

（特徴２）スイッチでキャッシングを行わない。ファイバーチャネルスイッチは、通常、制御ヘッダだけ参照して転送先を決定し、データのバッファリングを行わない、いわゆるカットスルー方式で転送制御を行うため、仮想化機能を提供する場合もキャッシングを行わないことが多い。なお、キャッシングを行う場合は、本特徴が関係する処理についてはこれまで説明してきた実施の形態と同様の処理によって実現される。また、キャッシングを行わない場合の仮想化スイッチ２８０００Ｌ，２８０００Ｒのリード／ライト処理は、Ｉ／Ｏリクエストを受け付けてからストレージ装置１５００Ｌへのリクエスト処理転送及び処理完了を待ってホスト１１００に処理完了が返る、ライトスルー型の制御に類似したものと考えることができる。

（特徴３）本実施の形態での高可用化は両方の仮想化スイッチ２８０００Ｌ，２８０００Ｒに同じ仮想化の設定を行うだけでよい。これは仮想化スイッチ２８０００Ｌ，２８０００Ｒにてキャッシングを行っていないために可能となる。なお、仮想化スイッチ２８０００Ｌ，２８０００Ｒがリモートコピーやローカルコピーを行う場合、差分ビットマップ等スイッチ内部に存在する情報がある場合は、これまでの実施の形態と同じく、正系と副系の両方で内部情報を保持する必要がある。

なお、ここまで仮想化スイッチ２８０００Ｌ，２８０００Ｒはファイバーチャネルスイッチであるものとして説明を行っているが、仮想化スイッチ２８０００Ｌ，２８０００ＲがＥｔｈｅｒｎｅｔ（登録商標）や、ｉＳＣＳＩ又はＴＣＰ／ＩＰを用いたものでもよい。この場合、ＷＷＮがＭＡＣアドレスで、ポートネームがＩＰアドレスに対応するものとすることができるが、Ｅｔｈｅｒｎｅｔ（登録商標）やＴＣＰ／ＩＰの場合は仮想的なスイッチを提供せずに、直接仮想的なポートとそれに割り当てたＩＰアドレスを外部へ提供し、当該ＩＰアドレスに対するルーティングを行えばよい。

（１６）第１６の実施の形態
次に、第１６の実施の形態について説明する。本実施の形態は第１１の実施の形態及び第１２の実施の形態にて説明したＡＯＵ機能を高可用化構成の仮想化ストレージ装置が提供することに関する発明である。なお、以下において説明していない機能等については、第１〜第１５の実施の形態による情報システムと同様の構成を有する。

前述の通り、ＡＯＵ機能とは仮想化ストレージ装置が当該機能によってホスト１１００へ提供するボリューム（以後ＡＯＵボリュームと呼ぶ）について、使用開始時からＡＯＵボリュームの全アドレスに対してＨＤＤの記憶領域を割り当てるのではなく、ホスト１１００がライトを行ったアドレスに対してＨＤＤの記憶領域（より正確にはＨＤＤから構成されるボリューム（プールボリュームと呼ぶ）の記憶領域の一部又は全て）を割り当てる機能である。ＡＯＵ機能はＨＤＤを有効利用することができる。なぜならば、ホスト１１００で動作するファイルシステムの一部の種類ではアクセス継続中に動的なデータ容量拡張ができないため、ホスト１１００の管理者は将来利用する可能性のあるデータ容量も含めてボリュームの容量設定を行う。そのため、従来技術ではボリュームの容量設定を行った時点では使用せず、また将来も確実に使うとは限らないＨＤＤを搭載していなければならなかったからである。

なお、ＨＤＤ容量の有効利用の観点から考えた場合、ＡＯＵボリュームにライトが発生する前の領域に対してプールボリュームの領域が未割り当ての状態であったほうがよいが、他の目的（高性能化等）がある場合はこれに限られない。

＜１．本実施の形態の概要＞
図１との対応部分に同一符号を付した図２９に本実施の形態の概要を示す。本実施の形態による情報システムは、２台の仮想化ストレージ装置１０００Ｌ，１０００Ｒが共通のストレージ装置１５００Ｌと接続されている。そして、高可用化された２台の仮想化ストレージ装置１０００Ｌ，１０００ＲがＡＯＵ機能を有することで、情報システムのサービス停止時間を短縮している。なお、特に記載しない限り、ストレージ装置１５００Ｌは両方の仮想化ストレージ装置１０００Ｌ，１０００Ｒからアクセス可能な状態、言い換えれば共有された状態にあるものとするが、共有されていないストレージ装置が存在して当該ストレージ装置内のボリュームをＡＯＵの記憶領域として用いてもよい。また図２９には図示していないが、本実施の形態の場合、第１の実施の形態と同様に、仮想化ストレージ装置１０００Ｌ，１０００Ｒには管理ホスト１２００（図１）が接続されている。

ここでは、これまでに説明してきた実施の形態と異なる部分を中心に述べていく。２台の仮想化ストレージ装置１０００Ｌ，１０００Ｒは、ＡＯＵアドレス変換情報３１０３０Ｌ，３１０３０Ｒを用いてＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒを生成し、これをホスト１１００に提供する。ＡＯＵアドレス変換情報３１０３０Ｌ，３１０３０Ｒには、ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒのアドレス空間と仮想化ストレージ装置１０００Ｌ，１０００Ｒ内のプールボリュームの領域又はストレージ装置１５００Ｌ内のプールボリュームの領域との対応関係が含まれる。

ホスト１１００からＡＯＵボリューム２９０１０Ｌに対してライトリクエストが発行されると、正系の仮想化ストレージ装置１０００Ｌは、リクエスト対象のアドレス範囲にプールボリュームの領域が割り当てられているか判断し、割り当てられていない場合は仮想化ストレージ装置１０００Ｌ又はストレージ装置１５００Ｌが有するプールボリュームの領域を割り当てる。そしてライトリクエストが処理されることで、正系の仮想化ストレージ装置１０００Ｌのキャッシュ領域にライトデータが保存される。また、ＡＯＵボリューム２９０１０Ｌに対するライトデータは同期リモートコピーによって副系の仮想化ストレージ装置１０００Ｒへ転送され、正系と同様にキャッシュ領域にライトデータが保存される。

その後、両方の仮想化ストレージ装置１０００Ｌ，１０００Ｒはデステージング処理を行うが、ストレージ装置１５００Ｌに対応したライトデータに対しては仮想化ストレージ装置１０００Ｌ，１０００Ｒの片方だけがデステージングを行う。なぜならば、両方の仮想化ストレージ装置Ｌ，１０００Ｒが独立にライトデータのデステージングを行うと、ストレージ装置１５００Ｌに保存されるデータが不整合な状態（例えば、最後にライトしたデータが消えて、前回のライトデータに戻ってしまう等のデータ消失やライト順序の不整合がある）になってしまうからである。そのため、デステージングが必要になる前に予めどちらの仮想化ストレージ装置１０００Ｌ，１０００Ｒがデステージングを行うか決めておく必要がある。本実施の形態ではその一例として正系の仮想化ストレージ装置１０００Ｌがデステージングを行う場合について説明を行うが、副系の仮想化ストレージ装置１０００Ｒが行ってもよく、又はデステージング対象のアドレス空間を元にどちらの仮想化ストレージ装置１０００Ｌ，１０００Ｒが当該役割を担うか決定してもよい。

リードリクエストの場合も、正系の仮想化ストレージ装置１０００Ｌは、まずはリクエスト対象のアドレス範囲にプールボリュームの領域が割り当てられているかどうかを判断する。判断の結果、割り当てられている領域に対しては、仮想化ストレージ装置１０００Ｌは、該当するプールボリュームの領域（図示しないキャッシュメモリ上のデータを含む）からデータを読み出してホスト１１００へ転送し、割り当てられていない場合は予め定められた値（例えばゼロ）を返す。

図３０は、正系の仮想化ストレージ装置１０００Ｌの機能停止後に副系の仮想化ストレージ装置１０００ＲへＩ／Ｏリクエスト処理を切り替えた後の概要図である。本図にあるとおり、副系の仮想化ストレージ装置１０００ＲはＡＯＵアドレス変換情報３１０３０Ｒを元にストレージ装置１５００Ｌや仮想化ストレージ装置１０００Ｌ内部のＡＯＵアドレス変換情報３１０３０Ｒを用いてＩ／Ｏリクエストを処理する。そのために、正系と副系の仮想化ストレージ装置１０００Ｌ，１０００Ｒは、通常時から通信を行うことで、ＡＯＵアドレス変換情報３１０３０Ｌ，３１０３０Ｒのストレージ装置１５００Ｌが関係する部分を同じ内容に維持する。これにより副系の仮想化ストレージ装置１０００Ｒは、ストレージ装置１５００Ｌの割り当て状況を引き継ぐことができる。また、副系の仮想化ストレージ装置１０００Ｒは、正系の仮想化ストレージ装置１０００Ｌ内のキャッシュメモリからデステージングされたデータでない限り、キャッシュメモリに格納されているデータを当該キャッシュメモリから削除しないようにする。これにより、機能停止時に正系の仮想化ストレージ装置１０００Ｌ内のキャッシュメモリからデータが揮発した場合においてもデータ消失が発生しないようにすることができる。

＜２．仮想化ストレージ装置で実行されるプログラム及び情報＞
図６との対応部分に同一符号を付した図３１は、仮想化ストレージ装置１０００Ｌ，１０００Ｒ上で実行されるソフトウェアプログラムと当該プログラムが用いる情報について示している。

この図３１において、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、仮想化ストレージ装置１０００Ｌ，１０００Ｒが受信したＩ／Ｏリクエストを処理するプログラムで、第１〜第１４の実施の形態におけるＩ／Ｏ処理プログラム６０２０（図６）の機能を一部に含む。

ＡＯＵ管理プログラム３１０２０は、ＡＯＵ機能に関する設定や後術する重複削除（Deduplication）処理を実行するためのプログラムである。またＡＯＵアドレス変換情報３１０３０は、ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒとプールボリュームの領域との対応関係に関する情報である。さらにＡＯＵプール管理情報３１０４０は、ＡＯＵ機能が用いるプールボリュームの集合（プール）を管理するための情報である。

＜２．１．ＡＯＵアドレス変換情報＞
図３５はＡＯＵアドレス変換情報３１０１０の具体的な内容を示している。仮想化ストレージ装置１０００Ｌ，１０００Ｒは、ホスト１１００へ提供するボリュームの識別子と当該ボリューム内のアドレス空間を先頭から決められた大きさ（セグメントサイズ）に区切った領域（セグメント）のアドレスとでデータの保存領域等を管理する。なお、このセグメントサイズはプール定義時に設定される値である。

図３５において、「ＡＯＵボリューム識別子」及び「アドレス空間」は、対応するセグメントを含むＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの識別子と当該ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒ内における当該セグメントのアドレスとをそれぞれ示す。またプールＩＤは、そのＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒに領域を割り当てるプールの識別子を示す。

「ＣＯＷ（Copy On Write）フラグ」は、そのセグメントに対するライトリクエストが到着したときに、対応するライトデータを別途確保したプールボリューム領域に保存する必要があるかどうかを示すフラグである。本フラグは、異なるセグメントが同じプールボリュームの領域に対応付けられていた場合に、ライトデータを他のプールボリュームに保存する必要があることを意味する「ＯＮ」となることがある。

「プールボリューム領域識別子」は、そのセグメントが保存すべきデータを実際に保存しているプールボリューム領域の識別子を示す情報（識別情報）である。この識別情報は例えば以下の情報から構成される。

（１）仮想化ストレージ装置１０００Ｌ，１０００Ｒの内部のボリュームの領域を用いている場合は、内部ボリュームの識別子及びアドレス範囲。
（２）ストレージ装置１５００Ｌ内のボリュームの領域をもちいている場合は、ポートネーム等の装置又は通信先を識別する情報、ＬＵＮ等の装置内のボリュームを識別する情報、及びアドレス範囲。
（３）未割り当て領域の場合はＮＵＬＬ

「引継ぎ領域」は、対応する「プールボリューム領域識別子」の欄に識別子が記載されたプールボリュームが正系と副系の仮想化ストレージ装置１０００Ｌ，１０００Ｒの両方から管理されるかどうかを示す情報（両方から管理される場合は「Ｙｅｓ」、両方から管理されない場合は「Ｎｏ」）である。

「対ＡＯＵボリューム識別子」は、対応するＡＯＵボリューム識別子で特定されるボリュームと対を形成するＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの識別子が保持される。この識別子としては、対応する仮想化ストレージ装置１０００Ｌ，１０００Ｒの識別子と、対応するＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの識別子とを組み合せたものが用いられる。

なお、上述のようにＡＯＵの領域管理をセグメントを単位として行うのは、ブロック単位で管理するとＡＯＵアドレス変換情報３１０３０等の管理情報が大きくなりすぎてしまうためにＩ／Ｏ性能が悪化してしまうことが理由の一つである。

＜２．２．ＡＯＵプール管理情報＞
図３６は、ＡＯＵプール管理情報３１０４０の具体的な構成を示している。ＡＯＵプール管理情報３１０４０はプール毎に以下の情報を保持する。

（１）セグメントサイズ
（２）プールに割り当てられたボリューム（プールボリューム）のリスト
（３）プールボリュームの領域で割り当てられていない領域のリスト
（４）空き容量
（５）容量が不足してきたことを警告するアラートを出すスレッショルド値
（６）プール対の相手が設定された仮想化ストレージ装置の識別子と当該装置内のプールＩＤ。なお、「プール対」については後ほど説明する。

＜３．初期化＞
本実施の形態の初期化は以下の手順で行われる。

１．プールの初期化
２．ＡＯＵボリュームの生成
３．ＡＯＵボリューム同士の関連付け
４．同期リモートコピーの設定

以下に、その詳細について説明する。なお、以下においては、一部処理の処理主体を「管理ホスト」や「プログラム」として説明しているが、「管理ホスト」の部分については、その管理ホスト内のプロセッサが当該管理ホスト内のメモリに格納された対応するプログラムに基づいてその処理を実行し、「プログラム」の部分については、対応する仮想化ストレージ装置１０００Ｌ，１０００Ｒ内のプロセッサ１０１１がそのプログラムに基づいて処理を実行することは言うまでもない。

＜３．１．プールの初期化＞
以下の手順で初期化を行う。

（Ｓｔｅｐ１）管理ホスト１２００からの指示によって、仮想化ストレージ装置１０００Ｌ，１０００Ｒの片方で実行されるＡＯＵ管理プログラム３１０２０は、プールを作成する。このとき、当該指示にはセグメントサイズが含まれる。また、プール作成の過程で、ＡＯＵ管理プログラム３１０２０はプールＩＤを含むＡＯＵプール管理情報３１０４０の該当エントリを作成する。
（Ｓｔｅｐ２）Ｓｔｅｐ１と同様の処理によって、仮想化ストレージ装置１０００Ｒ，１０００Ｌのもう片方にもプールを作成する。

（Ｓｔｅｐ３）管理ホスト１２００は、仮想化ストレージ装置１０００Ｌ，１０００Ｒの両方に対して、Ｓｔｅｐ１とＳｔｅｐ２で作成したプールをプール対に設定すべき指示を発行する。当該指示にはプール対となるプールのＩＤと、そのプールを提供する仮想化ストレージ装置１０００Ｌ，１０００Ｒの識別子との組が含まれる。当該指示を受信したＡＯＵ管理プログラム３１０２０は、プール対となる相手の仮想化ストレージ装置１０００Ｌ，１０００ＲのＡＯＵ管理プログラム３１０２０と通信を行い、両プールに設定されたセグメントサイズが等しく、両プールとも既にプール対になっていないことが確認できたときに、それらプールをプール対に設定する。なお、ＡＯＵ管理プログラム３１０２０は、かかるプールをプール対に設定するに際して、相手のプールＩＤの識別子をＡＯＵプール管理情報３１０４０に登録する。

（Ｓｔｅｐ４）管理ホスト１２００は、プールボリューム作成の指示を仮想化ストレージ１０００Ｌ，１０００Ｒの片方に発行する。なお、当該指示には仮想化ストレージ装置１０００Ｌ，１０００Ｒ内部に定義されたボリュームの識別子が含まれている。当該指示を受信した仮想化ストレージ装置１０００Ｌ，１０００ＲのＡＯＵ管理プログラム３１０２０は、指定されたボリュームの属性をプールボリュームに変更し、指定されたボリュームの識別子をＡＯＵプール管理情報３１０４０のプールボリュームリストに追加する。

（Ｓｔｅｐ５）管理ホスト１２００は、Ｓｔｅｐ３と同様の指示を仮想化ストレージ装置１０００Ｒ，１０００Ｌのもう片方へ発行する。指示を受け取った仮想化ストレージ装置１０００Ｒ，１０００Ｌのもう片方はＳｔｅｐ３と同様の処理を行う。

なお、管理者が仮想化ストレージ装置１０００内部のボリュームをＡＯＵに用いないと判断した場合はＳｔｅｐ４及びＳｔｅｐ５は省略することができる。

（Ｓｔｅｐ６）管理ホスト１２００は、ストレージ装置１５００Ｌのボリュームをプールボリュームに設定する指示を仮想化ストレージ装置１０００Ｌ，１０００Ｒのどちらかに発行する。なお、理解を容易にするために、以後の説明では、指示発行先を仮想化ストレージ装置１０００Ｌ、支持発行先と対の仮想化ストレージ装置１０００を仮想化ストレージ装置１０００Ｒであるものとするが、逆の関係であってもよい。ここで、当該指示にはストレージ装置１５００Ｌと当該ボリュームを識別する情報のほかに、当該ボリュームがプール対になっている相手の仮想化ストレージ装置１０００Ｒが引き継ぐことを示す情報が含まれる。指示を受信した仮想化ストレージ装置１０００ＬのＡＯＵ管理プログラム３１０２０は、対の仮想化ストレージ装置１０００Ｒと以下に示す連携を行う。

（Ａ）指示を受信した仮想化ストレージ装置１０００Ｌは、指示に含まれるストレージ装置１５００Ｌのボリュームに対してリードリクエスト（又はライトリクエスト）を発行することで、当該ストレージ装置１５００Ｌ及び当該ボリュームのいずれもが存在し、かつ当該ボリュームにアクセス可能であるかどうか確認する。ストレージ装置１５００Ｌやかかるボリュームが存在しなかったり、当該ボリュームにアクセスができなかった場合は管理ホスト１２００にエラーを返し、アクセス可能であった場合は次に進む。なお、当該エラーにはストレージ装置１５００Ｌに対するアクセスができなかったことを示す情報を添付するものとし、この情報を管理ホスト１２００において表示するようにしてもよい。

（Ｂ）指示を受信した仮想化ストレージ装置１０００Ｌは、対の仮想化ストレージ装置１０００Ｒに対してプールボリューム作成指示を転送する。なお、当該指示には管理ホスト１２００からの指示に含まれていた対象ボリュームを識別する情報と、当該ボリュームがプール対に属する両方のプールで管理することを示す情報とが含まれている。なお、プールボリューム作成指示の転送先は、ＡＯＵプール管理情報３１０４０における「プール対の識別情報」を参照することで特定できる。

（Ｃ）仮想化ストレージ装置１０００Ｒは、（Ｂ）の指示を受信すると、（Ａ）と同様の処理を行うことでストレージ装置１５００Ｌ内のかかるボリュームにアクセス可能であることを確認する。そして、かかるボリュームにアクセス可能ならば、ＡＯＵプール管理情報３１０４０のプールボリュームリストに当該ボリュームを共通管理であることを示す情報と共に追加し、前述の指示を受信した仮想化ストレージ装置１０００Ｌへ結果を返す。一方、確認の結果、かかるボリュームにアクセスが不可能だった場合は、対の仮想化ストレージ装置１０００Ｒからストレージ装置１５００Ｌへのアクセスができなかったことを示す情報を添付して失敗を意味する結果を返す。

（Ｄ）結果を受け取った前述の指示を受信した仮想化ストレージ装置１０００Ｌは、かかるボリュームへのアクセス結果が失敗だった場合は、理由と共にその結果を管理ホスト１２００へ転送し、一連の処理を終了する。一方、かかるボリュームへのアクセス結果が成功だった場合は、この結果をＡＯＵプール管理情報３１０４０のプールボリュームリストに当該ボリュームが共通管理すべきボリュームであることを示す情報と共に追加し、管理ホスト１２００へ成功を意味する結果を転送し、終了する。

なお、（Ｃ）及び（Ｄ）でボリュームをプールボリュームリストに追加した場合、ＡＯＵ管理プログラム２１０２０は、対応する「空き容量」の欄に格納されていた空き容量を、追加したボリュームの容量を加算した値に更新し、そのボリュームの領域を空き領域リストに追加する。また、Ｓｔｅｐ５の処理は管理ホスト１２００から両仮想化ストレージ装置１０００Ｌ，１０００Ｒの両方に対して別々に指示を発行することで行っても良い。

（Ｓｔｅｐ７）管理ホスト１２００は、仮想化ストレージ装置１０００Ｌ，１０００Ｒの両方に対して容量警告の設定値の設定指示を転送し、当該指示を受信した各仮想化ストレージ装置１０００Ｌ，１０００Ｒの各々は指示に含まれる値をＡＯＵプール管理情報３１０４０に設定する。

＜３．２．ＡＯＵボリュームの作成＞
ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの作成は、仮想化ストレージ装置１０００Ｌ，１０００Ｒの各々に対して指示を出すことで行われる。以下にその手順を示す。

（Ｓｔｅｐ１）管理ホスト１２００は、ボリュームの容量とプールＩＤを伴ったＡＯＵボリューム作成指示を、仮想化ストレージ装置１０００Ｌ，１０００Ｒの各々へ転送する。
（Ｓｔｅｐ２）当該指示を受信した仮想化ストレージ装置１０００Ｌは、新しいＡＯＵボリューム２９０１０Ｌに関するＡＯＵアドレス変換情報３１０３０Ｌを作成する。このとき全てのセグメントについて、対応する「ＣＯＷフラグ」及び「引継ぎ領域」を「Ｎｏ」に設定し、「プールボリューム領域識別子」も「ＮＵＬＬ」に設定する。そして仮想化ストレージ装置１０００Ｌは作成完了応答を返す。
（Ｓｔｅｐ３）同様に、該指示を受信した仮想化ストレージ装置１０００Ｒは、新しいＡＯＵボリューム２９０１０Ｒに関するＡＯＵアドレス変換情報３１０３０Ｒを作成する。作成の詳細はＳｔｅｐ２と同様である。

なお、ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの作成は、管理ホスト１２００から仮想化ストレージ装置１０００Ｌ，１０００Ｒのいずれか片方に指示を出し、指示を受けた仮想化ストレージ装置１０００Ｌ，１０００Ｒが対の仮想化ストレージ装置Ｒ，１０００Ｌに指示を出し直してもよい。なお、ボリューム作成指示にポートネームやＬＵＮを含めることでＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒに管理者が指定したポートネーム配下のＬＵＮを割り当ててもよい。また、ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの作成指示後にポートネームとＬＵＮを割り当ててもよい。

＜３．３．ＡＯＵボリューム同士の関連付け＞
それぞれの仮想化ストレージ装置１０００Ｌ，１０００Ｒに作成したＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒ同士を関連付ける。そのために、管理ホスト１２００は、仮想化ストレージ装置１０００Ｌ，１０００Ｒにそれら２つのＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの識別子を含む関連付け指示を転送する。当該指示を受けた仮想化ストレージ装置１０００Ｌ，１０００Ｒは、ＡＯＵアドレス変換情報３１０３０の該当する「ＡＯＵボリューム識別子」の欄に、対となるＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒを登録する。本指示は、それぞれの仮想化ストレージ装置１０００Ｌ，１０００Ｒに対して行うことでＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒ同士の関連付けが行われるが、他の実施の形態に開示されている通り、片方の仮想化ストレージ装置１０００Ｌ，１０００Ｒがもう片方の仮想化ストレージ装置１０００Ｒ，１０００Ｌに本指示を転送する形で実現してもよい。

なお、上記関連付けの指示の際、指示に含まれるＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの存在を確認すると共に、ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの片方がプール対の片方のプールから生成されており、もう片方のＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌがプール対のもう片方のプールから生成されていることを確認することで、プール管理の実装を簡単にしてもよい。また、本関連付けはＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒの作成や同期リモートコピーの設定に伴って行われても良い。

＜３．４．同期リモートコピーの設定＞
これまで説明した同期リモートコピーではＩｎｉｔｉａｌ‐Ｃｏｐｙｉｎｇ状態でボリュームの全ての領域をコピーする必要があったが、本実施の形態では、形成コピーは以下に示す手順で行う。また、理解を簡単にするために、以後の説明では正系の仮想化ストレージ装置１０００を仮想化ストレージ装置１０００Ｌとし、副系の仮想化ストレージ装置１０００を仮想化ストレージ装置１０００Ｒであるものとして説明する。

（Ｓｔｅｐ１）コピー元となる（すなわち当該ボリュームに対しては正系となる）仮想化ストレージ装置１０００Ｌは、変数ｉにＡＯＵボリューム２９０１０Ｌの先頭セグメントを代入する。

（Ｓｔｅｐ２）コピー元の仮想化ストレージ装置１０００Ｌは、ＡＯＵアドレス変換情報３１０３０におけるセグメントｉの「引継ぎ領域」及び「プールボリューム領域識別子」をそれぞれ確認し、それぞれの条件下で以下の処理をおこなう。
（Ａ）「引継ぎ領域」が「Ｎｏ」の場合には、通常の形成コピーに従ってセグメントｉのデータをコピーする。仮想化ストレージ装置１０００Ｌ内部のプールボリュームの領域のため、冗長性確保のためにコピーしなければならないからである。
（Ｂ）「引継ぎ領域」が「Ｙｅｓ」の場合には、セグメントｉに関するその仮想化ストレージ装置１０００Ｌ内の図示しないキャッシュメモリ上のダーティデータをデステージングするか、形成コピーでコピー先（すなわち当該ボリュームに対しては副系となる）仮想化ストレージ装置１０００Ｒのキャッシュ領域へコピーする。キャッシュメモリ上のデータを除けばデータは正系の仮想化ストレージ装置１０００Ｌの外部にあるため、キャッシュメモリ上のデータを当該仮想化ストレージ１０００Ｌの外部へ追い出せば正系の仮想化ストレージ装置１０００Ｌが機能停止しても失うデータはないからである。
（Ｃ）「プールボリューム領域識別子」が「ＮＵＬＬ」の場合には、セグメントｉには正系・副系共に領域が割り当てられていないため、コピーは行わない。

（Ｓｔｅｐ３）コピー元の仮想化ストレージ装置１０００Ｌは、セグメントｉが最後の場合は形成コピーを終えてペア状態をＤｕｐｌｅｘ状態に遷移させ、そうでない場合は変数ｉに次のセグメントを設定してＳｔｅｐ１へ戻る。

なお、上記処理は、仮想化ストレージ装置１０００Ｌ，１０００Ｒ間の再同期処理で用いてもよく、片方の仮想化ストレージ装置１０００Ｌ，１０００Ｒが機能停止し、復旧した後の処理で用いてもよい。

＜４．Ｉ／Ｏリクエスト処理について＞
ここから、本実施の形態のＩ／Ｏリクエスト処理について説明する。

＜４．１．ライトリクエスト処理＞
図３２は、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０がライトリクエストを受信したときに実行する処理内容を示すフローチャートである。なお、これまでの説明では、ライトリクエストを構成するコマンドとライトデータの個々についてフローチャートを用いた説明はしなかったが、本処理はライトリクエスト対象の一部の領域が割り当て済みで他の領域が未割り当てである場合もあるため、フローチャートを参照しながら詳細に説明する。

（Ｓ３２００１）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ライトリクエストを構成するライトコマンドを受信する。このライトコマンドにはアドレス（位置）及びデータ長が含まれる。

（Ｓ３２１００）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、受信したライトコマンドを元に割り当て処理を実行する。本処理を実行することで、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、セグメント毎にプールボリュームの領域が割り当てられているか否かをチェックし、プールボリュームの領域が未割り当てのセグメントや、他のセグメントと共有の領域を割り当てられている場合で「ＣＯＷフラグ」が「ＯＮ」のセグメント（ライトの際には共有領域以外に書き込む必要があるセグメント）に対しては、プールボリュームの領域を割り当てる。またＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、かかるプールボリュームの領域の割り当て結果をＡＯＵアドレス変換情報３１０３０に反映させる。

（Ｓ３２００３）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌの属性を確認し、当該ＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌがコピー元ボリュームの場合にはＳ３２００４を実行し、そうでなければＳ３２００５を実行する。
（Ｓ３２００４）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、リモートコピープログラム６０１０を呼び出すことでコピー先ボリュームを有する仮想化ストレージ装置（副系の仮想化ストレージ装置）１０００Ｒに同期リモートコピーのコマンドを転送する。
（Ｓ３２００５）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、Ｓ３２００１に対応するライトリクエストを構成するライトデータ（の一部又は全て）を受信する。

（Ｓ３２００６）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌの属性を確認し、当該ＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌがコピー元ボリュームの場合はＳ３２００７を実行し、そうでなければＳ３２００８を実行する。
（Ｓ３２００７）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、リモートコピープログラム６０１０を呼び出すことで、コピー先ボリュームを有する仮想化ストレージ装置（副系の仮想化ストレージ装置）１０００Ｒにライトデータを転送する。

（Ｓ３２００８）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ＡＯＵアドレス変換情報３１０３０に基づいてＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌ上のアドレスから、実際にライトデータが保存されるプールボリュームの領域を求める。そして求めた領域に対するライトデータをキャッシュメモリ上で保存・管理する。
（Ｓ３２００９）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ライトデータ受信の続きの有無を判断し、続きがある場合はＳ３２００５を再び実行する。
（Ｓ３２０１０）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ライト完了の応答を正系の仮想化ストレージ装置１０００Ｌ又はホスト１１００に転送し、このライトリクエスト処理を完了する。

なお、副系の仮想化ストレージ装置１０００Ｒは、同期リモートコピーのコマンドの受信をホスト１１００からのライトコマンドの受信と同様に扱う。同様に、仮想化ストレージ装置１０００Ｒは、同期リモートコピーのデータ転送によるデータ受信をホスト１１００からのライトデータの受信と同様に扱う。これによって副系の仮想化ストレージ装置１０００Ｒでのライトリクエスト処理が理解されるであろう。

＜４．１．１．割り当て処理＞
以下に図３２の割り当て処理について説明する。

（Ｓ３２１０１）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ライトコマンドで指定されたライト範囲（即ちライトアドレスとデータ長）をセグメント毎に分割する。
（Ｓ３２１０２）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、分割で生成した複数のセグメントの最初のセグメントを変数ｉに代入する。

（Ｓ３２１０３）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、セグメントｉの割り当て状態やＣＯＷ（Copy On Write）が必要かどうかを判断する。なお、このときの判断にはＡＯＵアドレス変換情報３１０３０を用いる。かかる判断の結果、プールボリュームの領域の割り当てが不要な場合はＳ３２１０５を実行し、プールボリュームの領域が未割り当ての場合や、割り当て済みであってもＣＯＷフラグが立っている場合は（例えば、他のＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌ上のセグメントと割り当て領域を共有している場合）Ｓ３２１０４を実行する。

（Ｓ３２１０４）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、セグメントｉに割り当てるため、プールボリュームの領域から未使用の領域を探す。そして、探した領域をＡＯＵアドレス変換情報３１０３０の「プールボリューム領域識別子」へ登録する。なお、未使用領域が見つからない場合は、ライトコマンドが失敗したことを示す応答を転送して、この割り当て処理を終了する。

なお、失敗応答を転送する際には、この失敗応答と共に何らかのエラーメッセージを返しても良く、当該失敗応答の原因としてプールの容量不足が原因であることを示す情報を含めても良い。さらに、「ＣＯＷフラグ」が立っている場合の領域割り当ての場合、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、領域割り当てに際して旧領域（共有領域）から割り当て領域へデータコピーを行うようにしてもよい。ただし、セグメントｉ全体がライト対象の場合はこのデータコピーを省略することができる。また、領域の割り当てに伴って、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ＡＯＵプール管理情報の空き領域リストを編集し、空き容量の削減を行うようにしてもよい。

さらに、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、割り当てたプールボリューム上の領域と当該領域を割り当てたＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌのセグメントの情報を副系の仮想化ストレージ装置１０００Ｒへ転送する。なお、当該割当て情報は同期リモートコピーのコマンドと共に転送してもよい。

（Ｓ３２１０５）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、次のセグメントが存在するかどうか確認し、存在する場合はＳ３２１０６を実行し、存在しない場合は本処理を終了し、ライトリクエスト処理へ戻る。
（Ｓ３２１０６）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、変数ｉに次のセグメントを代入する。

以上の処理によって、仮想化ストレージ装置１０００Ｌは、セグメント毎の割り当て状況を確認し、必要ならばセグメントにプールボリュームの領域を割り当てる。

＜４．１．２．副系のプールボリューム領域割り当て方法＞
副系の仮想化ストレージ装置１０００Ｒのプールボリューム領域割り当てステップ（Ｓ３２１０４）は、正系の仮想化ストレージ装置１０００Ｌから受信した割り当て情報を元に以下の方法によって、セグメントに対して領域を割り当てる。

（Ａ）正系の仮想化ストレージ装置１０００Ｌが共有のストレージ装置（すなわちストレージ装置１５００Ｌ）のプールボリュームから領域を割り当てた場合には、副系の仮想化ストレージ装置１０００Ｒは、ＡＯＵアドレス変換情報３１０３０における対応するセグメントの「引継ぎ領域」を「Ｙｅｓ」に、「プールボリューム領域識別子」を受信した領域識別子に設定する。これによって、共有ストレージ装置１５００Ｌに関するプールボリューム領域の割り当ては正系と副系で同じ対応になる。

（Ｂ）正系の仮想化ストレージ装置１０００Ｌが仮想化ストレージ装置１０００Ｒ内部のボリュームから領域を割り当てた場合には、副系の仮想化ストレージ装置１０００Ｒは、内部ボリュームの空き領域を探して該当するセグメントに割り当てる。その結果、ＡＯＵアドレス変換情報３１０３０における当該セグメントの「引継ぎ領域」は「Ｎｏ」に、「プールボリューム領域識別子」は内部ボリュームの領域が設定される。これによって、正系の仮想化ストレージ装置１０００Ｌが内部ボリュームの領域を割り当てたセグメントは副系の仮想化ストレージ装置１０００Ｒでも内部ボリュームを割り当てることができる。

＜４．２．リードリクエスト処理＞
図３３は、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０が、リードリクエストを受信したときに実行する処理内容を示すフローチャートである。以下に当該フローチャートを参照して、かかる処理内容について説明する。

（Ｓ３３００１）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、リードリクエストを構成するリードコマンドを受信する。なお、受信したリードコマンドにはアドレス（位置）及びデータ長が含まれる。
（Ｓ３３００２）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、リードコマンドで指定されたリード範囲（即ちライトアドレスとデータ長）をセグメント毎に分割する。
（Ｓ３３００３）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、分割で生成した複数のセグメントの最初のものを変数ｉに代入する。

（Ｓ３３００４）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、セグメントｉにプールボリュームの領域が割り当てられているかどうかを判断する。なお、判断にはＡＯＵアドレス変換情報３１０３０を用いる。かかる判断の結果、プールボリュームの領域が割り当てられる場合にはＳ３３００６を実行し、プールボリュームの領域が未割り当ての場合にはＳ３３００５を実行する。
（Ｓ３３００５）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、その仮想化ストレージ装置１０００Ｌ，１０００Ｒ内のキャッシュメモリ上に当該セグメント向けのキャッシュ領域を確保し、確保したキャッシュ領域をゼロで初期化し、ホスト１１００へゼロデータを転送する。

（Ｓ３３００６）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、割り当てられたプールボリュームの領域に保存されたデータを転送する。なお、当該プールボリュームの領域が既にキャッシュ領域に存在する場合（ステージング済みの場合）には、かかるデータをそのキャッシュ領域から転送し、キャッシュ領域に存在しない場合はステージング後に、当該データの転送を行う。

（Ｓ３３００８）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、続きのセグメントがあるかどうかを判断し、ある場合はＳ３３００９を実行し、ない場合はＳ３３０１０を実行する。
（Ｓ３３００９）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、変数ｉに次のセグメントを代入し、再びＳ３３００４を実行する。
（Ｓ３３０１０）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、リード完了の応答をホスト１１００に転送し、完了する。

なお、処理の単純化のために、仮想化ストレージ装置１０００Ｌはプールボリュームのある決められた領域に対して予め定められた値（ゼロ）を保存しておき、当該領域に保存されたデータをＡＯＵボリューム２９０１０Ｒ，２９０１０Ｌの未割り当て領域に対するリードで転送してもよい。

＜４．３．ＡＯＵ向けデステージング処理＞
図３４はＡＯＵ向けＩ／Ｏ処理プログラム３１０１０が実行するデステージング処理の処理内容を示すフローチャートである。以下、かかるデステージング処理について、当該フローチャートを参照しながら説明する。

（Ｓ３４００１）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、キャッシュアルゴリズムによってデステージ対象とするキャッシュメモリ上のデータを決定する。なお、キャッシュアルゴリズムはＬＲＵ（Less Recently Used）アルゴリズムを用いてダーティデータを対象として決定する方法が一般的であるが、これ以外のアルゴリズムを用いて決定してもよい。

（Ｓ３４００２）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、デステージ対象のデータが共有ストレージ装置（すなわち、ストレージ装置１５００Ｌ）が有するボリュームに対応するものかどうかを判断し、対応する場合はＳ３４００３を実行し、対応しない場合はＳ３４００４を実行する。

（Ｓ３４００３）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、デステージング処理を実行し、その後、この一連の処理を終了する。なお、デステージング処理は他の実施の形態と同様に行われる。
（Ｓ３４００４）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、デステージ対象のデータが格納されたボリュームのボリューム属性を判断し、当該ボリュームがコピー元ボリュームである場合にはＳ３４００５を実行し、当該ボリュームがコピー先ボリュームの場合にはＳ３４００７を実行し、それ以外の場合はＳ３４００３を実行する。

（Ｓ３４００５）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、デステージング処理を実行する。
（Ｓ３４００６）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、デステージが終了したデータのＲＣデステージ許可指示を副系の仮想化ストレージ装置１０００Ｒへ転送し、処理を終了する。

（Ｓ３４００７）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、ＲＣデステージ許可フラグがＯＮかどうかを確認し、ＯＦＦの場合はＳ３４００１を再び実行し、別なデステージ対象のデータを選択し直す。なお、ＲＣデステージ許可フラグは、同期リモートコピーによってキャッシュメモリ上にライトデータが保存又は更新された時点ではＯＦＦが設定され、Ｓ３４００６で送信された指示を受信するとＯＮが設定される。

（Ｓ３４００８）ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０は、デステージング処理を実行し、処理を終了する。

本アルゴリズムによって、以下のキャッシュ制御が実現される。

（Ａ）共有ストレージ装置向けでなく、正系と副系の仮想化ストレージ装置１０００Ｌ，１０００Ｒでデステージを連携する必要のないキャッシュデータは両系独立にデステージを行う。
（Ｂ）正系の仮想化ストレージ装置１０００Ｌでのデステージ処理後に送信されるメッセージによって、副系の仮想化ストレージ装置１０００Ｒのキャッシュデータのデステージが行われる。

なお、ステージング処理は、第１〜第１４の実施の形態と同様に行なわれる。

＜４．３．１．ＲＣデステージ許可指示＞
ＲＣデステージ許可指示の転送は、非同期に指示を送信してもよい。ただし、正系及び副系の仮想化ストレージ装置１０００Ｌ，１０００Ｒはリモートコピーを契機として、ＲＣデステージフラグに未反映の当該指示を無効化してもよい。

＜４．４．プールの空き領域監視＞
ＡＯＵ管理プログラム３１０２０は、定期的に各プールの空き領域を監視し、ユーザーが設定したスレッショルド値を下回った場合は、管理ホスト１２００へメッセージを送信する。これによって、容量不足に伴うホスト１１００からのライトリクエストの失敗を回避することができる。さらに、ＡＯＵ管理プログラム３１０２０は、空き領域の監視を共有のストレージ装置１５００Ｌと共有でないストレージ装置とで分けて管理し、容量不足の際に転送するメッセージを使い分けても良い。

＜５．正系の仮想化ストレージ装置障害時の切り替え＞
正系の仮想化ストレージ装置１０００Ｌが障害などで機能を停止した場合は、他の実施の形態と同様の処理を行うことでホスト１１００は引きつづきアプリケーションを動作させることができる。

一方で、ホスト１１００は、コピー元ボリュームに対するライトリクエストが容量不足で失敗したことを契機として副系の仮想化ストレージ装置１０００ＲにＩ／Ｏリクエスト先を切り替える場合もある。副系の仮想化ストレージ装置１０００Ｒが有するプール容量が正系よりも多い場合は、当該切り替えによって、ホスト１１００においてＩ／Ｏリクエストを発行しているアプリケーション２０１０（図３０）の処理を継続することができるからである。

なお、この場合はリクエスト先の切り替えによってリモートコピーの向きは反転するが、リモートコピーは停止する。なぜならば、旧正系の仮想化ストレージ装置１０００Ｌはライトリクエスト時のプール容量不足で当該リクエストが失敗しているので、同期リモートコピーによって新正系（旧副系）の仮想化ストレージ装置１０００Ｒに対してライトデータを書き込もうとしても失敗するからである。

ただし、旧正系の仮想化ストレージ装置１０００Ｌに対するリクエスト（特にリード）は継続可能であるため、本障害は仮想化ストレージ装置１０００Ｌ，１０００Ｒ間の通信路障害と見分けがつかず、ホスト１１００が旧正系の仮想化ストレージ１０００Ｌの古いデータをリードする可能性がある。

こうした状況を回避するため、リモートコピー失敗の理由がプール容量不足である場合には、ホスト１１００からの旧正系の仮想化ストレージ装置１０００Ｌへのリードリクエスト発行を抑制してもよい。あるいは、リモートコピー失敗の理由が絞れない間は、ホスト１１００からの副系の仮想化ストレージ装置１０００Ｒ又は１０００Ｌに対するリードを抑制し、通信路障害であることが判明した時点でかかる抑制を解除するようにしてもよい。

以上の処理によって、本実施の形態によるストレージシステムがサービス継続性の高いＡＯＵ機能を持ったストレージサービスを提供することができる。また、ＡＯＵ機能は、Ｉ／Ｏリクエスト毎にＡＯＵアドレス変換情報３１０３０Ｌ，３１０３０Ｒを参照・変更する必要があり、通常のストレージＩ／Ｏよりもコントローラーの負荷が高い。したがって、ホスト１１００が必要とするボリュームの一部（又は半分）については片方の仮想化ストレージ装置１０００Ｌ，１０００Ｒが正系としてリードとライトを担当し、残りのボリュームについてはもう片方の仮想化ストレージ装置１０００Ｒ，１０００Ｌが正系としてリードとライトを担当するようにしてもよい。このような構成を採用することで、ストレージシステムの可用性を維持しつつ、仮想化ストレージ装置１０００Ｌ，１０００Ｒとの間でのＡＯＵ機能のコントローラー負荷の平準化を実現できる。

＜６．プールボリューム領域の割り当てとデータ移行について＞
これまでに述べたとおり、本実施の形態では仮想化ストレージ装置１０００Ｌ，１０００Ｒ内部のボリュームとストレージ装置１５００Ｌのボリュームの両方をプールボリュームとすることができる。そのため、アクセス頻度の高いデータが格納される又は格納されたセグメントに対して仮想化ストレージ装置１０００Ｌ，１０００Ｒ内部のボリュームを割り当てることによって、アクセス性能の向上が図れるほかに、仮想化ストレージ装置１０００Ｌ，１０００Ｒとストレージ装置１５００Ｌとの間の通信ネットワークのボトルネック化を回避することもできる。

しかし、ＡＯＵでは最初のライトリクエストによってセグメントにプールボリュームの領域を割り当てるため、仮想化ストレージ装置１０００Ｌ，１０００Ｒ単体でアクセス頻度を考慮した割り当てをすることは難しい。こうした課題を解決する方法として以下の方法が考えられる。

＜６．１．ＡＯＵボリュームに属性を付加する方法＞
ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒを作成する時点でアクセス頻度に関する属性を与え、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０がセグメントにプールボリュームの領域の割り当てを行う際に、そのセグメントに書き込まれるデータのアクセス頻度がある程度分かっているときには、かかるアクセス頻度属性を参照して、アクセス頻度の高いデータが格納されるセグメントについてはその仮想化ストレージ装置１０００Ｌ，１０００Ｒ内部のボリュームを割り当て、アクセス頻度の低いデータ（例えばバックアップデータ）が格納されるセグメントについてはストレージ装置１５００Ｌ内のボリュームの領域を割り当てる。

＜６．２．プールボリューム領域のデータ移行＞
ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒに対するアクセス頻度をセグメント単位（又は複数セグメント単位）で測定し、アクセス頻度の高いセグメントに格納されているデータは仮想化ストレージ装置１０００Ｌ，１０００Ｒ内部のプールボリュームの領域に移動させる。この場合、データの移行に伴って、ＡＯＵボリューム２９０１０Ｌ，２９０１０Ｒにおける当該データの移行が行なわれたセグメントの対応先をストレージ装置１５００Ｌ内のボリューム内のセグメントから、仮想化ストレージ装置１０００Ｌ，１０００Ｒにおけるデータの移行先のセグメントに変更する必要があるが、ＡＯＵ機能では元々仮想化ストレージ装置１０００Ｌ，１０００Ｒ内においてアドレス変換を行っているため、ホスト１１００に対して透過的にデータ移行を行うことができる。

なお、本実施の形態でこのようなデータ移行を行う場合、対象となるセグメントのデータは、正系と副系の両方の仮想ストレージ装置１０００Ｌ，１０００Ｒ内部のプールボリュームに保存されることが望ましい。しかし、他に効果がある場合（以下に列挙した）は片方のセグメントだけ仮想化ストレージ装置１０００Ｌ，１０００Ｒ内部のプールボリュームの領域が割り当てられた形態にデータ移行を行うことも考えられる。

（例１）どちらかの仮想化ストレージ装置１０００Ｌ，１０００Ｒが先に内部のプールボリュームを使い果たし、共有のストレージ装置１５００Ｌしかない場合。
（例２）コピー元のＡＯＵボリューム２９０１０Ｌに対するリードリクエストの負荷が大きく、正系の仮想化ストレージ装置１０００Ｌとストレージ装置１５００Ｌの間のネットワーク性能を圧迫する場合。

こうした場合、正系の仮想化ストレージ装置１０００Ｌは、ストレージ装置１５００Ｌ内部のプールボリュームの領域から自身のプールボリュームの領域にセグメントのデータをコピーし、コピー先の領域を用いてＡＯＵボリューム２９０１０Ｌを提供する。一方の副系の仮想化ストレージ装置１０００Ｒはコピー元のストレージ装置１５００Ｌのプールボリュームの領域を用いてＡＯＵボリューム２９０１０Ｒを提供することもできる。この場合、ストレージ装置１５００Ｌのプールボリュームの領域に対するライトデータの反映は副系の仮想化ストレージ装置１０００Ｒが行っても良い。

さらに、リードもライトも含めたアクセス性能向上のためのセグメントのデータ移行の中間状態として、前述の正系の仮想化ストレージ装置１０００Ｌだけ内部のプールボリュームの領域を用い、副系の仮想化ストレージ装置１０００Ｒがストレージ装置１５００Ｌのプールボリュームを用いる構成を採用してもよい。

＜７．本実施の形態のバリエーション＞
＜７．１．ステージングやデステージング処理でアドレス変換を実施＞
これまで述べてきた本実施の形態では、リードリクエスト処理やライトリクエスト処理でアドレス変換を行っている。本方法は、ライトリクエストの受付の時点で、プールボリュームの容量不足を契機とした失敗応答を返すことができる反面、リクエスト毎にアドレス変換を行うため、性能上の課題がある。こうした課題を解決する方法としてステージングやデステージング処理でアドレス変換を行う方法が考えられる。ただし、この方法ではデステージングの時点でセグメントに対してプールボリュームの領域の割り当てを行うため、ＨＤＤ１０３０の二重閉塞等が原因のボリューム閉塞時と類似するデータ消失が発生する。そのため、後者の方式では空き容量に余裕が少なくなってきた時点からリクエストの処理を遅らせるか停止する等の処理を行っても良い。

なお、具体的な処理はこれまで図３２及び図３３について説明してきた処理内容を以下に示すとおりに変更すればよい。
（ライトとデステージング）図３２のＳ３２１００の割り当て処理をデステージング処理のＳ３４００１の後に移動する。
（リードとステージング）図３３のＳ３３００４〜Ｓ３３００６で行っているアドレス変換を伴った割り当て有無の判断と未割り当て時のゼロデータの転送とを、ステージングにて行う。

さらに、両者の利点を併せ持つために、ＡＯＵ向けＩ／Ｏ処理プログラム３１０１０が、プールボリュームの空き容量がスレッショルド値以上の場合にはステージング／デステージング処理で変換を行い、かかる空き容量がスレッショルド値以下になった場合にはＩ／Ｏリクエスト処理で変換を行ってもよい。

＜７．２．Ｄｅ‐Ｄｕｐｌｉｃａｔｉｏｎ＞
ＡＯＵ管理プログラム３１０１０は、Ｉ／Ｏリクエストとは独立にＤｅ‐ｄｕｐｌｉｃａｔｉｏｎと呼ばれる以下の処理を行っても良い。

（Ｓｔｅｐ１）ＡＯＵ管理プログラム３１０１０は、各プールボリュームの領域のデータをスキャンし、重複するセグメントを探す。
（Ｓｔｅｐ２）ＡＯＵ管理プログラム３１０１０は、プールボリューム領域同士で保存するデータが重複している事を検知した場合、いずれか一つの領域だけを残し他の領域は空き領域として開放する。そして、ＡＯＵアドレス変換情報３１０３０における開放した領域に対応したセグメントの「プールボリューム領域識別子」は一つだけ残した領域に更新し、「ＣＯＷフラグ」を「ＯＮ」にする。

ここで、重複検知の方法としては、プールボリュームの領域毎のハッシュ値を計算後に、領域毎に、そのハッシュ値を他の領域のハッシュ値と順次比較し、同じ値の場合はさらに実際のデータを比較する２段階方式を採用してもよい。さらに、ハッシュ値の計算とデータの比較は負荷の高い処理であるため、副系の仮想化ストレージ装置１０００Ｒにて処理を行うことで負荷分散を行うことも考えられる。

（１７）第１７の実施の形態
＜１．情報システムの構成＞
図１との対応部分に同一符号を付して示す図３７は、本発明の一実施形態に係る情報システムのハードウェア構成の一例を示す図である。

第１の実施の形態と異なる点は、副ストレージ装置２５５０及び正ストレージ装置１０００がＩ／Ｏネットワーク１４００を介して接続されると共に、２つの副ストレージ装置２５５０同士が接続されているという点である。Ｉ／Ｏネットワーク１４００はＩ／Ｏネットワーク１３００と同等であってもよいが、一般にはＩ／Ｏネットワーク１３００よりも通信速度が遅く、遠隔地でも通信可能な通信手段を用いる。また、第１の実施の形態と異なるもう一つの点として、ホスト１１００Ｂが副ストレージ装置２５５０側にも接続されている点が挙げられる。一般的にはかかるホスト１１００Ｂはリモートに存在し、ローカルサイト３８０００Ｐ（図３８）のホスト１１００Ｐ又は正ストレージ装置１０００全体が使用不可になった場合にリモートサイト３８０００Ｂ（図３８）側でシステムを復旧する際に使用する。

＜２．本実施形態の概要＞
本実施の形態では、ストレージシステムの可用性をさらに向上させるため、２台の正ストレージ装置１０００から構成されるローカルサイト３８０００Ｐから遠隔地に設置されたリモートサイト３８０００Ｂに２台の副ストレージ装置２５５０を設置する。図３８はその概要を示した図である。なお、以後の説明ではストレージ装置１０００（若しくは２５５０）又はホスト１１００や、これらストレージ装置１０００又はホスト１１００に含まれるプログラム又は部品名でローカルサイト３８０００Ｐ（図３８）に存在することを明記したい場合は、「ローカル」という言葉を用語の先頭につけ、リモートサイト（図３８の３８０００Ｂ）に存在することを明記したい場合は「リモート」という言葉を用語の先頭につけることがある。

本概要では、ストレージシステムに正ストレージ装置１０００Ｌ、正ストレージ装置１０００Ｒ、副ストレージ装置２５５０Ｌ、副ストレージ装置２５５０Ｒが含まれる。正ストレージ装置１０００Ｌ，１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒにはジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４が存在し、一つ以上のデータボリューム３８３１０Ｄ１〜３８３１０Ｄ８と、一つ以上のジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４とがこれらジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４に定義される。なお、ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４はリモートコピーのための更新データが一時保存されるボリュームである。

いずれかのストレージ装置（正ストレージ装置１０００Ｌ、正ストレージ装置Ｒ１０００Ｒ、副ストレージ装置２５５０Ｌ、副ストレージ装置２５５０Ｒ）のジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４が定義された後、そのジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４に所属するデータボリューム３８３１０Ｄ１〜３８３１０Ｄ８にライトが発生した場合、ライトデータを含むジャーナルデータを当該ジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４に所属するジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４に記憶する。また、ジャーナルデータは、ジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４内のデータボリューム３８３１０Ｄ１〜３８３１０Ｄ８へのライト処理の発生順でジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４に記録される。ジャーナルデータ及びジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４の構造については後ほど詳細な説明を行う。

次に基本的なコピーの構成の説明を行う。ジャーナルグループ３８３００Ｇ１に所属するデータボリューム３８３１０Ｄ１，３８３１０Ｄ２と、ジャーナルグループ３８３００Ｇ２に所属するデータボリューム３８３１０Ｄ３，３８３１０Ｄ４とのそれぞれで、第１〜第１６の実施の形態で説明した同期リモートコピーのペアを構成する。

また、ジャーナルグループ３８３００Ｇ１に所属するデータボリューム３８３１０Ｄ１，３８３１０Ｄ２と、ジャーナルグループ３８３００Ｇ３に所属するデータボリューム３８３１０Ｄ５，３８３１０Ｄ６とのそれぞれで、後に説明する非同期リモートコピーのペアを構成する。

また、ジャーナルグループ３８３００Ｇ２に所属するデータボリューム３８３１０Ｄ３，３８３１０Ｄ４と、ジャーナルグループ３８３００Ｇ４に所属するデータボリューム３８３１０Ｄ７，３８３１０Ｄ８とについても同様に非同期リモートコピーのペアを構成する。

次に、２つの正ストレージ装置１０００Ｌ，１０００Ｒでの処理の概略を述べる。
（Ａ）ホスト１１００ＰよりＩ／Ｏネットワーク１３００を介して正ストレージ装置１０００Ｌに送信された、データボリューム３８３１０Ｄ１へのライトＩ／Ｏコマンド（矢印３８４００）を正ストレージ装置１０００Ｌが受信する。

（Ｂ）Ｉ／Ｏ処理プログラム３８１００Ｐは、かかるライトＩ／Ｏコマンドを受信すると、このライトＩ／Ｏコマンドに応じて、非同期リモートコピープログラム４１０５０Ｐ（図４１）の一部であるＪＮＬ作成処理プログラム３８１１０を実行する（矢印３８４１０）。これによりデータボリューム３８３１０Ｄ１にライトデータが書き込まれ（矢印３８４２０）、ジャーナルボリューム３８３２０Ｊ１にＪＮＬ作成処理プログラム３８１１０によって作成されたジャーナルデータが書き込まれる（矢印３８４３０）。ジャーナルデータは、更新情報及びライトデータから構成される。更新情報は更新番号を含む。更新番号は、Ｉ／Ｏコマンドに対して正ストレージ装置１０００Ｌが付加する番号であり、Ｉ／Ｏコマンドを受信した順番で番号を付加する。更新番号と同様に、更新情報はホスト１１００Ｐが付加する時刻情報を含む。

（Ｃ）また、Ｉ／Ｏ処理プログラム３８１００Ｐは、リモートコピー先の正ストレージ装置１０００Ｒにリモートライトリクエストを送信する（矢印３８４４０）。リモートライトリクエストは、ライト命令、論理アドレス、ボリューム番号、データ量、上記（Ｂ）で正ストレージ装置１０００Ｌが対応するジャーナルデータに付加した更新番号及び時刻等を含んでいる。実際には、Ｉ／Ｏ処理プログラム３８１００Ｐは、同期リモートコピープログラム４１０４０Ｐ（図４１）を実行することでリモートライトリクエストを送信する。その他同期リモートコピーに関する説明は第１〜第１６の実施の形態において述べているため、詳細は割愛する。

正ストレージ装置１０００Ｒは、転送されるライトデータをホスト１１００Ｐより正ストレージ装置１０００Ｌに送信されたライトＩ／Ｏコマンドと同様に処理する（矢印３８４５０、矢印３８４６０、矢印３８４７０）。ただし、正ストレージ装置１０００ＲのＪＮＬ作成処理プログラム３８１１０は、（Ｃ）で受け取った情報を元にジャーナルデータ（ライトデータとライトデータを副ストレージ装置２５５０に反映するために必要なライト位置やライト長や更新番号等の情報を指し、以後で詳細を述べる）を作成することで、正系（リモートコピーのコピー元）と副系（リモートコピーのコピー元）とにおけるライトデータと、更新番号及び時刻とが同じ対応であるようにする。

（Ｄ）上記の一連の処理において、全てのデータボリューム３８３１０Ｄ１〜３８３１０Ｄ４へのライトデータの書き込みと、ジャーナルボリューム３８３２０Ｊ１、３８３２０Ｊ２へのジャーナルデータの書き込みとが完了した時点で、正ストレージ装置Ｌ１０００Ｌは、ホスト１１００ＰにライトＩ／Ｏコマンドの完了を通知する。

次に、２つの副ストレージ装置２５５０Ｌ，２５５０Ｒでの処理の概略を述べる。
（Ｅ）副ストレージ装置２５５０Ｌ，２５５０ＲのＪＮＬＲＤ処理プログラム３８１４０は、Ｉ／Ｏネットワーク１３００を介して対応する正ストレージ装置１０００Ｌ，１０００Ｒにジャーナルデータの取得要求を送信する。この取得要求を受信した正ストレージ装置１０００Ｌ，１０００Ｒは、その副ストレージ装置２５５０Ｌ，２５５０Ｒに対してジャーナルデータを送信する。またこの副ストレージ装置２５５０Ｌ，２５５０ＲのＪＮＬＲＤ処理プログラム３８１４０は、かかるジャーナルデータを取得すると、これをジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４に格納する（矢印３８４８０、矢印３８４９０）。

（Ｆ）リストア処理プログラム３８１３０は、副ストレージ装置２５５０Ｌ，２５５０Ｒのジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４からジャーナルデータを読み出し、そのジャーナルデータに含まれるライトデータを、対応するデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８に書き込む（矢印２６５００、矢印２６５１０）。

この後、副ストレージ装置２５５０Ｌ，２５５０ＲのＪＮＬＲＤ処理プログラム３８１４０及びリストア処理プログラム３８１００と、正ストレージ装置１０００Ｌ，１０００ＲのＪＮＬ作成処理プログラム３８１１０及びＪＮＬＲＤ受信処理プログラム３８１２０とによって、非同期リモートコピーを実行する。非同期リモートコピーの処理の詳細及びペア状態については後ほど説明する。

次に、図３８で述べたストレージシステムの構成において、通常時にホスト１１００Ｐと通信を行なう正ストレージ装置１０００Ｌで障害が発生した場合の処理の概略を図３９に示す。

かかる正ストレージ装置１０００Ｌの障害時は、ホスト１１００Ｐ側は前実施の形態で述べたＩ／Ｏパスマネージャー５０００（図５）によって他方の正ストレージ装置１０００Ｒにパスの切り替えを行う。パスの切り替え及び障害の検出の詳細は既に説明したため、ここでは省略する。また、正ストレージ装置１０００Ｌの障害時は、対応する副ストレージ装置２５５０Ｌのリストア処理プログラム３８１３０を停止させてもよい。

このようにして、一方の正ストレージ装置１０００Ｌが故障した場合でも、他方の正ストレージ装置１０００Ｒによってホスト１１００Ｐ上のアプリケーションの継続動作が可能となる。また、副ストレージ装置２５５０Ｒによって、リモートで継続的に非同期リモートコピーを行うことができる。

次に、図３８で述べたストレージシステムの構成において、リモート側のホスト１１００Ｂを用いてシステムを復旧するフェイルオーバーの場合（特に、ローカル側の両方の正ストレージ装置１０００Ｌ，１０００Ｒが機能停止した場合）の処理の概略を図４０に示す。リモート側のホスト１１００Ｂのフェイルオーバー処理プログラム４１１００は、どちらの副ストレージ装置２５５０Ｌ，２５５０Ｒが最新のデータを保持しているかを判断する。その方法は例えば、両ストレージ装置２５５０Ｌ，２５５０Ｒのリストア済みの更新番号（もしくは時刻）を比較する方法がある。

そして、最新のデータを保持している副ストレージ装置２５５０Ｌ，２５５０Ｒを正系として、副ストレージ装置２５５０Ｌ及び副ストレージ装置２５５０Ｒのそれぞれのジャーナルグループ３８３００Ｇ３，３８３００Ｇ４内のデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８同士で同期リモートコピーのペアが形成され、同期リモートコピー（矢印４０１００）が開始されて、Ｄｕｐｌｅｘ状態となる。その後、ホスト１１００ＢのＩ／Ｏパスマネージャー５０００等により、かかるペアの正系のデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８へＩ／Ｏリクエスト（リード及び又はライトを指す）発信先を切り替える。フェイルオーバー処理の詳細については後ほどフローチャートを用いて説明を行なう。

このようにして、ローカルサイト３８０００Ｐ全体が故障した場合でも、リモートサイト３８０００Ｂにてローカルサイト３８０００Ｐと同様の２台の冗長構成でホスト１１００Ｐの処理を復旧することができる。なお、Ｉ／Ｏリクエスト開始と同期リモートコピーの開始順序は逆でもよい。

なお、上記説明では簡略化のために正ストレージ装置１０００Ｌ，１０００Ｒや副ストレージ装置２５５０Ｌ，２５５０Ｒにおけるキャッシュ（正ストレージ装置１０００Ｌ，１０００Ｒであれば図３７の１０２０）の動作を記してないが、ライトデータをデータボリューム３８３１０Ｄ１〜３８３１０Ｄ８に保存する際やジャーナルデータをジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４に保存する場合に、先ずはキャッシュに保存してもよい。この場合実装は複雑になるが、Ｉ／Ｏ性能にＨＤＤのシーク時間などが含まれないため、性能が良くなるからである。ただし、本実施の形態のバリエーションとして、正ストレージ装置１０００Ｌ，１０００Ｒが仮想スイッチの場合はキャッシュを持たない構成であってもよい。この場合は正ストレージ装置１０００Ｌ，１０００Ｒに接続されるストレージ装置（ここでは副ストレージ装置２５５０Ｌ，２５５０Ｒ）がキャッシュを持っているため、Ｉ／Ｏ性能にＨＤＤのシーク時間が含まれなくて済むからである。

また、本実施の形態では主に副ストレージ装置２５５０Ｌ，２５５０Ｒがジャーナルデータの取得要求を発行する形態について記す。これはジャーナルデータの転送を副ストレージ装置２５５０Ｌ，２５５０Ｒの状態等を考慮して効率的なデータ転送を行うことができるメリットを有するからであるが、単なるデータ転送を目的とするのであれば、これ以外の方式（例えば正ストレージ装置１０００Ｌ，１０００Ｒが主導でジャーナルデータを送信する方式）を採用してもよい。

また、本実施の形態ではジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４に更新データを一時保存することによって、一時的に発生するＩ／Ｏネットワーク１４００の障害又は性能変化や、ホスト１１００Ｐからのライト頻度及びライト量の変化に対してリモートコピーを継続可能なシステムとすることができる。

さらに、本実施の形態では、ローカル側では正ストレージ装置１０００Ｌ，１０００Ｒと副ストレージ装置２５５０Ｌ，２５５０Ｒとが連係してジャーナルデータの作成を行なったり、リモート側で受信したジャーナルデータを当該リモート側の副系ストレージ装置２５５０Ｌ，２５５０Ｒ同士が連係して副ボリュームに対してリストアを行うために、ストレージ装置が１台の場合よりも処理が複雑になる。そのため、片系の性能低下によって正系と副系で同じ転送性能でリモートコピーできない場合がある（例えば、ローカル側の正ストレージ装置１０００Ｌに対して大量のリードリクエストを発行した場合、リードリクエストは副系に転送されないため、正系のみ負荷が大きくなる）。ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４はこうした正系と副系の負荷の偏りが生じている場合でもバッファリングを続けることで、ジャーナルデータの溢れを回避することができるメリットも有する。

なお、ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４は１つ以上のＨＤＤ内の領域から構成される。より好適な実施形態としては、ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４はデータボリューム３８３１０Ｄ１〜３８３１０Ｄ８と同様にＲＡＩＤパリティグループの一部または全ての領域を用いたものであることが考えられる。また、正ストレージ装置１０００Ｌ，１０００Ｒや副ストレージ装置２５５０Ｌ，２５５０Ｒにおいて、ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４は、データボリューム３８３１０Ｄ１〜３８３１０Ｄ８を特定したジャーナルボリューム化要求によってＲＡＩＤパリティグループの領域をジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４として用いるように内部情報を保持してもよい。

＜３．本実施形態におけるソフトウェア及びデータ構成＞
次に、正ストレージ装置１０００Ｌ，１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒ内で動作するプログラム及びデータ構造について、図４１を用いて第１〜第１６の実施の形態と異なる部分を中心に説明する。

＜３．１．正ストレージ装置１０００＞
図４１に示すように、正ストレージ装置１０００（１０００Ｌ，１０００Ｒ）は、そのコントローラー１０１０のメモリ１０１２にＩ／Ｏ処理プログラム３８１００Ｐ、初期化プログラム４１０３０Ｐ、同期リモートコピープログラム４１０４０Ｐ、非同期リモートコピープログラム４１０５０Ｐ、コピーペア情報４１３００Ｐ、ボリューム情報４１３２０Ｐ、ジャーナルグループ情報４１３３０Ｐ及び正副情報４１３４０Ｐを保持している。

このうちＩ／Ｏ処理プログラム３８１００Ｐはホスト１１００ＰよりＩ／Ｏコマンドやリクエスト等を受信し、対応するプログラムを起動し、ボリュームへのリード・ライト処理等を実行するためのプログラムであり、初期化プログラム４１０３０Ｐは、同期リモートコピー及び非同期リモートコピーのペア形成を行い、初期化コピーを実行するためのプログラムである。

また同期リモートコピープログラム４１０４０Ｐは、本実施の形態においては、ライトデータと共に更新番号や更新時刻を転送処理するためのプログラムである。なお、この転送で用いるリクエストをリモートライトリクエストと呼ぶ点は上記概要にて述べたとおりである。

非同期リモートコピープログラム４１０５０Ｐに基づく非同期リモートコピー処理の内容は、第３の実施の形態の説明の通りである。非同期リモートコピープログラム４１０５０Ｐはローカル側とリモート側とで異なる。正ストレージ装置１０００Ｌ，１０００Ｒの非同期リモートコピープログラム４１０５０ＰはＪＮＬ作成処理プログラム３８１１０及びＪＮＬＲＤ受信処理プログラム３８１２０から構成される。

ＪＮＬ作成処理プログラム３８１１０は、データボリューム３８３１０Ｄ１〜３８３１０Ｄ４に対するライトリクエスト受信時に、対応するジャーナルグループ３８３００Ｇ１，３８３００Ｇ２及びジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２を決定し、当該ジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２にジャーナルデータを書き込む処理である。なお、ジャーナルデータは正ストレージ装置１０００Ｌが受信したライトコマンドにおける、ボリュームのデータ領域のアドレスとライトデータとライト順序番号等が含まれる。ジャーナルデータの詳細については後ほど説明する。

ＪＮＬＲＤ受信処理プログラム３８１２０は、副ストレージ装置２５５０Ｌ，２５５０Ｒで実行されるＪＮＬＲＤ処理プログラム４１０８０（後ほど説明）の要求に応じてジャーナルデータを送信するプログラムである。ＪＮＬＲＤ受信処理プログラム３８１２０に基づくＪＮＬＲＤ受信処理の詳細については後ほどフローチャートを用いて説明をおこなう。

コピーペア情報４１３００Ｐは、前実施の形態と同様の情報に加え、
（１）データボリューム３８３１０Ｄ１〜３８３１０Ｄ４の所属するジャーナルグループ３８３００Ｇ１，３８３００Ｇ２の識別子
（２）コピーの種別（“同期“ または “非同期“）
を含む。

ボリューム情報４１３２０Ｐは、前実施の形態と同様の情報に加えて、ボリュームのタイプ（ジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２又はデータボリューム３８３１０Ｄ１〜３８３１０Ｄ４）を含む。

ジャーナルグループ情報４１３３０Ｐは、ジャーナルグループ３８３００Ｇ１，３８３００Ｇ２を管理するための情報であり、図４７に示すように、ジャーナルグループ番号で識別されるジャーナルグループ３８３００Ｇ１，３８３００Ｇ２毎に以下の情報を含む。
（１）ペア識別子リスト。ジャーナルグループ３８３００Ｇ１，３８３００Ｇ２に属するコピーペアの識別子が保存される情報である。
（２）ジャーナルボリューム番号リスト。ジャーナルグループ３８３００Ｇ１，３８３００Ｇ２に属するジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２の識別子が保存される情報である。

（３）更新番号。ジャーナルデータの更新情報に記録され、副ストレージ装置２５５０Ｌ，２５５０Ｒにおけるデータの更新順を守るためや、リモートからの復旧時に最新のデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８を持つ副ストレージ装置２５５０Ｌ，２５５０Ｒ）を判定するために使用する。
（４）相手ストレージ装置番号。リモートコピー先のストレージ装置（正ストレージ装置１０００Ｌ，１０００Ｒ又は副ストレージ装置２５５０Ｌ，２５５０Ｒ）を識別する情報が保存される。
（５）相手ジャーナルグループ番号。リモートコピー先のジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４を識別する情報が保存される。

（６）更新情報最古アドレス
（７）更新情報最新アドレス
（８）更新情報転送開始アドレス
（９）ライトデータ最古アドレス
（１０）ライトデータ最新アドレス
（１１）リストア済み最新更新番号
なお、（６）から（１１）は後ほど説明する。

正副情報４１３４０Ｐは、本システムを構成する自ストレージ装置以外のストレージ装置（例えば正ストレージ装置１０００Ｌが自ストレージ装置の場合、正ストレージ装置１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒが該当）の役割を管理する情報で、以下の情報が含まれる。

（１）自ストレージ装置の系状態（“正系”又は“副系”）及びジャーナルグループ番号。正副情報４１３４０Ｐを持つ自ストレージ装置が、正系か副系かどちらの状態であるかの情報と、自ストレージ装置内のジャーナルグループの識別子とを格納している。なお、正系及び副系は、ホスト１１００Ｐ，１１００Ｂから見たＩ／Ｏパスの切り替え先の正副を表す。本実施の形態においては、正ストレージ装置１０００Ｌ及び副ストレージ装置２５５０Ｌが“正系”であり、正ストレージ装置１０００Ｒ及び副ストレージ装置２５５０Ｒが“副系”である。

（２）自サイト内の相手ストレージ装置の装置番号及びジャーナルグループ番号。同期リモートコピーによって高可用化構成としている相手ストレージ装置の識別番号及び当該相手ストレージ装置内の対応するジャーナルグループの識別子を格納している。

（３）他サイト内の正系のストレージ装置（以下、これを正系ストレージ装置と呼ぶ）の装置番号及びジャーナルグループ番号。当該情報を管理するストレージ装置がローカルサイト３８０００Ｐに存在する場合はリモートサイト３８０００Ｂ内での正系ストレージ装置の装置識別子と関係するジャーナルグループの識別子とが、当該情報を管理するストレージ装置がリモートサイト３８０００Ｂに存在する場合はローカルサイト３８０００Ｐ内での正系ストレージ装置の装置識別子と関係するジャーナルグループの識別子とが格納される。

（４）他サイトの副系のストレージ装置（以下、これを副系ストレージ装置と呼ぶ）の装置番号及びジャーナルグループ番号。当該正副情報を管理するストレージ装置がローカルサイト３８０００Ｐに存在する場合はリモートサイト３８０００Ｂの副系ストレージ装置の装置識別子と関係するジャーナルグループの識別子とが、当該正副情報を管理するストレージ装置がリモートサイト３８０００Ｂに存在する場合はローカルサイト３８０００Ｐの副系ストレージ装置の装置識別子と関係するジャーナルグループの識別子とが格納される。

なお、上記正副情報４１３４０Ｐは、ホスト１１００ＰのＩ／Ｏパスマネージャー５０００（図５）のライトリクエスト又はリードリクエスト発行先の切り替えに伴って発行される指示を受信することで変更される。なお、副系ストレージ装置１０００Ｒがホスト１１００Ｐ，１１００Ｂと直接通信できない状態の場合は、正系ストレージ装置１０００Ｌが当該指示を中継してもよい。

また、キャッシュメモリ１０２０には、ジャーナルデータを構成する情報である、ライトデータ４１２１０及び更新情報４１２２０が格納されている。それぞれの詳細については後ほど説明を行う。

＜３．２．副ストレージ装置２５５０＞
副ストレージ装置２５００（２５５０Ｌ，２５５０Ｒ）は、そのコントローラー１０１０のメモリ１０１２にＩ／Ｏ処理プログラム３８１００Ｂ、初期化プログラム４１０３０Ｂ、同期リモートコピープログラム４１０４０Ｂ、非同期リモートコピープログラム４１０５０Ｂ、コピーペア情報４１３００Ｂ、ボリューム情報４１３２０Ｂ、ジャーナルグループ情報４１３３０Ｂ及び正副情報４１３４０Ｂを保持している。

このうちＩ／Ｏ処理プログラム３８１００Ｂ、初期化プログラム４１０３０Ｂ、同期リモートコピープログラム４１０４０Ｂ、非同期リモートコピープログラム４１０５０Ｂ、コピーペア情報４１３００Ｂ、ボリューム情報４１３２０Ｂ、ジャーナルグループ情報４１３３０Ｂ及び正副情報４１３４０Ｂは、正ストレージ装置１０００Ｌ，１０００Ｒの対応要素と同じものであるため、その説明は省略する。

非同期リモートコピープログラム４１０５０Ｂは、ＪＮＬＲＤ処理プログラム４１０８０、リストア処理プログラム３８１００及びＪＮＬ作成処理プログラム３８１４０から構成される。

ＪＮＬＲＤ処理プログラム４１０８０は、正ストレージ装置１０００Ｌ，１０００Ｒからジャーナルデータを取得するプログラムである。具体的には、命令対象の正ストレージ装置１０００Ｌ，１０００Ｒに対して、当該正ストレージ装置１０００Ｌ，１０００Ｒ内に存在するジャーナルグループ３８３００Ｇ１，３８３００Ｇ２のジャーナルグループ番号を指定してＪＮＬＲＤ命令を送信する。ＪＮＬＲＤ処理プログラム４１０８０に基づく処理の詳細はフローを用いて説明する。

リストア処理プログラム３８１００は、副ストレージ装置２５５０Ｌ，２５５０Ｒのジャーナルグループ３８３００Ｇ３，３８３００Ｇ４に属するジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４に格納されたライトデータをそのジャーナルグループ３８３００Ｇ３，３８３００Ｇ４に属する対応するデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８に書き込む処理である。リストア処理プログラム３８１００に基づくリストア処理の詳細については後ほどフローチャートを用いて説明をおこなう。

なお、本図に含まれていない処理及びプログラムで他の実施の形態に記載があるもの等が各ストレージ装置に含まれても良い。

＜４．ジャーナルボリュームの構造とジャーナルグループ情報との関係＞
次に、正ストレージ装置１０００Ｌ，１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒでそれぞれ保持するジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４の構造の説明を、図４２を用いて行う。

ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４は、ライトデータ領域と更新情報領域の二領域に分割されて用いられる。

＜４．１．更新情報領域＞
更新情報領域はジャーナルデータの更新情報を保存する領域で、ジャーナルグループ情報４１３３０Ｐ，４１３３０Ｂ（図４１）の更新情報最古アドレスと更新情報最新アドレスが、正ストレージ装置１０００Ｌ，１０００Ｒ又は副ストレージ装置２５５０Ｌ，２５５０Ｒが保持すべき更新情報４１２２０（図４１）をリングバッファー形式で管理している。また、ジャーナルグループ情報４１３３０Ｐ，４１３３０Ｂの更新情報リード開始アドレスは、ＪＮＬＲＤ受信処理プログラム４１０８０（図４１）が転送すべきジャーナルデータの更新情報を示す。そのため、ＪＮＬＲＤ受信処理プログラム４１０８０が取得対象を指定しないジャーナル取得要求を受信した場合は、当該リード開始アドレスが示す更新情報を転送する。

図４６は更新情報が保持する情報について示した模式図（４６００１）である。以下に各情報について説明する。
（Ａ）更新時刻は、正ストレージ装置１０００Ｌ，１０００Ｒがライトリクエストを受信した時の時刻を示す情報である。
（Ｂ）更新番号は、更新情報を含むライトデータ同士の順序関係を示す情報である。
（Ｃ）ライトアドレスとライトデータ長は、ライトリクエストで指定されたボリュームとボリューム内のアドレスとライトデータの長さを示す情報である（図４２の４２１００と４２１１０）。
（Ｄ）ジャーナルボリュームアドレスは、ライトデータのコピーが保存されるジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４と、当該ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４内のアドレスを示す情報である（図４２の４２１２０）。

＜４．２．ライトデータ領域＞
ライトデータ領域は、ジャーナルデータに含まれるライトデータを保存する領域で、ジャーナルグループ情報４１３３０Ｐ，４１３３０Ｂのライトデータ最古アドレスとライトデータ最新アドレスが、正ストレージ装置１０００Ｌ，１０００Ｒ又は副ストレージ装置２５５０Ｌ，２５５０Ｒが保持すべきライトデータをリングバッファー形式で管理している。

＜４．３．複数のジャーナルボリュームを用いる場合＞
以下の理由から、あるジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４に対して、複数のジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４が属することがある。

（理由１）容量の柔軟性。一つのジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４では保持すべきジャーナルデータの量が少なすぎる場合が考えられるため。
（理由２）性能上の問題。ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４にはジャーナルグループ３８３００Ｇ１〜３８３００Ｇ４内の全データボリューム３８３１０Ｄ１〜３８３１０Ｄ８のライトリクエストと同等のジャーナルデータが生成されるため、ボトルネックになりやすいため。

そのため、正ストレージ装置１０００Ｌ，１０００Ｒ又は副ストレージ装置２５５０Ｌ，２５５０Ｒが複数のジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４を用いる場合は上記理由を考慮して以下の方法で用いることが考えられる。
（方式１）あるジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４の後ろに新しいジャーナルボリュームを追加する、いわゆるコンカチネートと呼ばれる方式。ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４を管理する各種情報は追加された後に割り当てられるアドレッシングルール上で管理を行う。
（方式２）定められたジャーナルデータのデータ量または生成回数毎に保存先のジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４をローテーションで切り替えるストライピング方式。方式１と同様に、ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４を管理する各種情報は追加された後に割り当てられるアドレッシングルール上で管理を行う。

さらに、ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４の更新領域は更新情報領域とライトデータ領域に分割されて使用されるが、それぞれの領域毎に別な方式を採用してもよい。

＜４．４．バリエーション＞
ジャーナルボリューム３８３２０Ｊ１〜３８３２０Ｊ４は、更新情報とライトデータを別々な領域にデータを保持するのではなく、更新情報とライトデータをまとめて保持してもよい。

＜５．非同期リモートコピーのペア状態＞
次に、非同期リモートコピーのペア状態の説明を図４３を用いて行う。既に前実施の形態で説明している同期リモートコピーと同様の状態についての説明は省略し、異なる点のみ説明を行うこととする。

（１）Ｄｕｐｌｅｘ状態（４３０１０）
非同期リモートコピーにおいては、正系のボリュームから副系のボリュームへのコピーがジャーナルデータを介する等により、非同期に行われるため、Ｄｕｐｌｅｘ状態であっても、副系のボリュームは正系のボリュームより少し遅れながら追従する。
（２）Ｓｕｓｐｅｎｄｉｎｇ状態（４３０２０）
Ｓｕｓｐｅｎｄｉｎｇ状態は、前記のＤｕｐｌｅｘ状態からＳｕｓｐｅｎｄ状態に遷移するまでの中間状態である。

＜６．本システムの初期化について＞
次に、システムの運用を開始するため、ジャーナルグループ情報４１３３０Ｐ，４１３３０Ｂの設定やコピーペア情報４１３００Ｐ，４１３００Ｂの設定等を行う初期化プログラム４１０３０Ｐ，４１０３０Ｂを用いた本システムの初期化処理の説明を図４４を用いて行う。

初期化プログラム４１０３０Ｐ，４１０３０Ｂは、ホスト１１００Ｐ，１１００Ｂ又は管理ホスト１２００（図３７）からの初期化指示の受信を契機として実行される。また、初期化指示には以下の情報が含まれる。
（Ａ）ローカル側の正系ストレージ装置１０００Ｌと、副系ストレージ装置１０００Ｒとの装置番号
（Ｂ）リモート側の正系ストレージ装置２５５０Ｌと、副系ストレージ装置２５５０Ｒとの装置番号
（Ｃ）ローカル側の正系ストレージ装置１０００Ｌ内のボリュームのうち、ジャーナルボリューム３８３２０Ｊ１とすべきボリュームの識別子
（Ｄ）ローカル側の副系ストレージ装置１０００Ｒ内のボリュームのうち、ジャーナルボリューム３８３２０Ｊ２とすべきボリュームの識別子

（Ｅ）リモート側の正系ストレージ装置２５５０Ｌ内のボリュームのうち、ジャーナルボリューム３８３２０Ｊ３とすべきボリュームの識別子
（Ｆ）リモート側の副系ストレージ装置２５５０Ｒ内のボリュームのうち、ジャーナルボリューム３８３２０Ｊ４とすべきボリュームの識別子
（Ｇ）同期リモートコピーのペアに設定すべき、ローカル側の正系ストレージ装置１０００Ｌのボリューム及び副系ストレージ装置１０００Ｒのボリュームの識別子
（Ｈ）非同期リモートコピーのペアに設定すべき、ローカル側の正系ストレージ装置１０００Ｌのボリューム及びモート側の正系ストレージ装置１０００Ｒのボリュームの識別子
（Ｉ）非同期リモートコピーのペアに設定すべき、ローカル側の正系ストレージ装置１０００Ｌのボリューム及びリモート側の正系ストレージ装置２５５０Ｌのボリュームの識別子

なお、これら指示は複数に分けて発行されてもよい。以下、図４４の詳細について説明する。

（Ｓ４４００１）初期化プログラム４１０３０Ｐ，４１０３０Ｂが開始されると、ジャーナルグループ３８３２０Ｊ１〜３８３２０Ｊ４の作成処理を行う。より具体的なジャーナルグループ３８３２０Ｊ１〜３８３２０Ｊ４の作成処理の手順を以下に示す。
（Ａ）ローカル側の正系の正ストレージ装置１０００Ｌは、初期化指示に含まれる情報を用いてジャーナルグループ３８３００Ｇ１を定義し、当該ジャーナルグループ３８３００Ｇ１に指定されたボリュームをジャーナルボリューム３８３２０Ｊ１として用いるように設定する。

なお、この正系ストレージ装置１０００Ｌへの初期化指示がホスト１１００Ｐからローカル側の正系の正ストレージ装置１０００Ｌに直接与えられなかったときには、当該初期化指示を受信したストレージ装置（例えばローカル側の副系の正ストレージ装置１０００Ｒ）により中継され、代わりにジャーナルグループ識別子を正系ストレージ装置１０００Ｌからその中継を行なった正ストレージ装置１０００Ｒへ返す。また、ジャーナルボリューム３８３００Ｇ１の設定に伴って、ジャーナルグループ情報４１３３０Ｐの更新番号を０に、更新情報最古アドレスと更新情報最新アドレスと更新情報転送開始アドレスも更新情報領域の先頭アドレスに設定する。同様に、ライトデータ最古アドレスとライトデータ最新アドレスはライトデータ領域の先頭アドレスに設定する。

（Ｂ）同様の処理をリモート側の正系ストレージ装置２５５０Ｌに対しても行う。
（Ｃ）同様の処理をローカル側の副系ストレージ装置１０００Ｒとリモート側の副系ストレージ装置２５５０Ｂに対しても行う。
（Ｄ）かかる初期化指示の中継を行なったストレージ装置（正側ストレージ装置１０００Ｌ，１０００Ｒ又は副側ストレージ装置２５５０Ｌ，２５５０Ｒ）は他の各ストレージ装置（正側ストレージ装置１０００Ｌ，１０００Ｒ又は副側ストレージ装置２５５０Ｌ，２５５０Ｒ）と通信を行うことで、ジャーナルグループ情報４１３３０Ｐ，４１３３０Ｂに含まれる相手ストレージ装置番号及び相手ジャーナルグループ番号として必要な値を設定するよう指示を与える。この指示を受信したら各ストレージ装置（正側ストレージ装置１０００Ｒ，１０００Ｌ又は副側ストレージ装置２５５０Ｒ，２５５０Ｌ）は図３８のコピートポロジーとなるように各種値を設定する。

（Ｓ４４００２）初期化プログラム４１０３０Ｐ，４１０３０Ｂはペアを登録する。より詳細なペアの作成処理の動作を以下に説明する。
（Ａ：同期リモートコピーのペア設定）データボリューム３８３１０Ｄ１及び３８３１０Ｄ３、３８３１０Ｄ２及び３８３１０Ｄ４をそれぞれペアとする同期リモートコピーのペア設定を行う。より具体的には、正ストレージ装置１０００Ｌのコピーペア情報４１３００Ｐの、コピー元ボリュームを持つストレージ装置のストレージ装置番号及びボリューム番号として、正ストレージ装置１０００Ｌのストレージ装置番号及びデータボリューム３８３１０Ｄ１のボリューム番号を設定し、コピー先ボリュームを持つストレージ装置のストレージ装置番号及びボリューム番号として、正ストレージ装置１０００Ｒのストレージ装置番号及びデータボリューム３８３１０Ｄ３のボリューム番号を設定する。また、かかるコピーペアのペア状態として、”Ｓｉｍｐｌｅｘ”を設定する。また、ペア状態のコピーの種別として、”同期”を設定する。

（Ｂ：非同期リモートコピーのペア設定その１）正ストレージ装置１０００Ｌのコピーペア情報４１３００Ｐの、コピー元ボリュームを持つストレージ装置のストレージ装置番号及びボリューム番号として、正ストレージ装置１０００Ｌのストレージ装置番号及びデータボリュームＤ１のボリューム番号を設定し、コピー先ボリュームを持つストレージ装置のストレージ装置番号及びボリューム番号として、副ストレージ装置２５５０Ｌのストレージ装置番号及びデータボリュームＤ５のボリューム番号を設定する。また、かかるコピーペアのペア状態として、”Ｓｉｍｐｌｅｘ”を設定する。また、このペア状態のコピーの種別として、”非同期”を設定する。次に、副ストレージ装置２５５０Ｌのコピーペア情報４１３００Ｂとして、この正ストレージ装置１０００Ｌのコピーペア情報４１３００Ｐと同じ内容を設定する。

また、正ストレージ装置１０００Ｌ及び副ストレージ装置２５５０Ｌのジャーナルグループ情報４１３３０Ｐ，４１３３０Ｂのペア識別子リストに、それぞれコピーペア情報４１３００Ｐ，４１３００Ｂを識別する番号であるペア番号を追加する。

また、ジャーナルグループ３８３００Ｇ１，３８３００Ｇ３に追加したいデータボリュームが複数ある場合、データボリューム毎に、上述と同様に、コピーペア情報４１３００Ｐ，４１３００Ｂ及びジャーナルグループ情報４１３３０Ｐ，４１３３０Ｂの設定を行う。

（Ｃ：非同期リモートコピーのペア設定その２）上述の（Ｂ）と同様のペアの作成処理を、ローカル側の副系の正ストレージ装置１０００Ｒと、リモート側の副系の副ストレージ装置２５５０Ｒとに対しても行なう。

（Ｓ４４００３）初期化プログラム４１０３０Ｐ，４１０３０Ｂは、同期リモートコピープログラム４１０４０Ｐ，４１０４０Ｂによる初期コピーを開始させる。なお、当該初期コピーは中継するストレージ装置が同期リモートコピーに関係するストレージ装置に指示を発行することで行われる。

（Ｓ４４００４）初期化プログラム４１０３０Ｐ，４１０３０Ｂは、Ｓ４４００３の初期コピーの完了を待ってから、ローカル側の正系ストレージ装置１０００Ｌからリモート側の正系ストレージ装置２５５０Ｌへの非同期リモートコピーの初期コピーを開始する。なお、当該初期コピーは中継するストレージ装置が当該非同期リモートコピーに関係するストレージ装置に指示を発行することで行われる。また、この初期コピーに際してリモート側の正系ストレージ装置２５５０ＬではＪＮＬＲＤ処理プログラム３８１４０に基づくＪＮＬＲＤ処理及びリストア処理プログラム３８１００に基づくリストア処理が開始される。

（Ｓ４４００５）初期化プログラム４１０３０Ｐ，４１０３０Ｂは、ローカル側の副系ストレージ装置１０００Ｒからリモート側の副系ストレージ装置２５５０Ｒへの非同期リモートコピーの初期コピーを開始する。なお、この初期コピーは中継するストレージ装置が当該非同期リモートコピーに関係するストレージ装置に指示を発行することで行われる。また、この初期コピーに際してリモート側の副系ストレージ装置２５５０ＲではＪＮＬＲＤ処理プログラム３８１４０に基づくＪＮＬＲＤ処理及びリストア処理プログラム３８１００に基づくリストア処理が開始される。

（Ｓ４４００６）初期化プログラム４１０３０Ｐ，４１０３０Ｂは、非同期リモートコピーの両方のペア状態がＤｕｐｌｅｘ状態へ遷移したら、ホスト１１００Ｐにあるデバイス関係テーブルの上記ペアに対応する障害状態を“通常状態”に変更させる。また、正ストレージ装置１０００Ｌは、正副情報４１３４０Ｐの自ストレージ装置の系状態に“正系”を設定し、正ストレージ装置１０００Ｒは、正副情報４１３４０Ｂの自ストレージ装置の系状態に“副系”を設定し、副ストレージ装置２５５０Ｌは、正副情報４１３４０Ｂの自ストレージ装置の系状態に“正系”を設定し、副ストレージ装置２５５０Ｒは、正副情報４１３４０Ｂの自ストレージ装置の系状態に“副系”を設定する。さらに、各ストレージ装置（正ストレージ装置１０００Ｌ，１０００Ｒ又は副ストレージ装置２５５０Ｌ，２５５０Ｒ）のジャーナルグループ番号を正副情報４１３４０Ｐ，４１３４０Ｂへ格納する。

以上が手順である。なお、上記の説明では、正ストレージ装置１０００Ｌ，１０００Ｒや副ストレージ装置２５５０Ｌ，２５５０Ｒの初期化のための設定を一度に実施しているが、機能Ｉ／Ｆ等を通じて、ホスト１１００Ｐ，１１００Ｂ側からそれぞれの設定を別々に行うことにより、正ストレージ装置１０００Ｌ，１０００Ｒや副ストレージ装置２５５０Ｌ，２５５０Ｒの初期化を行う方法も考えられる。

＜７．本システムのフェイルオーバー処理について＞
次に、フェイルオーバー処理プログラム４１１００（図４０）に基づくフェイルオーバー処理の説明を図４５を用いて行う。

フェイルオーバー処理は、ローカル側のストレージ装置（正ストレージ装置１０００Ｌ，１０００Ｒ）の障害時にリモートのホスト１１００Ｂにてシステムの復旧を行う際の処理である。フェイルオーバー処理は、リモート側のホスト１１００Ｂ（副ホスト）に実装されたフェイルオーバー処理プログラム４１１００に基づき実行される。

（Ｓ４５００１）まず、フェイルオーバー処理プログラム４１１００は、機能Ｉ／Ｆ等を介して、副ストレージ装置２５５０ＲのＪＮＬＲＤ処理プログラム４１０８０に対してＪＮＬＲＤ処理の停止を指示する。この指示を受けた副ストレージ装置２５５０Ｒは、ＪＮＬＲＤ処理を停止する。なお、非同期リモートコピーの機能によってかかるＪＮＬＲＤ処理が自動的に停止している場合は本ステップを省略することができる。

（Ｓ４５００２）次に、フェイルオーバー処理プログラム４１１００は、２つの副ストレージ装置２５５０Ｌ，２５５０Ｒが、それぞれのジャーナルグループ３８３００Ｇ３，３８３００Ｇ４のリストア処理が完了したことを認識する。たとえば、副ホスト１１００Ｂは機能Ｉ／Ｆを介して、副ストレージ装置２５５０Ｌ，２５５０Ｒに対して、リストア処理プログラム３８１００によるリストア処理が完了した時点で完了通知を返すように指示を出し、完了通知を待ち受ける方法が考えられる。

（Ｓ４５００３）次にフェイルオーバー処理プログラム４１１００は、最新のジャーナルグループ３８３００Ｇ３，３８３００Ｇ４を持つ副ストレージ装置２５５０Ｌ，２５５０Ｒを選択する。たとえば、副ホスト１１００Ｂは、かかる完了通知にジャーナルグループ情報４１３３０Ｂの更新番号を付加することにより、新しい更新番号を持つ副ストレージ装置２５５０Ｌ，２５５０Ｒを、最新の状態のジャーナルグループ３８３００Ｇ３，３８３００Ｇ４を持つ副ストレージ装置２５５０Ｌ，２５５０Ｒとして選択する。この判定に用いる更新番号は、タイムスタンプやマーカー等でもよい。

（Ｓ４５００４）次に、フェイルオーバー処理プログラム４１１００は、機能Ｉ／Ｆ等を使用して、上述のように選択した副ストレージ装置２５５０Ｌ，２５５０Ｒのジャーナルグループ３８３００Ｇ３，３８３００Ｇ４に存在するデータボリューム３８３１０Ｄ５〜３８３１８Ｄ８を正として同期リモートコピーのペアを作成する。
（Ｓ４５００５）次に、副ホスト１１００Ｂは、かかる選択したジャーナルグループ３８３００Ｇ３，３８３００Ｇ４に存在するデータボリューム３８３１０Ｄ５〜３８３１８Ｄ８へのホストアクセスを開始する。
（Ｓ４５００６）最後に、フェイルオーバー処理プログラム４１１００は、データボリューム３８３１０Ｄ５〜３８３１８Ｄ８の同期リモートコピーのペア状態が“Ｄｕｐｌｅｘ”となったら、ホスト１１００Ｂのデバイス関係テーブルを変更する。

ただし、１つのストレージシステムでリモートコピーを復旧させる場合は、上述したフローチャートのＳ４５００３の後、新しいタイムスタンプを持つストレージ装置のみをホスト１１００Ｂに認識させるようＩ／Ｏパスマネージャー５０００を設定することで、Ｓ４５００４以降のステップを省略可能である。

なお上記では、説明を簡単にするため、フェイルオーバー処理プログラム４１１００がリモート側のホスト１１００Ｂに実装されたフェイルオーバー処理プログラム４１１００に基づき実行されると説明したが、副ストレージ装置２５５０Ｌ，２５５０Ｒ内部のコントローラー１０１０で機能Ｉ／Ｆを介して動作するプログラムとして実装するようにしてもよい。

＜８．非同期リモートコピープログラムの詳細＞
次に、ＪＮＬＲＤ受信処理プログラム３８１２０に基づくＪＮＬＲＤ受信処理の説明を、図４８を用いて行う。

ＪＮＬＲＤ受信処理は正ストレージ装置１０００Ｌ，１０００Ｒにて、副ストレージ装置２５５０Ｌ，２５５０Ｒからジャーナルリードリクエストを受信したときに開始される。なお、受信したジャーナルリードリクエストには副ストレージ装置２５５０Ｌ，２５５０Ｒがリストア処理を完了したジャーナルデータの最新更新番号が含まれている。

（Ｓ４８００８）ＪＮＬＲＤ受信処理プログラム３８１２０は、かかるジャーナルリードリクエストにおいて再転送対象のジャーナルデータを示す情報（更新番号等）を伴ったリトライオプションが付加されているかどうかを判断し、付加されている場合はＳ４８００６に進む（Ｓ４８００８のＹ）。リトライ指示が付加されていない場合（Ｓ４８００８のＮ）、Ｓ４８００１に進む。

（Ｓ４８００６）ＪＮＬＲＤ受信処理プログラム３８１２０は、再送対象のジャーナルデータを示す更新順序等から更新情報を求め、さらに該当する更新情報が示すライトデータを同定する。
（Ｓ４８００７）ＪＮＬＲＤ受信処理プログラム３８１２０は、Ｓ４８００６のステップで同定したライトデータ及び更新情報をジャーナルデータとして転送する。

（Ｓ４８００１）ＪＮＬＲＤ受信処理プログラム３８１２０は、未送信のジャーナルの存在を確認し、存在しない場合はＳ４８００５に進む（Ｓ４８００１のＮ）。また、未送信のジャーナルデータが存在する場合はＳ４８００２に進む（Ｓ４８００１のＹ）。この判断は、ジャーナルグループ情報４１３３０Ｐの更新情報転送開始アドレスと、更新情報最新アドレスとが同じかどうかによって行う。

（Ｓ４８００５）ＪＮＬＲＤ受信処理プログラム３８１２０は、対象の副ストレージ装置２５５０Ｌ，２５５０Ｒに“ジャーナル無“を報告する。
（Ｓ４８００２）ＪＮＬＲＤ受信処理プログラム３８１２０は、ジャーナルグループ情報４１３３０Ｐの更新情報転送開始アドレスが示す更新情報が示すライトデータを同定する。
（Ｓ４８００３）ＪＮＬＲＤ受信処理プログラム３８１２０は、Ｓ４８００２のステップで同定したライトデータ及び更新情報をジャーナルデータとして転送し、更新情報転送開始アドレスを次の更新情報のアドレスへ変更する。

（Ｓ４８００４）ＪＮＬＲＤ受信処理プログラム３８１２０は、副ストレージ装置２５５０Ｌ，２５５０Ｒからのジャーナル転送に関する応答を待ち、応答を受信したらジャーナルデータに使用したジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２の記憶領域を開放し、終了する。なお、ジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２の記憶領域の開放は具体的には、以下の更新を行うことで実現される。

（Ａ）更新情報最古アドレスの値を、次の更新情報を指し示すように、更新情報のデータサイズと現在の更新情報最古アドレスの値を加算した値にする。
（Ｂ）ライトデータ最古アドレスの値を、次のライトデータのアドレスを指し示すように、ライトデータのデータサイズと現在のライトデータ最古アドレスの値を加算した値に変更する。
（Ｃ）ジャーナルグループ情報４１３３０Ｐのリストア済最新更新番号を、ジャーナルリードリクエストに付随したリストア済最新更新番号に更新する。

以上である。なお、本実施の形態のバリエーションとして、正ストレージ装置１０００Ｌ，１０００Ｒでのジャーナルデータの開放は副ストレージ装置２５５０Ｌ，２５５０Ｒからの転送終了メッセージを待ってＳ４８００３の転送直後でリストア完了以前に行っても良い。また、これまでの実施の形態と同様に、更新情報やライトデータの転送のためにジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２から当該情報を読み込み、キャッシュメモリ１０２０（図３７）へステージングしてもよく、また既にキャッシュメモリ１０２０に当該情報が存在する場合は、キャッシュメモリ１０２０へのステージングを省略してもよい。

次に、ジャーナル作成処理プログラム３８１１０の説明を、図４９を用いて行う。本処理は、正ストレージ装置１０００Ｌ，１０００Ｒがホスト１１００Ｐからのライトリクエストを受信したときやリモートライトリクエストを受信したときに、Ｉ／Ｏ処理プログラム３８１００Ｐにより呼び出される。以下、フローチャートに従って説明する。

（Ｓ４９００１）ジャーナル作成処理プログラム３８１１０は、ライトリクエスト又はリモートライトリクエストにおいて指定されたデータボリューム３８３１０Ｄ１〜３８３１０Ｄ４が所属するジャーナルグループ３８３００Ｇ１，３８３００１Ｇ２を特定し、そこから対応するジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２を特定する。
（Ｓ４９００２）ジャーナル作成処理プログラム３８１１０は、ライトリクエスト又はリモートライトリクエストにおいて指定されたデータボリューム３８３１０Ｄ１〜３８３１０Ｄ４が同期リモートコピーの正側のボリュームであるか、コピーペア情報４１３００Ｐ等を参照し、判定を行う。当該データボリューム３８３１０Ｄ１〜３８３１０Ｄ４が同期リモートコピーの正側のボリュームであった場合はＳ４９００３へ進む（Ｓ４９００２のＹ）。また、当該データボリューム３８３１０Ｄ１〜３８３１０Ｄ４が同期リモートコピーの正側のボリュームでなかった場合はＳ４９００５へ進む（Ｓ４９００２のＮ）。

（Ｓ４９００３）ジャーナル作成処理プログラム３８１１０は、以下の手順を行うことで、更新情報を生成する。
（Ａ）更新情報の更新時刻に、その正ストレージ装置１０００Ｌ，１０００Ｒ内部の現在時刻を設定する。なお、メインフレームホストがライトリクエストを送信した場合、ライトリクエストに対して時刻を付随させることができるため、このようなリクエストを受信した場合は、受信した時刻を設定してもよい。
（Ｂ）更新情報の更新番号に、対応するジャーナルグループ情報４１３３０Ｐの更新番号に１を加えた値を設定する。
（Ｃ）更新情報のライトアドレスとライトデータ長は、ライトリクエストに含まれる情報（論理ボリューム番号、ライト開始アドレス、ライトデータ長）を設定する。なお、当該情報はライトリクエストの情報をそのまま保存することも考えられるが、正ストレージ装置１０００Ｌ，１０００Ｒ内部で用いられるアドレッシングルールに基づいた値を設定してもよい。
（Ｄ）ジャーナルグループ情報４１３３０Ｐの更新番号は、同情報が持つ値に１を加算した値を設定する。

（Ｓ４９００４）ジャーナル作成処理プログラム３８１１０は、ジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２上に更新情報とライトデータの保存領域を確保し、Ｓ４９００３のステップで作成した更新情報のジャーナルボリュームアドレスに、ライトデータ保存領域の先頭アドレスを設定する。そして、かかる更新情報とかかるライトデータとをジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２上に確保した保存領域へ書き込む。なお、書き込みに伴って、ジャーナルグループ情報４１３３０Ｐの以下の情報を更新する。
（Ａ）更新情報最新アドレスは、かかる更新情報の保存領域へ設定する。
（Ｂ）ライトデータ最新アドレスは、かかるライトデータの保存領域へ設定する。

（Ｓ４９００５）ジャーナル作成処理プログラム３８１１０は、かかるデータボリューム３８３１０Ｄ１〜３８３１０Ｄ４が同期リモートコピーの副側のボリュームであった場合（Ｓ４９００５のＹ）、Ｓ４９００６へ進む。また、当該データボリューム３８３１０Ｄ１〜３８３１０Ｄ４が同期リモートコピーの副側のボリュームでなかった場合（Ｓ４９００５のＮ）、処理を終了する。

（Ｓ４９００６）ジャーナル作成処理プログラム３８１１０は、リモートライトリクエストから更新情報を生成する。この更新情報の生成において、当該リモートライトリクエストに含まれている更新番号を、この更新情報の更新番号に設定する。また、この更新情報の生成において、更新時刻は、リモートライトリクエストに含まれている時刻に設定する。その他の更新情報の要素も対応する情報の設定を行う。

なお、リモートライトリクエストによって受信し、更新情報を作成した情報（例えば、更新番号）をジャーナルグループ情報４１３３０Ｐに設定してもよい。なお、正系の正ストレージ装置１０００Ｌがリモートライトリクエストで転送する更新番号は、Ｓ４９００３で作成した更新情報に含まれる更新番号と同じ値である。

次に、ＪＮＬＲＤ処理を、図５０を用いて説明する。ＪＮＬＲＤ処理は、副ストレージ装置２５５０Ｌ，２５５０Ｒで実行される処理であり、初期化プログラム４１０３０Ｂによって実行開始を指示され、その後副ストレージ装置２５５０Ｌ，２５５０Ｒがリモートコピー失敗に関する障害を検知したり、他のストレージ装置又はホスト１１００Ｂから指示を受けるまで繰り返し行なわれる。

（Ｓ５０００１）ＪＮＬＲＤ処理プログラム４１０８０は、正ストレージ装置１０００Ｌ，１０００Ｒにジャーナルリードリクエストを送信する。なお、ＪＮＬＲＤ処理プログラム４１０８０が他の処理またはホスト１１００Ｂからジャーナルデータの再送を要求された場合は、当該リクエストにリトライオプションと再転送対象のジャーナルデータを識別する情報（更新番号等）を付随して送信する。また、ＪＮＬＲＤ処理にはジャーナルグループ情報４１３３０Ｂのリストア済み最新更新番号の値が含まれる。

（Ｓ５０００２）ＪＮＬＲＤ処理プログラム４１０８０は、正ストレージ装置１０００Ｌ，１０００Ｒからの応答を受信する。
（Ｓ５０００３）ＪＮＬＲＤ処理プログラム４１０８０は、応答の内容が“ジャーナル無し”であったかどうかを判断し、”ジャーナル無し”の場合（Ｓ５０００３のＹ）はＳ５０００６へ進む。かかる応答の内容が“ジャーナル無し”でなかった場合（Ｓ５０００３のＮ）はＳ５０００４へ進む。
（Ｓ５０００６）ＪＮＬＲＤ処理プログラム４１０８０は、一定時間待つ。

（Ｓ５０００４）ＪＮＬＲＤ処理プログラム４１０８０は、自ストレージ装置内のジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４にジャーナルデータ保存用の領域が不足していないか判断を行い、ジャーナルデータ用の記憶領域が確保できない場合（Ｓ５０００４のＹ）は、Ｓ５０００５へ進む。ジャーナルデータ用の記憶領域が確保できた場合（Ｓ５０００４のＮ）は、Ｓ５０００７へ進む。なお、この判断はジャーナルグループ情報４１３３０Ｂの以下の情報を参照することで判断できる。
（Ａ）更新情報最古アドレスを受信したジャーナルデータの更新情報分だけ加えたアドレスより、更新情報最新アドレスが小さい場合は、更新情報の保存領域が不足している。
（Ｂ）ライトデータ最古アドレスを受信したジャーナルデータのライトデータ分だけ加えたアドレスより、ライトデータ最新アドレスが小さい場合は、ライトデータの保存領域が不足している。

（Ｓ５０００７）ＪＮＬＲＤ処理プログラム４１０８０は、受信したジャーナルデータを破棄し、一定時間待つ。
（Ｓ５０００５）ＪＮＬＲＤ処理プログラム４１０８０は、ジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４上に更新情報とライトデータの保存領域を確保し、受信したジャーナルデータの更新情報のジャーナルボリュームアドレスに、ライトデータ保存領域の先頭アドレスを設定する。そして、前記更新情報と前記ライトデータをジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４上に確保した保存領域へ書き込む。なお、書き込みに伴って、ジャーナルグループ情報４１３３０Ｂの以下の情報を更新する。
（Ａ）更新情報最新アドレスは、上記更新情報の保存領域へ設定する。
（Ｂ）ライトデータ最新アドレスは、上記ライトデータの保存領域へ設定する。

なお、副ストレージ装置２５５０Ｌ，２５５０Ｒは同時に複数のジャーナルリードリクエストを出してもよい。

次に、リストア処理プログラム３８１００を、図５１を用いて説明する。リストア処理プログラム３８１００は、副ストレージ装置２５５０Ｌ，２５５０Ｒで実行され、初期化プログラム４１０３０Ｂによって処理を開始する。

（Ｓ５１００１）リストア処理プログラム３８１００は、リストア対象のジャーナルデータが存在するかどうかチェックを行う。このチェックの方法は、ジャーナルグループ情報４１３３０Ｂを参照し、それぞれのジャーナルグループ３８３００Ｇ３，３８３００Ｇ４に対して、対応するジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４のポインタ情報を参照し、更新情報最古アドレスと更新情報最新アドレスとを比較して、差が０でないかどうかを判断する。リストア対象のジャーナルデータが存在する場合（Ｓ５１００１のＹ）、Ｓ５１００２へ進む。リストア対象のジャーナルデータが存在しない場合（Ｓ５１００１のＮ）、全てのジャーナルデータが適用された状態となる（この状態をリストア処理の完了と呼ぶ場合がある）ため、リストア対象のジャーナルデータの到着を待つ（Ｓ５１００１をループ）。

（Ｓ５１００２）リストア処理プログラム３８１００は、ジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４の更新情報領域に保存された一つまたは複数の更新情報を全てまたは部分的に読み込み、データボリューム３８３１０Ｄ５〜３８３１０Ｄ８に反映すべきライトデータを選択する。なお、かかるライトデータの決定は複数の更新情報を更新番号順に並べ直し、更新番号がジャーナルグループ情報４１３３０Ｂの更新情報最古アドレス（リストア済みのジャーナルデータの最新更新番号を示す）の次の番号から連続している更新情報が選択対象となる。なお、上記並べ直し処理はジャーナルリードリクエストが並列に処理される場合に順序無関係に転送されるために必要となる。

（Ｓ５１００３）リストア処理プログラム３８１００は、Ｓ５１００２で決定した一つ以上のジャーナルデータが持つライトデータをデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８へ書き込む。なお、選択対象のジャーナルデータが複数ある場合、本処理は更新番号順に各ジャーナルデータを書き込んでもよい。また、本書き込みの高速化として以下の処理を行っても良い。
（Ａ）同じアドレスに複数のライトデータが書き込まれることが判明した場合、最後のライトデータだけ書き込み、他のライトデータの書き込みを省略する。
（Ｂ）別なアドレスが書き込み先となっている複数のライトデータがある場合、当該ライトデータの書き込みを並列または順不同に行う。

なお、いずれの処理でも本ステップ中はデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８は不整合（ライトＩ／Ｏ順序が保たれていない）な状態となるため、本リストア処理を終了する場合は、本ステップの書き込み処理が全て完了し、整合性が確保できた状態にする必要がある。そして、ジャーナルグループ情報４１３３０Ｂのリストア済み最新更新番号を本ステップで書き込んだ複数のライトデータに対応する更新情報の中で最新の値を設定する。

（Ｓ５１００４）リストア処理プログラム３８１００は、Ｓ５１００３で書き込んだジャーナルデータを開放する。開放の方法はＪＮＬＲＤ処理と同様であるため、省略する。

以上、本章では副ストレージ装置２５５０Ｌ，２５５０Ｒが主導でジャーナル取得要求を正ストレージ装置１０００Ｌ，１０００Ｒへ送信することでジャーナルデータを転送する非同期リモートコピー方式について説明した。なお、ジャーナルデータの転送方式としては正ストレージ装置１０００Ｌ，１０００Ｒ主導の方式も考えられる。より具体的にはこれまでの説明に変えて以下の変更・追加を行う
（Ａ）正ストレージ装置１０００Ｌ，１０００Ｒは、定期的にジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２を監視してジャーナルデータが存在したら当該ジャーナルデータを転送する。
（Ｂ）副ストレージ装置２５５０Ｌ，２５５０Ｒは、送信されたジャーナルデータを受信したらジャーナルデータをジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４に保存する。そして、リストア済のジャーナルデータの最新更新番号を転送完了の応答と共に返す。また、副ストレージ装置２５５０Ｌ，２５５０Ｒが再度転送が必要と判断したジャーナルデータの更新番号を応答と共に正ストレージ装置１０００Ｌ，１０００Ｒに返してもよい。

さらに、正ストレージ装置１０００Ｌ，１０００Ｒがジャーナルデータを開放するタイミングとしてはリストア済ジャーナルデータの最新更新番号を元にする方法以外に、正ストレージ装置１０００Ｌ，１０００Ｒがジャーナルデータを転送を完了した時点で開放する方法も考えられる。

＜９．正ストレージ装置と副ストレージ装置間のネットワーク障害＞
正ストレージ装置１０００Ｌ，１０００Ｒと副ストレージ装置２５５０Ｌ，２５５０Ｒの間のネットワーク障害によって非同期リモートコピーが継続できない場合は、以下の処理を行うことが考えられる。

（正ストレージ装置の処理）正ストレージ装置１０００Ｌ，１０００Ｒは、リモートコピーの継続不可能な状態を検知したら、当該正ストレージ装置１０００Ｌ，１０００Ｒのジャーナルボリューム３８３２０Ｊ１，３８３２０Ｊ２に保存したジャーナルデータの更新情報に記録されたライト位置を正ストレージ装置１０００Ｌ，１０００Ｒが持つ差分ビットマップ（正）に記録する。また、正ストレージ装置１０００Ｌ，１０００Ｒがライトリクエストを受信した場合は、通常のライト処理と共に当該差分ビットマップにライト位置を記録する。

（副ストレージ装置の処理）副ストレージ装置２５５０Ｌ，２５５０Ｒは、リモートコピーの継続不可能な状態を検知したら、当該副ストレージ装置２５５０Ｌ，２５５０Ｒのジャーナルボリューム３８３２０Ｊ３，３８３２０Ｊ４に保存したジャーナルデータを開放する（ステップ１）。そして、副ストレージ装置２５５０Ｌ，２５５０Ｒがライトリクエストを受信した場合は、通常のライト処理と共に副ストレージ装置２５５０Ｌ，２５５０Ｒが持つ差分ビットマップ（副）にライト位置を記録する（ステップ２）。なお、かかるステップ１及びステップ２は独立のタイミングで実行されることもある。

（再同期指示を受けたときの正副ストレージ装置の処理）副ストレージ装置２５５０Ｌ，２５５０Ｒは差分ビットマップ（副）のデータを正ストレージ装置１０００Ｌ，１０００Ｒへ送信する。当該差分ビットマップを受信した正ストレージ装置１０００Ｌ，１０００Ｒは、差分ビットマップ（正）と受信した差分ビットマップ（副）の内容を確認することで、Ｓｕｓｐｅｎｄ状態となった以後に正ストレージ装置１０００Ｌ，１０００Ｒ又は副ストレージ装置２５５０Ｌ，２５５０Ｒにおいてライトが発生したか否か、及び副ストレージ装置２５５０Ｌ，２５５０Ｒへ未転送状態のライトデータが存在する場合にはそのライト位置を特定する。そして、かかる正ストレージ装置１０００Ｌ，１０００Ｒは、Ｄｕｐｌｅｘ−Ｐｅｎｄｉｎｇ状態中に特定した位置について差分コピーを実行する。

なお、上記処理はホスト１１００Ｐから発行された分割指示で実行してもよい。なお、この場合は、Ｓｕｓｐｅｎｄ状態となった後に副ストレージ装置２５５０Ｌ，２５５０Ｒのボリュームにアクセスすることがあるが、その場合に用いるべきボリュームを同定する方法はフェイルオーバー処理と同じである。ただし、フェイルオーバー処理は古いボリュームのデータは新しいボリュームのデータに上書きされてしまい、その後の差分コピーで副系のストレージ装置２５５０Ｌ，２５５０Ｒのリモートコピーが全コピーになってしまう。こうした状態を回避するため、フェイルオーバー処理に伴う副ストレージ装置２５５０Ｌ，２５５０Ｒ同士の同期リモートコピーは省略してもよい。

＜１０．非同期リモートコピーバリエーション＞
非同期リモートコピーの実現方式にはこれまで説明した方法以外にもいくつか考えられる。

＜１０．１．ライトデータのグループ化方式＞
正ストレージ装置１０００Ｌ，１０００Ｒは、一つ以上のライトデータをまとめてグループ化し、転送等を行う。新たなグループにライトデータを集め始める契機は、現在のグループに集め始めてから一定時間経過した場合や、一定量のライトが行われたことを正ストレージ装置１０００Ｌ，１０００Ｒが検知した場合が考えられるが、これ以外の契機（例えばホスト１１００Ｐから指示を受けた場合等）であってもよい。なお、ジャーナルデータとは異なり、グループ内のライトデータ同士は順序情報を持たないが、グループ同士は順序情報を持つ。また、複数のライトが同じアドレスを更新した場合、同じグループ内で最新のライトデータだけ転送すればよい。

副ストレージ装置２５５０Ｌ，２５５０Ｒは、以下の両方の条件を満たしたグループ内のライトデータだけリストアすることによって、グループ内で順序関係を持たなくても副ストレージ装置２５５０のデータのライト順序を守ることが出来る。
（Ａ）グループ内のすべてのライトデータを副ストレージ装置２５５０Ｌ，２５５０Ｒが受信していること。
（Ｂ）さらに、（Ａ）のグループより前の更新番号を持つグループのライトデータがリストア済であること。

なお、後術のフェイルオーバー処理のため、副ストレージ装置２５５０Ｌ，２５５０Ｒは、例えば米国特許出願公開第２００５／０２１３３８９号明細書に記載された方法を用いて、リストアが完了したグループの更新番号を保持する。

＜１０．２．論理スナップショットを利用した方式＞
正ストレージ装置１０００Ｌ，１０００Ｒは、繰り返し論理スナップショットを作成し、当該スナップショットのデータを副ストレージ装置２５５０Ｌ，２５５０Ｒのボリュームにリモートライトする。第１〜第１６の実施の形態で説明したように、論理スナップショットはＣｏｐｙ‐Ｏｎ‐Ｗｒｉｔｅ処理に伴って書き込み位置を記録しているため、当該リモートライトすべきデータを同定することができる。

なお、このリモートライトは、９．１章と同じくライトリクエスト単位で順序関係が保たれていないため、副ストレージ装置２５５０Ｌ，２５５０Ｒのボリュームについても論理スナップショット（退避用）を作成し、その後にリモートライトを受け付けるようにする。また、正ストレージ装置１０００Ｌ，１０００Ｒは作成した論理スナップショットに対して更新番号を割り当ててリモートライトに付随させ、副ストレージ装置２５５０Ｌ，２５５０Ｒはどの世代（更新番号）の論理スナップショット（退避用）が作成されたか判別できる情報を持つ。このような技術については、米国特許出願公開第２００５／０２１０２１０号明細書に詳しい。

＜１０．３．フェイルオーバー処理＞
１０．１章や１０．２章の両方式とも、ライトデータが副ストレージ装置２５５０Ｌ，２５５０Ｒへ転送された時点ではライトデータ同士の順序関係が不明であり、フェイルオーバーに伴う最新データの同定ができない。その代わりとして以下の方法が考えられる。

（Ａ）ローカル側の両方のストレージ装置１０００Ｌ，１０００Ｒは、お互いが連係することでアトミックに両方のストレージ装置１０００Ｌ，１０００Ｒのグループの切り替え（またはスナップショット作成）を行う。なお、アトミックの意味は、両方の正ストレージ装置１０００Ｌ，１０００Ｒの切り替え（または作成）の間にライトリクエストが処理されないことを指し、ホスト１１００Ｐや正系の正ストレージ装置１０００Ｌがライトリクエストを保留することで実現する方法が考えられる。さらに、ローカル側の両方の正ストレージ装置１０００Ｌ，１０００Ｒは、切り替えられたグループ（または作成されたスナップショット）に対して同じ更新番号を割り当てるようにする。なお、両方の正ストレージ装置１０００Ｌ，１０００Ｒの連係は、ローカル側の正系の正ストレージ装置１０００Ｌが副系の正ストレージ装置１０００Ｒに指示を出すことで行うことも考えられるが、これ以外にもホスト１１００Ｐ上の常駐ソフトウェアが定期的に両方の正ストレージ装置１０００Ｌ，１０００Ｒに指示を出すことで連係してもよい。

（Ｂ）フェイルオーバー処理では、リストア済みのジャーナルデータ更新番号の代わりにグループ（または論理スナップショット（退避用））の更新番号を比較することで、どちらの副ストレージ装置２５５０Ｌ，２５５０Ｒが最新データを持っているか判別する。

＜１１．フェイルオーバー処理のバリエーション＞
＜１１．１．ホストからのライトリクエストにクロックが付随する場合＞
ホスト１１００Ｐがメインフレームの場合、Ｉ／Ｏプロトコルの規定としてライトリクエストにホストが割り当てた時刻を付随させることができ、この時刻を用いればライトリクエスト同士の順序関係が判る。したがって、以下の変更・追加を行うことで、当該ライト付随時刻を元にしたフェイルオーバー処理を実現することができる。
（Ａ）ＪＮＬ作成処理は、ジャーナルデータを作成する時にライト付随時刻を更新情報に含め、副ストレージ装置２５５０Ｌ，２５５０Ｒへ転送する。
（Ｂ）リストア処理はリストアが完了したジャーナルデータの最新のライト付随時刻を保持するようにする。
（Ｃ）フェイルオーバー処理は、ジャーナルデータの更新番号の代わりにライト付随時刻を用いて最新データを特定する。

＜１１．２．アプリケーションの書き込みデータによる比較＞
通常の同期リモートコピーではリモートライトリクエストに更新時刻を付随させる必要が無いため、これまで説明してきた方式はその部分の拡張が必要となる。本節では、この拡張を不要とする方式について説明する。

ホスト１１００Ｐで動作しているアプリケーション２０１０（図３８）がデータベースの場合、データベースが作成してボリュームに書き込むログにはデータベースが割り当てたトランザクション順序番号が割り当てられている。また、データベースを再起動する場合、データベースはトランザクションのアトミック性を確保するためにログを読み込むため、データベースの利用者は現時点のコミット済みの最新トランザクション順序番号が判る。

当然ながら、トランザクション順序番号もログも通常のライトリクエストでボリュームに書き込まれるため、非同期リモートコピーの対象になる。したがって、フェイルオーバー処理プログラム４１１００（又は管理者）が以下の手順を行えばどちらの副ストレージ装置２５５０Ｌ，２５５０Ｒが最新データを持つかわかる。

（Ｓｔｅｐ１）フェイルオーバー処理プログラム４１１００は、ホスト１１００Ｂのデータベースに対して片方の副ストレージ装置２５５０Ｌ，２５５０Ｒのボリュームを用いて再起動するように指示する。指示を受けたデータベースは再起動を行い、管理者またはフェイルオーバー処理プログラム４１１００に対して最新トランザクション順序番号を返す。なお、その後データベースは一度終了させてもよい。

（Ｓｔｅｐ２）フェイルオーバー処理プログラム４１１００は、ホスト１１００Ｂのデータベースに対してもう一方の副ストレージ装置２５５０Ｌ，２５５０Ｒのボリュームを用いて再起動するように指示する。指示を受けたデータベースはＳｔｅｐ１と同様に再起動を行い、管理者またはフェイルオーバー処理プログラム４１１００に対して最新トランザクション順序番号を返す。

（Ｓｔｅｐ３）フェイルオーバー処理プログラム４１１００は、Ｓｔｅｐ１とＳｔｅｐ２で得た最新トランザクション順序番号を比較し、新しい値を返すことが出来たときにデータベースが用いていた副ストレージ装置２５５０Ｌ，２５５０Ｒが最新データを持っていると判断する。

以上である。なお、本方法はデータベースに限った方法ではなく、Ｉ／Ｏパスマネージャー５０００（図５）やファイルシステム５０２０（図５）がボリュームの特定領域に対して更新順序付のログを生成するのであればこのログを用いて比較を行っても良い。なお、本節で説明した方式は同期リモートコピーに対する拡張を不要とするもののアプリケーションの種類に依存するため、これまで説明してきたベストモードを否定するものではなく、また本方式がこれまで説明してきた方式によってベストモードを否定されるものでもない。

＜１２．サイト間が同期リモートコピーの場合＞
なお、これまでの説明では正ストレージ装置１０００Ｌ，１０００Ｒと副ストレージ装置２５５０Ｌ，２５５０Ｒとの間は非同期リモートコピーによってデータコピーが行ってきたが、同期リモートコピーで代替してもよい。なお、サイト間が同期リモートコピーの場合は、４台全てのストレージ装置（正ストレージ装置１０００Ｌ，１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒ）に対してデータコピーまたはライトが完了した時点でホスト１１００Ｐにライト完了が返る。しかし、ネットワーク障害のパターンによってはサイト間の同期リモートコピーの片側だけが障害Ｓｕｓｐｅｎｄ状態になることがあるため、同様なフェイルオーバー処理（必要な場合はローカル側の正系ストレージ装置１０００Ｌによる更新情報の割り当て）が必要となる。

（１８）第１８の実施の形態
第１７の実施の形態では、既存の非同期リモートコピーの処理を多く流用するために、ローカルサイト３８０００Ｐのホスト１１００Ｐがライトしたデータは正系の正ストレージ装置１０００Ｌ及び副系の正ストレージ装置１０００Ｒの両方から副サイト３８０００Ｂへ転送されることとなり、サイト間のネットワーク利用効率が悪かった。本実施の形態では、非同期リモートコピーの拡張を行うことで、利用効率を改善する方法について記す。

＜１．本実施形態の概要＞
図５２〜図５４は、本実施の形態における発明の概要図である。なお、本実施の形態で用いるハードウェア構成は、第１７の実施の形態等と同様である。また、ホスト１１００Ｐ，１１００Ｂ及び各ストレージ装置（正ストレージ装置１０００Ｌ，１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒ）上で動作するプログラムについても第１７の実施の形態と同様な構成となる。しかし、個々のプログラムは一部処理内容が異なるものがあるため、該当するプログラムについては後ほど説明を行う。

＜１．１．通常状態＞
図５２は、本実施の形態による情報システムでの通常状態を示す。本実施の形態では、第１７の実施の形態と同様に、ホスト１１００Ｐ上のＩ／Ｏパスマネージャー５０００（図５）によってローカル側の正系ストレージ装置１０００Ｌへ送信されたライトデータが、正系及び副系のストレージ装置１０００Ｌ，１０００Ｒによってジャーナルデータ化される。しかし、ローカル側の正系ストレージ装置１０００Ｌはリモート側の正系ストレージ装置２５５０Ｌへジャーナルデータを転送するが、ローカル側の副系ストレージ装置１０００Ｒ及びリモート側の副系ストレージ装置２５５０Ｒ間では通常時、ジャーナル転送を行わない。その代わりとして、リモート側の正系ストレージ装置２５５０Ｌにライトされたデータがリモートコピーによってリモート側の副系ストレージ装置２５５０Ｒにコピーされる。

なお、サイト間のジャーナルデータの転送は、第１７の実施の形態と同じくジャーナルリードリクエストによる方式が第一に考えられるが、これ以外の非同期ＲＣ方式を採用してもよい。こうしたジャーナルデータの転送先決定のためや、不正アクセスや誤動作回避のため、各正ストレージ装置１０００Ｌ，１０００Ｒ及び各副ストレージ装置２５５０Ｌ，２５５０Ｒは、正副情報４１３４０Ｐ，４１３４０Ｂに登録されたストレージ装置の情報を用いる。ローカル側の正系ストレージ装置１０００Ｌが有するジャーナルデータの開放はジャーナルリードリクエストに付随するリストア済ジャーナルデータの更新番号を元に行われる。さらに、ローカル側の副系ストレージ装置１０００Ｒが有するジャーナルデータの開放は、副系ストレージ装置１０００Ｒで起動される非同期リモートコピープログラム４１０５０Ｐの一部分である副系ジャーナル開放処理（図示せず）によって行われる。

また、リモート側の副ストレージ装置２５５０Ｌ，２５５０Ｒ間のデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８間のリモートコピー（矢印５２０１０）は、同期リモートコピーであっても、非同期リモートコピー（サイト間の非同期リモートコピーで用いた更新番号と同じ番号をリモート側のストレージ装置２５５０Ｌ，２５５０Ｒ同士の非同期リモートコピーのジャーナルデータに割り当てても良い）であってもよい。また、これ以外にも差分リモートコピーと呼ばれる非同期リモートコピーの一方式を採用してもよい。

差分リモートコピーは、コピー元ボリュームに対するライトリクエストの位置を差分ビットマップで記録し、定期的に動作するデータ転送処理プログラム（図示せず）が更新位置を見つけたら、コピー元ボリューム上のその位置のデータをコピー先ボリュームにコピーする方式である。他の非同期リモートコピーと異なり、同期リモートコピーの初期化コピーや再同期コピーが常に動作している形態と類似するため、処理が簡単で必要となる制御情報が少ないが、コピー元ボリュームを有するストレージ装置が障害停止したときのコピー先ボリュームのライト順序は守られない。

＜１．２．正サイト障害後の状態＞
図５４は、図５２で示した通常状態にてローカルサイト障害が発生した後の状態を示した概要図である。リモート側の正系ストレージ装置２５５０Ｌは、ホスト１１００Ｂのフェイルオーバー処理プログラム４１１００からの処理依頼を契機として、リストア処理を停止させ、差分リモートコピーでコピーすべき更新位置のデータを全てコピーさせて、リモート側の両副ストレージ装置２５５０Ｌ，２５５０Ｒのデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８の内容を同一に確定させた後にコピー方式を同期リモートコピーに切り替える。その後は他の実施の形態と同様に高可用構成を維持した状態でアプリケーション処理を再開する。なお、ホスト１１００Ｂからのライトデータはサイト間非同期リモートコピーの差分ビットマップによって更新位置を記録してもよい。さらに、ローカルサイト３８０００Ｐの正ストレージ装置１０００Ｌ，１０００Ｒが利用可能に戻った場合（又はフェイルオーバーの理由が計画フェイルオーバーで正ストレージ装置１０００Ｌ，１０００Ｒは元々動作可能な状態の場合）は、リモートサイト３８０００Ｂからローカルサイト３８０００Ｐへの非同期リモートコピーを将来行うために、ＪＮＬ作成処理を動作させることでジャーナルデータを作成してもよい。

＜１．３．ローカル側の正系ストレージ装置障害後の状態＞
図５３は、ローカル側の正系ストレージ装置１０００Ｌが障害停止した後の状態を示した概要図である。ホスト１１００ＰのＩ／Ｏパスマネージャー５０００（図５）は、当該障害を検知し、Ｉ／Ｏリクエストの送信先を副系ストレージ装置１０００Ｒへ切り替える。そして、この切り替えに伴って、ローカル側の副系ストレージ装置１０００Ｒは新たに正系ストレージ装置となり、正副情報４１３４０Ｐ（図４１）が更新される。

さらに、新たにローカル側の正系となったストレージ装置１０００Ｒは、ジャーナルデータの転送先となっているリモート側の正系ストレージ装置２５５０Ｌへ正系と副系が変わったことを通知し、さらにリモート側の正系ストレージ装置２５５０Ｌが転送を希望するジャーナルデータの更新番号を取得する。通常状態の時点で新たにローカル側の正系となったストレージ装置１０００Ｒはジャーナルデータを作成しているため、取得した更新番号からジャーナルデータの転送を行うことで非同期リモートコピーを継続することができる。そのため、ローカル側の正系ストレージ装置Ｌの障害に伴って正副系を切り替えても、リモート側のストレージ装置２５５０Ｌのデータボリューム３８３１０Ｄ５，３８３１０Ｄ６のライト順序を守ることができる。

＜２．情報システムの初期化＞
本実施の形態における情報システムのリモートコピーの初期化は以下の順序で行われる。なお各正ストレージ装置１０００Ｌ，１０００Ｒ及び各副ストレージ装置２５５０Ｌ，２５５０Ｒに与えられる指示の引数や経路などは第１７の実施の形態と同じである。
（Ｓｔｅｐ１）ローカル側の正系ストレージ装置１０００Ｌのデータボリューム３８３１０Ｄ１，３８３１０Ｄ２から副系ストレージ装置１０００Ｒのデータボリューム３８３１０Ｄ３，３８３１０Ｄ４への同期リモートコピーを行うようにし、初期化コピーが終わるまで待つ。同期リモートコピーの設定については第１７の実施の形態と同様である。

（Ｓｔｅｐ２）ローカル側の正系ストレージ装置１０００Ｌのデータボリューム３８３１０Ｄ１，３８３１０Ｄ２から、リモート側の正系ストレージ装置２５５０Ｌのデータボリューム３８３１０Ｄ５，３８３１０Ｄ６への非同期リモートコピーを行うようにし、初期化コピーが終わるまで待つ。なお、ローカル側の副系ストレージ装置１０００Ｒは、ローカル側の正系ストレージ装置１０００Ｌがジャーナルデータを作成し始めたら、ジャーナルデータを作成する。
（Ｓｔｅｐ３）リモート側の正系ストレージ装置２５５０Ｌから副系ストレージ装置２５５０Ｒへリモートコピーを行うようにし、初期化コピーが終わるまで待つ。
（Ｓｔｅｐ４）各正ストレージ装置１０００Ｌ，１０００Ｒ及び各副ストレージ装置２５５０Ｌ，２５５０Ｒが持つ正副情報４１３４０Ｐ，４１３４０Ｂの装置番号とジャーナルグループ番号を更新する。

以上が初期化の手順である。なお、第１〜第１７の実施の形態と同様に、リモートコピーの設定はホスト１１００Ｐが指定することも考えられ、上記ステップ間の遷移やリモートコピーの設定はホスト１１００Ｐ上のプログラムが行うことが考えられる。

＜３．Ｉ／Ｏパスマネージャーの処理＞
本実施の形態ではサイト間の非同期リモートコピーを切り替えるための契機が必要となる。本章ではそのために必要となる拡張について説明する。

図５５及び図５６は、第１の実施の形態の図１０及び図１１についてそれぞれ上述したリードリクエスト処理及びライトリクエスト処理の切り替え処理について必要な拡張の説明に供するフローチャートである。拡張については以下の処理を、副系利用可能の判断とリモートコピーの反転の間に挿入することで実現される。なお、図５５のＳ５５００２，Ｓ５５００５〜Ｓ５５００８における処理は、図１０のＳ１００１１，Ｓ１００１２〜Ｓ１００１５における処理と同じであり、図５６のＳ５６００２，Ｓ５６００５〜Ｓ５６００８における処理は、図１１のＳ１１０１１，Ｓ１１０１２〜Ｓ１１０１５における処理と同じであるため、その説明は省略する。

（正副情報の更新：図５５のＳ５５００３及び図５６のＳ５６００３が該当）Ｉ／Ｏパスマネージャー５０００（図５）は、ローカル側の副系ストレージ装置１０００Ｒに対して、正副情報４１３４０Ｐ（図４１）を更新させる指示を発行する。指示を受信したローカル側の副系ストレージ装置１０００Ｒは正副情報４１３４０Ｐが示すローカル側の両正ストレージ装置１０００Ｌ，１０００Ｒの正系と副系の関係を入れ替えて、自らが正系ストレージ装置であることを示す情報に更新する。

なお、ローカル側の旧正系ストレージ装置１０００Ｌとリモート側の両副ストレージ装置２５５０Ｌ，２５５０Ｒに対しても、ローカル側の両正ストレージ装置１０００Ｌ，１０００Ｒの正系と副系の関係が入れ替わったことを伝える必要がある。その方法としては、ホスト１１００Ｐが直接各正ストレージ装置１０００Ｌ，１０００Ｒ及び各副ストレージ装置２５５０Ｌ，２５５０Ｒと通信することも考えられるが、ローカル側の副系ストレージ装置１０００Ｒが代表してホスト１１００Ｐから指示を受け、当該副系ストレージ装置１０００Ｒが残りのストレージ装置（正系ストレージ装置１０００Ｒ及び各副ストレージ装置２５５０Ｌ，２５５０Ｒ）へ指示を分配してもよい。この方法では、さらに、ホスト１１００Ｐから指示を受け取ったローカル側の副系ストレージ装置１０００Ｒがリモート側の正系ストレージ装置２５５０Ｌに指示を分配し、当該リモート側の正系ストレージ装置２５５０Ｌがさらにリモート側の副系ストレージ装置２５５０Ｒに指示を分配してもよい。また、ローカル側の旧正系ストレージ装置１０００Ｌに対する指示方法として、同期リモートコピーの反転指示と共に送っても良い。

（非同期リモートコピーの切り替え：図５５のＳ５５００３及び図５６のＳ５６００３が該当）Ｉ／Ｏパスマネージャー５０００（図５）は、ローカル側の副系ストレージ装置１０００Ｒに対して非同期リモートコピーのコピー元のストレージ装置となるように切替え指示（以下、これを非同期リモートコピー切替え指示と呼ぶ）を出す。ローカル側の副系ストレージ装置１０００Ｒは当該非同期リモートコピー切替え指示を受信したら、非同期リモートコピープログラム４１０５０Ｐの切替え処理プログラム（図示せず）を呼び出すことで、自らが非同期リモートコピーのコピー元ストレージとなる。なお、非同期リモートコピー切替え指示に、リモート側の正系ストレージ装置２５５０Ｌの識別番号及びジャーナルグループ番号と、ローカル側の副系ストレージ装置１０００Ｒのジャーナルグループ番号とを付随させてもよく、さらには、ペアを構成する上記ローカル側のジャーナルグループ３８３００Ｇ１，３８３００Ｇ２に属するデータボリューム３８３１０Ｄ１〜３８３１０Ｄ４の識別情報と上記リモート側のジャーナルグループ３８３００Ｇ３，３８３００Ｇ４に属するデータボリューム３８３１０Ｄ５〜３８３１０Ｄ８の識別情報の組を付随させてもよい。

以上である。なお、上述した正副情報４１３４０Ｐ，４１３４０Ｂ（図４１）の更新と非同期リモートコピー切替え指示は、図３９（ローカル側の副系ストレージ装置１０００Ｒに対してライトリクエストを受信したことを契機とする切り替え処理）の同期リモートコピー反転処理の前に挿入してもよい。

＜４．非同期リモートコピー＞
＜４．１．切り替え処理＞
非同期リモートコピープログラム４１０５０Ｐ，４１０５０Ｂの切替え処理はホスト１１００Ｐからの指示を契機として、コピー元となるストレージ装置１０００Ｌ，１０００Ｒを切り替える処理である。以下に本切替え処理に関係する各正ストレージ装置１０００Ｌ，１０００Ｒ及び各副ストレージ装置２５５０Ｌ，２５５０Ｒでの処理について説明する。なお、本処理が実行される正ストレージ装置１０００Ｌ，１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒの正系及び副系という形容詞については本処理とともに実行される正副情報４１３４０Ｐ，４１３４０Ｂの更新で変わる場合がある。したがって、本節で「旧」を伴って正系及び副系と呼ぶ場合のストレージ装置（正ストレージ装置１０００Ｌ，１０００Ｒ及び副ストレージ装置２５５０Ｌ，２５５０Ｒ）は、ホスト１１００Ｐの切替え処理によって正副情報４１３４０Ｐ，４１３４０Ｂの更新及び、本処理が実行される前の関係であるものとする。

＜４．１．１．ローカル側の旧副系ストレージ装置での処理＞
図５７は、ホスト１１００Ｐから切替え指示を受信するローカル側の旧副系ストレージ装置１０００Ｒにおいて行われる切替え処理の処理内容を表すフローチャートである。以下、このフローチャートに従って説明する。
（Ｓ５７００１）ローカル側の旧副系ストレージ装置１０００Ｒは、ホスト１１００Ｐから送信された非同期リモートコピー切り替え指示を受信する。
（Ｓ５７００２）ローカル側の旧副系ストレージ装置１０００Ｒは、受信した指示の引数を確認する。
（Ｓ５７００３）ローカル側の旧副系ストレージ装置１０００Ｒは、副系ジャーナル開放処理を停止する。

（Ｓ５７００４）ローカル側の旧副系ストレージ装置１０００Ｒは、リモート側の正系ストレージ装置２５５０ＬにＳ５７００１で受信した指示を送信し、その帰り値として相手ストレージ装置（すなわちリモート側の正系ストレージ装置２５５０Ｌ）のジャーナルグループ３８３００Ｇ３に転送が必要なジャーナルデータの更新番号が返されるのを待つ。なお、要求したジャーナルグループ３８３００Ｇ３が存在しなかった場合や、ジャーナルボリューム３８３００Ｊ３に属するコピー先データボリューム３８３１０Ｄ５，３８３１０Ｄ６がＤｕｐｌｅｘ−Ｐｅｎｄｉｎｇ状態だった場合は更新番号の変わりにエラー値が得られるため、本処理はその場合はホスト１１００Ｐに異常終了を返して終了する。

（Ｓ５７００５）ローカル側の旧副系ストレージ装置１０００Ｒは、ジャーナルグループ情報４１３３０Ｐにおける相手ストレージ装置番号とジャーナルグループ番号とを、リモート側の正系ストレージ装置２５５０Ｌの装置番号と、当該正系ストレージ装置２５５０Ｌのジャーナルグループ３８３００Ｇ３のジャーナルグループ番号とに更新する。この更新によって、コピー先以外のストレージ装置からの不正なジャーナルリードリクエストを拒否することができる。

（Ｓ５７００６）ローカル側の旧副系ストレージ装置１０００Ｒは、コピーペア情報４１３００Ｐに作成する非同期リモートコピーのペアを登録・更新する。
（Ｓ４５００７）ローカル側の旧副系ストレージ装置１０００Ｒは、ＪＮＬＲＤ受信処理プログラム３８１２０を起動し、ジャーナルリードリクエストに正常応答できるようにする。

＜４．１．２．リモート側の正系ストレージ装置＞
図５８は、リモート側の正系ストレージ装置２５５０Ｌにおいて行なわれる切替え処理の処理内容を表すフローチャートである。以下、このフローチャートに従って説明する。

（Ｓ５８００１）リモート側の正系ストレージ装置２５５０Ｌは、ローカル側の旧副系ストレージ装置１０００ＲがＳ５７００４で送信した非同期リモートコピー切替え指示を受信する。
（Ｓ５８００２）リモート側の正系ストレージ装置２５５０Ｌは、当該切替え指示がローカル側の旧副系ストレージ装置１０００Ｒからのものか確認する。なお、送信元がローカル側の旧副系ストレージ装置Ｒ以外の場合は、本処理は終了する。

（Ｓ５８００３）リモート側の正系ストレージ装置２５５０Ｌは、要求されたジャーナルグループ３８３００Ｇ３とデータボリューム３８３１０Ｄ５，３８３１０Ｄ６の存在を確認する。なお、もしその存在が確認できない場合はエラー値を返して、本処理は終了する。
（Ｓ５８００４）リモート側の正系ストレージ装置２５５０Ｌは、リストア済のジャーナルデータの更新番号をローカル側の旧副系ストレージ装置１０００Ｒへ返す。
（Ｓ５８００５）リモート側の正系ストレージ装置２５５０Ｌは、コピーペア情報４１３００に作成する非同期リモートコピーのペアを登録・更新する。

（Ｓ５８００６）リモート側の正系ストレージ装置２５５０Ｌは、ジャーナルグループ情報４１３３０Ｐにおける相手ストレージ装置番号とジャーナルグループ番号とを、ローカル側の旧副系ストレージ装置１０００Ｒの装置番号と、当該旧副系ストレージ装置１０００Ｒのジャーナルグループ３８３００Ｇ３のグループ番号とに更新する。これによってＪＮＬＲＤ処理プログラム４１０８０は、ジャーナルリードリクエストの送信先をローカル側の旧副系ストレージ装置１０００Ｒへ切り替えることができる。

＜４．１．３．ローカル側の旧正系ストレージ装置＞
図５９はローカル側の旧正系ストレージ装置１０００Ｌにおいて行なわれる切替え処理の処理内容を表すフローチャートである。以下、このフローチャートに従って説明する。

（Ｓ５９００１）ローカル側の旧正系ストレージ装置１０００Ｌは、ローカル側の旧副系ストレージ装置１０００Ｒが正系となったことを検知する。なお、検知する方法としては以下が考えられるがこれ以外の方法で検知してもよい。
（方法１）ローカル側の旧副系ストレージ装置１０００Ｒから正副情報４１３４０Ｐの更新指示を受信した。
（方法２）ローカル側の旧副系ストレージ装置１０００Ｒへ送信したリモートライトの帰り値で検知する。

（Ｓ５９００２）ローカル側の旧正系ストレージ装置１０００Ｌは、ＪＮＬＲＤ受信処理プログラム３８１２０を停止する。
（Ｓ５９００３）ローカル側の旧正系ストレージ装置１０００Ｌは、副系ジャーナル開放処理を起動する。

＜４．２．ジャーナル作成処理＞
本実施の形態でも第１〜第１７の実施の形態と同様に、ローカル側の正系ストレージ装置１０００Ｌは自身が生成した更新番号をつけたジャーナルデータを作成し、副系ストレージ装置１０００Ｒはリモートライトに含まれる更新情報と更新時刻を元にジャーナルデータを作成する。

＜４．３．ＪＮＬＲＤ処理＞
本実施の形態でも図５０について上述した処理を用いる。

＜４．４．ＪＮＬＲＤ受信処理＞
本実施の形態では図４８にて示されるフローチャートに従った処理の開始直後に、まずはジャーナルリードリクエストの送信元が正副情報４１３４０Ｐ又はジャーナルグループ情報４１３３０Ｐに登録されたリモート側の正系ストレージ装置２５５０Ｌであることを確認するように拡張する。このような確認処理を追加する理由は以下の通りである。

（理由１）不正アクセスによって、データ流出を防ぐため
（理由２）不正アクセスであっても、ジャーナルリードリクエストが処理されてしまうと、次に転送すべきジャーナルを指すジャーナルグループ情報４１３３０Ｐの更新情報転送開始アドレスが進んでしまい、ジャーナルデータ転送に不整合が生じるため。

＜４．５．副系ジャーナル開放処理＞
図６０に、副系ジャーナル開放処理の処理内容を表すフローチャートを示す。以下、このフローチャートに従って説明を行う。
（Ｓ６０００１）副系ジャーナル開放処理は、ローカル側の正系ストレージ装置１０００Ｌの関連するジャーナルグループ情報４１３３０Ｐのリストア済み最新更新番号を取得する。
（Ｓ６０００２）副系ジャーナル開放処理は、受信した更新番号までジャーナルデータを開放する。具体的な開放の方法はＪＮＬＲＤ受信処理で述べた方法と同様である。

＜５．フェイルオーバー処理＞
第１７の実施の形態と本実施の形態とでは、リモート側の副系ストレージ装置２５５０Ｒへのコピー経路が異なるため、図４５とは異なる処理でフェイルオーバーを行う。図６１に、本実施の形態におけるフェイルオーバー処理プログラム４１１００に基づくフェイルオーバー処理の処理内容を表すフローチャートを示す。

（Ｓ６１００１）まず、副ホスト１１００Ｂのフェイルオーバー処理プログラム４１１００（図５３）は、機能Ｉ／Ｆ等を介して、副ストレージ装置２５５０Ｌ，２５５０ＲのＪＮＬＲＤ処理プログラム４１０８０の停止を指示する。当該指示を受けた副ストレージ装置２５５０Ｌ，２５５０Ｒは、ＪＮＬＲＤ処理を停止する。なお、非同期リモートコピーの機能によってＪＮＬＲＤ処理プログラム４１０８０が自動的に停止している場合には本ステップを省略することができる。

（Ｓ６１００２）次に、フェイルオーバー処理プログラム４１１００は、リモート側の正系ストレージ装置２５５０Ｌがリストア処理プログラム３８１３０に基づくリストア処理を完了したことを認識する。たとえば、副ホスト１１００Ｂは、機能Ｉ／Ｆを介して副ストレージ装置２５５０Ｌに対して、リストア処理が完了した時点で完了通知を返すように指示を出し、完了通知を待ち受ける方法が考えられる。

（Ｓ６１００３）次にフェイルオーバー処理プログラム４１１００は、リモート側の副系ストレージ装置２５５０Ｒのデータボリューム３８３１０Ｄ７，３８３１０Ｄ８のデータを、正系ストレージ装置２５５０Ｌのデータと同一にする。同一にする方法は、当該副ストレージ装置２５５０Ｌ，２５５０Ｒ間に設定されたリモートコピーの方式によって以下の通り異なる。

（同期リモートコピーの場合）通常状態から、リストアされたジャーナルデータに含まれるライトデータが副系ストレージ装置２５５０Ｒにもコピーされているため、特別な処理は不要である。
（非同期リモートコピーの場合）正系ストレージ装置２５５０Ｌのジャーナルボリューム３８３２０Ｊ３に開放されていないジャーナルデータが存在するまで待つことで実現される。
（差分リモートコピーの場合）正系ストレージ装置２５５０Ｌの差分ビットマップがすべてクリアされることで実現される。

（Ｓ６１００４）次に、フェイルオーバー処理プログラム４１１００は、機能Ｉ／Ｆ等を使用して、上記選択した副ストレージ装置２５５０Ｌのジャーナルグループ３８３００Ｇ３に存在するデータボリューム３８３１０Ｄ５，３８３１０Ｄ６を正として同期リモートコピーのペアを作成する。なお、本ステップは通常状態から既に同期リモートコピーが設定されている場合は、省略することができる。また、その他のリモートコピーの形態でも正系と副系のストレージ装置２５５０Ｌ，２５５０Ｒのデータの内容が同一であるため、同期リモートコピーのための初期化コピーや再同期コピーを省略することができる。

（Ｓ６１００５）次に、フェイルオーバー処理プログラム４１１００は、副ホスト１１００Ｂで動作するアプリケーションに対して、リモート側の正系ストレージ装置２５５０Ｌのデータボリューム３８３１０Ｄ５，３８３１０Ｄ６へアクセス開始を指示する。なお、これ以後の処理は第１の実施の形態を初めとした他の実施の形態（第１〜第１７の実施の形態）と同様である。

＜６．非同期リモートコピーのバリエーション＞
第１７の実施の形態にて説明したように非同期リモートコピーの方式にはそれぞれバリエーションが存在する。

＜６．１．正ストレージ主導によるジャーナルデータ転送方式＞
ジャーナルリードリクエスト方式ではリモート側の副ストレージ装置２５５０Ｌ，２５５０Ｒが主導でジャーナルデータ転送を行ってきたが、本方式はローカル側の正ストレージ装置１０００Ｌ，１０００Ｒが主導でジャーナル転送を行う。この場合、以下の状況が同時に発生してしまうと、ローカル側の正系と副系の両方の正ストレージ装置１０００Ｌ，１０００Ｒがリモート側の正系ストレージ装置２５５０Ｌにジャーナルデータを送信してしまい、不整合を起こしかねない。

（状況１）ローカル側の正系ストレージ装置１０００Ｌとホスト１１００Ｐ及び副系ストレージ装置１０００Ｒとの間のネットワークが不通な状態だが、ローカル側の正系ストレージ装置１０００Ｌからリモート側の正系ストレージ装置２５５０Ｌへのネットワークは通信可能。
（状況２）状況１の状態でホスト１１００Ｐがローカル側の正系ストレージ装置１０００Ｌにライトリクエストを送信する等によってリクエスト発行先がローカル側の副系ストレージ装置１０００Ｒに切り替えられた（すなわち、副系が正系になった）。

（状況３）状況２では本来正系の正ストレージ装置１０００Ｌへ副系となるように指示が出されるが、通信不能な状態のため、正系の正ストレージ装置１０００Ｌは副系に変わらず、結果として２台とも正系となる。

そのため、リモート側の正系ストレージ装置２５５０Ｌがジャーナルデータを受信する際は送信元を確認し、非同期リモートコピー切替え指示等でローカル側の正系と指定された正ストレージ装置１０００Ｒからのジャーナルデータだけ受け付けるようにする。

＜６．２．ライトデータのグループ化方式＞
第１７の実施の形態で述べたとおり、グループ化したライトデータを一つのジャーナルデータとして扱い、本実施の形態にて開示した処理を行う。

＜６．３．スナップショット方式＞
第１７の実施の形態で述べたとおり、ローカル側の両正ストレージ装置１０００Ｌ，１０００Ｒで同じタイミングで作成したスナップショットには同じ世代番号をつける。なお、本方式では、リモート側の副ストレージ装置２５５０Ｌ，２５５０Ｒに退避用のスナップショットを作成する必要があるが、その作成先として正系ストレージ装置２５５０Ｌにスナップショットを作成する方法がある。この方法の場合、副ホスト１１００Ｂのフェイルオーバー処理プログラム４１１００によって退避用スナップショットのデータをコピー先のデータボリュームに書き戻し（差分のみでよい）、その後に正系ストレージ装置２５５０Ｌと副系ストレージ装置２５５０Ｒとのデータの内容を一致させる。

なお、これ以外にも副系ストレージ装置２５５０Ｒに退避用スナップショットを作成してもよい。

＜７．副サイトの正系ストレージ装置障害対策＞
本実施の形態の個々まで説明した方式では、リモート側の正系ストレージ装置２５５０Ｌが障害停止した場合にリモート側の副系ストレージ装置２５５０Ｒによって非同期リモートコピーを引き継ぐことはできない場合がある。なぜならば、リモート側の正系ストレージ装置２５５０Ｌだけがリモート側の正系と副系のストレージ装置２５５０Ｌ，２５５０Ｒ間のデータ差分位置を把握しているからである。したがって、リモート側の副系ストレージ装置２５５０Ｒが非同期リモートコピーを引き継ぐためには、ローカル側の正系ストレージ装置１０００Ｌがリモート側の副系ストレージ装置２５５０Ｒにどの更新番号のジャーナルデータまで届いているか把握し、届いたジャーナルデータ以前のものだけ開放するようにすればよい。以下にリモート側の両副ストレージ装置２５５０Ｌ，２５５０Ｒ間のリモートコピー方式に合わせた二つの実現方法について説明する。

＜７．１．差分リモートコピー方式＞
＜７．１．１．通常運用時＞
定期的に以下の処理を繰り返す。
（Ｓｔｅｐ１）リモート側の正系ストレージ装置２５５０Ｌはリストア処理を停止する。
（Ｓｔｅｐ２）リモート側の正系ストレージ装置２５５０Ｌは副系ストレージ装置２５５０Ｒのデータと同一になるまで待つ。

（Ｓｔｅｐ３）リモート側の正系ストレージ装置２５５０Ｌは、ローカル側の正系ストレージ装置１０００Ｌに返すリストア済み更新番号の値としてＳｔｅｐ１で停止した時に最後にリストアしたジャーナルデータの更新番号を記憶する。
（Ｓｔｅｐ４）リモート側の正系ストレージ装置２５５０Ｌはリストア処理を再開し、一定時間待つ。

なお、Ｓｔｅｐ３で記憶した更新番号はジャーナルリードリクエストによってローカル側の正系ストレージ装置１０００Ｌに伝えられ、それ以前のジャーナルデータが開放される。

＜７．１．２．リモート側正系ストレージ装置障害時＞
リモート側の正系ストレージ装置２５５０Ｌの障害を検知したら、ローカル側の正系ストレージ装置１０００Ｌはジャーナルデータを差分ビットマップ化することでライト位置を記録する。そしてローカル側の正系ストレージ装置１０００Ｌとリモート側で新たに正系となった旧副系ストレージ装置２５５０Ｒは、非同期リモートコピーの再同期処理をその差分ビットマップで行う。

＜７．２．非同期リモートコピー方式＞
＜７．２．１．通常運用時＞
定期的に以下の処理を繰り返す。
（Ｓｔｅｐ１）リモート側の正系ストレージ装置２５５０Ｌは、コピー先のデータボリューム３８３００Ｇ３にジャーナルデータをリストアする。
（Ｓｔｅｐ２）リモート側の正系ストレージ装置２５５０Ｌは、当該ジャーナルデータを非同期リモートコピーでリモート側の副系ストレージ装置２５５０Ｒへ転送する。
（Ｓｔｅｐ３）リモート側の副系ストレージ装置２５５０Ｒは、データボリューム３８３１０Ｄ７，３８３１０Ｄ８にリストアし、リストア済みジャーナルデータの更新番号をリモート側の正系ストレージ装置２５５０Ｌへ送信する。

（Ｓｔｅｐ４）リモート側の正系ストレージ装置２５５０Ｌは、Ｓｔｅｐ３で受け取った更新番号を元に、ジャーナルデータを開放する。また、ローカル側の正系ストレージ装置１０００Ｌに当該更新番号を送信する。
（Ｓｔｅｐ５）ローカル側の正系ストレージ装置１０００Ｌは、Ｓｔｅｐ４の更新番号を受信し、ジャーナルデータの開放に用いる。

＜７．２．２．リモート側正系ストレージ装置障害時＞
リモート側の正系ストレージ装置２５５０Ｒの障害発生後は、ローカル側の正系ストレージ装置１０００Ｌは、リモート側の副系ストレージ装置２５５０Ｒにリストア済みジャーナルデータの更新番号を問い合わせ、そのジャーナルから転送できるようにする。一方のリモート側の副系ストレージ装置２５５０Ｒは、ジャーナルデータの送信元をリモート側の正系ストレージ装置２５５０Ｌからローカル側の正系ストレージ装置１０００Ｌへ切り替え、ジャーナルデータを受け入れる。

＜８．バリエーション＞
以上、説明してきた方式では、ジャーナルデータの送信元が必ず正系ストレージ装置１０００Ｌであったが、副系ストレージ装置１０００Ｒが送信元になっても良い。

図１は、第１の実施の形態にかかる情報システムのハードウェア構成の一例を示すブロック図である。図２は、第１の実施の形態の概要を示す第１の概念図である。図３は、第１の実施の形態の概要を示す第２の概念図である。図４は、第１の実施の形態の概要を示す第３の概念図である。図５は、ホスト上のソフトウェア構成を表した概念図である。図６は、仮想化ストレージ装置及びストレージ装置上のソフトウェア構成を表したブロック図である。図７は、リモートコピーのペア状態とペア状態の遷移を表した概念図である。図８は、Ｉ／Ｏパスマネージャーが管理するデバイス関係テーブルを示す概念図である。図９は、Ｉ／Ｏパスマネージャーが初期化処理を行うときのフローを示したフローチャートである。図１０は、Ｉ／Ｏパスマネージャーがライト処理を行うときのフローを示したフローチャートである。図１１は、Ｉ／Ｏパスマネージャーがリード処理を行うときのフローを示したフローチャートである。図１２は、第２の実施の形態の概要を示す概念図である。図１３は、第３の実施の形態の概要を示す概念図である。図１４は、第４の実施の形態の概要を示す概念図である。図１５は、第５の実施の形態の概要を示す概念図である。図１６は、第６の実施の形態の概要を示す概念図である。図１７は、第７の実施の形態の概要を示す概念図である。図１８は、第８の実施の形態の概要を示す概念図である。図１９は、第９の実施の形態の概要を示す概念図である。図２０は、第１０の実施の形態の概要を示す概念図である。図２１は、第１１の実施の形態の概要を示す概念図である。図２２は、第１２の実施の形態の概要を示す概念図である。図２３は、第１３の実施の形態の概要を示す概念図である。図２４は、第１４の実施の形態の概要を示す概念図である。図２５は、Ｉ／Ｏパスマネージャーがライト処理を行うときの別なフローを示したフローチャートである。図２６は、Ｉ／Ｏパスマネージャーがリード処理を行うときの別なフローを示したフローチャートである。図２７は、Ｉ／Ｏパスマネージャーが図２５に記したライト処理を行うときに、ストレージ装置にて行うライトリクエストに応じたペア操作を示したフローチャートである。図２８は、第１５の実施の形態の概要を示す概念図である。図２９は、第１６の実施の形態の概要を示す概念図である。図３０は、第１６の実施の形態の概要を示す概念図である。図３１は、本実施の形態における仮想化ストレージ装置及びストレージ装置上のソフトウェア構成を表したブロック図である。図３２は、仮想化ストレージ装置がライト処理を行うときのフローを示したフローチャートである。図３３は、仮想化ストレージ装置がリード処理を行うときのフローを示したフローチャートである。図３４は、ＡＯＵ向けでステージング処理のフローを示したフローチャートである。図３５は、ＡＯＵアドレス変換情報の具体的内容の説明に供する概念図である。図３６は、ＡＯＵプール管理情報の具体的内容の説明に供する概念図である。図３７は、第１７の実施の形態にかかる情報システムのハードウェア構成の一例を示すブロック図である。図３８は、第１７の実施の形態の概要を示す第１の概念図である。図３９は、第１７の実施の形態の概要を示す第２の概念図である。図４０は、第１７の実施の形態の概要を示す第３の概念図である。図４１は、正ストレージ装置及び副ストレージ装置上のソフトウェア構成を表したブロック図である。図４２は、ジャーナルボリュームの構造の説明に供する概念図である。図４３は、第１７の実施の形態によるリモートコピーのペア状態とペア状態の遷移を表した概念図である。図４４は、第１７の実施の形態による初期化処理の流れを示すフローチャートである。図４５は、第１７の実施の形態によるフェイルオーバー処理の流れを示すフローチャートである。図４６は、更新情報の説明に供する概念図である。図４７は、ジャーナルグループ情報４１３３０Ｐの説明に供する概念図である。図４８は、ＪＮＬＲＤ受信処理の流れを示すフローチャートである。図４９は、ジャーナル作成処理の流れを示すフローチャートである。図５０は、ＪＮＬＲＤ処理の流れを示すフローチャートである。図５１は、リストア処理の流れを示すフローチャートである。図５２は、第１８の実施の形態の概要を示す第１の概念図である。図５３は、第１８の実施の形態の概要を示す第２の概念図である。図５４は、第１８の実施の形態の概要を示す第３の概念図である。図５５は、リモートコピー用のライト処理における切替え処理の流れを示すフローチャートである。図５６は、リモートコピー用のリード処理における切替え処理の流れを示すフローチャートである。図５７は、ローカル側の旧副系ストレージ装置において行われる切替え処理の流れを示すフローチャートである。図５８は、リモート側の正系ストレージ装置において行なわれる切替え処理の流れを示すフローチャートである。図５９は、ローカル側の旧正系ストレージ装置において行なわれる切替え処理の流れを示すフローチャートである。図６０は、副系ジャーナル開放処理の流れを示すフローチャートである。図６１は、第１８の実施の形態によるフェイルオーバー処理の流れを示すフローチャートである。

符号の説明

１０００，１０００Ｌ，１０００Ｒ……仮想化ストレージ装置（正ストレージ装置）、１０１０……コントローラー、１０１１，１１０１……プロセッサ、１０２０，１０２０Ｌ，１０２０Ｒ……キャッシュメモリ、１０３０……ＨＤＤ、１１００，１３０１０，１４０００……ホスト、１５００，１５００Ｌ，１５００Ｒ，１５０００，１５０００Ｌ，１５０００Ｒ……ストレージ装置，２５５０，２５５０Ｌ，２５５０Ｒ……副ストレージ装置、２８００Ｌ，２８００Ｒ……仮想化スイッチ、３５００ＬＢ，３５００ＲＢ，５０４０，５０５０……ボリューム、２０１０，１４００２……アプリケーションプログラム、５０００……Ｉ／Ｏパスマネージャー、５０１０……ＨＢＡデバイスドライバー、５０２０……ファイルシステム、１３００１，１３００２……ストレージサブシステム、１５００２Ａ，１５００２Ｂ……コマンドデバイス、１５０１０Ａ，１５０１０Ｂ……差分ビットマップ、１６０００……外部ストレージ装置、３８０００Ｐ……ローカルサイト、３８０００Ｂ……リモートサイト、３８１００Ｐ，３８１００Ｂ……Ｉ／Ｏ処理プログラム、３８１１０，３８１４０……ＪＮＬ作成処理プログラム、３８１２０……ＪＮＬＲＤ受信処理プログラム、３８１３０……リストア処理プログラム、３８３００Ｇ１〜３８３００Ｇ４……ジャーナルグループ、３８３１０Ｄ１〜３８３１０Ｄ８……データボリューム、４１０３０Ｐ、４１０３０Ｂ……初期化プログラム、４１０４０Ｐ、４１０４０Ｂ……同期リモートコピープログラム、４１０５０Ｐ，４１０５０Ｂ……非同期リモートコピープログラム、４１１００……フェイルオーバー処理プログラム、４１３００Ｐ，４１３００Ｂ……コピーペア情報、４１３２０Ｐ，４１３２０Ｂ……ボリューム情報、４１３３０Ｐ，４１３３０Ｂ……ジャーナルグループ情報、４１３４０Ｐ，４１３４０Ｂ……正副情報、５２１１０，５２１２０……差分リモートコピープログラム。

Claims

上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムであって、
前記第１のストレージ装置に接続され、第３のボリュームを有する第３のストレージ装置と、
前記第２のストレージ装置に接続され、第４のボリュームを有する第４のストレージ装置と
を備え、
前記第１及び第２のストレージ装置は、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行し、
前記第１及び第３のストレージ装置は、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行し、
前記第２及び第４のストレージ装置は、前記第２のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行する
ことを特徴とする情報システム。
前記第１のストレージ装置は、
前記第１のホストコンピューターから前記第１のボリュームに書き込まれたデータに固有の更新番号を付与すると共に、当該データを前記第２又は第３のボリュームにコピーする際には、対応する前記更新番号を前記第２又は第３のストレージ装置に通知し、
前記第２ストレージ装置は、
前記第２のボリュームのデータを前記第４のボリュームにコピーする際には、対応する前記更新番号を前記第４のストレージ装置に通知する
ことを特徴とする請求項１に記載の情報システム。
前記第３のストレージ装置は、前記第４のストレージ装置に接続され、
前記第３及び第４のストレージ装置は、
前記第１及び又は第２のストレージ装置の障害時、最新のデータを保持している前記第３又は第４のストレージ装置を正系として、前記第３及び第４のボリューム間でリモートコピーを開始する
ことを特徴とする請求項２に記載の情報システム。
前記第３及び第４のストレージ装置に接続された第２のホストコンピューターを備え、
前記第２のホストコンピューターは、
前記第３のボリュームに格納された前記データの前記更新番号と、前記第４のボリュームに格納された対応する前記データの前記更新番号とを比較し、
比較結果に基づいて最新のデータを持つ前記第３又は第４のストレージ装置を選択し、
選択した前記第３又は第４のストレージ装置を正系として、第３及び第４のボリューム同士でコピーペアを形成する
ことを特徴とする請求項３に記載の情報システム。
前記第１のホストコンピューターは、
前記第１のストレージ装置に障害が発生したときには、第２のストレージ装置にパスを切り替える
ことを特徴とする請求項１に記載の情報システム。
前記第１及び第２のストレージ装置は、前記第１のボリュームに格納されたデータを、当該第１のボリュームへの前記データの書き込みに同期して前記第２のボリュームにリモートコピーし、
前記第１及び第３のストレージ装置は、前記第１のボリュームに格納されたデータを、当該第１のボリュームへの前記データの書き込みとは非同期に前記第３のボリュームにリモートコピーし、
前記第２及び第４のストレージ装置は、前記第２のボリュームに格納されたデータを、当該第２のボリュームへの前記データの書き込みとは非同期に前記第４のボリュームにコピーする
ことを特徴とする請求項１に記載の情報システム。
前記第１のストレージ装置は、
前記第３のストレージ装置からの要求に応じて前記データを当該第３のストレージ装置に送信し、
前記第２のストレージ装置は、
前記第４のストレージ装置からの要求に応じて前記データを当該第４のストレージ装置に送信する
ことを特徴とする請求項１に記載の情報システム。
前記第１のストレージ装置は、
前記ホストから前記第１のボリュームに書き込むべき前記データを受け取ると、当該データと、前記更新番号を含む当該データの更新情報とからなるジャーナルデータを作成し、作成したジャーナルデータを当該第１のストレージ装置内に設けられた第１のジャーナルボリュームに保存すると共に、前記データを当該更新番号と共に前記第２のストレージ装置に送信し、
前記第２のストレージ装置は、
前記第１のストレージ装置から前記データを受け取ると、当該データを前記第２のボリュームに格納すると共に、当該データと、前記第１のストレージ装置から通知された前記更新番号を含む当該データの更新情報とかならなるジャーナルデータを作成し、作成したジャーナルデータを当該第２のストレージ装置内に設けられた第２のジャーナルボリュームに格納し、
前記第３のストレージ装置は、
前記第１のストレージ装置から送信される前記ジャーナルデータを当該第３のストレージ装置内に設けられた第３のジャーナルボリュームに保存すると共に、当該ジャーナルデータに含まれる前記データを前記第３のボリュームに格納し、
前記第４のストレージ装置は、
前記第２のストレージ装置から送信される前記ジャーナルデータを当該第４のストレージ装置内に設けられた第４のジャーナルボリュームに保存すると共に、当該ジャーナルデータに含まれる前記データを前記第４のボリュームに格納する
ことを特徴とする請求項１に記載の情報システム。
上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムにおけるデータ保護方法であって、
前記第１のストレージ装置に、第３のボリュームを有する第３のストレージ装置が接続されると共に、前記第２のストレージ装置に第４のボリュームを有する第４のストレージ装置が接続され、
前記第１及び第２のストレージ装置が、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行する第１のステップと、
前記第１及び第３のストレージ装置が、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行すると共に、前記第２及び第４のストレージ装置が、前記第２のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行する第２のステップと
を備えることを特徴とするデータ保護方法。
上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムであって、
前記第１及び第２のストレージ装置に接続され、第３のボリュームを有する第３のストレージ装置と、
前記第３のストレージ装置に接続され、第４のボリュームを有する第４のストレージ装置と
を備え、
前記第１及び第２のストレージ装置は、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行し、
前記第１及び第３のストレージ装置は、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行し、
前記第３及び第４のストレージ装置は、前記第３のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行する
ことを特徴とする情報システム。
前記第１のホストコンピューターは、
前記第１のストレージ装置に障害が発生したときには、前記第２のストレージ装置にパスを切り替え、
前記第２のストレージ装置は、
前記ホストコンピューターから与えられるデータを前記第２のボリュームに書き込み、
前記第２及び第３のストレージ装置は、
前記第２のボリュームに格納された前記データを前記第３のボリュームにコピーする
ことを特徴とする請求項１０に記載の情報システム。
前記第３及び第４のストレージ装置は、
前記第１のストレージ装置に障害が発生した後も、前記第３及び第４のボリューム間でのリモートコピーを継続する
ことを特徴とする請求項１１に記載の情報システム。
前記第３及び第４のストレージ装置と接続された第２のホストコンピューターを備え、
前記第２のホストコンピューターは、
前記第１及び又は第２のストレージ装置の障害時に前記第１のホストコンピューターの処理を引き継いで前記第３のボリュームにデータを書き込み、
前記第３及び第４のストレージ装置は、
前記第３のストレージ装置を正系として、前記第３及び第４のボリューム間でリモートコピーを実行する
ことを特徴とする請求項１０に記載の情報システム。
上位装置としての第１のホストコンピューターと、前記第１のホストコンピューターに接続され、第１のボリュームを有する第１のストレージ装置と、前記第１のストレージ装置及び前記第１のホストコンピューターに接続され、第２のボリュームを有する第２のストレージ装置とを有する情報システムにおけるデータ保護方法であって、
前記第１及び第２のストレージ装置に、第３のボリュームを有する第３のストレージ装置が接続され、前記第３のストレージ装置に、第４のボリュームを有する第４のストレージ装置が接続され、
前記第１及び第２のストレージ装置が、前記第１のボリュームに格納されたデータを前記第２のボリュームにコピーするリモートコピーを実行すると共に、前記第１及び第３のストレージ装置が、前記第１のボリュームに格納されたデータを前記第３のボリュームにコピーするリモートコピーを実行する第１のステップと、
前記第３及び第４のストレージ装置が、前記第３のボリュームに格納されたデータを前記第４のボリュームにコピーするリモートコピーを実行する第２のステップと
を備えることを特徴とするデータ保護方法。