JP2005157712A - リモートコピーネットワーク - Google Patents
リモートコピーネットワーク Download PDFInfo
- Publication number
- JP2005157712A JP2005157712A JP2003394921A JP2003394921A JP2005157712A JP 2005157712 A JP2005157712 A JP 2005157712A JP 2003394921 A JP2003394921 A JP 2003394921A JP 2003394921 A JP2003394921 A JP 2003394921A JP 2005157712 A JP2005157712 A JP 2005157712A
- Authority
- JP
- Japan
- Prior art keywords
- information
- remote copy
- identification information
- edge device
- volume
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2069—Management of state, configuration or failover
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2071—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring using a plurality of controllers
- G06F11/2074—Asynchronous techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2082—Data synchronisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2066—Optimisation of the communication load
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2071—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring using a plurality of controllers
- G06F11/2076—Synchronous techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
- Debugging And Monitoring (AREA)
Abstract
低コストなマルチホップ・リモートコピーを実現する。
【解決手段】
ソースストレージと接続されるソースエッジデバイスと、ターゲットストレージに接続されるターゲットエッジデバイスとを有するリモートコピーネットワーク(RCN)を介して、リモートコピーを実行する。RCNはネットワーク事業者が提供するネットワークであるため、ストレージ装置を有するユーザはRCNを所有し管理することなくリモートコピーを実行できる。
ソースエッジデバイスはソースストレージからリモートコピーI/Oを受信し、これにシーケンシャル番号を付与したログエントリを作成して、ログエントリをターゲットエッジデバイスに送信する。ターゲットエッジデバイスは、受信したログエントリからリモートコピーI/Oを取得し、シーケンシャル番号順にターゲットストレージにリモートコピーI/Oを送信する。
【選択図】 図1
Description
(1)まず、顧客とRCN提供者が契約を行う(ステップ901)。
(2)RCN提供者は、顧客に顧客IDを割り当て、割り当てられた顧客IDと契約条件に定められた顧客特有の設定を管理サーバー103に入力、設定する(ステップ902)。
(3)顧客は、RCNに接続するソース外部ストレージ112及びターゲット外部ストレージ122のWWN(WorldWideName)と、これら外部ストレージの接続先となるエッジデバイス104及びエッジデバイス105の識別情報を、管理サーバー103に入力、設定する(ステップ903)。この設定情報を元に、管理サーバー103はエッジデバイス104及びエッジデバイス105に仮想ストレージ106や仮想ストレージ107の生成を指示したり、リモートコピーネットワーク101の経路設定を行う。
(4)顧客は、ホスト111または他の計算機にペア生成指示を入力することにより、ソース外部ストレージ112に対してペア生成を指示する(ステップ904)。ソース外部ストレージ112に対する指示は、エッジデバイス104、リモートコピーネットワーク101、エッジデバイス105を経由してターゲット外部ストレージ122に到着する。ペア生成指示を契機に、ソースボリューム113からターゲットボリューム123へ初期化コピーが行われる。
(5)ソースボリューム113とターゲットボリューム123のペアがDuplex状態となり、ソース外部ストレージとターゲット外部ストレージ間でリモートコピー処理が実行される(ステップ905)。
(6)リモートコピーネットワーク101の内部で障害があった場合は、外部ストレージ112若しくは外部ストレージ122が自ら障害を検知するか、リモートコピーネットワーク101が障害発生を外部ストレージ112若しくは外部ストレージ122に通知することで、これらの外部ストレージはペア状態を障害Suspend状態に遷移させる。その後、RCN提供者が保守作業を完了させた後に、顧客が管理サーバ若しくは他の計算機からソース外部ストレージ112に再同期を指示して再同期を行う(ステップ908、909)。
(7)計画保守や、ターゲット外部ストレージ122を一時的に別アプリケーションプログラムで用いる等の理由でリモートコピーを停止させたい場合は、顧客がホスト111若しくはホスト121、管理サーバ若しくは他の計算機を介してソース外部ストレージ112にSuspend状態への遷移を指示する(ステップ910)。その後、リモートコピー停止の理由が解消した段階で、顧客がホスト111若しくはホスト121管理サーバ若しくは他の計算機を介してソース外部ストレージ112に再同期を指示して再同期を行う(ステップ909)。
(8)ソース外部ストレージ112に障害(サイト障害)が発生した場合は、顧客はターゲット外部ストレージ122に接続されたホスト121でアプリケーションを再開する(ステップ911)。なお、サイト障害の検知や再開処理は管理者による手作業でもよいし、クラスタソフトと呼ばれるホスト監視・アプリケーション再立ち上げを担うソフトが行っても良い。
(A)リモートコピーネットワーク101に接続する外部ストレージのWWNと、外部ストレージの接続先エッジデバイスのID
(B)リモートコピーネットワーク101中で、データの書き込み順序が保証されるソースボリューム及びターゲットボリューム(またはソース外部ストレージとターゲット外部ストレージ、若しくはソースエッジデバイスとターゲットエッジデバイス)のペアのリスト
また、RCN設定インターフェースプログラム501が提供する情報としては、前述の2つの設定値のほか、以下の項目が考えられるが、RCN設定インタフェースプログラムはこれ以外の項目を出力してもよい。
(A)仮想ストレージに割り当てられたWWN
(B)ソース外部ストレージへの書き込みデータが、ターゲット外部ストレージに反映されるまでの遅れ時間
(C)リモートコピーネットワーク101内部に残るログエントリの有無
なお、RCN設定インターフェースプログラム501は、図9のステップ903において各顧客の契約形態に応じRCNへの設定を実行する際、エッジデバイスの選択範囲、RCNに接続する外部ストレージの数、順序保証するボリュームのペア数等の入力値を、契約形態に基づき制限する処理を実施してもよい。
(A)RCN設定インターフェース501によって設定された情報を元に、ストレージ接続情報503、仮想ストレージ情報404、アクセス制御情報405、経路情報408、ペア情報411を更新し、エッジデバイスとコアデバイスに配布する、設定・配布機能
(B)エッジデバイスによるペア情報411と順序保証情報413の更新を収集する更新収集機能
なお、RCN設定プログラム502はこれ以外の情報をリモートコピーネットワーク101やエッジデバイス、コアデバイス202から収集したり、設定する機能を含んでも良い。 管理サーバのメモリには、上述のRCN設定インタフェースプログラム501及びRCN設定プログラムの他に、後述するストレージ接続情報503、仮想ストレージ情報404、アクセス制御情報405、経路情報408、ペア情報411が格納されている。
<仮想ストレージ106のための設定>
(A)エッジID611として、エッジデバイス104のID
(B)仮想ストレージWWN612として、ターゲット外部ストレージ122のWWN
(C)対応エッジIDとしてエッジデバイス105のID
(D)対応ストレージWWNとしてターゲット外部ストレージ122のWWN
<仮想ストレージ107のための設定>
(A)エッジID611としてエッジデバイス105のID
(B)仮想ストレージWWN612として、ソース外部ストレージ112のWWN
(C)対応エッジIDとしてエッジデバイス104のID
(D)対応ストレージWWNとしてソース外部ストレージ112のWWN
尚、ターゲットボリューム、ソースボリューム、仮想ターゲットボリューム、及び仮想ソースボリュームの識別番号(LUN)は、本実施形態においては同じ値であるものとする。
<仮想ストレージ106のアクセス制御情報の設定>
(A)エッジID621としてエッジデバイス104のID
(B)仮想ストレージWWN622として仮想ストレージ106のWWN
(C)アクセス許可ストレージWWN623としてソース外部ストレージ112のWWN
<仮想ストレージ107のアクセス制御情報の設定>
(A)エッジID621としてエッジデバイス105のID
(B)仮想ストレージWWN622として仮想ストレージ107のWWN
(C)アクセス許可ストレージWWN623としてターゲット外部ストレージ122のWWN
経路情報408はソース側のエッジデバイス104が作成したログエントリ211をターゲット側のエッジデバイス105に転送するための経路を管理する情報である。当該情報には、ソース外部ストレージ112のWWN711とターゲット外部ストレージ122のWWN712と、ソース外部ストレージ及びターゲット外部ストレージ間でログエントリ211を送受信するための通過経路714が含まれる。RCN設定プログラム502は、顧客から管理端末に対してソース外部ストレージ及びターゲット外部ストレージの識別情報と、これらのストレージが接続されるソース側エッジデバイスとターゲット側エッジデバイスの識別情報が入力されると、各コアデバイス202の処理限界とまとめ転送の効果を考慮してソース外部ストレージ104とターゲット外部ストレージ105間のコアデバイス202の数が少なくなるように、経路計算して経路情報を作成する。なお、経路決定の方式はデータ転送のQoSを考慮したり、エッジデバイスまたはコアデバイス202が被災する可能性を考慮して計算する方法が考えられるが、これ以外の方法であってもよい。また、本実施例の経路情報408はソース外部ストレージとターゲット外部ストレージのペア毎に経路を設定するケースを想定したものであるが、順序保証グループ単位、ソースボリュームとターゲットボリュームのペア単位に経路情報が設定されてもよい。
(A)外部ストレージからのペア生成要求(このペア生成要求には、ソース外部ストレージ112のWWNとソースボリューム113のLUN、ターゲット外部ストレージ122のWWNとターゲットボリューム123のLUNが含まれる)をエッジデバイスが受信し、エッジデバイスでペア情報を作成する方法。この場合には、順序保証ID725の登録方法について以下の2つの方法が考えられる。
(A−1)ソースボリュームが同じソース外部ストレージに存在し、かつターゲットボリュームも同じターゲット外部ストレージに存在するペアに同一IDを割り当てる方法。この方法では、同じ外部ストレージ間でリモートコピーを実行するボリュームペアには同じIDが割り当てられる。
(A−2)同じソースエッジデバイス及びターゲットエッジデバイスを用いてリモートコピー処理が実行されるボリュームペアに同一IDを割り当てる方法。
(B)ペア作成の前に、管理者がRCN設定インターフェースプログラム501を用いて、更新順序情報と共に入力する方法。
<Simplex状態からInitial−Copying状態への遷移>
(1)ホスト111は、ボリューム113とボリューム123がペアとなるよう指示するペア生成指示のSCSIコマンドを、ソース外部ストレージ112に送信する(ステップ1001)。
(2)ソース外部ストレージ112は、ソース側の仮想ストレージ106を提供するエッジデバイス104へ、ホストから受信したSCSIコマンド(ペア生成指示)に応じたRIO(ペア生成)を有するFCフレームを送信する(ステップ1002)。尚、本実施形態においては、ボリューム123と仮想ボリューム108は同じ識別情報(WWNとLUN)で識別される。したがってソース外部ストレージ112が前述のRIO(ペア生成)をソース側エッジデバイス104へ送信することによって、ソース側エッジデバイス104にボリューム113と仮想ボリューム108とをペアとするよう指示したことと同様の結果となる。
(3)ソース側エッジデバイス104はソース外部ストレージから受信したRIO(ペア生成)を含むログエントリ(ペア生成)を作成し、これをGbEフレームに格納してターゲット側エッジデバイス105へ送信する(ステップ1003)。
(4)ターゲット側仮想ストレージ107を提供しているエッジデバイス105は、ログエントリ(ペア生成)を受信すると、ログエントリに含まれるRIO(ペア生成)を有するFCフレームをターゲット外部ストレージ122へ送信する。尚、本実施形態においては、ボリューム113と仮想ボリューム109は各々同じ識別情報(WWNとLUN)で識別される。したがって、ターゲット側エッジデバイス105にとっては、受信したログエントリ(ペア生成)は、仮想ボリューム109とボリューム123をペアとするよう指示するログエントリと同様の意味を持つ(ステップ1004)。
(5)RIO(ペア生成)を受信したターゲット外部ストレージ122は、ボリューム113とボリューム123間のペア状態をInitial−Copyingに変更する(ステップ1005)。
(6)ターゲット外部ストレージ122は、ターゲット側仮想ストレージ107を提供しているエッジデバイス105へInitial−Copying状態への遷移が完了した旨を示すRIO(Initial−Copying遷移完了(以下、ICOKと呼ぶ。))を含むFCフレームを送信する(ステップ1006)。
(7)RIO(ICOK)を受信したターゲット側エッジデバイス105は、仮想ボリューム109とボリューム123間のペア状態をInitial−Copyingに変更する(ステップ1007)。
(8)ターゲット側エッジデバイス105は、RIO(ICOK)を有するログエントリ(ICOK)を作成し、ログエントリ(ICOK)を有するGbEフレームを、ソース側エッジデバイス104へ送信する(ステップ1008)。
(9)ソース側エッジデバイス104はボリューム113と仮想ボリューム108間のペア状態をInitial−Copyingに変更する(ステップ1007)。
(10)ソース側仮想ストレージ106を提供しているエッジデバイス104は、受信したログエントリに含まれるRIO(ICOK)を、FCフレームにてソース外部ストレージ112に送信する(ステップ1010)。
(11)ソース外部ストレージ112は、ボリューム113とボリューム123間のペア状態をInitial−Copyingに変更する(ステップ1011)。
(12)ソース外部ストレージ112は、ホスト111へSCSIコマンド(ICOK)を転送する(ステップ1012)。
(13)ソース外部ストレージ112からターゲット外部ストレージ122への初期化コピーを行う(ステップ1013)。初期化コピーの方法は後述する通常運用中の書き込みと同じ動作である。
<ペア状態のDuplex遷移>
(14)ソース外部ストレージ112は、ソース側の仮想ストレージ106を提供するエッジデバイス104へ、ソースボリューム113とターゲットボリューム123との間のペア状態をDuplex状態へ遷移するよう指示するRIO(Duplex遷移)を、FCフレームの形で送信する(ステップ1101)。尚、前述の様に、ターゲットボリューム123とソース側のエッジデバイス104が提供する仮想ボリューム108は同じ識別情報で識別されるので、ソース外部ストレージ112が送信するRIO(Duplex遷移)は、ソース側のエッジデバイス104にとっては、結果的にソースボリューム113と仮想ボリューム108との間のペア状態をDuplex状態に遷移するよう指示するRIOということになる。
(15)ソース側エッジデバイス104は、受信したRIO(Duplex遷移)を有するログエントリ(Duplex遷移)を作成し、ターゲット側エッジデバイス105へログエントリ(Duplex遷移)をGbEフレームの形式で送信する(ステップ1102)。
(16)ログエントリ(Duplex遷移)を受信した、ターゲット側仮想ストレージ107を提供するエッジデバイス105は、ログエントリ(Duplex遷移)内に含まれるRIO(Duplex遷移)をターゲット外部ストレージ122へ転送する(ステップ1103)。尚、前述の様に、ソースボリューム113とターゲット側のエッジデバイス105が提供する仮想ボリューム109は同じ識別情報で識別されるので、ターゲットエッジデバイス105にとっては、受信したログエントリ(Duplex遷移)は、仮想デバイス109とターゲットボリューム123との間のペア状態をDuplex状態に遷移するよう指示するログエントリ、ということになる。
(17)RIO(Duplex遷移)を受信したターゲット外部ストレージ122は、ボリューム113とボリューム123間のペア状態をDuplexに変更する(ステップ1104)。
(18)ターゲット外部ストレージ122は、ターゲット側仮想ストレージ107を提供するエッジデバイス105へDuplex状態への遷移完了を報告するRIO(Duplex遷移完了(以下DOKと呼ぶ。))を送信する(ステップ1105)。
(19)ターゲット側エッジデバイス105はRIO(DOK)を受信すると、仮想ボリューム109とボリューム123間のペア状態をDuplexに変更する(ステップ1106)。
(20)さらにターゲット側エッジデバイス105は受信したRIO(DOK)を有するログエントリ(DOK)をソース側エッジデバイス104へ送信する(ステップ1107)。
(21)ログエントリ(DOK)を受信したソース側エッジデバイス104はボリューム113と仮想ボリューム108間のペア状態をDuplexに変更する(ステップ1108)。
(22)さらにソース側仮想ストレージ106を有するエッジデバイス104は、受信したログエントリ(DOK)中に含まれるRIO(DOK)をソース外部ストレージ104へ送信する(ステップ1109)。
(23)ソース外部ストレージ103は、ボリューム113とボリューム132間のペア状態をDuplexに変更する(ステップ1110)。
(1)ソース側ホストはデータの書き込みを指示するSCSIコマンド(書き込み(以下、WRと呼ぶ。))をソース外部ストレージ112に送信する(矢印1601)。このSCSIコマンド(WR)にはデータの書き込み先であるボリューム113を指定するための情報(WWN(より正確にはPortIDおよびLUNが含まれている。)
(2)ソース外部ストレージ112はSCSIコマンド(WR)に含まれるWWNおよびLUNに基づいて内部に有するペア情報を参照し、ターゲットストレージのWWNとターゲットLUNを取得する。そして、ソース外部ストレージ112は、転送元PortID1411にソース外部ストレージ112のWWNから計算されるPortID、転送先PortID1412に取得したWWNから計算されるPortIDを有するFCフレームを送信する。尚このFCフレームにはデータの書き込みを指示するRIO(WR)が含まれており、RIO(WR)にはソースボリューム113とターゲットボリューム123の識別情報(WWNとLUN)が含まれている(矢印1602)。本実施形態においては前述の様に、ターゲット外部ストレージ112のWWNは仮想ストレージ106のWWNと等しく、ターゲットボリューム123のLUNは仮想ボリューム108のLUNと等しいので、ソース外部ストレージ112が送信したRIO(WR)は仮想ストレージ106を提供するソース側エッジデバイス104に受信される。
(3)ソース側エッジデバイス104はRIO(WR)からログエントリ211(WR)を作成すると共に、書き込み完了を報告するRIO(書き込み完了(以下、WROKと呼ぶ。))をソース外部ストレージ112へ送信する(矢印1603)。
(4)RIO(WROK)を受信したソース外部ストレージ112は、SCSIコマンド(WROK)をソース側ホスト111へ送信するする(矢印1604)。
(5)ソース側エッジデバイス104は、経路情報408に従って作成したログエントリ(WR)をコアデバイス202へ送信する(矢印1605)。この時、ソース側エッジデバイス104は送信が完了したログエントリ(WR)のコピーをとっておく。
(6)コアデバイス202はログエントリ211(WR)を経路情報408に従ってターゲット側エッジデバイス105へ転送する(矢印1606)。
(7)ターゲット側エッジデバイス105はログエントリ211(WR)をRIO(WR)に変換し、変換後のRIOをターゲット外部ストレージ122へ送信する(矢印1607)。
(8)ターゲット外部ストレージ122は受信したRIO(WR)をボリューム123に反映させ、RIO(WROK)をターゲット側仮想ストレージ107を提供するエッジデバイス105へ送信する(矢印1608)。
(9)ターゲット側エッジデバイス105は、受信したRIO(WROK)を有するログエントリ211(WROK)を作成し、経路情報408に従って当該ログエントリ211をコアデバイス202へ送信する(矢印1609)。その後、ターゲット側エッジデバイス105は当該ログエントリ211(WROK)を削除する。
(10)コアデバイス202は受信したログエントリ211(WROK)を経路情報408に従ってソース側エッジデバイス104へ転送する(矢印1610)。
(11)ソース側エッジデバイス104はログエントリ(WROK)を受信すると、このログエントリ(WROK)に対応するログエントリ(WR)を削除する。
(0)外部ストレージ112は、Suspend状態または障害Suspend状態となった後、ボリューム113に対する書き込みの更新位置を差分ビットマップ1211へ記録する。同様に外部ストレージ122は、Suspend状態若しくは障害Susupend状態となった後にボリューム123に対する書き込みがあった場合、更新位置を差分ビットマップ1213へ記録する。
(1)ホスト111がソース外部ストレージ112へ再同期を指示するSCSIコマンド(再同期)を送信する(データ1201)。このSCSIコマンドには再同期するボリュームペア、即ちソースボリューム113とターゲットボリュームの識別情報(LUNとWWN)が含まれている。
(2)ソース外部ストレージ112は受信したSCSIコマンド(再同期)に基づいて、ソース側仮想ストレージ106を提供するソース側エッジデバイス104へRIO(再同期)を送信する(データ1202)。このRIO(再同期)にも再同期すべきボリュームのペアのLUNとWWNが含まれている。尚、本実施形態においては、ボリューム123と仮想ボリューム108は同じ識別情報(WWNとLUN)で識別される。したがってソース外部ストレージ112が前述のRIO(再同期)をソース側エッジデバイス104に送信することによって、ソース側エッジデバイスにボリューム113と仮想ボリューム108とのペアを再同期するよう指示したことと同様の結果となる。
(3)ソース側エッジデバイス104はRIO(再同期)をこのRIO(再同期)を有するログエントリ211(再同期)へ変換し、コアデバイス202へ転送する(データ1203)。
(4)コアデバイス202はログエントリ211(再同期)をターゲット側エッジデバイス105へ転送する(データ1204)。
(5)ターゲット側仮想ストレージ107を提供するターゲット側エッジデバイス105は、受信したログエントリ(再同期)をRIO(再同期)へ変換し、ターゲット側外部ストレージ122へ送信する(データ1205)。尚、本実施形態においては、ボリューム113と仮想ボリューム109は同じ識別情報(WWWとLUN)で識別される。したがって、ターゲット側エッジデバイスにとっては、ログエントリ(再同期)は、仮想ボリューム109とターゲットボリューム123との間の再同期指示を意味することとなる。
(6)ターゲット外部ストレージ122はRIO(再同期)を受信すると、自身が有するボリューム113とボリューム123間のペア状態をDuplex−pendingへ変更する。そしてターゲット外部ストレージ122は、ターゲット側仮想ストレージ107を提供するエッジデバイス105へ、ターゲット外部ストレージ122が有する差分ビットマップ1213を含むRIO(Duplex−Pending遷移完了(以下、DPOKと呼ぶ。))を送信する(データ1206)。
(7)ターゲット側エッジデバイス107は、自身が有するターゲットボリューム123と仮想ボリューム109間のペア状態をDuplex−pendingへ変更する。更にターゲット側エッジデバイス107は、受信したRIO(DPOK)を含むログエントリ211(DPOK)をコアデバイスに送信する(データ1207)。
(8)コアデバイス202は、受信したログエントリ(DPOK)をソース側エッジデバイス104へ転送する(データ1208)。
(9)ソース側エッジデバイス104は受信したログエントリ(DPOK)中に含まれる差分ビットマップ1213と差分ビットマップ727を結合し、差分ビットマップ1209を作成する。(データ1209)。
(10)ソース側仮想ストレージ106を有するソース側エッジデバイス104は、自身が有するボリューム113と仮想ボリューム108間のペア状態をDuplex−pendingへ変更する。更にソース側仮想ストレージ106を提供するソース側エッジデバイス104は、ソース外部ストレージ112へ差分ビットマップ1209を含むRIO(DPOK)を送信する(データ1210)。
(11)ソース外部ストレージ112は、差分ビットマップ1209と自らが保持していた差分ビットマップ1211を結合し、新たな差分ビットマップ1211とする(データ1211)。
(12)ソース外部ストレージ112は、自身が有するボリューム113とボリューム123間のペア状態をDuplex−pendingへ変更する。更にソース外部ストレージ112は、ホスト111へSCSIコマンド(DPOK)を転送する(データ1212)。
(13)そして、ソース外部ストレージ112は差分ビットマップ1211に従った差分コピーを開始する。
(1)ターゲット側ホスト121は、ソース側のサイト障害を検知する(ステップ1301)。なお、検知する契機は、クラスタソフトやターゲット側エッジデバイス105や管理サーバー103からの通知時が考えられるが、これ以外でもよい。
(2)ターゲット側ホスト121は、ターゲット外部ストレージ122へSCSIコマンド(Suspend指示)を送信する(ステップ1302)。このSCSIコマンドには、ペア状態をSuspend状態若しくは障害Suspend状態へ遷移するボリュームペア、即ちソースボリューム113とターゲットボリューム123の識別情報(WWNとLUN)が含まれる。
(3)ターゲット外部ストレージ122は、ターゲット側仮想ストレージ107を提供するターゲット側エッジデバイス105へ、RIO(Suspend指示)を送信する(ステップ1303)。このRIO(Suspend指示)にも上述のボリューム113およびボリューム123の識別情報が含まれる。
(4)ターゲット側エッジデバイス105は受信したRIO(Suspend指示)を有するログエントリ(Suspend指示)を作成し、ソース側エッジデバイス104へログエントリ211(Suspend指示)を送信する(ステップ1304)。ソース側エッジデバイス104は当該ログエントリを受け取った時、以下の処理を実行する。
(A)まずソース側エッジデバイス104は、ボリューム113およびボリューム123(ソース側エッジデバイスにとっては仮想ボリューム108である。)のペアに関する全てのログエントリ211を他のコアデバイス202またはエッジデバイスへ転送する。
(B)次に、ソース側エッジデバイス104は、ボリューム113および仮想ボリューム108間に関するペア状態を障害Suspendへ変更する。尚、前述の様に本実施形態では、仮想ボリューム108とターゲットボリューム123は同じ識別情報(WWNおよびLUN)で識別されるので、前述のログエントリ(Suspend指示)を受信したソース側エッジデバイス104は、このログエントリ(Suspend指示)をソースボリューム113と仮想ボリューム108間のペア状態を障害Suspendへ変更するよう指示するものだと解釈する。
(C)そして、ソース側エッジデバイス104は、ペア状態が障害Suspendに遷移した旨の報告である、ログエントリ(Suspend遷移完了(以下、SOKと呼ぶ。))を作成し、ターゲット側エッジデバイス105へ送信する。
(5)ターゲット側エッジデバイス105はタイマー値をリセットする(ステップ1305)。
(6)ターゲット側エッジデバイス105は、現在のタイマー値がタイムアウト設定値を越えている場合は、ステップ1310に進み、そうでなければステップ1307に進む(ステップ1306)。
(7)ターゲット側エッジデバイス105は、他のエッジデバイスやコアデバイス202から転送されるログエントリ211を受信し、受信したログエントリ211がソース側エッジデバイス104からのログエントリ(SOK)かどうかを確認する(ステップ1307、1308)。もし、そうであればステップ1310に進み、そうでなければステップ1309に進む。なお、ステップ1308でステップ1310へ遷移する条件として、「ログエントリ(SOK)の欠落がない」を加えても良い。
(8)ターゲット側エッジデバイス105は、受信したログエントリ内のI/O時間とシーケンシャル番号を参照して、ライトデータのライト順序の関係を守りつつ、受信したログエントリ211をRIOへ変換し、ターゲット外部ストレージへRIOを送信する(ステップ1309)。その後に、ステップ1306へ戻る。なお、転送されたRIOはターゲット外部ストレージ122のボリューム123に反映される。
(9)ターゲット側エッジデバイス105は、ターゲットボリューム123と仮想ボリューム109間のペア状態を障害Suspendに変更した後に、ターゲット外部ストレージ122へRIO(SOK)を送信する(ステップ1310)。RIO(SOK)を受け取ったターゲット外部ストレージ122は、ターゲットボリューム123とソースボリューム113の間のペア状態を障害Suspendに変更した後に、ターゲット側ホスト121へステップ1302に対するSCSIコマンド(SOK)を転送する(ステップ1311)。
(10)ターゲット側ホスト121は、ターゲット外部ストレージ122内のボリューム123を用いてアプリケーションプログラムによる処理を再開する(ステップ1312)。
(1)仮想ストレージ提供プログラム403は、ホストからソース外部ストレージに書き込まれたライトデータを有するRIO(WR)含んだFCフレーム220を、ソース外部ストレージから受信し、ログエントリ生成・反映プログラム406へ渡す(ステップ1901)。FCフレームの受信は、RIOプロトコルスタック402とFCプロトコルスタック401を通じて行われる。ログエントリ生成・反映プログラム406へ渡すデータは、転送元PortID1411から変換した転送元WWN、転送先PortID1412から変換した転送先WWNとRIO領域1414に含まれるRIOである。
(2)ログエントリ生成・反映プログラム406は、ステップ1901で渡されたデータを元に、ログ記憶領域413へログエントリ(WR)を作成する(ステップ1902)。ログエントリ(WR)には以下の(A)〜(E)に示す値が登録される。
(A)「ターゲットストレージWWNとLUN」801としてステップ1901で渡された転送先WWNとRIO(WR)に含まれるリモートコピーのターゲットLUN。
(B)「ソースストレージWWNとLUN」802としてステップ1901で渡された転送元WWNと、ペア情報411を参照して得られるソースLUN722。尚、ソースLUNは、ペア情報411において、ソースストレージWWN721が転送元WWN、ターゲットトレージWWN723が転送先WWN、ターゲットLUN724がRIO(WR)に含まれるリモートコピーのターゲットLUNという条件をキーにソースLUN722を検索することにより得ることができる。
(C)順序保証ID801として(A)と(B)の情報に対応するペア情報411中の順序保証ID726
(D)「I/O時間とシーケンシャル番号」804としてソース側エッジデバイス104の現在時刻と、(C)で求めた順序保証IDの値に対応する順序保証情報412のログ生成カウンタ値731
(E)RIO領域805に格納されるデータとして、ステップ1901で渡されたRIO(WR)
(3)次にソース側エッジデバイス104はステップ1902で用いた順序保証情報412のログ生成カウンタ値731を1インクリメントする(ステップ1903)。
(4)仮想ストレージ提供プログラム403は、ソース外部ストレージ112へライト処理の完了を通知するためのRIO(WROK)を送信する(ステップ1904)。
(5)そして、ソース側エッジデバイスは、ログエントリ(WR)の転送先となるエッジデバイスまたはコアデバイス202を決定する(ステップ1905)。そして転送先が決定すると、転送先のIPアドレスを取得する。尚、転送先の決定とIPアドレスの取得は以下の(A)(B)に示す手順で行われる。
(A)まずソース側エッジデバイスは、ステップ1902で求めた転送元WWNと転送先WWNに対応する経路情報408の通過経路713(IPアドレスのリストである)を取得する。
(B)次に(A)で取得したリストから、ソース側エッジデバイス104が有するIPアドレスの次のIPアドレスを選択し、これを転送先のIPアドレスとする。
(6)ログエントリ転送プログラム407は、ステップ1902で生成したログエントリ211(WR)を、ステップ1905で求めたIPアドレスに対して送信する(ステップ1906)。転送は、ログ転送プロトコルスタック409とIPプロトコルスタック410とが共同で実行する。
(7)ログエントリ転送プログラム407は、コアデバイス202やターゲット側エッジデバイス105からのログエントリ(WROK)を受信し、ログ記憶領域413へ保存する(ステップ1907)。なお、ログエントリ(WROK)のシーケンシャル番号804には、ステップ1906で送信したログエントリ(WR)と同じシーケンシャル番号804が入っている。
(8)ログエントリ転送プログラム407は、ログ記憶領域413内に保存されているログエントリ(WR)と、これに対応するログエントリ211(WROK)を削除する(ステップ1908)。尚ログエントリ(WR)とログエントリ(WROK)との対応関係はログエントリ内の順序保証IDとシーケンシャル番号の対応関係を参照すれば(即ち順序保証IDとシーケンシャル番号が一致するか否かを調べれば)分かる。
(9)ステップ1907でソース側エッジデバイスは、削除したログエントリ(WR)から予め順序保証ID803とシーケンシャル番号804を取り出しておき、これに対応した順序保証情報412のログ削除カウンタ値733をインクリメントする(ステップ1909)。
(1)ターゲット側エッジデバイス105のログエントリ転送プログラム407は、ログ転送プロトコルスタック407とIPプロトコルスタック410を通じて、ログエントリ(WR)を受信し、ログ記憶領域413へ保存する(ステップ2001、2002)。
(2)ログエントリ生成・反映プログラム406は、ログ記憶領域413から順序関係を守って反映可能なログエントリ(WR)を検索する(ステップ2003)。検索は、ログエントリに含まれる順序保証ID毎に、順序保証情報413のログ反映カウンタ733の値をインクリメントした値と同じ値のシーケンシャル番号を持つログエントリ(WR)を探すことで行われる。
(3)ログエントリ生成・反映プログラム406は、ステップ2003で検索したログエントリ(WR)をRIO(WR)へ変換する(ステップ2004)。変換は、ログエントリのRIO領域805からRIOを取り出すことで行われる。
(4)仮想ストレージ提供プログラム403は、ステップ2004で変換したRIO(WR)を、ターゲット外部ストレージ122へ送信する(ステップ2005)。
(5)仮想ストレージ提供プログラム403は、ターゲット外部ストレージ122からのRIO(WROK)を受信する(ステップ2006)。
(6)ログエントリ生成・反映プログラム406は、ステップ2003で検索したログエントリ(WR)から順序保証ID803とシーケンシャル番号804を取り出し、対応する順序保証情報412のログ反映カウンタ値733をインクリメントする(ステップ2007)。また、現在時刻と反映したログエントリ(WR)のI/O時間804の差分を順序保証情報413の反映遅れ時刻735に登録する。
(7)ログエントリ生成・反映プログラム406は、受信したRIO(WROK)を有するログエントリ(WROK)をログ記憶領域413へ作成する(ステップ2008)。ログエントリには以下の(A)から(E)に示す値を登録する。
(A)「ターゲットストレージWWNとLUN」801としてステップ2003で検索の結果選択したログエントリ(WR)の「ソースストレージWWNとLUN」802
(B)「ソースストレージWWNとLUN」802としてステップ2003で取得したログエントリ(WR)の「ターゲットストレージWWNとLUN」801
(C)順序保証ID801としてステップ2003で取得したログエントリ211(WR)の順序保証ID801
(D)「I/O時間とシーケンシャル番号」804としてステップ2003で取得したログエントリ(WR)の「I/O時間とシーケンシャル番号」804
(E)RIO領域805としてステップ2006で受信したRIO(WROK)
(8)ログエントリ転送プログラム407は、ログエントリ(WROK)の転送先となるコアデバイス202またはソース側エッジデバイス104を経路情報を参照して決定する(ステップ2009)。尚、転送先の決定は前述のステップ1905と同様である。
(9)ログエントリ転送プログラム407は、ログ転送プロトコルスタック409とIPプロトコルスタック410を通じて、ステップ2008にて作成したログエントリ(WROK)をステップ2009で決定したIPアドレスに対して送信する(ステップ2010)。
(10)ログエントリ生成・反映プログラム406は、ステップ2003にて選択したログエントリ(WR)と、ステップ2008にて作成したログエントリ(WROK)をログ記憶領域413から削除する(ステップ2011)。
(1)仮想ストレージ提供プログラム403は、RIO(ペア生成)を受信する(ステップ1701)。なお、RIO(ペア生成)には、ソース外部ストレージ112のWWN、ソース側ボリューム113のLUN、ターゲット外部ストレージ122のWWN、ターゲット側ボリューム123のLUNが含まれる。
(2)仮想ストレージ提供プログラム403は、受信したRIO(ペア生成)を元に、生成するペアに関するソースとターゲットの情報等を、ペア情報411に記録する(ステップ1702)。その際、ペア状態725はSimplexに更新する。
(3)ログエントリ生成・反映プログラム406は、RIO(ペア生成)を有するログエントリ(ペア生成)をログ記憶領域413に作成する(ステップ1703)。ログエントリの作成方法は図19のステップ1902と同じである。
(4)ログエントリ生成・反映プログラム406は、順序保証情報412のログ生成カウンタ値732をインクリメントする(ステップ1704)。
(5)ログエントリ転送プログラム407は、ログエントリ(ペア生成)の送信先となるコアデバイス202またはエッジデバイスを決定する(ステップ1705)。送信先の決定方法は、図19のステップ1905と同じである。
(6)ログエントリ転送プログラム407は、ステップ1703にて作成したログエントリ(ペア生成)をステップ1705で決定したIPアドレスに対して送信する(ステップ1706)。
(7)ログエントリ転送プログラム407は、コアデバイス202またはエッジデバイス105からのログエントリ(Initial−Copying遷移完了(以下、ICOKと呼ぶ。))を受信する(ステップ1707)。このログエントリ(ICOK)には、ソース外部ストレージ112のWWN、ソース側ボリューム113のLUN、ターゲット外部ストレージ122のWWN、ターゲット側ボリューム123のLUNが含まれる。
(8)ソース側エッジデバイスは、受信したログエントリ(ICOK)内のボリュームペアに関する情報に基づいて、ペア情報411内の対応するペアのペア状態725をInitial−Copyingに更新する(ステップ1711)。
(9)仮想ストレージ提供プログラム403は、受信したログエントリ(ICOK)からRIO(ICOK)を抽出し、ソース外部ストレージ112へ送信する(ステップ1708)。
(10)ログエントリ生成・反映プログラム406は、ステップ1707で受信したログエントリ(ICOK)と、このログエントリ(ICOK)と同じペアに関するログエントリ(ペア生成)を、ログ記憶領域413から削除する(ステップ1709)。
(11)ログエントリ生成・反映プログラム406は順序保証情報413のログ削除カウンタ値734をインクリメントする(ステップ1710)。
(12)そして、ソース側エッジデバイス104は、初期化コピー処理を開始する(ステップ1801)。本ステップの処理は通常運用のデータコピーと同じである。
(13)仮想ストレージ提供プログラム403は、RIO(Duplex遷移)を受信する(ステップ1802)。RIO(Duplex遷移)には、ソース外部ストレージ112のWWN、ソース側ボリューム113のLUN、ターゲット外部ストレージ122のWWN、ターゲット側ボリューム123のLUNが含まれる。
(14)ログエントリ生成・反映プログラム406は、受信したRIO(Duplex遷移)からログエントリ(Duplex遷移)をログ記憶領域413に作成する(ステップ1803)。ログエントリ211の作成方法は図19のステップ1902と同じである。
(15)ログエントリ生成・反映プログラム406は、順序保証情報412のログ生成カウンタ値732をインクリメントする(ステップ1804)。
(16)ログエントリ転送プログラム407は、ログエントリ(Duplex遷移)の転送先となるコアデバイス202またはエッジデバイスを決定する(ステップ1805)。決定方法は、図19のステップ1905と同じである。
(17)ログエントリ転送プログラム407は、ステップ1803にて作成したログエントリ(Duplex遷移)をステップ1805で決定したIPアドレスに対して送信する(ステップ1806)。
(18)ログエントリ転送プログラム407は、コアデバイス202またはエッジデバイス105からのログエントリ(Duplex遷移完了(以下、DOKと呼ぶ。))を受信する(ステップ1807)。このログエントリ(DOK)には、ソース外部ストレージ112のWWN、ソース側ボリューム113のLUN、ターゲット外部ストレージ122のWWN、ターゲット側ボリューム123のLUNが含まれる。
(19)ソース側エッジデバイスは、受信したログエントリ(DOK)内のボリュームペアに関する情報に基づいて、このボリュームペアに対応するペア情報411のペア状態725をDuplexに更新する(ステップ1811)。
(20)仮想ストレージ提供プログラム403は、受信したログエントリ(DOK)からRIO(DOK)を抽出し、ソース外部ストレージ112へこのRIO(DOK)を送信する(ステップ1808)。
(21)ログエントリ生成・反映プログラム406は、ステップ1807で受信したログエントリ(DOK)と、このログエントリ(DOK)と同じペアに関するログエントリ(Duplex遷移)をログ記憶領域413から削除する(ステップ1809)。
(22)ログエントリ生成・反映プログラム406は順序保証情報413のログ削除カウンタ値734をインクリメントする(ステップ1810)。
(1)ログエントリ転送プログラム407は、ログエントリ(ペア生成)を受信する(ステップ2101)。このログエントリ(ペア生成)には生成すべきペアを識別するための情報(即ちターゲット側のWWNとLUN、ソース側のWWNとLUN)が含まれる。
(2)ログエントリ生成・反映プログラム406は、受信したログエントリ(ペア生成)をログ記憶領域413に記憶する(ステップ2102)。
(3)仮想ストレージ提供プログラム403は、ステップ2102で受信したログエントリ(ペア生成)を元に、生成するペアを、ペア情報411へ登録する(ステップ2103)。その際、ペア状態725はSimplexに更新する。
(4)ログエントリ生成・反映プログラム406は、ログエントリ(ペア生成)をRIO(ペア生成)へ変換する(ステップ2104)。
(5)仮想ストレージ提供プログラム403は、ステップ2104で変換したRIO(ペア生成)を、ターゲット外部ストレージ122へ送信する(2105)。
(6)仮想ストレージ提供プログラム403は、ターゲット外部ストレージ122からのRIO(Initial−Copying遷移完了(以下、ICOKと呼ぶ。))を受信する(ステップ2106)。このRIO(ICOK)には、ペアを識別するための情報が含まれる。
(7)ログエントリ生成・反映プログラム406は、受信したRIO(ICOK)が示すペアに対応する順序保証情報412のログ反映カウンタ値をインクリメントする。また、現在時刻と受信したRIO(ICOK)と同じペアに関するログエントリ(ペア生成)のI/O時間804の差分を順序保証情報413の反映遅れ時刻735に登録する。(ステップ2107)。
(8)更にターゲット側エッジデバイスは、受信したRIO(ICOK)が示すペアについて、ペア情報411のペア状態725をInitial−Copyingに更新する(ステップ2108)。
(9)ログエントリ生成・反映プログラム406は、受信したRIO(ICOK)を含むログエントリ(ICOK)をログ記憶領域413へ作成する(ステップ2109)。ログエントリの作成方法は図20のステップ2008と同じである。
(10)ログエントリ転送プログラム407は、ログエントリ(ICOK)の転送先となるコアデバイスまたはエッジデバイスのIPアドレスを決定する(ステップ2110)。
(11)ログエントリ転送プログラム407は、ステップ2109にて作成したログエントリをステップ2110で決定したIPアドレスに対して送信する(ステップ2111)。
(12)ログエントリ生成・反映プログラム406は、ステップ2109で作成したログエントリ(ICOK)と、このログエントリ(ICOK)と同じペアに関するログエントリ(ペア生成)とをログ記憶領域413から削除する(ステップ2112)。
(13)ターゲット側エッジデバイスは、初期化コピーを行う(ステップ2201)。本ステップの動作は通常運用のデータコピーと同じである。
(14)ログエントリ転送プログラム407は、ログエントリ(Duplex遷移)を受信する(ステップ2202)。
(15)ログエントリ生成・反映プログラム406は、ログエントリ(Duplex遷移)をログ記憶領域413に記憶する(ステップ2203)。
(16)ログエントリ生成・反映プログラム406は、ログエントリ(Duplex遷移)をRIO(Duplex遷移)へ変換する(ステップ2204)。
(17)仮想ストレージ提供プログラム403は、ステップ2204で変換したRIO(Duplex遷移)を、ターゲット外部ストレージ122へ送信する(2205)。
(18)仮想ストレージ提供プログラム403は、ターゲット外部ストレージ122からRIO(Duplex遷移完了(以下、DOKと呼ぶ。))を受信する(ステップ2206)。
(19)ログエントリ生成・反映プログラム406は、受信したRIO(DOK)が示すボリュームペアに関する順序保証情報412のログ反映カウンタ値をインクリメントする。また、現在時刻と受信したRIO(DOK)と同じペアに関するログエントリ(Duplex遷移)のI/O時間804の差分を順序保証情報413の反映遅れ時刻735に登録する。(ステップ2207)。
(20)ターゲット側エッジデバイスは、受信したRIO(DOK)が示すボリュームペアについて、ペア情報411のペア状態725をDuplexに更新する(ステップ2208)。
(21)ログエントリ生成・反映プログラム406は、受信したRIO(DOK)を有するログエントリ(DOK)をログ記憶領域413へ作成する(ステップ2209)。
(22)ログエントリ転送プログラム407は、ログエントリ211(DOK)の転送先となるコアデバイスまたはエッジデバイスのIPアドレスを決定する(ステップ2210)。
(23)ログエントリ転送プログラム407は、ステップ2209にて作成したログエントリ211をステップ2210で決定したIPアドレスに対して送信する(ステップ2211)。
(12)ログエントリ生成・反映プログラム406は、ステップ2209で作成したログエントリ(DOK)と、このログエントリ(DOK)と同じペアに関するログエントリ(Duplex遷移)をログ記憶領域413から削除する(ステップ2112)。
(A)ソース側エッジデバイス104がFCフレームを受信した場合は、FCフレーム220の転送先PortID1412から得られるWWNを、ソース側仮想ストレージ106のWWNから、ターゲット側外部ストレージ122のWWNに変更する。
(B)ターゲット側エッジデバイス105がFCフレームを受信した場合は、FCフレーム220の転送先PortID1412から得られるWWNを、ターゲット側仮想ストレージ107のWWNから、ソース側外部ストレージ112のWWNに変更する。
(C)ソース側エッジデバイス104がFCフレームを送信する場合は、ログエントリ211のターゲットストレージWWNをソース仮想ストレージのWWNに変換し、変換後のソース仮想ストレージのWWNから計算されるPortIDをFCフレームの転送元PortIDとする。
(D)ターゲット側エッジデバイス105がFCフレームを送信する場合は、ログエントリ211のソースストレージWWNをターゲット仮想ストレージのWWNに変換し、変換後のターゲット仮想ストレージのWWNから計算されるPortIDをFCフレームの転送元PortIDとする。
(A)ストレージ接続情報503
(B)仮想ストレージ情報404
(C)アクセス制御情報405
(D)経路情報408
(E)ペア情報411
(F)ログエントリ211
また、各プログラムもWWNを使用して処理していたプロセスは、WWNに代わり、IPアドレス若しくはMACアドレスを用いて処理する。
103・・・管理サーバ
104・・・ソース側エッジデバイス
105・・・ターゲット側エッジデバイス
106・・・ソース側仮想ストレージ
107・・・ターゲット側仮想ストレージ
108・・・ソース側仮想ボリューム
109・・・ターゲット側仮想ボリューム
111・・・ソース側ホスト
112・・・ソース外部ストレージ
113・・・ソースボリューム
121・・・ターゲット側ホスト
122・・・ターゲット外部ストレージ
123・・・ターゲットボリューム
202・・・コアデバイス
Claims (20)
- 第一のストレージシステム及び第二のストレージシステムとが接続されるリモートコピーネットワークであって、
前記第一のストレージシステムと接続される第一のエッジデバイスと、
前記第二のストレージシステムと接続される第二のエッジデバイスと、
前記第一のエッジデバイス及び前記第二のエッジデバイスを接続するネットワークとを有し、
前記第一のエッジデバイスは、前記第一のストレージシステムから、前記第二のストレージシステムへデータをリモートコピーするための、リモートコピーI/O要求を受信し、
前記第一のエッジデバイスは、受信したリモートコピーI/O要求に対する応答を、前記第一のストレージシステムに送信し、
リモートコピーI/O要求に対する応答を送信した後に、前記第一のエッジデバイスは、リモートコピーI/O要求と該リモートコピーI/O要求の受信順序を示すシーケンシャル番号とを有するログ情報を、前記第二のエッジデバイスに向けて送信し、
前記第二のエッジデバイスは、受信したログ情報からリモートコピーI/O要求を取り出し、取り出したリモートコピーI/O要求を、ログ情報中のシーケンシャル番号が示す順序に従って前記第二のストレージシステムに送信することを特徴とするリモートコピーネットワーク。 - 請求項1記載のリモートコピーネットワークにおいて、
前記第一のストレージシステムは第一のボリュームを有しており、前記第一のストレージシステムは第一のストレージ識別情報で、前記第一のボリュームは第一のボリューム識別情報で識別され、
前記第二のストレージシステムは第二のボリュームを有しており、前記第二のストレージシステムは第二のストレージ識別情報で、前記第二のボリュームは第二のボリューム識別情報で識別され、
前記第一のエッジデバイスには、前記第二のストレージ識別情報と同じ値を有する第一の仮想ストレージ識別情報及び前記第二のボリューム識別情報と同じ値を有する第二の仮想ボリューム識別情報が割り当てられ、
前記第二のエッジデバイスには、前記第一のストレージ識別情報と同じ値を有する第二の仮想ストレージ識別情報及び前記第一のボリューム識別情報と同じ値を有する第二の仮想ボリューム識別情報が割り当てられ、
前記第一のエッジデバイスは、前記第一のストレージシステムから、前記第一のストレージ識別情報及び前記第一のボリューム識別情報を送信元の識別情報とし、前記第二のストレージ識別情報及び前記第二のボリューム識別情報を送信先の識別情報とするリモートコピーI/O要求を受信し、該リモートコピーI/O要求を有するログ情報を前記第二のエッジデバイスへ送信することを特徴とするリモートコピーネットワーク。 - 請求項1記載のリモートコピーネットワークにおいて、
前記第一のストレージシステムは第一のボリュームを有しており、前記第一のストレージシステムは第一のストレージ識別情報で、前記第一のボリュームは第一のボリューム識別情報で識別され、
前記第二のストレージシステムは第二のボリュームを有しており、前記第二のストレージシステムは第二のストレージ識別情報で、前記第二のボリュームは第二のボリューム識別情報で識別され、
前記第一のエッジデバイスには、第一の仮想ストレージ識別情報と第一の仮想ボリューム識別情報とが割り当てられており、
前記第一のエッジデバイスは、前記第一のストレージシステムから、前記第一のストレージ識別情報及び前記第一のボリューム識別情報を送信元の識別情報とし、前記第一の仮想ストレージ識別情報及び前記第一の仮想ボリューム識別情報を送信先の識別情報とするリモートコピーI/O要求を受信し、送信先を前記第二のストレージ識別情報と前記第二のボリューム情報に変換して、変換後のI/O要求を有するログ情報を前記第二のエッジデバイスに送信することを特徴とするリモートコピーネットワーク。 - 請求項1記載のリモートコピーネットワークにおいて、
更に、前記第一のエッジデバイスから前記第二のエッジデバイスへのログ情報の送信を中継する少なくとも一のコアデバイスを有することを特徴とするリモートコピーネットワーク。 - 請求項4記載のリモートコピーネットワークにおいて、
前記第一のエッジデバイス、前記第二のエッジデバイス、及び前記コアデバイスはルータ装置であることを特徴とするリモートコピーネットワーク。 - 請求項1記載のリモートコピーネットワークにおいて、
前記第一のエッジデバイスは、前記第二のエッジデバイスへ向けて送信したログ情報を記憶しておき、前記第二のエッジデバイスから前記ログ情報に対する応答を受信した場合に、記憶しておいた前記ログ情報を削除することを特徴とするリモートコピーネットワーク。 - 請求項6記載のリモートコピーネットワークにおいて、
前記第一のエッジデバイスは、前記第二のエッジデバイスへ向けて送信したログ情報が前記第二のエッジデバイスで受信されなかった場合に、記憶しておいたログ情報を前記第二のエッジデバイスへ向けて再送することを特徴とするリモートコピーネットワーク。 - 請求項6記載のリモートコピーネットワークにおいて、
更に、前記第一のエッジデバイス及び前記第二のエッジデバイスと接続される管理ネットワークと、
前記管理ネットワークに接続される管理サーバとを有しており、
ログ情報には更に、前記第一のエッジデバイスがリモートコピーI/O要求を受信した際の時刻情報が含まれており、
前記第一のエッジデバイスは、前記第二のエッジデバイスから前記ログ情報に対する応答を受信した場合に、現時刻から該応答に対応するログ情報に含まれる時刻情報の値を差し引いて求められる 遅れ時間をメモリに記録し、
前記第一のエッジデバイスは、前記メモリに記録された遅れ時間を前記管理ネットワークを介して前記管理サーバに送信し、
前記管理サーバが前記遅れ時間を出力することを特徴とするリモートコピーネットワーク。 - 請求項1記載のリモートコピーネットワークにおいて、
更に、第四のストレージシステムと接続される第三のエッジデバイスを有し、
前記第一のエッジデバイスは更に第三のストレージシステムと接続されており、
前記第一のエッジデバイスは、前記第三のストレージシステムから前記第四のストレージシステムへデータをリモートコピーするためのリモートコピーI/O要求を受信し、
前記第一のエッジデバイスは、前記第一のストレージシステムから受信するリモートコピーI/O要求と前記第三のストレージシステムから受信するリモートコピーI/O要求とを区別して処理することを特徴とするリモートコピーネットワーク。 - 請求項1記載のリモートコピーネットワークにおいて、
更に、前記第一のエッジデバイス及び前記第二のエッジデバイスと接続される管理ネットワークと、
前記管理ネットワークに接続される管理サーバとを有しており、
前記管理サーバは、前記第一のストレージシステムがリモートコピー元のストレージシステムであり、前記第二のストレージシステムが前記第一のストレージシステムに対応するリモートコピー先のストレージシステムである旨を示すペア情報を受け付け、前記管理ネットワークを介して、受け付けたペア情報を前記第一のエッジデバイス及び前記第二のエッジデバイスに配布することを特徴とするリモートコピーネットワーク。 - 第一のストレージシステムに接続され、第一のストレージシステムから第二のストレージシステムへのデータのリモートコピーを中継する中継装置であって、
前記第一のストレージシステムと接続される第一のインタフェース部と、
前記第二のストレージシステムと接続される他の中継装置と、ネットワークを介して接続される第二のインタフェース部と、
プロセッサと、
メモリを有しており、
前記第一のインタフェース部は、前記第一のストレージシステムから前記第二のストレージシステムにデータをリモートコピーするためのリモートコピーI/O要求を受信し、該リモートコピーI/O要求に対する応答を、前記第一のストレージシステムに返信し、
前記プロセッサは、リモートコピーI/O要求と、該リモートコピーI/O要求の受信順序を示すシーケンシャル番号とを有するログ情報とを作成して前記メモリに記憶し、
前記第二のインタフェース部は、作成したログ情報を、リモートコピーI/O要求に対応する応答を返信した後に、前記他の中継装置に対して送信し、
前記第二のインタフェース部は、ログ情報に対する応答を受信し、
前記プロセッサは、受信した応答に対応するログ情報を、前記メモリから削除することを特徴とする中継装置。 - 請求項11記載の中継装置であって、
前記第二のインタフェース部がログ情報に対する応答を受信しない場合に、
前記第二のインタフェース部は、前記メモリに格納されているログ情報を再送することを特徴とする中継装置。 - 請求項11記載の中継装置であって、
更に管理サーバとネットワークを介して接続される第三のインタフェース部を有しており、
前記ログ情報には、更に前記第一のインタフェース部がリモートコピーI/O要求を受信した時点の時刻情報が含まれており、
前記第二のインタフェース部が、ログ情報に対する応答を受信した場合に、
前記プロセッサは、前記応答を受信した時点の時刻から、前記応答に対応するログ情報に含まれる時刻情報の値を差し引いた、遅れ時間を計算し、
前記第三のインタフェース部は、遅れ時間を前記管理サーバに送信することを特徴とする中継装置。 - 請求項11記載の中継装置であって、
更に管理サーバと接続される第三のインタフェース部を有しており、
該中継装置には第一の仮想ストレージ識別情報と第一の仮想ボリューム情報とが割り当てられており、
前記第三のインタフェース部は、前記第一の仮想ストレージ識別情報及び前記第一の仮想ボリューム情報をリモートコピーの送信先情報、前記第一のストレージシステムの識別情報である第一のストレージ識別情報と前記第一のストレージシステムが有する第一のボリュームの識別情報である第一のボリューム識別情報とをリモートコピーの送信元情報とするペア情報を、前記管理サーバから受信することを特徴とする中継装置。 - 請求項14記載の中継装置であって、
前記第一の仮想ストレージ識別情報は、前記第二の記憶装置システムの識別情報である第二のストレージ識別情報と同じ値を有し、
前記第一の仮想ボリューム情報は、前記第二の記憶装置システムが有する第二のボリュームの識別情報である第二のボリューム識別情報と同じ値を有することを特徴とする中継装置。 - 請求項14記載の中継装置であって、
前記第一のインタフェース部が受信するリモートコピーI/O要求には、送信元の情報として前記第一のストレージ識別情報と前記第一のボリューム識別情報が、送信先の情報として前記第一の仮想ストレージ情報と前記第一の仮想ボリューム情報が含まれており、
前記プロセッサは、送信先の情報を、前記第二のストレージシステムの識別情報である第二のストレージ識別情報と、前記第二のストレージシステムが有する第二のボリュームの識別情報である第二のボリューム識別情報とに変換して、変換後のリモートコピーI/O要求を有するログ情報を作成することを特徴とする中継装置。 - 第二のストレージシステムに接続され、第一のストレージシステムから第二のストレージシステムへのデータのリモートコピーを中継する中継装置であって、
前記第一のストレージシステムと接続される他の中継装置と、ネットワークを介して接続される第一のインタフェース部と、
前記第二のストレージシステムと接続される第二のインタフェース部と、
プロセッサとを有しており、
前記第一のインタフェース部は、前記第一のストレージシステムから前記第二のストレージシステムにデータをリモートコピーするためのリモートコピーI/O要求と、リモートコピーI/O要求の前記他の中継装置における受信順序を示すシーケンシャル番号とを有する、ログ情報を、前記他の中継装置から受信し、
前記プロセッサは受信したログ情報からリモートコピーI/Oを取得し、
前記第二のインタフェース部は、取得したリモートコピーI/O要求を、ログ情報に含まれるシーケンシャル番号順に、前記第二のストレージシステムに送信することを特徴とする中継装置。 - 請求項17記載の中継装置であって、
更に管理サーバと接続される第三のインタフェース部を有しており、
該中継装置には第二の仮想ストレージ識別情報と第二の仮想ボリューム情報とが割り当てられており、
前記第三のインタフェース部は、前記第二の仮想ストレージ識別情報及び前記第二の仮想ボリューム情報をリモートコピーの送信元情報、前記第二のストレージシステムの識別情報である第二のストレージ識別情報と前記第二のストレージシステムが有する第二のボリュームの識別情報である第二のボリューム識別情報をリモートコピーの送信先情報とするペア情報を、前記管理サーバから受信することを特徴とする中継装置。 - 請求項18記載の中継装置であって、
前記第二の仮想ストレージ識別情報は、前記第一のストレージシステムの識別情報である第一のストレージ識別情報と同じ値を有し、
前記第二の仮想ボリューム識別情報は、前記第一のストレージシステムが有する第一のボリュームの識別情報である第一のボリューム識別情報と同じ値を有することを特徴とする中継装置。 - 請求項18記載の中継装置であって、
前記第一のインタフェース部が受信するログ情報中のリモートコピーI/O要求には、送信元の情報として前記第一のストレージ識別情報と前記第一のボリューム識別情報が、送信先の情報として前記第二のストレージ情報と前記第二のボリューム情報が含まれており、
前記プロセッサは、受信したログ情報中のリモートコピーI/O要求を取得し、送信元の情報を、前記第二の仮想ストレージ識別情報と前記第二の仮想ボリューム識別情報とに変換し、
前記第二のインタフェース部は変換後のリモートコピーI/O要求を前記第二のストレージシステムに送信することを特徴とする中継装置。
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003394921A JP2005157712A (ja) | 2003-11-26 | 2003-11-26 | リモートコピーネットワーク |
US10/816,572 US7055011B2 (en) | 2003-11-26 | 2004-03-31 | Remote copy network |
DE602004012220T DE602004012220T2 (de) | 2003-11-26 | 2004-06-01 | Fernkopiernetzwerk |
EP04012936A EP1536337B1 (en) | 2003-11-26 | 2004-06-01 | Remote copy network |
CNB2004100961062A CN100456256C (zh) | 2003-11-26 | 2004-11-26 | 远程复制网络系统 |
CN2008101869288A CN101426025B (zh) | 2003-11-26 | 2004-11-26 | 远程复制网络 |
US11/354,671 US7305531B2 (en) | 2003-11-26 | 2006-02-14 | Remote copy network |
US11/935,780 US7809909B2 (en) | 2003-11-26 | 2007-11-06 | Remote copy network |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003394921A JP2005157712A (ja) | 2003-11-26 | 2003-11-26 | リモートコピーネットワーク |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005157712A true JP2005157712A (ja) | 2005-06-16 |
JP2005157712A5 JP2005157712A5 (ja) | 2006-03-30 |
Family
ID=34463789
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003394921A Pending JP2005157712A (ja) | 2003-11-26 | 2003-11-26 | リモートコピーネットワーク |
Country Status (5)
Country | Link |
---|---|
US (3) | US7055011B2 (ja) |
EP (1) | EP1536337B1 (ja) |
JP (1) | JP2005157712A (ja) |
CN (2) | CN100456256C (ja) |
DE (1) | DE602004012220T2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016503552A (ja) * | 2013-03-14 | 2016-02-04 | 株式会社日立製作所 | ディザスタリカバリ仮想化の方法及び装置 |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005101241A2 (en) * | 2004-04-13 | 2005-10-27 | Alon Tavori | Method for depositing and retrieving digital records |
JP2006293850A (ja) * | 2005-04-13 | 2006-10-26 | Hitachi Ltd | リモートコピーシステムおよびリモートコピー方法 |
JP4920391B2 (ja) * | 2006-01-06 | 2012-04-18 | 株式会社日立製作所 | 計算機システムの管理方法、管理サーバ、計算機システム及びプログラム |
US7890611B2 (en) * | 2006-01-12 | 2011-02-15 | Comcast Cable Holdings, Llc | Edge QAM device configuration using a configuration file having a dynamic file format |
US20070300026A1 (en) * | 2006-06-23 | 2007-12-27 | Kwok-Yan Leung | Synchronous backup device and method used for storage device |
KR100843136B1 (ko) * | 2006-11-14 | 2008-07-02 | 삼성전자주식회사 | 비휘발성 메모리에서 연산 처리를 제어하는 장치 및 그방법 |
JP2008299481A (ja) * | 2007-05-30 | 2008-12-11 | Hitachi Ltd | ストレージシステム及び複数拠点間でのデータコピー方法 |
US8271706B2 (en) * | 2008-05-22 | 2012-09-18 | International Business Machines Corporation | Stabilization of host to storage subsystem ownership |
US20100050021A1 (en) * | 2008-08-25 | 2010-02-25 | International Business Machines Corporation | Error code handling in a storage subsystem |
JP2010097533A (ja) * | 2008-10-20 | 2010-04-30 | Hitachi Ltd | パーティションで区切られた計算機システムにおけるアプリケーション移動及び消費電力の最適化 |
JP5617304B2 (ja) * | 2010-03-26 | 2014-11-05 | 富士通株式会社 | スイッチング装置、情報処理装置および障害通知制御プログラム |
US9183560B2 (en) | 2010-05-28 | 2015-11-10 | Daniel H. Abelow | Reality alternate |
CN103546514B (zh) * | 2012-07-13 | 2016-12-21 | 阿里巴巴集团控股有限公司 | 一种处理延迟发送的日志数据的方法和系统 |
JP6489144B2 (ja) * | 2017-03-23 | 2019-03-27 | 日本電気株式会社 | 情報処理装置 |
CN108063685B (zh) * | 2017-12-06 | 2021-06-18 | 迈普通信技术股份有限公司 | 日志分析方法及装置 |
US10691568B2 (en) * | 2018-07-26 | 2020-06-23 | International Business Machines Corporation | Container replication and failover orchestration in distributed computing environments |
JP7150584B2 (ja) | 2018-12-06 | 2022-10-11 | エヌ・ティ・ティ・コミュニケーションズ株式会社 | エッジサーバとそのプログラム |
JP7150585B2 (ja) | 2018-12-06 | 2022-10-11 | エヌ・ティ・ティ・コミュニケーションズ株式会社 | データ検索装置とそのデータ検索方法およびプログラム、エッジサーバとそのプログラム |
CN110418218B (zh) * | 2019-07-26 | 2021-06-29 | 新华三技术有限公司成都分公司 | 报文处理方法、装置及fcf交换设备 |
CN111158612B (zh) * | 2020-04-02 | 2020-07-24 | 中国人民解放军国防科技大学 | 一种协同移动设备的边缘存储加速方法、装置及设备 |
Family Cites Families (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5544347A (en) * | 1990-09-24 | 1996-08-06 | Emc Corporation | Data storage system controlled remote data mirroring with respectively maintained data indices |
AU4652493A (en) * | 1992-06-18 | 1994-01-24 | Andor Systems, Inc. | Remote dual copy of data in computer systems |
US5327144A (en) | 1993-05-07 | 1994-07-05 | Associated Rt, Inc. | Cellular telephone location system |
KR0128271B1 (ko) | 1994-02-22 | 1998-04-15 | 윌리암 티. 엘리스 | 재해회복을 위한 일관성 그룹 형성방법 및 레코드갱싱의 섀도잉 방법, 주시스템, 원격데이타 섀도잉 시스템과 비동기 원격데이타 복제 시스템 |
US5537533A (en) | 1994-08-11 | 1996-07-16 | Miralink Corporation | System and method for remote mirroring of digital data from a primary network server to a remote network server |
US5901327A (en) | 1996-05-28 | 1999-05-04 | Emc Corporation | Bundling of write data from channel commands in a command chain for transmission over a data link between data storage systems for remote data mirroring |
JP3835569B2 (ja) * | 1996-12-20 | 2006-10-18 | ヤマハマリン株式会社 | 船外機 |
US5949970A (en) | 1997-01-07 | 1999-09-07 | Unisys Corporation | Dual XPCS for disaster recovery |
US5937414A (en) | 1997-02-28 | 1999-08-10 | Oracle Corporation | Method and apparatus for providing database system replication in a mixed propagation environment |
US6073209A (en) | 1997-03-31 | 2000-06-06 | Ark Research Corporation | Data storage controller providing multiple hosts with access to multiple storage subsystems |
US6324654B1 (en) | 1998-03-30 | 2001-11-27 | Legato Systems, Inc. | Computer network remote data mirroring system |
JP2968790B1 (ja) | 1998-08-25 | 1999-11-02 | 茨城日本電気株式会社 | 磁気ディスク装置のアドレス変換方法、磁気ディスク装置、アドレス変換プログラムを記録した記録媒体 |
JP4689137B2 (ja) | 2001-08-08 | 2011-05-25 | 株式会社日立製作所 | リモートコピー制御方法、及びストレージシステム |
US6477543B1 (en) * | 1998-10-23 | 2002-11-05 | International Business Machines Corporation | Method, apparatus and program storage device for a client and adaptive synchronization and transformation server |
US6209002B1 (en) | 1999-02-17 | 2001-03-27 | Emc Corporation | Method and apparatus for cascading data through redundant data storage units |
JP2000305856A (ja) | 1999-04-26 | 2000-11-02 | Hitachi Ltd | ディスクサブシステム及びこれらの統合システム |
US6539462B1 (en) | 1999-07-12 | 2003-03-25 | Hitachi Data Systems Corporation | Remote data copy using a prospective suspend command |
US7203732B2 (en) | 1999-11-11 | 2007-04-10 | Miralink Corporation | Flexible remote data mirroring |
TW536672B (en) * | 2000-01-12 | 2003-06-11 | Hitachi Ltd | IC card and microcomputer |
US6601187B1 (en) | 2000-03-31 | 2003-07-29 | Hewlett-Packard Development Company, L. P. | System for data replication using redundant pairs of storage controllers, fibre channel fabrics and links therebetween |
US6658540B1 (en) | 2000-03-31 | 2003-12-02 | Hewlett-Packard Development Company, L.P. | Method for transaction command ordering in a remote data replication system |
JP2001306414A (ja) | 2000-04-25 | 2001-11-02 | Hitachi Ltd | 記憶装置のリモートコピーシステム |
US6383482B1 (en) * | 2000-08-24 | 2002-05-07 | Vitacost.Com, Inc. | Weight loss composition containing green tea, hydroxycitric acid, 5-hydroxytryptophan, glucomannan, picolinate and lactobacillus |
US6665812B1 (en) | 2000-12-22 | 2003-12-16 | Emc Corporation | Storage array network backup configuration |
US6976139B2 (en) * | 2001-11-14 | 2005-12-13 | Emc Corporation | Reversing a communication path between storage devices |
US6701392B1 (en) * | 2001-11-14 | 2004-03-02 | Emc Corporation | Hierarchical approach to indentifying changing device characteristics |
US6728898B2 (en) * | 2002-03-06 | 2004-04-27 | Marathon Technologies Corporation | Producing a mirrored copy using incremental-divergence |
JP2003316616A (ja) * | 2002-04-24 | 2003-11-07 | Hitachi Ltd | 計算機システム |
JP4704659B2 (ja) * | 2002-04-26 | 2011-06-15 | 株式会社日立製作所 | 記憶装置システムの制御方法および記憶制御装置 |
US7134044B2 (en) | 2002-08-16 | 2006-11-07 | International Business Machines Corporation | Method, system, and program for providing a mirror copy of data |
US7024528B2 (en) | 2002-08-21 | 2006-04-04 | Emc Corporation | Storage automated replication processing |
JP4393762B2 (ja) | 2002-12-19 | 2010-01-06 | 株式会社日立製作所 | データベース処理方法及び装置並びにその処理プログラム |
US7065589B2 (en) | 2003-06-23 | 2006-06-20 | Hitachi, Ltd. | Three data center remote copy system with journaling |
US7188222B2 (en) | 2003-09-29 | 2007-03-06 | International Business Machines Corporation | Method, system, and program for mirroring data among storage sites |
US7412576B2 (en) | 2004-12-08 | 2008-08-12 | Hitachi, Ltd. | Remote copy system having multiple data centers |
-
2003
- 2003-11-26 JP JP2003394921A patent/JP2005157712A/ja active Pending
-
2004
- 2004-03-31 US US10/816,572 patent/US7055011B2/en not_active Expired - Fee Related
- 2004-06-01 DE DE602004012220T patent/DE602004012220T2/de not_active Expired - Lifetime
- 2004-06-01 EP EP04012936A patent/EP1536337B1/en not_active Expired - Fee Related
- 2004-11-26 CN CNB2004100961062A patent/CN100456256C/zh not_active Expired - Fee Related
- 2004-11-26 CN CN2008101869288A patent/CN101426025B/zh active Active
-
2006
- 2006-02-14 US US11/354,671 patent/US7305531B2/en not_active Expired - Fee Related
-
2007
- 2007-11-06 US US11/935,780 patent/US7809909B2/en not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2016503552A (ja) * | 2013-03-14 | 2016-02-04 | 株式会社日立製作所 | ディザスタリカバリ仮想化の方法及び装置 |
Also Published As
Publication number | Publication date |
---|---|
DE602004012220T2 (de) | 2009-03-19 |
US20060168146A1 (en) | 2006-07-27 |
EP1536337B1 (en) | 2008-03-05 |
EP1536337A3 (en) | 2006-05-03 |
CN100456256C (zh) | 2009-01-28 |
CN101426025A (zh) | 2009-05-06 |
CN1637714A (zh) | 2005-07-13 |
US20080065848A1 (en) | 2008-03-13 |
US7305531B2 (en) | 2007-12-04 |
CN101426025B (zh) | 2013-02-13 |
DE602004012220D1 (de) | 2008-04-17 |
EP1536337A2 (en) | 2005-06-01 |
US7055011B2 (en) | 2006-05-30 |
US7809909B2 (en) | 2010-10-05 |
US20050114730A1 (en) | 2005-05-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7305531B2 (en) | Remote copy network | |
JP4689137B2 (ja) | リモートコピー制御方法、及びストレージシステム | |
US8285824B2 (en) | Storage system and data replication method that refuses one or more requests for changing the first logical configuration information until the first storage apparatus and second storage apparatus are synchronized | |
US7472173B2 (en) | Remote data copying among storage systems | |
JP4963808B2 (ja) | 記憶制御システム | |
JP4382602B2 (ja) | リモートコピーシステム | |
US20060129772A1 (en) | Data processing method and system | |
JP2002312189A (ja) | クラスターシステムにおける遠隔ミラーを使用した障害通知方法及びシステム | |
US7987154B2 (en) | System, a method and a device for updating a data set through a communication network | |
JP2007052772A (ja) | データ複製システム並びにデータ移行方法 | |
US7213114B2 (en) | Remote copy for a storage controller in a heterogeneous environment | |
JP2002014777A (ja) | データ移行方法並びにプロトコル変換装置及びそれを用いたスイッチング装置 | |
JP2006127217A (ja) | 計算機システムおよび計算機システムの制御方法 | |
JP2006309506A (ja) | リモートコピー処理方法、プログラム及び装置 | |
US7167962B2 (en) | Remote copy for a storage controller with reduced data size | |
JP2010020410A (ja) | リモートコピーシステム及びリモートコピー方法 | |
JP4080970B2 (ja) | パス切替えを提供するスイッチ | |
JP2004272884A (ja) | 複数リモートストレージでのリモートコピー停止後のデータ同期化方式 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20051128 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20051128 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060209 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060209 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20060523 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20071012 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081022 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081126 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090126 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20090212 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090414 |