JP2005182130A - リモートコピー制御方法 - Google Patents
リモートコピー制御方法 Download PDFInfo
- Publication number
- JP2005182130A JP2005182130A JP2003417863A JP2003417863A JP2005182130A JP 2005182130 A JP2005182130 A JP 2005182130A JP 2003417863 A JP2003417863 A JP 2003417863A JP 2003417863 A JP2003417863 A JP 2003417863A JP 2005182130 A JP2005182130 A JP 2005182130A
- Authority
- JP
- Japan
- Prior art keywords
- identifier
- volume
- storage device
- command
- list
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/065—Replication mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
- G06F3/0605—Improving or facilitating administration, e.g. storage management by facilitating the interaction with a user or administrator
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2058—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring using more than 2 mirrored copies
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
- G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
- G06F11/2071—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring using a plurality of controllers
Abstract
【解決手段】ストレージ制御装置に形成されるボリュームのリモートコピーを行うリモートコピー制御方法において、ストレージ装置DTに対するコマンドの伝達経路となる中継用のストレージ装置DIの識別子と、ストレージ装置DIのうちホスト計算機に接続されたストレージ装置DPの識別子を判別する情報とを登録したルート情報を含むルートリストからストレージ装置DTの識別子を含むルート情報を検索し、このルート情報で表されるストレージ装置DPの識別子を求めるステップと、求められた識別子に対応するストレージ装置DPに対して、ストレージ装置DIの識別子とストレージ装置DTの識別子とを入力情報に含んだボリュームVTのリモートコピーコマンドを発行するステップとを有する。
【選択図】 図2
Description
本発明の他の目的は、ユーザがホストコマンドやスクリプトを記述したり、書き換えたりする際の手間を削減することにある。
を有して構成される。
好ましい例では、ホスト計算機は、上記記憶装置及び処理装置を有し、記憶装置は更に上記識別子の取得手段を実現するためのプログラムを格納し、かつこの処理装置でプログラムを実行することにより上記取得手段を実現する。
図1は、一実施例に係るストレージシステムのハードウェア構成の一例を示す図である。
図1において、第一のホスト計算機100aおよび第二のホスト計算機(単にホストという)100cは、それぞれ中央処理装置101、主記憶装置102、チャネルなどの入出力インタフェース103を備えており、ネットワークや通信回線などの通信路104を介してディスク制御装置(以下単にDKCという)110と接続される。
なお、ホスト100は最低1つあればよく、例えばホスト100cは無くてもよい。また、第三の他のホスト100があってもよい。また、DKC110は、互いに接続されたDKC110の組が最低1つあればよい。例えば、DKC110cは無くてもよく、DKC110aと110cとの接続は無くてもよい。図示以外の第三の他のDKC110があってもよい。
ホスト100a、100cの主記憶装置102には、同一DKC110内または異なるDKC110間のボリューム115のペアを定義するボリュームペアリスト120、ホスト100とDKC110間のコマンドパスの有無を定義するホストパスリスト130、異なるDKC110間のコマンドパスの有無を定義するDKCパスリスト140、各ホスト100から各DKC110までのコマンドパスのルートを定義するルートリスト150、ボリューム115間のリモートコピー処理を要求するためのホストコマンドを記述したスクリプト160がそれぞれテーブル形式で格納される。
通常、これらのリスト及びプログラムを外部記憶装置(図示せず)にファイルとして保存しておき、必要なときに主記憶装置102にロードして実行される。
図において、リスト120aは、DKC110a内のボリュームとDKC110b内のボリュームとのペアリストである。リスト120aには、リスト120を識別するための識別子"Pair AB"と、ボリューム115aとボリューム115cとがペアであることを示すペア定義と、ボリューム115bとボリューム115dがペアであることを示すペア定義が含まれている。ペア定義には、双方のボリュームの識別子、例えばデバイス番号(ボリューム115aの場合はVA1)を"dev#="に続けて記述し、ボリューム115の属するDKC110の識別子、例えばDKC110の製造番号(DKC110aの場合はDA)を"seq="に続けて記述する。
また、リスト120a〜120cは、リストに含まれる各ボリューム115のペアの双方を一意に識別できる情報が含まれていれば、図3に示すようなリスト120a〜120cに示す形式には限定されない。例えば、主記憶装置102上の配列に記憶された形式やそのダンプ形式でもよい。各ボリューム115が接続されたアダプタ114の識別情報など他の情報を含んでいてもよい。
まず、ペアの一方のDKC識別子とボリューム識別子とを、ホストの端末装置のフィールドやコマンドやGUI画面のダイアログなどから入力する(ステップ203)。複数のボリュームを一括して定義するためにボリューム数も入力できる。キー入力やGUI画面のメニュー選択やボタンクリックが発生したときに、他のリスト120の識別名を入力させ、他のリスト120から、各ペア定義のプライマリ定義をコピーすることもできる(ステップ201〜202)。例えば、リスト120cを作成するとき、"Pair AB"を入力させて、リスト120aからボリューム115aとボリューム115bとのプライマリ定義をコピーする。同様に、セカンダリ定義の取り込み要求であれば(ステップ204)、他のリスト120の識別名を入力させ、他のリスト120のセカンダリ定義をコピーし(ステップ205)、取り込み要求でなければ、各プライマリ定義に対応したセカンダリボリュームのDKC識別子とボリューム識別子とを入力させる(ステップ206)。最後に、入力された情報から図3の形式でファイルに出力する(ステップ207)。ファイルはホスト100に接続されたDKC110のボリューム内に格納される。
ホストパスリスト130は、ホスト100とDKC110間におけるコマンドパスの存在の有無を判別するための情報である。リスト130は、ボリュームペア制御処理700を実行するホスト100から、DKCコマンドを投入するDKC110を識別するために、リスト150を作るために利用される。パス定義を示すタグ"<path>"と"</path>"との間には、"host="に続けてホスト100の識別子を記述し、"DKC="に続けてそのホスト100とコマンドパスがあるDKC110の識別子を指定する。例えば、図5において、ホスト識別子がHAであるホスト100aとDKC110a間にパスがあり、ホスト識別子がHCであるホスト100cとDKC110c間にパスがあることを示す。このホスト識別子は、ユーザがホストごとに付けた名称であるが、ホスト100内から収集したCPUIDや、OSの初期設定パラメータで識別子を定義してもよい。
なお、リスト130の形式は、DKC110の識別子と、そのDKC110に対してコマンドパスがあるホスト100の識別子の一覧が分かる形式であれば、図5に示す形式でなくてもよい。
まず、抽出対象とするリスト120の一覧を取得する(ステップ301)。これは、リスト120を識別するID(例えば図3のリスト120aのPairAB)をロードしたり、又はリスト120の名称の一覧を記述したファイルをDKC内のボリュームからロードしたり、或いはリスト120のIDや名称をホスト100の端末装置のGUI画面から表示、入力することにより取得する。
次に、一覧中の全てのリスト120のプライマリ定義とセカンダリ定義から、異なるDKC110の識別子を全て抽出する(ステップ302)。例えば、図3の3つのリスト120a〜cからは、"seq #="に続くワードを抽出して同一名称を排除し、DA、DB、DCという3つの識別子を抽出する。次に、抽出したDKC110の識別子を端末装置の画面に表示してそれぞれの識別子のDKC110が接続されているホスト100の識別子を入力する(ステップ303)。なお、ホスト100の識別子をファイルに出力して、リスト130をユーザに作成させてもよい。
処理300bからDKC110の一覧を受信し(ステップ321)、一覧中の全てのDKC110に対して、ステップ322〜324を実行する。即ちDKC情報の取得などDKC110やボリュームの構成や状態に影響を与えない非リモートDKCコマンドを各DKC110に発行する(ステップ322)。そして発行したコマンドが成功すれば(ステップ323)、そのDKC110を成功したDKC110のリストに加える(ステップ324)。全てのDKC110に対してDKCコマンドを実行した後(ステップ325)、成功したDKC110のリストを処理300bに送信する(ステップ326)。
DKCパスリスト140は、DKC110間のコマンドパスの存在を判別するための情報であり、ルートリスト150を作成するために用いられる。パス定義を示すタグ"<path>"と"</path>"の間には、"DKC="に続けてコマンドパスがある双方のDKC110の識別子を指定する。
図8に示す例では、DKC110aとDKC110b間、DKC110bとDKC110c間、DKC110aとDKC110c間にそれぞれコマンドパスがあることを示している。
なお、リスト140は、コマンドパスがある双方のDKC110の識別子の組の一覧がわかる形式であれば、図8に示す形式でなくてもよい。
まず、ホストパスリスト作成処理300と同様に、対象となるリスト120の一覧を取得する(ステップ401)。次に、一覧中の全てのリスト120から、プライマリ定義のDKC110の識別子とセカンダリ定義のDKC110の識別子とのいずれかが異なるすべての組を抽出する。例えば、図3に示す3つのリスト120から、DAとDB,DBとDC,DAとDCという3つの組を抽出し(ステップ402)、抽出したペアのプライマリのDKC識別子とセカンダリのDKCを持つエントリをDKCパスリスト140に加える(ステップ403)。最後に、DKCパスリスト140内の各組のDKC110間のコマンドパスまたはアダプタ114間の論理パスを形成するDKCコマンドをDKC110に投入する(ステップ404)。
ルートリスト150aは、あるDKC110からホスト100へのコマンドパス経路の情報を表す。リスト150a内の各行には、少なくとも、ホスト100の識別子と、そのホスト100からパスのあるDKC110の識別子と、DKC110からパスがあるDKC110の識別子の組み合わせが含まれる。この識別子は任意の数である。
例えば、最初の行にあるホストルート「HA DA−DB−DC」に関して、ホストHAからルートの末端のDKC110c内のボリューム115に対する要求を行う場合には、DKC110aに対してDKCコマンドを投入し、DKC110bを経由してDKC110cにDKCコマンドを転送する必要があることを示している。
更に好ましくは、ルートリスト150aには、更にルートの優先順位に関する情報を含む。優先順位とは、DKCに対してホストがコマンドを発行する優先度であり、例えばエラーの発生率の高いDKCは優先順位を低くするが如きである。この優先順位の設定は、ユーザによる入力値として設定してもよいし、エラー発生率などの情報をロードして付加してもよい。
まず、ホストパスリスト130をコピーして、ホストパスリスト130をルートリスト150の初期リストとし(ステップ501)、リスト内の各ルートについて検索する。その結果、検索未完了のルートがあれば、未完了のマークをつける。そしてルートリスト150をチェックして、未完了マークの付いたルートがあれば(ステップ502)、そのルートの終端のDKC110の識別子を選ぶ(ステップ503)。選択したルートの終端のDKCの識別子を識別子Sとする。
識別子Sのタイプ情報を取得していなければ(ステップ504)、DKCコマンドを終端DKCに対して発行して終端DKCから終端DKCがリモートDKCコマンドをサポートしているかどうかを示す情報を取得する(ステップ505)。そしてその終端DKCがリモートDKCコマンドをサポートしているか否かを確認し(ステップ506)、サポートしていなければ検索未完了マークをはずす(ステップ509)。
一方、識別子Dを付加しなかった場合は(ステップ511)、検索未完了マークをはずす(ステップ509)。ステップ503〜513を検索未完了マークの付いたルートがなくなるまで繰り返し実行した後、リスト150bの形式(図18)に変換する。リスト150aの形式に変換するときは、さらに、各ルートに対して、ルートのサブセットを作る。
スクリプト160には、ボリュームペア処理700(或いは処理800(図21))に対して処理を要求するためのホストコマンドが含まれる。1行目の"LOADPAIR ID(Pair AB)"は、Pair ABの識別子をもつボリュームペアリスト120aを主記憶装置102上にロードし、処理700が認識できるようにする要求であることを示す。2行目に示す"LOADROUTE ID(3DC) HOST(HA)"は、識別子3DCをもつルートリスト150をロードし、ホスト識別子がHAであることを処理700に伝える要求であることを示す。ただし、処理700でCPUIDやOSの初期設定パラメータを取得し、ホスト識別子とする場合は、オペランド"HOST(HA)"は不要である。3行目の"ESTABLISH ID(Pair AB)"は、ボリュームペアリスト120a内のボリュームペアのリモートコピーを開始する要求であることを示す。
尚、スクリプト160には、リモートコピー開始以外のホストコマンドが含まれていてもよい。1行目を記述するかわりに、3行目を実行した時点でリスト120aを主記憶装置にロードしてもよい。リスト120内にリスト150のIDを記述し、2行目を記述するかわりに、リスト120aをロードした時点でリスト150をロードしてもよい。
ホストコマンドのオペランドに指定されたボリュームグループのボリュームペアリスト120を、それが格納されている外部記憶装置から主記憶装置102にロードし(ステップ701)、オペランドやCPUIDや初期設定パラメータからホスト識別子を取得する(ステップ702)。同様にしてルートリスト150を主記憶装置102にロードし、ステップ702で取得したホスト識別子が含まれないルートを除外し(ステップ703)、図13の形式であれば図10の形式に変換し(ステップ704)、ボリュームペアリスト120内の全ペアを処理するまで、ボリューム制御コマンド作成処理710を繰り返す(ステップ705)。
ペアの同期方向、即ちボリューム間でのコピーする方向を問い合わせ、主記憶装置102に記録する(ステップ711)。そしてDKCコマンドの発行先ボリュームがプライマリであるかセカンダリであるかを、DKCコマンド種別とペア方向により判別し(ステップ712)、DKCコマンド発行先ボリュームが属する発行先DKCをボリュームペアリスト120から求め(ステップ713)、発行先DKCを末尾に持つルートのうち、優先順位の最も高いルートをルートリスト150から求める(ステップ714)。ただし、プライマリとセカンダリが固定であればステップ711〜712の処理は無くてもよい。
まだ実行していないルートがあれば(ステップ721)、ステップ715に戻り、再び別のルートでDKCコマンド実行を試みる。全てのルートで実行したときにスクリプトにエラーコードを返す。ただし、ステップ719〜721を必ずしも行わなくてもよく、DKC110からエラー応答があった時点でホストコマンド発行元にエラーコードを返してもよい。
(A)は、一実施形態におけるリモートDKCコマンドの入力情報の例180aを示し、(B)は、他の実施形態におけるリモートDKCコマンドの入力情報の例180bを示す。
入力情報180a及び180bは、共にターゲットボリュームの識別子182と、ターゲットボリュームが属するDKC110の識別子183を含む。しかし、入力情報180aには、更にルート上のDKC110の識別子181を1つ乃至複数含む点が相違する。
あるホストでボリュームペアリストを作成し、ボリュームペアリストとルートリストを運用が想定される各ホストに転送すれば、再定義をすることなく複数のサイト・複数の運用形態(通常/ failover/ failback)で同じ定義情報を利用しリモートコピーのスクリプトも実行することができる。また、リンク障害時に、スクリプト内で記述しなくても、別のパスにてコマンドを自動再投入することができる。
図2に示す実施形態と比べると、ルートリスト150の作成処理をホスト100ではなく、DKC110で行う点が相違する。このルートリスト150はDKC110の共有メモリ113に格納される。
即ち、ホスト100の主記憶装置102上には、上記実施形態と同じリスト120、リスト130、スクリプト160、ボリュームペアリスト定義処理200、ホストパスリスト作成処理300、ホストパス検出処理320、DKCパスリスト作成処理400が存在する。また、上記実施形態のボリュームペア制御処理700とは異なるボリュームペア制御処理800が主記憶装置102上に存在する。また、すべてのDKC110内の共有メモリ113上には、他のDKC110とのDKC110単位またはアダプタ114単位のパス情報141が存在する。また、1つ乃至複数のDKC110には、ルートリスト150と、このリスト150を作成するルートリスト作成処理600、他のDKC110にDKCコマンドを転送するコマンド転送処理820が存在する。
まず、図6に示す方法と同様に、リスト120の一覧を取得し(ステップ311)、DKC110の一覧を抽出する(ステップ312)。次に、DKC110のいずれかが接続されているホスト100(処理300を実行しているホスト100も含む)に対して、DKC110の一覧を転送し、ホストパス検出処理320の実行を依頼する(ステップ313)。そのホスト100からパスがあるDKC110の一覧を受信し(ステップ314)、受信した情報(ホスト100とDKC110の組)からリスト130を作成する(ステップ315)。
この例のルートリスト150bは、図10に示すルートリスト150aの例の変形例であり、一部が重複するルート(例えば、DA−DB−DCとDA−DB)は、最長のルートのみが記述される。ホスト識別子と優先順位に続いて、ルート上のDKC110の識別子をルート順に記載する。
なお、ルートリスト150bは、ホスト識別子と、ホスト100から各DKC110へ経由するDKC110の識別子の一覧が分かる形式であれば、図10や図18に示す形式でなくてもよく、他の情報を含んでいてもよい。例えば、主記憶装置102上の配列でもよい。ファイルに保管するときは図18の形式とし、ファイルをロードするときに図10の形式に変換してもよい。また、図10の形式に変換したのち、処理700が実施されるホスト100を含まないルートを消去してもよい。
この例は、図11の変形例(方法1)であり、ホスト内ではなく、DKC内でルートリストを作成する。DKC内で作成すると、ホスト内で作成することに比べて、ハード内の情報とホスト内情報の不一致が無くなり、ホスト内処理が簡易化される。アダプタ間のパスをDKCに対して定義すれば、ルートが生成される。ホストからはルートをDKCコマンドに付加する必要がなくなり、相手先さえ指定すればよい。
自己DKC内のパス情報141に記載された他のDKC110に対してルート取得要求を行う(ステップ601)。コマンドの要求元がホストでなければ(ステップ602)、ルートに自己DKCの識別子を加えて送信する(ステップ603)。自己DKCがリモートDKCコマンドをサポートしており(ステップ604)、かつ自己DKC110内のパス情報141内に、ルート内のどのDKCとも一致しないDKC110があれば(ステップ605)、そのDKC110に対して、ルートを送信してルート取得要求を行う(ステップ606)。
コマンドの要求元がホストでなければ(ステップ607)、受信したルートを送信する(ステップ608)。そして受信したルートをルートリスト150に加える(ステップ609)。 また、他のDKCからルート取得要求を受信したDKCでも、同様にステップ601〜609の処理を実行する。
処理600aでは、各DKCの処理は同じであったが、処理600bでは、ホストと接続されたDKC(正DKC)と、ホストに接続されていないDKC(副DKC)との処理が異なる。正DKCは、副DKCに対してパス情報取得要求を行い、正DKC内でルートを作成する。
他のDKC110からパス情報141の取得要求を受信したDKC110では、要求を受信すると(ステップ621)、送信済でなければ(ステップ622)、パス情報141を送信し(ステップ623)、情報141に記載された各DKC110に情報141の取得要求を送信し(ステップ624)受信した情報141を転送する(ステップ625)。
ホストでは、ボリューム制御処理700と同様に、指定されたボリュームグループのボリュームペアリスト120をロードし(ステップ801)、ホスト識別子を取得する(ステップ802)。同様にホストパスリスト130をロードし(ステップ803)、ボリュームペアリスト120内の全ペアを処理するまでボリューム制御コマンド作成処理810を繰り返す(ステップ804)。
ホストでは、ボリューム制御コマンド作成処理710と同様に、まずペアの同期方向を問い合わせて記録し(ステップ811)、DKCコマンドの発行先ボリュームがプライマリであるかセカンダリであるかを判別する(ステップ812)。次に、DKCコマンドのターゲットボリュームが属するターゲットDKCをリスト120から求めてリモートDKCコマンドの入力情報180b内に記述し(ステップ813)、リスト130に記載されたDKC110に対してリモートDKCコマンドを発行する(ステップ814)。リモートDKCコマンドを受信したDKC110は、処理820を実行してルートに従ってターゲットDKCにDKCコマンドを転送し、実行結果をホスト100に返す。受信した実行結果は、ホストコマンド発行元スクリプトに返される(ステップ815)。
リモートDKCコマンドを受信したDKCでは、DKCコマンドの入力情報に記述されたターゲットDKCの識別子と自己DKCの識別子が同じかを判定し(ステップ821)、両者が同じならば、コマンドを実行して結果を返却する(ステップ822)。両者のコマンドが同じでなければ、DKC110内のルートリスト150を参照して自己DKCの識別子のあるルートを抽出し(ステップ823)、ルート上で自己DKCの次にあるDKCに対してコマンドを転送する(ステップ824)。そしてそのDKCから実行結果を受信して(ステップ825)、終了する。
103:入出力インタフェース、 104:通信路、 110:ディスク制御装置、112:インタフェース、 113:共有メモリ、 114:ディスクアダプタ、115:ディスクボリューム、 120:ボリュームペアリスト、
130:ホストパスリスト、 140:DKCパスリスト140、
150:ルートリスト、 160:スクリプト、
200:ボリュームペアリスト作成処理 300:ホストパスリスト作成処理、
400:DKCパスリスト作成処理、 500:ルート作成処理、
700:ボリュームペア制御処理。
Claims (20)
- ストレージ装置に形成されるボリュームのリモートコピーを行うリモートコピー制御方法において、
該ストレージ装置の少なくとも1つに接続されたホスト計算機に対するストレージ装置内のリモートコピー対象のボリューム・ペアのコピー元またはコピー先のボリュームVTの識別子と、該ボリュームVTが属するストレージ装置DTの識別子とを登録したボリュームペアリストから、該ボリュームVTが属するストレージ装置DTの識別子を求めるステップと、
該ストレージ装置DTに対するコマンドの伝達経路となる中継用のストレージ装置DIの識別子と、該ストレージ装置DIのうち該ホスト計算機に接続されたストレージ装置DPの識別子を判別する情報とを登録したルート情報を含むルートリストからストレージ装置DTの識別子を含むルート情報を検索し、該ルート情報で表されるストレージ装置DPの識別子を求めるステップと、
求められた該識別子に対応する該ストレージ装置DPに対して、該ストレージ装置DIの識別子と該ストレージ装置DTの識別子とを入力情報に含んだ該ボリュームVTのリモートコピーコマンドを発行するステップと、
を有することを特徴とするリモートコピー制御方法。 - 請求項1記載の制御方法において、
該ストレージ装置DPからリモートコピーコマンドのエラー情報を受信するステップと、
該ルートリストを検索して、該ストレージ装置DTの識別子を含み、かつエラー情報を受信したルート情報とは異なるルート情報に表される、コマンドの伝達経路となる中継用のストレージ装置EIの識別子と、ストレージ装置EIのうち該ホスト計算機に接続されたストレージ装置EPの識別子とを求めるステップと、
該ストレージ装置EPに対して、ストレージ装置EIの識別子と該ストレージ装置DTの識別子とを入力情報に含んだ該ボリュームVTのリモートコピーコマンドを発行するステップと、
を含むことを特徴とするリモートコピー制御方法。 - 請求項2記載の制御方法において、
前記ルートリスト内のルート情報に優先順位を設定するステップと、
エラー情報を受信したときのルート情報に設定された優先順位を下げるステップと、
を含むことを特徴とするリモートコピー制御方法。 - 請求項1記載の制御方法において、
該ホスト計算機を一意に識別するホスト識別子を取得するステップと、
該ルート情報に該ホスト識別子を付加するステップと、
該ルート情報に付加されたホスト識別子と該ホスト計算機のホスト識別子が一致しないルート情報を該ルートリストから削除するステップと、
を含むことを特徴とするリモートコピー制御方法。 - 請求項1記載の制御方法において、
該ボリュームVTの正副属性を該ストレージ装置DTに問い合わせるステップと、
該ボリュームVTの正副属性とホストコマンドが必要とする正副属性が一致しないとき、該ボリュームVTとペアになっているボリュームVSを前記ボリュームペアリストから求めるステップと、
該ボリュームVSが属する該ストレージ装置に対してリモートコピーコマンドを発行するステップと、
を含むことを特徴とするリモートコピー制御方法。 - 複数のディスク制御装置に形成されるボリュームに対するコマンドの転送において、
ディスク制御装置の少なくとも1つに接続されたホスト計算機に対するホストコマンドの識別子から識別される、ディスク制御装置内のリモートコピー対象のボリューム・ペアのコピー元またはコピー先のボリュームVTの識別子と該ボリュームVTが含まれるディスク制御装置DTの識別子とを登録したボリュームペアリストから、異なるディスク制御装置の識別子を抽出するステップと、
抽出されたディスク制御装置の識別子の中で該ホスト計算機からコマンドを直接投入できるディスク制御装置D1を求めるステップと、
該ボリュームペアリストに含まれるボリューム・ペアとなるディスク制御装置の識別子Sと識別子Dとの少なくとも一方が他のペアと異なるペアのディスク制御装置の識別子の組から構成されるDKCパスリストを作成するステップと、
該DKCパスリストから、識別子D1を含む組を求めるステップと、
該ホスト計算機の識別子と、該識別子D1と、該識別子D1を含む組に含まれる識別子D1とは異なるディスク制御装置の識別子D2とを含むルート情報を含んだルートリストを作成するステップと、
を有することを特徴とするディスク制御装置のコマンドパス制御方法。 - 請求項6記載のコマンドパス制御方法において、
該ディスク制御装置を含む組に含まれる前記該ディスク制御装置D1とは異なるディスク制御装置D2から、異なるディスク制御装置を経由してリモートコピーコマンドを受信できるかどうかを識別する情報を取得するステップと、
受信可能な場合のみ該ディスク制御装置D2の識別子を含むルート情報をルートリストに追加するステップと、
を含むことを特徴とするディスク制御装置のコマンドパス制御方法。 - 請求項6記載のコマンドパス制御方法において、
前記ホスト計算機HPから、指定されたすべての前記ボリュームペアリストに含まれるディスク制御装置Dの識別子を抽出するステップと、
該ディスク制御装置Dの識別子のリストを、該ホスト計算機HPを含むすべてのホスト計算機HRに転送するステップと、
すべての前記該ディスク制御装置Dに対してリモートコピーコマンドを発行し、成功したディスク制御装置D1の識別子とリモートコピーコマンドを発行したホスト計算機HRの識別子とを該ホスト計算機HPに転送するステップと、
転送された該ディスク制御装置D1の識別子と該ホスト計算機HRの識別子とを含むホストパスリストを作成するステップと、
を含むことを特徴とするコマンドパス制御方法。 - 請求項6記載のコマンドパス制御方法において、
該ホスト計算機を一意に識別するホスト識別子と、該ホスト計算機からコマンドを直接投入できるディスク制御装置DPの識別子との組を1つ乃至複数含んだホストパスリストに含まれる該ディスク制御装置DPの識別子をすべて求めるステップと、
該該ディスク制御装置DPの論理パス情報PPを取得するステップと、
該論理パス情報PPに含まれるディスク制御装置DIの識別子を抽出するステップと、
該ディスク制御装置DPの識別子と該ディスク制御装置DIの識別子とを含むルート情報を生成するステップと、
該ディスク制御装置DIの論理パス情報PIを取得するステップと、
該論理パス情報PIに含まれるディスク制御装置DTの識別子を抽出するステップと、
該ルート情報に、該ディスク制御装置DTの識別子を付加するステップと、
を含むことを特徴とするコマンドパス制御方法。 - 請求項1記載のリモートコピー制御方法において、
指定されたボリュームペアリストに含まれるボリューム・ペアのコピー先のボリュームVTの識別子とボリュームVTが属するストレージ装置装置DTをすべて複写したボリュームペアリストを作成するステップと、
ボリュームVTとペアになるボリュームVSの識別子と、ボリュームVSが属するストレージ装置VTを取り込むステップと
を含むことを特徴とするリモートコピー制御方法。 - 請求項1記載のリモートコピー制御方法において、
該ストレージ装置の少なくとも1つに接続されたホスト計算機に対するホストコマンドのオペランドに記載された識別子から識別される、該ストレージ装置内のリモートコピー対象ボリューム・ペアのコピー元またはコピー先のボリュームVTの識別子と該ボリュームVTが属するアダプタATの識別子とを登録したボリュームペアリストから、少なくとも一方のアダプタATの識別子が異なるボリューム・ペアをすべて抽出するステップと、
抽出されたボリューム・ペアに含まれるアダプタ間の論理パスを形成するコマンドを発行するステップと、
を含むことを特徴とするリモートコピー制御方法。 - ディスク制御装置内のボリュームに対するコマンドの伝達方法において、
該ディスク制御装置内のリモートコピー対象ボリューム・ペアのコピー元またはコピー先のボリュームVTの識別子とボリュームVTが属するアダプタATの識別子とを1つ乃至複数登録した、指定されたすべてのボリュームペアリストから、少なくとも一方のアダプタATの識別子が異なるボリューム・ペアをすべて抽出するステップと、
抽出した前記ボリューム・ペアに含まれる2つのアダプタ間の論理パスを形成するコマンドを発行するステップと、
を含むことを特徴とするコマンドの伝達方法。 - ディスク制御装置内のボリュームに対するコマンドの伝達方法において、
ディスク制御装置DPと論理パスのあるディスク制御装置DIに対してディスク制御装置DPの識別子を含むルート情報RPを送信するステップと、
該ルート情報RPを受信したディスク制御装置DIにおいて、該ルート情報RPにディスク制御装置DIの識別子を付加したルート情報RIをディスク制御装置DPに送信するステップと、
該ルート情報RIを受信した該ディスク制御装置DPにおいて、該ルート情報を該ディスク制御装置DP内のルートリストに付加するステップと、
を含むことを特徴とするコマンドの伝達方法。 - ストレージ装置内のボリュームに対するコマンドの制御方法において、
ストレージ装置内のリモートコピー対象のボリューム・ペアのコピー元またはコピー先のボリュームVTの識別子を登録するボリュームペアリストを参照して、該ボリュームVTが属するストレージ装置DTの識別子を求めるステップと、
ホスト計算機に接続されたストレージ装置DPの識別子を登録するホストパスリストからストレージ装置DPの識別子を求めるステップと、
ストレージ装置DPに対して、該ストレージ装置DTの識別子を入力情報に含んだボリュームVTのリモートコピーコマンドを発行するステップと、
該リモートコピーコマンドを受信したストレージ装置DCの識別子と識別子DTとが一致しない場合に、ストレージ装置DCからリモートコピーコマンドを転送可能なストレージ装置DIの識別子のルート情報を登録したルートリストから該識別子DTを含むルート情報を求め、該ルート情報で表されるストレージ装置DIにリモートコピーコマンドを転送するステップと、
を含むことを特徴とするコマンドの制御方法。 - 転送機能付きリモートコピーコマンドを受信するステップと、
ディスク制御装置DCからリモートコピーコマンドを転送できるディスク制御装置DIの識別子のルートを表すルート情報を保持するステップと、
ディスク制御装置DCの識別子とリモートコピーコマンドの転送先となるボリュームが含まれるディスク制御装置DTとを照合するステップと、
該ルート情報からリモートコピーコマンドの転送先となるボリュームが含まれるディスク制御装置DTの識別子を含むルート情報を求めるステップと、
該ルート情報で表されるディスク制御装置DIにリモートコピーコマンドを転送するステップと、
を有することを特徴とするディスク制御装置のコマンドパスの制御方法。 - ホスト計算機から送られるコマンドを処理すると共に、ホスト計算機で利用されるデータを記憶するボリュームを備えた複数のストレージ装置を有し、該ストレージ装置間を接続してボリュームのリモートコピーを行うストレージシステムにおいて、
リモートコピーのコピー元またはコピー先のボリュームVTの識別子と、該ボリュームVTが属するストレージ装置DTの識別子とを保持するボリュームペアリスト、及び
該ホスト計算機の識別子と、該ストレージ装置DTの識別子と、該ホスト計算機から該ストレージ装置DTへのコマンドの伝達経路となる中継用のストレージ装置DIの識別子と、該ストレージ装置DIのうち前記ホスト計算機に接続された該ストレージ装置DPの識別子を判別する情報とを含むルート情報を保持するルートリストを格納する記憶装置と、
該ボリュームペアリストを参照してボリュームVTを含むストレージ装置DTの識別子を取得する手段と、
該ルートリストを参照して該ストレージ装置DTを含むルート情報を探し、該ルート情報に含まれる該ストレージ装置DPの識別子を取得する手段と、
取得された識別子に関連する該ストレージ装置DPに対して、該ストレージ装置DT内のボリュームVTのリモートコピーを要求する手段と、
を有するストレージシステム。 - 該ホスト計算機は、前記記憶装置及び処理装置を有し、該記憶装置は更に前記識別子の取得手段を実現するためのプログラムを格納し、かつ該処理装置で該プログラムを実行することにより前記取得手段を実現することを特徴とする請求項16記載のストレージシステム。
- 前記ボリュームペアリストは、該ホスト計算機が有する記憶装置に格納され、前記ルートリストは、少なくとも該ストレージ装置DTが有する記憶装置に格納され、かつ、
中継用の該ストレージ装置DIは、リモートコピーを要求するコマンドを受け、該ストレージ装置DPに転送する手段を有することを特徴とする請求項16記載のストレージシステム。 - ホスト計算機で利用されるデータを記憶するボリュームを備えた複数のストレージ装置を接続してボリュームのリモートコピーを行うリモートコピー制御方法において、
リモートコピーのコピー元またはコピー先のボリュームVTの識別子と、該ボリュームVTが属するストレージ装置DTの識別子とを登録するボリュームペアリストを主記憶措置にロードするステップと、
該ホスト計算機の識別子と、該ストレージ装置DTの識別子と、該ホスト計算機から該ストレージ装置DTへのコマンドの伝達経路となる中継用のストレージ装置DIの識別子と、該ストレージ装置DIのうち前記ホスト計算機に接続された該ストレージ装置DPの識別子を判別する情報とを含むルート情報を保持するルートリストを主記憶装置にロードするステップと、
該ボリュームペアリストを参照してボリュームVTを含むストレージ装置DTの識別子を取得するステップと、
該ルートリストを参照して該ストレージ装置DTを含むルート情報を探し、該ルート情報に含まれる該ストレージ装置DPの識別子を取得するステップと、
取得された識別子に関連する該ストレージ装置DPに対して、該ストレージ装置DT内のボリュームVTのリモートコピーするコマンドを発行するステップと、
を有するリモートコピー制御方法。 - ホスト計算機で処理されるデータを記憶するボリュームを備える複数のディスク制御装置を接続してボリュームのリモートコピーを行うためのコマンドを転送する方法において、
ディスク制御装置の少なくとも1つに接続されたホスト計算機に対するホストコマンドの識別子から識別される、ディスク制御装置内のリモートコピー対象となるボリューム・ペアのコピー元またはコピー先のボリュームVTの識別子と該ボリュームVTが含まれるディスク制御装置DTの識別子とを含むボリュームペアリストをメモリ内に用意するステップと、
該ボリュームペアリストから、異なるディスク制御装置の識別子を抽出し、抽出されたディスク制御装置の識別子の中で該ホスト計算機からコマンドを直接投入できるディスク制御装置D1を求めるステップと、
該ボリュームペアリストに含まれるボリューム・ペアとなるディスク制御装置の識別子Sと識別子Dとの少なくとも一方が他のペアと異なるペアのディスク制御装置の識別子の組から構成されるDKCパスリストをメモリ内に用意するステップと、
該DKCパスリストから、識別子D1を含む組を求めるステップと、
該ホスト計算機の識別子と、該識別子D1と、該識別子D1を含む組に含まれる識別子D1とは異なるディスク制御装置の識別子D2とを含むルート情報を含んだルートリストをメモリ内に用意するステップと、
該ルートリストを参照して該ディスク制御装置DTを含むルート情報を探し、該ルート情報に含まれるコピー先となる該ディスク制御装置DPの識別子を取得するステップと、
取得された識別子に関連する該ディスク制御装置DPに対して、該ディスク制御装置DT内のボリュームVTのリモートコピーコマンドを送るステップと、
を有するリモートコピーコマンドの転送方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003417863A JP4426275B2 (ja) | 2003-12-16 | 2003-12-16 | リモートコピー制御方法 |
US10/811,923 US7162580B2 (en) | 2003-12-16 | 2004-03-30 | Remote copy control method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003417863A JP4426275B2 (ja) | 2003-12-16 | 2003-12-16 | リモートコピー制御方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005182130A true JP2005182130A (ja) | 2005-07-07 |
JP4426275B2 JP4426275B2 (ja) | 2010-03-03 |
Family
ID=34650682
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003417863A Expired - Fee Related JP4426275B2 (ja) | 2003-12-16 | 2003-12-16 | リモートコピー制御方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7162580B2 (ja) |
JP (1) | JP4426275B2 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007047892A (ja) * | 2005-08-08 | 2007-02-22 | Hitachi Ltd | 計算機システム及び計算機システムの状態管理方法 |
JP2009245379A (ja) * | 2008-03-31 | 2009-10-22 | Hitachi Ltd | ストレージシステム及びストレージシステムの制御方法 |
JP2010176185A (ja) * | 2009-01-27 | 2010-08-12 | Hitachi Ltd | リモートコピーシステム及びパス設定支援方法 |
WO2021034302A1 (en) * | 2019-08-16 | 2021-02-25 | Hewlett-Packard Development Company, L.P. | Remote commands |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8230187B1 (en) * | 2009-07-06 | 2012-07-24 | Symantec Corporation | Techniques for integrating backup modules with virtualized storage |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5544347A (en) * | 1990-09-24 | 1996-08-06 | Emc Corporation | Data storage system controlled remote data mirroring with respectively maintained data indices |
JPH08328760A (ja) | 1995-06-01 | 1996-12-13 | Hitachi Ltd | ディスクアレイ装置 |
US6230200B1 (en) | 1997-09-08 | 2001-05-08 | Emc Corporation | Dynamic modeling for resource allocation in a file server |
US6195703B1 (en) | 1998-06-24 | 2001-02-27 | Emc Corporation | Dynamic routing for performance partitioning in a data processing network |
JP4689137B2 (ja) | 2001-08-08 | 2011-05-25 | 株式会社日立製作所 | リモートコピー制御方法、及びストレージシステム |
US6209002B1 (en) | 1999-02-17 | 2001-03-27 | Emc Corporation | Method and apparatus for cascading data through redundant data storage units |
US20020159458A1 (en) * | 2001-04-27 | 2002-10-31 | Foster Michael S. | Method and system for reserved addressing in a communications network |
JP2003044230A (ja) * | 2001-05-23 | 2003-02-14 | Hitachi Ltd | 記憶装置システム |
US20040081096A1 (en) * | 2002-10-28 | 2004-04-29 | Brocade Communications Systems, Inc. | Method and device for extending usable lengths of fibre channel links |
JP2004334574A (ja) | 2003-05-08 | 2004-11-25 | Hitachi Ltd | ストレージの運用管理プログラム、運用管理方法及び管理計算機 |
US20040254964A1 (en) | 2003-06-12 | 2004-12-16 | Shoji Kodama | Data replication with rollback |
-
2003
- 2003-12-16 JP JP2003417863A patent/JP4426275B2/ja not_active Expired - Fee Related
-
2004
- 2004-03-30 US US10/811,923 patent/US7162580B2/en not_active Expired - Fee Related
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007047892A (ja) * | 2005-08-08 | 2007-02-22 | Hitachi Ltd | 計算機システム及び計算機システムの状態管理方法 |
US8055863B2 (en) | 2005-08-08 | 2011-11-08 | Hitachi, Ltd. | Computer system and method of managing status thereof |
US8332602B2 (en) | 2005-08-08 | 2012-12-11 | Hitachi, Ltd. | Computer system and method of managing status thereof |
US8589649B2 (en) | 2005-08-08 | 2013-11-19 | Hitachi, Ltd. | Computer system and method of notifying error information of the computer system |
JP2009245379A (ja) * | 2008-03-31 | 2009-10-22 | Hitachi Ltd | ストレージシステム及びストレージシステムの制御方法 |
JP2010176185A (ja) * | 2009-01-27 | 2010-08-12 | Hitachi Ltd | リモートコピーシステム及びパス設定支援方法 |
US8161256B2 (en) | 2009-01-27 | 2012-04-17 | Hitachi, Ltd. | Remote copy system and path setting support method |
WO2021034302A1 (en) * | 2019-08-16 | 2021-02-25 | Hewlett-Packard Development Company, L.P. | Remote commands |
Also Published As
Publication number | Publication date |
---|---|
JP4426275B2 (ja) | 2010-03-03 |
US20050132156A1 (en) | 2005-06-16 |
US7162580B2 (en) | 2007-01-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7937546B2 (en) | Data duplication control method | |
US8560883B2 (en) | Remote copying management system, method and apparatus | |
JP4993913B2 (ja) | 記憶制御装置及びそのデータ管理方法 | |
CN100416538C (zh) | 动态修改通信路径的方法 | |
JP2894676B2 (ja) | 非同期式遠隔コピー・システム及び非同期式遠隔コピー方法 | |
US7594086B2 (en) | Storage system for copying data and storing in a plurality of storage devices | |
JP4842703B2 (ja) | ストレージシステム及びそのリカバリボリューム作成方法 | |
US6499112B1 (en) | Automatic stand alone recovery for peer to peer remote copy (PPRC) operations | |
EP1873645A1 (en) | Storage system and data replication method | |
US20080140966A1 (en) | Method for remote copy pair migration | |
US8161256B2 (en) | Remote copy system and path setting support method | |
JP2004252686A (ja) | 情報処理システム | |
JP5409799B2 (ja) | リモートコピーシステム及びリモートコピー制御方法 | |
JP4426275B2 (ja) | リモートコピー制御方法 | |
US20080294858A1 (en) | Storage system and data management method | |
WO2018042469A1 (en) | Information processing system | |
US20150195366A1 (en) | Switching device, non-transitory computer readable medium and zoning setting method | |
JP2005141381A (ja) | 記憶装置システム | |
JP2004178254A (ja) | 情報処理システム、ストレージシステム、記憶デバイス制御装置、及びプログラム | |
JPH11327989A (ja) | データベース管理装置、および、そのプログラムが記録された記録媒体 | |
US20240111638A1 (en) | Computer system and data control method | |
JP7315214B2 (ja) | 疎結合システム | |
JP2002132621A (ja) | ファイル転送装置およびファイル受信装置 | |
JP4394608B2 (ja) | ストレージシステム、コンピュータ、ストレージ装置、アクセスコントロール設定方法及びプログラム | |
JPH07154571A (ja) | 画像処理システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050805 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20050805 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080313 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080819 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081017 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090825 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091021 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20091117 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20091210 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4426275 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121218 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131218 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |