JPH10254787A - Guarantee processor for equivalence of duplex volume - Google Patents
Guarantee processor for equivalence of duplex volumeInfo
- Publication number
- JPH10254787A JPH10254787A JP9060792A JP6079297A JPH10254787A JP H10254787 A JPH10254787 A JP H10254787A JP 9060792 A JP9060792 A JP 9060792A JP 6079297 A JP6079297 A JP 6079297A JP H10254787 A JPH10254787 A JP H10254787A
- Authority
- JP
- Japan
- Prior art keywords
- equivalence
- volume
- assurance
- management table
- assurance processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Techniques For Improving Reliability Of Storages (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
【0001】[0001]
【発明の属する技術分野】本発明は二重化ボリュームの
等価性保証処理装置に関する。[0001] 1. Field of the Invention [0002] The present invention relates to a duplicate volume equivalence assurance processing apparatus.
【0002】[0002]
【従来の技術】コンピュータシステムの複雑化、巨大
化、連続運転化などの要求の進展にともないデータを保
持するファイル装置の台数、容量も大きくなり、その一
部に障害があっても、利用者への影響を与えないように
運転を継続しながら故障の修復を並行して行えるように
することが要請されている。その方法のひとつに二重化
ボリュームあるいはファイルの二重化の技術が使われて
いる。2. Description of the Related Art The number and capacity of file devices for storing data have increased as computer systems have become more complex, larger, and continuously operated. It is required that the repair of the failure can be performed in parallel while continuing the operation so as not to affect the operation. One of the methods uses a duplex volume or file duplication technique.
【0003】すなわち、データを書き込むファイルを二
重に別ボリュームに用意して同一のデータを同時に2個
所の異なるボリュームに書き込む。これらのデータを読
むときには二重化して記憶されたデータのいずれかを読
み出すようにしている。どちらのボリュームにも同じ内
容のデータが記憶されていることすなわちデータの等価
性を保証しているのでいずれかのボリュームが正常に読
めればよいことになる。[0003] That is, a file for writing data is prepared doubly in another volume, and the same data is simultaneously written to two different volumes. When reading these data, one of the data stored in duplicate is read. Since the same contents of data are stored in both volumes, that is, the equivalence of the data is guaranteed, so that it is sufficient that either volume can be read normally.
【0004】ハードの障害によりいずれかのボリューム
が読み書きできない状態になると、障害を起こした装置
を切り離し、一時的にそこに搭載したボリュームについ
ては二重化を中止して正常に動作する装置のボリューム
にのみ読み書きすることで、切り離した装置の修理を並
行して行いながら、ボリュームを利用するシステムは運
用を続けることができる。しかし、停電などによるシス
テムの突然の停止にみまわれた時には二重化ボリューム
のデータの等価性が保証されないという状態になる。When any of the volumes becomes incapable of reading or writing due to a hardware failure, the failed device is disconnected, and with respect to the volume mounted therein, the duplication is stopped and only the volume of the normally operating device is stopped. By reading and writing, the system using the volume can continue operation while repairing the separated device in parallel. However, when the system is suddenly stopped due to a power failure or the like, the data in the duplicated volumes is not guaranteed to be equivalent.
【0005】二重化ボリュームの運用は正常な運用状態
および上記のような異常状態において、従来は次のよう
に処理している。まず、システムを正常に停止する時に
は、システムに搭載されている二重化ボリュームの各々
について、二重化ボリュームが更新中である場合は、更
新を完了させ二重化ボリュームの等価性を保証した後、
不揮発性媒体上にあるボリューム状態管理表1に等価性
保証完了状態であることを表示して設定し、システムを
停止して電源を切断する。Conventionally, the operation of a duplicate volume is performed as follows in a normal operation state and an abnormal state as described above. First, when stopping the system normally, for each of the duplicated volumes mounted on the system, if the duplicated volume is being updated, complete the update and ensure the equivalence of the duplicated volume,
The equivalence assurance completion status is displayed and set in the volume status management table 1 on the non-volatile medium, the system is stopped, and the power is turned off.
【0006】システムの起動時には、図8に示すように
ステップS81、ステップS82でシステムに搭載され
ている二重化ボリュームの各々について、ボリューム状
態管理表1を検査し、ボリュームの状態により以下の処
理を行う。When the system is started, as shown in FIG. 8, the volume status management table 1 is checked for each of the duplicated volumes mounted on the system in steps S81 and S82, and the following processing is performed depending on the volume status. .
【0007】等価性保証完了状態が設定されている場
合 ボリューム状態管理表に二重化運用中状態を設定した
後、二重化ボリューム運用を開始する。すなわち読み込
みはどちらか片方のボリュームから行い、書き込みは両
方のボリュームに行う(ステップS85)。When the equivalency assurance completion status is set After the duplex operation status is set in the volume status management table, the duplex volume operation is started. That is, reading is performed from one of the volumes, and writing is performed to both volumes (step S85).
【0008】二重化運用中状態が設定されている場合 システム運用中に強制電源切断や停電によりシステムが
停止した後のシステム起動時の状態である。このときは
(ステップS83)どちらか片方のボリュームを複写元
ボリューム、他方のボリュームを複写先ボリュームと
し、ボリューム状態管理表1に等価性保証処理中および
複写元ボリューム名を設定した後、複写元ボリュームの
内容を全て複写先ボリュームへ複写する(以降これを全
面等価性保証処理と呼ぶ)。全面等価性保証処理中で
も、ボリュームへの読み出し書き込みは可能であるが、
二重化状態ではないため、複写元ボリュームに障害が起
きると、このボリュームは使用できなくなる。全面等価
性保証処理が完了すると、ボリューム状態管理表1に二
重化運用中状態を設定する(ステップS85)。[0008] In the case where the duplex operation state is set, this is the state at the time of system startup after the system is stopped due to forced power cut or power failure during system operation. In this case (step S83), one of the volumes is set as the copy source volume, the other volume is set as the copy destination volume, and the equivalency assurance processing and the copy source volume name are set in the volume status management table 1, and then the copy source volume is set. Is copied to the copy destination volume (this is hereinafter referred to as a full equivalence assurance process). Reading and writing to the volume is possible even during the overall equivalence guarantee processing,
Since this is not a duplex state, if a failure occurs in the copy source volume, this volume cannot be used. When the entire equivalence assurance process is completed, the duplex operation status is set in the volume status management table 1 (step S85).
【0009】等価性保証処理中状態が設定されている
場合 全面等価性保証処理が完了する前にシステムが停止した
後のシステム起動時の状態である(ステップS84)。
ボリューム状態管理表1により、複写元ボリューム、複
写先ボリュームを決め、全面等価性保証処理を開始す
る。全面等価性保証処理が完了すると、ボリューム状態
管理表に二重化運用中状態を設定する(ステップS8
5)。[0009] When the equivalency assurance processing in progress state is set This is the state at the time of system startup after the system is stopped before the complete equivalence assurance processing is completed (step S84).
The copy source volume and the copy destination volume are determined based on the volume state management table 1, and the entire equivalence assurance process is started. When the full equivalence assurance processing is completed, the duplex operation status is set in the volume status management table (step S8).
5).
【0010】[0010]
【発明が解決しようとする課題】上記したように電源の
強制切断や停電によりシステムが停止した後、システム
を起動すると、システム内の全ての二重化ボリュームに
対して、全面等価性保証処理が必要となる。全面等価性
保証処理は、ボリュームの全領域を複写するため、I/
Oの負荷が業務の効率に与える影響が無視できない。業
務に影響を与えない範囲で、全面等価性保証処理を行お
うとすると、システム内の全ての二重化ボリュームの全
面等価性保証処理の完了までに長い時間が必要となり、
信頼性の観点から問題となる。大規模データベースのよ
うに大容量のデータを持つシステムでは深刻な問題であ
る。例えば、500GBのデータを5MB/秒の速度で
全面等価性保証処理をした場合に必要となる時間は単純
に計算しても28時間であり1日以上も業務が止まって
しまう。As described above, when the system is started after the system has been stopped due to a forced power cut or a power outage, it is necessary to perform full equivalence assurance processing for all the duplicated volumes in the system. Become. In the full equivalence assurance processing, since the entire area of the volume is copied, the I / O
The effect of the O load on business efficiency cannot be ignored. If it is attempted to perform the full equivalency assurance processing within the range that does not affect the business, it will take a long time to complete the full equivalency assurance processing of all the duplicated volumes in the system.
This is a problem from the viewpoint of reliability. This is a serious problem for systems with large amounts of data, such as large databases. For example, when 500 GB data is subjected to full equivalence assurance processing at a speed of 5 MB / sec, the time required for simple calculation is 28 hours, and the business is stopped for one day or more.
【0011】二重化ボリュームの更新前に必ず更新ログ
(どのボリュームのどのブロックを更新するか)を採取
し、不揮発化する方法が考えられる。この場合は電源の
強制切断や停電によりシステムが停止しても、どのボリ
ュームのどのブロックが更新中であったかが分かるの
で、その部分だけの等価を保証すれば良い。しかし、こ
の方法はデータ更新に加え更新ログの採取が必要となる
ため、全ての更新処理のI/Oレスポンスが約2倍劣化
する。A method is conceivable in which an update log (which block of which volume is to be updated) is always collected before updating the duplicated volume and is made non-volatile. In this case, even if the system is stopped due to a forced power cut or a power failure, it is possible to know which block of which volume was being updated, so that equality of only that portion may be guaranteed. However, this method requires the collection of an update log in addition to the data update, so that the I / O response of all the update processes deteriorates about twice.
【0012】すなわち、上記したように停電など突然の
電源断によるシステムの異常終了後のシステムの起動時
における二重化ボリュームの全面等価性保証処理のシス
テム運用、業務運用におよぼす効率低下の影響が課題で
ありその解決策が求められていた。That is, as described above, there is a problem that the efficiency of the system operation and the business operation of the full equivalence assurance processing of the duplicated volume when the system is started after the abnormal termination of the system due to the sudden power failure such as a power failure has a problem. There was a need for a solution.
【0013】ところが、アプリケーションプログラムの
中には、複数のデータ更新からなる一連の手続きのアト
ミシティ(原子性すなわち複数のデータの更新をすべて
行うか、あるいは全く行わないか、いずれかの状態とす
ること)を保証するため、アプリケーションそれ自身の
論理で更新ログを採取している場合がある(例えばデー
タベース管理システムによるトランザクション処理)。
アプリケーションプログラムが採取している更新ログに
は更新中のデータのアドレスが含まれており、これを用
いればシステムが異常停止したときにも更新中の可能性
のあるデータの存在する部分が限定されるので短時間で
等価性を保証することができることになる。However, the atomicity of a series of procedures consisting of a plurality of data updates (atomicity, that is, whether all data are updated or not at all, is included in the application program) In some cases, the update log is collected by the logic of the application itself (for example, transaction processing by a database management system) in order to guarantee the above.
The update log collected by the application program contains the address of the data that is being updated, and if this is used, the part that contains the data that may be being updated even when the system stops abnormally is limited. Therefore, the equivalence can be guaranteed in a short time.
【0014】本発明はこのような点にかんがみて、アプ
リケーションプログラムの論理により等価性保証が可能
な領域はアプリケーションプログラムで等価性保証を行
うことにより等価性保証が必要な領域を少なくし、等価
性保証処理に必要な時間、資源(CPU使用量、I/O
回数)を少なくする手段を提供することを目的とする。In view of such a point, the present invention reduces the area where equivalence guarantee is required by performing the equivalence guarantee by the application program by reducing the area where equivalence guarantee is required by the logic of the application program. Time and resources required for guarantee processing (CPU usage, I / O
The number of times is reduced.
【0015】[0015]
【課題を解決するための手段】上記の課題は下記の如く
に構成された二重化ボリュームの等価性保証処理装置に
よって解決される。The above object is achieved by a duplication volume equivalence assurance processing apparatus configured as described below.
【0016】図1は、本発明の構成図である。図におい
て、1はボリューム状態管理表、4は全面等価性保証処
理手段、10は本発明の手段を示し、2はアプリ別等価
性保証処理対象領域管理表であり、5はアプリ別等価性
保証処理手段、3は等価性保証処理選択手段である。FIG. 1 is a block diagram of the present invention. In the figure, 1 is a volume status management table, 4 is an overall equivalence assurance processing means, 10 is a means of the present invention, 2 is an application-specific equivalence assurance processing target area management table, and 5 is an application-specific equivalence assurance processing. The processing means 3 is an equivalence assurance processing selecting means.
【0017】等価性の保証処理を行うとき等価性保証処
理選択手段3はアプリ別等価性保証処理対象領域管理表
2によりアプリケーションプログラムで等価性保証が可
能なボリューム領域を知り、各アプリ別等価性保証処理
手段5を選択して起動する。ボリューム状態管理表1に
ある他のボリューム領域については等価性保証処理選択
手段3は全面等価性保証処理手段4を起動して従来の全
面複写による全面等価性保証処理が行われるようにして
いる。このようにして上記アプリケーションプログラム
がアクセスするボリュームについては必要な部分につい
てのみ等価性保証処理を行うので時間の短縮、省資源と
いう上記課題が解決される。When performing equivalence assurance processing, the equivalence assurance processing selection means 3 knows a volume area in which equivalence can be assured by an application program based on the application-specific equivalence assurance processing target area management table 2, and determines the equivalence of each application. The guarantee processing means 5 is selected and activated. For other volume areas in the volume status management table 1, the equivalence assurance processing selecting means 3 activates the entire equivalence assurance processing means 4 so that the entire equivalence assurance processing by conventional full copying is performed. As described above, since the equivalence assurance processing is performed only on a necessary portion of the volume accessed by the application program, the above-described problems of time reduction and resource saving can be solved.
【0018】[0018]
【発明の実施の形態】図2は本発明の実施の形態の構成
図である。図には二重化ボリュームを含むコンピュータ
システムをプロセッサ20、不揮発性媒体21および二
重化ボリューム群(29a、29bなど)の3つの部分
に分けて示している。FIG. 2 is a block diagram of an embodiment of the present invention. The figure shows a computer system including a duplicated volume divided into three parts: a processor 20, a nonvolatile medium 21, and a duplicated volume group (29a, 29b, etc.).
【0019】プロセッサ20がシステムの制御をつかさ
どり。本発明の手段に対応した3つの部分からなる。2
2はアプリ別等価性保証処理部であり、アプリケーショ
ンプログラムが扱うデータベースの更新処理をトランザ
クション単位で複数のデータについてまとめて更新する
かあるいはいずれも更新しないかのどちらかの状態を保
証する必要があるとき、すなわちアトミシティを保証す
る処理を行っている場合には、このアプリケーションプ
ログラムが更新の対象とするデータベースについての等
価性保証処理を分担するものである。A processor 20 controls the system. It consists of three parts corresponding to the means of the present invention. 2
Reference numeral 2 denotes an application-specific equivalency assurance processing unit, which is required to guarantee whether the update processing of the database handled by the application program is collectively updated for a plurality of data in transaction units or none of them is updated. At this time, that is, when the process for guaranteeing the atomicity is being performed, the application program shares the equivalence guarantee process for the database to be updated.
【0020】24は従来技術として備わっている全面等
価性保証処理部を示す。これは、システムの異常停止の
場合、ボリューム上のどこのブロックが書き込み中であ
ったかが分からず、ボリュームのいずれの部分が内容の
等価性が崩れているのか特定できないので、そのボリュ
ーム全体について二重化された片方のボリュームから他
方へ全面複写を行い等価性を保証するものである。Reference numeral 24 denotes an overall equivalence assurance processing unit provided as a conventional technique. This is because, in the event of an abnormal system stop, it is not possible to know which block on the volume was being written, and it was not possible to identify which part of the volume had lost the equivalence of its contents. The entire volume is copied from one volume to the other to assure the equivalence.
【0021】23は上記22あるいは24の二つの等価
性保証の手段を選択して起動し全二重化ボリュームにつ
いて等価性保証処理する等価性保証処理選択部である。
21は上記等価性を保証する手段が参照し、また二重化
ボリュームの運用の状態や等価性保証処理の状態を記憶
する不揮発性媒体である。これらの二重化ボリュームの
最新の状態は電源断などの異常事態においても保持する
ため磁気ディスク装置などの不揮発性媒体に記録する必
要がある。Reference numeral 23 denotes an equivalency assurance processing selection unit that selects and starts the above two equivalence assurance means 22 or 24, and performs an assurance assurance process on a full-duplex volume.
Reference numeral 21 denotes a non-volatile medium which is referred to by the means for guaranteeing the equivalence and stores the operation status of the duplicated volume and the status of the equivalence assurance processing. It is necessary to record the latest state of these duplicated volumes on a non-volatile medium such as a magnetic disk device in order to maintain the state even in an abnormal situation such as a power failure.
【0022】詳細は後述するが25は二重化ボリューム
状態管理表である。26はアプリ別等価性保証対象領域
管理表である。上記20に示した等価性保証処理の手段
はこれらの管理表の示す内容に基づき等価性保証処理を
行う。Although the details will be described later, reference numeral 25 denotes a duplicated volume status management table. Reference numeral 26 denotes an application-specific equivalence guarantee target area management table. The means of the equivalence assurance processing shown in the above 20 performs the equivalence assurance processing based on the contents shown in these management tables.
【0023】29aは二重化ボリュームAである。これ
は物理的に異なるX系装置28axとY系装置28ay
上に構成されている。すなわちX系装置上のボリューム
とY系装置上の二重化された論理的なボリュームが二重
化ボリュームAである。二重化ボリュームAにはデータ
としてデータベースDATAaが記録されるようになっ
ている。また、このDATAaはアプリケーションプロ
グラムが上記説明したデータのアトミシティを保証する
ためにデータそのものに付随してチェックポイント情報
(CKP情報a)およびデータ更新情報aを更新ログと
して二重化ボリュームA上に記録している。したがって
二重化ボリュームAはアプリケーションプログラムによ
る等価性保証処理の対象となっている。Reference numeral 29a denotes a duplex volume A. This is a physically different X-system device 28ax and a Y-system device 28ay
Configured above. That is, the duplicated logical volume on the X-system device and the duplicated logical volume on the Y-system device are the duplicated volume A. A database DATAa is recorded on the duplicated volume A as data. In addition, this DATAa is recorded by the application program on the duplicated volume A as check logs (CKP information a) and data update information a along with the data itself as an update log in order to guarantee the atomicity of the data described above. I have. Therefore, the duplicated volume A is subjected to the equivalence assurance processing by the application program.
【0024】二重化ボリュームBの構成も同様である。
ただし、このボリュームにのっているデータはこれを使
用しているアプリケーションプログラムが特に更新ログ
をとるようなことをしていないので27bに記録される
ものはデータのみである。したがって二重化ボリューム
Bは全面等価性保証処理の対象となるものである。The same applies to the configuration of the duplex volume B.
However, the data recorded on this volume is only the data recorded in 27b because the application program using the data does not take any particular action to take an update log. Therefore, the duplicate volume B is a target of the full equivalence assurance processing.
【0025】図3はボリューム状態管理とアプリ別等価
性保証処理対象の関連説明図である。図3(a)はボリ
ューム状態管理表31を示し、図2に示した二重化ボリ
ュームA、Bの他にC,D合計4個の二重化ボリューム
の運用状態例を示している。ボリューム状態管理表31
は二重化対象ボリューム名に対応してアクセス禁止フラ
グ、二重化ボリューム状態、複写元ボリューム、等価性
保証処理タイプを示すように構成している。FIG. 3 is a diagram for explaining the relationship between the volume state management and the equivalence assurance processing target for each application. FIG. 3A shows a volume status management table 31, which shows an example of the operation status of a total of four duplicate volumes C and D in addition to the duplicate volumes A and B shown in FIG. Volume status management table 31
Is configured to indicate an access prohibition flag, a duplicated volume status, a copy source volume, and an equivalency assurance processing type corresponding to the duplicated target volume name.
【0026】二重化ボリューム状態は二重化運用中、等
価性保証処理中、図示してはいないがもう一つ等価性保
証処理完了の3個の状態がある。二重化運用中の状態は
書き込みはX系、Y系に二重に行い、読み込みは片方の
系のボリューム(たとえばX系)から行う運用中である
ことを示す。すなわち正常にシステムが稼働中にはアク
セスメソッドはこの表を調べることにより上記のように
両系に書き出す。ただしこれから説明するようにシステ
ムが電源断などによって異常に停止した時には再開処理
で順次ボリュームのアクセスが可能になっていく過程の
状態が存在し、ここに表示されている二重化ボリューム
状態とは異なる。このように再開処理中はアクセス禁止
フラグを1として示す。図3(a)にはボリュームAの
みがアクセス禁止フラグが0で他は1、すなわち、シス
テムが異常停止の後二重化ボリュームを順次等価性保証
処理を行っていく過程でボリュームAについては等価性
保証処理が終了し、あらためて二重化運用中状態を表示
してアクセス可能であるという意味をフラグが表示して
いることを示している。The duplicated volume state includes three states of duplication operation, equivalency assurance processing, and another equivalence assurance processing completion (not shown). The state in which the duplex operation is being performed indicates that the operation is being performed in which the writing is performed twice for the X system and the Y system, and the reading is performed from the volume of one system (for example, the X system). That is, during normal operation of the system, the access method examines this table and writes to both systems as described above. However, as will be described below, when the system is abnormally stopped due to a power cut or the like, there is a state in which the volume can be sequentially accessed in the restart processing, which is different from the duplicated volume state displayed here. As described above, the access prohibition flag is indicated as 1 during the restart processing. FIG. 3A shows that only the volume A has an access prohibition flag of 0 and the others have a value of 1, that is, the equivalence assurance is assured for the volume A in the process of sequentially performing the equivalence assurance processing on the duplexed volume after the system abnormally stops. This indicates that the processing has been completed and the flag indicates that the duplex operation status is displayed again and that access is possible.
【0027】ボリュームBについては二重化ボリューム
状態は等価性保証処理中すなわち全面複写中であるが、
システムが稼働中においては二重化ボリュームBは片系
運転中でありアクセスは複写元ボリュームに示すX系に
のみ書き込み、読み出しができる状態を示す。ただし、
ボリュームBのアクセス禁止フラグが1であるときはシ
ステムが異常停止したときに上記片系運転中、並行して
全面等価性保証処理中であったことを示すものである。As for the volume B, the duplex volume state is in the process of equivalence assurance, that is, the entire copy is in progress.
When the system is in operation, the duplex volume B is operating in a single system, and access can be performed only to the X system indicated by the copy source volume, and data can be read. However,
When the access prohibition flag of the volume B is 1, it indicates that the one-system operation was being performed and the overall equivalence assurance process was being performed concurrently when the system was abnormally stopped.
【0028】なお、二重化ボリューム状態のもうひとつ
に等価性保証処理完了がある。これは正常にシステムを
停止するときには等価性保証の確認を行い、システムス
タート時にはいつでも二重化運用ができるようにしてお
く状態である。Another state of the duplex volume state is completion of equivalence assurance processing. This is a state in which equivalency assurance is checked when the system is stopped normally, and duplex operation can be performed at any time when the system is started.
【0029】複写元ボリュームの表示は等価性保証処理
中にどちらの系から複写を行っているのかを示すもので
ある。ボリュームA、C、Dでは表示がない。ボリュー
ムBについてはX系にのみアクセスする片系運転である
ことを示す。The display of the copy source volume indicates from which system copying is being performed during the equivalence assurance processing. There is no display for volumes A, C and D. Volume B indicates a single-system operation that accesses only the X system.
【0030】等価性保証処理タイプにはアプリ別と一般
がある。すなわち本発明で等価性保証処理をアプリケー
ションプログラム別等価性保証処理プログラムで行う場
合と従来通り全面等価性保証処理で行う場合を区別する
ものである。There are two types of equivalence assurance processing types, one for each application. That is, the present invention distinguishes between a case where the equivalence assurance processing is performed by the application program-specific equivalence assurance processing program and a case where the equivalence assurance processing is performed by the conventional overall equivalence assurance processing.
【0031】上記した二重化対象ボリュームAとBの
他、ボリュームCはシステムが電源断により異常停止し
たとき二重化運用中であり等価性保証処理は全面等価性
保証処理を用いること、またボリュームDは同様に二重
化運用中であったがアプリケーションプログラムが更新
ログをとっており再起動のための等価性保証処理はアプ
リ別等価性保証処理プログラムを用いることを示してい
る。In addition to the above-described volumes A and B for duplication, volume C is in a duplex operation when the system is abnormally stopped due to power interruption, and the equivalence assurance process uses the entire equivalence assurance process. However, this indicates that the application program is taking an update log, and the equivalence assurance processing for restart uses the application-specific equivalence assurance processing program.
【0032】図3(b)はアプリ別等価性保証処理対象
領域管理表32を示す。アプリケーションプログラムで
本来のデータ更新の論理から複数のデータの状態のアト
ミシティ(原子性)を保証するものでは別途示す更新ロ
グの情報により更新中のデータのアドレスが分かるので
これを利用して両系のボリュームの等価性保証処理をボ
リュームのすべてのブロックを複写することなく、アプ
リケーション別に用意した等価性プログラムを起動する
ことで達成できる。FIG. 3B shows an application-specific equivalence assurance processing target area management table 32. In an application program that guarantees the atomicity (atomicity) of a plurality of data states from the original data update logic, the address of the data being updated can be found from the update log information shown separately. The equivalency assurance processing of a volume can be achieved by starting an equivalence program prepared for each application without copying all blocks of the volume.
【0033】アプリ別等価性保証処理対象領域管理表3
2の中でアプリ別等価性保証処理プログラム対象ボリュ
ーム名は上記したようなアプリケーションプログラムが
読み書きする二重化ボリュームを示す。図3(a)に示
したように対象となるボリュームはAとDである。各ボ
リュームに対応するアプリケーションプログラム名はA
PaとAPd、各アプリ別等価性保証処理プログラムの
スタートアドレスがTa、Tdであることを示してい
る。Application-specific equivalence guarantee processing target area management table 3
In 2, the application-specific equivalence assurance processing program target volume name indicates a duplicated volume read and written by the application program as described above. As shown in FIG. 3A, target volumes are A and D. The application program name corresponding to each volume is A
Pa and APd, and the start addresses of the application-specific equivalence assurance processing programs are Ta and Td.
【0034】図4はシステム起動時の等価性保証処理に
関する実施の形態の動作を説明するフローチャートであ
る本発明の実施の形態の構成に対応して区分すると41
が等価性保証処理選択部であり、42がアプリ別等価性
保証処理部、43が全面等価性保証処理部である。以下
ステップを追って説明する。まず、図示していないが初
期設定として図3(a)のボリューム状態管理表のすべ
てのボリュームに対してアクセス禁止フラグを1とす
る。これはシステム起動時に各二重化ボリュームの等価
性保証処理を行う過程で順次ボリュームのアクセスを可
能とするために行うものである。FIG. 4 is a flowchart for explaining the operation of the embodiment relating to the equivalence assurance processing at the time of starting the system. When divided according to the configuration of the embodiment of the present invention, FIG.
Is an equivalence assurance processing selection unit, 42 is an application-specific equivalence assurance processing unit, and 43 is an overall equivalence assurance processing unit. The steps will be described below. First, although not shown, the access prohibition flags are set to 1 for all the volumes in the volume status management table of FIG. This is performed to enable sequential access to volumes in the process of performing the equivalence assurance processing of each duplicated volume at system startup.
【0035】ステップS44では、図3(b)のアプリ
別等価性保証処理対象領域管理表32にあるボリューム
名の内図3(a)に示すボリューム状態管理表31で二
重化ボリューム状態が二重化運用中となっているものが
あるか探す。すなわち、最初にアプリ別等価性保証処理
対象領域管理表32にあるボリュームAについてボリュ
ーム状態管理表を調べると二重化ボリューム状態が二重
化運用中となっているのでアプリ別等価性保証処理を行
うためにステップS45に制御を移す。なお、図3
(a)ではアクセス禁止フラグが0となっているがこれ
はボリュームAについての等価性保証処理が終了したあ
との状態を例示しているのであるが処理開始時にはアク
セス禁止フラグは1である。In step S44, of the volume names in the application-specific equivalence assurance processing target area management table 32 in FIG. 3B, the duplicated volume status is in the duplicate operation in the volume status management table 31 shown in FIG. 3A. Look for any of the following. That is, when the volume status management table for the volume A in the application-specific equivalence assurance processing target area management table 32 is first checked, the duplex volume status is "duplex operation". The control is shifted to S45. Note that FIG.
In (a), the access prohibition flag is 0, which illustrates the state after the equivalence assurance processing for volume A has been completed. However, the access prohibition flag is 1 at the start of the processing.
【0036】ステップS45では、図3(b)のアプリ
別等価性保証処理対象領域管理表32に示されるボリュ
ームAを読み書きするアプリケーションプログラムAP
aのアプリ別等価性保証処理プログラムのスタートアド
レスに制御を移して等価性保証処理を起動する。処理完
了時にステップS46でボリュームAの二重化ボリュー
ム状態を二重化運用中とし、アクセス禁止フラグをリセ
ットして両系のボリュームを二重化ボリュームとしてア
クセスを可能とする。同様にステップS44に戻り他に
条件にあう次のボリュームBについて処理する。ステッ
プS44の条件に合う二重化ボリュームがなくなるまで
これを繰り返す。アプリ別等価性保証処理の対象の二重
化ボリュームの等価性保証処理をすべて終わってから、
ステップS47で残りの二重化ボリュームについて従来
技術の全面等価性保証処理を実行する。全面等価性保証
処理は大量のデータの複写を伴う場合も多いがこのよう
なときには複写元をどちらかの系のボリュームとし、ま
た二重化ボリューム状態を等価性保証処理中であるとボ
リューム状態管理表31に記録して複写元ボリュームの
みの片系運転で読み書きを可能としてシステムに組み入
れる。全面等価性保証処理が完了した時点でボリューム
状態管理表二重化運用中と設定してはじめて二重化ボリ
ュームの機能を発揮する。In step S45, the application program AP for reading and writing the volume A shown in the application-specific equivalence guarantee processing target area management table 32 of FIG.
The control is transferred to the start address of the application-specific equivalence assurance processing program a to start the equivalence assurance processing. When the process is completed, the duplex volume status of the volume A is set to duplex operation in step S46, the access prohibition flag is reset, and both volumes can be accessed as duplex volumes. Similarly, the process returns to step S44 to process the next volume B that meets other conditions. This is repeated until there is no duplicated volume that satisfies the condition of step S44. After completing the equivalency assurance processing for the duplicated volume targeted for the application-specific equivalence assurance processing,
In step S47, the entire equivalence assurance processing of the related art is executed for the remaining duplicated volumes. The full equivalence assurance process often involves copying a large amount of data. In such a case, the volume status management table 31 determines that the copy source is a volume of one of the systems and that the duplex volume status is in the equivalence assurance process. To be read and written by a single operation of only the copy source volume and incorporated into the system. The function of the duplicated volume will be exhibited only when the volume status management table is set to duplicated operation when the complete equivalence assurance processing is completed.
【0037】図5、図6によりアプリケーションプログ
ラムのデータ更新処理を説明する。図5(a)はアプリ
ケーションプログラムがひとかたまりのデータを更新す
るとき、更新ログの記録と更新データの記録の完了の過
程の確認を行うためのチェックポイントと、どのような
データをどこに書き込むのかを示すデータ更新情報の格
納アドレスを不揮発性媒体に記録する表の形式を示して
いる。図5(b)は上記したデータ更新情報の形式を示
す表である。データ更新情報は一連の更新するデータの
ブロックアドレスと更新後設定すべき値を格納している
不揮発媒体上の先頭ブロックアドレスと連続したブロッ
ク数を各アプリケーションプログラム毎に(a)に示す
更新データ数だけ並べた形式としている。またこれらの
情報は図2に示したように二重化ボリューム上に配置さ
れているものとしている。The data update processing of the application program will be described with reference to FIGS. FIG. 5A shows a check point for recording an update log and confirming a process of completing the update data recording when the application program updates a block of data, and what data is to be written to where. 3 shows a format of a table in which storage addresses of data update information are recorded on a non-volatile medium. FIG. 5B is a table showing the format of the data update information described above. The data update information indicates the block address of a series of data to be updated and the start block address on the non-volatile medium storing the value to be set after the update, and the number of consecutive blocks as shown in FIG. It is in the form of just arranging. Further, it is assumed that these pieces of information are arranged on a duplicated volume as shown in FIG.
【0038】図6のアプリケーションプログラムのデー
タ更新処理のフローチャートにより動作を説明する。図
5に示す一連のデータをひとかたまりにして、アトミシ
ティを保証して更新するためにチェックポイントを用い
て処理の進捗状態を確認できるようにする。ステップS
61では一連の更新処理に入る前であることをチェック
ポイントに0を設定することで記録する。The operation will be described with reference to the flowchart of the data updating process of the application program shown in FIG. The series of data shown in FIG. 5 is grouped together so that the progress of the processing can be confirmed using checkpoints in order to guarantee and update the atomicity. Step S
In step 61, the state before the start of a series of update processing is recorded by setting 0 to the check point.
【0039】ステップS62ではこれから書き込むデー
タの値と書き込み先のアドレスをデータ更新ログとして
記録する。ステップS63ではデータ更新情報の記録が
完了したことを示すためにチェックポイント情報に1を
設定する。In step S62, the value of the data to be written and the address of the write destination are recorded as a data update log. In step S63, 1 is set to the checkpoint information to indicate that the recording of the data update information has been completed.
【0040】ステップS64でデータ更新情報に設定さ
れた一連のデータの更新を行う。ステップS65でデー
タ更新の完了を示すためにチェックポイント情報に2を
設定する。フローチャートの右側に(イ)、(ロ)、
(ハ)でチェックポイント情報の値によりデータの更新
がどこまで進んでいるかを判断できるかを矢印の範囲で
示している。In step S64, a series of data set in the data update information is updated. In step S65, 2 is set to the checkpoint information to indicate the completion of the data update. (A), (b),
At (c), the range of the arrow indicates how far the data update can be determined based on the value of the checkpoint information.
【0041】すなわち、片系のチェックポイント情報が
2であると(イ)の範囲つまり、前回分のデータ更新は
完了し、データ、データ更新情報は共に等価性が保たれ
ている状態である。ただし、チェックポイント情報につ
いてはX系、Y系によって0、1、2である可能性があ
り等価性が保たれているとは言えない。That is, if the checkpoint information of one system is 2, the range of (a), that is, the data update for the previous time has been completed, and the data and the data update information are both equivalent. However, the checkpoint information may be 0, 1, or 2 depending on the X system and the Y system, and it cannot be said that the equivalence is maintained.
【0042】片系のチェックポイント情報が0である
と、(ロ)の範囲でデータ更新情報の設定中すなわち更
新データは前回更新されたままであり等価性は保証され
ている状態である。しかし、データ更新情報とチェック
ポイント情報は等価性は保証されない状態である。If the checkpoint information of one system is 0, the data update information is being set in the range (b), that is, the update data has been updated last time, and the equivalence is guaranteed. However, the equivalence is not guaranteed for the data update information and the checkpoint information.
【0043】片系のチェックポイント情報が1である
と、(ハ)の範囲でデータを更新中であるが完了は確認
できず、データの等価性、チェックポイントデータの等
価性は保証されず、データ更新情報の等価性だけが保証
された状態であることを示している。If the checkpoint information of one system is 1, the data is being updated in the range of (c) but the completion cannot be confirmed, and the equivalence of the data and the checkpoint data is not guaranteed. This indicates that only the equivalence of the data update information is guaranteed.
【0044】以上のようなデータの更新状態をチェック
ポイント情報から知ることによりアプリケーションプロ
グラムによる等価性保証処理を行う方法について図7の
フローチャートにより説明する。A method of performing the equivalence assurance processing by the application program by knowing the above data update status from the checkpoint information will be described with reference to the flowchart of FIG.
【0045】ステップS71においては前記(イ)、
(ロ)、(ハ)のいずれにおいてもチェックポイントの
等価性は保証されておらずここでX系からチェックポイ
ント情報をY系に書き込みチェックポイント情報の等価
性を保証する。ここで逆方向Y系からX系に複写しても
よい。In step S71, (a)
In any of (b) and (c), the equivalency of the checkpoints is not guaranteed. Here, the checkpoint information is written from the X system to the Y system to guarantee the equivalence of the checkpoint information. Here, the image may be copied from the Y direction to the X system in the reverse direction.
【0046】ステップS72、ステップS73ではチェ
ックポイント情報の値を調べ、その値によって以下の処
理を分ける。前記したように、0の場合には、データは
等価であり、データ更新情報の等価状態が不確定であ
り、ステップS74に移る。ここでは複写方向の考え方
は上記と同様にしてX系のデータ更新情報を読み込みY
系に複写する、あるいは、等価でありさえすれば中身は
問題としないので、中身を初期設定、例えばクリアする
方法でもよい。In steps S72 and S73, the value of the checkpoint information is checked, and the following processing is divided according to the value. As described above, in the case of 0, the data is equivalent, the equivalence state of the data update information is indeterminate, and the routine goes to Step S74. Here, the concept of the copy direction is the same as described above, and the X-system data update information is read and Y
Since the contents do not matter as long as they are copied to the system or are equivalent, a method of initializing the contents, for example, clearing the contents may be used.
【0047】同様にチェックポイント情報が1の場合デ
ータ更新情報は等価であるが、データの等価性は疑わし
いのでステップS75においてデータ更新情報を読み込
み、読み込んだ情報を基づき改めてデータをX系、Y系
両系に書き込む。Similarly, when the checkpoint information is 1, the data update information is equivalent, but since the equivalence of the data is doubtful, the data update information is read in step S75, and the data is renewed based on the read information. Write in both systems.
【0048】チェックポイント情報が2の場合にはデー
タおよびデータ更新情報はともに等価性が保証されてい
るので何もせず等価性保証処理を終了する。上記ではア
プリケーションプログラムで更新するデータは1群のみ
であるとしたが複数のデータ群がある場合にもアプリ別
の等価性保証処理プログラムをそれに対応するように作
成することは容易である。If the checkpoint information is 2, the data and the data update information are both guaranteed to be equivalent, so that nothing is done and the equivalence assurance process ends. In the above description, only one group of data is updated by the application program. However, even when there are a plurality of data groups, it is easy to create an equivalence assurance processing program for each application so as to correspond thereto.
【0049】[0049]
【発明の効果】以上の説明から明らかなように本発明に
よれば、二重化ボリュームの領域の内アプリケーション
プログラムの論理により等価性保証処理が可能なら、ア
プリケーションプログラムで等価性保証処理を行うこと
により等価性保証処理が必要なボリューム領域を小さく
し、全面等価性保証処理に必要な時間、資源(CPU使
用量、I/O回数)を小さくすることができ、特に規模
の大きなシステムの連続運転化と効率化を実現するとい
う工業的効果がある。As is apparent from the above description, according to the present invention, if the equivalence assurance processing can be performed by the logic of the application program in the area of the duplicated volume, the equivalence assurance processing is performed by the application program. It is possible to reduce the volume area required for the performance assurance process and reduce the time and resources (CPU usage, I / O times) required for the overall equivalence assurance process, and especially for continuous operation of a large-scale system. There is an industrial effect of realizing efficiency.
【図1】 本発明の構成図FIG. 1 is a block diagram of the present invention.
【図2】 本発明の実施の形態の構成図FIG. 2 is a configuration diagram of an embodiment of the present invention.
【図3】 ボリューム状態管理とアプリ別等価性保証処
理対象の関連説明図FIG. 3 is a related explanatory diagram of volume status management and an application-specific equivalence assurance process target;
【図4】 実施の形態の動作を説明するフローチャートFIG. 4 is a flowchart illustrating an operation of the embodiment.
【図5】 アプリケーションプログラムによるデータ更
新ログFig. 5 Data update log by application program
【図6】 アプリケーションプログラムのデータ更新処
理のフローチャートFIG. 6 is a flowchart of a data update process of an application program.
【図7】 アプリケーションプログラムによる等価性保
証処理のフローチャートFIG. 7 is a flowchart of an equivalence assurance process by an application program.
【図8】 従来技術のフローチャート(システム起動時
の等価性保証処理)FIG. 8 is a flowchart of a conventional technique (equivalence guarantee processing at system startup).
1 ボリューム状態管理表 2 アプリ別等価性保証処理対象領域管理表 3 等価性保証処理選択手段 4 全面等価性保証処理手段 5 アプリ別等価性保証処理手段 1 Volume Status Management Table 2 Application-Specific Equivalence Assurance Processing Target Area Management Table 3 Equivalence Assurance Processing Selection Means 4 Full Equivalence Assurance Processing Means 5 Application-Specific Equivalence Assurance Processing Means
Claims (2)
込み、一方のボリュームに障害が発生しても他方のボリ
ュームの読み書きを継続可能とする二重化ボリュームシ
ステムにおいて、二つのボリュームの内容の等価性が疑
われるとき、ボリュームの二重化運用の状態を示すボリ
ューム状態管理表に基づき、一方から他方のボリューム
へ内容を全面複写する全面等価性保証処理手段を有して
二重化ボリュームの等価性を保証処理する二重化ボリュ
ームの等価性保証処理装置であって、 各アプリケーションプログラムが等価性保証処理を行う
ボリューム領域を示すアプリ別等価性保証処理対象領域
管理表と、 上記アプリケーションプログラム毎に上記アプリ別等価
性保証処理対象領域管理表に基づいて、対象とするボリ
ューム領域内の等価性保証処理を行うアプリ別等価性保
証処理手段と、 上記ボリューム状態管理表およびアプリ別等価性保証処
理対象領域管理表に基づき、ボリューム領域毎に等価性
保証の手段としてアプリ別等価性保証処理手段あるいは
全面等価性保証処理手段のいずれかを選択する等価性保
証処理選択手段と、を備えることを特徴とする二重化ボ
リュームの等価性保証処理装置。1. A duplicate volume system in which the same content is written to another volume doubly and a read / write of the other volume can be continued even if a failure occurs in one of the volumes. Is suspected, there is an overall equivalence assurance processing means for completely copying the contents from one volume to the other volume based on the volume status management table indicating the status of the duplicated operation of the volume, and the assurance process of the duplicated volume is performed. An equivalence assurance processing device for a duplicated volume, the application-specific equivalence assurance processing target area management table indicating a volume area in which each application program performs the equivalence assurance processing, and the application-specific equivalence assurance processing for each of the application programs. Based on the target area management table, the Based on the application-specific equivalence assurance processing means that performs the processing, and based on the volume status management table and the application-specific equivalence assurance processing target area management table, as the means of equality assurance for each volume area, the application-specific equivalence assurance processing means or the entire An equivalence assurance processing selecting means for selecting any of the equivalence assurance processing means.
るボリューム状態管理表に基づき、一方から他方のボリ
ュームへ内容を全面複写する全面等価性保証処理手段を
有して二重化ボリュームの等価性を保証処理する二重化
ボリュームの等価性保証処理装置において、 コンピュータを、 アプリケーションプログラムが等価性保証処理を行うボ
リューム領域を示すアプリ別等価性保証処理対象領域管
理表を生成する管理表生成手段、 上記アプリケーションプログラム毎に上記アプリ別等価
性保証処理対象領域管理表に基づいて、対象とするボリ
ューム領域内の等価性保証処理を行うアプリ別等価性保
証処理手段、 上記ボリューム状態管理表およびアプリ別等価性保証処
理対象領域管理表に基づき、ボリューム領域毎に等価性
保証の手段としてアプリ別等価性保証処理手段あるいは
全面等価性保証処理手段のいずれかを選択する等価性保
証処理選択手段、として機能させるプログラムを記録し
た機械読み取り可能な記録媒体。2. A method for guaranteeing the equivalence of a duplicated volume based on a volume status management table for displaying the status of the duplicated operation of a volume, comprising an overall equivalence assurance processing means for completely copying the contents from one volume to the other volume. A management table generating means for generating an application-specific equivalence assurance processing target area management table indicating a volume area in which an application program performs equivalence assurance processing; Based on the application-specific equivalence assurance processing target area management table, the application-specific equivalence assurance processing means for performing the equivalence assurance processing in the target volume area, the volume status management table and the application-specific equivalence assurance processing target area As a means of guaranteeing equivalence for each volume area based on the management table Pre by equivalence assurance processing means or the entire equivalence guarantee equality assurance process selecting means for selecting one of the processing means, a machine-readable recording medium recording a program to function as a.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP06079297A JP3817818B2 (en) | 1997-03-14 | 1997-03-14 | Dual volume equivalency guarantee processing device and duplex volume equivalency guarantee processing method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP06079297A JP3817818B2 (en) | 1997-03-14 | 1997-03-14 | Dual volume equivalency guarantee processing device and duplex volume equivalency guarantee processing method |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH10254787A true JPH10254787A (en) | 1998-09-25 |
JP3817818B2 JP3817818B2 (en) | 2006-09-06 |
Family
ID=13152523
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP06079297A Expired - Fee Related JP3817818B2 (en) | 1997-03-14 | 1997-03-14 | Dual volume equivalency guarantee processing device and duplex volume equivalency guarantee processing method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3817818B2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005222110A (en) * | 2004-02-03 | 2005-08-18 | Hitachi Ltd | Storage subsystem |
-
1997
- 1997-03-14 JP JP06079297A patent/JP3817818B2/en not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005222110A (en) * | 2004-02-03 | 2005-08-18 | Hitachi Ltd | Storage subsystem |
JP4551096B2 (en) * | 2004-02-03 | 2010-09-22 | 株式会社日立製作所 | Storage subsystem |
Also Published As
Publication number | Publication date |
---|---|
JP3817818B2 (en) | 2006-09-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102792276B (en) | Buffer disk in flashcopy cascade | |
US7395389B2 (en) | Extending non-volatile storage at a computer system | |
US20060047926A1 (en) | Managing multiple snapshot copies of data | |
US20030078933A1 (en) | Checkpointing filesystem | |
CN106407040A (en) | Remote data copy method and system | |
KR100280221B1 (en) | Optimization of Memory Space in Databases | |
CN105718548A (en) | System and method for scalable reference management in a deduplication based storage system | |
EP1860560A2 (en) | Storage control method and system for performing backup and/or restoration | |
JP2006221628A (en) | Method, system and product for replicating and restoring metadata | |
AU1114695A (en) | A method of operating a computer system | |
CN101566959A (en) | Using volume snapshots to prevent file corruption in failed restore operations | |
JP2007133471A (en) | Storage device, and method for restoring snapshot | |
US8533411B2 (en) | Multiple backup processes | |
JPH0991099A (en) | Disk update log recording system | |
US6978354B1 (en) | Method for creating a virtual data copy of a volume being restored | |
JP4741976B2 (en) | Disk array device and data management method | |
JPH10254787A (en) | Guarantee processor for equivalence of duplex volume | |
US6711588B1 (en) | File management method for file system | |
JP2005316624A (en) | Database reorganization program, database reorganization method, and database reorganization device | |
JP2011209834A (en) | Redundant system | |
JP2003099208A (en) | Method for data transfer between disk arrays and disk array system | |
JPH07319637A (en) | Controller and control method for disk device | |
JPH03265951A (en) | Trouble recovery type computer | |
JP2005316697A (en) | Disk array system and method for data backup | |
US20240320098A1 (en) | Managing changes to metadata in a data storage system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20051219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060117 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060308 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060523 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060605 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100623 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110623 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120623 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120623 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130623 Year of fee payment: 7 |
|
LAPS | Cancellation because of no payment of annual fees |