JP4822024B2 - Fault-tolerant server, full backup method, and full backup program - Google Patents

Fault-tolerant server, full backup method, and full backup program Download PDF

Info

Publication number
JP4822024B2
JP4822024B2 JP2008049970A JP2008049970A JP4822024B2 JP 4822024 B2 JP4822024 B2 JP 4822024B2 JP 2008049970 A JP2008049970 A JP 2008049970A JP 2008049970 A JP2008049970 A JP 2008049970A JP 4822024 B2 JP4822024 B2 JP 4822024B2
Authority
JP
Japan
Prior art keywords
cpu subsystem
full backup
lan
synchronization
stored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2008049970A
Other languages
Japanese (ja)
Other versions
JP2009205630A (en
Inventor
雄一知 金子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP2008049970A priority Critical patent/JP4822024B2/en
Publication of JP2009205630A publication Critical patent/JP2009205630A/en
Application granted granted Critical
Publication of JP4822024B2 publication Critical patent/JP4822024B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、フォールトトレラントサーバ、フルバックアップ方法、およびフルバックアッププログラムに関する。   The present invention relates to a fault tolerant server, a full backup method, and a full backup program.

近年、様々な分野でコンピュータシステムが利用されるようになったことで、障害発生時においても、コンピュータシステムに、それまで行っていた処理を継続させることが要求されている。   In recent years, computer systems have come to be used in various fields, so that even when a failure occurs, the computer system is required to continue processing that has been performed so far.

この要求にこたえる技術として、システムを二重化するフォールトトレラント(FT)技術が注目されている。   As a technology that meets this demand, a fault tolerant (FT) technology for duplicating a system has been attracting attention.

FT技術を用いたフォールトトレラントサーバ(FTサーバ)は、二重化されたシステムを同期して動作させ、一方のシステムに障害が発生しても、他方のシステムに処理を継続させることができる。   A fault tolerant server (FT server) using FT technology can operate a duplicated system synchronously, and can continue processing in the other system even if a failure occurs in one system.

二重化されたシステムを同期して動作させる方法としては、各々のシステムが有するCPU(Central Processing Unit)やメモリを備えたCPUサブシステムが、クロックを合わせた状態で全く同一の動作を行うロックステップ方式が知られている。   As a method for operating the duplicated systems in synchronization, the CPU (Central Processing Unit) and the CPU sub-system with the memory that each system has have the same operation with the clocks synchronized. It has been known.

このロックステップ方式を採用したFTサーバの先行技術として、特許文献1には、二重化されたシステムをロックステップ方式によるロックステップ同期で動作させるFTコントローラに関する技術が記載されている。   As a prior art of an FT server that employs this lockstep method, Patent Document 1 describes a technology related to an FT controller that operates a duplexed system in lockstep synchronization by the lockstep method.

特許文献1に記載されている技術では、FTコントローラは、二重化されたシステムのCPUサブシステムをロックステップ同期で動作させ、障害等でCPUサブシステム間に不一致が生じた場合、ロックステップ同期を停止させ、自系のシステムから他系のシステムを切り離し、自系のCUサブシステムに、ロックステップ同期を停止する前に行っていた処理を継続させる。また、FTコントローラは、他系のシステムが障害から復旧した後、他系のCPUサブシステムに、自系のCPUサブシステムとのロックステップ同期を再開させる。
特開2006−178616号公報
In the technique described in Patent Document 1, the FT controller operates the CPU subsystem of the duplex system with lock step synchronization, and stops the lock step synchronization when a mismatch occurs between the CPU subsystems due to a failure or the like. Then, the other system is disconnected from the own system, and the process that was performed before the lock step synchronization was stopped is continued in the own CU subsystem. In addition, after the other system recovers from the failure, the FT controller causes the other CPU subsystem to resume lock step synchronization with the own CPU subsystem.
JP 2006-178616 A

上述したように、FTサーバにおいては、システムを二重化することで耐障害性を高めている。しかし、火災により二重化したシステムの両方に障害が発生する等の万が一の事態に備え、ハードディスク(HDD:Hard DisK Drive)に格納されている、オペレーティングシステム(OS:Operating System)も含めた情報のバックアップ(フルバックアップ)を作成しておく必要がある。   As described above, in the FT server, fault tolerance is improved by duplicating the system. However, in the event of a failure such as a failure in both systems duplicated due to a fire, backup of information including the operating system (OS: Operating System) stored in the hard disk (HDD: Hard Disc Drive) (Full backup) must be created.

一般的に、フルバックアップを作成するには、システムは、HDDに格納されている情報に書込み等の変更が一切行われないようにするために、全ての処理を停止する必要がある。   In general, in order to create a full backup, the system needs to stop all processing in order to prevent any changes such as writing from being performed on information stored in the HDD.

しかし、FTサーバにおいては、常に動作し処理を行い続けることが要求されているため、システムが処理を停止することが前提となっている一般的なフルバックアップ方法では、フルバックアップを作成する事ができない。   However, since the FT server is required to always operate and continue processing, a general full backup method on which the system is supposed to stop processing may create a full backup. Can not.

特許文献1に記載されている技術を用いれば、二重化されたシステムの、一方のシステムにそれまで行っていた処理を継続させておき、切り離した他方のシステムを停止させることが出来る。しかし、この技術では、停止させた他方のシステムを独立に再起動させることが出来ないため、フルバックアップを作成するには、外部システムに停止させた他方のシステムに格納されている情報のフルバックアップを作成させる必要がある。   If the technique described in Patent Document 1 is used, it is possible to continue the processing that has been performed in one system of the duplexed system and to stop the separated system. However, with this technology, the stopped system cannot be restarted independently, so to create a full backup, a full backup of the information stored in the other system stopped by the external system Need to be created.

そのため、FTサーバにおいては、二重化されたシステムの一方のシステムを独立に再起動させることで、外部システムを用いることなくフルバックアップを作成するという課題が存在する。   Therefore, in the FT server, there is a problem of creating a full backup without using an external system by independently restarting one of the duplexed systems.

本発明の目的は、上述した課題を解決することができる、フォールトトレラントサーバ、フルバックアップ方法、およびフルバックアッププログラムを提供することにある。   An object of the present invention is to provide a fault tolerant server, a full backup method, and a full backup program that can solve the above-described problems.

上記目的を達成するために本発明のフォールトトレラントサーバは、
CPUサブシステムを含むシステムが二重化に構成され、前記CPUサブシステムがロックステップ同期で同一の動作を行うフォールトトレラントサーバであって、
前記システムの各々は、
フルバックアップ時に、自系のCPUサブシステムに前記ロックステップ同期を停止させてから、自系のシステムを停止させ、また、他系のシステムが停止すると、他系のシステムに起動信号を送信するFTコントローラをさらに含み、
前記CPUサブシステムは、他系のシステムから前記起動信号を受信すると、LAN上の第1の規定の位置に格納されているバックアップ用のオペレーティングシステムを実行することで自系のシステムに格納されている情報のフルバックアップを前記LAN上の第2の規定の位置に格納することを特徴とする。
In order to achieve the above object, the fault tolerant server of the present invention provides:
A system including a CPU subsystem is configured to be duplicated, and the CPU subsystem is a fault tolerant server that performs the same operation in lockstep synchronization,
Each of the systems
At the time of full backup, the local CPU subsystem stops the lock step synchronization and then stops the local system. When the other system stops, an FT that sends a start signal to the other system A controller,
When the CPU subsystem receives the activation signal from the other system, the CPU subsystem executes the backup operating system stored at the first specified location on the LAN, and is stored in the local system. A full backup of the stored information is stored in a second prescribed location on the LAN.

上記目的を達成するために本発明のフルバックアップ方法は、
CPUサブシステムを含むシステムが二重化に構成され、前記CPUサブシステムがロックステップ同期で同一の動作を行うフォールトトレラントサーバが行うフルバックアップ方法であって、
二重化に構成された一方のシステムがフルバックアップを作成する場合、
前記一方のシステムが、該一方のシステムのCPUサブシステムに前記ロックステップ同期を停止させてから、該一方のシステムを停止させるステップと、
他方のシステムが、前記一方のシステムが停止すると、該一方のシステムに起動信号を送信するステップと、
前記一方のシステムが、前記他方のシステムから前記起動信号を受信すると、LAN上の第1の規定の位置に格納されているバックアップ用のオペレーティングシステムを実行することで前記一方のシステムに格納されている情報のフルバックアップを前記LAN上の第2の規定の位置に格納するステップと、を有することを特徴とする。
In order to achieve the above object, the full backup method of the present invention includes:
A full backup method performed by a fault tolerant server in which a system including a CPU subsystem is configured in a duplex manner and the CPU subsystem performs the same operation in lockstep synchronization,
If one system configured for duplexing creates a full backup,
The one system causing the CPU subsystem of the one system to stop the lockstep synchronization and then stopping the one system;
The other system sends a start signal to the one system when the one system stops;
When the one system receives the activation signal from the other system, it is stored in the one system by executing the backup operating system stored in the first specified location on the LAN. Storing a full backup of the stored information in a second prescribed location on the LAN.

上記目的を達成するために本発明のフルバックアッププログラムは、
CPUサブシステムを含むシステムが二重化に構成され、前記CPUサブシステムがロックステップ同期で同一の動作を行うフォールトトレラントサーバに、
二重化に構成された一方のシステムがフルバックアップを作成する場合、
前記一方のシステムが、該一方のシステムのCPUサブシステムに前記ロックステップ同期を停止させてから、該一方のシステムを停止させる手順と、
他方のシステムが、前記一方のシステムが停止すると、該一方のシステムに起動信号を送信する手順と、
前記一方のシステムが、前記他方のシステムから前記起動信号を受信すると、LAN上の第1の規定の位置に格納されているバックアップ用のオペレーティングシステムを実行することで前記一方のシステムに格納されている情報のフルバックアップを前記LAN上の第2の規定の位置に格納する手順と、を実行させることを特徴とする。
In order to achieve the above object, the full backup program of the present invention
In a fault tolerant server in which a system including a CPU subsystem is configured to be duplicated, and the CPU subsystem performs the same operation in lockstep synchronization,
If one system configured for duplexing creates a full backup,
The one system causing the CPU subsystem of the one system to stop the lockstep synchronization and then stopping the one system;
A procedure in which the other system sends an activation signal to the one system when the one system stops;
When the one system receives the activation signal from the other system, it is stored in the one system by executing the backup operating system stored in the first specified location on the LAN. Storing a full backup of the stored information in a second prescribed location on the LAN.

本発明のフォールトトレラントサーバによれば、一方のシステムがフルバックアップを作成するために停止すると、他方のシステムは、停止した一方のシステムに起動信号を送信する。また、停止した一方のシステムは、起動信号を受信すると、バックアップ用のオペレーティングシステムを実行することでフルバックアップをLAN上に格納する。   According to the fault-tolerant server of the present invention, when one system stops to create a full backup, the other system sends a start signal to the one stopped system. In addition, when one of the stopped systems receives the start signal, the full backup is stored on the LAN by executing the backup operating system.

これにより、二重化されたシステムの、一方のシステムを独立に再起動させることが出来るため、外部システムを用いることなくフルバックアップを作成することが出来るという効果が得られる。   As a result, one of the duplexed systems can be restarted independently, so that an effect that a full backup can be created without using an external system is obtained.

以下に、本発明を実施するための最良の形態について図面を参照して説明する。   The best mode for carrying out the present invention will be described below with reference to the drawings.

図1に、本発明の一実施形態のFTサーバの構成を示す。   FIG. 1 shows the configuration of an FT server according to an embodiment of the present invention.

図1に示すように、本実施形態のFTサーバ10は、0系のシステム1000と、1系のシステム1001と、を二重化した構成となっている。また、0系のシステム1000と1系のシステム1001は、各々がLAN(Local Area Network)300に接続されており、LAN300上にはネットワークHDD200が存在する。 As shown in FIG. 1, the FT server 10 of this embodiment has a configuration in which a 0-system 100 0 and a 1-system 100 1 are duplicated. The 0-system 100 0 and the 1-system 100 1 are each connected to a LAN (Local Area Network) 300, and a network HDD 200 exists on the LAN 300.

0系のシステム1000は、CPUサブシステム1100と、FTコントローラ1300と、を有している。 The system 0 0 system 100 0 has a CPU subsystem 110 0 and an FT controller 130 0 .

同様に、1系のシステム1001は、CPUサブシステム1101と、FTコントローラ1301と、を有している。 Similarly, the 1-system 100 1 includes a CPU subsystem 110 1 and an FT controller 130 1 .

ここで、0系のシステム1000と1系のシステム1001内の構成要素の動作について説明する。以下では、0系のシステム1000内の構成要素について説明するが、1系のシステム1001内の構成要素も同様の動作を行う。 Here, the operation of the components in the 0-system 100 0 and the 1-system 100 1 will be described. In the following description, the components in the 0- system 100 1 are described, but the components in the 1-system 100 1 perform the same operation.

CPUサブシステム1100は、他系のFTコントローラ1301から起動信号を受信すると、LAN300上のネットワークHDD200に格納されているバックアップ用OSを実行することで、自系のシステム1000に格納されている情報のフルバックアップをLAN300上のネットワークHDD200に格納する。 When the CPU subsystem 110 0 receives the activation signal from the FT controller 130 1 of the other system, the CPU subsystem 110 0 executes the backup OS stored in the network HDD 200 on the LAN 300 and is stored in the local system 100 0. A full backup of the stored information is stored in the network HDD 200 on the LAN 300.

なお、ここでは、バックアップ用OSはネットワークHDD200に格納されているものとしたが、LAN300上の規定の位置(第1の規定の位置)に格納されていれば良いものとする。また、ここでは、ネットワークHDD200にフルバックアップを格納するものとしたが、LAN300上の規定の位置(第2の規定の位置)に格納すれば良いものとする。   Here, it is assumed that the backup OS is stored in the network HDD 200. However, it is only necessary that the backup OS is stored in a specified position (first specified position) on the LAN 300. In this example, the full backup is stored in the network HDD 200. However, the full backup may be stored in a specified position (second specified position) on the LAN 300.

また、CPUサブシステム1100は、フルバックアップをLAN300上のネットワークHDD200に格納すると、その旨を他系のシステム1001に通知する。 Further, when the CPU subsystem 110 0 stores the full backup in the network HDD 200 on the LAN 300, the CPU subsystem 110 0 notifies the other system 100 1 to that effect.

FTコントローラ1300は、自系のCPUサブシステム1100にロックステップ同期(以降、単に「同期」と呼ぶ)を停止させてから、自系のシステム1000を停止させる。なお、同期停止後も、他系のCPUサブシステム1101は、同期を停止する前に行っていた処理を継続しているものとする。 The FT controller 130 0 stops the lock system synchronization (hereinafter simply referred to as “synchronization”) in the own CPU subsystem 110 0 and then stops the own system 100 0 . Even after the synchronization stopped, CPU subsystem 110 1 of the other system is assumed to continue processing which has been performed before stopping the synchronization.

また、FTコントローラ1300は、他系のシステム1001が停止すると、他系のシステム1001に起動信号を送信する。 Further, when the other system 100 1 stops, the FT controller 130 0 transmits an activation signal to the other system 100 1 .

また、FTコントローラ1300は、他系のCPUサブシステム1101から、フルバックアップを格納した旨の通知を受信すると、他系のCPUサブシステム1101に、自系のCPUサブシステム1100との同期を再開させる。 When the FT controller 130 0 receives a notification from the other CPU subsystem 110 1 that the full backup has been stored, the FT controller 130 0 notifies the other CPU subsystem 110 1 to the own CPU subsystem 110 0 . Resume synchronization.

さらに、FTコントローラ1300は、他系のシステム1001から起動信号を受信したときに、他系のCPUサブシステム1101が同期を停止する前に行っていた処理を継続しているか否かを確認し、処理を継続している場合に自系のシステム1000を規定のデバイス(不図示)を使用しないモードに移行させる。ここで、規定のデバイスとは、FTサーバ10に1台ずつしか接続されていないデバイスを指し、ディスプレイや、キーボード、マウス、などが該当する。 Further, when the FT controller 130 0 receives the activation signal from the other system 100 1 , the FT controller 130 0 determines whether or not the other CPU subsystem 110 1 is continuing the processing that was being performed before stopping the synchronization. check shifts the system 100 0 of its own system if you continue processing mode without device (not shown) defined. Here, the prescribed device refers to a device that is connected to the FT server 10 only one by one, and corresponds to a display, a keyboard, a mouse, and the like.

次に、本実施形態のFTサーバ10がフルバックアップを作成する際の全体の動作を図2のフローチャートを参照して説明する。   Next, the overall operation when the FT server 10 of the present embodiment creates a full backup will be described with reference to the flowchart of FIG.

なお、ここでは、0系のシステム1000が処理を継続し、1系のシステム1001がフルバックアップを作成するものとする。 In this case, it is assumed that the system 0 100 continues processing, and the system 1 100 1 creates a full backup.

図2に示すように、通常運用時は、0系のCPUサブシステム1100と1系のCPUサブシステム1101は同期して動作している(ステップ1000およびステップ2000)。 As shown in FIG. 2, during normal operation, 0-based CPU subsystem 110 0 the CPU subsystem 110 1 of 1 system operates synchronously (step 1000 and step 2000).

この状態において、FTコントローラ1301は、自系のCPUサブシステム1100に同期を停止させ、他系のシステム1000にフルバックアップを作成する旨を通知する(ステップ2010)。 In this state, the FT controller 130 1 stops the synchronization of the own system CPU subsystem 110 0 and notifies the other system 100 0 that a full backup will be created (step 2010).

次に、FTコントローラ1301は、自系のシステム1001を停止させる(ステップ2020)。 Next, the FT controller 130 1 stops the own system 100 1 (step 2020).

次に、FTコントローラ1300は、他系のFTコントローラ1301からフルバックアップを作成する旨の通知を受信する(ステップ1010)。これにより、システム1000は、他系のシステム1001との同期が停止されたのはフルバックアップを作成するためであることを検知する。 Next, the FT controller 130 0 receives a notification from the other FT controller 130 1 to create a full backup (step 1010). As a result, the system 100 0 detects that the synchronization with the other system 100 1 is stopped in order to create a full backup.

次に、FTコントローラ1300は、他系のシステム1001が停止したか否かを確認し(ステップ1020)、他系のシステム1001が停止した後、他系のシステム1001に起動信号を送信する(ステップ1030)。 Next, FT controller 130 0, system 100 1 of the other system confirms whether or not stopped (step 1020), after the system 100 1 of the other system has stopped, a start signal to the system 100 1 of the other system Transmit (step 1030).

次に、FTコントローラ1301は、他系のFTコントローラ1300から起動信号を受信したときに(ステップ2030)、他系のCPUサブシステム1100が同期を停止する前に行っていた処理を継続しているか否かを確認する(ステップ2040)。 Next, when the FT controller 130 1 receives the activation signal from the FT controller 130 0 of the other system (step 2030), the FT controller 130 1 continues the processing performed before the CPU subsystem 110 0 of the other system stops synchronization. It is confirmed whether or not (step 2040).

FTコントローラ1301は、他系のCPUサブシステム1100が処理を継続している場合、自系のシステム1001を規定のデバイを使用しないモードに移行させる(ステップ2050)。 FT controller 130 1, when the CPU subsystem 110 0 of the other system continues the processing shifts the system 100 1 of its own system to a mode that does not use the device of the specified (step 2050).

また、CPUサブシステム1101は、他系のFTコントローラ1300から起動信号を受信すると、LAN300上のネットワークHDD200に格納されているバックアップ用OSを実行することで(ステップ2060)、自系のシステム1001に格納されている情報のフルバックアップをLAN300上のネットワークHDD200に格納する(ステップ2070)。 When the CPU subsystem 110 1 receives the activation signal from the FT controller 130 0 of the other system, the CPU subsystem 110 1 executes the backup OS stored in the network HDD 200 on the LAN 300 (step 2060), thereby A full backup of the information stored in 100 1 is stored in the network HDD 200 on the LAN 300 (step 2070).

次に、CPUサブシステム1101は、フルバックアップを格納した後、その旨を他系のFTコントローラ1300に通知する(ステップ2080)。 Next, after storing the full backup, the CPU subsystem 110 1 notifies the FT controller 130 0 to that effect (step 2080).

その後、FTコントローラ1300は、他系のCPUサブシステム1101からフルバックアップを格納した旨の通知を受信し(ステップ1040)、他系のCPUサブシステム1101に、自系のCPUサブシステム1100との同期を再開させる(ステップ1050)。 Thereafter, the FT controller 130 0 receives a notification that the full backup has been stored from the other system CPU subsystem 110 1 (step 1040), and the other system CPU subsystem 110 1 receives the own system CPU subsystem 110. Synchronization with 0 is resumed (step 1050).

これにより、0系のCPUサブシステム1100と1系のCPUサブシステム1101が同期して動作する元の状態に戻ったことになる(ステップ1200およびステップ2200)。 As a result, the 0-system CPU subsystem 110 0 and the 1-system CPU subsystem 110 1 have returned to their original operating states (steps 1200 and 2200).

一方、FTコントローラ1301は、他系のCPUサブシステム1100が同期を停止する前に行っていた処理を継続していない場合、自系のシステム1001の規定のデバイスを使用しないモードへの移行を行わない。 On the other hand, FT controller 130 1, when the CPU subsystem 110 0 of the other system does not continue the process has been performed before stopping the synchronization, to the mode not using the self-system device of the system 100 1 of the provisions of Do not migrate.

また、このとき、CPUサブシステム1101は、ネットワークHDD200に格納されているバックアップ用OSを実行することで(ステップ2090)、自系のシステム1001に格納されている情報のフルバックアップをネットワークHDD200に格納し(ステップ2100)、動作を終了する。 At this time, the CPU subsystem 110 1 executes the backup OS stored in the network HDD 200 (step 2090), thereby performing a full backup of the information stored in the local system 100 1. (Step 2100), and the operation is terminated.

上述したように、本実施形態のFTサーバ10においては、システム1001がフルバックアップを作成するために停止すると、システム1000は、停止したシステム1001に起動信号を送信する。また、停止したシステム1001は、起動信号を受信すると、バックアップ用OSを実行することでフルバックアップをLAN300上に格納する。 As described above, in the FT server 10 of the present embodiment, when the system 100 1 stops to create a full backup, the system 100 0 transmits an activation signal to the stopped system 100 1 . When the stopped system 100 1 receives the activation signal, the system 100 1 stores the full backup on the LAN 300 by executing the backup OS.

これにより、二重化されたシステムの、一方のシステムを独立に再起動させることが出来るため、外部システムを用いることなくフルバックアップを作成することが出来るという効果が得られる。   As a result, one of the duplexed systems can be restarted independently, so that an effect that a full backup can be created without using an external system is obtained.

次に、具体的な実施例を用いて本発明をさらに詳細に説明する。   Next, the present invention will be described in more detail using specific examples.

本実施例は、図1に示した実施形態のFTサーバ10を具体化したものである。   This embodiment is a specific implementation of the FT server 10 of the embodiment shown in FIG.

本実施例のFTサーバ10の構成を図3に示す。   The configuration of the FT server 10 of this embodiment is shown in FIG.

図3に示すように、本実施例のFTサーバ10は、CPUサブシステム1100とIO(Input/Output)サブシステム1200とFTコントローラ1300とクロスリンク1400とからなる0系のシステム1000と、CPUサブシステム1101とIOサブシステム1201とFTコントローラ1301とクロスリンク1401とからなる1系のシステム1001と、を二重化した構成となっている。 As shown in FIG. 3, the FT server 10 of this embodiment includes a 0- system 100 including a CPU subsystem 110 0 , an IO (Input / Output) subsystem 120 0 , an FT controller 130 0, and a cross link 140 0. 0 , a CPU subsystem 110 1 , an IO subsystem 120 1 , a 1-system system 100 1 including an FT controller 130 1 and a cross link 140 1 are duplicated.

0系のCPUサブシステム1100は、CPU1110と、メモリ1120と、それらを管理するメモリコントローラ1130と、を備えている。また、0系のIOサブシステム1200は、LANコントローラ1210と、HDD1230と、HDD1230を管理するSCSI(Small Computer System Interface)コントローラ1220と、を備えている。 The 0-system CPU subsystem 110 0 includes a CPU 111 0 , a memory 112 0, and a memory controller 113 0 that manages them. Furthermore, IO subsystem 120 0 0 system includes a LAN controller 121 0, and a HDD 123 0, a SCSI (Small Computer System Interface) controller 122 0 to manage HDD 123 0, the.

同様に、1系のCPUサブシステム1101は、CPU1111と、メモリ1121と、メモリコントローラ1131と、を備えている。また、1系のIOサブシステム1201は、LANコントローラ1211と、HDD1231と、SCSIコントローラ1221と、を備えている。 Similarly, the 1-system CPU subsystem 110 1 includes a CPU 111 1 , a memory 112 1, and a memory controller 113 1 . The 1-system IO subsystem 120 1 includes a LAN controller 121 1 , an HDD 123 1, and a SCSI controller 122 1 .

最初に、本実施例のFTサーバ10において、0系のシステム1000と1系のシステム1001が同期して動作する場合の構成要素の動作について説明する。以下では、0系のシステム1000内の構成要素について説明するが、1系のシステム1001内の構成要素も同様の動作を行う。 First, in the FT server 10 of the present embodiment, the operation of the component when the 0-system 100 0 and the 1-system 100 1 operate in synchronization will be described. In the following description, the components in the 0- system 100 1 are described, but the components in the 1-system 100 1 perform the same operation.

FTコントローラ1300は、クロスリンク1400を経由して、他系のCPUサブシステム1101に自系のCPUサブシステム1100との同期を開始させる。 The FT controller 130 0 causes the other CPU subsystem 110 1 to start synchronization with the own CPU subsystem 110 0 via the cross link 140 0 .

他系のCPUサブシステム1101と同期して動作するCPUサブシステム1100は、自系のIOサブシステム1200のHDD1230からFTサーバ10を制御するためのOSを自系のメモリ1120に読み込ませ、読み込ませたOSを自系のCPU1110に実行させる。 CPU subsystem 110 0 which operates synchronously with the CPU subsystem 110 1 of the other system is in the memory 112 0 of its own system to the OS for controlling the FT server 10 from HDD 123 0 of the IO subsystem 120 0 of its own system read allowed to execute an OS that has read into CPU 111 0 of its own system.

OSを実行したCPU1110は、FTサーバ10からの入出力を行うために仮想論理デバイスを作成し、この仮想論理デバイスを通して自系のIOサブシステム1200と他系のIOサブシステム1201とにアクセスする。 The CPU 111 0 that has executed the OS creates a virtual logical device in order to perform input / output from the FT server 10, and passes through this virtual logical device to the local IO subsystem 120 0 and the other IO subsystem 120 1 . to access.

次に、本実施例のFTサーバ10がフルバックアップを作成する際の全体の動作を、図2のフローチャートと、図4〜図9を参照して説明する。   Next, the overall operation when the FT server 10 of this embodiment creates a full backup will be described with reference to the flowchart of FIG. 2 and FIGS.

図2に示すように、通常運用時は、0系のCPUサブシステム1100と1系のCPUサブシステム1101は同期して動作している(ステップ1000およびステップ2000:図4参照)。 As shown in FIG. 2, during normal operation, 0-based CPU subsystem 110 0 the CPU subsystem 110 1 of 1 system operates synchronously (step 1000 and step 2000: see FIG. 4).

この状態において、FTコントローラ1301は、自系のCPUサブシステム1101に同期を停止させ、自系のクロスリンク1401経由で、他系のシステム1000にフルバックアップを作成する旨を通知する(ステップ2010:図5参照)。 In this state, the FT controller 130 1 stops the synchronization of the own CPU subsystem 110 1 , and notifies the other system 100 0 via the own system cross link 140 1 that a full backup will be created. (Step 2010: See FIG. 5).

次に、FTコントローラ1300は、自系のシステム1001を停止させる(ステップ2020)。 Next, the FT controller 130 0 stops the own system 100 1 (step 2020).

次に、FTコントローラ1300は、他系のFTコントローラ1301からフルバックアップを作成する旨の通知を受信すると(ステップ1010)、自系のクロスリンク1400経由で、他系のシステム1001が停止したか否かを確認する(ステップ1020)。 Next, when the FT controller 130 0 receives a notification to create a full backup from the other FT controller 130 1 (step 1010), the other system 100 1 receives the notification via the own system cross link 140 0. It is confirmed whether or not it has been stopped (step 1020).

FTコントローラ1300は、他系のシステム1001が停止した後、自系のLANコントローラ1210を用いて、LAN300経由で、他系のシステム1001に起動信号を送信する(ステップ1030:図6参照)。 FT controller 130 0, after system 100 1 of the other system is stopped, using a LAN controller 121 0 of its own system, via LAN 300, it transmits an activation signal to the system 100 1 of the other system (step 1030: 6 reference).

次に、FTコントローラ1301は、他系のFTコントローラ1300から起動信号を受信したときに(ステップ2030)、自系のクロスリンク1401経由で、他系のCPUサブシステム1100が同期を停止する前に行っていた処理を継続しているか否かを確認する(ステップ2040)。 Next, when the FT controller 130 1 receives the activation signal from the FT controller 130 0 of the other system (step 2030), the CPU subsystem 110 0 of the other system synchronizes via the cross link 140 1 of the own system. It is confirmed whether or not the processing performed before the stop is continued (step 2040).

FTコントローラ1301は、他系のCPUサブシステム1100が処理を継続している場合、自系のシステム1001を規定のデバイスを使用しないモードに移行させる(ステップ2050)。 FT controller 130 1, when the CPU subsystem 110 0 of the other system continues the processing shifts the system 100 1 of its own system to a mode that does not use the specified device (step 2050).

次に、CPUサブシステム1101は、起動信号を受信すると、自系のLANコントローラ1211を用いて、LAN300上のネットワークHDD200に格納されているバックアップ用OSを自系メモリ1121に読み込ませ、読み込ませたバックアップ用OSを自系のCPU1111に実行させる(ステップ2060:図7参照)。 Next, when receiving the activation signal, the CPU subsystem 110 1 uses the local LAN controller 121 1 to read the backup OS stored in the network HDD 200 on the LAN 300 into the local memory 112 1 , to execute the OS backup that was read into the CPU 111 1 of its own system (step 2060: see FIG. 7).

バックアップ用OSを実行したCPU1111は、自系のLANコントローラ1211を用いて、自系のHDD1231に格納されている情報のフルバックアップをネットワークHDD200に格納する(ステップ2070:図8参照)。 The CPU 111 1 that has executed the backup OS uses the local LAN controller 121 1 to store a full backup of information stored in the local HDD 123 1 in the network HDD 200 (step 2070: see FIG. 8).

次に、バックアップ用OSを実行したCPU1111は、自系のLANコントローラ1211を用いて、LAN300経由で、その旨を他系のシステム1000に通知する(ステップ2080:図9参照)。 Next, the CPU 111 1 that executed the backup OS notifies the other system 100 0 of this via the LAN 300 using the local LAN controller 121 1 (step 2080: see FIG. 9).

その後、FTコントローラ1300は、他系のCPU1111からフルバックアップを格納した旨の通知を受信し(ステップ1040)、他系のCPUサブシステム1101に、自系のCPUサブシステム1100との同期を再開させる(ステップ1050)。 Thereafter, the FT controller 130 0 receives a notification that the full backup has been stored from the other system CPU 111 1 (step 1040), and notifies the other system CPU subsystem 110 1 to the own system CPU subsystem 110 0 . Synchronization is resumed (step 1050).

これにより、0系のCPUサブシステム1100と1系のCPUサブシステム1101が同期して動作する元の状態に戻ったことになる(ステップ1200およびステップ2200:図3参照)。 As a result, the 0-system CPU subsystem 110 0 and the 1-system CPU subsystem 110 1 have returned to their original operating states (steps 1200 and 2200: see FIG. 3).

なお、上述した実施形態のFTサーバ10は、一例であり、その構成及び動作は、発明の主旨を逸脱しない範囲で、適宜変更可能である。   The FT server 10 according to the above-described embodiment is an example, and the configuration and operation thereof can be changed as appropriate without departing from the spirit of the invention.

例えば、上述した実施形態では、FTサーバ10を、0系のシステム1000と1系のシステム1001との2つの独立したシステムで構成しているが、FTサーバ10を2つ以上の独立したシステムで構成しても良い。 For example, in the above-described embodiment, the FT server 10 is configured by two independent systems, the 0-system 100 0 and the 1-system 100 1 , but the FT server 10 includes two or more independent systems. You may comprise by a system.

また、上述した実施形態では、バックアップ用OSを格納しておく場所と、フルバックアップを作成する場所と、をともにLAN300上のネットワークHDD200としているが、異なる場所としても良い。   In the embodiment described above, the location where the backup OS is stored and the location where the full backup is created are both the network HDD 200 on the LAN 300, but may be different locations.

なお、本発明のFTサーバ10は、上述のように専用のハードウェアにより実現されるもの以外に、その機能を実現するためのプログラムを、FTサーバ10にて読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをFTサーバ10に読み込ませ、実行するものであってもよい。FTサーバ10にて読み取り可能な記録媒体とは、フロッピーディスク、光磁気ディスク、CD−ROM等の記録媒体、FTサーバ10に内蔵されるハードディスク装置等の記憶装置を指す。さらに、FTサーバ10にて読み取り可能な記録媒体は、インターネットを介してプログラムを送信する場合のように、短時間の間、動的にFTサーバ10内部の揮発性メモリのように一定時間プログラムを保持しているものを含む。   The FT server 10 of the present invention records a program for realizing its function on a recording medium readable by the FT server 10 in addition to the one realized by dedicated hardware as described above. The program recorded on this recording medium may be read by the FT server 10 and executed. The recording medium readable by the FT server 10 refers to a recording medium such as a floppy disk, a magneto-optical disk, or a CD-ROM, and a storage device such as a hard disk device built in the FT server 10. Furthermore, the recording medium that can be read by the FT server 10 is dynamically programmed for a certain period of time like a volatile memory inside the FT server 10 for a short time, as in the case of transmitting a program via the Internet. Includes what is being held.

本発明の一実施形態のフォールトトレラントサーバの構成を示すブロック図である。It is a block diagram which shows the structure of the fault tolerant server of one Embodiment of this invention. 図1に示したフォールトトレラントサーバにおけるフルバックアップ作成の動作を説明するフローチャートである。It is a flowchart explaining the operation | movement of full backup creation in the fault tolerant server shown in FIG. 本発明のフォールトトレラントサーバの具体的な実施例の構成を示すブロック図である。It is a block diagram which shows the structure of the specific Example of the fault tolerant server of this invention. 図2に示したステップ1000およびステップ2000の処理を説明する図である。It is a figure explaining the process of step 1000 and step 2000 shown in FIG. 図2に示したステップ2010の処理を説明する図である。It is a figure explaining the process of step 2010 shown in FIG. 図2に示したステップ1030の処理を説明する図である。It is a figure explaining the process of step 1030 shown in FIG. 図2に示したステップ2060の処理を説明する図である。It is a figure explaining the process of step 2060 shown in FIG. 図2に示したステップ2070の処理を説明する図である。It is a figure explaining the process of step 2070 shown in FIG. 図2に示したステップ2080の処理を説明する図である。It is a figure explaining the process of step 2080 shown in FIG.

符号の説明Explanation of symbols

10 FTサーバ
1000,1001 システム
1100,1101 CPUサブシステム
1110,1111 CPU
1120,1121 メモリ
1130,1131 メモリコントローラ
1200,1201 IOサブシステム
1210,1211 LANコントローラ
1220,1221 SCSIコントローラ
1230,1231 HDD
1300,1301 FTコントローラ
1400,1401 クロスリンク
200 ネットワークHDD
300 LAN
10 FT server 100 0 , 100 1 system 110 0 , 110 1 CPU subsystem 111 0 , 111 1 CPU
112 0 , 112 1 memory 113 0 , 113 1 memory controller 120 0 , 120 1 IO subsystem 121 0 , 121 1 LAN controller 122 0 , 122 1 SCSI controller 123 0 , 123 1 HDD
130 0 , 130 1 FT controller 140 0 , 140 1 Cross link 200 Network HDD
300 LAN

Claims (9)

CPUサブシステムを含むシステムが二重化に構成され、前記CPUサブシステムがロックステップ同期で同一の動作を行うフォールトトレラントサーバであって、
前記システムの各々は、
フルバックアップ時に、自系のCPUサブシステムに前記ロックステップ同期を停止させてから、自系のシステムを停止させ、また、他系のシステムが停止すると、他系のシステムに起動信号を送信するFTコントローラをさらに含み、
前記CPUサブシステムは、他系のシステムから前記起動信号を受信すると、LAN上の第1の規定の位置に格納されているバックアップ用のオペレーティングシステムを実行することで自系のシステムに格納されている情報のフルバックアップを前記LAN上の第2の規定の位置に格納することを特徴とするフォールトトレラントサーバ。
A system including a CPU subsystem is configured to be duplicated, and the CPU subsystem is a fault tolerant server that performs the same operation in lockstep synchronization,
Each of the systems
At the time of full backup, the local CPU subsystem stops the lock step synchronization and then stops the local system. When the other system stops, an FT that sends a start signal to the other system A controller,
When the CPU subsystem receives the activation signal from the other system, the CPU subsystem executes the backup operating system stored at the first specified location on the LAN, and is stored in the local system. A fault tolerant server characterized in that a full backup of stored information is stored in a second prescribed location on the LAN.
前記CPUサブシステムは、前記フルバックアップを前記LAN上に格納すると、その旨を他系のシステムに通知し、
前記FTコントローラは、他系のシステムから前記通知を受信すると、他系のCPUサブシステムに、自系のCPUサブシステムとのロックステップ同期を再開させる、請求項1に記載のフォールトトレラントサーバ。
When the CPU subsystem stores the full backup on the LAN, it notifies the other system to that effect,
2. The fault tolerant server according to claim 1, wherein the FT controller causes the CPU subsystem of another system to resume the lock step synchronization with the CPU subsystem of the own system when receiving the notification from the system of another system.
前記FTコントローラは、他系のシステムから前記起動信号を受信したときに、他系のCPUサブシステムがロックステップ同期を停止する前に行っていた処理を継続している場合、自系のシステムを、規定のデバイスを使用しないモードに移行させる、請求項1または2に記載のフォールトトレラントサーバ。   When the FT controller receives the activation signal from the other system and continues the processing performed before the lock subsystem synchronization is stopped by the other CPU subsystem, the FT controller The fault-tolerant server according to claim 1, wherein the fault-tolerant server is shifted to a mode in which a specified device is not used. CPUサブシステムを含むシステムが二重化に構成され、前記CPUサブシステムがロックステップ同期で同一の動作を行うフォールトトレラントサーバが行うフルバックアップ方法であって、
二重化に構成された一方のシステムがフルバックアップを作成する場合、
前記一方のシステムが、該一方のシステムのCPUサブシステムに前記ロックステップ同期を停止させてから、該一方のシステムを停止させるステップと、
他方のシステムが、前記一方のシステムが停止すると、該一方のシステムに起動信号を送信するステップと、
前記一方のシステムが、前記他方のシステムから前記起動信号を受信すると、LAN上の第1の規定の位置に格納されているバックアップ用のオペレーティングシステムを実行することで前記一方のシステムに格納されている情報のフルバックアップを前記LAN上の第2の規定の位置に格納するステップと、を有することを特徴とするフルバックアップ方法。
A full backup method performed by a fault tolerant server in which a system including a CPU subsystem is configured in a duplex manner and the CPU subsystem performs the same operation in lockstep synchronization,
If one system configured for duplexing creates a full backup,
The one system causing the CPU subsystem of the one system to stop the lockstep synchronization and then stopping the one system;
The other system sends a start signal to the one system when the one system stops;
When the one system receives the activation signal from the other system, it is stored in the one system by executing the backup operating system stored in the first specified location on the LAN. Storing a full backup of information stored in a second prescribed location on the LAN.
前記一方のシステムが、前記フルバックアップを前記LAN上に格納すると、その旨を前記他方のシステムに通知するステップと、
前記他方のシステムが、前記一方のシステムから前記通知を受信すると、該一方のシステムのCPUサブシステムに、前記他方のシステムのCPUサブシステムとのロックステップ同期を再開させるステップと、をさらに有する、請求項4に記載のフルバックアップ方法。
When the one system stores the full backup on the LAN, notifying the other system to that effect;
When the other system receives the notification from the one system, further causing the CPU subsystem of the one system to resume lock step synchronization with the CPU subsystem of the other system; The full backup method according to claim 4.
前記一方のシステムが、前記他方のシステムから前記起動信号を受信したときに、該他方のCPUサブシステムがロックステップ同期を停止する前に行っていた処理を継続している場合、前記一方のシステムを、規定のデバイスを使用しないモードに移行させるステップをさらに有する、請求項4または5に記載のフルバックアップ方法。   When the one system receives the activation signal from the other system and the other CPU subsystem continues the processing performed before stopping the lockstep synchronization, the one system The full backup method according to claim 4, further comprising a step of transitioning to a mode in which the specified device is not used. CPUサブシステムを含むシステムが二重化に構成され、前記CPUサブシステムがロックステップ同期で同一の動作を行うフォールトトレラントサーバに、
二重化に構成された一方のシステムがフルバックアップを作成する場合、
前記一方のシステムが、該一方のシステムのCPUサブシステムに前記ロックステップ同期を停止させてから、該一方のシステムを停止させる手順と、
他方のシステムが、前記一方のシステムが停止すると、該一方のシステムに起動信号を送信する手順と、
前記一方のシステムが、前記他方のシステムから前記起動信号を受信すると、LAN上の第1の規定の位置に格納されているバックアップ用のオペレーティングシステムを実行することで前記一方のシステムに格納されている情報のフルバックアップを前記LAN上の第2の規定の位置に格納する手順と、を実行させることを特徴とするフルバックアッププログラム。
In a fault tolerant server in which a system including a CPU subsystem is configured to be duplicated, and the CPU subsystem performs the same operation in lockstep synchronization,
If one system configured for duplexing creates a full backup,
The one system causing the CPU subsystem of the one system to stop the lockstep synchronization and then stopping the one system;
A procedure in which the other system sends an activation signal to the one system when the one system stops;
When the one system receives the activation signal from the other system, it is stored in the one system by executing the backup operating system stored in the first specified location on the LAN. And a procedure for storing a full backup of existing information in a second prescribed location on the LAN.
前記フォールトトレラントサーバに、
前記一方のシステムが、前記フルバックアップを前記LAN上に格納すると、その旨を前記他方のシステムに通知する手順と、
前記他方のシステムが、前記一方のシステムから前記通知を受信すると、該一方のシステムのCPUサブシステムに、前記他方のシステムのCPUサブシステムとのロックステップ同期を再開させる手順と、をさらに実行させる、請求項7に記載のフルバックアッププログラム。
In the fault tolerant server,
When the one system stores the full backup on the LAN, a procedure for notifying the other system to that effect;
When the other system receives the notification from the one system, the CPU subsystem of the one system further executes a procedure for resuming lock step synchronization with the CPU subsystem of the other system. The full backup program according to claim 7.
前記フォールトトレラントサーバに、
前記一方のシステムが、前記他方のシステムから前記起動信号を受信したときに、該他方のCPUサブシステムがロックステップ同期を停止する前に行っていた処理を継続している場合、前記一方のシステムを、規定のデバイスを使用しないモードに移行させる手順をさらに実行させる、請求項7または8に記載のフルバックアッププログラム。
In the fault tolerant server,
When the one system receives the activation signal from the other system and the other CPU subsystem continues the processing performed before stopping the lockstep synchronization, the one system The full backup program according to claim 7 or 8, further comprising executing a procedure for shifting to a mode in which a specified device is not used.
JP2008049970A 2008-02-29 2008-02-29 Fault-tolerant server, full backup method, and full backup program Expired - Fee Related JP4822024B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008049970A JP4822024B2 (en) 2008-02-29 2008-02-29 Fault-tolerant server, full backup method, and full backup program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008049970A JP4822024B2 (en) 2008-02-29 2008-02-29 Fault-tolerant server, full backup method, and full backup program

Publications (2)

Publication Number Publication Date
JP2009205630A JP2009205630A (en) 2009-09-10
JP4822024B2 true JP4822024B2 (en) 2011-11-24

Family

ID=41147781

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008049970A Expired - Fee Related JP4822024B2 (en) 2008-02-29 2008-02-29 Fault-tolerant server, full backup method, and full backup program

Country Status (1)

Country Link
JP (1) JP4822024B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011170680A (en) * 2010-02-19 2011-09-01 Nec Corp Fault tolerant server
JP6083480B1 (en) 2016-02-18 2017-02-22 日本電気株式会社 Monitoring device, fault tolerant system and method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05181612A (en) * 1992-01-07 1993-07-23 Ricoh Co Ltd Disk device
JPH1011879A (en) * 1996-06-20 1998-01-16 Kyushu Nippon Denki Software Kk Error designatable magneto-optical disk device
US6243829B1 (en) * 1998-05-27 2001-06-05 Hewlett-Packard Company Memory controller supporting redundant synchronous memories
JP3399398B2 (en) * 1999-04-02 2003-04-21 日本電気株式会社 Mirror Disk Recovery Method in Fault Tolerant System
JP3862011B2 (en) * 2002-08-30 2006-12-27 日本電気株式会社 Fault tolerant computer and its disk management mechanism and disk management program
JP2006178616A (en) * 2004-12-21 2006-07-06 Nec Corp Fault tolerant system, controller used thereform, operation method and operation program
CN102117233B (en) * 2005-06-24 2013-07-17 信科索尔特公司 System and method for high performance enterprise data protection
JP2008033921A (en) * 2006-06-29 2008-02-14 Seagate Technology Llc Distributed storage system with accelerated striping

Also Published As

Publication number Publication date
JP2009205630A (en) 2009-09-10

Similar Documents

Publication Publication Date Title
US10146472B2 (en) Tertiary storage unit management in bidirectional data copying
EP2118750B1 (en) Using virtual copies in a failover and failback environment
US7613749B2 (en) System and method for application fault tolerance and recovery using topologically remotely located computing devices
EP2078254B1 (en) Apparatus, system, and method for an improved synchronous data mirror swap
US20020129214A1 (en) System and method for minimizing message transactions for fault-tolerant snapshots in a dual-controller environment
JP5352115B2 (en) Storage system and method for changing monitoring condition thereof
JP5286212B2 (en) Remote copy control method and system in storage cluster environment
JP2007086972A (en) Storage system, duplex control method, and program
US20180143774A1 (en) Multi-mode data replication for data loss risk reduction
JP2004303122A (en) Data transfer control system
JP2005196490A (en) System and method for data duplication
JP2006293910A (en) Safe and fast database replication technology
US20090177916A1 (en) Storage system, controller of storage system, control method of storage system
JP4822024B2 (en) Fault-tolerant server, full backup method, and full backup program
US10025655B2 (en) Storage system
JP5817296B2 (en) Control device, control method, and storage device
US20230289327A1 (en) Failure hinting for site preparation in multi-site data replication environment
JP2006058960A (en) Synchronization method and system in redundant configuration server system
JP2009265973A (en) Data synchronization system, failure recovery method, and program
JP2010204885A (en) Disk array device and method for controlling the same
JP2011170680A (en) Fault tolerant server
JP2011209834A (en) Redundant system
JP2006260392A (en) High availability virtual tape library system
US20080072001A1 (en) System, Method and Computer Program Product for Copying Data
US20210157482A1 (en) Information processing apparatus, information processing system, and recording medium storing program

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110810

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110823

R150 Certificate of patent or registration of utility model

Ref document number: 4822024

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140916

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees