JP4495688B2 - Verification system - Google Patents
Verification system Download PDFInfo
- Publication number
- JP4495688B2 JP4495688B2 JP2006084766A JP2006084766A JP4495688B2 JP 4495688 B2 JP4495688 B2 JP 4495688B2 JP 2006084766 A JP2006084766 A JP 2006084766A JP 2006084766 A JP2006084766 A JP 2006084766A JP 4495688 B2 JP4495688 B2 JP 4495688B2
- Authority
- JP
- Japan
- Prior art keywords
- server device
- verification
- output data
- production
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Test And Diagnosis Of Digital Computers (AREA)
- Debugging And Monitoring (AREA)
Description
本発明は、システム移行時の新しいシステムを検証する検証システムであって、例えば、金融システムなどの複数のサーバ装置を有する大規模システムに用いて好適な検証システムに関する。 The present invention relates to a verification system for verifying a new system at the time of system migration, and relates to a verification system suitable for use in, for example, a large-scale system having a plurality of server devices such as a financial system.
従来、複数の大規模システムにおいては、システム移行時には、検証機に本番機と同じ本番データを投入してテストを実施したり、本番機と検証機の出力を照合してテストを実施したりすることにより、移行時にデグレードしていないことのチェックをおこなっている。 Conventionally, in multiple large-scale systems, at the time of system migration, the same production data as the production machine is input to the verification machine and the test is performed, or the output of the production machine and the verification machine is collated. As a result, it is checked that there is no degradation at the time of migration.
特許文献1には、同等性検証装置により変更前のプログラムと変更後のプログラムとの結果を照合する技術が開示されている。 Patent Document 1 discloses a technique for collating the results of a program before change and a program after change by an equivalence verification device.
また、特許文献2には、本番系システムの変更も停止もおこなうことなく、テスト支援装置にデータを転送し、並行テストをする技術が開示されている。 Patent Document 2 discloses a technique for transferring data to a test support device and performing a parallel test without changing or stopping the production system.
ところが、特許文献1は、本番機でのテストを実施する場合には、業務を停止する必要がある。 However, in Patent Document 1, it is necessary to stop the business when performing a test on a production machine.
特許文献2は、本番系システムと並行テストをおこなうものであるが、本番機で業務を処理しながら、検証機へ本番機と同じ本番データを投入したり、検証機と本番機の出力を照合することは、テストに関するオーバヘッドが大きく、システム全体の処理能力が低下してしまうため、リアルタイムで実施することは困難である。 Patent Document 2 performs a parallel test with the production system. While processing the business on the production machine, the same production data as the production machine is input to the validation machine, or the output of the validation machine and the production machine is collated. This is difficult to implement in real time because the overhead for testing is large and the processing capacity of the entire system is reduced.
また、システム移行後、新しい環境でデグレードが発生しても、すぐには検知することは困難である。 In addition, it is difficult to detect immediately when a degradation occurs in a new environment after system migration.
さらに、上記従来技術では、本番系のシステムとテストをおこなうシステムを並列に走行させるとの記述があるのみで、リソースを通常の倍だけ用意する必要がある。したがって、テストが真に必要なリソースだけ用意してテストにおけるコストを削減することについて考慮されていない。 Furthermore, in the above-described prior art, there is only a description that the production system and the system to be tested are run in parallel, and it is necessary to prepare resources as many times as usual. Therefore, no consideration is given to reducing the cost of testing by providing only resources that are truly necessary for testing.
特に、複数のサーバを有する大規模システムにおいて、一部のサーバをテストするためにシステムのスループットが低下してしまうという問題点があった。 In particular, in a large-scale system having a plurality of servers, there is a problem in that the throughput of the system decreases because some servers are tested.
本発明は、上記問題点を解決するためになされたものでその目的は、本番機で業務をしながら、システム全体の処理能力を低下させることなく、本番機でテストを実施することができるシステムを提供することにある。 The present invention has been made to solve the above problems, and its purpose is to perform a test on the production machine while reducing the processing capacity of the entire system while operating on the production machine. Is to provide.
本発明の業務処理を実行するサーバ装置の機能を検証する検証システムは、業務処理を実行する複数のサーバ装置と、複数のサーバ装置とネットワークにより接続され、複数のサーバ装置のいずれかで実行する業務処理に必要な入力を生成するクライアント装置と、クライアント装置の生成した入力を複数のサーバ装置のいずれかへ送信する負荷分散装置と、入力併走装置と、出力照合装置とを備えている。 A verification system for verifying the function of a server device that executes business processing according to the present invention is connected to a plurality of server devices that execute business processing, a plurality of server devices via a network, and is executed by any of the plurality of server devices. A client device that generates input necessary for business processing, a load distribution device that transmits the input generated by the client device to any of a plurality of server devices, an input parallel device, and an output verification device are provided.
そして、複数のサーバ装置のいずれかから機能を検証する対象となる本番サーバ装置を選び、それに対応してサーバ装置の機能を検証するための検証サーバ装置を設ける。これらの本番サーバ装置と検証サーバ装置は、クライアントで生成された同じ内容の入力を受信して、本番サーバ装置と検証サーバ装置とが同等の業務処理を実行する。 A production server device whose function is to be verified is selected from any of the plurality of server devices, and a verification server device for verifying the function of the server device is provided correspondingly. The production server device and the verification server device receive the input of the same content generated by the client, and the production server device and the verification server device execute equivalent business processing.
本番サーバ装置と検証サーバ装置とでは、テストのためにアプリケーションソフトウェアのバージョンが異なっていたり、そのアプリケーションソフトウェアを実行する基盤ソフトウェアが異なっている。また、ハードウェア構成が異なっている場合もあり得る。 The production server device and the verification server device have different application software versions for testing, and different base software for executing the application software. Also, the hardware configuration may be different.
入力併走装置は、負荷分散装置からクライアントが生成した入力を受信し、本番サーバ装置と検証サーバ装置とに同じ内容の入力を送信するようになっている。 The input parallel device receives the input generated by the client from the load balancer, and transmits the same content input to the production server device and the verification server device.
出力照合装置は、本番サーバ装置と検証サーバ装置とから、それぞれ送信されてくる業務処理の出力を受信し、各々照合してリアルタイムにテストをおこなうことができる。 The output collation device can receive the output of the business process transmitted from the production server device and the verification server device, respectively, and collate each to perform a test in real time.
さらに、構成管理装置を設け、複数のサーバ装置の処理能力を勘案して、検証サーバ装置を定める。また、構成管理装置は、テストにより業務のスループットが低下するときには、複数のサーバ装置の中からそれを補完するための補完サーバを決定する。 Furthermore, a configuration management device is provided, and a verification server device is determined in consideration of processing capabilities of a plurality of server devices. In addition, when the business throughput decreases due to the test, the configuration management apparatus determines a complementary server for complementing the plurality of server apparatuses.
本発明によれば、本番機で業務をしながら、システム全体の処理能力を低下させることなく、本番機でテストを実施することができるシステムを提供することができる。 According to the present invention, it is possible to provide a system capable of performing a test on the production machine while reducing the processing capacity of the entire system while performing work on the production machine.
以下、本発明に係る各実施形態を、図1ないし図19を用いて説明する。 Embodiments according to the present invention will be described below with reference to FIGS.
〔実施形態1〕
以下、第一の実施形態を、図1ないし図9を用いて説明する。
[Embodiment 1]
Hereinafter, a first embodiment will be described with reference to FIGS. 1 to 9.
先ず、図1および図2を用いて本発明の第一の実施形態に係る検証システムのシステム構成について説明する。
図1は、第一の実施形態に係る検証システムのシステム概要図である。
図2は、第一の実施形態に係る検証システムの接続構成図である。
First, the system configuration of the verification system according to the first embodiment of the present invention will be described with reference to FIGS. 1 and 2.
FIG. 1 is a system outline diagram of a verification system according to the first embodiment.
FIG. 2 is a connection configuration diagram of the verification system according to the first embodiment.
図2に示したように、本実施形態の検証システムは、複数のサーバ装置20,21,22と、負荷分散装置30と、入力併走装置40とが接続され、さらに、クライアント装置10が負荷分散装置30にネットワーク70を介して接続されている。ここで、サーバ装置20,21,22には、それぞれ、PID20,PID21,PID22、入力併走装置40には、PID40という物理装置IDが付与されているものとする。
As shown in FIG. 2, the verification system of this embodiment includes a plurality of
クライアント装置10で生成された入力データは、図1に示されるように負荷分散装置30に送られる。負荷分散装置30では、システム全体のスループットが向上するように複数のサーバ装置の内のいずれかのサーバ装置に入力データを送信する。
The input data generated by the
本実施形態の検証システムは、複数のサーバ装置の内のいずれかの業務処理をおこなうときの機能を検証するシステムである。検証のために設けられるのがサーバ装置が検証用のサーバ装置22(以下、単に「検証サーバ装置」ともいう)であり、検証の対象となるサーバ装置が本番用のサーバ装置21(以下、単に「本番サーバ装置」ともいう)である。
The verification system of the present embodiment is a system for verifying a function when performing any one of a plurality of server devices. The server device provided for verification is a
これは、アプリケーションソフトウェアのバージョンアップをするときに、本番用のサーバ装置21に安定したバージョンのアプリケーションソフトウェアを実行させ、検証用のサーバ装置22に新しいバージョンのアプリケーションソフトウェアを実行させて検証させることができる。逆に、本番用のサーバ装置21に新しくバージョンのアプリケーションソフトウェアのを実行させ、検証用のサーバ装置22に前のバージョンのアプリケーションソフトウェアのを実行させて、デグレードチェックをおこなうこともできる。
This is because when the application software is upgraded, the
また、そのようなアプリケーションソフトウェアを稼動させる基盤ソフトウェアを異ならせて、異なった基盤ソフトウェアの機能を検証することもできる。ここで、基盤ソフトウェアとは、OS(Operating System)と、OSとアプリケーションソフトウェアの仲立ちとなるいわゆるミドルソフトウェアの両者を含む概念である。 It is also possible to verify the functions of different base software by changing the base software that runs such application software. Here, the basic software is a concept including both an OS (Operating System) and so-called middle software that serves as an intermediate between the OS and application software.
さらに、本番用のサーバ装置と検証用のサーバ装置とのハードウェア構成を変更して、その動作を検証するようにしてもよい。サーバ装置のハードウェア構成の変更は、CPUを変更する、メモリを変更する、ボードの一部を取り換えるなどの部品レベルのものから、サーバ装置の全体を他のメーカに変更するなどの全てを変えてしまう場合の両者が含まれる。 Furthermore, the hardware configuration of the production server device and the verification server device may be changed to verify the operation. Changing the hardware configuration of the server device changes everything from changing the CPU, changing the memory, changing parts of the board, etc., to changing the entire server device to another manufacturer. Both cases are included.
入力併走装置40は、負荷分散装置40から入力データを受信し、本番用のサーバ装置21と検証用のサーバ装置22とに同じ内容の入力データを送るものとする。
It is assumed that the input
次に、図3ないし図8を用いて本発明の第一の実施形態に係る検証システムの各部の構成と各部で取り扱うテーブルのデータ構造を説明する。 Next, the configuration of each part of the verification system according to the first embodiment of the present invention and the data structure of the table handled by each part will be described with reference to FIGS.
先ず、図3および図4を用いてサーバ装置について説明する。
図3は、サーバ装置20の機能構成図である。
図4は、サーバ装置20のハードウェア構成図である。
First, the server apparatus will be described with reference to FIGS. 3 and 4.
FIG. 3 is a functional configuration diagram of the
FIG. 4 is a hardware configuration diagram of the
ここでは、サーバ装置20を例に説明する。サーバ装置20は、図3に示されるようにプログラムを実行する処理装置210から構成されている。
Here, the
そして、処理装置210では、入力データを受信する受信部211と、入力データを送信する送信部212と、業務処理を実行する業務処理部213とが動作している。
In the
サーバ装置20のハードウェア構成は、図4に示されるようにCPU810、メモリ820、表示インタフェース830、入出力インタフェース840、ネットワークインタフェース850、記憶装置インタフェース860がバス800により接続されたものである。
As shown in FIG. 4, the hardware configuration of the
表示装置900には、稼動状況のモニタや出力結果が表示される。入出力インタフェースには、キーボード910やマウス920などの入出力装置が接続され、管理者は、これらの入出力装置からコマンドなどを入力する。ネットワークインタフェース850には、LAN、WANなどのネットワークが接続され、このインターフェースを介して外部の装置と通信をおこなう。記憶装置インターフェース860には、データやプログラムを格納するハードディスク装置930などの記憶装置が接続される。ハードディスク装置930は、アレイ上に接続されてディスクアレイを構成する場合もある。
The
業務処理のアプリケーションプログラム、OSなどは、ハードディスク装置930に格納されており、実行されるときにメモリ820にロードされて、CPU810により実行される。
Business processing application programs, OS, and the like are stored in the
既に述べたように、本実施形態の本番用のサーバ装置21と検証用サーバ装置22は、ハードウェア構成の変更として、CPU810の性能を変えたり、メモリ820を違う種別のものを用いたりしてもよい。また、ネットワークインターフェースのインターフェイスボード毎、交換してもよい。
As already described, the
また、本番用のサーバ装置21とは、別のメーカのかなり部品構成などが異なったサーバで、検証用サーバ装置22を構成してもよい。
Further, the
次に、図5および図6を用いて負荷分散装置について説明する。
図5は、負荷分散装置30の機能構成図である。
図6は、送信先管理テーブルの一例を示す図である。
Next, the load balancer will be described with reference to FIGS.
FIG. 5 is a functional configuration diagram of the
FIG. 6 is a diagram illustrating an example of the transmission destination management table.
負荷分散装置30は、図5に示されるようにプログラムを実行する処理装置310と、データを格納する記憶装置320とから構成されている。
As shown in FIG. 5, the
処理装置310では、入力データを受信する受信部311と、入力データを送信する送信部312と、入力データを送信する論理装置をサーバ装置の状態や入力データの内容などから選定する負荷分散部313と、選定した論理装置から実際に送信する物理装置を決定する送信先決定部314とが動作している。
In the
記憶装置320には、入力データを送信する論理装置と物理装置の対応が登録されている送信先管理テーブル321が格納されている。
The
送信先管理テーブル321は、入力データを送信する論理装置と物理装置の対応が登録されているテーブルであり、図6に示されように送信先の論理装置IDを格納するフィールド3211と、送信先の物理装置IDを格納するフィールド3212とから構成されている。図6に示されている例では、VID20という送信先論理装置IDに対して、PID20という送信先物理装置IDが、また、VID21という送信先論理装置IDに対して、PID40という送信先物理装置IDが登録されている。これは、負荷分散部によって選定された論理装置がVID20である場合には、PID20に相当するサーバ装置20に入力データを送信し、負荷分散部によって選定された論理装置がVID21である場合には、PID40に相当する入力併走装置40に入力データを送信することを示している。
The transmission destination management table 321 is a table in which the correspondence between the logical device that transmits input data and the physical device is registered . As shown in FIG. 6 , a
負荷分散装置30は、ルータなどのネットワーク接続装置として実現されていもよいし、計算機装置の一機能として実現されてもよい。
The
次に、図7および図8を用いて入力併走装置について説明する。
図7は、入力併走装置40の機能構成図である。
図8は、併走先管理テーブルの一例を示す図である。
Next, the input parallel device will be described with reference to FIGS.
FIG. 7 is a functional configuration diagram of the input
FIG. 8 is a diagram illustrating an example of a parallel running destination management table.
入力併走装置40は、図7に示されるようにプログラムを実行する処理装置410と、データを格納する記憶装置420とから構成されている。
As shown in FIG. 7, the input
処理装置410では、入力データを受信する受信部411と入力データを送信する送信部412と、入力データに付与する取引IDを生成する取引ID生成部413と、入力データを複製し、複数のサーバ装置へ入力データを併走させる入力併走部414とが動作している。
In the
記憶装置420には、入力データを併走させるサーバ装置が登録されている併走先管理テーブル421が格納されている。
The
併走先管理テーブル421は、入力データを併走させるサーバ装置が登録されているテーブルであり、図8に示されるように受信した論理装置IDを格納するフィールド4211と、受信した入力データの送信先の物理装置IDを格納するフィールド4212と、複製した入力データの送信先の物理装置IDを格納するフィールド4213とから構成されている。図8に示される例では、VID21という論理装置IDに対して、PID21という本番サーバ装置物理装置IDと、PID22という検証サーバ装置物理装置IDとが登録されている。これは、受信した入力データに付与された論理装置IDがVID21である場合、PID21に相当するサーバ装置21に受信した入力データを、PID22に相当するサーバ装置22に複製した入力データを送信することを示している。
The parallel destination management table 421 is a table in which server devices for parallel processing of input data are registered. As shown in FIG. 8, a
また、図1に示したシステム構成図では、入力併走装置40は、独立した装置として図示しているが、本番用のサーバ装置21の中に組み込んでもよいし、検証用のサーバ装置22の中に組み込んでもよい。さらに、負荷分散装置30の中の一機能であってもよい。
In the system configuration diagram shown in FIG. 1, the input
さらに、入力併走装置40は、ルータなどのネットワーク接続装置として実現されていもよいし、計算機装置の一機能として実現されてもよい。
Further, the input
次に、図9を用いて第一の実施形態に係る検証システムの処理について説明する。
図9は、第一の実施形態に係る検証システムの処理を示すフローチャートである。
Next, processing of the verification system according to the first embodiment will be described with reference to FIG.
FIG. 9 is a flowchart showing processing of the verification system according to the first embodiment.
先ず、クライアント端末10は、業務処理を実行するために必要となる入力データを、ネットワーク70を介して、負荷分散装置30に送信し、負荷分散装置30の受信部311は、当該入力データを受信する(S401)。
First, the
次に、負荷分散装置30の負荷分散部313は、ステップS401で受信した入力データを送信すべきサーバ装置の論理装置IDをサーバ装置の状態や入力データの内容に基づいて選定する(S402)。
Next, the
次に、負荷分散装置30の送信先決定部314は、ステップS402で選定した論理装置IDと、送信先管理テーブル321とに基づき、送信先の物理装置IDを決定する(S403)。
Next, the transmission
次に、負荷分散装置30の送信部312は、ステップS403で決定した物理装置IDに相当するサーバ装置、あるいは入力併走装置へ、ステップS402で選定した論理装置IDと、ステップS401で受信した入力データとを送信する(S404)。ただし、ステップS403、S404はルータなどの負荷分散装置30とは別の機器が実行してもよい。
Next, the
ここで、ステップS404における送信先がサーバ装置であり、図1、図9に示したようにサーバ装置20である場合には、ステップS404において、サーバ装置20の受信部211が、論理装置IDと入力データとを受信する。
Here, when the transmission destination in step S404 is the server apparatus and the
そして、サーバ装置20の業務処理部213は、ステップS404で受信した入力データを用いて、業務処理を実行する(S405)。
Then, the
一方、ステップS404における送信先が入力併走装置40である場合、ステップS404において、入力併走装置40の受信部411が、論理装置IDと入力データとを受信する。
On the other hand, when the transmission destination in step S404 is the input
次に、入力併走装置40の取引ID生成部413は、取引IDを生成する(S406)。ここで、取引IDとして、トランザクションIDや取引通番などの既存のIDを用いてもよい。
Next, the transaction
次に、入力併走装置40の入力併走部414は、ステップS404で受信した論理装置IDと、併走先管理テーブル421とに基づき、本番サーバ装置物理装置IDと、検証サーバ装置物理装置IDとを決定する(S407)。
Next, the input
次に、入力併走装置40の送信部412は、ステップS407で決定した本番サーバ装置物理装置IDに相当するサーバ装置、図1、図9に示された例の場合には、サーバ装置21に、ステップS406で生成した取引IDと、ステップS404で受信した入力データとを送信し(S408)、サーバ装置21の受信部211は、取引IDと入力データとを受信する。
Next, in the case of the server device corresponding to the production server device physical device ID determined in step S407, in the example shown in FIG. 1 and FIG. The transaction ID generated in step S406 and the input data received in step S404 are transmitted (S408), and the receiving
そして、サーバ装置21の業務処理部213は、受信した入力データを用いて、業務処理を実行する(S409)。
Then, the
一方、入力併走装置40の送信部412は、ステップS407で決定した検証サーバ装置物理装置IDに相当するサーバ装置、図1、図9に示された例の場合には、サーバ装置22に、ステップS406で生成した取引IDと、サーバ装置20に送信したのと同じ内容の入力データとを送信し、サーバ装置22の受信部211は、取引IDと入力データとを受信する(S410)。
On the other hand, in the case of the server device corresponding to the verification server device physical device ID determined in step S407, in the example shown in FIG. 1 and FIG. The transaction ID generated in S406 and the input data having the same content as that transmitted to the
そして、サーバ装置22の業務処理部213は、ステップS411で受信した入力データを用いて、業務処理を実行する(S412)。
Then, the
本実施形態で示したように、本番用のサーバ装置21で業務を処理しながら、検証用のサーバ装置22で本番データを用いたテストを実施することができる。また、すべてのサーバ装置に対して検証用のサーバを割り当てる必要はないため、テストのための用意すべきリソースを削減することができる。すなわち、サーバ装置21に対して検証用のサーバ装置22を用意すればよく、サーバ装置20は通常の処理を続けることができる。
As shown in the present embodiment, it is possible to perform a test using the production data on the
〔実施形態2〕
以下、第二の実施形態を、図10ないし図15を用いて説明する。
[Embodiment 2]
Hereinafter, the second embodiment will be described with reference to FIGS. 10 to 15.
本実施形態は、第一の実施形態の検証システムに出力照合装置を付け加えて、本番用のサーバ装置の出力と検証用のサーバ装置の出力を照合させるようにしたものである。 In the present embodiment, an output collation device is added to the verification system of the first embodiment so that the output of the production server device and the output of the verification server device are collated.
先ず、図10および図11を用いて第二の実施形態に係る検証システムのシステム構成について説明する。
図10は、第二の実施形態に係る検証システムのシステム概要図である。
図11は、第二の実施形態に係る検証システムの接続構成図である。
First, the system configuration of the verification system according to the second embodiment will be described with reference to FIGS. 10 and 11.
FIG. 10 is a system schematic diagram of the verification system according to the second embodiment.
FIG. 11 is a connection configuration diagram of the verification system according to the second embodiment.
図11に示されるように本実施形態の検証システムでは、第一の実施形態の構成要素に加えて、出力照合装置50が加わっている。出力照合装置50は、図10に示されるように本番用のサーバ装置21からの出力データと検証用のサーバ装置22からの出力データを照合してその正当性を検証する。
As shown in FIG. 11, in the verification system of this embodiment, an
次に、図12ないし図14を用いて出力照合装置50について説明する。
図12は、出力照合装置50の機能構成図である。
図13は、照合元管理テーブル521の一例を示す図である。
図14は、出力保存テーブル522の一例を示す図である。
Next, the
FIG. 12 is a functional configuration diagram of the
FIG. 13 is a diagram illustrating an example of the collation source management table 521.
FIG. 14 is a diagram illustrating an example of the output storage table 522.
出力照合装置50は、図12に示されるようにプログラムを実行する処理装置510と、データを格納する記憶装置520とから構成されている。
As shown in FIG. 12, the
処理装置510では、入力データを受信する受信部511と、入力データを送信する送信部512と、サーバ装置の業務処理部213の出力を保存する出力保存部513と、出力保存部513の保存した出力データを照合する出力照合部314とが動作している。
In the
記憶装置520には、出力結果を照合するサーバ装置が登録されている照合元管理テーブル521と、サーバ装置の業務処理部213の出力結果を保存する出力保存テーブル522とが格納されている。
The
照合元管理テーブル521は、出力結果を照合するサーバ装置が登録されているテーブルであり、図13に示されるように本番用のサーバ装置の物理装置ID(本番サーバ装置物理装置ID)を格納するフィールド5211と、検証用のサーバ装置の物理装置ID(検証サーバ装置物理装置ID)を格納するフィールド5212とから構成されている。図13に示された例の場合では、PID21という本番サーバ装置物理装置IDに対して、PID22という検証サーバ装置物理装置IDが登録されている。これは、PID21に相当するサーバ装置21の出力データとPID22に相当するサーバ装置22の出力データを照合することを示している。
The collation source management table 521 is a table in which server devices for collating output results are registered, and stores the physical device ID (production server device physical device ID) of the production server device as shown in FIG. The
出力保存テーブル522は、サーバ装置の業務処理部213の出力を保存するテーブルであり、取引IDを格納するフィールド5221と、本番用のサーバ装置の物理装置ID(本番サーバ装置物理装置ID)を格納するフィールド5222と、本番用のサーバ装置の一つあるいは複数の出力データを格納するフィールド5223と、検証用のサーバ装置の物理装置ID(検証サーバ装置物理装置ID)を格納するフィールド5224と、検証用のサーバ装置の一つあるいは複数の出力データを格納するフィールド5225とから構成されている。図14に示された例の場合では、TID01という取引IDに対して、PID21という本番サーバ装置物理装置IDと、OUT2101という本番用のサーバ装置の出力データと、PID22という検証サーバ装置物理装置IDと、OUT2201という検証用のサーバ装置の出力データとが登録されている。これは、TID01に相当する入力データを用いて、PID21に相当するサーバ装置21で実行された業務処理の出力データがOUT2101であり、PID22に相当するサーバ装置22で実行された業務処理の出力データがOUT2201であることを示している。
The output storage table 522 is a table for storing the output of the
次に、図15を用いて第二の実施形態に係る検証システムの処理について説明する。
図15は、第二の実施形態に係る検証システムの処理を示すフローチャートである。
Next, processing of the verification system according to the second embodiment will be described with reference to FIG.
FIG. 15 is a flowchart showing processing of the verification system according to the second embodiment.
本実施形態では、第一の実施形態で説明した事項については省略し、主に出力照合装置による出力照合処理について説明する。 In the present embodiment, the items described in the first embodiment are omitted, and the output collation process by the output collation apparatus will be mainly described.
先ず、第一の実施形態の図9により説明した本番用のサーバ装置21と検証用のサーバ装置22で業務処理を並行しておこなう(S401〜S412)。
First, business processing is performed in parallel on the
ここで、本番用のサーバ装置、図10、図15に示した例の場合、サーバ装置21の送信部212は、出力照合装置50に、ステップS409で受信した取引IDと、ステップS410で実行した業務処理の一つあるいは複数の出力データとを送信し(S501)、出力照合装置50の受信部511は、取引IDと出力データとを受信する。ただし、一つあるいは複数の出力データは、出力した時点で順次送信してもよいし、ある時点でまとめて送信してもよい。
Here, in the case of the production server device, in the example shown in FIGS. 10 and 15, the
次に、出力照合装置50の出力保存部513は、ステップS501で受信した取引IDと、送信元のサーバ装置、図10、図15に示した例の場合には、サーバ装置21の物理装置IDと、ステップS501で受信した出力データとを、出力保存テーブル522へ保存する(S502)。
Next, the
一方、検証用のサーバ装置、図10、図15に示した例の場合、サーバ装置22の送信部212は、出力照合装置50に、ステップS411で受信した取引IDと、ステップS412で実行した業務処理の一つあるいは複数の出力データとを送信し(S503)、出力照合装置50の受信部511は、取引IDと出力データとを受信する。ただし、一つあるいは複数の出力データは、出力した時点で順次送信してもよいし、ある時点でまとめて送信してもよい。
On the other hand, in the case of the server device for verification, examples shown in FIGS. 10 and 15, the
次に、出力照合装置50の出力保存部513は、ステップS504で受信した取引IDと、送信元のサーバ装置、図10、図15に示した例の場合、サーバ装置22の物理装置IDと、ステップS503で受信した出力データとを、出力保存テーブル522へ保存する(S504)。
Next, the
次に、出力照合装置50の出力照合部514は、照合元管理テーブル521を基に、出力データを照合する複数のサーバ装置を決定する(S505)。
Next, the
そして、出力照合装置50の出力照合部514は、ステップS501やステップS504で送信されてきた取引IDに基づき、出力保存テーブル522より、ステップS506で決定したサーバ装置、図10、図15に示した例の場合、サーバ装置21とサーバ装置22の出力データを取得し、照合する(S506)。
Then, the
本実施形態では、図10、図11に示されるように、出力照合装置50は、独立の装置として説明した。しかしながら、出力照合装置50の有する機能は、本番用のサーバ装置であるサーバ装置21、あるいは、検証用のサーバ装置であるサーバ装置22が有していてもよい。
In the present embodiment, as illustrated in FIGS. 10 and 11, the
ステップS507の照合処理は、照合対象のサーバ装置からの出力データが揃った時点で順次実行してもよいし、ある時点でまとめて実行してもよい。例えば、サーバからの出力データがSQLコマンドである場合に、本番用のサーバ装置21と検証用のサーバ装置22のSQLコマンドを受け取った時点で照合してもよいし、半日ごと、あるいは、一日ごとに照合をすることにしてもよい。
The collation processing in step S507 may be performed sequentially when the output data from the server device to be collated is complete, or may be collectively executed at a certain time. For example, when the output data from the server is an SQL command, collation may be performed when the SQL commands of the
また、ある時点でまとめて照合する場合に、一つ一つのSQLコマンドを照合してもよいし、複数のSQLコマンドによりデータベースを更新して、適用したデータベースの更新状態を照合するようにしてもよい。 Further, when collating at a certain point in time, each SQL command may be collated, or the database may be updated by a plurality of SQL commands, and the update state of the applied database may be collated. Good.
また、ステップS501やステップS503のサーバ装置と出力照合装置50との出力データの受け渡しは、本実施形態のようにサーバ装置が出力照合装置50へ送信してもよいし、出力照合装置50の方からトリガーを掛けてサーバ装置から取得するようにしてもよい。
Further, the delivery of output data between the server device and the
本実施形態により、サーバ装置21で業務を処理しながら、サーバ装置22で本番データを用いたテストを実施するとともに、デグレードのチェックをおこなうことができる。また、すべてのサーバ装置に対して検証用のサーバを割り当てる必要はないため、テストのための用意すべきリソースを削減することができる。
According to the present embodiment, while the
さらに、本番用のサーバ装置21で移行後のシステムを動作させ、検証用のサーバ装置22で移行前のシステムを動作させ、出力照合装置50により、移行後のシステムで動作しているサーバ装置22と移行前のシステムで動作しているサーバ装置21の動作を検証することによって、移行後のシステムのデグレードの発生をすぐに検知することができる。
Further, the system after the migration is operated by the
〔実施形態3〕
以下、第三の実施形態を、図16ないし図19を用いて説明する。
[Embodiment 3]
Hereinafter, a third embodiment will be described with reference to FIGS. 16 to 19.
本実施形態は、第二の実施形態の検証システムに、さらに構成管理装置を付け加えて、検証サーバ装置と検証によるスループットの低下を補うための補完サーバを動的に選択できるようにしたものである。 In this embodiment, a configuration management device is further added to the verification system of the second embodiment so that a verification server device and a complementary server for compensating for a decrease in throughput due to verification can be dynamically selected. .
先ず、図16を用いて第三の実施形態に係る検証システムのシステム構成について説明する。
図16は、第三の実施形態に係る検証システムの接続構成図である。
First, the system configuration of the verification system according to the third embodiment will be described with reference to FIG.
FIG. 16 is a connection configuration diagram of the verification system according to the third embodiment.
本実施形態の検証システムは、図16に示されるように、図11に示される第二の実施形態の構成に構成管理装置60が加わっている。
In the verification system of this embodiment, as shown in FIG. 16, a
構成管理装置60は、複数のサーバ装置の中から各々のサーバ装置の処理能力を勘案し、検証対象となる本番用のサーバ装置に対応する検証サーバ装置と、検証のためにスループットの低下を補うために適切な補完サーバ装置を選択する機能を有する装置である。
The
次に、図17および図18を用いて構成管理装置60について説明する。
図17は、構成管理装置60の機能構成図である。
図18は、構成管理テーブルの一例を示す図である。
Next, the
FIG. 17 is a functional configuration diagram of the
FIG. 18 is a diagram illustrating an example of the configuration management table.
構成管理装置60は、図17に示されるようにプログラムを実行する処理装置610と、データを格納する記憶装置620とから構成されている。
As shown in FIG. 17, the
処理装置610では、検証用のサーバ装置を割り当てる検証サーバ決定部611と、処理能力を補完するサーバ装置を割り当てる補完サーバ決定部612とが動作している。
In the
記憶装置620には、サーバ装置の情報が登録されている構成管理テーブル621が格納されている。
The
構成管理テーブル621は、図18に示されるようにサーバ装置の情報が登録されているテーブルであり、サーバ装置の物理装置ID(サーバ装置物理装置ID)を格納するフィールド6211と、サーバ装置の使用状況を格納するフィールド6212と、サーバ装置の処理能力などの属性を格納するフィールド6213とから構成されている。図18に示されている例では、PID20というサーバ装置物理装置IDに対して、「使用中」という使用状況と、「処理能力=10、…」という属性とが、PID23というサーバ装置物理装置IDに対して、「空き」という使用状況と、「処理能力=5、…」という属性とが、登録されている。これは、PID20に相当するサーバ装置20は、処理能力が10であり、既に使用中であること、PID23に相当するサーバ装置23は、処理能力が5であり、現在空き状態、すなわち、新たな処理に割当可能であることを示している。
The configuration management table 621 is a table in which server device information is registered, as shown in FIG. 18, a
次に、図19を用いて本実施形態の検証システムで実行されるサーバ装置割当処理について説明する。
図19は、サーバ装置割当処理を示すフローチャートである。
Next, a server apparatus allocation process executed by the verification system of this embodiment will be described using FIG.
FIG. 19 is a flowchart showing the server apparatus allocation process.
先ず、構成管理装置60の検証サーバ決定部611は、あるサーバ装置、図19に示した例の場合には、サーバ装置21の検証サーバ装置の割当を要求する(S601)。
First, the verification
次に、構成管理装置60の検証サーバ決定部611は、サーバ装置21の物理装置IDであるPID21と構成管理テーブル621とに基づいて、検証サーバ装置として割り当てる一つ、あるいは複数のサーバ装置を決定する(S602)。ここで、検証サーバ決定部611は、構成管理テーブル621に登録されているサーバ装置の中から、空き状態の中から適当に検証サーバ装置を決定してもよいし、サーバ装置の処理性能などの属性を加味して検証サーバ装置を決定してもよい。ただし、処理能力としては、検証サーバ装置の方が本番用のサーバ装置に比べて大きいか等しいことが望ましい。
Next, the verification
次に、構成管理装置60の検証サーバ決定部611は、ステップS602で決定したサーバ装置、図19に示した例の場合には、サーバ装置22に、サーバ装置21を検証する準備を指示し、サーバ装置22はサーバ装置21の検証のための準備を実行する(S603)。
Next, the verification
次に、構成管理装置60の検証サーバ決定部611は、負荷分散装置30に、サーバ装置21への入力データは入力併走装置40へ送信することを通知し、負荷分散装置30は、入力併走装置40を送信先として登録する(S604)。
Next, the verification
次に、構成管理装置60の検証サーバ決定部611は、入力併走装置40に、ステップS602で決定したサーバ装置、図19に示した例の場合には、サーバ装置22をサーバ装置21の検証サーバ装置として通知し、入力併走装置40は、サーバ装置22をサーバ装置21の検証サーバ装置として登録する(S605)。
Next, the verification
次に、構成管理装置60の検証サーバ決定部611は、出力照合装置50に、ステップS602で決定したサーバ装置、図19に示した例の場合には、サーバ装置22をサーバ装置21の検証サーバ装置として通知し、出力照合装置50は、サーバ装置22をサーバ装置21の検証サーバ装置として登録する(S606)。
Next, the verification
次に、構成管理装置60の検証サーバ決定部611は、サーバ装置21に、検証対象となったことを通知すると、サーバ装置21は、検証対象としての動作する(S607)。
Next, when the verification
次に、構成管理装置60の補完サーバ決定部612は、必要に応じて、検証処理をおこなうにあたり低下する処理能力と、構成管理テーブル621とに基づいて、その処理能力を補うための補完サーバ装置を一つあるいは複数のサーバ装置の中から決定する(S608)。
Next, the complementary
次に、構成管理装置60の補完サーバ決定部612は、ステップS605で決定したサーバ装置、図19に示される例の場合には、サーバ装置23に、サーバ装置21と同じ種類に属する業務処理を実行する準備を指示し、サーバ装置23はサーバ装置21と同じ種類に属する業務処理を実行するための準備を実行する(S609)。
Next, the complementary
そして、構成管理装置60の補完サーバ決定部612は、負荷分散装置30に、サーバ装置21の検証により処理能力が低下すること、ステップS603で決定したサーバ装置、図19に示した例の場合には、サーバ装置23を追加することなどの構成変更を指示し、負荷分散装置30は、サーバ装置21の処理能力低下を登録し、サーバ装置23を送信先として登録する(S610)。
Then, the complementary
ここで、ステップS602からステップS610の順番は、業務処理との同期との関連で、入れ替えてもよい。 Here, the order of step S602 to step S610 may be interchanged in relation to synchronization with the business process.
本実施形態により、処理能力を勘案して空いている本番用のサーバ機の中から検証用のサーバ装置22を割り当てることにより、本番システムを停止させることなく、本番システムでのテストを実施することができる。また、検証によりサーバ装置21の処理能力の低下を補完するサーバ装置23を、検証用のサーバ装置22の割り当てと同時におこなうことにより、検証によるシステム全体の処理能力の低下を防止することができる。
According to the present embodiment, the test in the production system can be performed without stopping the production system by assigning the
10…クライアント装置
20,21,22,23,24…サーバ装置
30…負荷分散装置
40…入力併走装置
50…出力照合装置
60…構成管理装置
70…ネットワーク。
DESCRIPTION OF
Claims (14)
業務処理を実行する複数のサーバ装置と、
前記複数のサーバ装置とネットワークにより接続され、前記複数のサーバ装置のいずれかで実行する業務処理に必要な入力データを生成するクライアント装置と、
前記クライアント装置の生成した入力データを前記複数のサーバ装置のいずれかへ送信する負荷分散装置と、
本番サーバ装置と検証サーバ装置にデータを送信する入力併走装置とを備え、
前記複数のサーバ装置のいずれかの内で、サーバ装置の機能を検証する対象となる本番サーバ装置とサーバ装置の機能を検証するための検証サーバ装置とを有し、
前記入力併走装置は、前記入力データの送信先の論理IDと、前記本番サーバ装置の物理装置IDと、前記検証サーバ装置の物理装置IDを対にして保持する伴走管理テーブルを備え、
前記入力併走装置は、前記負荷分散装置から前記クライアント装置が生成した入力データを受信し、受信した入力データをコピーして、前記伴走管理テーブルに基づき前記本番サーバ装置と前記検証サーバ装置とに同じ内容の入力データを送信し、
前記本番サーバ装置と前記検証サーバ装置は、前記クライアント装置で生成された同じ内容の入力データを受信して、前記本番サーバ装置と前記検証サーバ装置とが同等の業務処理を実行することを特徴とする検証システム。 In the verification system that verifies the function of the server device that executes business processing,
A plurality of server devices that execute business processes;
A client device connected to the plurality of server devices via a network, and generating input data necessary for business processing to be executed by any of the plurality of server devices;
A load balancer that transmits input data generated by the client device to any of the plurality of server devices;
An input parallel device that transmits data to the production server device and the verification server device ;
Among any of the plurality of server devices, a production server device that is a target for verifying the function of the server device and a verification server device for verifying the function of the server device,
The input parallel device includes a companion management table that holds a logical ID of a transmission destination of the input data, a physical device ID of the production server device, and a physical device ID of the verification server device,
The input parallel device receives the input data generated by the client device from the load balancer, copies the received input data, and is the same as the production server device and the verification server device based on the accompanying management table Send the input data of the content,
The production server device and the verification server device receive input data having the same content generated by the client device , and the production server device and the verification server device execute equivalent business processing. Verification system.
前記本番サーバ装置と前記検証サーバ装置とは、それぞれの業務処理の出力データを前記出力照合装置に送信し、
前記本番サーバ装置から受信した出力データと前記検証サーバ装置から受信した出力データとの照合を実行することを特徴とする請求項1記載の検証システム。 Furthermore, it has an output verification device,
The production server device and the verification server device transmit output data of each business process to the output verification device,
The verification system according to claim 1, wherein collation of output data received from the production server device and output data received from the verification server device is executed.
前記構成管理装置は、前記本番サーバ装置に対応して、前記本番サーバ装置の機能を検証するための前記検証サーバ装置を決定することを特徴とする請求項1記載の検証システム。 Furthermore, it has a configuration management device,
The verification system according to claim 1, wherein the configuration management apparatus determines the verification server apparatus for verifying the function of the production server apparatus in correspondence with the production server apparatus.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006084766A JP4495688B2 (en) | 2006-03-27 | 2006-03-27 | Verification system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006084766A JP4495688B2 (en) | 2006-03-27 | 2006-03-27 | Verification system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007257588A JP2007257588A (en) | 2007-10-04 |
JP4495688B2 true JP4495688B2 (en) | 2010-07-07 |
Family
ID=38631723
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006084766A Expired - Fee Related JP4495688B2 (en) | 2006-03-27 | 2006-03-27 | Verification system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4495688B2 (en) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011221912A (en) * | 2010-04-13 | 2011-11-04 | Nec Corp | Computer system and computer system management method |
JP5669632B2 (en) * | 2011-03-10 | 2015-02-12 | 三菱電機株式会社 | Information system verification apparatus, information system verification method, and program |
JP5337187B2 (en) * | 2011-03-24 | 2013-11-06 | 株式会社日立製作所 | Migration test support system, migration test support program, migration test support method |
WO2012164711A1 (en) * | 2011-06-02 | 2012-12-06 | 株式会社 日立製作所 | Information processing system, software verification method, and program |
WO2012169021A1 (en) * | 2011-06-08 | 2012-12-13 | 株式会社日立製作所 | Control method, control system, and program |
JP2015114952A (en) * | 2013-12-13 | 2015-06-22 | 株式会社日立製作所 | Network system, monitoring control unit, and software verification method |
JP2018018121A (en) * | 2016-07-25 | 2018-02-01 | 富士通株式会社 | Database control program, database control method, and database control device |
US10572361B2 (en) * | 2017-04-28 | 2020-02-25 | The Boeing Company | Concurrent production use of a production enterprise system and testing of a modified enterprise system |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0239244A (en) * | 1988-07-28 | 1990-02-08 | Nec Corp | Collation system for processing result of multi-computer system |
JPH09190361A (en) * | 1996-01-12 | 1997-07-22 | Hitachi Ltd | Information processing system detecting fault by internal signal and logical lsi |
JPH11250020A (en) * | 1998-03-04 | 1999-09-17 | Fujitsu Ltd | Load distribution system, session management system, client device, computer readable recording medium recorded with load distribution program, computer readable recording medium recorded with session management program and computer readable recording medium recorded with local proxy server program |
JP2002269061A (en) * | 2001-03-08 | 2002-09-20 | Ntt Comware Corp | Client server system, repeating server, and method for determining connection destination server |
JP2003067266A (en) * | 2001-08-27 | 2003-03-07 | Nippon Telegr & Teleph Corp <Ntt> | Server system and fault detection method for client server system |
JP2004030204A (en) * | 2002-06-25 | 2004-01-29 | Jmnet Inc | Load distribution device and node computer connected to the same |
JP2005165610A (en) * | 2003-12-02 | 2005-06-23 | Nomura Research Institute Ltd | Transaction processing system and method |
-
2006
- 2006-03-27 JP JP2006084766A patent/JP4495688B2/en not_active Expired - Fee Related
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0239244A (en) * | 1988-07-28 | 1990-02-08 | Nec Corp | Collation system for processing result of multi-computer system |
JPH09190361A (en) * | 1996-01-12 | 1997-07-22 | Hitachi Ltd | Information processing system detecting fault by internal signal and logical lsi |
JPH11250020A (en) * | 1998-03-04 | 1999-09-17 | Fujitsu Ltd | Load distribution system, session management system, client device, computer readable recording medium recorded with load distribution program, computer readable recording medium recorded with session management program and computer readable recording medium recorded with local proxy server program |
JP2002269061A (en) * | 2001-03-08 | 2002-09-20 | Ntt Comware Corp | Client server system, repeating server, and method for determining connection destination server |
JP2003067266A (en) * | 2001-08-27 | 2003-03-07 | Nippon Telegr & Teleph Corp <Ntt> | Server system and fault detection method for client server system |
JP2004030204A (en) * | 2002-06-25 | 2004-01-29 | Jmnet Inc | Load distribution device and node computer connected to the same |
JP2005165610A (en) * | 2003-12-02 | 2005-06-23 | Nomura Research Institute Ltd | Transaction processing system and method |
Also Published As
Publication number | Publication date |
---|---|
JP2007257588A (en) | 2007-10-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112099918B (en) | Live migration of clusters in a containerized environment | |
JP4495688B2 (en) | Verification system | |
US11829742B2 (en) | Container-based server environments | |
US6810364B2 (en) | Automated testing of computer system components | |
US8104043B2 (en) | System and method for dynamic cooperative distributed execution of computer tasks without a centralized controller | |
JP5206674B2 (en) | Virtual machine management apparatus, virtual machine management method, and virtual machine management program | |
JP5401922B2 (en) | Virtual system control program, method and apparatus | |
US20050034130A1 (en) | Balancing workload of a grid computing environment | |
US20100313063A1 (en) | Mitigating reduction in availability level during maintenance of nodes in a cluster | |
US10944655B2 (en) | Data verification based upgrades in time series system | |
JP5352890B2 (en) | Computer system operation management method, computer system, and computer-readable medium storing program | |
CN111897638A (en) | Distributed task scheduling method and system | |
JP2021152711A (en) | Operator management device, operator management method and operator management computer program | |
US20210224102A1 (en) | Characterizing operation of software applications having large number of components | |
CN112346980B (en) | Software performance testing method, system and readable storage medium | |
US10642718B2 (en) | Framework for testing distributed systems | |
WO2024017274A1 (en) | Virtual machine cloning method and apparatus, and storage medium | |
US8214330B2 (en) | Information processing apparatus, information processing method, and computer program product | |
US20050086665A1 (en) | Autonomous device driver | |
CN105260193A (en) | Self healing frame and healing method of large software | |
CN110928679B (en) | Resource allocation method and device | |
JP2013186765A (en) | Batch processing system, progress confirmation device, progress confirmation method and program | |
US20100318849A1 (en) | Runtime behavior alteration using behavior injection harness | |
CN113518974A (en) | System and method for finding and identifying computing nodes in a network | |
CN113722237B (en) | Device testing method and electronic device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080903 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090824 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090929 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091127 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100105 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100302 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100323 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100409 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4495688 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130416 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130416 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140416 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |