JP2011039902A - Apparatus and method for processing data, and program - Google Patents

Apparatus and method for processing data, and program Download PDF

Info

Publication number
JP2011039902A
JP2011039902A JP2009188216A JP2009188216A JP2011039902A JP 2011039902 A JP2011039902 A JP 2011039902A JP 2009188216 A JP2009188216 A JP 2009188216A JP 2009188216 A JP2009188216 A JP 2009188216A JP 2011039902 A JP2011039902 A JP 2011039902A
Authority
JP
Japan
Prior art keywords
data
database
computer
unit
test
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009188216A
Other languages
Japanese (ja)
Inventor
Akira Otsuka
亮 大塚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2009188216A priority Critical patent/JP2011039902A/en
Publication of JP2011039902A publication Critical patent/JP2011039902A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Test And Diagnosis Of Digital Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To restore a database of an actual system corresponding to reception data, into a database of a test system when testing the test system using reception data of the actual system. <P>SOLUTION: An actual system 200 is an actually operating computer system, and a test system 400 is a computer system to be tested. A testing device 100 collects reception data received from an external system 300 by a computer 202, intra-computer data showing transitions of data processing in the computer 202, and a database state data showing the process of updating in a database 201 and uses collected data to restore the database 201 at the time point of data processing on reception data by the computer 202 and updates a test database 401 in accordance with the restored database 201 and outputs reception data to a test target computer 402 and makes the computer 402 respond to the reception data by using the updated test database 401. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

本発明は、計算機システムのシステム試験に関する。   The present invention relates to a system test of a computer system.

ITシステムにおいて、従来の実データを用いる試験ツールは、実システムにおいて外部システムから計算機への受信データをネットワーク上で収集し、試験システムにおいて前記受信データを試験ツールから試験対象である計算機へ出力することによって、試験を実施している(例えば、特許文献1)。
つまり、従来は、実際に稼働している実システムに計算機が含まれ、当該計算機が外部システムとネットワーク接続され、実システムと同じ動作を行うことが期待される試験システムに試験対象の計算機が含まれている場合に、実システムの計算機が外部システムから受信する受信データを試験ツールがネットワークから収集し、収集した受信データを試験ツールが試験システムの計算機に出力し、試験システムの計算機に対する試験を実データ(実システムの計算機が外部システムから受信する受信データ)を用いて行っている。
In an IT system, a conventional test tool using actual data collects data received from an external system to a computer on a network in the actual system, and outputs the received data from the test tool to a computer to be tested in the test system. Thus, a test is performed (for example, Patent Document 1).
In other words, conventionally, the actual system that is actually operating includes a computer, the computer is connected to an external system via a network, and the test system is expected to perform the same operation as the actual system. In this case, the test tool collects the received data received from the external system by the actual system computer from the network, the test tool outputs the collected received data to the test system computer, and performs the test on the test system computer. This is performed using actual data (received data received by an actual system computer from an external system).

また、外部システムと実システムの計算機間の送受信データをネットワーク上で収集し、前記送受信データのうち受信データを試験ツールから試験システムの計算機へ入力し、受信データに対する試験システムの計算機の応答である送信結果を試験ツールが入力し、入力した送信結果と前記送受信データのうち送信データとを照合し、より高品質な試験を実施する方法も提案されている(例えば、特許文献2)。   In addition, transmission / reception data between the external system and the actual system computer is collected on the network, and the received data among the transmission / reception data is input from the test tool to the test system computer, and the response of the test system computer to the received data. There has also been proposed a method in which a test tool inputs a transmission result, collates the input transmission result with transmission data among the transmission / reception data, and performs a higher quality test (for example, Patent Document 2).

特開2000−196705号公報JP 2000-196705 A 特開2007−145156号公報JP 2007-145156 A

従来の実データを用いる試験ツールによるシステム試験の方法は、試験開始時に試験システムのデータベースの状態を、実システムのデータベースの状態と同じにした上で、試験システムに実システムのネットワークから収集した受信データを適用して試験を実施しているが、任意の受信データの受信時のデータベースの状態を復元するためには長い時間を要するため、多項目の試験を行う際には、試験の効率が悪くなるという課題がある。   The conventional system test method using a test tool that uses real data is the same as the status of the test system database at the start of the test, and the test system receives the data collected from the real system network. Although testing is performed by applying data, it takes a long time to restore the state of the database at the time of receiving arbitrary received data. There is a problem of getting worse.

この発明は上記のような課題を解決することを主な目的の1つとしており、データベースを含む計算機システムのシステム試験において、実システムから収集した受信データを用いて実システムにおける動作を試験システムで再現させる場合に、この受信データに対応する実システムのデータベースの状態を試験システムのデータベースに効率よく忠実に復元することを主な目的とする。   One of the main objects of the present invention is to solve the above-mentioned problems. In a system test of a computer system including a database, the operation in the real system is performed by using the received data collected from the real system. When reproducing, the main purpose is to efficiently and faithfully restore the state of the database of the actual system corresponding to the received data to the database of the test system.

本発明に係るデータ処理装置は、
通信先システムとの間でデータの送受信を行う第1の計算機と、前記第1の計算機でのデータ処理に基づいて更新される第1のデータベースとが含まれる第1のシステムに接続されているデータ処理装置であって、
前記第1の計算機が前記通信先システムから受信した受信データに対して行ったデータ処理の時刻を受信データ処理時刻として示す受信データ処理時刻情報を入力する受信データ処理時刻情報入力部と、
前記第1のデータベースにおける更新の経過が示され、更新の経過を辿ることにより任意の時点での前記第1のデータベースを復元可能な第1データベース状態情報を入力する第1データベース状態情報入力部と、
前記受信データ処理時刻情報に示されている前記受信データ処理時刻に基づいて前記第1データベース状態情報に示されている更新の経過を辿って、前記第1の計算機が前記受信データに対するデータ処理を行う時点での前記第1のデータベースを復元する第1データベース復元部とを有することを特徴とする。
The data processing apparatus according to the present invention
It is connected to a first system including a first computer that transmits and receives data to and from a communication destination system, and a first database that is updated based on data processing in the first computer. A data processing device,
A reception data processing time information input unit for inputting reception data processing time information indicating, as reception data processing time, a time of data processing performed on the reception data received by the first computer from the communication destination system;
A first database state information input unit that indicates a progress of update in the first database and inputs first database state information capable of restoring the first database at an arbitrary time by following the progress of the update; ,
Based on the received data processing time indicated in the received data processing time information, the update process indicated in the first database status information is followed, and the first computer performs data processing on the received data. And a first database restoring unit that restores the first database at the time of execution.

本発明によれば、第1の計算機における受信データの処理時刻に至るまで第1のデータベースにおける更新の経過を辿って、受信データの処理時刻での第1のデータベースの状態を復元することができ、第1のデータベースの状態を他のデータベースに効率的に再現することができ、試験の効率を向上させることができる。   According to the present invention, it is possible to restore the state of the first database at the processing time of the received data by following the progress of the update in the first database until the processing time of the received data in the first computer. The state of the first database can be efficiently reproduced in another database, and the efficiency of the test can be improved.

実施の形態1に係るシステム構成例を示す図。FIG. 3 is a diagram illustrating an example of a system configuration according to the first embodiment. 実施の形態1に係る試験装置の構成例を示す図。1 is a diagram illustrating a configuration example of a test apparatus according to Embodiment 1. FIG. 実施の形態1に係る試験装置の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of the test apparatus according to the first embodiment. 実施の形態1に係る試験装置の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of the test apparatus according to the first embodiment. 実施の形態1に係るネットワーク・データの記録例を示す図。FIG. 3 is a diagram showing a recording example of network data according to the first embodiment. 実施の形態1に係る計算機内部データの記録例を示す図。FIG. 4 is a diagram showing a recording example of computer internal data according to the first embodiment. 実施の形態1に係るデータベース状態データの記録例を示す図。FIG. 4 is a diagram showing a recording example of database state data according to the first embodiment. 実施の形態1に係る試験用データの生成手順の例を示す図。FIG. 4 is a diagram illustrating an example of a test data generation procedure according to the first embodiment. 実施の形態1に係るネットワーク・データ収集部の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of a network data collection unit according to the first embodiment. 実施の形態1に係るデータベース状態データ収集部の動作例を示すフローチャート図。FIG. 4 is a flowchart showing an operation example of a database state data collection unit according to the first embodiment. 実施の形態1に係る計算機内部データ収集部の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of a computer internal data collection unit according to the first embodiment. 実施の形態1に係る試験用データ管理部の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of a test data management unit according to the first embodiment. 実施の形態1に係る試験実行部の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of a test execution unit according to the first embodiment. 実施の形態1に係るデータベース復元部の動作例を示すフローチャート図。FIG. 4 is a flowchart showing an operation example of a database restoration unit according to the first embodiment. 実施の形態1に係る試験用ネットワーク・データ入出力部の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of a test network / data input / output unit according to the first embodiment; 実施の形態1に係る外部システム擬似部の動作例を示すフローチャート図。FIG. 6 is a flowchart showing an operation example of an external system simulation unit according to the first embodiment. 実施の形態1に係る試験用データ編集部の動作例を示すフローチャート図。FIG. 4 is a flowchart showing an operation example of a test data editing unit according to the first embodiment. 実施の形態1に係る試験実行制御部の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of a test execution control unit according to the first embodiment. 実施の形態1に係る試験結果確認部の動作例を示すフローチャート図。FIG. 4 is a flowchart showing an operation example of a test result confirmation unit according to the first embodiment. 実施の形態1に係る入出力制御部の動作例を示すフローチャート図。FIG. 3 is a flowchart showing an operation example of an input / output control unit according to the first embodiment. 実施の形態1に係る試験装置のハードウェア構成例を示す図。FIG. 3 is a diagram illustrating a hardware configuration example of the test apparatus according to the first embodiment.

実施の形態1.
図1は、本実施の形態に係るシステム構成例を示す。
Embodiment 1 FIG.
FIG. 1 shows a system configuration example according to the present embodiment.

図1において、実システム200は、実際に稼働している計算機システムであり、第1のシステムの例である。
実システム200は、通信先システムである外部システム300との間でデータの送受信を行う計算機202と、計算機202でのデータ処理に基づいて更新されるデータベース201とが含まれる。
計算機202は、第1の計算機の例であり、データベース201は第1のデータベースの例である。
In FIG. 1, a real system 200 is a computer system that is actually operating, and is an example of a first system.
The actual system 200 includes a computer 202 that transmits / receives data to / from an external system 300 that is a communication destination system, and a database 201 that is updated based on data processing in the computer 202.
The computer 202 is an example of a first computer, and the database 201 is an example of a first database.

また、試験システム400は、試験の対象となる計算機システムであり、実システム200と同様の動作を行うことが期待される。
試験システム400においても、試験対象計算機402と、試験対象計算機402が用いる試験用データベース401が含まれる。
試験対象計算機402は、実システム200の計算機202と同様に動作するかどうかの試験の対象となる。
また、試験用データベース401は、試験対象計算機402に対する試験の際には、実システム200のデータベース201の内容が復元される。
試験システム400は第2のシステムの例であり、試験対象計算機402は第2の計算機の例であり、試験用データベース401は第2のデータベースの例である。
The test system 400 is a computer system to be tested, and is expected to perform the same operation as the actual system 200.
The test system 400 also includes a test target computer 402 and a test database 401 used by the test target computer 402.
The test target computer 402 is a test target whether or not it operates in the same manner as the computer 202 of the real system 200.
The test database 401 restores the contents of the database 201 of the real system 200 when testing the test target computer 402.
The test system 400 is an example of the second system, the test target computer 402 is an example of the second computer, and the test database 401 is an example of the second database.

入出力装置500は、試験装置100に接続された液晶モニターなどの表示装置とキーボードとマウスなどの入力用装置である。   The input / output device 500 is a display device such as a liquid crystal monitor connected to the test device 100 and an input device such as a keyboard and a mouse.

試験装置100は、データ処理装置の例である。
試験装置100は、実システム200の計算機202と外部システム300との間で送受信される送信データ(計算機202から外部システム300へのデータ)と受信データ(外部システム300から計算機202へのデータ)を収集し、計算機202におけるデータ処理の推移を示す計算機内部データを収集し、また、データベース201における更新の経過が示されるデータベース状態データを収集し、収集した受信データと計算機内部データとデータベース状態データを用いて、計算機202が外部システム300からの受信データに対するデータ処理を行う時点でのデータベース201を復元する。
そして、試験装置100は、計算機202の受信データを試験対象計算機402に出力するとともに、復元したデータベース201の内容に一致するように試験用データベース401を更新し、試験対象計算機402に、更新された後の試験用データベース401を用いて受信データに対する応答データを生成させる。
また、試験装置100は、試験対象計算機402から応答データを取得し、実システム200側から収集した送信データと試験対象計算機402からの応答データとを照合して、試験対象計算機402が計算機202と同様な動作を行っているか否かを判定する。
計算機202において受信データに対してデータ処理が行われた時点のデータベース201の状態は試験用データベース401に再現されているため、試験対象計算機402が計算機202と同じ動作をするのであれば、応答データと送信データは一致することになる。
The test apparatus 100 is an example of a data processing apparatus.
The test apparatus 100 receives transmission data (data from the computer 202 to the external system 300) and reception data (data from the external system 300 to the computer 202) transmitted and received between the computer 202 of the actual system 200 and the external system 300. Collect computer internal data indicating the transition of data processing in the computer 202, collect database state data indicating the update process in the database 201, collect the received data, computer internal data, and database state data. The database 201 at the time when the computer 202 performs data processing on the received data from the external system 300 is restored.
Then, the test apparatus 100 outputs the received data of the computer 202 to the test target computer 402 and updates the test database 401 so as to match the contents of the restored database 201, and the test target computer 402 is updated. Response data for the received data is generated using the later test database 401.
In addition, the test apparatus 100 acquires response data from the test target computer 402, collates the transmission data collected from the real system 200 side with the response data from the test target computer 402, and the test target computer 402 is connected to the computer 202. It is determined whether or not a similar operation is being performed.
Since the state of the database 201 at the time when the data processing is performed on the received data in the computer 202 is reproduced in the test database 401, if the test target computer 402 performs the same operation as the computer 202, the response data And the transmitted data match.

図2は、試験装置100の内部構成例を示す。
以下、試験装置100の内部構成の各要素について説明する。
FIG. 2 shows an internal configuration example of the test apparatus 100.
Hereinafter, each element of the internal configuration of the test apparatus 100 will be described.

データベース状態データ収集部101は、実システム200のデータベース201のデータベース状態データを収集する。
データベース状態データは、データベース201における更新の経過が示され、更新の経過を辿ることにより任意の時点でのデータベース201を復元可能な情報である。
データベース状態データは第1データベース状態情報の例であり、データベース状態データ収集部101は第1データベース状態情報入力部の例である。
データベース状態データは、具体的には、ある時点のデータベース201に関する全ての情報であるバックアップ・ファイルと、データベース201に対する書き込み情報であるデータベース・ログファイルである。
また、データベース状態データ収集部101は、データベース状態データの収集にあたり、データ解析用データ記憶部115からデータ解析用データを読込み、廃棄対象とするデータベース状態データのパターンを取得し、収集したデータベース状態データのうち廃棄対象のデータベース状態データを廃棄し、廃棄対象外のデータベース状態データをデータベース状態データ記憶部104に保存する。
なお、廃棄対象のデータは、データベース201の復元に利用されないデータであり、例えば、データベース201に対するSelect文等である。
The database state data collection unit 101 collects database state data of the database 201 of the real system 200.
The database status data is information that indicates the progress of the update in the database 201 and can restore the database 201 at an arbitrary time by following the progress of the update.
The database state data is an example of first database state information, and the database state data collection unit 101 is an example of a first database state information input unit.
Specifically, the database state data is a backup file that is all information related to the database 201 at a certain point in time, and a database log file that is write information to the database 201.
Further, the database state data collection unit 101 reads the data analysis data from the data analysis data storage unit 115 to collect the database state data to be discarded, and collects the collected database state data. The database status data to be discarded is discarded, and the database status data not to be discarded is stored in the database status data storage unit 104.
The data to be discarded is data that is not used for restoring the database 201, and is, for example, a Select statement for the database 201.

計算機内部データ収集部102は、実システム200の計算機202から計算機内部データを収集する。
計算機内部データとは、計算機202におけるデータ処理の推移を示す情報であり、計算機202上で動作するアプリケーションのログファイルなどである。
計算機内部データは、計算機202が処理した受信データまたは送信データのデータIDを必ず有し、また、少なくとも、計算機202が外部システム300から受信した受信データに対して行ったデータ処理の時刻(受信データ処理時刻)が示される。
計算機内部データは受信データ処理時刻情報の例であり、計算機内部データ収集部102は受信データ処理時刻情報入力部の例である。
また、計算機内部データ収集部102は、計算機内部データの収集にあたり、データ解析用データ記憶部115からデータ解析用データを読込み、廃棄対象とする計算機内部データのパターンを取得し、収集した計算機内部データのうち廃棄対象の計算機内部データを廃棄し、廃棄対象外の計算機内部データを計算機内部データ記憶部105に保存する。
なお、廃棄対象のデータは、データベース201の復元に利用されないデータであり、例えば、受信データ又は送信データに関連しない処理についてのデータである。
The computer internal data collection unit 102 collects computer internal data from the computer 202 of the real system 200.
The computer internal data is information indicating the transition of data processing in the computer 202, such as a log file of an application operating on the computer 202.
The computer internal data always has the data ID of the reception data or transmission data processed by the computer 202, and at least the time of data processing performed on the reception data received from the external system 300 by the computer 202 (reception data Processing time).
The computer internal data is an example of reception data processing time information, and the computer internal data collection unit 102 is an example of a reception data processing time information input unit.
Further, the computer internal data collection unit 102 reads the data analysis data from the data analysis data storage unit 115 to collect the computer internal data collected by acquiring the pattern of the computer internal data to be discarded. The internal computer data to be discarded is discarded, and the internal computer data not to be discarded is stored in the internal computer data storage unit 105.
Note that the data to be discarded is data that is not used for restoring the database 201, for example, data regarding processing that is not related to reception data or transmission data.

ネットワーク・データ収集部103は、外部システム300と実システム200の計算機202とを繋ぐネットワーク上を流れる全てのネットワーク・データを収集する。
ネットワーク・データ収集部103は、例えば、計算機202と外部システム300の間のネットワークに配置されているネットワークスイッチのミラーポートに接続され、ミラーポートから計算機202と外部システム300の間で送受信されるネットワーク・データをキャプチャするようにしてもよい。
ネットワーク・データにはユニークなデータIDが必ず存在し、外部システム300から計算機202へのネットワーク・データを受信データ、計算機202から外部システム300へのネットワーク・データを送信データとする。一つの受信データに必ず一つの送信データが対応するものとする。
ネットワーク・データ収集部103は、受信データ入力部及び送信データ入力部の例である。
また、ネットワーク・データ収集部103は、ネットワーク・データの収集にあたり、データ解析用データ記憶部115からデータ解析用データを読込み、廃棄対象とするネットワーク・データのパターンを取得し、収集したネットワーク・データのうち、データ解析用データに記載されている廃棄対象のネットワーク・データを廃棄し、廃棄対象外のネットワーク・データをネットワーク・データ記憶部106に保存する。
なお、廃棄対象のデータは、データベース201の復元に利用されないデータであり、例えば、受信確認のためのACKデータ等である。
The network data collection unit 103 collects all network data that flows on the network connecting the external system 300 and the computer 202 of the real system 200.
The network data collection unit 103 is connected to, for example, a mirror port of a network switch arranged in a network between the computer 202 and the external system 300, and is a network that transmits and receives between the computer 202 and the external system 300 from the mirror port. -You may make it capture data.
The network data always has a unique data ID. The network data from the external system 300 to the computer 202 is received data, and the network data from the computer 202 to the external system 300 is transmitted data. One transmission data always corresponds to one reception data.
The network data collection unit 103 is an example of a reception data input unit and a transmission data input unit.
In addition, the network data collection unit 103 reads the data analysis data from the data analysis data storage unit 115 to collect the network data pattern to be discarded, and collects the collected network data. Among them, the network data to be discarded described in the data analysis data is discarded, and the network data not to be discarded is stored in the network data storage unit 106.
The data to be discarded is data that is not used for restoring the database 201, and is, for example, ACK data for reception confirmation.

データベース状態データ記憶部104は、データベース状態データを記憶する。
図7は、データベース状態データ記憶部104におけるデータベース状態データの管理例を示している。
データベース状態データは、ある時点のデータベース201に関する全ての情報であるバックアップ・ファイルと、データベース201に対する書き込み情報であるデータベース・ログファイルである。
バックアップ・ファイルは、「File名」と「バックアップ・ファイルの中身」により管理される。
データベース・ログは、「File名」と、データベース201による処理が行われた時刻である「DB処理時間」と、データベース201によるデータ処理内容である「処理内容」により管理される。
The database state data storage unit 104 stores database state data.
FIG. 7 shows an example of database state data management in the database state data storage unit 104.
The database state data is a backup file that is all information related to the database 201 at a certain point in time, and a database log file that is write information to the database 201.
The backup file is managed by “File name” and “Contents of backup file”.
The database log is managed by “File name”, “DB processing time” that is the time when the processing by the database 201 is performed, and “processing content” that is the data processing content by the database 201.

計算機内部データ記憶部105は、計算機内部データを記憶する。
図6は、計算機内部データ記憶部105における計算機内部データの管理例を示している。
計算機内部データは、計算機202がデータ処理を行った時刻である「データ処理時間」と、後述するネットワーク・データ(図5)の「データID」と対応付けられている「データID」と、計算機202によるデータ処理内容である「処理内容」により管理される。
The computer internal data storage unit 105 stores computer internal data.
FIG. 6 shows an example of management of computer internal data in the computer internal data storage unit 105.
The computer internal data includes “data processing time” that is the time when the computer 202 performed data processing, “data ID” that is associated with “data ID” of network data (FIG. 5) described later, It is managed by “processing content” which is data processing content by 202.

ネットワーク・データ記憶部106は、ネットワーク・データを記憶する。
図5は、ネットワーク・データ記憶部106におけるネットワーク・データの管理例を示している。
ネットワーク・データは、計算機内部データ(図6)の「データID」と対応付けられている「データID」と、送信データ又は受信データの生成時刻である「データ生成時間」と、外部システム300(受信データの場合)又は計算機202(送信データの場合)のIPアドレスが示される「送信元IP」と、計算機202(受信データの場合)又は外部システム300(送信データの場合)のIPアドレスが示される「送信先IP」と、送信データ又は受信データの抜粋である「内容」により管理される。
The network data storage unit 106 stores network data.
FIG. 5 shows an example of network data management in the network data storage unit 106.
The network data includes a “data ID” associated with the “data ID” of the computer internal data (FIG. 6), a “data generation time” that is the generation time of transmission data or reception data, and an external system 300 ( “Sender IP” indicating the IP address of the computer 202 (in the case of transmission data) or the IP address of the computer 202 (in the case of reception data) or the external system 300 (in the case of transmission data) And “content” that is an excerpt of transmission data or reception data.

試験用データ管理部107は、データベース状態データと計算機内部データとネットワーク・データを関連付けて、後述するデータベース復元部110がデータベース201を復元する際に用いられる試験用データを生成する。
試験用データは、例えば、図8に示すデータである。
なお、試験用データの詳細、試験用データの作成手順の詳細は後述する。
The test data management unit 107 associates database state data, computer internal data, and network data, and generates test data used when the database restoration unit 110 described later restores the database 201.
The test data is, for example, data shown in FIG.
Details of the test data and details of the test data creation procedure will be described later.

試験用データ記憶部108は、試験用データ管理部107により生成された試験用データを記憶する。   The test data storage unit 108 stores the test data generated by the test data management unit 107.

試験実行部109は、試験実行制御部118から試験の実行の要求があれば、試験用データ記憶部108から試験用データを取得し、取得した試験用データのデータベース状態データの情報をデータベース復元部110に出力する。
また、試験実行部109は、取得した試験用データに示されている受信データのIDと送信データのIDから対応する受信データと送信データをネットワーク・データ収集部103から取得し、取得した受信データ試験用ネットワーク・データ入出力部111に出力する。
また、試験実行部109は、試験対象計算機402の受信データに対する応答である応答データを試験用ネットワーク・データ入出力部111から入力する。
また、試験実行部109は、試験対象計算機402の応答データと、試験用データの送信データのIDに基づいてネットワーク・データ収集部103から取得した送信データを対応付けて試験結果データ記憶部113に出力する。なお、応答データは試験結果データともいう。
If there is a test execution request from the test execution control unit 118, the test execution unit 109 acquires test data from the test data storage unit 108, and the database restoration unit stores information on the acquired database data of the test data. To 110.
In addition, the test execution unit 109 acquires the reception data and transmission data corresponding to the received data ID and the transmission data ID indicated in the acquired test data from the network data collection unit 103, and acquires the received data. The data is output to the test network data input / output unit 111.
The test execution unit 109 inputs response data, which is a response to the received data of the test target computer 402, from the test network / data input / output unit 111.
In addition, the test execution unit 109 associates the response data of the test target computer 402 with the transmission data acquired from the network data collection unit 103 based on the transmission data ID of the test data in the test result data storage unit 113. Output. The response data is also referred to as test result data.

データベース復元部110は、試験実行部109から入力したデータベース状態データの情報を用いて、データベース状態データ記憶部104からデータベース状態データを取得し、取得したデータベース状態データを用いて、計算機202が受信データに対するデータ処理を行う時点でのデータベース201を試験用データベース401に復元する。
なお、試験用データ管理部107及びデータベース復元部110の機能のうち試験用データベース401の復元に関する機能を合わせたものが第1データベース復元部の例となる。
また、データベース復元部110の機能のうち試験用データベース401の更新に関する機能が第2データベース更新部の例となる。
The database restoration unit 110 acquires the database state data from the database state data storage unit 104 using the information on the database state data input from the test execution unit 109, and the computer 202 receives the received data using the acquired database state data. The database 201 at the time when data processing is performed is restored to the test database 401.
Note that, among the functions of the test data management unit 107 and the database restoration unit 110, a combination of the functions related to the restoration of the test database 401 is an example of the first database restoration unit.
The function related to the update of the test database 401 among the functions of the database restoration unit 110 is an example of the second database update unit.

試験用ネットワーク・データ入出力部111は、試験実行部109から入力した受信データを外部システム擬似部112へ出力し、また、外部システム擬似部112から受信データに対する応答データを入力し、これを試験実行部109へ出力する。   The test network data input / output unit 111 outputs the reception data input from the test execution unit 109 to the external system simulation unit 112, and also inputs response data to the reception data from the external system simulation unit 112, and tests this The data is output to the execution unit 109.

外部システム擬似部112は、試験用ネットワーク・データ入出力部111から入力した受信データを試験対象計算機402へ出力し、また、試験対象計算機402から受信データに対する応答データを入力し、これを試験用ネットワーク・データ入出力部111へ出力する。
応答データは検証対象データの例である。
また、外部システム擬似部112は、受信データ出力部及び検証対象データ入力部の例である。
The external system simulation unit 112 outputs the received data input from the test network data input / output unit 111 to the test target computer 402, and also inputs response data for the received data from the test target computer 402, and uses this data for testing. Output to the network data input / output unit 111.
The response data is an example of verification target data.
The external system simulation unit 112 is an example of a reception data output unit and a verification target data input unit.

試験結果データ記憶部113は、試験実行部109から入力した送信データと試験結果データ(応答データ)を関連付けて記憶する。   The test result data storage unit 113 stores the transmission data input from the test execution unit 109 and the test result data (response data) in association with each other.

試験結果確認部114は、試験結果データ記憶部113に関連付けて記憶されている送信データと試験結果データ(応答データ)とを照合し、照合結果を示す照合結果データを入出力制御部120に出力する。
試験結果確認部114は、データ照合部の例である。
The test result confirmation unit 114 collates the transmission data stored in association with the test result data storage unit 113 and the test result data (response data), and outputs the collation result data indicating the collation result to the input / output control unit 120. To do.
The test result confirmation unit 114 is an example of a data collation unit.

データ解析用データ記憶部115は、データベース状態データ、計算機内部データ及びネットワーク・データの各々について、廃棄対象とするのパターンを示すデータ解析用データを記憶する。   The data analysis data storage unit 115 stores data analysis data indicating a pattern to be discarded for each of database state data, computer internal data, and network data.

試験用データ生成部116は、入出力制御部120から要求があれば、試験用データ管理部107に試験用データの生成を要求する。   If there is a request from the input / output control unit 120, the test data generation unit 116 requests the test data management unit 107 to generate test data.

試験用データ編集部117は、試験装置100のユーザの指定に従って、ネットワーク・データ記憶部106に記憶されている受信データを加工するとともに、当該受信データと対になる送信データを加工し、加工後の受信データ及び送信データを試験用データ管理部107に出力する。
受信データ及び送信データの加工は、例えば、受信データ及び送信データに含まれるパラメータ値の変更等である。
試験用データ編集部117は、受信データ加工部及び送信データ加工部の例である。
The test data editing unit 117 processes the reception data stored in the network data storage unit 106 according to the designation of the user of the test apparatus 100, and processes the transmission data paired with the reception data. The received data and the transmitted data are output to the test data management unit 107.
The processing of the reception data and the transmission data is, for example, a change of parameter values included in the reception data and the transmission data.
The test data editing unit 117 is an example of a reception data processing unit and a transmission data processing unit.

試験実行制御部118は、試験装置100のユーザの指示に基づき、試験実行部109に試験の実行を要求する。   The test execution control unit 118 requests the test execution unit 109 to execute a test based on an instruction from the user of the test apparatus 100.

入出力制御部120は、試験装置100のユーザが用いる入出力装置500のインタフェースとなり、ユーザからの指示を入出力装置500を介して受付け、データ解析用データ記憶部115、試験用データ生成部116に出力し、また、試験結果確認部114から照合結果データを入力し、照合結果データを入出力装置500を介してユーザに提示する。   The input / output control unit 120 serves as an interface of the input / output device 500 used by the user of the test apparatus 100, receives an instruction from the user via the input / output device 500, and includes a data analysis data storage unit 115 and a test data generation unit 116. In addition, the verification result data is input from the test result confirmation unit 114, and the verification result data is presented to the user via the input / output device 500.

なお、図2において、データベース状態データ記憶部104、計算機内部データ記憶部105、ネットワーク・データ記憶部106、試験用データ記憶部108、試験結果データ記憶部113はハードディスクやメモリなどの記憶装置である。   In FIG. 2, the database state data storage unit 104, the computer internal data storage unit 105, the network data storage unit 106, the test data storage unit 108, and the test result data storage unit 113 are storage devices such as a hard disk and a memory. .

次に、図3及び図4のフローチャートを参照して試験装置100の動作例の概要を説明する。   Next, an outline of an operation example of the test apparatus 100 will be described with reference to the flowcharts of FIGS. 3 and 4.

図3において、まず、ネットワーク・データ収集部103が計算機202と外部システム300との間で送受信されるネットワーク・データを入力し(S301)、ネットワーク・データ記憶部106にネットワーク・データを格納する。この際に、廃棄対象のネットワーク・データがあれば、ネットワーク・データ収集部103は廃棄対象のネットワーク・データを廃棄する。
また、計算機内部データ収集部102が、計算機202の計算機内部データを入力し(S302)(受信データ処理時刻情報入力ステップ)、計算機内部データ記憶部105に計算機内部データを格納する。この際に、廃棄対象の計算機内部データがあれば、計算機内部データ収集部102は廃棄対象の計算機内部データを廃棄する。
また、データベース状態データ収集部101が、データベース201のデータベース状態データを入力し(S303)(第1データベース状態情報入力ステップ)、データベース状態データ記憶部104にデータベース状態データを格納する。この際に、廃棄対象のデータベース状態データがあれば、データベース状態データ収集部101は廃棄対象のデータベース状態データを廃棄する。
なお、S301〜S303は順序が入れ替わってもよく、図3に示す順序で処理されなくてもよい。
In FIG. 3, first, the network data collection unit 103 inputs network data transmitted and received between the computer 202 and the external system 300 (S301), and stores the network data in the network data storage unit 106. At this time, if there is network data to be discarded, the network data collection unit 103 discards the network data to be discarded.
Further, the computer internal data collection unit 102 inputs the computer internal data of the computer 202 (S302) (reception data processing time information input step), and stores the computer internal data in the computer internal data storage unit 105. At this time, if there is computer internal data to be discarded, the computer internal data collection unit 102 discards the computer internal data to be discarded.
Further, the database state data collection unit 101 inputs the database state data of the database 201 (S303) (first database state information input step), and stores the database state data in the database state data storage unit 104. At this time, if there is database status data to be discarded, the database status data collection unit 101 discards the database status data to be discarded.
Note that the order of S301 to S303 may be changed, and may not be processed in the order shown in FIG.

次に、試験用データ管理部107が、ネットワーク・データ、計算機内部データ及びデータベース状態データを用いて試験用データを生成する(S304)(第1データベース復元ステップ)。
試験用データ管理部107による試験用データの生成手順を図8を用いて説明する。
Next, the test data management unit 107 generates test data using the network data, the computer internal data, and the database state data (S304) (first database restoration step).
A procedure for generating test data by the test data management unit 107 will be described with reference to FIG.

図8に示すネットワーク・データは図5に示したものと同じであり、計算機内部データは図6に示したものと同じであり、データベース状態データは図7に示したものと同じである。   The network data shown in FIG. 8 is the same as that shown in FIG. 5, the computer internal data is the same as that shown in FIG. 6, and the database state data is the same as that shown in FIG.

試験用データ管理部107は、まず、受信データのレコードと対応する送信データのレコードとをペアリングする(ステップ(1))。
本実施の形態では、計算機202は、外部システム300からデータを受信し、受信データに対する応答を送信するものとする。
試験用データ管理部107は、「データID」の欄などに基づいて、対となる受信データのレコードと送信データのレコードを抽出する。
例えば、「データID」において、先頭の桁の値が「1」のものは受信データを表し、先頭の桁の値が「2」のものは送信データを表し、2番目の桁以下は、対になる受信データと送信データで同じ値がナンバリングされているような場合は、2番目の桁以下が同じ値となっている2つのレコードをペアリングし、先頭の値が「1」のレコードを受信データのレコードとし、先頭の値が「2」のレコードを送信データのレコードとする。
図8の例では、「データID:100001」が受信データのレコードであり、「データID:200001」が対になる送信データのレコードである。
The test data management unit 107 first pairs a record of received data with a corresponding record of transmission data (step (1)).
In the present embodiment, it is assumed that the computer 202 receives data from the external system 300 and transmits a response to the received data.
The test data management unit 107 extracts a pair of received data record and transmission data record based on the “data ID” field and the like.
For example, in the “data ID”, the first digit value of “1” represents received data, the first digit value of “2” represents transmission data, and the second digit or less is a pair. If the same value is numbered in the received data and the transmitted data, pair the two records with the same value in the second digit and the first value is “1”. It is assumed that the record of received data is a record of which the first value is “2”.
In the example of FIG. 8, “data ID: 100001” is a record of received data, and “data ID: 20001” is a record of transmission data paired.

次に、試験用データ管理部107は、ステップ(1)で抽出した受信データの「データID」と同じ「データID」が含まれているレコードを計算機内部データで検索し、検索したレコードに含まれている「データ処理時間」を抽出する(ステップ(2))。
抽出した「データ処理時間」は、ステップ(1)で検出した受信データに対するデータ処理を計算機202が行った時刻(受信データ処理時刻)である。
図8の例では、1行目の「2009060910151334」(2009年06月09日10時15分13.34秒)が抽出される。
なお、ステップ(1)で抽出した受信データの「データID」と同じ「データID」が含まれているレコードが計算機内部データで複数抽出される場合は、抽出された中での先頭レコード(当該受信データに対する初めてのデータ処理の時刻が示されているレコード)を選択する。
Next, the test data management unit 107 searches the computer internal data for a record that includes the same “data ID” as the “data ID” of the received data extracted in step (1), and includes it in the retrieved record. The “data processing time” is extracted (step (2)).
The extracted “data processing time” is the time (reception data processing time) when the computer 202 performed data processing on the reception data detected in step (1).
In the example of FIG. 8, "2009060609151334" (2009/06/09 10: 15: 13.34) in the first row is extracted.
If multiple records containing the same “data ID” as the “data ID” of the received data extracted in step (1) are extracted from the computer internal data, the first record in the extracted Select the record that indicates the time of the first data processing for the received data.

次に、試験用データ管理部107は、ステップ(2)で抽出した「データ処理時間」よりも以前のバックアップ・ファイルのうちで最も新しいバックアップ・ファイルを特定し、また、データベース状態データから、特定したバックアップ・ファイルよりも新しく、かつ、ステップ(2)で抽出した計算機内部データの「データ処理時間」よりも以前の時刻が「DB処理時間」に示されているデータベース・ログのレコードを特定する(ステップ(3))。
図8の例では、ステップ(2)で特定された「2009060910151334」よりも以前のバックアップ・ファイルであって最も新しいバックアップ・ファイルである「20090608.bak」(2009年06月08日のバックアップ・ファイル)が抽出される。また、「20090608.bak」よりも後の時刻であって、「2009060910151334」よりも以前の時刻(「2009060900012839」(2009年06月09日00時01分28.39秒)・・・「2009060910132834」(2009年06月09日10時13分28.34秒))が示される破線で囲んだレコードが抽出される。
次に、試験用データ管理部107は、ステップ(1)で抽出した受信データのIDと送信データのIDと、ステップ(3)で抽出したバックアップ・ファイルのFile名と、ステップ(3)で抽出したレコードに示されているデータベース・ログのFile名とDB処理時間を記述して試験用データを作成し(ステップ(4))、試験用データ記憶部108に保管する。
Next, the test data management unit 107 specifies the newest backup file among the backup files before the “data processing time” extracted in step (2), and also specifies from the database state data. The database log record that is newer than the backup file and whose time before the “data processing time” of the computer internal data extracted in step (2) is indicated in “DB processing time” is specified. (Step (3)).
In the example of FIG. 8, “2009090608.bak” (the backup file dated June 08, 2009), which is the backup file earlier than “2009060609151334” identified in step (2) and the newest backup file. ) Is extracted. Further, the time is later than “2009090608.bak” and is earlier than “2009090910151334” (“2009090900012839” (2009/06/09 00: 01: 28.39 seconds)... (2009/06/09 10: 13: 28.34)) is extracted.
Next, the test data management unit 107 extracts the received data ID and the transmitted data ID extracted in step (1), the file name of the backup file extracted in step (3), and extracted in step (3). Test file is created by describing the file name and DB processing time of the database log indicated in the record (step (4)) and stored in the test data storage unit 108.

次に、図3において、ユーザからの指示に基づき、試験実行部109が試験用データ記憶部108に格納されている試験用データを読み出し、読み出した試験用データのうちデータベース状態データの情報(バックアップ・ファイルの情報とデータベース・ログの情報)をデータベース復元部110に出力し、データベース復元部110がデータベース201の状態を復元する(S305)(第1データベース復元ステップ)。
より具体的には、データベース復元部110は試験実行部109から入力したデータベース状態データの情報(バックアップ・ファイルのFile名、データベース・ログのFile名とDB処理時間)に基づいて、データベース状態データ記憶部104から該当するデータベース状態データを取得し、取得したデータベース状態データに示されている更新の経過を受信データ処理時刻に至るまで辿って(更新の経過を再現して)、計算機202が受信データに対するデータ処理を行う時点でのデータベース201の状態を試験用データベース401に復元する(S306)。この際、データベース復元部110から他の計算機を介して試験用データベース401に直接アクセスするようにすることもできる。
Next, in FIG. 3, based on an instruction from the user, the test execution unit 109 reads the test data stored in the test data storage unit 108, and database state data information (backup) among the read test data. (File information and database log information) are output to the database restoration unit 110, and the database restoration unit 110 restores the state of the database 201 (S305) (first database restoration step).
More specifically, the database restoration unit 110 stores the database state data based on the database state data information (file name of backup file, file name of database log and DB processing time) input from the test execution unit 109. The corresponding database state data is acquired from the unit 104, the update process indicated in the acquired database state data is traced until the reception data processing time is reached (the update process is reproduced), and the computer 202 receives the received data. The state of the database 201 at the time when data processing is performed is restored to the test database 401 (S306). At this time, the database restoration unit 110 can directly access the test database 401 via another computer.

次に、試験実行部109が、取得した試験用データに示されている受信データのIDと送信データのIDから対応する受信データと送信データをネットワーク・データ収集部103から取得し、取得した受信データを試験用ネットワーク・データ入出力部111に出力し、試験用ネットワーク・データ入出力部111が外部システム擬似部112に受信データを出力し、外部システム擬似部112が試験対象計算機402に受信データを出力する(S307)。
また、試験実行部109は、ネットワーク・データ収集部103から取得した送信データと対となる受信データのIDと対応付け、受信データに対する応答データを入力するまで一時的に保管しておく。
Next, the test execution unit 109 acquires the reception data and transmission data corresponding to the received data ID and the transmission data ID indicated in the acquired test data from the network data collection unit 103, and acquires the received data. The data is output to the test network / data input / output unit 111, the test network / data input / output unit 111 outputs the received data to the external system simulation unit 112, and the external system simulation unit 112 receives the received data to the test target computer 402. Is output (S307).
In addition, the test execution unit 109 associates the transmission data acquired from the network data collection unit 103 with the ID of the reception data paired with the transmission data, and temporarily stores the data until response data for the reception data is input.

図4において、先ず、外部システム擬似部112が試験対象計算機402から受信データに対する応答データを入力し、外部システム擬似部112が応答データを試験用ネットワーク・データ入出力部111に出力し、試験用ネットワーク・データ入出力部111が応答データを試験実行部109に出力する(S401)。
なお、試験対象計算機402からの応答データには、対応する受信データのIDが含まれている。
In FIG. 4, first, the external system simulation unit 112 inputs response data to the received data from the test target computer 402, and the external system simulation unit 112 outputs the response data to the test network data input / output unit 111. The network data input / output unit 111 outputs response data to the test execution unit 109 (S401).
Note that the response data from the test target computer 402 includes the ID of the corresponding received data.

次に、試験実行部109が、S401で入力した応答データに対応する送信データを応答データに関連付けて試験結果データ記憶部113に出力し、試験結果データ記憶部113が応答データと送信データを関連付けて記憶する(S402)。
つまり、試験実行部109は、入力した応答データに含まれている受信データのIDと、一時的に保管している送信データに対応付けられている受信データのIDが一致する場合には、これら応答データと送信データを関連付けて試験結果データ記憶部113に出力する。
Next, the test execution unit 109 associates the transmission data corresponding to the response data input in S401 with the response data and outputs it to the test result data storage unit 113, and the test result data storage unit 113 associates the response data with the transmission data. (S402).
That is, when the ID of the received data included in the input response data matches the ID of the received data associated with the temporarily stored transmission data, the test execution unit 109 The response data and the transmission data are associated and output to the test result data storage unit 113.

次に、試験結果確認部114が、試験結果データ記憶部113において関連付けられている応答データと送信データとを照合して両者が一致するかどうかを判定する(S403)。
両者が一致すれば、試験対象計算機402は計算機202と同じ動作を行っていることになり、一方、両者が一致しない場合は、試験対象計算機402は計算機202と異なる動作を行っていることになる。
Next, the test result confirmation unit 114 collates the response data associated with the test result data storage unit 113 and the transmission data to determine whether or not they match (S403).
If the two match, the test target computer 402 is performing the same operation as the computer 202. On the other hand, if the two do not match, the test target computer 402 is performing a different operation from the computer 202. .

次に、試験結果確認部114は、S403の照合結果を示す照合結果データを生成し、入出力制御部120に出力し、入出力制御部120が入出力装置500に照合結果データを出力し、入出力装置500が照合結果データを表示して、ユーザに照合結果を通知する(S404)。   Next, the test result confirmation unit 114 generates collation result data indicating the collation result of S403 and outputs the collation result data to the input / output control unit 120. The input / output control unit 120 outputs the collation result data to the input / output device 500, The input / output device 500 displays the collation result data and notifies the collation result to the user (S404).

このように、本実施の形態に係る試験装置は、実システムにおける受信データの処理時刻に基づいて実システムのデータベースにおける更新の経過を辿って実システムのデータベースの状態を復元することができ、実システムのデータベースの状態を試験システムのデータベースに効率的に再現することができ、試験の効率を向上させることができる。   As described above, the test apparatus according to the present embodiment can restore the state of the database in the real system by following the update process in the database in the real system based on the processing time of the received data in the real system. The state of the system database can be efficiently reproduced in the database of the test system, and the efficiency of the test can be improved.

なお、図3及び図4の説明では、計算機202と外部システム300との間を流通する受信データと送信データをそのまま使用して試験対象計算機402の試験を行う例を説明したが、ユーザの指示に従って試験用データ編集部117が加工した加工後の受信データと送信データを用いて試験対象計算機402の試験を行うようにしてもよい。
つまり、試験用データ編集部117は、入出力装置500及び入出力制御部120を介して加工対象の受信データID(又は送信データID)を含むユーザの指示を入力し、ユーザから指示のあった受信データと送信データの対をネットワーク・データ記憶部106から取得し、ユーザの指示に従って受信データと送信データを加工し(例えば、受信データ中の特定のパラメータ値を変更し、受信データにおける変更に対応させて送信データ中のパラメータ値を変更する)、加工後の受信データ及び送信データに新たな受信データID及び送信データIDを付与し、新たな受信データID及び送信データIDとともに加工後の受信データ及び送信データをネットワーク・データ記憶部106に格納する。
また、ユーザから指定された加工対象の受信データID又は送信データIDと同じ受信データID又は送信データIDが含まれる試験用データが試験用データ記憶部108に格納されている場合は、試験用データ編集部117は、当該試験用データの複製を生成するとともに、生成した複製の受信データIDと送信データIDを新たな受信データID及び送信データID(加工後の受信データと送信データのID)に書き換え(データベース状態データの情報はそのまま)、受信データIDと送信データを書き換えた後の試験用データを試験用データ記憶部108に格納する。
以降は、ユーザが新たな受信データIDと送信データIDが含まれている試験用データを選択して試験の実施を要求した場合に、図3のS304からの処理が行われる。
つまり、試験実行部109は、加工後の受信データと送信データのIDが示される試験用データを読み出し、加工後の受信データと送信データをネットワーク・データ記憶部106から読み出し、加工後の受信データが試験対象計算機402に出力され、加工後の受信データに対する応答データが試験対象計算機402から入力され、試験結果確認部114において、試験対象計算機402からの応答データと加工後の送信データとの照合が行われる。
In the description of FIG. 3 and FIG. 4, the example in which the test of the test target computer 402 is performed using the reception data and the transmission data that are distributed between the computer 202 and the external system 300 as they are. Accordingly, the test computer 402 may be tested using the processed reception data and transmission data processed by the test data editing unit 117.
That is, the test data editing unit 117 inputs a user instruction including the reception data ID (or transmission data ID) to be processed via the input / output device 500 and the input / output control unit 120, and the user has received the instruction. A pair of reception data and transmission data is acquired from the network data storage unit 106, and the reception data and transmission data are processed in accordance with a user instruction (for example, a specific parameter value in the reception data is changed to change the reception data) Correspondingly, the parameter value in the transmission data is changed), a new reception data ID and transmission data ID are given to the processed reception data and transmission data, and the reception after processing together with the new reception data ID and transmission data ID Data and transmission data are stored in the network data storage unit 106.
If test data including the same reception data ID or transmission data ID as the processing target reception data ID or transmission data ID designated by the user is stored in the test data storage unit 108, the test data The editing unit 117 generates a copy of the test data, and converts the generated reception data ID and transmission data ID into a new reception data ID and transmission data ID (processed reception data and transmission data ID). Rewriting (data in the database state data is kept as it is), and the test data after rewriting the reception data ID and transmission data is stored in the test data storage unit 108.
Thereafter, when the user selects test data including a new reception data ID and transmission data ID and requests execution of the test, the processing from S304 in FIG. 3 is performed.
That is, the test execution unit 109 reads the test data indicating the IDs of the processed reception data and transmission data, reads the processed reception data and transmission data from the network data storage unit 106, and processes the reception data. Is output to the test target computer 402, response data for the received data after processing is input from the test target computer 402, and the test result confirming unit 114 compares the response data from the test target computer 402 with the processed transmission data. Is done.

このように、計算機202と外部システム300との間で送受信される受信データと送信データを加工し、加工後の受信データと送信データを用いて試験対象計算機402の試験を行うことができるので、簡易な動作により実システムと異なる条件で試験システムの試験を行うことができ、多面的な試験を行うことができる。   In this way, the reception data and transmission data transmitted and received between the computer 202 and the external system 300 can be processed, and the test target computer 402 can be tested using the processed reception data and transmission data. By simple operation, the test system can be tested under conditions different from those of the actual system, and a multifaceted test can be performed.

次に、ネットワーク・データ収集部103、データベース状態データ収集部101、計算機内部データ収集部102、試験用データ管理部107、試験実行部109、データベース復元部110、試験用ネットワーク・データ入出力部111、外部システム擬似部112、試験用データ編集部117、試験実行制御部118、試験結果確認部114、入出力制御部120の各々の動作の詳細を説明する。   Next, the network data collection unit 103, the database state data collection unit 101, the computer internal data collection unit 102, the test data management unit 107, the test execution unit 109, the database restoration unit 110, the test network data input / output unit 111 Details of the operations of the external system simulation unit 112, the test data editing unit 117, the test execution control unit 118, the test result confirmation unit 114, and the input / output control unit 120 will be described.

図9は、ネットワーク・データ収集部103の動作例を示すフローチャートである。
ネットワーク・データ収集部103は、データ解析用データ記憶部115からデータ解析用データを読込み、廃棄対象とするネットワーク・データのパターンを取得する(S901)。
また、ネットワーク・データ収集部103は、外部システム300と実システム200の計算機202とを繋ぐネットワーク上を流れる全てのネットワーク・データを収集する(S902)。
次に、ネットワーク・データ収集部103は、収集したネットワーク・データのうち、データ解析用データに記載されている廃棄対象のネットワーク・データを廃棄し、廃棄対象外のネットワーク・データをネットワーク・データ記憶部106に保存する(S903)。
FIG. 9 is a flowchart illustrating an operation example of the network data collection unit 103.
The network data collection unit 103 reads the data analysis data from the data analysis data storage unit 115, and acquires the network data pattern to be discarded (S901).
Further, the network data collection unit 103 collects all network data flowing on the network connecting the external system 300 and the computer 202 of the real system 200 (S902).
Next, the network data collection unit 103 discards the network data to be discarded described in the data analysis data among the collected network data, and stores the network data not to be discarded as network data storage The data is stored in the unit 106 (S903).

図10は、データベース状態データ収集部101の動作例を示すフローチャートである。
データベース状態データ収集部101は、データ解析用データ記憶部115からデータ解析用データを読込み、廃棄対象とするデータベース状態データのパターンを取得する(S1001)。
データベース状態データ収集部101は、実システム200のデータベース201のデータベース状態データを収集する(S1002)。
データベース状態データ収集部101は、収集したデータベース状態データのうち、データ解析用データに記載されている廃棄対象のデータベース状態データを廃棄し、廃棄対象外のデータベース状態データをデータベース状態データ記憶部104に保存する(S1003)。
FIG. 10 is a flowchart illustrating an operation example of the database state data collection unit 101.
The database state data collection unit 101 reads data analysis data from the data analysis data storage unit 115 and acquires a pattern of database state data to be discarded (S1001).
The database state data collection unit 101 collects database state data of the database 201 of the real system 200 (S1002).
The database state data collection unit 101 discards the database state data to be discarded described in the data analysis data among the collected database state data, and stores the database state data not to be discarded in the database state data storage unit 104. Save (S1003).

図11は、計算機内部データ収集部102の動作例を示すフローチャートである。
計算機内部データ収集部102は、データ解析用データ記憶部115からデータ解析用データを読込み、廃棄対象とする計算機内部データのパターンを取得する(S1101)。
計算機内部データ収集部102は、実システム200の計算機202から計算機内部データを収集する(S1102)。
計算機内部データ収集部102は、収集した計算機内部データのうち、データ解析用データに記載されている廃棄対象の計算機内部データを廃棄し、廃棄対象外の計算機内部データを計算機内部データ記憶部105に保存する(S1103)。
FIG. 11 is a flowchart showing an operation example of the computer internal data collection unit 102.
The computer internal data collection unit 102 reads the data analysis data from the data analysis data storage unit 115 and acquires the pattern of the computer internal data to be discarded (S1101).
The computer internal data collection unit 102 collects computer internal data from the computer 202 of the real system 200 (S1102).
The computer internal data collection unit 102 discards the computer internal data to be discarded described in the data analysis data among the collected computer internal data, and stores the computer internal data not to be discarded in the computer internal data storage unit 105. Save (S1103).

図12は、試験用データ管理部107の動作例を示すフローチャートである。
試験用データ管理部107は、試験用データ生成部116から試験用データ生成の要求があれば、試験用データを生成する。
まず、試験用データ管理部107は、ネットワーク・データ記憶部106からネットワーク・データを取得し(S1201)、取得したネットワーク・データのうち、まだペアリングされていないネットワーク・データを、受信データとこれに対応する送信データとに1対1にペアリングする(S1203)。
次いで、試験用データ管理部107は、計算機内部データ記憶部105から、受信データのデータIDと同じデータIDを持つ計算機内部データを特定する(S1204)。
次いで、試験用データ管理部107は、データベース状態データから、特定した計算機内部データのデータ処理時間よりも古いうちで最も新しいバックアップ・ファイルを特定する。さらに、データベース状態データから、取得したバックアップ・ファイルよりも新しく、且つ、前述の特定した計算機内部データのデータ処理時間よりも古いデータベース・ログを特定する(S1205)。
最後に、試験用データ管理部107は、ペアリングした受信データと送信データの各データIDと、特定したバックアップ・ファイルとデータベース・ログの情報を、試験用データとして試験用データ記憶部108に保管する(S1206)。
なお、試験用データ管理部107は、上記S1203、S1204、S1205、S1206の処理を、未処理のネットワーク・データがなくなるまで実施する(S1202、S1207)。
FIG. 12 is a flowchart illustrating an operation example of the test data management unit 107.
If there is a test data generation request from the test data generation unit 116, the test data management unit 107 generates test data.
First, the test data management unit 107 acquires network data from the network data storage unit 106 (S1201), and among the acquired network data, network data that has not been paired yet is received data and this data. 1 to 1 is paired with the transmission data corresponding to (S1203).
Next, the test data management unit 107 identifies computer internal data having the same data ID as the data ID of the received data from the computer internal data storage unit 105 (S1204).
Next, the test data management unit 107 specifies the newest backup file that is older than the data processing time of the specified computer internal data from the database state data. Furthermore, a database log that is newer than the acquired backup file and older than the data processing time of the specified computer internal data is specified from the database state data (S1205).
Finally, the test data management unit 107 stores, in the test data storage unit 108, the data IDs of the paired reception data and transmission data, and the specified backup file and database log information as test data. (S1206).
Note that the test data management unit 107 performs the processes of S1203, S1204, S1205, and S1206 until there is no unprocessed network data (S1202 and S1207).

図13は、試験実行部109の動作例を示すフローチャートである。
試験実行部109は、試験実行制御部118から試験用データ一覧取得の要求があれば、試験用データ記憶部108から実行可能な試験用データの一覧を生成し、この一覧を試験実行制御部118に出力する(S1301)。
また、試験実行部109は、試験実行制御部118から試験の実行要求があれば、試験の実行要求に示されている試験用データを試験用データ記憶部108から取得する(S1302)。
試験実行部109は、取得した試験用データのデータベース状態データの情報をデータベース復元部110に出力する(S1303)。
試験実行部109は、取得した試験用データの受信データのデータIDを基に、ネットワーク・データ記憶部106からネットワーク・データ(受信データと送信データ)を取得し、取得した受信データを試験用ネットワーク・データ入出力部111に出力する(S1304)。なお、取得した送信データは応答データを入力するまで一時的に保管しておく。
また、試験実行部109は、出力した受信データの応答を試験結果データ(応答データ)として入力し、保管している送信データとともに試験結果データ記憶部113へ出力する(S1305)。
FIG. 13 is a flowchart illustrating an operation example of the test execution unit 109.
If there is a request for acquiring a test data list from the test execution control unit 118, the test execution unit 109 generates a list of test data that can be executed from the test data storage unit 108, and the test execution control unit 118 (S1301).
If there is a test execution request from the test execution control unit 118, the test execution unit 109 acquires the test data indicated in the test execution request from the test data storage unit 108 (S1302).
The test execution unit 109 outputs the database state data information of the acquired test data to the database restoration unit 110 (S1303).
The test execution unit 109 acquires network data (reception data and transmission data) from the network data storage unit 106 on the basis of the data ID of the acquired reception data of the test data, and acquires the acquired reception data from the test network Output to the data input / output unit 111 (S1304). The acquired transmission data is temporarily stored until response data is input.
Further, the test execution unit 109 inputs the response of the output received data as test result data (response data), and outputs it to the test result data storage unit 113 together with the stored transmission data (S1305).

図14は、データベース復元部110の動作例を示すフローチャートである。
データベース復元部110は、試験実行部109から入力したデータベース状態データの情報を用いて、データベース状態データ記憶部104からデータベース状態データ(バックアップ・ファイルとデータベース・ログ)を取得し、取得したデータベース状態データを用いて実システム200のデータベース201の状態を復元する(S1401)。
また、データベース復元部110は、S1401で復元した内容に一致するように、試験システム400の試験用データベース401を更新する(S1402)。
FIG. 14 is a flowchart illustrating an operation example of the database restoration unit 110.
The database restoration unit 110 acquires database state data (backup file and database log) from the database state data storage unit 104 using the database state data information input from the test execution unit 109, and acquires the acquired database state data. Is used to restore the state of the database 201 of the real system 200 (S1401).
In addition, the database restoration unit 110 updates the test database 401 of the test system 400 so as to match the contents restored in S1401 (S1402).

図15は、試験用ネットワーク・データ入出力部111の動作例を示すフローチャートである。
試験用ネットワーク・データ入出力部111は、試験実行部109から入力した受信データを外部システム擬似部112へ出力する(S1501)。
また、試験用ネットワーク・データ入出力部111は、外部システム擬似部112から受信データに対する応答である試験結果データ(応答データ)を入力し、これを試験実行部109へ出力する(S1502)。
FIG. 15 is a flowchart showing an operation example of the test network / data input / output unit 111.
The test network data input / output unit 111 outputs the reception data input from the test execution unit 109 to the external system simulation unit 112 (S1501).
Further, the test network / data input / output unit 111 receives test result data (response data) which is a response to the received data from the external system simulation unit 112, and outputs this to the test execution unit 109 (S1502).

図16は、外部システム擬似部112の動作例を示すフローチャートである。
外部システム擬似部112は、試験用ネットワーク・データ入出力部111から入力した受信データを試験対象計算機402へ出力する(S1601)。
また、外部システム擬似部112は、試験対象計算機402から受信データに対する応答である試験結果データ(応答データ)を入力し、これを試験用ネットワーク・データ入出力部111へ出力する(S1602)。
FIG. 16 is a flowchart illustrating an operation example of the external system simulation unit 112.
The external system simulation unit 112 outputs the reception data input from the test network / data input / output unit 111 to the test target computer 402 (S1601).
The external system simulation unit 112 also inputs test result data (response data) that is a response to the received data from the test target computer 402, and outputs this to the test network data input / output unit 111 (S1602).

図17は、試験用データ編集部117の動作例を示すフローチャートである。
試験用データ編集部117は、入出力制御部120からネットワーク・データ一覧取得の要求があれば、試験用データ記憶部108から編集可能な受信データIDが示されるネットワーク・データの一覧を作成し、この一覧を入出力制御部120へ出力する(S1701)。
また、試験用データ編集部117は、入出力制御部120から編集対象の受信データIDを入力する(S1702)。
次に、試験用データ編集部117は、S1702で指定された受信データIDに対応する受信データ及び対になる送信データをネットワーク・データ記憶部106から取得し、取得した受信データと送信データを入出力制御部120に出力する(S1703)。
次に、試験用データ編集部117は、入出力制御部120から受信データ及び送信データに対する編集内容を入力する(S1704)。
次に、試験用データ編集部117は、S1704で指定された編集を受信データ及び送信データに行い、編集後の受信データ及び送信データを新たな受信データID及び送信データIDとともにネットワーク・データ記憶部106に保管し、更に、ユーザから指定された編集対象の受信データIDと同じ受信データIDが含まれる試験用データを試験用データ記憶部108から取得し、当該試験用データの複製を生成するとともに、生成した複製の受信データIDと送信データIDを新たな受信データID及び送信データIDに書き換え、受信データIDと送信データを書き換えた後の試験用データを試験用データ記憶部108に格納する(S1705)。
FIG. 17 is a flowchart illustrating an operation example of the test data editing unit 117.
If there is a network data list acquisition request from the input / output control unit 120, the test data editing unit 117 creates a list of network data indicating editable received data IDs from the test data storage unit 108, This list is output to the input / output control unit 120 (S1701).
Further, the test data editing unit 117 inputs the received data ID to be edited from the input / output control unit 120 (S1702).
Next, the test data editing unit 117 acquires the reception data corresponding to the reception data ID specified in S1702 and the transmission data to be paired from the network data storage unit 106, and inputs the acquired reception data and transmission data. It outputs to the output control part 120 (S1703).
Next, the test data editing unit 117 inputs the editing contents for the reception data and the transmission data from the input / output control unit 120 (S1704).
Next, the test data editing unit 117 performs the editing specified in S1704 on the reception data and transmission data, and the edited reception data and transmission data together with the new reception data ID and transmission data ID is a network data storage unit. 106, the test data including the same reception data ID as the editing target reception data ID designated by the user is acquired from the test data storage unit 108, and a copy of the test data is generated. Then, the generated duplicate reception data ID and transmission data ID are rewritten to new reception data ID and transmission data ID, and the test data after rewriting the reception data ID and transmission data is stored in the test data storage unit 108 ( S1705).

図18は、試験実行制御部118の動作例を示すフローチャートである。
試験実行制御部118は、入出力制御部120から試験用データ一覧の取得の要求を入力し、これを試験実行部109に出力する(S1801)。
次に、試験実行制御部118は、試験実行部109から試験用データ一覧を入力し、これを入出力制御部120へ出力する(S1802)。
次に、試験実行制御部118は、入出力制御部120から試験の対象となる試験用データが明示されている試験の実行要求を入力し、試験実行部109に試験の実行要求を出力する(S1803)。
FIG. 18 is a flowchart illustrating an operation example of the test execution control unit 118.
The test execution control unit 118 receives a request for acquiring a test data list from the input / output control unit 120, and outputs the request to the test execution unit 109 (S1801).
Next, the test execution control unit 118 receives the test data list from the test execution unit 109 and outputs it to the input / output control unit 120 (S1802).
Next, the test execution control unit 118 receives from the input / output control unit 120 a test execution request in which test data to be tested is clearly specified, and outputs a test execution request to the test execution unit 109 ( S1803).

図19は、試験結果確認部114の動作例を示すフローチャートである。
試験結果確認部114は、試験結果データ記憶部113において関連付けられている送信データと試験結果データを試験結果データ記憶部113から順次入力する(S1901)。
次に、試験結果確認部114は、入力した送信データと試験結果データを照合し(S1902)、照合結果を示す照合結果データを生成し、入出力制御部120から要求があれば、照合結果データの一覧を入出力制御部120に出力するとともに、入出力制御部120から指定された照合結果データを入出力制御部120へ出力する(S1903)。
FIG. 19 is a flowchart illustrating an operation example of the test result confirmation unit 114.
The test result confirmation unit 114 sequentially inputs transmission data and test result data associated with each other in the test result data storage unit 113 from the test result data storage unit 113 (S1901).
Next, the test result confirming unit 114 collates the input transmission data with the test result data (S1902), generates collation result data indicating the collation result, and if there is a request from the input / output control unit 120, the collation result data Are output to the input / output control unit 120 and collation result data designated by the input / output control unit 120 is output to the input / output control unit 120 (S1903).

図20は、入出力制御部120の動作例を示すフローチャートである。   FIG. 20 is a flowchart illustrating an operation example of the input / output control unit 120.

入出力制御部120は、入出力装置500からデータ解析用データを入力した場合、これをデータ解析用データ記憶部115へ保管する(S2001)。   When the data analysis data is input from the input / output device 500, the input / output control unit 120 stores the data analysis data in the data analysis data storage unit 115 (S2001).

また、入出力制御部120は、入出力装置500から試験用データ生成に関する要求があれば、試験用データ生成の要求を試験用データ生成部116に出力する(S2002)。   If there is a request for test data generation from the input / output device 500, the input / output control unit 120 outputs a test data generation request to the test data generation unit 116 (S2002).

また、入出力制御部120は、入出力装置500から試験用データ編集に関する要求があれば、以下を実行する。
まず、編集可能なネットワーク・データ一覧表示の要求があれば、試験用データ編集部117にこれを出力する(S2003)。
次いで、試験用データ編集部117から編集可能な受信データIDが示されるネットワーク・データ一覧を入力し、これを入出力装置500へ出力する(S2004)。
次いで、入出力装置500から指定されたネットワーク・データの取得の要求があれば、試験用データ編集部117にこのネットワーク・データの取得の要求を出力する(S2005)。
次いで、試験用データ編集部117からネットワーク・データ(受信データと送信データ)を入力し、これを入出力装置500へ出力する(S2006)。
最後に、入出力装置500から編集内容を入力し、これを試験用データ編集部117へ出力する(S2007)。
Also, if there is a request for editing test data from the input / output device 500, the input / output control unit 120 executes the following.
First, if there is a request for editable network data list display, this is output to the test data editing unit 117 (S2003).
Next, the network data list indicating the editable received data ID is input from the test data editing unit 117, and this is output to the input / output device 500 (S2004).
Next, if there is a request for acquiring network data designated from the input / output device 500, the network data acquisition request is output to the test data editing unit 117 (S2005).
Next, network data (reception data and transmission data) is input from the test data editing unit 117 and output to the input / output device 500 (S2006).
Finally, edit contents are input from the input / output device 500 and output to the test data editing unit 117 (S2007).

入出力制御部120は、入出力装置500から試験実行に関する要求があれば、以下を実行する。
まず、実行可能な試験用データ一覧の表示の要求があれば、試験実行制御部118にこれを出力する(S2008)。
次いで、試験実行制御部118から実行可能な試験用データ一覧を入力し、これを入出力装置500へ出力する(S2009)。
最後に、入出力装置500から指定された試験用データの実行の要求があれば、この試験用データの試験の実行を試験実行制御部118へ出力する(S2010)。
If there is a request for test execution from the input / output device 500, the input / output control unit 120 executes the following.
First, if there is a request to display a list of test data that can be executed, this is output to the test execution control unit 118 (S2008).
Next, an executable test data list is input from the test execution control unit 118, and is output to the input / output device 500 (S2009).
Finally, if there is a request for execution of the designated test data from the input / output device 500, the execution of the test for the test data is output to the test execution control unit 118 (S2010).

入出力制御部120は、入出力装置500から試験結果確認に関する要求があれば、以下を実行する。
まず、照合結果データ一覧表示の要求があれば、試験結果確認部114に照合結果データ一覧取得の要求を出力する(2011)。
次いで、試験結果確認部114から照合結果データ一覧を入力し、これを入出力装置500へ出力する(S2012)。
次いで、入出力装置500から照合結果データの確認の要求があれば、入出力装置500により指定された照合結果データの取得要求を試験結果確認部114へ出力する(S2013)。
最後に、試験結果確認部114から照合結果データを入力すれば、これを入出力装置500へ出力する(S2014)。
If there is a request for confirming the test result from the input / output device 500, the input / output control unit 120 executes the following.
First, if there is a request for collation result data list display, a collation result data list acquisition request is output to the test result confirmation unit 114 (2011).
Next, a collation result data list is input from the test result confirmation unit 114 and is output to the input / output device 500 (S2012).
Next, if there is a request for confirmation of collation result data from the input / output device 500, a request for obtaining collation result data designated by the input / output device 500 is output to the test result confirmation unit 114 (S2013).
Finally, if collation result data is input from the test result confirmation unit 114, it is output to the input / output device 500 (S2014).

以上のように、本実施の形態では、実システムを再現した試験システムを提供できるようにしているので、これまで試験の品質が低かったデータベースを含むITシステムの試験においても、実データと実システムと同等の環境を用いる、品質の高い試験を実施できる。   As described above, in the present embodiment, a test system that reproduces the actual system can be provided. Therefore, even in the IT system test including the database that has been low in test quality, the actual data and the actual system are provided. High-quality tests can be performed using the same environment.

以上、本実施の形態では、
外部システムと、計算機とデータベースを含む稼働中の実システムと、前記実システムと同一構成である試験対象計算機と試験システム用データベースを含む試験システム、を用いたシステムの試験を支援する装置であって、
前記外部システムと前記計算機を繋ぐネットワーク上でネットワーク・データを収集するネットワーク・データ収集手段と、
前記実システムのデータベースの状態に関するデータ(データベース状態データ)を収集するデータベース状態データ収集手段と、
前記実システムの計算機の処理情報に関するデータ(計算機内部データ)を収集する計算機内部データ収集手段と、
前記ネットワーク・データと前記データベース状態データを、前記計算機内部データを用いて関連付けて試験用データを作成する試験データ管理手段と、
試験実施前に前記試験用データベースを、試験を実施する前記ネットワーク・データに対応した前記データベース状態データを用いて復元するデータベース復元手段と、
収集した前記ネットワーク・データを前記試験装置から前記試験システムの前記試験対象計算機へ入力する試験用ネットワーク・データ再現手段と、
前記試験対象計算機へ入力した前記ネットワーク・データへの応答と、入力した前記ネットワーク・データの応答である前記ネットワーク・データとを照合する、データ照合手段とを有する試験装置を説明した。
As described above, in the present embodiment,
An apparatus that supports testing of a system using an external system, a working real system including a computer and a database, and a test system including a test target computer and a test system database having the same configuration as the real system. ,
Network data collection means for collecting network data on a network connecting the external system and the computer;
Database state data collection means for collecting data on the state of the database of the real system (database state data);
Computer internal data collection means for collecting data (computer internal data) related to processing information of the computer of the real system;
Test data management means for creating test data by associating the network data and the database state data using the computer internal data;
Database restoration means for restoring the test database using the database state data corresponding to the network data to be tested before performing the test;
Network data reproduction means for testing for inputting the collected network data from the test apparatus to the test target computer of the test system;
A test apparatus having a data collating unit that collates a response to the network data input to the test target computer and the network data that is a response to the input network data has been described.

また、本実施の形態では、
前記ネットワーク・データと前記データベース状態データ、前記計算機内部データを、解析するためのデータ解析手段と、
前記データ解析手段が用いる解析基準となるデータ解析用データを読込む手段を有する試験装置を説明した。
In the present embodiment,
Data analysis means for analyzing the network data and the database state data, and the computer internal data;
A test apparatus having means for reading data analysis data serving as an analysis standard used by the data analysis means has been described.

また、本実施の形態では、
前記試験用データを、試験実施者による入出力装置の操作に応じて生成する試験用データ生成手段と、
前記試験用データを、試験実施者による入出力装置の操作に応じて編集する試験用データ編集手段とを有する試験装置を説明した。
In the present embodiment,
Test data generating means for generating the test data according to the operation of the input / output device by a tester;
A test apparatus having test data editing means for editing the test data according to the operation of the input / output device by the tester has been described.

また、本実施の形態では、前記試験用データを、試験実施者による入出力装置の操作に応じて実行させる試験実行手段を有する試験装置を説明した。   In the present embodiment, the test apparatus having the test execution means for executing the test data according to the operation of the input / output device by the tester has been described.

また、本実施の形態では、
前記データ照合手段によるデータ照合結果を、試験実施者による入出力装置の操作に応じて確認する試験結果確認手段を有する試験装置を説明した。
In the present embodiment,
The test apparatus having the test result confirming means for confirming the data collation result by the data collating means according to the operation of the input / output device by the tester has been described.

また、本実施の形態では、
試験実施者による入出力装置からの入力値を各機能へ振り分け手段と、試験実施者への本試験装置からの出力値を入出力装置へ表示させる入出力制御手段を有する試験装置を説明した。
In the present embodiment,
A test apparatus has been described that has means for distributing input values from the input / output device by the tester to each function and input / output control means for displaying the output value from the test device to the tester on the input / output device.

最後に、本実施の形態に示した試験装置100のハードウェア構成例について説明する。
図21は、本実施の形態に示す試験装置100のハードウェア資源の一例を示す図である。
なお、図21の構成は、あくまでも試験装置100のハードウェア構成の一例を示すものであり、試験装置100のハードウェア構成は図21に記載の構成に限らず、他の構成であってもよい。
Finally, a hardware configuration example of the test apparatus 100 shown in the present embodiment will be described.
FIG. 21 is a diagram illustrating an example of hardware resources of the test apparatus 100 illustrated in the present embodiment.
The configuration in FIG. 21 is merely an example of the hardware configuration of the test apparatus 100, and the hardware configuration of the test apparatus 100 is not limited to the configuration illustrated in FIG. .

図21において、試験装置100は、プログラムを実行するCPU911(Central Processing Unit、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサともいう)を備えている。
CPU911は、バス912を介して、例えば、ROM(Read Only Memory)913、RAM(Random Access Memory)914、通信ボード915、表示装置901、キーボード902、マウス903、磁気ディスク装置920と接続され、これらのハードウェアデバイスを制御する。
更に、CPU911は、FDD904(Flexible Disk Drive)、コンパクトディスク装置905(CDD)、プリンタ装置906、スキャナ装置907と接続していてもよい。また、磁気ディスク装置920の代わりに、光ディスク装置、メモリカード(登録商標)読み書き装置などの記憶装置でもよい。
RAM914は、揮発性メモリの一例である。ROM913、FDD904、CDD905、磁気ディスク装置920の記憶媒体は、不揮発性メモリの一例である。これらは、記憶装置の一例である。
本実施の形態で説明したデータベース状態データ記憶部104、計算機内部データ記憶部105、ネットワーク・データ記憶部106、試験用データ記憶部108、試験結果データ記憶部113は、RAM914、磁気ディスク装置920等により実現される。
通信ボード915、キーボード902、マウス903、スキャナ装置907、FDD904などは、入力装置の一例である。
また、通信ボード915、表示装置901、プリンタ装置906などは、出力装置の一例である。
In FIG. 21, the test apparatus 100 includes a CPU 911 (also referred to as a central processing unit, a central processing unit, a processing unit, a processing unit, a microprocessor, a microcomputer, and a processor) that executes a program.
The CPU 911 is connected to, for example, a ROM (Read Only Memory) 913, a RAM (Random Access Memory) 914, a communication board 915, a display device 901, a keyboard 902, a mouse 903, and a magnetic disk device 920 via a bus 912. Control hardware devices.
Further, the CPU 911 may be connected to an FDD 904 (Flexible Disk Drive), a compact disk device 905 (CDD), a printer device 906, and a scanner device 907. Further, instead of the magnetic disk device 920, a storage device such as an optical disk device or a memory card (registered trademark) read / write device may be used.
The RAM 914 is an example of a volatile memory. The storage media of the ROM 913, the FDD 904, the CDD 905, and the magnetic disk device 920 are an example of a nonvolatile memory. These are examples of the storage device.
The database state data storage unit 104, the computer internal data storage unit 105, the network data storage unit 106, the test data storage unit 108, the test result data storage unit 113 described in this embodiment are the RAM 914, the magnetic disk device 920, etc. It is realized by.
A communication board 915, a keyboard 902, a mouse 903, a scanner device 907, an FDD 904, and the like are examples of input devices.
The communication board 915, the display device 901, the printer device 906, and the like are examples of output devices.

通信ボード915は、ネットワークに接続されている。例えば、通信ボード915は、LAN(ローカルエリアネットワーク)、インターネット、WAN(ワイドエリアネットワーク)、SAN(ストレージエリアネットワーク)などに接続されていても構わない。   The communication board 915 is connected to the network. For example, the communication board 915 may be connected to a LAN (local area network), the Internet, a WAN (wide area network), a SAN (storage area network), or the like.

磁気ディスク装置920には、オペレーティングシステム921(OS)、ウィンドウシステム922、プログラム群923、ファイル群924が記憶されている。
プログラム群923のプログラムは、CPU911がオペレーティングシステム921、ウィンドウシステム922を利用しながら実行する。
The magnetic disk device 920 stores an operating system 921 (OS), a window system 922, a program group 923, and a file group 924.
The programs in the program group 923 are executed by the CPU 911 using the operating system 921 and the window system 922.

また、RAM914には、CPU911に実行させるオペレーティングシステム921のプログラムやアプリケーションプログラムの少なくとも一部が一時的に格納される。
また、RAM914には、CPU911による処理に必要な各種データが格納される。
The RAM 914 temporarily stores at least part of the operating system 921 program and application programs to be executed by the CPU 911.
The RAM 914 stores various data necessary for processing by the CPU 911.

また、ROM913には、BIOS(Basic Input Output System)プログラムが格納され、磁気ディスク装置920にはブートプログラムが格納されている。
試験装置100の起動時には、ROM913のBIOSプログラム及び磁気ディスク装置920のブートプログラムが実行され、BIOSプログラム及びブートプログラムによりオペレーティングシステム921が起動される。
The ROM 913 stores a BIOS (Basic Input Output System) program, and the magnetic disk device 920 stores a boot program.
When the test apparatus 100 is activated, the BIOS program in the ROM 913 and the boot program in the magnetic disk device 920 are executed, and the operating system 921 is activated by the BIOS program and the boot program.

上記プログラム群923には、本実施の形態の説明において「〜部」(「〜データ記憶部」以外)として説明している機能を実行するプログラムが記憶されている。プログラムは、CPU911により読み出され実行される。   The program group 923 stores programs that execute the functions described as “˜unit” (other than “˜data storage unit”) in the description of the present embodiment. The program is read and executed by the CPU 911.

ファイル群924には、本実施の形態の説明において、「〜の判断」、「〜の復元」、「〜の更新」、「〜の照合」、「〜の生成」、「〜の評価」、「〜の設定」、「〜の登録」、「〜の選択」等として説明している処理の結果を示す情報やデータや信号値や変数値やパラメータが、「〜ファイル」や「〜データベース」の各項目として記憶されている。
「〜ファイル」や「〜データベース」は、ディスクやメモリなどの記録媒体に記憶される。ディスクやメモリなどの記憶媒体に記憶された情報やデータや信号値や変数値やパラメータは、読み書き回路を介してCPU911によりメインメモリやキャッシュメモリに読み出され、抽出・検索・参照・比較・演算・計算・処理・編集・出力・印刷・表示などのCPUの動作に用いられる。
抽出・検索・参照・比較・演算・計算・処理・編集・出力・印刷・表示のCPUの動作の間、情報やデータや信号値や変数値やパラメータは、メインメモリ、レジスタ、キャッシュメモリ、バッファメモリ等に一時的に記憶される。
また、本実施の形態で説明しているフローチャートの矢印の部分は主としてデータや信号の入出力を示し、データや信号値は、RAM914のメモリ、FDD904のフレキシブルディスク、CDD905のコンパクトディスク、磁気ディスク装置920の磁気ディスク、その他光ディスク、ミニディスク、DVD等の記録媒体に記録される。また、データや信号は、バス912や信号線やケーブルその他の伝送媒体によりオンライン伝送される。
In the description of the present embodiment, the file group 924 includes “determination of”, “restoration of”, “update of”, “collation of”, “generation of”, “evaluation of”, Information, data, signal values, variable values, and parameters indicating the results of the processing described as “setting of”, “registration of”, “selection of”, etc. are “~ file” or “˜database”. It is memorized as each item.
The “˜file” and “˜database” are stored in a recording medium such as a disk or a memory. Information, data, signal values, variable values, and parameters stored in a storage medium such as a disk or memory are read out to the main memory or cache memory by the CPU 911 via a read / write circuit, and extracted, searched, referenced, compared, and calculated. Used for CPU operations such as calculation, processing, editing, output, printing, and display.
Information, data, signal values, variable values, and parameters are stored in the main memory, registers, cache memory, and buffers during the CPU operations of extraction, search, reference, comparison, calculation, processing, editing, output, printing, and display. It is temporarily stored in a memory or the like.
Also, the arrows in the flowchart described in this embodiment mainly indicate input / output of data and signals, and the data and signal values are the RAM 914 memory, the FDD904 flexible disk, the CDD905 compact disk, and the magnetic disk device. It is recorded on a recording medium such as a 920 magnetic disk, other optical disks, minidisks, and DVDs. Data and signals are transmitted online via a bus 912, signal lines, cables, or other transmission media.

また、本実施の形態の説明において「〜部」(「〜データ記憶部」以外)として説明しているものは、「〜回路」、「〜装置」、「〜機器」であってもよく、また、「〜ステップ」、「〜手順」、「〜処理」であってもよい。すなわち、「〜部」(「〜データ記憶部」以外)として説明しているものは、ROM913に記憶されたファームウェアで実現されていても構わない。或いは、ソフトウェアのみ、或いは、素子・デバイス・基板・配線などのハードウェアのみ、或いは、ソフトウェアとハードウェアとの組み合わせ、さらには、ファームウェアとの組み合わせで実施されても構わない。ファームウェアとソフトウェアは、プログラムとして、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、DVD等の記録媒体に記憶される。プログラムはCPU911により読み出され、CPU911により実行される。すなわち、プログラムは、本実施の形態の「〜部」(「〜データ記憶部」以外)としてコンピュータを機能させるものである。あるいは、本実施の形態の「〜部」(「〜データ記憶部」以外)の手順や方法をコンピュータに実行させるものである。   In addition, what is described as “to part” (other than “to data storage part”) in the description of the present embodiment may be “to circuit”, “to apparatus”, and “to equipment”. Also, “˜step”, “˜procedure”, and “˜processing” may be used. That is, what is described as “˜unit” (other than “˜data storage unit”) may be realized by firmware stored in the ROM 913. Alternatively, it may be implemented only by software, only hardware such as elements, devices, substrates, wirings, etc., or a combination of software and hardware, and further a combination of firmware. Firmware and software are stored as programs in a recording medium such as a magnetic disk, a flexible disk, an optical disk, a compact disk, a mini disk, and a DVD. The program is read by the CPU 911 and executed by the CPU 911. In other words, the program causes the computer to function as “to part” (other than “to data storage part”) of the present embodiment. Alternatively, the procedure or method of “˜unit” (other than “˜data storage unit”) of the present embodiment is executed by a computer.

このように、本実施の形態に示す試験装置100は、処理装置たるCPU、記憶装置たるメモリ、磁気ディスク等、入力装置たるキーボード、マウス、通信ボード等、出力装置たる表示装置、通信ボード等を備えるコンピュータであり、上記したように「〜部」(「〜データ記憶部」以外)として示された機能をこれら処理装置、記憶装置、入力装置、出力装置を用いて実現するものである。   As described above, the test apparatus 100 shown in this embodiment includes a CPU as a processing device, a memory as a storage device, a magnetic disk, a keyboard as an input device, a mouse, a communication board, and a display device as an output device, a communication board, and the like. As described above, the computer includes the functions indicated as “˜unit” (other than “˜data storage unit”) using these processing devices, storage devices, input devices, and output devices.

100 試験装置、101 データベース状態データ収集部、102 計算機内部データ収集部、103 ネットワーク・データ収集部、104 データベース状態データ記憶部、105 計算機内部データ記憶部、106 ネットワーク・データ記憶部、107 試験用データ管理部、108 試験用データ記憶部、109 試験実行部、110 データベース復元部、111 試験用ネットワーク・データ入出力部、112 外部システム擬似部、113 試験結果データ記憶部、114 試験結果確認部、115 データ解析用データ記憶部、116 試験用データ生成部、117 試験用データ編集部、118 試験実行制御部、120 入出力制御部、200 実システム、201 データベース、202 計算機、300 外部システム、400 試験システム、401 試験用データベース、402 試験対象計算機、500 入出力装置。   DESCRIPTION OF SYMBOLS 100 Test apparatus, 101 Database state data collection part, 102 Computer internal data collection part, 103 Network data collection part, 104 Database state data storage part, 105 Computer internal data storage part, 106 Network data storage part, 107 Test data Management unit, 108 Test data storage unit, 109 Test execution unit, 110 Database restoration unit, 111 Test network / data input / output unit, 112 External system simulation unit, 113 Test result data storage unit, 114 Test result confirmation unit, 115 Data analysis data storage unit, 116 test data generation unit, 117 test data editing unit, 118 test execution control unit, 120 input / output control unit, 200 real system, 201 database, 202 computer, 300 external system, 400 Test system, 401 test database, 402 computer to be tested, 500 input / output device.

Claims (7)

通信先システムとの間でデータの送受信を行う第1の計算機と、前記第1の計算機でのデータ処理に基づいて更新される第1のデータベースとが含まれる第1のシステムに接続されているデータ処理装置であって、
前記第1の計算機が前記通信先システムから受信した受信データに対して行ったデータ処理の時刻を受信データ処理時刻として示す受信データ処理時刻情報を入力する受信データ処理時刻情報入力部と、
前記第1のデータベースにおける更新の経過が示され、更新の経過を辿ることにより任意の時点での前記第1のデータベースを復元可能な第1データベース状態情報を入力する第1データベース状態情報入力部と、
前記受信データ処理時刻情報に示されている前記受信データ処理時刻に基づいて前記第1データベース状態情報に示されている更新の経過を辿って、前記第1の計算機が前記受信データに対するデータ処理を行う時点での前記第1のデータベースを復元する第1データベース復元部とを有することを特徴とするデータ処理装置。
It is connected to a first system including a first computer that transmits and receives data to and from a communication destination system, and a first database that is updated based on data processing in the first computer. A data processing device,
A reception data processing time information input unit for inputting reception data processing time information indicating, as reception data processing time, a time of data processing performed on the reception data received by the first computer from the communication destination system;
A first database state information input unit that indicates a progress of update in the first database and inputs first database state information capable of restoring the first database at an arbitrary time by following the progress of the update; ,
Based on the received data processing time indicated in the received data processing time information, the update process indicated in the first database status information is followed, and the first computer performs data processing on the received data. A data processing apparatus comprising: a first database restoring unit that restores the first database at the time of execution.
前記データ処理装置は、更に、
第2の計算機と、前記第2の計算機が用いる第2のデータベースとが含まれる第2のシステムに接続され、
前記データ処理装置は、更に、
前記受信データを入力する受信データ入力部と、
前記受信データ入力部により入力された前記受信データを前記第2の計算機に出力する受信データ出力部と、
前記第1のデータベース復元部により復元された前記第1のデータベースに一致するように前記第2のデータベースを更新する第2データベース更新部とを有することを特徴とする請求項1に記載のデータ処理装置。
The data processing device further includes:
Connected to a second system including a second computer and a second database used by the second computer;
The data processing device further includes:
A reception data input unit for inputting the reception data;
A reception data output unit for outputting the reception data input by the reception data input unit to the second computer;
2. The data processing according to claim 1, further comprising: a second database updating unit that updates the second database so as to match the first database restored by the first database restoring unit. apparatus.
前記データ処理装置は、更に、
前記受信データに対する応答として前記第1の計算機から前記通信先システムに送信された送信データを入力する送信データ入力部と、
前記第2の計算機が前記第2データベース更新部により更新された前記第2のデータベースを用いて、前記受信データ出力部から入力した前記受信データに対する応答として生成したデータを検証対象データとして入力する検証対象データ入力部と、
前記送信データ入力部により入力された前記送信データと前記検証対象データ入力部により入力された前記検証対象データとを照合するデータ照合部とを有することを特徴とする請求項2に記載のデータ処理装置。
The data processing device further includes:
A transmission data input unit for inputting transmission data transmitted from the first computer to the communication destination system as a response to the reception data;
Verification in which the second computer uses the second database updated by the second database update unit to input data generated as a response to the received data input from the received data output unit as verification target data The target data input section,
The data processing according to claim 2, further comprising: a data collating unit that collates the transmission data input by the transmission data input unit and the verification target data input by the verification target data input unit. apparatus.
前記第1データベース状態情報入力部は、
前記第1のデータベースの内容を定期的に記録したバックアップファイルと、前記第1のデータベースにおける更新の履歴を示すログファイルとを、前記第1データベース状態情報として入力し、
前記第1データベース復元部は、
前記受信データ処理時刻情報に示されている前記受信データ処理時刻よりも前の期間に対応するバックアップファイルとログファイルを抽出し、抽出したバックアップファイルとログファイルを用いて前記受信データ処理時刻に至るまでの前記第1のデータベースにおける更新の経過を辿って、前記第1の計算機が前記受信データに対するデータ処理を行う時点での前記第1のデータベースを復元することを特徴とする請求項1〜3のいずれかに記載のデータ処理装置。
The first database state information input unit includes:
A backup file that periodically records the contents of the first database and a log file that indicates an update history in the first database are input as the first database state information,
The first database restoration unit
A backup file and a log file corresponding to a period before the reception data processing time indicated in the reception data processing time information are extracted, and the reception data processing time is reached using the extracted backup file and log file. The first database is restored at the time when the first computer performs data processing on the received data by following the progress of the update in the first database. A data processing apparatus according to any one of the above.
前記データ処理装置は、更に、
第2の計算機と、前記第2の計算機が用いる第2のデータベースとが含まれる第2のシステムに接続され、
前記データ処理装置は、更に、
前記受信データを入力する受信データ入力部と、
前記受信データ入力部により入力された前記受信データを加工する受信データ加工部と、
前記受信データに対する応答として前記第1の計算機から前記通信先システムに送信された送信データを入力する送信データ入力部と、
前記送信データ入力部により入力された前記送信データを加工する送信データ加工部と、
前記受信データ加工部により加工された後の受信データを加工後受信データとして前記第2の計算機に出力する受信データ出力部と、
前記第1のデータベース復元部により復元された前記第1のデータベースに一致するように前記第2のデータベースを更新する第2データベース更新部と、
前記第2の計算機が前記第2データベース更新部により更新された前記第2のデータベースを用いて、前記受信データ出力部から入力した前記加工後受信データに対する応答として生成したデータを検証対象データとして入力する検証対象データ入力部と、
前記送信データ加工部により加工された後の送信データと前記検証対象データ入力部により入力された前記検証対象データとを照合するデータ照合部とを有することを特徴とする請求項1〜4のいずれかに記載のデータ処理装置。
The data processing device further includes:
Connected to a second system including a second computer and a second database used by the second computer;
The data processing device further includes:
A reception data input unit for inputting the reception data;
A received data processing unit for processing the received data input by the received data input unit;
A transmission data input unit for inputting transmission data transmitted from the first computer to the communication destination system as a response to the reception data;
A transmission data processing unit that processes the transmission data input by the transmission data input unit;
A received data output unit that outputs the received data processed by the received data processing unit to the second computer as processed received data;
A second database updating unit that updates the second database to match the first database restored by the first database restoring unit;
Using the second database updated by the second database updating unit, the second computer inputs data generated as a response to the processed received data input from the received data output unit as verification target data A data input unit to be verified,
5. The data verification unit according to claim 1, further comprising: a data collation unit that collates the transmission data processed by the transmission data processing unit and the verification target data input by the verification target data input unit. A data processing device according to any one of the above.
通信先システムとの間でデータの送受信を行う第1の計算機と、前記第1の計算機でのデータ処理に基づいて更新される第1のデータベースとが含まれる第1のシステムに接続されているコンピュータによるデータ処理方法であって、
前記第1の計算機が前記通信先システムから受信した受信データに対して行ったデータ処理の時刻を受信データ処理時刻として示す受信データ処理時刻情報を前記コンピュータが入力する受信データ処理時刻情報入力ステップと、
前記第1のデータベースにおける更新の経過が示され、更新の経過を辿ることにより任意の時点での前記第1のデータベースを復元可能な第1データベース状態情報を前記コンピュータが入力する第1データベース状態情報入力ステップと、
前記コンピュータが、前記受信データ処理時刻情報に示されている前記受信データ処理時刻に基づいて前記第1データベース状態情報に示されている更新の経過を辿って、前記第1の計算機が前記受信データに対するデータ処理を行う時点での前記第1のデータベースを復元する第1データベース復元ステップとを有することを特徴とするデータ処理方法。
It is connected to a first system including a first computer that transmits and receives data to and from a communication destination system, and a first database that is updated based on data processing in the first computer. A data processing method by a computer,
A reception data processing time information input step in which the computer inputs reception data processing time information indicating, as reception data processing time, a time of data processing performed by the first computer on reception data received from the communication destination system; ,
First database state information in which progress of update in the first database is indicated and the computer inputs first database state information that can restore the first database at an arbitrary time by following the progress of the update An input step;
The computer follows the update process indicated in the first database state information based on the reception data processing time indicated in the reception data processing time information, and the first computer And a first database restoring step of restoring the first database at the time of performing data processing on the data processing method.
通信先システムとの間でデータの送受信を行う第1の計算機と、前記第1の計算機でのデータ処理に基づいて更新される第1のデータベースとが含まれる第1のシステムに接続されているコンピュータに、
前記第1の計算機が前記通信先システムから受信した受信データに対して行ったデータ処理の時刻を受信データ処理時刻として示す受信データ処理時刻情報を入力する受信データ処理時刻情報入力処理と、
前記第1のデータベースにおける更新の経過が示され、更新の経過を辿ることにより任意の時点での前記第1のデータベースを復元可能な第1データベース状態情報を入力する第1データベース状態情報入力処理と、
前記受信データ処理時刻情報に示されている前記受信データ処理時刻に基づいて前記第1データベース状態情報に示されている更新の経過を辿って、前記第1の計算機が前記受信データに対するデータ処理を行う時点での前記第1のデータベースを復元する第1データベース復元処理とを実行させることを特徴とするプログラム。
It is connected to a first system including a first computer that transmits and receives data to and from a communication destination system, and a first database that is updated based on data processing in the first computer. On the computer,
A received data processing time information input process for inputting received data processing time information indicating a time of data processing performed on the received data received by the first computer from the communication destination system as a received data processing time;
A first database state information input process in which the progress of the update in the first database is indicated, and the first database state information capable of restoring the first database at an arbitrary time is traced by following the progress of the update; ,
Based on the received data processing time indicated in the received data processing time information, the update process indicated in the first database status information is followed, and the first computer performs data processing on the received data. A program for executing a first database restoration process for restoring the first database at the time of execution.
JP2009188216A 2009-08-17 2009-08-17 Apparatus and method for processing data, and program Pending JP2011039902A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009188216A JP2011039902A (en) 2009-08-17 2009-08-17 Apparatus and method for processing data, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009188216A JP2011039902A (en) 2009-08-17 2009-08-17 Apparatus and method for processing data, and program

Publications (1)

Publication Number Publication Date
JP2011039902A true JP2011039902A (en) 2011-02-24

Family

ID=43767585

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009188216A Pending JP2011039902A (en) 2009-08-17 2009-08-17 Apparatus and method for processing data, and program

Country Status (1)

Country Link
JP (1) JP2011039902A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9390709B2 (en) 2012-09-25 2016-07-12 Seiko Epson Corporation Voice recognition device and method, and semiconductor integrated circuit device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9390709B2 (en) 2012-09-25 2016-07-12 Seiko Epson Corporation Voice recognition device and method, and semiconductor integrated circuit device

Similar Documents

Publication Publication Date Title
US7481361B2 (en) Method and system for identifying unsafe synthetic transactions and modifying parameters for automated playback
US10037255B2 (en) Device, method and program for performing system testing
KR100720637B1 (en) Information processing system, information processing apparatus, and information processing method
JP2007531940A (en) Automated system and method for performing usability tests
TW200928727A (en) Method for using dynamically scheduled synthetic transactions to monitor performance and availability of e-business systems
CN100416548C (en) Image processing device, image processing system and image processing method
KR100752833B1 (en) Information processor, processing method therefor, and program storage medium
KR20010101853A (en) Information processor and processing method, and information storage medium
JP2007025497A (en) Educational assistance program and educational assistant device
JPWO2010044150A1 (en) Program change management apparatus, program change management program, and program change management method
JP2011039902A (en) Apparatus and method for processing data, and program
US9582401B2 (en) Selectable data on file viewing in a debugger
JP2011008628A (en) Program model inspection method and program model inspection program
JP2009122985A (en) System and program for sub-process execution
CN100428249C (en) Verification support device, verification support method, verification support program and recording medium
JP6716929B2 (en) Information processing apparatus and information processing program
JPWO2020188779A1 (en) Information processing equipment, information processing system and information processing program
KR102518107B1 (en) Open-source intelligence forensic system and method of operating the same
JP7363164B2 (en) Information processing device, information processing method, and information processing program
JP2012178094A (en) Test execution device and test execution method and program
JP2004326237A (en) Test case creation device, test case creation method, test case, and test method
CN112148571B (en) Webpage operation process recording and playback method and device
JP5076621B2 (en) Patent analysis program, patent analysis method and patent analysis apparatus
JP2015162170A (en) Information processing device, and control method
JP2008191796A (en) Analysis device, analysis method and program