JP6072519B2 - System test support device - Google Patents

System test support device Download PDF

Info

Publication number
JP6072519B2
JP6072519B2 JP2012254855A JP2012254855A JP6072519B2 JP 6072519 B2 JP6072519 B2 JP 6072519B2 JP 2012254855 A JP2012254855 A JP 2012254855A JP 2012254855 A JP2012254855 A JP 2012254855A JP 6072519 B2 JP6072519 B2 JP 6072519B2
Authority
JP
Japan
Prior art keywords
communication data
test
data
communication
log information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012254855A
Other languages
Japanese (ja)
Other versions
JP2014102717A (en
Inventor
靖之 鏑木
靖之 鏑木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2012254855A priority Critical patent/JP6072519B2/en
Publication of JP2014102717A publication Critical patent/JP2014102717A/en
Application granted granted Critical
Publication of JP6072519B2 publication Critical patent/JP6072519B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

この発明は、情報通信システムの処理妥当性検証のための通信対向試験を行うシステム試験支援装置に関するものである。   The present invention relates to a system test support apparatus that performs a communication facing test for processing validity verification of an information communication system.

情報通信システムにおいては、例えばデータを取得する装置とデータを集中管理するサーバがネットワークで接続され、利用者はそのネットワークに参加している端末からデータを取得あるいは確認するといった運用となっている場合が多い。
このような複数のコンピュータ機器間でデータ通信が行われる情報通信システムの設置または移行時には、新規システムの処理妥当性検証のために各機器の連携処理の試験が必要であるが、大規模なシステムの試験では、障害量とともに、障害解析とバグフィックスの作業量も増大する傾向にある。
障害発生の原因調査のため、システム内のアプリケーションにログ情報出力処理を組み込むことが有効であるが、障害発生箇所の特定を重視して詳細なログ情報を出力しようとした場合にはログ情報が膨大となることから、コンピュータの処理や記憶容量の負荷が上がり、なおかつ開発者が膨大なログ情報の中から障害解析に必要なものを抽出する作業量が増えるという問題がある。 In an information communication system, for example, a device that acquires data and a server that centrally manages data are connected via a network, and a user acquires or confirms data from terminals participating in the network. There are many.
When installing or migrating such an information communication system in which data communication is performed between a plurality of computer devices, it is necessary to test the cooperation processing of each device in order to verify the processing validity of the new system. In this test, the amount of trouble analysis and bug fix work tends to increase with the amount of trouble.
In order to investigate the cause of a failure, it is effective to incorporate log information output processing into the application in the system. However, if detailed log information is output with emphasis on identifying the location of the failure, the log information Since it becomes enormous, there is a problem that the load of computer processing and storage capacity increases, and the amount of work for the developer to extract necessary information for failure analysis from enormous log information increases.

特開２０１１−１９７７８５号公報（第５〜９頁、第１図）JP 2011-197785 (pages 5-9, FIG. 1) 特開２００５−４５１３号公報（第４〜５頁、第１図）Japanese Patent Laying-Open No. 2005-4513 (pages 4-5, FIG. 1) 特開２００６−１７２４０１号公報（第３〜５頁、第１図）Japanese Patent Laid-Open No. 2006-172401 (pages 3 to 5, FIG. 1) 特開２００１−２７３１７２号公報（第３〜５頁、第１図）Japanese Patent Laid-Open No. 2001-273172 (pages 3 to 5, FIG. 1) 特開２０００−１３４６８号公報（第３〜４頁、第２図）JP 2000-13468 (pages 3 to 4, FIG. 2) 特開２０１０−２５７０６６号公報（第４〜５頁、第１図）JP 2010-257066 (pages 4-5, FIG. 1)

特許文献１においては、サービスを提供する情報処理システムにおける、機器単位での障害の監視を監視用サーバによって行い、障害発生時には影響範囲に属する、あるいは予め対象としている機器のログ情報を選択的に採取する方法が提案されているが、ログ採取はあくまでも装置単位での監視状態の変化をトリガーとするものである。
また、特許文献２では、メモリ、プロセッサ、プログラム、およびディスク装置等を監視対象として、監視対象の障害発生状況を判断した上で採取データを決定する方法が提案されている。障害発生状況を判断する方法としては、ネットワークのコネクションやトラフィックの監視状態を監視する方法が記載されているが、コンピュータ機器に搭載しているアプリケーションソフトウェアについては監視対象としていない。
また、特許文献３においては、障害解析のために必要となるシステム・イベント・アカウントログ、スワップ回数やネットワーク負荷率等、詳細なログ情報は短い時間間隔で採取し、コンピュータシステムの平均的な通信状態等、通常状態を把握するためのログ情報は長い時間間隔で採取することで、ログ情報を蓄積する記憶媒体の効率的な利用を可能とする方法が提案されているが、採取するログ情報は事前に設定され、システムの異常状態に応じて採取するログ情報の選択を可能とするものではない。 In Patent Document 1, in an information processing system that provides a service, a monitoring server monitors a failure for each device, and selectively selects log information of a device that belongs to an influence range or is a target in advance when a failure occurs. A method of collecting has been proposed, but log collection is only triggered by a change in the monitoring status of each device.
Further, Patent Document 2 proposes a method of determining collected data after determining a failure occurrence state of a monitoring target, with a memory, a processor, a program, a disk device, and the like as monitoring targets. As a method for determining the failure occurrence status, a method for monitoring a network connection and traffic monitoring status is described, but application software installed in a computer device is not monitored.
Also, in Patent Document 3, detailed log information such as system event / account log, swap count and network load factor necessary for failure analysis is collected at short time intervals, and average communication of computer system A method has been proposed that enables efficient use of the storage medium that stores log information by collecting log information for grasping the normal state, such as status, at long time intervals. Is set in advance, and does not enable selection of log information to be collected according to the abnormal state of the system.

また、特許文献４では、一定のサンプリング間隔でＣＰＵ負荷、ディスクアクセス、メモリ使用量、実行中のプロセス等のデータを取得、メモリへ格納し、サンプリング間隔よ
りも長い周期でこれらのデータを監視し、正常と判定されればデータの平均値を、異常と判定されればサンプリングデータ全てをデータファイルへ格納することで効率的にログ情報採取を実現する方法が提案されているが、特許文献４においても採取するログ情報は事前に設定され、システムの異常状態に応じて採取するログ情報の選択を可能とするものではない。
また、特許文献５では、ＬＡＮプロトコル解析においてＴＣＰ／ＵＤＰヘッダ情報を元に通信データの正常・異常の判定処理を設け、異常データと判定されれば当該データを障害ログ情報として保存する方法により、障害解析データ取得および記憶領域利用の効率化を実現する方法が提案されている。しかしながら、特許文献５はＴＣＰ／ＵＤＰヘッダ情報による通信データの正常・異常判定では、アプリケーションの処理単位で正常・異常を判定することはできなかった。
また、特許文献６では、あるシステムの障害ログを機能別に格納、テーブル化し、後の障害解析に有効と想定される障害ログ取り出しを容易にする手法が提案されている。しかしながら、特許文献６は、障害ログを機能別に格納、テーブル化する必要があった。 Further, in Patent Document 4, data such as CPU load, disk access, memory usage, and running process is acquired at a constant sampling interval, stored in a memory, and these data are monitored at a period longer than the sampling interval. A method for efficiently collecting log information by storing an average value of data in a data file if determined to be normal, and storing all sampling data in a data file if determined to be abnormal has been proposed. Also, the log information to be collected is set in advance, and it is not possible to select the log information to be collected according to the abnormal state of the system.
Further, in Patent Document 5, a determination process for normality / abnormality of communication data is provided based on TCP / UDP header information in LAN protocol analysis, and if it is determined as abnormal data, the data is stored as failure log information. Methods have been proposed for realizing failure analysis data acquisition and efficient use of storage areas. However, Patent Document 5 cannot determine normality / abnormality in the processing unit of an application in communication data normality / abnormality determination based on TCP / UDP header information.
Patent Document 6 proposes a method for storing a failure log of a certain system by function and making it a table and facilitating the extraction of a failure log that is assumed to be effective for later failure analysis. However, in Patent Document 6, it is necessary to store and log a failure log by function.

この発明は、上述のような課題を解決するためになされたものであり、システム試験対象からの通信データに基づき、アプリケーションの処理単位で障害判定を行い、障害発生箇所に関連するログ情報のみの採取を行うシステム試験支援装置を得ることを目的とする。   The present invention has been made to solve the above-described problems. Based on the communication data from the system test object, the failure determination is performed in the processing unit of the application, and only the log information related to the failure occurrence location is obtained. The purpose is to obtain a system test support device for sampling.

この発明に係わるシステム試験支援装置においては、試験対象システムとの間で通信データを送受信することにより、試験対象システムの処理妥当性検証を行うシステム試験支援装置であって、試験対象システムから送信される通信データの正常または障害発生の判定が行えるように、通信データ及び通信データの通信順序を規定した通信シーケンスが予め記憶された試験基準データを有する記憶装置、試験対象システムとの間で通信データを送受信する通信データ送受信手段、この通信データ送受信手段によって送受信された通信データと試験基準データとを照合し、試験対象システムから送信された通信データの正常または障害発生を判定する通信データ照合手段、及びこの通信データ照合手段によって、正常または障害発生が判定された場合にそれぞれに関連するログ情報を試験対象システムから採取し、各別に記憶装置に記録するログ情報採取手段を備え、試験基準データは、試験対象システムに搭載されたアプリケーションと通信データ送受信手段との間の通信シーケンスを有し、通信データ照合手段は、試験基準データを用いて、障害発生に関連するアプリケーションの処理を特定するものである。 The system test support apparatus according to the present invention is a system test support apparatus that verifies the processing validity of the test target system by transmitting and receiving communication data to and from the test target system, and is transmitted from the test target system. Communication data between the test data and a storage device having test reference data in which communication data and a communication sequence defining the communication order of the communication data are stored in advance so that it can be determined whether the communication data is normal or a failure has occurred. Communication data transmitting / receiving means for transmitting / receiving, communication data transmitted / received by this communication data transmitting / receiving means and communication data verification means for verifying normality or failure occurrence of communication data transmitted from the test target system, And the communication data verification means determine whether normal or failure has occurred. The log information associated with each when taken from a system under test, includes a log information collecting means for recording in the storage device to each other, the test reference data, the on-board applications and communication data transmitting and receiving means to the test object system The communication data collating means specifies the processing of the application related to the occurrence of the failure by using the test reference data .

この発明によれば、試験対象システムとの間で通信データを送受信することにより、試験対象システムの処理妥当性検証を行うシステム試験支援装置であって、試験対象システムから送信される通信データの正常または障害発生の判定が行えるように、通信データ及び通信データの通信順序を規定した通信シーケンスが予め記憶された試験基準データを有する記憶装置、試験対象システムとの間で通信データを送受信する通信データ送受信手段、この通信データ送受信手段によって送受信された通信データと試験基準データとを照合し、試験対象システムから送信された通信データの正常または障害発生を判定する通信データ照合手段、及びこの通信データ照合手段によって、正常または障害発生が判定された場合にそれぞれに関連するログ情報を試験対象システムから採取し、各別に記憶装置に記録するログ情報採取手段を備え、試験基準データは、試験対象システムに搭載されたアプリケーションと通信データ送受信手段との間の通信シーケンスを有し、通信データ照合手段は、試験基準データを用いて、障害発生に関連するアプリケーションの処理を特定するので、障害発生時に、障害に関連するログ情報を効率的に採取することができ、ログ情報のための記憶領域を減少させ、障害解析の作業量を削減することができる。 According to the present invention, a system test support apparatus that verifies the processing validity of a test target system by transmitting and receiving communication data to and from the test target system, and the communication data transmitted from the test target system is normal. Or, communication data for transmitting / receiving communication data to / from the storage system having the test reference data in which the communication sequence defining the communication sequence of the communication data and the communication data is stored in advance so that the failure occurrence can be determined Transmission / reception means, communication data verification means for checking communication data transmitted / received by the communication data transmission / reception means and test reference data, and determining normality or failure of communication data transmitted from the test target system, and communication data verification Logs related to normal or failure occurrence determined by means Taken broadcast from a test subject system includes a log information collecting means for recording in the storage device to each other, the test reference data, a communication sequence between the on-board applications and communication data transmitting and receiving means to the test object system The communication data verification means uses the test reference data to identify the processing of the application related to the failure occurrence. Therefore, when the failure occurs, the log information related to the failure can be efficiently collected. Therefore, it is possible to reduce the storage area for the failure analysis and the amount of work for failure analysis.

この発明の実施の形態１によるシステム試験支援装置を示す構成図である。BRIEF DESCRIPTION OF THE DRAWINGS It is a block diagram which shows the system test assistance apparatus by Embodiment 1 of this invention. この発明の実施の形態１によるシステム試験支援装置における通信データの一例を示す図である。It is a figure which shows an example of the communication data in the system test assistance apparatus by Embodiment 1 of this invention. この発明の実施の形態２によるシステム試験支援装置を示す構成図である。It is a block diagram which shows the system test assistance apparatus by Embodiment 2 of this invention. この発明の実施の形態３によるシステム試験支援装置を示す構成図である。It is a block diagram which shows the system test assistance apparatus by Embodiment 3 of this invention.

実施の形態１．
図１は、この発明の実施の形態１によるシステム試験支援装置を示す構成図である。
図１において、新規の情報通信システムであるシステム試験対象１（試験対象システム）と、このシステム試験対象１に対し、模擬環境での通信対向試験による処理妥当性検証を行うシステム試験支援装置２が、ネットワーク１４により接続されている。
システム試験対象１は、処理コンピュータ（サーバ）１０、１１、およびデータベース１２、１３を有する。
システム試験支援装置２は、記憶装置を有するコンピュータにより形成され、次のように構成されている。
通信データ送受信機能１００（通信データ送受信手段）は、システム試験対象１とデータのやりとりを行う。通信データ照合機能１０１（通信データ照合手段）は、システム試験対象１からの通信データの正常・異常を判定する。ログ情報採取機能１０２（ログ情報採取手段）は、システム試験対象１内の各機器やアプリケーション（アプリケーションソフトウェア）のログ情報を採取する。採取ログ定義ファイル１０３は、ログ情報採取機能１０２によって採取されるログ情報を定義している。 Embodiment 1 FIG.
FIG. 1 is a block diagram showing a system test support apparatus according to Embodiment 1 of the present invention.
In FIG. 1, a system test target 1 (test target system), which is a new information communication system, and a system test support apparatus 2 that performs processing validity verification on the system test target 1 by a communication facing test in a simulated environment. Are connected by a network 14.
The system test target 1 has processing computers (servers) 10 and 11 and databases 12 and 13.
The system test support device 2 is formed by a computer having a storage device, and is configured as follows.
The communication data transmission / reception function 100 (communication data transmission / reception means) exchanges data with the system test target 1. A communication data collating function 101 (communication data collating means) determines normality / abnormality of communication data from the system test object 1. The log information collection function 102 (log information collection means) collects log information of each device and application (application software) in the system test target 1. The collection log definition file 103 defines log information collected by the log information collection function 102.

試験データ１０４（試験基準データ）は、通信データ送受信機能１００にて、システム試験対象１との通信対向試験を行う際の伝送データ（通信データ）であり、さらに通信データ照合機能１０１にて通信データの正常・異常を判定するための基準データともなるものである。この試験データ１０４は、例えばシステム試験対象１がクライアントや制御用機器、計測用機器と実際にやりとりする通信データを記憶装置に記憶したものである。
障害発生時データ１０５は、通信データ照合機能１０１の判定結果をもとに、ログ情報採取機能１０２によって障害発生時に採取されたデータである。正常時データ１０６は、通信データ照合機能１０１の判定結果をもとに、ログ情報採取機能１０２によって正常時に採取されたデータである。
なお、試験データ１０４、障害発生時データ１０５及び正常時データ１０６は、記憶装置に格納される。 The test data 104 (test reference data) is transmission data (communication data) when the communication data transmission / reception function 100 performs a communication facing test with the system test object 1, and further the communication data collation function 101 performs communication data. It also serves as reference data for determining normality / abnormality. The test data 104 is, for example, stored in a storage device communication data that the system test target 1 actually exchanges with clients, control devices, and measurement devices.
The failure occurrence time data 105 is data collected when a failure occurs by the log information collection function 102 based on the determination result of the communication data matching function 101. The normal time data 106 is data collected at the normal time by the log information collecting function 102 based on the determination result of the communication data collating function 101.
Note that the test data 104, failure occurrence data 105, and normal data 106 are stored in a storage device.

図２は、この発明の実施の形態１によるシステム試験支援装置における通信データの一例を示す図である。
図２において、システム試験対象１とシステム試験支援装置２との間の通信シーケンス（通信データ及び通信データの通信順序を規定したもの）を示し、正常時の通信シーケンス２０ａ、障害発生時の通信シーケンス２０ｂを示している。ここで、ＳＹＮは同期要求、ＡＣＫは応答、ＳＥＱ１は正常時のデータ内容、ＳＥＱ１＊は障害発生時のデータ内容で、ＳＥＱ１とは異なっている。
なお、図２で、ＳＹＮは、システム試験対象１からシステム試験支援装置２へ向けて送信されているが、システム試験支援装置２からシステム試験対象１へ向けて送信する構成であってもよいのは言うまでもない。 FIG. 2 is a diagram showing an example of communication data in the system test support apparatus according to Embodiment 1 of the present invention.
2 shows a communication sequence between the system test object 1 and the system test support device 2 (which defines communication data and communication order of communication data), a normal communication sequence 20a, and a communication sequence when a failure occurs. 20b is shown. Here, SYN is a synchronization request, ACK is a response, SEQ1 is data contents when normal, SEQ1 * is data contents when a failure occurs, and is different from SEQ1.
In FIG. 2, SYN is transmitted from the system test target 1 to the system test support apparatus 2, but may be configured to transmit from the system test support apparatus 2 to the system test support apparatus 1. Needless to say.

次に、動作について説明する。
システム試験支援装置２は、試験開始とともに通信データ送受信機能１００により、システム試験対象１との間の通信を開始する。このとき、送受信される通信データは、本番環境で送受信されるデータであり、例えば図２の通信シーケンス２０ａのような通信シーケンスである。
システム試験支援装置２は、本番環境の通信データを模擬し、システム試験対象１から送信される通信データに応じるように、試験データ１０４に基づいて返信を行う。
システム試験対象１とシステム試験支援装置２間の通信シーケンスにおいて、送信した通信データに対して受信する通信データは一意に決まっているため、試験データ１０４には、各々通信開始から終了までの通信が成立するような複数の通信シーケンスが保存されている。
なお、図２の通信シーケンス２０ａは、例としてＴＣＰの通信を記載しているが、通信シーケンスはこれに限る必要は無い。 Next, the operation will be described.
The system test support apparatus 2 starts communication with the system test object 1 by the communication data transmission / reception function 100 when the test is started. At this time, the transmitted / received communication data is data transmitted / received in the production environment, for example, a communication sequence like the communication sequence 20a of FIG.
The system test support apparatus 2 simulates the communication data in the production environment and sends a reply based on the test data 104 so as to respond to the communication data transmitted from the system test target 1.
In the communication sequence between the system test target 1 and the system test support device 2, the communication data to be received with respect to the transmitted communication data is uniquely determined. Therefore, communication from the start to the end of communication is included in the test data 104. A plurality of communication sequences that can be established are stored.
In addition, although the communication sequence 20a of FIG. 2 describes TCP communication as an example, the communication sequence is not limited to this.

通信データ照合機能１０１は、通信データ送受信機能１００から、システム試験対象１からの受信データと、試験データ１０４を照合し、受信データが正しいものであるか否かを判定する。このとき、通信データ照合機能１０１は、通信プロトコルのヘッダ情報だけでなく、通信データの中身（システム試験対象１内のアプリケーションの処理データである、アプリケーションデータ）の照合までを行う。
このため、通信データ照合機能１０１は、システム試験対象１のアプリケーションの処理の誤りまで判定することが可能となる。 The communication data collating function 101 collates the received data from the system test target 1 with the test data 104 from the communication data transmitting / receiving function 100, and determines whether or not the received data is correct. At this time, the communication data collating function 101 performs not only the header information of the communication protocol but also the contents of the communication data (application data that is processing data of the application in the system test target 1).
For this reason, the communication data collating function 101 can determine even the processing error of the application of the system test target 1.

ログ情報採取機能１０２は、通信データ照合機能１０１の判定結果をもとに、正常時データ１０５および障害発生時データ１０６を採取する。
正常時データ１０５は、正常時に、ＣＰＵ負荷率、ネットワーク負荷率、ディスクアクセス回数、メモリ使用率、ＯＳのシステムログ等を一定周期で採取し、記録したものである。
これらは採取データを逐次記録するだけでなく、一定時間における採取データ平均値を取る構成や、メモリまたは記憶装置に一定時間格納し、一定時間以上前のデータは上書きにより削除する構成にしても良い。 The log information collection function 102 collects normal data 105 and failure occurrence data 106 based on the determination result of the communication data verification function 101.
The normal time data 105 is obtained by collecting and recording a CPU load factor, a network load factor, a disk access frequency, a memory usage rate, an OS system log, and the like at regular intervals.
In addition to sequentially recording the collected data, these may be configured to take an average value of the collected data for a certain time, or to be stored in a memory or a storage device for a certain time, and data older than a certain time may be deleted by overwriting. .

障害発生時データ１０６は、通信データ照合機能１０１により、例えば図２のシーケンス２０ａではなく、障害発生時の通信シーケンス２０ｂのような受信データが発生した際に、関連するアプリケーションのログ、データベースのスナップショット、通信状態等を追加で採取し、記録したものである。
これらはメモリまたは記憶装置に一定時間格納し、一定時間以上前のデータは上書きにより削除、障害発生時に一定時間前からのデータを保存する等の構成としておけば記憶領域の利用効率が高い。
また、各々採取するログ情報を予め定義する採取ログ定義ファイル１０３を変更できるようにすると利便性が高い。 When the failure data 106 is generated by the communication data verification function 101, for example, when the received data is not the sequence 20a of FIG. 2 but the communication sequence 20b at the time of failure, the related application log and database snap The shots, communication status, etc. are additionally collected and recorded.
If these are stored in a memory or a storage device for a certain period of time, data older than a certain period of time is deleted by overwriting, and data from a certain period of time before is saved when a failure occurs, the storage area can be used efficiently.
Further, if the collection log definition file 103 that defines the log information to be collected in advance can be changed, it is highly convenient.

以上のように、実施の形態１によれば、障害発生時において、障害発生のタイミングで障害の原因となり得る箇所のログ情報を追加で採取することにより、システム試験時における障害解析に必要なログ情報を効率的に取得でき、ログ情報のための記憶領域の効率的な利用とともに、障害解析の作業量を削減することができる。
また、システム試験対象との間の通信データの内容までもチェックし、エラーを検知した場合に障害発生とすることで、機器に搭載しているアプリケーションの処理単位まで原因箇所を絞り込み、障害解析に有効と考えられるログ情報の採取を可能とする。 As described above, according to the first embodiment, when a failure occurs, the log information necessary for the failure analysis at the time of the system test is obtained by additionally collecting log information of a location that may cause the failure at the failure occurrence timing. Information can be acquired efficiently, and the amount of work for failure analysis can be reduced along with efficient use of a storage area for log information.
In addition, the contents of communication data with the system test target are also checked, and if an error is detected, a failure occurs, narrowing down the cause to the processing unit of the application installed in the device, and analyzing the failure Enable to collect log information that is considered valid.

実施の形態２．
図３は、この発明の実施の形態２によるシステム試験支援装置を示す構成図である。
図３において、１、２、１０〜１４、１００〜１０６は図１におけるものと同一のものである。図３では、ログ情報採取機能１０２と採取ログ定義ファイル１０３を外部モジュール３にしている。 Embodiment 2. FIG.
FIG. 3 is a block diagram showing a system test support apparatus according to Embodiment 2 of the present invention.
In FIG. 3, 1, 2, 10-14, and 100-106 are the same as those in FIG. In FIG. 3, the log information collection function 102 and the collection log definition file 103 are external modules 3.

ログ情報採取機能１０２は、採取ログ定義ファイル１０３で定義される、正常時と障害発生時のログ情報を採取する機能であるが、システム試験対象１の構成により採取すべきログ情報も変わるため、システム試験対象ごとにログ情報採取機能１０２及び採取ログ定義ファイル１０３の詳細を変更する必要がある。
また、システム開発者あるいは利用者が採取ログ情報を追加したい場合もある。
ログ情報採取機能１０２の実装は、実際にはプログラミングにて行われるが、これを外部モジュール化し、ログ情報採取機能１０２の変更環境のみを提供することで、システム試験支援装置２の内部処理に精通していない場合でも、ログ情報採取機能１０２や採取ログ定義ファイル１０３の編集を容易にするものである。 The log information collection function 102 is a function for collecting log information at the normal time and when a failure occurs, which is defined in the collection log definition file 103. However, since the log information to be collected also varies depending on the configuration of the system test target 1, It is necessary to change the details of the log information collection function 102 and the collection log definition file 103 for each system test target.
In addition, the system developer or user may want to add collection log information.
The implementation of the log information collection function 102 is actually performed by programming, but by making this an external module and providing only the change environment of the log information collection function 102, familiarity with the internal processing of the system test support apparatus 2 Even if it is not, the log information collection function 102 and the collection log definition file 103 can be easily edited.

実施の形態２によれば、ログ情報採取機能と採取ログ定義ファイルを外部モジュールにしたので、システム試験対象の構成の変更やシステム開発者、利用者による採取ログ情報の変更に対応しやすくなる。   According to the second embodiment, since the log information collection function and the collection log definition file are external modules, it becomes easy to cope with a change in the configuration of the system test target and a change in the collection log information by the system developer or user.

実施の形態３．
図４は、この発明の実施の形態３によるシステム試験支援装置を示す構成図である。
図４において、１、２、１４、１００〜１０６は図１におけるものと同一のものである。図４では、システム試験対象１が、サーバと通信を行うユーザ端末（クライアント）１５、機械装置の制御機器や計測装置を含めた制御／計測装置１６、及びデータベース１７を有する構成である。 Embodiment 3 FIG.
FIG. 4 is a block diagram showing a system test support apparatus according to Embodiment 3 of the present invention.
In FIG. 4, 1, 2, 14, 100 to 106 are the same as those in FIG. In FIG. 4, the system test target 1 has a configuration including a user terminal (client) 15 that communicates with a server, a control / measurement device 16 including a control device and a measurement device of a mechanical device, and a database 17.

実施の形態１では、システム試験対象１として処理コンピュータ（サーバ）から構成されるシステムを例示したが、これはサーバを試験対象としている場合である。これに対し、実施の形態３では、サーバと通信を行うユーザ端末（クライアント）１５、制御／計測装置１６及びデータベース１７を有するシステムを試験対象としている。このため、試験データ１０４に、これらを試験対象とする通信対向試験のための通信シーケンスを予め格納しておく。
既存システムの運用においては、経年劣化や保守性の観点から、システムの一部のみを更新する場合がある。この際、サーバのみが更新対象となるとは限らず、末端機器を更新する場合もある。
実施の形態３では、通信データ照合により障害発生判定、ログ情報採取を実施するため、ユーザ端末１５や制御／計測装置１６、データベース１７の更新の際のシステム試験における障害解析にも有効である。 In the first embodiment, a system composed of processing computers (servers) is exemplified as the system test target 1, but this is a case where the server is the test target. On the other hand, in the third embodiment, a system including a user terminal (client) 15 that communicates with a server, a control / measurement device 16, and a database 17 is a test target. For this reason, the communication sequence for the communication facing test in which these are the test targets is stored in the test data 104 in advance.
In the operation of an existing system, only a part of the system may be updated from the viewpoint of aging and maintainability. At this time, only the server is not necessarily updated, and the end device may be updated.
In the third embodiment, failure occurrence determination and log information collection are performed by communication data collation, which is effective for failure analysis in a system test when the user terminal 15, the control / measurement device 16, and the database 17 are updated.

実施の形態３によれば、ユーザ端末、制御／計測装置、データベースなどもシステム試験対象に含めることができる。   According to the third embodiment, a user terminal, a control / measurement device, a database, and the like can be included in the system test target.

なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略することが可能である。   It should be noted that the present invention can be freely combined with each other within the scope of the invention, and each embodiment can be appropriately modified or omitted.

１ システム試験対象、２ システム試験支援装置、３ 外部モジュール、
１０ 処理コンピュータ（サーバ１）、１１ 処理コンピュータ（サーバｎ）、
１２ データベース１、１３ データベースｎ、１４ ネットワーク、
１５ ユーザ端末（クライアント）、１６ 制御／計測装置、１７ データベース、１００ 通信データ送受信機能、１０１ 通信データ照合機能、
１０２ ログ情報採取機能、１０３ 採取ログ定義ファイル、
１０４ 試験データ、１０５ 正常時データ、１０６ 障害発生時データ。 1 system test object 2 system test support device 3 external module
10 processing computer (server 1), 11 processing computer (server n),
12 Database 1, 13 Database n, 14 Network,
15 user terminal (client), 16 control / measurement device, 17 database, 100 communication data transmission / reception function, 101 communication data collation function,
102 Log information collection function, 103 Collection log definition file,
104 Test data, 105 Normal data, 106 Failure data.

Claims (3)

試験対象システムとの間で通信データを送受信することにより、上記試験対象システムの処理妥当性検証を行うシステム試験支援装置であって、
上記試験対象システムから送信される通信データの正常または障害発生の判定が行えるように、上記通信データ及び上記通信データの通信順序を規定した通信シーケンスが予め記憶された試験基準データを有する記憶装置、
上記試験対象システムとの間で通信データを送受信する通信データ送受信手段、
この通信データ送受信手段によって送受信された上記通信データと上記試験基準データとを照合し、上記試験対象システムから送信された通信データの正常または障害発生を判定する通信データ照合手段、
及びこの通信データ照合手段によって、正常または障害発生が判定された場合にそれぞれに関連するログ情報を上記試験対象システムから採取し、各別に記憶装置に記録するログ情報採取手段を備え、
上記試験基準データは、上記試験対象システムに搭載されたアプリケーションと上記通信データ送受信手段との間の通信シーケンスを有し、
上記通信データ照合手段は、上記試験基準データを用いて、上記障害発生に関連するアプリケーションの処理を特定することを特徴とするシステム試験支援装置。 A system test support device that performs processing validity verification of the test target system by transmitting and receiving communication data to and from the test target system,
A storage device having test reference data in which a communication sequence defining a communication sequence of the communication data and the communication data is stored in advance so that determination of normality or failure of the communication data transmitted from the test target system can be performed;
Communication data transmission / reception means for transmitting / receiving communication data to / from the test target system;
A communication data collating unit that collates the communication data transmitted and received by the communication data transmitting / receiving unit with the test reference data, and determines normality or failure of the communication data transmitted from the test target system;
And log information collecting means for collecting log information related to each when the normal or failure occurrence is determined by the communication data collating means from the test target system and recording the log information separately in a storage device,
The test reference data has a communication sequence between the application installed in the test target system and the communication data transmitting / receiving means,
The communication data collating means specifies the processing of an application related to the occurrence of the failure by using the test reference data. 上記ログ情報採取手段が、上記正常または障害発生が判定された場合に採取するログ情報を予め定義した採取ログ定義ファイルを備えたことを特徴とする請求項１記載のシステム試験支援装置。 2. The system test support apparatus according to claim 1 , wherein the log information collection means includes a collection log definition file in which log information to be collected when the normality or failure occurrence is determined is defined in advance . 上記ログ情報採取手段及び上記採取ログ定義ファイルは、外部モジュールとして上記システム試験支援装置に組み込まれていることを特徴とする請求項２記載のシステム試験支援装置。
3. The system test support apparatus according to claim 2, wherein the log information collection unit and the collection log definition file are incorporated in the system test support apparatus as external modules .
JP2012254855A 2012-11-21 2012-11-21 System test support device Active JP6072519B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2012254855A JP6072519B2 (en) 2012-11-21 2012-11-21 System test support device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012254855A JP6072519B2 (en) 2012-11-21 2012-11-21 System test support device

Publications (2)

Publication Number Publication Date
JP2014102717A JP2014102717A (en) 2014-06-05
JP6072519B2 true JP6072519B2 (en) 2017-02-01

Family

ID=51025163

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012254855A Active JP6072519B2 (en) 2012-11-21 2012-11-21 System test support device

Country Status (1)

Country Link
JP (1) JP6072519B2 (en)

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6247759A (en) * 1985-08-26 1987-03-02 Fujitsu Ltd Automatic line trace processing system
JPH09212384A (en) * 1996-01-31 1997-08-15 Mitsubishi Electric Corp Computer system with diagnostic function, computer system with diagnostic function for initial assembly time, and diagnostic method for computer system
JP4485112B2 (en) * 2002-03-28 2010-06-16 株式会社日立製作所 Log data collection management method and apparatus
JP2006059266A (en) * 2004-08-23 2006-03-02 Fujitsu Ltd Failure analysis method and device therefor
JP2007094631A (en) * 2005-09-28 2007-04-12 Hitachi Electronics Service Co Ltd Application operation monitoring system, client application operation monitoring service providing system, and method, and client application operation monitoring service providing method
JP2008234232A (en) * 2007-03-19 2008-10-02 Nec Corp Automatic test system, automatic test device, automatic test method and program
JP2008262287A (en) * 2007-04-10 2008-10-30 Nec Access Technica Ltd Communication control device and communication log storage method
FI20115104A0 (en) * 2011-02-02 2011-02-02 Teknologian Tutkimuskeskus Vtt Oy SYSTEM AND METHOD FOR MODEL-BASED TESTING

Also Published As

Publication number Publication date
JP2014102717A (en) 2014-06-05

Similar Documents

Publication Publication Date Title
US20110320870A1 (en) Collecting network-level packets into a data structure in response to an abnormal condition
EP2523115A1 (en) Operation management device, operation management method, and program storage medium
CN111221743A (en) Automatic testing method and system
CN112835792B (en) Pressure testing system and method
CN112231271A (en) Data migration integrity verification method, device and equipment and computer readable medium
JP2010287142A (en) Fault tolerant computer system and method in fault tolerant computer system
CN110619022A (en) Node detection method, device, equipment and storage medium based on block chain network
US20050018694A1 (en) Method for analyzing network trace, method for judging order among nodes, processor for analyzing network trace, computer-executable program for controlling computer as processor, and method for correcting time difference among nodes in network
CN103731315A (en) Server failure detecting method
JP6072519B2 (en) System test support device
CN110765089A (en) Distributed equipment and log recording method, device and storage medium thereof
CN111526038A (en) Service request distribution method and device, computer equipment and readable storage medium
CN111506422B (en) Event analysis method and system
CN105988917B (en) Abnormal information acquisition method and device
CN113923272A (en) Data analysis method and device and server equipment
JP6488600B2 (en) Information processing system, program, and information processing apparatus
US10902027B2 (en) Generation of category information for measurement value
CN110365627B (en) Application program synchronization method and device, computing equipment and storage medium
JP7074187B2 (en) Monitoring equipment, monitoring methods and programs
US8825843B2 (en) System and methods for monitoring a geographic information system
CN112711518A (en) Log uploading method and device
CN113553243A (en) Remote error detection method
CN109684158A (en) Method for monitoring state, device, equipment and the storage medium of distributed coordination system
CN115168489B (en) Data certification method and device based on blockchain
JP4286594B2 (en) Fault analysis data collection device and method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150108

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160301

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160425

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161004

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161020

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161228

R151 Written notification of patent or utility model registration

Ref document number: 6072519

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250