JP2005100161A - Performance test support device - Google Patents
Performance test support device Download PDFInfo
- Publication number
- JP2005100161A JP2005100161A JP2003334053A JP2003334053A JP2005100161A JP 2005100161 A JP2005100161 A JP 2005100161A JP 2003334053 A JP2003334053 A JP 2003334053A JP 2003334053 A JP2003334053 A JP 2003334053A JP 2005100161 A JP2005100161 A JP 2005100161A
- Authority
- JP
- Japan
- Prior art keywords
- performance test
- test result
- content
- graph
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
- Computer And Data Communications (AREA)
Abstract
Description
本発明は、ネットワークシステムの性能試験支援装置に関し、特に、利用者にとって同一の性能試験内容に基づく複数の試験結果を容易に対比可能な結果表示機能を備えた性能試験支援装置に関する。 The present invention relates to a performance test support apparatus for a network system, and more particularly to a performance test support apparatus having a result display function that allows a user to easily compare a plurality of test results based on the same performance test content.
近年、ネットワークシステム、特にWebシステムにおいては、Webサーバ,Webアプリケーションサーバ,データベースサーバ等、複雑なサーバ構成で構築されることが多く、それに伴いネットワークシステムの性能を決定する要素も複雑になっている。
このような状況下での性能試験作業では、現在のシステム構成における性能値を取得して理想値と比較し、理想値に満たない場合はシステムのチューニングを行い、その後再度性能試験を行って、理想値を満たすまで前記作業を繰り返すのが一般的である。
また、性能試験を実施するマシンの性能やOSのタスクスケジューリング、ネットワークの利用状況にも依存すると考えられるが、性能試験実施によって毎回同じ性能試験結果が取得できるとは限らない。従って、性能試験結果の信頼性を高めるためには、同一の性能試験内容で複数回の性能試験を行って、各性能試験結果を統合的に評価することが必要であると考えられる。
In recent years, network systems, particularly web systems, are often constructed with complex server configurations such as web servers, web application servers, and database servers, and the elements that determine the performance of the network system have become complicated accordingly. .
In performance test work under such circumstances, obtain the performance value in the current system configuration and compare it with the ideal value, if it is less than the ideal value, tune the system, then perform the performance test again, Generally, the above operation is repeated until the ideal value is satisfied.
Moreover, although it is considered that it depends on the performance of the machine that performs the performance test, the task scheduling of the OS, and the network usage status, the same performance test result cannot always be acquired every time the performance test is performed. Therefore, in order to increase the reliability of the performance test results, it is considered necessary to perform a plurality of performance tests with the same performance test contents and to evaluate each performance test result in an integrated manner.
従来、性能試験によって取得した試験結果データを評価するための性能試験支援装置としては、リクエスト数、単位時間(秒)あたりに送受信されたリクエスト、レスポンス数であるスループット、リクエストに対する応答時間であるレスポンスタイム、リクエストに対するエラーの頻度を性能試験結果として取得し、当該性能試験結果の経時的変化をURL別(ユーザ・エージェント別)に折れ線、棒グラフ等のグラフ形式で表示する手段を備えた構成が公知となっている(例えば、特許文献1参照。)。
しかし、前記特許文献1に記載の性能試験支援装置では、各試験結果について、例えば、経時的変化をURL別にグラフ表示することを可能としているが、1回の性能試験について、ユーザ・エージェント毎の試験結果データを比較するものであり、同一の性能試験内容に基づく複数回の性能試験結果を比較するものではなかった。
即ち、性能試験を実施する利用者は、一般的な性能試験実施の利用形態と考えられるシステムのチューニング,性能試験の繰返しによって、如何に性能試験対象のシステムの性能が改善されたのかを把握する必要があるが、前記特許文献1に記載の性能試験支援装置では、そのための手段が考慮されていなかった。
従って、各利用者は、同一試験内容での性能試験結果としての値,グラフ等の情報を別途に管理し、過去の複数回の性能試験結果としての値やグラフを比較するという作業が必要となっていた。
However, in the performance test support device described in
In other words, the user who performs the performance test grasps how the performance of the system subject to the performance test has been improved by the tuning of the system, which is considered to be a general usage form of the performance test, and the repetition of the performance test. Although necessary, the performance test support apparatus described in
Therefore, each user needs to manage the values and graphs as performance test results for the same test contents separately, and compare the values and graphs as the results of past multiple performance tests. It was.
本発明は前記課題を解決するためのものであり、ネットワークシステムの性能試験結果として、同一試験内容における複数回の性能試験結果に基づき、システムのチューニング等による改善状況を容易かつ的確に把握させることを可能とする性能試験支援装置を提供することを目的とする。 The present invention is to solve the above-mentioned problems, and as a network system performance test result, based on a plurality of performance test results in the same test content, it is possible to easily and accurately grasp the improvement status due to system tuning or the like. An object of the present invention is to provide a performance test support device that enables the above.
前記課題を解決するため、本発明は、ネットワークを介して接続された性能試験対象システムに対しリクエストを送信し、当該性能試験対象システムから受信したレスポンスに基づき取得した性能試験結果データを表示可能とした性能試験支援装置であって、前記性能試験対象システムに対して送信するリクエスト内容を含む性能試験内容定義情報を、性能試験内容識別情報とともに情報格納手段に格納する性能試験内容作成手段と、任意に選択された性能試験内容識別情報に基づき前記情報格納手段から前記性能試験内容定義情報を取得し、当該性能試験内容定義情報に基づき性能試験を実施するとともに、取得した性能試験結果データに、前記性能試験内容識別情報を対応付けて情報格納手段に格納する性能試験実施手段と、任意に選択された性能試験内容識別情報に基づき、前記情報格納手段から前記性能試験結果データを取得して一覧表示するとともに、一覧表示した性能試験結果データから任意に選択された複数の性能試験結果データに基づき、各データの経時的変化を示したグラフを生成して表示する性能試験結果表示手段とを備えることを特徴とする。
また、前記性能試験結果表示手段は、前記グラフとして、任意に選択された複数の性能試験結果データを重ねて表示する手段をさらに備えることを特徴とする。
また、前記性能試験結果表示手段は、前記グラフとして、任意に選択された複数の性能試験結果データの差分データを表示する手段をさらに備えることを特徴とする請求項1に記載の性能試験支援装置。
また、前記性能試験結果表示手段は、前記グラフとして、任意に選択された複数の性能試験結果データの平均データを表示する手段をさらに備えることを特徴とする。
In order to solve the above problems, the present invention is capable of transmitting a request to a performance test target system connected via a network and displaying performance test result data acquired based on a response received from the performance test target system. A performance test content creating means for storing performance test content definition information including request content to be transmitted to the performance test target system in an information storage means together with performance test content identification information; The performance test content definition information is acquired from the information storage means based on the performance test content identification information selected in the above, and the performance test is performed based on the performance test content definition information. Performance test execution means for associating performance test content identification information in association with the information storage means, and optional selection Based on the performance test content identification information obtained, the performance test result data is acquired from the information storage means and displayed as a list, and based on a plurality of performance test result data arbitrarily selected from the performance test result data displayed as a list And a performance test result display means for generating and displaying a graph showing changes over time of each data.
The performance test result display means further comprises means for displaying a plurality of arbitrarily selected performance test result data as the graph.
The performance test support device according to
The performance test result display means further includes means for displaying average data of a plurality of arbitrarily selected performance test result data as the graph.
以上の構成により、本発明では、同一試験内容に基づく複数回の性能試験に基づく性能試験結果データを容易に比較可能な形で、利用者に対して表示することが可能となる。
また、性能試験内容を識別する識別情報に基づき、情報格納手段に格納された性能試験結果データを管理することとしたので、同一の試験内容に基づく試験結果データを容易かつ適切に選択させることができる。
この場合、複数の試験結果データを示すグラフとして、重ねて表示、差分データを表示、平均データを表示等、種々の表示形態で表示可能としたので、複数回の性能試験結果を容易かつ適切に把握させることが可能となる。
With the above configuration, in the present invention, performance test result data based on a plurality of performance tests based on the same test content can be displayed to the user in a form that can be easily compared.
Further, since the performance test result data stored in the information storage means is managed based on the identification information for identifying the performance test content, it is possible to easily and appropriately select the test result data based on the same test content. it can.
In this case, as a graph showing a plurality of test result data, it is possible to display in various display forms such as overlapping display, difference data display, average data display, etc., so multiple performance test results can be easily and appropriately displayed. It becomes possible to grasp.
以下、本発明の実施の形態について、図面に基づき説明する。
図1は、本発明の一実施の形態に係る性能試験支援装置の概略構成を示すブロック図である。
本実施の形態に係る性能試験支援装置100は、各処理部として性能試験内容作成部101と、性能試験結果表示部102と、性能試験実施部103と、画面制御部104とを有するとともに、情報格納部として性能試験内容データベース105と、性能試験結果データベース106とを備える。
性能試験支援装置100は、試験対象システム110に対してインターネット等のネットワークを介して接続されており、性能試験実施部103の生成する複数の擬装ユーザ・エージェント107,・・・からリクエストを送出することにより、性能試験を実施する。ここで、試験対象システムとは、Webサーバ,Webアプリケーションサーバ等の各種サーバ及び複数のサーバにより構成されたWebシステムを示す。
試験対象システム110は、ネットワークを介して、擬装ユーザ・エージェント107からリクエストを受付け、各リクエストに対応するレスポンスを該当する擬装ユーザ・エージェント107に送出する。
性能試験内容作成部101は、利用者により入力された性能試験内容(試験対象システム110に対して送出するリクエストの内容)を受取り、性能試験内容識別情報を付加して、性能試験内容データベース105に格納する。
性能試験結果表示部102は、利用者により指定された性能試験内容についての性能試験結果データを、性能試験結果データベース106から取得して表示する。
性能試験実施部103は、性能試験内容データベース105に格納された情報及び利用者により入力された性能試験実施情報(擬装ユーザ・エージェント数,繰返し回数)に基づき性能試験を実施し、取得した性能試験結果データに性能試験内容識別情報を付加して、性能試験結果データベース106に格納する。性能試験結果としては、擬装ユーザ・エージェント107が試験対象システム110に対してリクエストを送出し、試験対象システム110からのレスポンスに基づき、個別に認識した名前解決,接続,送信及び受信に要した時間、試験実行開始からの経過時間、送信バイト数、受信バイト数、およびステータスを、それぞれ取得する。
画面制御部104は、性能試験内容作成画面,性能試験実施画面,性能試験結果表示画面等の各画面制御を行う。
本実施の形態では、性能試験結果表示部102により、性能試験結果データベース106に格納された性能試験結果データについて、利用者の選択に応じて、性能試験内容識別情報で識別される同一の性能試験内容に基づく複数の性能試験結果データを比較した、各種のグラフを表示可能としている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a block diagram showing a schematic configuration of a performance test support apparatus according to an embodiment of the present invention.
The performance
The performance
The
The performance test
The performance test
The performance
The
In the present embodiment, the performance test
以上の構成により、本実施の形態に係る性能試験支援装置100の行う各処理について図2〜図4に基づき説明する。なお、各図では、ユーザ側の操作と性能試験支援装置100の処理とを示している。
図2は、性能試験内容作成処理手順を示すフローチャートである。
性能試験内容作成処理では、利用者による性能試験内容作成画面表示要求がされると(ステップ201)、画面制御部104が性能試験内容作成画面を表示する(ステップ202)。
性能試験内容作成画面に対し、利用者により性能試験名、リクエスト内容(リクエストID、メソッド、ホスト名、パス、ポストデータ)が入力され(ステップ203)、登録ボタンが押下されると(ステップ204)、画面制御部104は性能試験内容作成部101に対し、入力された内容を送信して登録指示を行う。
性能試験内容作成部101は、受取った性能試験内容を性能試験内容データベース105に格納して処理を終了する(ステップ205)。この場合、性能試験内容作成部101は、各性能試験内容を一意に識別する性能試験内容IDを生成して付与する。
With the above configuration, each process performed by the performance
FIG. 2 is a flowchart showing a performance test content creation processing procedure.
In the performance test content creation process, when a user requests a performance test content creation screen display (step 201), the
On the performance test content creation screen, the performance test name and request content (request ID, method, host name, path, post data) are input by the user (step 203), and the registration button is pressed (step 204). The
The performance test
図3は、性能試験実施処理手順を示すフローチャートである。
性能試験実施処理では、利用者による性能試験実施画面表示要求がされると(ステップ301)、画面制御部104が性能試験実施画面を表示する(ステップ302)。ここで、性能試験内容データベース105に格納されている性能試験内容が参照され、性能試験実施画面に、性能試験内容IDと性能試験名との組合せをリストボックスで表示する。
性能試験実施画面に対し、利用者により性能試験内容が選択されるとともに、性能試験条件(性能試験名,ユーザ・エージェント数,繰返し回数)が入力され(ステップ303)、実行ボタンが押下されると(ステップ304)、画面制御部104は性能試験実施部103に対し、入力された性能試験条件を送信して性能試験実行指示を行う。
性能試験実施部103は、受取った性能試験条件に含まれる性能試験内容IDをキーにして、性能試験内容データベース105に格納されている性能試験内容を取得するとともに(ステップ305)、性能試験条件として指定されたユーザ・エージェント数に基づき、擬装ユーザ・エージェント107を生成して、各擬装ユーザ・エージェント107にリクエスト内容を渡して送信指示を行う(ステップ306)。
各擬装ユーザ・エージェント107は、性能試験実施部103からの指示に応じて、性能試験条件として指定された繰返し回数分、以下に示すステップ308からステップ311の処理を繰返し実行する(ステップ307)。
ステップ308では、性能試験内容として設定されたリクエスト内容分、以下に示すステップ309からステップ311の処理を繰返し実行する。
ステップ309では、擬装ユーザ・エージェント107が試験対象システム110にリクエストを送信する。
ステップ310では、擬装ユーザ・エージェント107が試験対象システムからレスポンスを受信する。
ステップ311では、性能試験実施部103が、各偽装ユーザ・エージェント107の受信したレスポンスに基づき、測定結果情報を生成して格納する。ここで、測定結果情報としては、例えば、名前解決,接続,送信,受信に要した時間、試験実行開始からの経過時間、送信バイト数、受信バイト数、ステータス等が該当する。性能試験実施部103は、測定結果情報に対して、性能試験内容ID、性能試験を実施したユーザ・エージェント107を識別するユーザ・エージェントID、繰返し数を識別する繰返しID、各リクエストを識別するリクエストIDとともに、各性能試験結果を一意に識別する性能試験結果IDを付加し、性能試験結果データベース106に格納する。
FIG. 3 is a flowchart showing a performance test execution processing procedure.
In the performance test execution process, when a user requests a performance test execution screen display (step 301), the
When a performance test content is selected by the user on the performance test execution screen, a performance test condition (performance test name, number of user agents, number of repetitions) is input (step 303), and the execution button is pressed. (Step 304), the
The performance
Each
In step 308, the following processing from
In
In step 310, the
In step 311, the performance
図4は、性能試験結果表示処理手順を示すフローチャートである。
性能試験結果表示処理では、利用者による性能試験結果表示画面表示要求がされると(ステップ401)、画面制御部104が性能試験結果表示内容入力画面を表示する(ステップ402)。ここで、性能試験内容データベース105に格納されている性能試験内容が参照され、性能試験実施画面に、性能試験内容IDと性能試験名との組合せをリストボックスで表示する。
性能試験結果表示内容入力画面に対し、利用者により結果表示対象とする性能試験内容が選択され(ステップ403)、リスト追加ボタンが押下されると(ステップ404)、画面制御部104は、選択された性能試験内容で識別される性能試験結果を性能試験結果表示リストに追加して表示する。
次に、利用者にグラフ表示を行う際のグラフ軸,グラフ操作内容(重ねて表示,差分を表示,平均を表示)を選択させる(ステップ405,406)。
さらに、利用者により、表示対象とする性能試験結果が複数選択され(ステップ407)、グラフ表示ボタンが押下されると(ステップ408)、画面制御部104は性能試験結果表示部102に対し、入力された性能試験結果表示内容を送信して性能試験結果表示指示を行う。なお、ステップ406において、グラフ操作内容として「差分を表示」が選択された場合には、ステップ407では、2つの性能試験結果しか選択することができない。また、選択された順番を記録しておき、「1番目に選択された性能試験結果−2番目に選択された性能試験結果」で差分が算出される。
性能試験結果表示部102は、受取った性能試験結果表示内容に基づき、選択された性能試験結果分、以下に示すステップ410からステップ411の処理を繰返し実行する(ステップ409)。
ステップ410では、性能試験結果表示内容に含まれる性能試験内容ID、性能試験結果IDをキーにして、性能試験結果データベース106に格納されている性能試験結果を取得する。
ステップ411では、性能試験結果表示内容に含まれるグラフ軸に応じて、取得した性能試験結果についての値の算出を行う。ここで、グラフ軸として「スループット×経過時間」が選択されていた場合、経過時間を幾つかの区間(同様にインターバルは50秒とする)に分割し、その区間にあてはまるレスポンス数をインターバルで割ったものをスループットとする。また、グラフ軸として「レスポンスタイム×経過時間」が選択されていた場合、経過時間を幾つかの区間(ここでインターバルは50秒とする)に分割し、その区間にあてはまる名前解決時間、接続時間、送信時間、受信時間の総和をレスポンス数で割ったものをレスポンスタイムとする。
性能試験結果表示部102は、性能試験結果表示内容に含まれるグラフ軸,グラフ操作内容に応じて、ステップ411で算出した値に基づくグラフを生成し(ステップ412)、画面制御部104により、試験内容結果表示画面としてグラフを表示した画面を表示する(ステップ413)。ここで、性能試験結果表示内容に含まれる「操作内容が重ねて表示」の場合、性能試験結果ごとに算出された値をプロットし折れ線で結ぶことでグラフ表示する。また、選択された操作内容が「差分を表示」の場合、性能試験結果ごとに算出された値を横軸の経過時間区間ごとに引き算しその値をプロットし折れ線で結ぶことでグラフ表示する。また、選択された操作内容が「平均を表示」の場合、性能試験結果ごとに算出された値を横軸の経過時間区間ごとに平均をとりその値をプロットし折れ線で結ぶことでグラフ表示する。
FIG. 4 is a flowchart showing a performance test result display processing procedure.
In the performance test result display process, when a performance test result display screen display request is made by the user (step 401), the
On the performance test result display content input screen, the performance test content to be displayed as a result is selected by the user (step 403), and when the list addition button is pressed (step 404), the
Next, the user is made to select a graph axis and graph operation contents (overlapping display, difference display, average display) when performing graph display (steps 405 and 406).
Further, when a plurality of performance test results to be displayed are selected by the user (step 407) and the graph display button is pressed (step 408), the
The performance test
In step 410, the performance test result stored in the performance
In step 411, a value for the acquired performance test result is calculated according to the graph axis included in the performance test result display content. Here, when “throughput × elapsed time” is selected as the graph axis, the elapsed time is divided into several intervals (similarly, the interval is 50 seconds), and the number of responses that fall within that interval is divided by the interval. Is the throughput. In addition, when “response time × elapsed time” is selected as the graph axis, the elapsed time is divided into several sections (here, the interval is 50 seconds), and the name resolution time and connection time that apply to the section. The response time is the sum of the transmission time and reception time divided by the number of responses.
The performance test
以上の各処理について、画面制御部104の表示する画面構成例に基づき、具体的に説明する。
図5は、図2のステップ202で表示する性能試験内容作成画面の画面構成の一例を示す図である。
性能試験内容作成画面500は、性能試験名入力部510と、リクエスト内容入力部520と、登録ボタン530とから構成される。
性能試験名入力部510は、利用者に性能試験名を入力させるフィールドであり、重複の無い範囲で任意の性能試験名の入力を可能とする。
リクエスト内容入力部520は、リクエストID入力部521,メソッド入力部522,ホスト名入力部523,パス入力部524,ポストデータ入力部525とを有する。リクエストID入力部521は、性能試験対象システムに対して、リクエストを送信する順番を示すリクエストIDを入力させるフィールドである。
メソッド入力部522は、リクエストのメソッドについて、「GET」か「POST」かを選択させるフィールドである。ここでのメソッドとは、HTTPのリクエストメソッドのことであり、POSTメソッドは、エンティティボディを転送するために用いられる。 GETもエンティティボディを転送することができるが、POSTではより大量のデータを転送することができる。
ホスト名入力部523,パス入力部524は、リクエストを送信するホスト名,パスをそれぞれ入力させるフィールドである。
ポストデータ入力部525は、ポストメソッドが選択されたリクエストについて、送信するデータを入力させるフィールドである。
登録ボタン530は、性能試験内容データの生成,格納を行うためのボタンである。
Each of the above processes will be specifically described based on a screen configuration example displayed by the
FIG. 5 is a diagram showing an example of the screen configuration of the performance test content creation screen displayed in
The performance test
The performance test
The request
The
The host
The post
The
図6は、図5の性能試験内容作成画面500に入力された内容に基づき、性能試験内容データベース105に格納される性能試験内容データのデータ構造の一例を示す図である。
性能試験内容データ600は、各性能試験内容データを一意に識別する性能試験内容ID601と、性能試験内容作成画面に入力された各データに対応する性能試験名602,リクエストID603,メソッド604,ポスト名605,パス606,ポストデータ607の各データ項目を有している。
性能試験内容ID601は、性能試験内容作成部101が生成する。
FIG. 6 is a diagram illustrating an example of the data structure of performance test content data stored in the performance
The performance
The performance
図7は、図3のステップ302で表示する性能試験実施画面の画面構成の一例を示す図である。
性能試験実施画面700は、性能試験内容選択部701と、ユーザ・エージェント数入力部702と、繰返し回数入力部703と、実行ボタン704とから構成される。
性能試験内容選択部701は、実施する性能試験内容を利用者に選択させるフィールドであり、性能試験内容データベース105に格納されている性能試験内容データについて、性能試験内容IDと性能試験名とをコロンで区切り、リストボックスに表示し、当該リストボックスから選択可能としている。
ユーザ・エージェント数入力部702は、性能試験対象システムに対してリクエストを送信する擬装ユーザ・エージェントの数を指定させるフィールドである。
繰返し回数入力部703は、選択された性能試験を何回繰返し行うかを指定させるフィールドである。
実行ボタン704は、性能試験実施処理を開始するためのボタンである。
FIG. 7 is a diagram showing an example of the screen configuration of the performance test execution screen displayed in step 302 of FIG.
The performance
The performance test
The user agent
The repetition
The
図8は、図3のステップ312で、性能試験結果データベース106に格納される性能試験結果データのデータ構造の一例を示す図である。
性能試験結果データ800は、実施した性能試験の性能試験内容データを一意に識別する性能試験内容ID801と、格納性能試験結果データを一意に識別する性能試験結果ID802と、各性能試験結果の内容として、ユーザエージェントID803,繰返しID804,リクエストID805,名前解決時間806,接続時間807,送信時間808,受信時間809,経過時間810,送信バイト数811,受信バイト数812,ステータス813の各データ項目を有している。
性能試験結果ID802は、各性能試験実施処理に対して性能試験実施部103が生成する。
ユーザエージェントID803は、性能試験結果データに示す性能試験を行なった擬装ユーザ・エージェント107を識別する情報を示す。
繰返しID804は、性能試験結果データに示す性能試験が、何回目の繰返しかを識別する情報を示す。
リクエストID805は、性能試験結果データに示す性能試験でのリクエストを識別する情報を示す。
名前解決時間806は、試験対象システム110がリクエストの名前解決に要した時間(ms)を示す。
接続時間807は、リクエストの接続に要した時間(ms)を示す。
送信時間808は、リクエストの送信に要した時間として、リクエストの送信準備から送信完了までの時間(ms)を示す。
受信時間809は、リクエストの受信に要した時間として、リクエストの送信終了からレスポンスの受信完了までの時間(ms)を示す。
経過時間810は、性能試験実行開始からレスポンスを受信するmでの経過時間(ms)を示す。
送信バイト数811は、ヘッダ部分等を含むリクエストの送信バイト数を示す。
受信バイト数812は、ヘッダ部分等を含むレスポンスの受信バイト数を示す。
ステータス813は、レスポンスのステータスコードを示す。
FIG. 8 is a diagram showing an example of the data structure of the performance test result data stored in the performance
The performance test result data 800 includes a performance
The performance
The
The
The
The
The
The
The
The elapsed
The
The number of received
A
図9は、図4のステップ402で表示する性能試験結果表示内容入力画面の画面構成の一例を示す図である。
性能試験結果表示内容入力画面900は、性能試験内容選択部910と、追加ボタン920と、グラフ軸選択部930と、グラフ操作内容選択部940と、性能試験結果リスト950と、グラフ表示ボタン960とから構成される。
性能試験内容選択部910は、グラフ表示する性能試験結果についての性能試験内容を利用者に選択させるフィールドであり、性能試験結果データベース106に格納されている性能試験結果データについて、性能試験内容IDと性能試験名とをコロンで区切り、リストボックスに表示し、当該リストボックスから選択可能としている。
追加ボタン920は、選択された性能試験内容IDで識別される性能試験結果データを性能試験結果リスト950に追加するためのボタンである。
グラフ軸選択部930は、選択された性能試験結果データをグラフ表示する際のグラフ軸の種類を選択させるフィールドであり、本実施の形態では、「スループット×経過時間」又は「レスポンスタイム×経過時間」のいずれかについて、チェックボックスにより選択可能となっている。
グラフ操作内容選択部940は、選択された複数の性能試験結果データに関するグラフ操作内容を選択させるフィールドであり、本実施の形態では、「重ねて表示」、「差分を表示」又は「平均を表示」のいずれかについて、チェックボックスにより選択可能となっている。
なお、グラフ軸選択部930及びグラフ操作内容選択部940については、複数の項目を選択可能としてもよい。
性能試験結果リスト950は、性能試験内容選択部910で選択された性能試験内容IDで識別される性能試験結果データの一覧を表示し、グラフ表示する複数の性能試験結果データをチェックボックスにより指定させる。
性能試験結果リスト950は、性能試験内容951,性能試験結果ID952,ユーザエージェント数953,繰返し回数954の各項目を表示するとともに、詳細情報表示ボタン955を備える。
グラフ表示ボタン960は、各選択内容及び指定内容に基づいて生成したグラフを含む性能試験結果表示画面を表示するためのボタンである。
FIG. 9 is a diagram showing an example of the screen configuration of the performance test result display content input screen displayed in step 402 of FIG.
The performance test result display content input screen 900 includes a performance test
The performance test
The
The graph
The graph operation
Note that a plurality of items may be selectable for the graph
The performance
The performance
The
図10は、グラフ操作内容として「重ねて表示」が選択された場合に、図4のステップ413で表示する性能試験結果表示画面の画面構成の一例を示す図である。
性能試験結果表示画面1000は、利用者により指定された性能試験結果データの一覧を表示する性能試験結果表示リスト1010と、結果表示グラフ1020とから構成される。
性能試験結果表示リスト1010には、各性能試験結果データを示す情報として、グラフデータを識別するグラフID1011と、グラフ軸種別1012と、操作内容種別1013と、性能試験内容1014と、性能試験結果ID1015とを表示する。
結果表示グラフ1020には、性能試験結果表示内容入力画面900のグラフ軸選択部930で選択されたグラフ軸(縦軸,横軸)のタイトル1031,1032と、選択されたグラフ軸に応じた目盛1033,1034とを表示するとともに、性能試験結果表示リスト1010に表示された性能試験結果データに基づき、各グラフ軸に対応して算出した値について折線グラフ1035,1036で表示している。
FIG. 10 is a diagram showing an example of the screen configuration of the performance test result display screen displayed in step 413 of FIG. 4 when “overlapping display” is selected as the graph operation content.
The performance test result display screen 1000 includes a performance test
The performance test
The
図11は、グラフ操作内容として「差分を表示」が選択された場合に、図4のステップ413で表示する性能試験結果表示画面の画面構成の一例を示す図である。
本例に示す性能試験結果表示画面1100の結果表示グラフ1110では差分を表示するため、縦軸の目盛1111として「+50」から「−40」までの値が示される。
結果表示グラフ1110では、性能試験内容ID及び性能試験結果IDで識別される各性能試験結果データの平均値に基づき算出した差分データを示す折線グラフ1211を表示する。
FIG. 11 is a diagram illustrating an example of a screen configuration of the performance test result display screen displayed in step 413 of FIG. 4 when “display difference” is selected as the graph operation content.
In the
The
図12は、グラフ操作内容として「平均を表示」が選択された場合に、図4のステップ413で表示する性能試験結果表示画面の画面構成の一例を示す図である。
本例に示す性能試験結果表示画面1200の結果表示グラフ1210では、性能試験内容ID及び性能試験結果IDで識別される各性能試験結果データに基づき算出した平均データを示す折線グラフ1211を表示する。
FIG. 12 is a diagram showing an example of the screen configuration of the performance test result display screen displayed in step 413 of FIG. 4 when “display average” is selected as the graph operation content.
In the
以上のように、本実施の形態に係る性能試験支援装置によれば、同一試験内容に基づく複数回の性能試験に基づく性能試験結果データを容易に比較可能な形で、利用者に対して表示することが可能となる。この場合、同一の性能試験内容に基づく性能試験結果データを、性能試験内容IDに基づき管理することとしたので、性能試験結果データベースから、比較する複数の性能試験結果データを適切に選択させることが可能となる。
この場合、複数の試験結果データを示すグラフとして、重ねて表示、差分データを表示、平均データを表示等、種々の表示形態で表示可能としたので、複数回の性能試験結果を容易かつ適切に把握させることが可能となる。
As described above, according to the performance test support device according to the present embodiment, performance test result data based on a plurality of performance tests based on the same test content is displayed to the user in a form that can be easily compared. It becomes possible to do. In this case, since the performance test result data based on the same performance test content is managed based on the performance test content ID, it is possible to appropriately select a plurality of performance test result data to be compared from the performance test result database. It becomes possible.
In this case, as a graph showing a plurality of test result data, it is possible to display in various display forms such as overlapping display, difference data display, average data display, etc., so multiple performance test results can be easily and appropriately displayed. It becomes possible to grasp.
なお、グラフとしては、折線グラフに限られるものではなく、経時的変化を示すことが可能であれば、他のグラフで表示することとしてもよい。また、例えば、同一試験内容に基づく複数回の性能試験結果データの平均値と、任意の性能試験結果データとを重ねて表示したグラフを表示可能としてもよい。
また、性能試験結果IDとしては、同一の性能試験内容に基づいて実施された試験結果データを識別可能とできるものであればよいが、例えば、性能試験実施日時に基づき性能試験結果IDを生成することとしてもよい。これにより、チューニングを行った日時との関係で性能の改善状況を適切に管理させることが可能となる。
Note that the graph is not limited to a line graph, and may be displayed in another graph as long as it can show a change over time. Further, for example, a graph in which an average value of a plurality of performance test result data based on the same test content and arbitrary performance test result data are displayed may be displayed.
Moreover, as performance test result ID, what can identify the test result data performed based on the same performance test content is sufficient, for example, the performance test result ID is generated based on the performance test execution date and time. It is good as well. As a result, the performance improvement status can be appropriately managed in relation to the date and time of tuning.
100 性能試験支援装置、101 性能試験内容作成部、102 性能試験結果表示部、103 性能試験実施部、104 画面制御部、105 性能試験内容データベース、106 性能試験結果データベース、107 擬装ユーザ・データベース、110 試験対象システム、600 性能試験内容データ、601 性能試験内容ID、602 性能試験名、603 リクエストID、604 メソッド、605 ポスト名、606 パス、607 ポストデータ、800 性能試験結果データ、801 性能試験内容ID、802 性能試験結果ID、803 ユーザ・エージェントID、804 繰返しID、805 リクエストID、806 名前解決時間、807 接続時間、808 送信時間、809 受信時間、810 経過時間、811 送信バイト数、812 受信バイト数、813 ステータス。
DESCRIPTION OF
Claims (4)
前記性能試験対象システムに対して送信するリクエスト内容を含む性能試験内容定義情報を、性能試験内容識別情報とともに情報格納手段に格納する性能試験内容作成手段と、
任意に選択された性能試験内容識別情報に基づき前記情報格納手段から前記性能試験内容定義情報を取得し、当該性能試験内容定義情報に基づき性能試験を実施するとともに、取得した性能試験結果データに、前記性能試験内容識別情報を対応付けて情報格納手段に格納する性能試験実施手段と、
任意に選択された性能試験内容識別情報に基づき、前記情報格納手段から前記性能試験結果データを取得して一覧表示するとともに、一覧表示した性能試験結果データから任意に選択された複数の性能試験結果データに基づき、各データの経時的変化を示したグラフを生成して表示する性能試験結果表示手段と
を備えることを特徴とする性能試験支援装置。 A performance test support device capable of sending a request to a performance test target system connected via a network and displaying performance test result data acquired based on a response received from the performance test target system.
Performance test content creation means for storing performance test content definition information including request content to be transmitted to the performance test target system together with performance test content identification information in an information storage means;
Obtaining the performance test content definition information from the information storage means based on the performance test content identification information arbitrarily selected, performing the performance test based on the performance test content definition information, and in the acquired performance test result data, Performance test execution means for associating the performance test content identification information and storing it in the information storage means;
Based on the performance test content identification information arbitrarily selected, the performance test result data is acquired from the information storage means and displayed in a list, and a plurality of performance test results arbitrarily selected from the displayed performance test result data A performance test support device, comprising: a performance test result display means for generating and displaying a graph showing changes over time of each data based on the data.
前記グラフとして、任意に選択された複数の性能試験結果データを重ねて表示する手段をさらに備えることを特徴とする請求項1に記載の性能試験支援装置。 The performance test result display means includes
The performance test support apparatus according to claim 1, further comprising means for displaying a plurality of arbitrarily selected performance test result data as the graph.
前記グラフとして、任意に選択された複数の性能試験結果データの差分データを表示する手段をさらに備えることを特徴とする請求項1に記載の性能試験支援装置。 The performance test result display means includes
The performance test support apparatus according to claim 1, further comprising means for displaying difference data of a plurality of arbitrarily selected performance test result data as the graph.
前記グラフとして、任意に選択された複数の性能試験結果データの平均データを表示する手段をさらに備えることを特徴とする請求項1に記載の性能試験支援装置。
The performance test result display means includes
The performance test support device according to claim 1, further comprising means for displaying average data of a plurality of performance test result data arbitrarily selected as the graph.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003334053A JP2005100161A (en) | 2003-09-25 | 2003-09-25 | Performance test support device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003334053A JP2005100161A (en) | 2003-09-25 | 2003-09-25 | Performance test support device |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2005100161A true JP2005100161A (en) | 2005-04-14 |
Family
ID=34461881
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003334053A Pending JP2005100161A (en) | 2003-09-25 | 2003-09-25 | Performance test support device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2005100161A (en) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249844A (en) * | 2006-03-17 | 2007-09-27 | Fujitsu Ltd | Performance tuning program, recording medium with the program recorded thereon, performance tuning apparatus and performance tuning method |
JP2007264967A (en) * | 2006-03-28 | 2007-10-11 | Fujitsu Ltd | Senario creation program |
JP2007264810A (en) * | 2006-03-27 | 2007-10-11 | Fujitsu Ltd | Load test program |
WO2008038389A1 (en) * | 2006-09-28 | 2008-04-03 | Fujitsu Limited | Program performance analyzing apparatus |
JP2008234151A (en) * | 2007-03-19 | 2008-10-02 | Fujitsu Ltd | Scenario preparing program and scenario preparing device |
JP2009199115A (en) * | 2008-02-19 | 2009-09-03 | Toshiba It Service Kk | Communication program testing method and communication program testing system |
WO2009130967A1 (en) * | 2008-04-21 | 2009-10-29 | 日本電気株式会社 | System performance test method, program, and device |
KR100989762B1 (en) * | 2008-04-29 | 2010-10-26 | 아우토리브 디벨롭먼트 아베 | A system and method supporting an air-bag low risk deployment test |
JP2012248228A (en) * | 2012-09-19 | 2012-12-13 | Fujitsu Ltd | Load simulation device, simulation device, load simulation method, simulation method and program |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10213429A (en) * | 1997-01-28 | 1998-08-11 | Nippon Panametorikusu Kk | Beam-diameter measuring target for ultrasonic-point focusing submerged contact and method and device for measuring beam diameter |
JP2000242328A (en) * | 1999-02-23 | 2000-09-08 | Toshiba Corp | Surveillance test device and storage medium stored with program |
JP2001183273A (en) * | 1999-12-22 | 2001-07-06 | Shimadzu Corp | Material tester |
JP2002007232A (en) * | 2000-06-21 | 2002-01-11 | Cybird Co Ltd | Performance testing method and server testing device for www server |
JP2002121150A (en) * | 2000-08-10 | 2002-04-23 | Yamanouchi Pharmaceut Co Ltd | Osteoplastic medicine, osteoplastic medicinal composition, and osteoplastic combinational medicine |
JP2002176441A (en) * | 2000-12-08 | 2002-06-21 | Fujitsu Ltd | Communication unit |
JP2002340856A (en) * | 2001-05-15 | 2002-11-27 | Univ Nihon | Ultra-micro glass capillary electrode having dynamo- electric ion sampling ability |
-
2003
- 2003-09-25 JP JP2003334053A patent/JP2005100161A/en active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10213429A (en) * | 1997-01-28 | 1998-08-11 | Nippon Panametorikusu Kk | Beam-diameter measuring target for ultrasonic-point focusing submerged contact and method and device for measuring beam diameter |
JP2000242328A (en) * | 1999-02-23 | 2000-09-08 | Toshiba Corp | Surveillance test device and storage medium stored with program |
JP2001183273A (en) * | 1999-12-22 | 2001-07-06 | Shimadzu Corp | Material tester |
JP2002007232A (en) * | 2000-06-21 | 2002-01-11 | Cybird Co Ltd | Performance testing method and server testing device for www server |
JP2002121150A (en) * | 2000-08-10 | 2002-04-23 | Yamanouchi Pharmaceut Co Ltd | Osteoplastic medicine, osteoplastic medicinal composition, and osteoplastic combinational medicine |
JP2002176441A (en) * | 2000-12-08 | 2002-06-21 | Fujitsu Ltd | Communication unit |
JP2002340856A (en) * | 2001-05-15 | 2002-11-27 | Univ Nihon | Ultra-micro glass capillary electrode having dynamo- electric ion sampling ability |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007249844A (en) * | 2006-03-17 | 2007-09-27 | Fujitsu Ltd | Performance tuning program, recording medium with the program recorded thereon, performance tuning apparatus and performance tuning method |
JP2007264810A (en) * | 2006-03-27 | 2007-10-11 | Fujitsu Ltd | Load test program |
JP2007264967A (en) * | 2006-03-28 | 2007-10-11 | Fujitsu Ltd | Senario creation program |
US8839210B2 (en) | 2006-09-28 | 2014-09-16 | Fujitsu Limited | Program performance analysis apparatus |
WO2008038389A1 (en) * | 2006-09-28 | 2008-04-03 | Fujitsu Limited | Program performance analyzing apparatus |
JPWO2008038389A1 (en) * | 2006-09-28 | 2010-01-28 | 富士通株式会社 | Program performance analyzer |
JP2008234151A (en) * | 2007-03-19 | 2008-10-02 | Fujitsu Ltd | Scenario preparing program and scenario preparing device |
JP2009199115A (en) * | 2008-02-19 | 2009-09-03 | Toshiba It Service Kk | Communication program testing method and communication program testing system |
JP4512142B2 (en) * | 2008-02-19 | 2010-07-28 | 東芝Itサービス株式会社 | Communication program test method and communication program test system |
WO2009130967A1 (en) * | 2008-04-21 | 2009-10-29 | 日本電気株式会社 | System performance test method, program, and device |
JPWO2009130967A1 (en) * | 2008-04-21 | 2011-08-18 | 日本電気株式会社 | System performance test method, program and apparatus |
KR100989762B1 (en) * | 2008-04-29 | 2010-10-26 | 아우토리브 디벨롭먼트 아베 | A system and method supporting an air-bag low risk deployment test |
JP2012248228A (en) * | 2012-09-19 | 2012-12-13 | Fujitsu Ltd | Load simulation device, simulation device, load simulation method, simulation method and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5790412B2 (en) | Stateless distributed parallel crawl technique for interactive client-server applications | |
JP5794107B2 (en) | Distributed computer system, interactive client-server application verification method and product | |
JP4423406B1 (en) | Fine reading rate measuring device, client terminal, fine reading rate measuring system, fine reading rate measuring method, and program | |
JP2005210284A (en) | System and method for selecting projector, and program thereof | |
JP2016212865A5 (en) | ||
JP2012099106A (en) | Electronic equipment, method and products for compressing state graph | |
WO2019111508A1 (en) | Information processing device, information processing method, and program | |
JP2005100161A (en) | Performance test support device | |
US7716033B2 (en) | Web load test program | |
US20060079967A1 (en) | System, method, and article of manufacture for obtaining data | |
JP5742666B2 (en) | Method, product and electronic device for synchronizing state graphs | |
CN107317722B (en) | data source extensible system and method | |
JP2007122429A (en) | Information providing system, device, and method | |
JP4411305B2 (en) | Projector selection system, projector selection method and program thereof | |
JP2006277535A (en) | Business process history collection and display system and method | |
JP2012099104A (en) | Technique for efficient partial crawling of interactive client-server applications in parallel distributed environment | |
CN105893209A (en) | Monitoring method, device and system | |
JP2006190033A (en) | Information processing system and processing method for communication reproduction | |
JP6367721B2 (en) | Test apparatus and method using test scenario | |
JP2005293481A (en) | Information processing system, information processor, control method of information processing system, and program | |
JP4169771B2 (en) | Web server, Web application test method, Web application test program | |
JP2006018735A (en) | Coding standard observance situation monitoring system | |
JP4773774B2 (en) | Network service system, service guidance device, user device, service guidance method, program, and information storage medium | |
JP2021101164A5 (en) | ||
JP5133866B2 (en) | Access status display system and access status display method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060106 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081024 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081224 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090311 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090728 |