JP2003131907A - Ｗｅｂシステムの性能評価システム、方法及びプログラム - Google Patents

Abstract

(57)【要約】 【課題】 Ｗｅｂシステムの性能評価を簡単且つ効率的
に行うことが可能であり、また当該評価を反映してＭＷ
等を自動的に設定することが可能なＷｅｂシステムの性
能評価システムの提供。 【解決手段】 性能測定用コンピュータ１４０と、デー
タベース１２０と、測定部１１０と、制御部１００とを
具備し、Ｗｅｂシステム３０の性能を評価するシステム
１０であり、性能評価すべきＷｅｂシステム３０に接続
される複数のクライアントを仮想的に実現して性能測定
用コンピュータ１４０に対して負荷を課してボトルネッ
クを含むＷｅｂシステム３０の性能に関する情報を測定
し、ボトルネックを含むＷｅｂシステム３０の性能に関
する情報及びボトルネック回避に関する情報を含む評価
結果の出力を行う。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、インターネットに
接続されるＷｅｂシステムの性能評価を行う性能評価シ
ステム及び方法並びにプログラムに関する。

【０００２】

【従来の技術】この種のＷｅｂシステムに求められるセ
キュリティー対策、トラブル対策の一環として、Ｗｅｂ
システムの性能評価とそのボトルネック解析がある。

【０００３】このようなＷｅｂシステムの性能評価とそ
のボトルネック解析に係るテストを行う場合、一般には
システム運営者である性能評価依頼者は、テスト対象サ
ーバ、テスト対象アプリケーション、メソッド、同時接
続クライアント数、テスト時間、テスト回数、テスト間
隔及びリクエスト間隔等のテスト仕様を決めた上で、ス
ループット測定やターンアラウンド測定を行ってボトル
ネックを探し出し、データベース（ＤＢ）のチューニン
グ、ハードウェア（ＨＷ）スペックの向上及びミドルウ
ェア（ＭＷ）の設定変更等のボトルネック回避を導き出
すようにしている。

【０００４】

【発明が解決しようとする課題】しかし、このようなテ
ストを実施する場合、上述したような多数あるＨＷリソ
ース値の中から適当なものを選別することが困難であ
り、採取した値に対する評価やボトルネック解析が困難
であり、また性能評価のための環境を準備するのにも手
間が掛かり、問題であった。

【０００５】本発明の目的は、Ｗｅｂシステムの性能評
価を簡単且つ効率的に行うことが可能であり、また当該
評価を反映してＭＷ等を自動的に設定することが可能な
Ｗｅｂシステムの性能評価システム、方法及びプログラ
ムを提供することにある。

【０００６】

【課題を解決するための手段】上記目的を達成するため
に本発明のＷｅｂシステムの性能評価システムは、性能
評価すべきＷｅｂシステムのハードウェア、ミドルウェ
ア、オペレーティングシステム、アプリケーションのう
ち少なくとも一つに関する設定情報、測定に係る仕様に
関する情報、ボトルネック判断基準に関する情報及びボ
トルネック回避候補に関する情報を保存するデータベー
スと、前記性能評価すべきＷｅｂシステムに接続される
複数のクライアントを仮想的に実現して外部から取り込
んだ性能測定対象に対して負荷を課して前記ボトルネッ
クを含む前記Ｗｅｂシステムの性能に関する情報を測定
する測定手段と、前記性能評価すべきＷｅｂシステムか
ら性能測定に係る情報のネットワークを介した採取、前
記性能測定対象に設定すべき前記データベースからの性
能測定に必要な情報の取出し、該情報の前記性能測定対
象に対する設定、前記測定、前記ボトルネックを含む前
記Ｗｅｂシステムの性能に関する情報及びボトルネック
回避に関する情報を含む評価結果の出力を行う制御手段
とを具備することを特徴とする。

【０００７】また、上記目的を達成するために本発明の
Ｗｅｂシステムの性能評価方法は、ネットワークを介し
て性能評価すべきＷｅｂシステムから性能測定に係る情
報を採取する段階と、前記性能評価すべきＷｅｂシステ
ムの性能測定に係る仕様に関する情報、ボトルネック判
断基準に関する情報及びボトルネック回避候補に関する
情報を指定する段階と、前記情報を性能測定対象に対し
て設定し且つ前記性能評価すべきＷｅｂシステムに接続
される複数のクライアントを仮想的に実現して前記性能
測定対象に対して負荷を課した上で前記ボトルネックを
含む前記Ｗｅｂシステムの性能に関する情報を測定する
段階と、前記ボトルネックを含む前記Ｗｅｂシステムの
性能に関する情報及びボトルネック回避に関する情報を
含む評価結果の出力を行う段階とを具備することを特徴
とする。

【０００８】さらに、上記目的を達成するために本発明
のＷｅｂシステムの性能評価プログラムは、ネットワー
クを介して性能評価すべきＷｅｂシステムに接続される
コンピュータに、前記ネットワークを介して性能評価す
べきＷｅｂシステムから性能測定に係る情報を採取する
手順と、前記性能評価すべきＷｅｂシステムの性能測定
に係る仕様に関する情報、ボトルネック判断基準に関す
る情報及びボトルネック回避候補に関する情報を指定す
る手順と、前記情報を性能測定対象に対して設定し且つ
前記性能評価すべきＷｅｂシステムに接続される複数の
クライアントを仮想的に実現して前記性能測定対象に対
して負荷を課した上で前記ボトルネックを含む前記Ｗｅ
ｂシステムの性能に関する情報を測定する手順と、前記
ボトルネックを含む前記Ｗｅｂシステムの性能に関する
情報及びボトルネック回避に関する情報を含む評価結果
の出力を行う手順とを実行させることを特徴とする。

【０００９】本発明のＷｅｂシステムの性能評価システ
ム、方法及びプログラムによれば、性能測定を行うため
の情報と性能測定の結果を解析するための情報とボトル
ネックが発見された時の回避方法の候補を保存するデー
タベースと性能評価環境を予め準備し、その情報を利用
することで性能評価作業を軽減することができると共に
評価対象のアプリケーションをネットワークを介して登
録可能とすることで、サービスを受ける側は性能評価に
関する専門的な知識や環境を必要としないで、Ｗｅｂシ
ステムの性能評価を得ることができる。

【００１０】

【発明の実施の形態】以下、本発明に係るＷｅｂシステ
ムの性能評価システム、方法及びプログラムの実施形態
を、図面を参照して説明する。

【００１１】（第１実施形態）図１に示すように、本実
施形態の性能評価システム１０は、公衆電話回線やイン
ターネット等を含むネットワーク２０に接続され、また
ネットワーク２０には性能評価が行われるＷｅｂシステ
ム３０が接続されている。

【００１２】本実施形態の性能評価システム１０におい
ては、Ｗｅｂシステム３０の性能評価依頼者（一般には
システム運営者である）２００による依頼の申出、デー
タ送出、設定、選択等の操作により、Ｗｅｂシステム１
０の性能評価に必要なデータが性能評価システム１０に
取り込まれ（符号４１）、性能評価システム１０では測
定が行われ、その結果が符号４２Ａで示すようにＷｅｂ
頁やメールにてＷｅｂシステム１０の性能評価依頼者２
００に提示され、また符号４２Ｂで示すように文書にて
Ｗｅｂシステム１０の性能評価依頼者２００に提示され
る。

【００１３】図２は、第１実施形態に係るＷｅｂシステ
ムの性能評価システムの構成を示す図であり、以下、各
部について詳細に説明する。

【００１４】性能評価情報データベース（ＤＢ）１２０
は、テスト仕様１２１と、ＯＳ毎の性能測定パターン１
２２と、ＭＷの設定パターン１２３と、ＨＷリソース閾
値情報１２４と、ボトルネック回避候補１２５とを有す
る。

【００１５】ここに、テトス仕様１２１は過去に行った
テスト仕様を指し、過去に行ったテスト仕様を保存する
ことで、テスト仕様の再利用が可能となる。バージョン
アップを行ったアプリケーションに対して性能評価を行
う場合には、バージョンアップ前のアプリケーションに
行ったテスト仕様を利用することで、新たにテスト仕様
を作成する必要がなくなる。また保存されているテスト
仕様のパラメータを変更するだけでテスト仕様を作成す
ることも可能になり、テスト仕様作成の手間を省くこと
ができる。

【００１６】テスト仕様に記録される内容としては、図
３に示すように、テスト対象サーバ、テスト対象アプリ
ケーション、メソッド、同時（クライアント）接続数、
テスト時間、テスト回数、テスト間隔、リクエスト間隔
等がある。

【００１７】ＯＳ毎の性能測定パターン１２２は、図４
に示すように、ＨＷリソース値を採取する時に、ＯＳの
違いを意識させないためのものであり、ＨＷリソースと
はＣＰＵ、メモリ、ディスク、ネットワークである。例
えば、メモリリソースの値を取る場合にＷｉｎｄｏｗｓ
ＮＴ（登録商標）で採取すべき値やＳｏｌａｒｉｓで採
取すべき値の情報を持つ。

【００１８】ＭＷの設定パターン１２３は、各ＭＷ毎に
ＭＷをチューニングする際の設定する項目と値の形式の
情報を有する。図５を例に説明すると、方法はコマンド
やパラメータ等のＭＷの設定方法、値は設定可能な値を
示している。

【００１９】制御部１００は、パラメータ設定エージェ
ント１４６に対して、図５の方法と、図５に示す範囲内
の設定値とを指示する。この指示を受けたパラメータ設
定エージェント１４３は、方法を理解してＭＷに対して
設定値を設定する。このように実際に設定した値も保存
しておき、それを再利用することも可能である。

【００２０】ＨＷリソース閾値情報１２４は、あるＨＷ
リソースがボトルネックの要因であると判断するための
閾値情報であり、閾値を越える、下回る、連続的に閾値
を越える、下回るなどが示される。

【００２１】図６は閾値情報の例を表している。この閾
値情報と閾値情報を基に、ボトルネックの要因であると
判断する図７に示すスクリプトの例がセットでＨＷリソ
ース閾値情報となる。図７では図６のＮｏ．を利用して
各Ｎｏ．の条件を満たすかどうかで、ボトルネックを導
き出している。

【００２２】ボトルネック回避候補１２５は、図８に示
すように、発見されたボトルネックを回避するための候
補であり、ボトルネックの要因と関係付けされる。ボト
ルネック回避方法としては、データベース（ＤＢ）のチ
ューニングやＨＷスペックの向上、ＭＷの設定変更など
がある。

【００２３】性能測定用コンピュータ１４０は、ＰＣ
（パーソナルコンピュータ）、ＷＳ（ワークステーショ
ン）等からなる本システムが備える性能測定用のコンピ
ュータであって、アプリケーション用コンピュータ（例
えばＡ機）とＤＢ用コンピュータ（例えばＢ機）の複数
のコンピュータからなり、Ｗｅｂシステム３０の性能評
価のために該Ｗｅｂシステム３０の動作を模擬する。

【００２４】オペレーティングシステム（ＯＳ）１４１
は、性能測定用コンピュータ１４０のオペレーティング
システムであり、Ｗｉｎｄｏｗｓ、Ｓｏｌａｒｉｓ、Ｌ
ｉｎｕｘなどである。

【００２５】アプリケーション１４３は、測定対象のＷ
ｅｂシステム３０のＷｅｂアプリケーションである。

【００２６】データベース（ＤＢ）１４４は、測定対象
のデータベース（ＤＢ）である。

【００２７】ＨＷリソース採取エージェント１４５は、
制御部１００の指示に従い、オペレーティングシステム
（ＯＳ）１４１を解してＨＷリソース値を採取する。Ｈ
Ｗリソース値採取と同時にスループットを測定する。測
定結果は制御部１００に送られる。

【００２８】パラメータ設定エージェント１４６は、制
御部１００の指示に従い、アプリケーションサーバ、Ｗ
ｅｂサーバ、データベース（ＤＢ）等のＭＷの設定を変
更する。

【００２９】測定部１１０は、制御部１００の指示に従
い、性能測定用コンピュータ１４０に対して仮想的に複
数のクライアントを実現して負荷を発せさせて性能テス
トを行う。テストの時にターンアラウンドの測定も行
う。測定結果は、例えば図９に示す同時接続数と空メモ
リとの関係を示す特性や図１０に示す時間対スループッ
ト及びターンアラウンドの関係を示す特性であり、これ
らは制御部１００に送られる。これら制御部１００に送
られた出力結果は、図１２の例では受付部１５０、ネッ
トワーク２０を介してＷｅｂシステム３０に回答され
る。

【００３０】制御部１００は、性能測定の準備から測定
結果の解析までを行うものであり、ＭＷの設定パターン
１２３を参照して、パラメータ設定エージェント１４６
に性能測定用コンピュータ１４０のＭＷの設定を指示す
る。また、ＯＳ毎の性能測定パターン１２２を参照し
て、ＨＷリソース採取エージェント１４５に採取ＨＷリ
ソース値を指示する。さらに、テスト仕様１２１を参照
して測定部に負荷テストを指示する。またＨＷリソース
採取エージェント１４５と測定部１１０からの結果を受
け取り、ＨＷリソース閾値情報１２４を参照してボトル
ネック解析する。そして、発見したボトルネックとボト
ルネック回避候補１２５を利用してボトルネック回避方
法を導き出す。

【００３１】次に図１１を参照して本実施形態の動作を
説明する。

【００３２】本実施形態のシステムの動作は、制御部１
００による、測定部１１０と、性能評価情報データベー
ス（ＤＢ）１２０と、性能測定用コンピュータ１４０と
に対する制御及びその実行により行われる。

【００３３】制御部１００は、ＭＷの設定パターン１２
３を参照してパラメータ設定エージェント１４６にＭＷ
設定の指示を出す（ステップＳ１０１）。

【００３４】制御部１００から指示を受けたパラメータ
設定エージェント１４６はＭＷの設定を実行する（ステ
ップＳ１０２）。

【００３５】制御部１００は、ＯＳ毎の性能測定パター
ン１２２を参照してＨＷリソース採取エージェント１４
５に採取するＨＷリソース値を指示する（ステップＳ１
０３）。

【００３６】制御部１００は、テスト仕様１２１を参照
して測定部１１０にテスト仕様を指示する（ステップＳ
１０４）。

【００３７】制御部１００は、測定部１１０とＨＷリソ
ース採取エージェント１４５に指示を出して、性能測定
を開始する。性能測定の間、ＨＷリソース採取エージェ
ント１４５は制御部１００から指示を受けたＨＷリソー
ス値を採取すると同時にスループットを測定する。測定
部１１０は負荷を発生させると同時にターンアラウンド
を測定する（ステップＳ１０５）。

【００３８】ＨＷリソース採取エージェント１４５が採
取したＨＷリソース値とスループット、測定部１１０が
測定したターンアラウンドを制御部１００が受け取り、
その情報と性能評価情報データベース（ＤＢ）１２０の
ＨＷリソース閾値情報１２４を基にボトルネックを解析
する（ステップＳ１０６）。

【００３９】制御部１００は、解析したボトルネックの
要因と性能評価情報データベース（ＤＢ）１２０のボト
ルネック回避候補１２５からボトルネック回避方法を導
き出す（ステップＳ１０７）。

【００４０】性能評価の結果は制御部１００によって、
グラフィカルなものを含んだ閲覧可能な情報として生成
される（ステップＳ１０８）。この情報はＷｅｂブラウ
ザ等を使って閲覧でき、そのまま印刷も可能となり、出
力結果は、図１２の例では受付部１５０、ネットワーク
２０を介してＷｅｂシステム３０に回答される（ステッ
プＳ１０９）。性能評価の結果に含まれる情報は、ター
ンアラウンド、スループット、ＨＷリソース値を示すグ
ラフとボトルネックとボトルネック回避方法とテスト仕
様とＭＷの設定情報である。ＨＷリソース値のグラフに
は閾値情報も表示してボトルネックを明確に表してい
る。

【００４１】このように本実施形態の性能評価システム
によれば、性能測定を行うための情報と性能測定の結果
を解析するための情報とボトルネックが発見された時の
回避方法の候補を保存するデータベース１２０と性能評
価環境を予め準備し、その情報を利用することで性能評
価作業を軽減することができると共に評価対象のアプリ
ケーションを登録可能とすることで、サービスを受ける
側のＷｅｂシステム３０の性能評価依頼者２００は、性
能評価に関する専門的な知識や環境を必要としないで、
Ｗｅｂシステム３０の性能評価を得ることができる。

【００４２】本実施形態に示されるように、性能評価シ
ステム１０は必ずしもネットワーク２０で接続されてい
る必要はなく、例えば、性能評価システム１０にネット
ワーク２０で接続された他の機器から評価対象のプログ
ラムとデータのみをネットワーク２０を経由して性能評
価システム１０に送信することにより、本実施形態と同
様の性能評価を行うことができる。

【００４３】（第２実施形態）次に、図１及び図２と同
一部分には同一符号を付した図１２を参照して、本発明
の第２実施形態に係る性能評価システムの構成を説明す
る。

【００４４】第２実施形態は、Ｗｅｂシステム３０が通
常装備するＷｅｂブラウザ２１０を活用し、第１実施形
態のシステムに性能評価依頼者２００がＷｅｂアプリケ
ーションの性能評価を依頼するための受付部１５０、ア
プリケーション保存部１６０、評価結果保存部１７０を
性能評価システムが装備し、またＷｅｂシステム３０が
通常装備するＷｅｂブラウザ２１０を付加している。

【００４５】次に図１３を参照して本実施形態の動作を
説明する。

【００４６】本実施形態のシステムの動作は、制御部１
００による、測定部１１０と、性能評価情報データベー
ス（ＤＢ）１２０と、性能測定用コンピュータ１４０
と、受付部１５０と、アプリケーション保存部１６０
と、評価結果保存部１７０とに対する制御及びその実行
並びに性能評価依頼者２００によってＷｅｂブラウザ２
１０を操作することにより行われる。

【００４７】図１３において、性能評価依頼者２００
は、Ｗｅｂブラウザ２１０を用いてネットワークを介し
て受付部１５０にアプリケーションの性能評価の依頼の
申出を行う（ステップＳ２０１）。

【００４８】性能評価の依頼はアプリケーションとプラ
ットホーム（ＯＳ，ＭＷ）とテスト仕様と必要に応じて
ＭＷの設定を指定して行う。また、テスト仕様と必要に
応じてＭＷの設定を指定して行う（ステップＳ２０
２）。

【００４９】依頼するアプリケーションは配布可能形態
で送信する。配布可能な形態とは、例えば、ｊａｒ，ｅ
ａｒ，ｗａｒ形式といったアプリケーションアーカイブ
形式やデータベース（ＤＢ）ダンプ形式である。性能評
価対象のアプリケーションはアプリケーション保存部１
６０に一時保存される。また、プラットフォームの指定
は、特定のプラットフォームを依頼する場合と、複数の
プラットフォームを指定する場合がある（ステップＳ２
０３）。

【００５０】テスト仕様の指定（ステップＳ２０４）
は、性能評価情報データベース（ＤＢ）１２０に保存さ
れるものを再利用する場合、性能評価情報データベース
（ＤＢ）１２０に保存されているものを一部変更して利
用する場合、全く新しいテスト仕様を作成する場合の３
方法がある。再利用、一部変更するテスト仕様は受付部
１５０が性能評価情報データベース（ＤＢ）１２０から
性能評価依頼者２００が過去に利用したテスト仕様の一
覧を検索してＷｅｂブラウザ２１０に表示して提供する
（ステップＳ２０５，Ｓ２０６）。

【００５１】ＭＷの設定はテスト仕様と同様に、性能評
価情報データベース（ＤＢ）１２０に保存されているも
のを再利用する場合、性能評価情報データベース（Ｄ
Ｂ）１２０に保存されているものを一部変更して利用す
る場合、全く新しいＭＷの設定をする場合の３方法があ
る。再利用、一部変更するＭＷの設定は受付部１５０が
性能評価データベース（ＤＢ）１２０から性能評価依頼
者２００が過去に利用したＭＷの設定の一覧を検索して
Ｗｅｂブラウザ２１０に表示して提供する（ステップＳ
２０７）。

【００５２】受付部１５０がアプリ保存部１６０に保存
されている性能評価対象アプリケーションを性能測定用
コンピュータ１４０に配布して、制御部１００が性能評
価を開始する（ステップＳ２０８）。性能評価は、第１
実施形態と同様に行われる。

【００５３】性能評価結果は受付部１５０が評価結果保
存部１７０に保存し、性能評価依頼者２００に対して性
能評価完了を通知する（ステップＳ２０９）。

【００５４】性能評価完了通知を受けた性能評価依頼者
２００は、評価結果保存部１７０に保存された性能評価
結果の出力をネットワーク２０を介して受け、これを参
照することができる（ステップＳ２１０）。

【００５５】次に、本実施形態における性能評価依頼者
２００の操作の一例について図１４及び図１５を参照し
て説明する。

【００５６】先ず、性能評価依頼者２００は、Ｗｅｂブ
ラウザ２１０を使って受付部１５０に接続する（ステッ
プＳ３０１）。

【００５７】また、性能評価依頼者２００はＷｅｂブラ
ウザ２１０を操作して例えば図１５に示すような画面が
表示される（ステップＳ３０２）。

【００５８】図１５に示す画面４００においては、Ｗｅ
ｂアプリケーションをアップロードするためのフォー
ム、Ｗｅｂアプリケーションを配置するプラットフォー
ムを決定するための一覧の中から選択するフォーム、テ
スト仕様を決定するためのフォームがある。このフォー
ムに関しては、過去に評価性能評価依頼者が利用したテ
スト仕様の一覧の中から選択して、それをそのまま再利
用することができ、また変更することもでき、もちろん
新たにテスト仕様を作成することもできる。

【００５９】また画面４００においては、データをアッ
プロードするためのフォーム、データを配置するための
プラットフォームを決定するための一覧の中から選択す
るフォーム、性能評価を依頼するＷｅｂアプリケーショ
ンをアップロードするための選択ボタン、アプリケーシ
ョンを配置するプラットフォームの選択ボタンがある。

【００６０】さらに、表示された画面４００によって、
テスト仕様を決める。テスト仕様の決定に際しては、過
去に利用したテスト仕様をそのまま再利用する場合はそ
れを選択するだけ、それを変更する場合はフォームで変
更する。新たにテスト仕様を作成する場合はフォームに
対して数値を入れるだけで、テスト仕様を作成すること
ができる。データベースが必要な場合は、データをアッ
プロードするために選択する。データを配置するプラッ
トフォームを選択する。

【００６１】必要項目を入力することで選択処理・テス
ト仕様の決定を経て（ステップＳ３０３）、送信する
（ステップＳ３０４）。

【００６２】受付部から性能評価完了の通知があったら
受付部に接続して結果出力を参照する（ステップＳ３０
４）。この場合、結果参照の方法はＷｅｂブラウザで結
果を参照する方法と結果をダウンロードする方法があ
る。

【００６３】次に、本実施形態における性能評価依頼者
２００の操作の他の例について、図１６及び図１７を参
照して説明する。

【００６４】この例は、図１４及び図１５の例に、ＭＷ
の設定及び必要に応じて行われるデータベース検索が加
わっている。

【００６５】図１６において、性能評価依頼者２００
は、Ｗｅｂブラウザ２１０を使って受け付け部１５０に
接続し（ステップＳ４０１）、ブラウザにより例えば図
１７に示すような画面５００が表示される（ステップＳ
４０２）。

【００６６】図１７に示す画面５００においては、Ｗｅ
ｂアプリケーションをアップロードするためのフォー
ム、Ｗｅｂアプリケーションを配置するプラットフォー
ムを決定するための一覧の中から選択するフォーム、テ
スト仕様を決定するためのフォームがある。このフォー
ムに関しては、過去に評価性能評価依頼者が利用したテ
スト仕様の一覧の中から選択して、それをそのまま再利
用することも、また変更するも、さらに新たにテスト仕
様を作成することもできる。

【００６７】また画面５００においては、ＭＷの設定パ
ターンを基にＭＷの設定を行うフォームを動的に作成さ
れるＭＷの設定フォーム、データをアップロードするた
めのフォーム、データを配置するためのプラットフォー
ムを決定するための一覧の中から選択するフォーム、性
能評価を依頼するＷｅｂアプリケーションをアップロー
ドするための選択ボタン、アプリケーションを配置する
プラットフォームの選択ボタン、テスト仕様を決めるボ
タンがある。

【００６８】この場合、過去に利用したテスト仕様をそ
のまま再利用する場合はそれを選択するだけ、それを変
更する場合はフォームで変更する。新たにテスト仕様を
作成する場合はフォームに対して数値を入れるだけで、
テスト仕様を作成することができる。

【００６９】また、画面５００においてはＭＷの設定を
行う（ステップＳ４０５）。この場合、ＭＷの設定フォ
ームを利用してＭＷの設定を行うことができる。

【００７０】さらに、データベースが必要な場合は、デ
ータをアップロードするために選択するステップ（ステ
ップＳ４０５）。データを配置するプラットフォームを
選択する。

【００７１】必要項目を入力することで選択処理・テス
ト仕様の決定・ＭＷの設定・ＤＢ用のテストデータの選
択を経て（ステップＳ４０３〜ステップＳ４０５）、デ
ータを送信する（ステップＳ４０６）。

【００７２】受付部１５０から性能評価完了の通知があ
ったら受付部１５０に接続して結果出力を参照する（ス
テップＳ４０７）。この場合、結果参照の方法はＷｅｂ
ブラウザで結果を参照する方法と結果をダウンロードす
る方法がある。

【００７３】このように本実施形態の性能評価システム
によれば、性能評価依頼者２００は、Ｗｅｂブラウザ２
１０を用いてネットワークを介して受付部１５０にアプ
リケーションの性能評価の依頼の申出、データ提供及び
指定等を行うことにより、性能測定を行うための情報と
性能測定の結果を解析するための情報とボトルネックが
発見された時の回避方法の候補を保存するデータベース
１２０と性能評価環境が準備され、システムは、その情
報を利用することで性能評価作業を軽減することができ
る。これにより、Ｗｅｂシステム３０の性能評価依頼者
２００は、性能評価に関する専門的な知識や環境を必要
としないで、Ｗｅｂシステム３０の性能評価を得ること
ができる。

【００７４】（第３実施形態）次に、図１２を参照し
て、本発明の第３実施形態に係る性能評価システムの構
成を説明する。

【００７５】図１２においては、性能評価依頼者２００
がＷｅｂブラウザ２１０を用いて性能評価を依頼する時
に、採取するＨＷリソース値を選択できる。

【００７６】従って、本実施形態によれば、第２実施形
態のようにＯＳに依存したＨＷリソース値を選択する必
要はなく、ＣＰＵやメモリといったような指定のみを行
うだけで足り、設定選択を行うことができ、操作が簡単
になるという効果がある。

【００７７】（第４実施形態）次に、図１８を参照し
て、本発明の第４実施形態に係る性能評価システムの構
成を説明する。

【００７８】第４実施形態は、第１実施形態又は第２実
施形態のシステムに、データベース（ＤＢ）更新部１８
０を加えた構成である。

【００７９】第４実施形態によれば、データベース（Ｄ
Ｂ）更新部１８０を設けたことで、第１実施形態又は第
２実施形態の作用を得ると共に性能評価情報データベー
ス（ＤＢ）１２０を更新することができる。

【００８０】データベース（ＤＢ）の更新は、任意のタ
イミングでデータベース（ＤＢ）更新部１８０を操作し
て行う場合と、性能テストを開始する時に、テスト仕様
やＭＷの設定パターンが新規作成または変更された時に
行われる場合がある。

【００８１】更新する内容は、新たに作成したテスト仕
様、変更したテスト仕様の登録、ＯＳ、ＭＷのバージョ
ンアップや新規ＯＳ、ＭＷに対応するデータベース（Ｄ
Ｂ）内容の更新などである。

【００８２】（第５実施形態）次に、図１９を参照し
て、本発明の第５実施形態に係る性能評価システムの構
成を説明する。

【００８３】第５実施形態は、第１実施形態又は第２実
施形態のシステムに、プロファイリングツール１９０を
加えた構成である。

【００８４】第５実施形態によれば、プロファイリング
ツール１９０を設けたことで、第１実施形態又は第２実
施形態の作用を得ると共にアプリケーションのメソッド
レベルの性能評価を実現することができる。

【００８５】プロファイリングツール１９０は制御部１
００の指示を受けて性能測定と同時にプロファイリング
を開始する。プロファイリング結果は制御部１００に送
信される。

【００８６】（第６実施形態）次に、本発明の第６実施
形態に係る性能評価システムの構成を説明する。

【００８７】第６実施形態は、第４実施形態と第５実施
形態を組み合わせて、第１実施形態又は第２実施形態
に、データベース（ＤＢ）更新部１８０とプロファイリ
ングツール１９０とを加えた構成である。

【００８８】第６実施形態によれば、データベース（Ｄ
Ｂ）更新部１８０及びプロファイリングツール１９０を
設けたことで、第１実施形態又は第２実施形態の作用を
得ると共に性能評価情報データベース（ＤＢ）１２０を
更新することができ、またアプリケーションのメソッド
レベルの性能評価を実現することができる。

【００８９】（第７実施形態）次に、図２０〜図２７を
参照して、本発明の第７実施形態に係る性能評価システ
ムの構成を説明する。

【００９０】第７実施形態は、第１〜第６実施形態にお
ける性能評価結果データベース（ＤＢ）１２０の情報
を、別のシステムに対する性能評価で利用可能とするも
のであり、図２０に示すように、性能評価を自前のシス
テムに対して行う性能評価者３００に対して、制御部３
２０と、ＨＷリソース採取エージェント３４５と、パラ
メータ設定エージェント３４６と、性能評価情報アクセ
ス部３１０と、測定部３３０とを提供する。

【００９１】性能評価者３００は、制御部３２０を操作
して性能評価を行う、制御部３２０は性能評価情報アク
セス部３１０を介して性能評価情報データベース（Ｄ
Ｂ）１２０の情報をダウンロードする。

【００９２】これにより第１実施形態と同様の性能評価
を自前のシステムに対して行うことができる。

【００９３】ここで、図２１〜図２７を参照して性能評
価者３００の操作の例を説明する。

【００９４】図２１及び図２２は、第７実施形態におけ
る性能評価者の操作手順の第１例及び画面の第１例を示
している。

【００９５】図２１において、性能評価者３００の操作
は制御部３２０のみであり、最初に、制御部３２０を操
作して、図２２に示す画面６００によりシステム内のエ
ージェントの一覧を出して、エージェントの一覧の中か
ら性能評価の対称となるものを選択する（ステップＳ５
０１）。

【００９６】この時エージェントを選択しただけで、評
価対象マシンのＯＳとＭＷの情報が制御部３２０に送ら
れる。

【００９７】性能評価情報アクセス部３１０を介して性
能評価情報データベース（ＤＢ）１２０の情報をダウン
ロードする（ステップＳ５０２）。ダウンロードする時
に、どの情報が必要であるかを選択する必要はなく、ダ
ウンロードという命令をするだけで良い。何をダウンロ
ードするかはエージェントを選択した時に制御部３２０
に知らされている。

【００９８】テスト仕様を決める（ステップＳ５０
３）。テスト仕様は過去に性能評価者３００が利用した
ものの一覧から選択する、もしくは選択したものを一部
変更する、または新たなテスト仕様を作成する、のいず
れかである。変更したテスト仕様と新たに作成したテス
ト仕様は性能評価情報データベース（ＤＢ）１２０に保
存することができる。

【００９９】テストを開始する（ステップＳ５０４）。

【０１００】テストが終了したら結果とボトルネック回
避方法が表示される（ステップＳ５０５）。

【０１０１】次に、図２３及び図２４は、第７実施形態
における性能評価者の操作手順の第２例及び画面の第２
例を示している。

【０１０２】図２３において、性能評価者３００の操作
は制御部３２０のみであり、最初に、制御部３２０を操
作して、図２４に示す画面７００によりシステム内のエ
ージェントの一覧の中から性能評価の対象となるものを
選択する。この時エージェントを選択しただけで、評価
対象マシンのＯＳとＭＷの情報が制御部３２０に送られ
る（ステップＳ６０１）。

【０１０３】次に、性能評価情報アクセス部３１０を介
して性能評価情報データベース（ＤＢ）１２０の情報を
ダウンロードする（ステップＳ６０２）。ダウンロード
する時に、どの情報が必要であるかを選択する必要はな
く、ダウンロードという命令をするだけで良い。何をダ
ウンロードするかはエージェントを選択した時に制御部
３２０に知らされている。

【０１０４】次に、テスト仕様を決める（ステップＳ６
０３）。テスト仕様は過去に性能評価者３００が利用し
たもの一覧から選択する、もしくは選択したものを一部
変更する、または新たなテスト仕様を作成する。のいず
れかである。変更したテスト仕様と新たに作成したテス
ト仕様は性能評価情報データベース（ＤＢ）１２０に保
存して再利用することが可能。

【０１０５】次に、ＭＷの設定を行う（ステップＳ６０
４）。ＭＷの設定パターンを基にＭＷの設定フォームが
表示され、そのフォームを利用してＭＷの設定をする。

【０１０６】そして、テストを開始する（ステップＳ６
０５）。

【０１０７】テストが終了したら結果とボトルネック回
避方法が表示される（ステップＳ６０６）。

【０１０８】次に、図２５及び図２７は、第７実施形態
における性能評価者の操作手順の第３例及び画面の第３
例を示している。

【０１０９】図２５において、性能評価者３００の操作
は制御部３２０のみであり、最初に、制御部３２０を操
作して、図２４に示す画面７００によりシステム内のエ
ージェントの一覧の中から性能評価の対象となるものを
選択する。この時エージェントを選択しただけで、評価
対象マシンのＯＳとＨＷリソース値の情報が制御部３２
０に送られる（ステップＳ７０１）。

【０１１０】次に、性能評価情報アクセス部３１０を介
して性能評価情報データベース（ＤＢ）１２０の情報を
ダウンロードする（ステップＳ７０２）。ダウンロード
する時に、どの情報が必要であるかを選択する必要はな
く、ダウンロードという命令をするだけで良い。何をダ
ウンロードするかはエージェントを選択した時に制御部
３２０に知らされている。

【０１１１】次に、テスト仕様を決める（ステップＳ７
０３）。テスト仕様は過去に性能評価者３００が利用し
たもの一覧から選択する、もしくは選択したものを一部
変更する、または新たなテスト仕様を作成する。のいず
れかである。変更したテスト仕様と新たに作成したテス
ト仕様は性能評価情報データベース（ＤＢ）１２０に保
存して再利用することが可能である。

【０１１２】次に、ＨＷリソース値の設定を行う（ステ
ップＳ７０４）。ＨＷリソース値の設定パターンを基に
ＨＷリソース値の設定フォームが表示され、そのフォー
ムを利用してＨＷリソース値の設定をする。

【０１１３】テストを開始する（ステップＳ７０５）。

【０１１４】テストが終了したら結果とボトルネック回
避方法が表示される（ステップＳ７０６）。

【０１１５】次に、図２６及び図２７は、第７実施形態
における性能評価者の操作手順の第４例及び画面の第３
例を示している。

【０１１６】図２６において、性能評価者３００の操作
は制御部３２０のみであり、最初に、制御部３２０を操
作して、図２７に示す画面７００によりシステム内のエ
ージェントの一覧の中から性能評価の対象となるものを
選択する。この時エージェントを選択しただけで、評価
対象マシンのＯＳ、ＭＷの設定、ＨＷリソース値の情報
が制御部３２０に送られる（ステップＳ８０１）。

【０１１７】性能評価情報アクセス部３１０を介して性
能評価情報データベース（ＤＢ）１２０の情報をダウン
ロードする（ステップＳ８０２）。ダウンロードする時
に、どの情報が必要であるかを選択する必要はなく、ダ
ウンロードという命令をするだけで良い。何をダウンロ
ードするかはエージェントを選択した時に制御部３２０
に知らされている。

【０１１８】次に、テスト仕様を決める（ステップＳ８
０３）。テスト仕様は過去に性能評価者３００が利用し
たもの一覧から選択する、もしくは選択したものを一部
変更する、または新たなテスト仕様を作成する。のいず
れかである。変更したテスト仕様と新たに作成したテス
ト仕様は性能評価情報データベース（ＤＢ）１２０に保
存して再利用することが可能である。

【０１１９】次に、ＭＷの設定を行う（ステップＳ８０
４）。ＭＷの設定パターンを基にＭＷの設定フォームが
表示され、そのフォームを利用してＭＷの設定をする。

【０１２０】次に、ＨＷリソース値の設定を行う（ステ
ップＳ８０５）。ＨＷリソース値の設定パターンを基に
ＨＷリソース値の設定フォームが表示され、そのフォー
ムを利用してＨＷリソース値の設定をする。

【０１２１】そして、テストを開始する（ステップＳ８
０６）。

【０１２２】テストが終了したら結果とボトルネック回
避方法が表示される（ステップＳ８０７）。

【０１２３】このように本実施形態の性能評価システム
によれば、第１〜第６実施形態における性能評価結果デ
ータベース（ＤＢ）１２０の情報を、自前のシステムで
ある性能測定用コンピュータ３４０に対して適用するこ
とで、性能評価者３００は、性能評価に関する専門的な
知識や環境を必要としないで、自前のシステムの性能評
価を得ることができる。

【０１２４】また本発明に係るシステム構成としては、
新規に構成する場合、一又は複数のコンピュータ又はこ
れらコンピュータの一部のハードウェア又はソフトウェ
ア機能により構成することができる。

【０１２５】さらに本発明のシステムの動作を示すフロ
ーチャートを前記コンピュータにより実行する方法又は
プログラムとして構成することができる。

【０１２６】

【発明の効果】以上述べたように本発明によれば、性能
測定を行うための情報と性能測定の結果を解析するため
の情報とボトルネックが発見された時の回避方法の候補
を保存するデータベースと性能評価環境を予め準備し、
その情報を利用することで性能評価作業を軽減すること
ができると共に評価対象のアプリケーションをネットワ
ークを介して登録可能とすることで、サービスを受ける
側は性能評価に関する専門的な知識や環境を必要としな
いで、Ｗｅｂシステムの性能評価を得ることが可能なＷ
ｅｂシステムの性能評価システム、方法及びプログラム
を提供できるものである。

【図面の簡単な説明】

【図１】本発明の第１実施形態に係るＷｅｂシステムの
性能評価システムを示す図。

【図２】第１実施形態に係るＷｅｂシステムの性能評価
システムの構成を示す図。

【図３】同実施形態におけるテスト仕様の一例を示す
図。

【図４】同実施形態におけるオペレーティングシステム
毎の性能測定パターンの一例を示す図。

【図５】同実施形態におけるミドルウェアの設定パター
ンの一例を示す図。

【図６】同実施形態における閾値情報の一例を示す図。

【図７】同実施形態におけるボトルネック要因判断スク
リプトの一例を示す図。

【図８】同実施形態におけるボトルネック回避候補の一
例を示す図。

【図９】同実施形態における性能評価の結果の一例を示
す図。

【図１０】同実施形態における性能評価の結果の他例を
示す図。

【図１１】同実施形態の動作を示すフローチャート図。

【図１２】本発明の第２，第３実施形態に係るＷｅｂシ
ステムの性能評価システムの構成を示す図。

【図１３】第２実施形態の動作を示すフローチャート
図。

【図１４】第２実施形態における性能評価依頼者の操作
手順の一例を示すフローチャート図。

【図１５】第２実施形態における画面の一例を示す図。

【図１６】第２実施形態における性能評価依頼者の操作
手順の他例を示すフローチャート図。

【図１７】第２実施形態における画面の他例を示す図。

【図１８】本発明の第４，第６実施形態に係るＷｅｂシ
ステムの性能評価システムの構成を示す図。

【図１９】本発明の第５，第６実施形態に係るＷｅｂシ
ステムの性能評価システムの構成を示す図。

【図２０】本発明の第７実施形態に係るＷｅｂシステム
の性能評価システムの構成を示す図。

【図２１】第７実施形態における性能評価者の操作手順
の第１例を示すフローチャート図。

【図２２】第７実施形態における画面の第１例を示す
図。

【図２３】第７実施形態における性能評価者の操作手順
の第２例を示すフローチャート図。

【図２４】第７実施形態における画面の第２例を示す
図。

【図２５】第７実施形態における性能評価者の操作手順
の第３例を示すフローチャート図。

【図２６】第７実施形態における性能評価者の操作手順
の第４例を示すフローチャート図。

【図２７】第７実施形態における画面の第３例を示す
図。

【符号の説明】

１０…性能評価システム ２０…ネットワーク ３０…Ｗｅｂシステム ４１…データ採取 ４２Ａ，４２Ｂ…結果出力 １００…制御部 １１０…測定部 １２０…性能評価情報データベース １４０…性能測定用コンピュータ １５０…受付部 １６０…アプリケーション保存部 １７０…評価結果保存部 １８０…データベース更新部 １９０…プロファイリングツール ２００…性能評価依頼者 ２１０…Ｗｅｂブラウザ ３００…性能評価者 ３１０…性能評価情報アクセス部 ３２０…制御部 ３４０…性能測定用コンピュータ

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5B042 GA12 HH11 HH19 HH20 MC36 5B076 EC04 EC06 EC10 5B085 AC08 BE05 5B089 GA11 GA21 JA35 JB15 JB19 KA12 MC16

Claims (9)

【特許請求の範囲】
1. 【請求項１】 性能評価すべきＷｅｂシステムのハード
   ウェア、ミドルウェア、オペレーティングシステム、ア
   プリケーションのうち少なくとも一つに関する設定情
   報、測定に係る仕様に関する情報、ボトルネック判断基
   準に関する情報及びボトルネック回避候補に関する情報
   を保存するデータベースと、 前記性能評価すべきＷｅｂシステムに接続される複数の
   クライアントを仮想的に実現して外部から取り込んだ性
   能測定対象に対して負荷を課して前記ボトルネックを含
   む前記Ｗｅｂシステムの性能に関する情報を測定する測
   定手段と、 前記性能評価すべきＷｅｂシステムから性能測定に係る
   情報のネットワークを介した採取、前記性能測定対象に
   設定すべき前記データベースからの性能測定に必要な情
   報の取出し、該情報の前記性能測定対象に対する設定、
   前記測定、前記ボトルネックを含む前記Ｗｅｂシステム
   の性能に関する情報及びボトルネック回避に関する情報
   を含む評価結果の出力を行う制御手段とを具備すること
   を特徴とするＷｅｂシステムの性能評価システム。
2. 【請求項２】 前記性能評価すべきＷｅｂシステムの性
   能評価依頼者に性能評価サービスの依頼及び情報採取を
   促すと共に性能評価の結果の前記性能評価依頼者に対す
   る出力を行う受付手段を更に具備することを特徴とする
   請求項１記載のＷｅｂシステムの性能評価システム。
3. 【請求項３】 前記受付手段は、前記採取した情報を保
   存すると共に該保存した情報の指定を前記性能評価依頼
   者に促す手段を具備する請求項２記載のＷｅｂシステム
   の性能評価システム。
4. 【請求項４】 前記データベースに保存された前記測定
   に係る仕様、前記性能評価すべきＷｅｂシステムのハー
   ドウェア、ミドルウェア、オペレーティングシステム及
   びアプリケーションのうち少なくとも一つの情報を更新
   するデータベース更新手段を更に具備することを特徴と
   する請求項１乃至３のいずれか一項記載のＷｅｂシステ
   ムの性能評価システム。
5. 【請求項５】 前記性能評価すべきＷｅｂシステムのア
   プリケーションのメソッドレベルの性能評価を行う手段
   を更に具備することを特徴とする請求項１乃至３のいず
   れか一項記載のＷｅｂシステムの性能評価システム。
6. 【請求項６】 前記データベースに保存された前記測定
   に係る仕様、前記性能評価すべきＷｅｂシステムのハー
   ドウェア、ミドルウェア、オペレーティングシステム及
   びアプリケーションのうち少なくとも一つの情報を更新
   するデータベース更新手段と、 前記性能評価すべきＷｅｂシステムのアプリケーション
   のメソッドレベルの性能評価を行う手段とを更に具備す
   ることを特徴とする請求項１乃至３のいずれか一項記載
   のＷｅｂシステムの性能評価システム。
7. 【請求項７】 前記データベースに保存された情報を用
   いて前記性能測定対象の性能評価を行う手段を具備する
   ことを特徴とする請求項１記載のＷｅｂシステムの性能
   評価システム。
8. 【請求項８】 ネットワークを介して性能評価すべきＷ
   ｅｂシステムから性能測定に係る情報を採取する段階
   と、 前記性能評価すべきＷｅｂシステムの性能測定に係る仕
   様に関する情報、ボトルネック判断基準に関する情報及
   びボトルネック回避候補に関する情報を指定する段階
   と、 前記情報を性能測定対象に対して設定し且つ前記性能評
   価すべきＷｅｂシステムに接続される複数のクライアン
   トを仮想的に実現して前記性能測定対象に対して負荷を
   課した上で前記ボトルネックを含む前記Ｗｅｂシステム
   の性能に関する情報を測定する段階と、 前記ボトルネックを含む前記Ｗｅｂシステムの性能に関
   する情報及びボトルネック回避に関する情報を含む評価
   結果の出力を行う段階とを具備することを特徴とするＷ
   ｅｂシステムの性能評価方法。
9. 【請求項９】 ネットワークを介して性能評価すべきＷ
   ｅｂシステムに接続されるコンピュータに、 前記ネットワークを介して性能評価すべきＷｅｂシステ
   ムから性能測定に係る情報を採取する手順と、 前記性能評価すべきＷｅｂシステムの性能測定に係る仕
   様に関する情報、ボトルネック判断基準に関する情報及
   びボトルネック回避候補に関する情報を指定する手順
   と、 前記情報を性能測定対象に対して設定し且つ前記性能評
   価すべきＷｅｂシステムに接続される複数のクライアン
   トを仮想的に実現して前記性能測定対象に対して負荷を
   課した上で前記ボトルネックを含む前記Ｗｅｂシステム
   の性能に関する情報を測定する手順と、 前記ボトルネックを含む前記Ｗｅｂシステムの性能に関
   する情報及びボトルネック回避に関する情報を含む評価
   結果の出力を行う手順とを実行させることを特徴とする
   Ｗｅｂシステムの性能評価プログラム。