JP3774729B2 - 応答時間測定装置及び方法 - Google Patents
応答時間測定装置及び方法 Download PDFInfo
- Publication number
- JP3774729B2 JP3774729B2 JP50844997A JP50844997A JP3774729B2 JP 3774729 B2 JP3774729 B2 JP 3774729B2 JP 50844997 A JP50844997 A JP 50844997A JP 50844997 A JP50844997 A JP 50844997A JP 3774729 B2 JP3774729 B2 JP 3774729B2
- Authority
- JP
- Japan
- Prior art keywords
- service
- service request
- packets
- packet
- transaction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/10—Flow control; Congestion control
- H04L47/28—Flow control; Congestion control in relation to timing considerations
- H04L47/283—Flow control; Congestion control in relation to timing considerations in response to processing delays, e.g. caused by jitter or round trip time [RTT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
- G06F11/3419—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment by assessing time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3452—Performance evaluation by statistical analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5041—Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the time relationship between creation and deployment of a service
- H04L41/5054—Automatic deployment of services triggered by the service manager, e.g. service implementation by automatic configuration of network components
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/50—Testing arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/349—Performance evaluation by tracing or monitoring for interfaces, buses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/87—Monitoring of transactions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/06—Generation of reports
- H04L43/067—Generation of reports using time frame reporting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
- H04L43/0864—Round trip delays
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/12—Network monitoring probes
Description
発明の分野
本発明はコンピュータ応用分野における応答時間の測定に関する。特に多層コンピュータ・ネットワークにおいて応答時間を測定する非侵入的装置の使用に関する。
発明の背景
多層コンピュータ・ネットワークは複数のユーザーにさまざまな情報やコンピュータ資源を提供するのに広く用いられている。多層コンピュータ・ネットワークでは、クライアント・コンピュータ（例えば、ユーザー）はサーバー・コンピュータと対話して複数のトランザクションに分けられるアプリケーションを実行する。アプリケーションとは意味のあるトランザクションのグループで、トランザクションとはユーザーによって認識される意味のある仕事の単位である。典型的なトランザクションとはひとまとまりのサービス要求で、典型的なサービス要求はひとまとまりのサービス・パケットになっている。サービス・パケットは簡単にいえばコンピュータ間でやりとりされるひとつの情報あるいはメッセージである。トランザクションの実行過程で、クライアント・コンピュータは複数のサーバー・コンピュータにデータを含むサービス・パケットの転送を要求したり、そうしたサービス・パケットをサーバー・コンピュータに与えて要求を処理させることもできる。反対にサーバー・コンピュータはクライアント・コンピュータからのデータ転送要求に関連したサービスを他のサーバー・コンピュータに要求することができる。
ネットワーク性能の監視は、ユーザー遅延させる有意のトランザクションの期間およびユーザーの生産性を確認するのに重要である。一般的に、ネットワーク性能の監視はトランザクションまたはアプリケーションに対する応答時間を測定するために行う。応答時間とはサーバーおよびネットワークがトランザクションまたはアプリケーションを実行するのに必要な時間である。この応答時間について統計分析を行うことができ、サーバーおよびネットワーク性能の分析を容易に行える。
ネットワーク性能を監視し応答時間を得るには通常二つの方法がある。侵入的／侵略的方法はクライアント・コンピュータに関するソフトウエア・コードを変更しマーカー・コマンドを取り入れる。マーカー・コマンドは受話装置に最初のサービス要求パケットを知らせてタイミング測定を始め、最終結果または確認パケットを受け取り測定を終了する。対照的に非侵入的・非侵略的監視方法は通常ソフトウエア・コードを変更しない。むしろクライアント・コンピュータとサーバー・コンピュータ間の通信回線にプローブを挿入して個々のパケット間の通信、クライアント・コンピュータとサーバー・コンピュータ間の通信の遅延を監視し、およその応答時間を予測する。
侵入的／侵略的および非侵入的／非侵略的方法にはそれぞれいくつかの欠点がある。侵入的／侵略的方法の場合、トランザクション応答時間が与えられるにもかかわらず、ソフトウエア・コード内の埋め込みマーカー・コマンドによって書かれる多層アプリケーションはほとんどない。これらのアプリケーションが埋め込みマーカー・コマンドを持つべきものであっても、アプリケーション埋め込み応答時間の統計量が中央位置に集中するため、特にモバイル・ユーザー・コンピュータにとっては技術的な問題が起こりうる。非侵入的／非侵略的方法の場合には、個々のパケットについてコンピュータ間の情報伝達速度を決定できるのみである。こうした方法は通常トランザクションまたはアプリケーションへの応答時間を決定することはできない。侵入的／侵略的方法も非侵入的／非侵略的方法も特に多層ネットワークにおいては個々のパケットを対応するトランザクションに一致させトランザクションまたは関連アプリケーションへの応答時間を計算することができない。
上述したように、アプリケーションを実行するサーバー・コンピュータはそれぞれさまざまな異なったユーザーのトランザクションに関係する一連の個々のサービス要求を処理することができる。既存の監視方法は各種のサービス要求にあるサービス・パケットを特定のトランザクションに一致させることができない。
特に多層コンピュータ・ネットワークにおけるトランザクションまたはアプリケーションの応答時間を測定する装置およびに方法へのニーズがある。また非侵入的／非侵略的方法を用いてトランザクションまたはアプリケーションの応答時間を測定する装置および方法に関連したニーズがある。
さらに個々のサービス・パケットを、対応するトランザクションまたはアプリケーションに一致させることができる、トランザクションまたはアプリケーションの応答時間測定装置および方法へのニーズがある。
発明の要約
本発明はその態様の一つにおいて、ソース・ノードと宛先ノード間で交信されるサービス・パケット数に対応するトランザクションを識別する方法を提供することによって、上記、およびその他のニーズに対処する。この方法は以下の工程を含む。(i)複数のサービス・パケットおよびこれらのサービス・パケットをソース・ノードと宛先ノード間の通信回線上で交信する順序に関する情報を含む通信データ・セットを提供すること、(ii)この通信データ・セットとパターン特徴化データ・セットとを比較し複数のサービス・パケットの少なくとも一部がトランザクションの一部かどうかを決定すること。パターン特徴化データ・セットにはトランザクションを構成するサービス・パケットの所定順序に関連する情報が含まれる。この方法は非侵入的／非侵略的測定方法を受容し多層コンピュータ・ネットワークに対してもほぼリアルタイムの応答時間を提供できる。
本発明は通信回線上で交信されるサービス・パケットは動作環境にて繰り返し発生するサービス要求のパターンを成すという認識に一部基づいている。こうしたサービス要求パターンはトランザクションの各タイプに対応している。信号処理技術を使ってサービス要求パターンを決定できることがすでにわかっている。一度認識されると、サービス要求パターンの開始、終了時間を決定することができトランザクションに対する応答時間が得られる。
プローブを使って通信回線からパケットをリアルタイムで読み取ることができ、受信時間（例えば、プローブによってパケットを読み取った時間）といしょにパケットを通信データ・セットに記録できる。
パケットはノード・アドレスおよび／またはポート番号に基づいてフィルタリングできる。好適な実施例では、サービス・パケットは複数のスレッドに対応し、パケットはスレッドで分類される。
サービス要求パケットはその内容と宛先によって識別できる。次にサービス結果パケットを対応するサービス要求パケットに関連付けることができる。そして次にサービス要求に対する開始、終了時間を決定できる。
トランザクションに対応するサービス要求を識別した後、そのサービス要求に対するさまざまな開始、終了時間を用いてそのトランザクションに対する応答時間を決定できる。
本発明の別の態様では、ソース・ノードと宛先ノード間で交信される複数のサービス・パケットから成るトランザクションの識別に非侵入的システムを提供する。このシステムは以下の装置で構成される。
(i)通信回線上で交信される複数のサービス・パケットを記録する装置、および(ii)この記録装置と対話し、複数パケットの少なくとも一部を含むトランザクションを識別する装置。
さらに別の態様で、本発明はソース・ノードと宛先ノード間で交信される複数のサービス・パケットから成るトランザクションを識別し、以下の工程を含む方法を提供する。(i)(a)複数のサービス要求に対応した複数のサービス・パケットおよび(b)各サービス要求の開始、終了時間を含む通信データ・セットを提供すること、および(ii)最初のサービス要求の終了と次のサービス要求の開始の間の時間間隔を所定の値と比較しトランザクションを含むサービス要求の順番を決定すること。
この比較工程は時間間隔が変化する場合何度か繰り返して行うことができ、最適な所定値をサービス要求間の時間間隔として選択し、サービス要求を実質的に最適な順序に並べ実行可能なトランザクションとして提供することができる。次にこの結果得られたトランザクション・サービス要求パターン数を用いて所定時間間隔として最適な値を決定する。このトランザクション・サービス要求パターンの数は時間間隔の幅に対して一定に保たれる。所定時間間隔としての最適値はこの時間間隔幅の中間になる。例をあげると、所定値を用いてサービス要求の順番を決定した後、この方法によればさらに第二の所定値を選択でき、サービス要求間の時間間隔をこの第二の所定値と比較し、二番目のトランザクションに対応する第二のサービス要求順序を決定することができ、またこの第二のサービス要求順序と各サービス要求の発生数とを第二のデータ・セットに記録することができる。次にさらに(i)最初のサービス要求順序と所定値数および(ii)第二のサービス要求順序と第二の所定値数との関係を基に第三の所定値（最適所定値）を選択することができる。この方法はまた従来どうりにサービス要求間の時間間隔をこの時間間隔の第三の所定値として、三番目のトランザクションに対応する第三のサービス要求順序を決定する。この三番目のトランザクションに対するサービス要求順序は最適順序と考えられる。次に第三の順序は通信データ・セットと比較され、複数のサービス要求の少なくとも一部が複数のトランザクションに対応しているかどうかを確認する。
この方法はまた前述したようにパターン特徴化データ・セットを作成する。パターン特徴化データ・セットには上記の比較確認工程でサービス要求と比較される複数のサービス要求順序が含まれる。また別の比較工程によって、時間順に配列されたサービス要求がパターン特徴化データ・セットに含まれるかどうかを確認する。
最後の態様において、本発明はソースと宛先ノード間のトランザクションレベルの利用率を決定する非侵入的システムを提供する。このシステムは以下の装置を含む。(i)ソースと宛先ノード間の通信回線上で交信される複数のサービス・パケットを記録する装置、(ii)この記録装置と対話しトランザクションの数を決定する装置。サービス・パケットはトランザクションの数に関係し、記録装置は通信データ・セットを提供する。
一つの実施例において、このトランザクション数を決定する装置は最初のサービス要求の終了時間と第二のサービス要求の開始時間との間の時間間隔を所定の値に比較し、ともにトランザクションを構成する通信データ・セット中の一連のサービス要求を識別する。
【図面の簡単な説明】
図１はコンピュータ・ネットワークに関する本発明の一つの実施例を示す。
図２は多層コンピュータ・ネットワークに関する本発明の別の実施例を示す。
図３はサービス・パケットを示す。
図４はサービス要求におけるサービス・パケットの例を示す。
図５はサービス要求数を含むトランザクションの応答時間を示す。
図６Ａ−Ｅは本発明に従った応答時間を決定する方法の第一の実施例を示す。
図７はパターン発見工程と適合工程でのサービス要求の対話を示す。
図８は発見したトランザクション数に対する所定時間値を表すグラフ。
図９Ａ−Ｂは本発明に従った応答時間を決定する方法の第二の実施例を示す。
図１０−１１はパターン発見工程と適合工程でのサービス要求の対話を示す。
図１２はCPU利用率とトランザクション応答時間の関係を表すグラフ。
発明の詳細な説明
本発明は非侵入的／非侵略的方法によるトランザクションまたはアプリケーションに対する応答時間を測定する方法ならびに装置に関する。前述したように、非侵入的／非侵略的方法はソフトウエア・コードを変更することなく応答時間を測定できる。さらに、こ方法はクライアント・コンピュータと様々なサーバー・コンピュータとの間のネットワーク通信を監視できる。既存のネットワーク性能監視方法とは異なり、本発明は選択されたサービス・パケットとそれらパケットの開始、終了時間情報を対応するトランザクションまたはアプリケーションに一致させる。比較工程の後、この方法でそのトランザクションまたはアプリケーションに対する応答時間が得られる。本発明はネットワーク性能の監視に役立つだけでなくサービス・レベルの契約遵守の監視、課金にも有用である。
装置の構成
本発明による装置の構成を図１、２に示す。図１は最も簡単な単一ネットワーク・セグメントを示している。このネットワークでは、記録装置またはプローブ２０はクライアント・コンピュータ２８とサーバー・コンピュータ３２との間の通信回線またはバスライン２４に接続されている。記録装置２０は通信回線２４上を転送されるサービス・パケットを選択し、このサービル・パケットと、記録装置２０がこのパケットを受信した時間とを監視コンピュータ３６へ送り分析を行なわせる。図２は複数のネットワーク・セグメントを持つより複雑な多層構造を示している。記録装置２０a,bはモデムなどの通信装置２２を介してネットワーク・セグメント２６a,b間の通信回線２４a,bに接続されている。このネットワーク・セグメントはクライアント・コンピュータ２８とサーバー・コンピュータ３２a,b,cおよび通信回線２４a,bを含んでいる。この２つの図面からわかるように、本発明は、クライアント・コンピュータおよびサーバー・コンピュータの応答時間を侵入的／侵略的監視方法のようには測定せず、クライアント・コンピュータとサーバー・コンピュータ間の通信回線上のネットワーク通信を監視することによって応答時間を測定する。
多層コンピュータ・ネットワークにおける記録装置２０の台数と位置はアプリケーションによって異なる。典型的には、記録装置２０は通信回線２４上ののどこに置いてもよい、すなわちクライアント・コンピュータまたはサーバー・コンピュータのドライブが通信回線２４にアクセスする地点間ならどこでもよい。このようにして、通信回線２４上で交信するサービス・パケットはすべて記録装置２０に読み込まれ、多数のクライアント・コンピュータおよび／またはサーバー・コンピュータを巻き込むトランザクションまたはアプリケーションに対する応答時間を正確に決定することができる。
多層コンピュータ・ネットワークのコンピュータ間で交信される代表的なサービス・パケットのテキストを図３に示す。図３からわかるように、サービス・パケット３８は通例、そのサービス・パケットのソースと宛先を表すノード・アドレス４０、ポート番号４４および追加情報４８を含む。アプリケーションによっては、サービス・パケットにデータベース要求、ファイルシステム要求、オブジェクト・ブローカー要求などの追加情報を持たせることができる。
一般的にサービス・パケットには２種類ある、すなわちサービス要求パケットとサービス結果パケットである。サービス要求パケットはサーバー・コンピュータに特定の動作を実行するように要求する。サービス結果パケットはサービス要求パケットへの応答によって生じるサービス・パケットである。サービス結果パケットにはサービス要求パケットによって要求された情報も含めてさまざまな情報を持たせることができる。
ひとつのサービス要求で２種類のサービス・パケットの使用を例証するために、多数のサービス・パケットを含むサービス要求の例を図４に示す。典型的なサービス要求５２は、例えばクライアント・コンピュータがサーバー・コンピュータへ出したサービス要求パケット５６（複数サービス・パケットになり得る）で始まる。次にサーバー・コンピュータはサービス要求確認パケット６０をクライアント・コンピュータへ送り、要求の処理を開始する。サーバー・コンピュータはサービス要求の処理を完了すると、サービス結果通知パケット６４をクライアント・コンピュータへ送る。サーバー・コンピュータはクライアント・コンピュータに対してサービス要求データをいつでも送れる状態にある。次にクライアント・コンピュータがサービス結果転送パケット６８を送り、データの転送を要求する。サーバー・コンピュータはサービス結果パケット７２の転送を開始する。サービス結果完了パケット７６はクライアント・コンピュータに、最終的なサービス結果パケットが転送されたことを知らせ、サービス結果確認パケット８０はサーバー・コンピュータに、データが受信されたことを知らせる。サービス要求を完了させる応答時間は、サービス要求パケット５６の受信時間とサービス完了確認パケット８０の受信時間との間で異なる。
さらにトランザクションに対する応答時間を例証するために、多数のサービス要求を含むトランザクションの例を図２および図５を参照しながら説明する。クライアント・コンピュータ２８で実行されたタイプＡのトランザクションはサーバー・コンピュータ３２ａにサービス要求１を、サーバー・コンピュータ３２ｂにサービス要求２を出す。サービス要求１を実行するために、サーバー・コンピュータ３２ｂはサーバー・コンピュータ３２ｃにサービス要求３を出す。サービス要求１が完了すると、トランザクションＡはサーバー・コンピュータ３２ｄにサービス要求４と５を出し、サーバー・コンピュータ３２ｃにサービス・タイプ６（例えば、サービス要求６）を出す。サーバー・コンピュータへのサービス要求のパターンによって、そのトランザクションがタイプＡのトランザクションであることがわかる。タイプＡのトランザクションに対する応答時間はサービス要求１と２の開始時間からサービス要求５の終了時間までで測定する。したがって、トランザクション応答時間は、簡単にいえば個々のサービス要求応答時間の集まりである。
サービス・パケットのフィルタリング
図６Ａ-Ｅは本発明に基づくネットワーク性能監視方法の第１の実施例を示すフローチャート。この方法は、記録装置から選択されたサービス・パケットを集め、ろ波して通信データ・セットを作る。ネットワーク上の通信はろ波され、関心のあるアプリケーションに関するサービス・パケットだけが残される。のちにわかるように、同一のクライアント・コンピュータ上にある複数のアプリケーションは特定のサーバー・コンピュータから同じタイプのサービスを要求することが可能である。また、サービス・プロバイダーはひとつのサーバー・コンピュータから同じタイプの別のサーバー・コンピュータへ移動することもできる。
第１の実施例は、任意のトランザクションの複数パケットは一つスレッドにのみ置かれることを前提にしている。しかし、任意の１スレッドには一つ以上のトランザクションからの複数パケットを持たせることができる。以下に第２の実施例を示し、任意のトランザクションが１つ以上のスレッドで起こるアプリケーションについて説明する。
ここで用いているように、スレッドとはサービス要求者ノードとサービス提供者ノード間の特定な識別可能なコネクションまたはセッションである。スレッドは、好ましくはある特定の時点でただ１つのサービス要求だけを持つことができるものとして認識される。後でわかるように、任意のノード・アドレスに対して複数のセッションがあるので、アプリケーションによってはノードアドレスは各スレッドの適切な識別子ではない。こした場合、パケットを割り当てるスレッドをさらに識別するために、コネクションまたはセッション識別情報が用いられる。スレッドはまたユーザー・スレッド、すなわち特定のクライアント・コンピュータに対して一意的に識別されるスレッド、あるいは共用スレッド、すなわち複数のユーザー要求によって共用されるスレッドにもなる。
図６Ａを参照すると、複数の記録装置２０は最初に通信回線２４から複数のサービス・パケットをコマンド・ボックス１００に読み込む。ノードアドレスまたは他のスレッド識別情報にもとづいて、記録装置２０はそのサービス・パケットがクライアント・コンピュータおよび／またはサーバー・コンピュータに関係するものなのかを確かめる。その場合、そのサービス・パケットは記録され、記録装置２０がサービス・パケットを読み込んだ時間（例えば、受信時間）が記録される。そうしなければそのサービス・パケットは記録されない。もし、サービス・パケットの特定サブセットに関心を持った場合、記録装置２０はノードアドレスやその他のスレッド識別情報だけでなくポート番号によってもフィルタリングを行う。ある特定の時点で１ポートに１サービス要求だけしかないようにしたアプリケーションの場合、フィルタリングにはポート番号が有効になる。
コマンドボックス１０４では、サービス・パケットは適当なスレッドデータセットに割り振られることによって通信データセットに記録される。通信データセットにはそのスレッドでまとめられるすべての記録装置が読み込んだサービス・パケットが含まれる。各スレッドごとにスレッドデータセットがある。たいていのアプリケーションでは、通信データセットにある複数のスレッドデータセットはどの時点でもアクテイブである。
次にサービス・パケットはデシジョン・ボックス１０８で吟味され、サービス要求パケットであるかどうか確かめられる。これはサービス要求パケットの一意的キーワードおよび／または記号をサービス・パケットのテキスト中に探すことによって行われる、言い換えれば、こうしたキーワードおよび／または記号はサービス結果パケットには用いられない。この検索で用いられるキーワードおよび／または記号は任意のトランザクションおよび／またはアプリケーションに固有なものとすることができる。
サービス・パケットが最初のサービス要求パケットである場合、これに続くサービス・パケットはコマンド・ボックス１１２に読み込まれ、デシジョン・ボックス１１６にてサービス完了パケットを識別する。サービス完了パケットはサービス要求における最終的なサービス結果パケットである。上記のように、特定のある時点でスレッド上に連続する特定のサービス要求に対するサービス・パケットは一組しかない。この一組のサービス・パケットはサービスデータ・サブセットから成る。したがって、サービス要求パケットとそれに対応するサービス結果パケットの一致は比較的に簡単なプロセスになる。サービス完了パケットを識別する方法は２つある。第一の方法では、サービス結果パケットのテキストを検索して、あるサービス結果パケットのみに関係したキーワードおよび／または記号を見つける。第二の方法では、最後の受信時間が記録されたサービス・パケットがサービス完了パケットとされる。言い換えれば、スレッド上でそのすぐ後に続くサービス要求パケットの前にある最後のサービス・パケットがサービス完了パケットとみなされる。スレッド上にある最後のパケットはクライアント・コンピュータ、サーバー・コンピュータのどちらによっても送ることができる。ある場合にこの２つのどちらの方法が好ましいかはアプリケーションによって決まる。
サービス要求パケットとサービス完了パケットがデシジョン・ボックス１１６で識別された後、そのサービス要求の開始、終了時間がコマンド・ボックス１２０にてスレッド識別情報、サービス要求識別子および可能な記録装置の位置とともに通信データセットに記録される。開始時間はそのサービス要求パケットを受信した時間で、終了時間はサービス完了パケットを受信した時間になる。サービス要求識別子はそのサービス要求が関係するサービスのタイプを識別するのに適していればどんな手段でもよい。例をあげると、サービス要求識別子は特にデータ処理アプリケーションでのコマンドまたはコマンドの一部でもよい。通信データセットには、通信回線２４における記録装置２０の位置、ネットワークのタイプ、他の記録情報を含むその他の情報を入れることができる。
上記の工程は、通信回線２４の一部を使って交信されるサービス・パケットについてパケット毎に、選ばれたある期間にわたってくり返し実行される。この期間は連続していても不連続であってもよい。いづれの場合でも、通信データセットは適当な時間間隔を経て以下に説明する工程に渡され応答時間を識別する。
暗号化または圧縮化データを持つサービス・パケットについては、通例フィルタリング工程の前に圧縮アルゴリズムを知るか確かめる必要がある。したがって、それに続く工程ではパケットを非暗号化、非圧縮化することが必要になる。
トランザクション・パターン発見工程
以下に説明するトランザクション・パターン発見工程で、監視コンピュター３６は通信データセットを分析し、可能なトランザクション・パターンを共に構成する一連のサービス要求を識別する。一般に、監視コンピュター３６は最初のサービス要求の終了時間とそれに続くサービス要求の開始時間との間の時間間隔を所定の時間間隔と比較することによってサービス要求シーケンスを識別する。この時間間隔が所定値と同じか小さい場合、各サービス要求は同一トランザクションの一部とみなされ、所定値より大きい場合には、別々のトランザクションの一部とみなされる。したがって、同一トランザクションの一部と考えられる２つのサービス要求について時間間隔を選択する際は、隣接するサービス要求間の最大予想時間間隔をもとに値を決める。
トランザクション・パターン発見工程を開始する図６Ｂを参照すると、選択された時間間隔はデシジョン・ボックス１２４にて、選択された時間増分によって増減できる。選択された時間間隔が望ましい時間間隔値の範囲の上限または下限の場合、処理は終了する。選択された時間間隔ならびにその増分、減分について以下に詳細に説明する。後でわかるように、選択された時間間隔が小さければ、可能なトランザクション・パターン数は小さくなる。
適当な時間間隔の選択後、コマンド・ボックス１２８にて監視コンピュータ３６は選択されたすべての時間間隔に対してサービス要求ファイルを開き、後続の各工程で生じる情報を入力する。以下に説明するように、サービス要求ファイルにはスレッドおよび選択された時間間隔によって分類されるサービス要求が入力される。
図６Ｂを参照すると、監視コンピュータは次にコマンド・ボックス１３２にて、通信データセットからのサービス要求を読み込み、デシジョン・ボックス１３６で通信データセット中のサービス要求がすべて読み込まれたかどうかを確認する。すべてのサービス要求が読み込まれていれば、監視コンピュータはデシジョン・ボックス１２４へ移り、そうでない場合には、コマンド・ボックス１４４にてサービス要求を適当なスレッドへ送り、１スレッドにつき１データセットとなるようにスレッド・データセットを作る。さまざまなサービス要求が通信データセットから読み出され、選択された時間間隔ごとにスレッド・データセットへ送られるので、各スレッド・データセットにはサービス要求の集まりが形成される。各スレッド・データ・サブセットにあるサービス要求はそれぞれの開始、終了時間によって順序付けられる。したがって、上記のように、集合を成すサービス要求はそれぞれ時間間隔によって隣接のサービス要求から分けられる。コマンド・ボックス１３２、１４４は、通信データセット中のすべてのサービス要求が各選択時間間隔のスレッドによって分類されるまでくり返される。
デシジョン・ボックス１２４にて、選択された時間間隔すべてが分析されたとコンピュータが認識した後、コマンド・ボックス１４０へ移る。コマンド・ボックス１４０では、通信データセットからのサービス要求はすべて各種のスレッド・データセットへ読み込まれる。後でわかるように、図６Ｃに示す後続の各工程は選択された各時間間隔についてサービス要求ファイル内で実行される。
各スレッドデータセットにあるサービス要求は次にデシジョン・ボックス１４８で吟味され、各種サービス要求がスレッドデータセット内の別のサービス要求に対してローカルかどうか確認される。サービス要求間の時間間隔が選択された時間間隔の値より小さければ、サービス要求は別のサービス要求に対してローカルになる。サービス要求が相互にローカルであれば、それらのサービス要求は同一トランザクションの一部であると考えられる。また相互にローカルでなければ、異なった別のトランザクションの一部と考えられる。
図７を参照すると、サービス要求ファイル上の各スレッドデータセットで発生するようなタイプの一連のサービス要求またはサービス要求シーケンスが示されている。この一連のサービス要求またはサービス要求シーケンスは少なくとも同一シーケンス中の別の一つのサービス要求に対してローカルであるサービス要求の集まりとも、別のサービス要求に対してローカルではない単一のサービス要求ともいえる。後でわかるように、可能なトランザクション・パターンには複数のサービス要求を入れることができる。したがって、図７では、サービス要求１５６ａ−ｅを分けている時間間隔△Ｔａ−ｄは選択された時間間隔より大きくはない。
一つのスレッドデータセットにある一つのサービス要求がそのスレッドデータセットにある別のサービス要求に対してローカルである場合、コマンドボックス１５０のサービス要求は結合され、新しいトランザクション・パターンとしてサービス要求ファイル内のパターン特徴化データセットのトランザクション・リストに追加される。後でわかるように、サービス要求は一連のサービス要求の一部に対しても、または別のサービス要求に対してもローカルになり得る。このようにして、任意の可能なトランザクション・パターンに対応するサービス要求列は漸次拡大し追加のサービス要求を含み込んでいく。
パターン特徴化データセットには、選択されたさまざまな時間間隔やそれに対応するスレッドデータセットを含み、各スレッドデータセットにはそのスレッドを識別する変数があり、またサービス要求シーケンスに組み入れられたスレッドに関連するさまざまなサービス要求、各サービス要求シーケンスの発生回数などいろいろな情報を含めることができる。このサービス要求シーケンス・リストは以降の説明では可能なトランザクション・パターン・リストとして引用する。
パターン特徴化データセットにはまた、アプリケーションに応じてその他の情報も含むことができる。例をあげると、サービス要求の各シーケンスに関連したトランザクションのタイプなどを含む。トランザクションのタイプは、そのトランザクションに応じたサービス要求シーケンス（例、サービス要求識別子）中の複数のサービス要求が一致することに基づいている。
パターン特徴化データセットの形成は、コマンド・ボックス１４０にて記録ファイルにあるスレッドデータセットからサービス要求を受信することによって始まる。主サービス要求がスレッドデータセット内で先にあるサービス要求に対してローカルでない場合、主サービス要求をただちに時間内に処理するサービス要求シーケンスは、もしそれがあるならば、デシジョン・ボックス１５２にて、パターン特徴化データセット中のすべてのスレッド・データ中で予め関連する選択時間間隔について識別されていたパターンと比較され、そのパターンがその選択時間間隔に対してすでに記録（発見）されていたかどうかを確認する。
先行のサービス要求シーケンスが考えられうる新しいトランザクション・パターンでない場合、選択された時間間隔についての可能な新しいトランザクション・パターンの発生数はコマンド・ボックス１５６にて増加する。さらに詳しくいえば、同じサービス要求シーケンスを持つトランザクション・パターンの発生数の記録は１だけ増える。
デシジョン・ボックス１５２に戻ると、主サービス要求に先行するサービス要求シーケンスが、選択された時間間隔についての可能な新しいトランザクション・パターンである場合、監視コンピュータはコマンド・ボックス１６０にて、可能なトランザクション・パターン・リストに関するサービス要求シーケンスを記録する。
１５６、１６０の後、トランザクション・パターン・リストはコマンド・ボックス１６４で初期化され選択された時間間隔について主サービス要求から始めて新しいサービス要求列を開始する。主サービス要求が直前のサービス要求に対してローカルでないという事実にもとづき、プログラムは直前にあるサービス要求を一部として含むサービス要求シーケンスが完了しているとみなす。そのサービス要求はそれに先行するサービス要求に対してローカルではないので、監視コンピュータはそのサービス要求が新しいサービス要求シーケンスの一部であるとみなす。
コマンド・ボックス１６４の完了後、監視コンピュータはコマンド・ボックス１６８にて記録ファイルにあるスレッドデータセットの終わりが選択されたすべての時間間隔にてすべてのサービス要求に届いているかどうかを確認する。もし届いていれば、この処理は終了する。そうでない場合には、コンピュータはコマンド・ボックス１７２に進み記録ファイルのスレッドデータセットから別のサービス要求を受信する。
コマンド・ボックス１５０、１７２の完了後、監視コンピュータはコマンド・ボックス１４０に戻り、記録ファイルのすべてのサービス要求が読み取られ処理されるまで上記の工程をくり返す。
複数のスレッドを持つ通信データセットでは、監視コンピュータは別のスレッドからの各サービス要求にも同時にトランザクション・パターン発見工程を適用する。したがって、複数の異なったスレッドデータセットにあるサービス要求は同時に分析される。したがって、複数のスレッドデータセットはどの時点でもアクテイブになり得る。
好適な実施例では、最適な時間間隔値は最初にデシジョン・ボックス１２４に対して一連の時間間隔を選択することによって選択される。上記のように、所定値はデシジョン・ボックス１２４の所定増分値を用いて選択できる。時間間隔の選択に用いる値は通常サブセカンド、例えば５０から５００ミリ秒の範囲である。
図８を参照すると、各種時間間隔にて上記コマンドおよびデシジョン・ボックスの実行後、パターン特徴化データセットから得られるトランザクション・パターン数（例えば、縦軸）は対応する時間間隔（例えば、横軸）に対して図表化されている。最適な時間間隔値は曲線１８０上の平坦部１７６の中央部分になる。デシジョン・ボックス１２４の最適値を用いて、トランザクション・パターン発見工程はくり返され第２のパターン特徴化データセットが作られる。第２のパターン特徴化データセットにおけるトランザクション・パターンは記録ファイルの各種サービス要求に対して実質的に最適なトランザクション・パターンのリストと考えられる。
図９Ａに本発明の第２の実施例を示す。図９Ａは図６Ｃに代わるもので、図第６Ａ，Ｂの第１の実施例と同じ工程を示している。デシジョン・ボックス２００とコマンド・ボックス２０４を除いて、図６Ｃは図９Ａとほぼ同じである。上記のように、第２の実施例は第１の実施例と異なり、１トランザクションに対して１つ以上のスレッドを持つアプリケーションまたはトランザクションに適用できる。
アプリケーションまたはトランザクションが１トランザクションにつき１つ以上のスレッドを持つ場合には一般的に３つの場合がある。一つは、特定スレッドがサービス要求の一つのタイプだけを実行する場合。サービス要求が実行された後、アプリケーションまたはトランザクションは他のスレッドを利用する。第２は、アプリケーションまたはトランザクションがシーケンス中の多数のユーザー・スレッドについて実行される場合。例えば、多数のサービス要求が一つのユーザー・スレッドについて実行され、後続の多数のサービス要求が別のユーザー・スレッドについて実行される。このようにして、アプリケーションまたはトランザクションはユーザー・スレッド間を自由に行き来できる。第３は、２つ以上のコンピュータが１つの共用スレッドを用いてサービス要求を実行する場合。
１トランザクションにつき一つ以上のスレッドの使用に対処するため、デシジョン・ボックス２００はデシジョン・ボックス１４８への否定応答に答えて、主サービス要求の直前にあるサービス要求シーケンスが他のスレッドデータセットに対してローカルであるかどうかを確認する。
図７、図１０ー１１に、別々のスレッドデータセットのサービス要求を比較してデシジョンボックス２００に得られると思われる３つの結果を示す。図７では、一つのスレッド・データセットにあるサービス要求１５６ｄが別のスレッド・データセットにあるすぐ前のサービス要求シーケンス（例、サービス要求１５６ａ−ｃ）に対してローカルだが、これはサービス要求１５６ｃとサービス要求シーケンスにあるサービス要求１５６ｄとの間の時間間隔△Ｔｃが選択された時間間隔より大きくないからである。図１０では、一つのスレッド・データセットにあるサービス要求２１０は別のスレッド・データセットにあるサービス要求シーケンス（例、サービス要求２１４ａ−ｂ）に対してローカルだが、これはこのサービス要求がそのサービス要求シーケンスと重複しているからである。言い換えれば、このサービス要求がそのサービス要求シーケンスにある任意のサービス要求が完了または初期化される前に初期化、完了された場合には、そのサービス要求シーケンスに対してローカルではない。別のスレッド・データセットにコピーされる個別のサービス要求またはサービス要求シーケンスにとって、そのサービス要求またはサービス要求シーケンスが他のスレッド・データセット上のサービス要求シーケンス（例えば、サービス要求２１４ａ−ｂ）の一部と重複しないことは重要なことである。図１１では、一つのスレッド・データセットにあるサービス要求２１８は別のスレッド・データセットにあるサービス要求シーケンス（例、サービス要求２１４ａ−ｂ）に対してローカルだが、これはサービス要求２１８とサービス要求シーケンスにあるサービス要求２２２ｂとの間の時間間隔△Ｔｅが選択された時間間隔より大きいからである。
サービス要求またはサービス要求シーケンスは一つまたはそれ以上のスレッド・データセットに直列または並列に転送できる。例えば、一つのスレッド・データセットにあるサービス要求またはサービス要求シーケンスを順次第２、第３のスレッド・データセットに転送でき（直列）、２つまたはそれ以上のスレッド・データセットにほぼ同時に転送できる（並列）。
サービス要求シーケンスが別のスレッドにあるサービス要求に対してローカルの場合、コマンド・ボックス２０４にあるサービス要求シーケンスは他のスレッド・データセットにて予測しうるトランザクション・パターンリストへ転送される。コマンド・ボックス２０４を完了した後、監視コンピュータはコマンド・ボックス１４０に戻る。
サービス要求シーケンスが別のスレッドにあるサービス要求に対してローカルでない場合、監視コンピュータはデシジョン・ボックス１５２へ移る。
トランザクション・パターン・マッチング工程
トランザクション・パターン・マッチング工程では、通信データセットはトランザクション・パターン発見工程から得たパターン特徴化データと比較され複数のサービスパケットの少なくとも一部が一つまたはそれ以上のトランザクションの一部かどうかを確認する。サービスパケットに対応するサービス要求の開始、終了時間を用いてトランザクションまたはアプリケーションに対する応答時間を得ることができる。
図６Ｄをみると、トランザクション・パターン・マッチング工程を始めるために、サービス要求フィルはコマンド・ボックス２５０にて開かれ、通信データセットから読み取ったサービス要求が受信されている。
コマンド・ボックス２５４では、サービス要求が通信データセットから読み取られ、コマンド・ボックス２５４にて適当なスレッドへ割り当てられ、サービス記録ファイルにて１スレッドにつき１スレッド・データセットになるようにスレッド・データセットが形成される。
デシジョン・ボックス２５６では、監視コンピュータは通信データセット中の最後のサービス要求が読み取られたかどうかを確認する。読み取られている場合には、監視コンピュータはコマンド・ボックス２５４へ進む。そうでない場合には、監視コンピュータはコマンド・ボックス２５４へ戻る。このようにして、通信データセットのサービス要求はすべて図６Ｅの各工程に先だってスレッドデータセットに記憶される。
図６Ｅをみると、各スレッドデータセットにあるサービス要求は開始、終了時間によって順序付けられ、パターン特徴化データセットに比較され、サービス要求シーケンスの少なくとも一部が可能なトランザクション・パターンの一部であるかどうかを確認する。
デシジョン・ボックス２６６では、スレッドデータセットにある主サービス要求と、パターン特徴化データセット中のすべてのスレッドデータセットから得られる各種のトランザクション・パターンでの最初のサービス要求とを比較することによってマッチング処理が開始される。サービス要求がすべてのスレッドについて得られるトランザクション・パターン中の最初のサービス要求のどれにも一致しない場合、監視コンピュータはコマンド・ボックス２６２の別のサービス要求を受け取り、デシジョン・ボックス２６６をくり返す。
サービス要求が最初のサービス要求に一致する場合には、スレッドデータセットからの別のサービス要求がコマンド・ボックス２７０に取り込まれる。
デシジョン・ボックス２７４では、監視コンピュータはコマンド・ボックス２７０に取り込まれたサービス要求がデシジョン・ボックス２６６で識別された最初のサービス要求に対してローカルかどうかを確認する。ローカルでない場合、監視コンピュータはコマンド・ボックス２６２に戻り、別のサービス要求によって上記の各工程をくり返す。ローカルの場合には、監視コンピュータはデシジョン・ボックス２７８にて、パターン特徴化データにあるトランザクション・パターンに基づいて、コマンド・ボックス２７０から読み出されたサービス要求がそのトランザクション・パターンでの最後のサービス要求であるかどうかを確認する。
サービス要求が発生しうるトランザクションにおける最後のサービス要求かどうかを確認するために、監視コンピュータはスレッドデータセットにあるトランザクション・パターンでのサービス要求順序を調べる。そのサービス要求がこのトランザクションでの最後のサービス要求ではない場合、監視コンピュータはコマンド・ボックス２７０へ戻る。そのサービス要求が最後のサービス要求である場合、監視コンピュータはコマンド・ボックス２８２にそのトランザクション・パターンの開始と終了時間を記録し、デシジョン・ボックス２８６へ進む。
デシジョン・ボックス２８２では、スレッドデータセットのすべてのサービス要求がサービス要求シーケンスとして特徴付けられていることが確認された場合、プログラムは終了する。もしそうでない場合、監視コンピュータはコマンド・ボックス２６２へ戻る。上記の各工程がスレッドデータセッ全部について平行に実行されていることが好ましい。
上記の各工程によって、各種トランザクションを共に構成するさまざまなサービス要求シーケンス、各トランザクションに対する応答時間、記録装置の位置を含むパターン分析データが得られる。このパターン分析データにはユーザー識別情報やスレッド識別情報などの追加情報を入れることができる。
図９Ｂに本発明の第２の実施例を示す。図９Ｂは図６Ｅに代わるもので、そのほか図６Ｄに示した第１の実施例と同じ工程を含んでいる。図９Ｂは、デシジョン・ボックス３００とコマンド・ボックス３０４を除いては、図６Ｅとほぼ同じである。１トランザクションにつき一つ以上のスレッドの使用に対処するため、デシジョン・ボックス３００はデシジョン・ボックス２７４への否定応答に答えて、サービス要求シーケンスが別のスレッドデータセットサービス要求に対してローカルであるかどうかを確認する。サービス要求シーケンスが一つ以上のスレッドデータセットにあるサービス要求に対してローカルな場合、コマンド・ボックス３０４のサービス要求シーケンスは他のスレッドデータセットへ転送される。コマンド・ボックス３０４を完了した後、監視コンピュータはコマンド・ボックス２６２へ戻る。サービス要求シーケンスが別のスレッドデータセットのサービス要求に対してローカルでない場合、監視コンピュータはコマンド・ボックス２７８へ移る。
第１および第２の実施例の上記の工程を完了した後、パターン分析データセットの情報を用いてネットワーク性能の統計的データとトランザクションの発生回数を得ることができる。例えば、結果として得られるトランザクション応答データをトランザクションのタイプによって、例えば５などといった一定の時間間隔に、応答時間の統計量を、最大、平均といったような標準偏差に、また７０、８０、９０のような百分位数にまとめることができる。個別のトランザクション応答時間データを用いて、そのトランザクション中のサービス要求のダウン時間によって、またユーザー・クラスやその他の変量によって応答時間を分析することができる。トランザクションについての分析レポートの例を図１２に示す。このデータはまた別々の時間間隔で実行されたトランザクション回数を確認するのにも使用できる。
パターン特徴化データセットにはトランザクション・パターン発見工程以外の処理によって確認されたトランザクション・パターンを入れることができる。例をあげると、関心のあるトランザクションについてテストを行いそのトランザクション中に生じるサービス要求シーケンスを識別できる。しかし、ユーザーが選択する特定の応答によって、１つのトランザクションが複数のサービス要求シーケンスを生じさせることがあるので、この方法はある場合には不完全なものになる。
トランザクション・パターン発見、適合工程を修正して不完全なサービス要求シーケンスを放棄するようにすることができる。こうしたサービス要求は通例、一つのトランザクションが開始された後でサービスパケットを記録するために、選択された時間間隔を開始する結果として、または１つのトランザクションが終了する前に、選択された時間間隔を終了させる結果として生じる。不完全なサービス要求シーケンスをなくすためには、スレッドデータセット中にあり、選択された時間間隔より大きい間隔によって先行または後行のサービス要求から分けられていないサービス要求シーケンスはどれでも放棄する。この修正はもちろん、選択された時間間隔より大きい間隔によって分けられているサービス要求シーケンスは同一サービス要求シーケンスの一部ではない、ということを前提にしている。
本発明のさまざまな実施例を詳細に説明してきたが、当業者であればこうした実施例の修正や応用を行うことができる。しかし、こうした修正や応用は添付のクレームに示す本発明の範囲内のものである。
本発明はコンピュータ応用分野における応答時間の測定に関する。特に多層コンピュータ・ネットワークにおいて応答時間を測定する非侵入的装置の使用に関する。
発明の背景
多層コンピュータ・ネットワークは複数のユーザーにさまざまな情報やコンピュータ資源を提供するのに広く用いられている。多層コンピュータ・ネットワークでは、クライアント・コンピュータ（例えば、ユーザー）はサーバー・コンピュータと対話して複数のトランザクションに分けられるアプリケーションを実行する。アプリケーションとは意味のあるトランザクションのグループで、トランザクションとはユーザーによって認識される意味のある仕事の単位である。典型的なトランザクションとはひとまとまりのサービス要求で、典型的なサービス要求はひとまとまりのサービス・パケットになっている。サービス・パケットは簡単にいえばコンピュータ間でやりとりされるひとつの情報あるいはメッセージである。トランザクションの実行過程で、クライアント・コンピュータは複数のサーバー・コンピュータにデータを含むサービス・パケットの転送を要求したり、そうしたサービス・パケットをサーバー・コンピュータに与えて要求を処理させることもできる。反対にサーバー・コンピュータはクライアント・コンピュータからのデータ転送要求に関連したサービスを他のサーバー・コンピュータに要求することができる。
ネットワーク性能の監視は、ユーザー遅延させる有意のトランザクションの期間およびユーザーの生産性を確認するのに重要である。一般的に、ネットワーク性能の監視はトランザクションまたはアプリケーションに対する応答時間を測定するために行う。応答時間とはサーバーおよびネットワークがトランザクションまたはアプリケーションを実行するのに必要な時間である。この応答時間について統計分析を行うことができ、サーバーおよびネットワーク性能の分析を容易に行える。
ネットワーク性能を監視し応答時間を得るには通常二つの方法がある。侵入的／侵略的方法はクライアント・コンピュータに関するソフトウエア・コードを変更しマーカー・コマンドを取り入れる。マーカー・コマンドは受話装置に最初のサービス要求パケットを知らせてタイミング測定を始め、最終結果または確認パケットを受け取り測定を終了する。対照的に非侵入的・非侵略的監視方法は通常ソフトウエア・コードを変更しない。むしろクライアント・コンピュータとサーバー・コンピュータ間の通信回線にプローブを挿入して個々のパケット間の通信、クライアント・コンピュータとサーバー・コンピュータ間の通信の遅延を監視し、およその応答時間を予測する。
侵入的／侵略的および非侵入的／非侵略的方法にはそれぞれいくつかの欠点がある。侵入的／侵略的方法の場合、トランザクション応答時間が与えられるにもかかわらず、ソフトウエア・コード内の埋め込みマーカー・コマンドによって書かれる多層アプリケーションはほとんどない。これらのアプリケーションが埋め込みマーカー・コマンドを持つべきものであっても、アプリケーション埋め込み応答時間の統計量が中央位置に集中するため、特にモバイル・ユーザー・コンピュータにとっては技術的な問題が起こりうる。非侵入的／非侵略的方法の場合には、個々のパケットについてコンピュータ間の情報伝達速度を決定できるのみである。こうした方法は通常トランザクションまたはアプリケーションへの応答時間を決定することはできない。侵入的／侵略的方法も非侵入的／非侵略的方法も特に多層ネットワークにおいては個々のパケットを対応するトランザクションに一致させトランザクションまたは関連アプリケーションへの応答時間を計算することができない。
上述したように、アプリケーションを実行するサーバー・コンピュータはそれぞれさまざまな異なったユーザーのトランザクションに関係する一連の個々のサービス要求を処理することができる。既存の監視方法は各種のサービス要求にあるサービス・パケットを特定のトランザクションに一致させることができない。
特に多層コンピュータ・ネットワークにおけるトランザクションまたはアプリケーションの応答時間を測定する装置およびに方法へのニーズがある。また非侵入的／非侵略的方法を用いてトランザクションまたはアプリケーションの応答時間を測定する装置および方法に関連したニーズがある。
さらに個々のサービス・パケットを、対応するトランザクションまたはアプリケーションに一致させることができる、トランザクションまたはアプリケーションの応答時間測定装置および方法へのニーズがある。
発明の要約
本発明はその態様の一つにおいて、ソース・ノードと宛先ノード間で交信されるサービス・パケット数に対応するトランザクションを識別する方法を提供することによって、上記、およびその他のニーズに対処する。この方法は以下の工程を含む。(i)複数のサービス・パケットおよびこれらのサービス・パケットをソース・ノードと宛先ノード間の通信回線上で交信する順序に関する情報を含む通信データ・セットを提供すること、(ii)この通信データ・セットとパターン特徴化データ・セットとを比較し複数のサービス・パケットの少なくとも一部がトランザクションの一部かどうかを決定すること。パターン特徴化データ・セットにはトランザクションを構成するサービス・パケットの所定順序に関連する情報が含まれる。この方法は非侵入的／非侵略的測定方法を受容し多層コンピュータ・ネットワークに対してもほぼリアルタイムの応答時間を提供できる。
本発明は通信回線上で交信されるサービス・パケットは動作環境にて繰り返し発生するサービス要求のパターンを成すという認識に一部基づいている。こうしたサービス要求パターンはトランザクションの各タイプに対応している。信号処理技術を使ってサービス要求パターンを決定できることがすでにわかっている。一度認識されると、サービス要求パターンの開始、終了時間を決定することができトランザクションに対する応答時間が得られる。
プローブを使って通信回線からパケットをリアルタイムで読み取ることができ、受信時間（例えば、プローブによってパケットを読み取った時間）といしょにパケットを通信データ・セットに記録できる。
パケットはノード・アドレスおよび／またはポート番号に基づいてフィルタリングできる。好適な実施例では、サービス・パケットは複数のスレッドに対応し、パケットはスレッドで分類される。
サービス要求パケットはその内容と宛先によって識別できる。次にサービス結果パケットを対応するサービス要求パケットに関連付けることができる。そして次にサービス要求に対する開始、終了時間を決定できる。
トランザクションに対応するサービス要求を識別した後、そのサービス要求に対するさまざまな開始、終了時間を用いてそのトランザクションに対する応答時間を決定できる。
本発明の別の態様では、ソース・ノードと宛先ノード間で交信される複数のサービス・パケットから成るトランザクションの識別に非侵入的システムを提供する。このシステムは以下の装置で構成される。
(i)通信回線上で交信される複数のサービス・パケットを記録する装置、および(ii)この記録装置と対話し、複数パケットの少なくとも一部を含むトランザクションを識別する装置。
さらに別の態様で、本発明はソース・ノードと宛先ノード間で交信される複数のサービス・パケットから成るトランザクションを識別し、以下の工程を含む方法を提供する。(i)(a)複数のサービス要求に対応した複数のサービス・パケットおよび(b)各サービス要求の開始、終了時間を含む通信データ・セットを提供すること、および(ii)最初のサービス要求の終了と次のサービス要求の開始の間の時間間隔を所定の値と比較しトランザクションを含むサービス要求の順番を決定すること。
この比較工程は時間間隔が変化する場合何度か繰り返して行うことができ、最適な所定値をサービス要求間の時間間隔として選択し、サービス要求を実質的に最適な順序に並べ実行可能なトランザクションとして提供することができる。次にこの結果得られたトランザクション・サービス要求パターン数を用いて所定時間間隔として最適な値を決定する。このトランザクション・サービス要求パターンの数は時間間隔の幅に対して一定に保たれる。所定時間間隔としての最適値はこの時間間隔幅の中間になる。例をあげると、所定値を用いてサービス要求の順番を決定した後、この方法によればさらに第二の所定値を選択でき、サービス要求間の時間間隔をこの第二の所定値と比較し、二番目のトランザクションに対応する第二のサービス要求順序を決定することができ、またこの第二のサービス要求順序と各サービス要求の発生数とを第二のデータ・セットに記録することができる。次にさらに(i)最初のサービス要求順序と所定値数および(ii)第二のサービス要求順序と第二の所定値数との関係を基に第三の所定値（最適所定値）を選択することができる。この方法はまた従来どうりにサービス要求間の時間間隔をこの時間間隔の第三の所定値として、三番目のトランザクションに対応する第三のサービス要求順序を決定する。この三番目のトランザクションに対するサービス要求順序は最適順序と考えられる。次に第三の順序は通信データ・セットと比較され、複数のサービス要求の少なくとも一部が複数のトランザクションに対応しているかどうかを確認する。
この方法はまた前述したようにパターン特徴化データ・セットを作成する。パターン特徴化データ・セットには上記の比較確認工程でサービス要求と比較される複数のサービス要求順序が含まれる。また別の比較工程によって、時間順に配列されたサービス要求がパターン特徴化データ・セットに含まれるかどうかを確認する。
最後の態様において、本発明はソースと宛先ノード間のトランザクションレベルの利用率を決定する非侵入的システムを提供する。このシステムは以下の装置を含む。(i)ソースと宛先ノード間の通信回線上で交信される複数のサービス・パケットを記録する装置、(ii)この記録装置と対話しトランザクションの数を決定する装置。サービス・パケットはトランザクションの数に関係し、記録装置は通信データ・セットを提供する。
一つの実施例において、このトランザクション数を決定する装置は最初のサービス要求の終了時間と第二のサービス要求の開始時間との間の時間間隔を所定の値に比較し、ともにトランザクションを構成する通信データ・セット中の一連のサービス要求を識別する。
【図面の簡単な説明】
図１はコンピュータ・ネットワークに関する本発明の一つの実施例を示す。
図２は多層コンピュータ・ネットワークに関する本発明の別の実施例を示す。
図３はサービス・パケットを示す。
図４はサービス要求におけるサービス・パケットの例を示す。
図５はサービス要求数を含むトランザクションの応答時間を示す。
図６Ａ−Ｅは本発明に従った応答時間を決定する方法の第一の実施例を示す。
図７はパターン発見工程と適合工程でのサービス要求の対話を示す。
図８は発見したトランザクション数に対する所定時間値を表すグラフ。
図９Ａ−Ｂは本発明に従った応答時間を決定する方法の第二の実施例を示す。
図１０−１１はパターン発見工程と適合工程でのサービス要求の対話を示す。
図１２はCPU利用率とトランザクション応答時間の関係を表すグラフ。
発明の詳細な説明
本発明は非侵入的／非侵略的方法によるトランザクションまたはアプリケーションに対する応答時間を測定する方法ならびに装置に関する。前述したように、非侵入的／非侵略的方法はソフトウエア・コードを変更することなく応答時間を測定できる。さらに、こ方法はクライアント・コンピュータと様々なサーバー・コンピュータとの間のネットワーク通信を監視できる。既存のネットワーク性能監視方法とは異なり、本発明は選択されたサービス・パケットとそれらパケットの開始、終了時間情報を対応するトランザクションまたはアプリケーションに一致させる。比較工程の後、この方法でそのトランザクションまたはアプリケーションに対する応答時間が得られる。本発明はネットワーク性能の監視に役立つだけでなくサービス・レベルの契約遵守の監視、課金にも有用である。
装置の構成
本発明による装置の構成を図１、２に示す。図１は最も簡単な単一ネットワーク・セグメントを示している。このネットワークでは、記録装置またはプローブ２０はクライアント・コンピュータ２８とサーバー・コンピュータ３２との間の通信回線またはバスライン２４に接続されている。記録装置２０は通信回線２４上を転送されるサービス・パケットを選択し、このサービル・パケットと、記録装置２０がこのパケットを受信した時間とを監視コンピュータ３６へ送り分析を行なわせる。図２は複数のネットワーク・セグメントを持つより複雑な多層構造を示している。記録装置２０a,bはモデムなどの通信装置２２を介してネットワーク・セグメント２６a,b間の通信回線２４a,bに接続されている。このネットワーク・セグメントはクライアント・コンピュータ２８とサーバー・コンピュータ３２a,b,cおよび通信回線２４a,bを含んでいる。この２つの図面からわかるように、本発明は、クライアント・コンピュータおよびサーバー・コンピュータの応答時間を侵入的／侵略的監視方法のようには測定せず、クライアント・コンピュータとサーバー・コンピュータ間の通信回線上のネットワーク通信を監視することによって応答時間を測定する。
多層コンピュータ・ネットワークにおける記録装置２０の台数と位置はアプリケーションによって異なる。典型的には、記録装置２０は通信回線２４上ののどこに置いてもよい、すなわちクライアント・コンピュータまたはサーバー・コンピュータのドライブが通信回線２４にアクセスする地点間ならどこでもよい。このようにして、通信回線２４上で交信するサービス・パケットはすべて記録装置２０に読み込まれ、多数のクライアント・コンピュータおよび／またはサーバー・コンピュータを巻き込むトランザクションまたはアプリケーションに対する応答時間を正確に決定することができる。
多層コンピュータ・ネットワークのコンピュータ間で交信される代表的なサービス・パケットのテキストを図３に示す。図３からわかるように、サービス・パケット３８は通例、そのサービス・パケットのソースと宛先を表すノード・アドレス４０、ポート番号４４および追加情報４８を含む。アプリケーションによっては、サービス・パケットにデータベース要求、ファイルシステム要求、オブジェクト・ブローカー要求などの追加情報を持たせることができる。
一般的にサービス・パケットには２種類ある、すなわちサービス要求パケットとサービス結果パケットである。サービス要求パケットはサーバー・コンピュータに特定の動作を実行するように要求する。サービス結果パケットはサービス要求パケットへの応答によって生じるサービス・パケットである。サービス結果パケットにはサービス要求パケットによって要求された情報も含めてさまざまな情報を持たせることができる。
ひとつのサービス要求で２種類のサービス・パケットの使用を例証するために、多数のサービス・パケットを含むサービス要求の例を図４に示す。典型的なサービス要求５２は、例えばクライアント・コンピュータがサーバー・コンピュータへ出したサービス要求パケット５６（複数サービス・パケットになり得る）で始まる。次にサーバー・コンピュータはサービス要求確認パケット６０をクライアント・コンピュータへ送り、要求の処理を開始する。サーバー・コンピュータはサービス要求の処理を完了すると、サービス結果通知パケット６４をクライアント・コンピュータへ送る。サーバー・コンピュータはクライアント・コンピュータに対してサービス要求データをいつでも送れる状態にある。次にクライアント・コンピュータがサービス結果転送パケット６８を送り、データの転送を要求する。サーバー・コンピュータはサービス結果パケット７２の転送を開始する。サービス結果完了パケット７６はクライアント・コンピュータに、最終的なサービス結果パケットが転送されたことを知らせ、サービス結果確認パケット８０はサーバー・コンピュータに、データが受信されたことを知らせる。サービス要求を完了させる応答時間は、サービス要求パケット５６の受信時間とサービス完了確認パケット８０の受信時間との間で異なる。
さらにトランザクションに対する応答時間を例証するために、多数のサービス要求を含むトランザクションの例を図２および図５を参照しながら説明する。クライアント・コンピュータ２８で実行されたタイプＡのトランザクションはサーバー・コンピュータ３２ａにサービス要求１を、サーバー・コンピュータ３２ｂにサービス要求２を出す。サービス要求１を実行するために、サーバー・コンピュータ３２ｂはサーバー・コンピュータ３２ｃにサービス要求３を出す。サービス要求１が完了すると、トランザクションＡはサーバー・コンピュータ３２ｄにサービス要求４と５を出し、サーバー・コンピュータ３２ｃにサービス・タイプ６（例えば、サービス要求６）を出す。サーバー・コンピュータへのサービス要求のパターンによって、そのトランザクションがタイプＡのトランザクションであることがわかる。タイプＡのトランザクションに対する応答時間はサービス要求１と２の開始時間からサービス要求５の終了時間までで測定する。したがって、トランザクション応答時間は、簡単にいえば個々のサービス要求応答時間の集まりである。
サービス・パケットのフィルタリング
図６Ａ-Ｅは本発明に基づくネットワーク性能監視方法の第１の実施例を示すフローチャート。この方法は、記録装置から選択されたサービス・パケットを集め、ろ波して通信データ・セットを作る。ネットワーク上の通信はろ波され、関心のあるアプリケーションに関するサービス・パケットだけが残される。のちにわかるように、同一のクライアント・コンピュータ上にある複数のアプリケーションは特定のサーバー・コンピュータから同じタイプのサービスを要求することが可能である。また、サービス・プロバイダーはひとつのサーバー・コンピュータから同じタイプの別のサーバー・コンピュータへ移動することもできる。
第１の実施例は、任意のトランザクションの複数パケットは一つスレッドにのみ置かれることを前提にしている。しかし、任意の１スレッドには一つ以上のトランザクションからの複数パケットを持たせることができる。以下に第２の実施例を示し、任意のトランザクションが１つ以上のスレッドで起こるアプリケーションについて説明する。
ここで用いているように、スレッドとはサービス要求者ノードとサービス提供者ノード間の特定な識別可能なコネクションまたはセッションである。スレッドは、好ましくはある特定の時点でただ１つのサービス要求だけを持つことができるものとして認識される。後でわかるように、任意のノード・アドレスに対して複数のセッションがあるので、アプリケーションによってはノードアドレスは各スレッドの適切な識別子ではない。こした場合、パケットを割り当てるスレッドをさらに識別するために、コネクションまたはセッション識別情報が用いられる。スレッドはまたユーザー・スレッド、すなわち特定のクライアント・コンピュータに対して一意的に識別されるスレッド、あるいは共用スレッド、すなわち複数のユーザー要求によって共用されるスレッドにもなる。
図６Ａを参照すると、複数の記録装置２０は最初に通信回線２４から複数のサービス・パケットをコマンド・ボックス１００に読み込む。ノードアドレスまたは他のスレッド識別情報にもとづいて、記録装置２０はそのサービス・パケットがクライアント・コンピュータおよび／またはサーバー・コンピュータに関係するものなのかを確かめる。その場合、そのサービス・パケットは記録され、記録装置２０がサービス・パケットを読み込んだ時間（例えば、受信時間）が記録される。そうしなければそのサービス・パケットは記録されない。もし、サービス・パケットの特定サブセットに関心を持った場合、記録装置２０はノードアドレスやその他のスレッド識別情報だけでなくポート番号によってもフィルタリングを行う。ある特定の時点で１ポートに１サービス要求だけしかないようにしたアプリケーションの場合、フィルタリングにはポート番号が有効になる。
コマンドボックス１０４では、サービス・パケットは適当なスレッドデータセットに割り振られることによって通信データセットに記録される。通信データセットにはそのスレッドでまとめられるすべての記録装置が読み込んだサービス・パケットが含まれる。各スレッドごとにスレッドデータセットがある。たいていのアプリケーションでは、通信データセットにある複数のスレッドデータセットはどの時点でもアクテイブである。
次にサービス・パケットはデシジョン・ボックス１０８で吟味され、サービス要求パケットであるかどうか確かめられる。これはサービス要求パケットの一意的キーワードおよび／または記号をサービス・パケットのテキスト中に探すことによって行われる、言い換えれば、こうしたキーワードおよび／または記号はサービス結果パケットには用いられない。この検索で用いられるキーワードおよび／または記号は任意のトランザクションおよび／またはアプリケーションに固有なものとすることができる。
サービス・パケットが最初のサービス要求パケットである場合、これに続くサービス・パケットはコマンド・ボックス１１２に読み込まれ、デシジョン・ボックス１１６にてサービス完了パケットを識別する。サービス完了パケットはサービス要求における最終的なサービス結果パケットである。上記のように、特定のある時点でスレッド上に連続する特定のサービス要求に対するサービス・パケットは一組しかない。この一組のサービス・パケットはサービスデータ・サブセットから成る。したがって、サービス要求パケットとそれに対応するサービス結果パケットの一致は比較的に簡単なプロセスになる。サービス完了パケットを識別する方法は２つある。第一の方法では、サービス結果パケットのテキストを検索して、あるサービス結果パケットのみに関係したキーワードおよび／または記号を見つける。第二の方法では、最後の受信時間が記録されたサービス・パケットがサービス完了パケットとされる。言い換えれば、スレッド上でそのすぐ後に続くサービス要求パケットの前にある最後のサービス・パケットがサービス完了パケットとみなされる。スレッド上にある最後のパケットはクライアント・コンピュータ、サーバー・コンピュータのどちらによっても送ることができる。ある場合にこの２つのどちらの方法が好ましいかはアプリケーションによって決まる。
サービス要求パケットとサービス完了パケットがデシジョン・ボックス１１６で識別された後、そのサービス要求の開始、終了時間がコマンド・ボックス１２０にてスレッド識別情報、サービス要求識別子および可能な記録装置の位置とともに通信データセットに記録される。開始時間はそのサービス要求パケットを受信した時間で、終了時間はサービス完了パケットを受信した時間になる。サービス要求識別子はそのサービス要求が関係するサービスのタイプを識別するのに適していればどんな手段でもよい。例をあげると、サービス要求識別子は特にデータ処理アプリケーションでのコマンドまたはコマンドの一部でもよい。通信データセットには、通信回線２４における記録装置２０の位置、ネットワークのタイプ、他の記録情報を含むその他の情報を入れることができる。
上記の工程は、通信回線２４の一部を使って交信されるサービス・パケットについてパケット毎に、選ばれたある期間にわたってくり返し実行される。この期間は連続していても不連続であってもよい。いづれの場合でも、通信データセットは適当な時間間隔を経て以下に説明する工程に渡され応答時間を識別する。
暗号化または圧縮化データを持つサービス・パケットについては、通例フィルタリング工程の前に圧縮アルゴリズムを知るか確かめる必要がある。したがって、それに続く工程ではパケットを非暗号化、非圧縮化することが必要になる。
トランザクション・パターン発見工程
以下に説明するトランザクション・パターン発見工程で、監視コンピュター３６は通信データセットを分析し、可能なトランザクション・パターンを共に構成する一連のサービス要求を識別する。一般に、監視コンピュター３６は最初のサービス要求の終了時間とそれに続くサービス要求の開始時間との間の時間間隔を所定の時間間隔と比較することによってサービス要求シーケンスを識別する。この時間間隔が所定値と同じか小さい場合、各サービス要求は同一トランザクションの一部とみなされ、所定値より大きい場合には、別々のトランザクションの一部とみなされる。したがって、同一トランザクションの一部と考えられる２つのサービス要求について時間間隔を選択する際は、隣接するサービス要求間の最大予想時間間隔をもとに値を決める。
トランザクション・パターン発見工程を開始する図６Ｂを参照すると、選択された時間間隔はデシジョン・ボックス１２４にて、選択された時間増分によって増減できる。選択された時間間隔が望ましい時間間隔値の範囲の上限または下限の場合、処理は終了する。選択された時間間隔ならびにその増分、減分について以下に詳細に説明する。後でわかるように、選択された時間間隔が小さければ、可能なトランザクション・パターン数は小さくなる。
適当な時間間隔の選択後、コマンド・ボックス１２８にて監視コンピュータ３６は選択されたすべての時間間隔に対してサービス要求ファイルを開き、後続の各工程で生じる情報を入力する。以下に説明するように、サービス要求ファイルにはスレッドおよび選択された時間間隔によって分類されるサービス要求が入力される。
図６Ｂを参照すると、監視コンピュータは次にコマンド・ボックス１３２にて、通信データセットからのサービス要求を読み込み、デシジョン・ボックス１３６で通信データセット中のサービス要求がすべて読み込まれたかどうかを確認する。すべてのサービス要求が読み込まれていれば、監視コンピュータはデシジョン・ボックス１２４へ移り、そうでない場合には、コマンド・ボックス１４４にてサービス要求を適当なスレッドへ送り、１スレッドにつき１データセットとなるようにスレッド・データセットを作る。さまざまなサービス要求が通信データセットから読み出され、選択された時間間隔ごとにスレッド・データセットへ送られるので、各スレッド・データセットにはサービス要求の集まりが形成される。各スレッド・データ・サブセットにあるサービス要求はそれぞれの開始、終了時間によって順序付けられる。したがって、上記のように、集合を成すサービス要求はそれぞれ時間間隔によって隣接のサービス要求から分けられる。コマンド・ボックス１３２、１４４は、通信データセット中のすべてのサービス要求が各選択時間間隔のスレッドによって分類されるまでくり返される。
デシジョン・ボックス１２４にて、選択された時間間隔すべてが分析されたとコンピュータが認識した後、コマンド・ボックス１４０へ移る。コマンド・ボックス１４０では、通信データセットからのサービス要求はすべて各種のスレッド・データセットへ読み込まれる。後でわかるように、図６Ｃに示す後続の各工程は選択された各時間間隔についてサービス要求ファイル内で実行される。
各スレッドデータセットにあるサービス要求は次にデシジョン・ボックス１４８で吟味され、各種サービス要求がスレッドデータセット内の別のサービス要求に対してローカルかどうか確認される。サービス要求間の時間間隔が選択された時間間隔の値より小さければ、サービス要求は別のサービス要求に対してローカルになる。サービス要求が相互にローカルであれば、それらのサービス要求は同一トランザクションの一部であると考えられる。また相互にローカルでなければ、異なった別のトランザクションの一部と考えられる。
図７を参照すると、サービス要求ファイル上の各スレッドデータセットで発生するようなタイプの一連のサービス要求またはサービス要求シーケンスが示されている。この一連のサービス要求またはサービス要求シーケンスは少なくとも同一シーケンス中の別の一つのサービス要求に対してローカルであるサービス要求の集まりとも、別のサービス要求に対してローカルではない単一のサービス要求ともいえる。後でわかるように、可能なトランザクション・パターンには複数のサービス要求を入れることができる。したがって、図７では、サービス要求１５６ａ−ｅを分けている時間間隔△Ｔａ−ｄは選択された時間間隔より大きくはない。
一つのスレッドデータセットにある一つのサービス要求がそのスレッドデータセットにある別のサービス要求に対してローカルである場合、コマンドボックス１５０のサービス要求は結合され、新しいトランザクション・パターンとしてサービス要求ファイル内のパターン特徴化データセットのトランザクション・リストに追加される。後でわかるように、サービス要求は一連のサービス要求の一部に対しても、または別のサービス要求に対してもローカルになり得る。このようにして、任意の可能なトランザクション・パターンに対応するサービス要求列は漸次拡大し追加のサービス要求を含み込んでいく。
パターン特徴化データセットには、選択されたさまざまな時間間隔やそれに対応するスレッドデータセットを含み、各スレッドデータセットにはそのスレッドを識別する変数があり、またサービス要求シーケンスに組み入れられたスレッドに関連するさまざまなサービス要求、各サービス要求シーケンスの発生回数などいろいろな情報を含めることができる。このサービス要求シーケンス・リストは以降の説明では可能なトランザクション・パターン・リストとして引用する。
パターン特徴化データセットにはまた、アプリケーションに応じてその他の情報も含むことができる。例をあげると、サービス要求の各シーケンスに関連したトランザクションのタイプなどを含む。トランザクションのタイプは、そのトランザクションに応じたサービス要求シーケンス（例、サービス要求識別子）中の複数のサービス要求が一致することに基づいている。
パターン特徴化データセットの形成は、コマンド・ボックス１４０にて記録ファイルにあるスレッドデータセットからサービス要求を受信することによって始まる。主サービス要求がスレッドデータセット内で先にあるサービス要求に対してローカルでない場合、主サービス要求をただちに時間内に処理するサービス要求シーケンスは、もしそれがあるならば、デシジョン・ボックス１５２にて、パターン特徴化データセット中のすべてのスレッド・データ中で予め関連する選択時間間隔について識別されていたパターンと比較され、そのパターンがその選択時間間隔に対してすでに記録（発見）されていたかどうかを確認する。
先行のサービス要求シーケンスが考えられうる新しいトランザクション・パターンでない場合、選択された時間間隔についての可能な新しいトランザクション・パターンの発生数はコマンド・ボックス１５６にて増加する。さらに詳しくいえば、同じサービス要求シーケンスを持つトランザクション・パターンの発生数の記録は１だけ増える。
デシジョン・ボックス１５２に戻ると、主サービス要求に先行するサービス要求シーケンスが、選択された時間間隔についての可能な新しいトランザクション・パターンである場合、監視コンピュータはコマンド・ボックス１６０にて、可能なトランザクション・パターン・リストに関するサービス要求シーケンスを記録する。
１５６、１６０の後、トランザクション・パターン・リストはコマンド・ボックス１６４で初期化され選択された時間間隔について主サービス要求から始めて新しいサービス要求列を開始する。主サービス要求が直前のサービス要求に対してローカルでないという事実にもとづき、プログラムは直前にあるサービス要求を一部として含むサービス要求シーケンスが完了しているとみなす。そのサービス要求はそれに先行するサービス要求に対してローカルではないので、監視コンピュータはそのサービス要求が新しいサービス要求シーケンスの一部であるとみなす。
コマンド・ボックス１６４の完了後、監視コンピュータはコマンド・ボックス１６８にて記録ファイルにあるスレッドデータセットの終わりが選択されたすべての時間間隔にてすべてのサービス要求に届いているかどうかを確認する。もし届いていれば、この処理は終了する。そうでない場合には、コンピュータはコマンド・ボックス１７２に進み記録ファイルのスレッドデータセットから別のサービス要求を受信する。
コマンド・ボックス１５０、１７２の完了後、監視コンピュータはコマンド・ボックス１４０に戻り、記録ファイルのすべてのサービス要求が読み取られ処理されるまで上記の工程をくり返す。
複数のスレッドを持つ通信データセットでは、監視コンピュータは別のスレッドからの各サービス要求にも同時にトランザクション・パターン発見工程を適用する。したがって、複数の異なったスレッドデータセットにあるサービス要求は同時に分析される。したがって、複数のスレッドデータセットはどの時点でもアクテイブになり得る。
好適な実施例では、最適な時間間隔値は最初にデシジョン・ボックス１２４に対して一連の時間間隔を選択することによって選択される。上記のように、所定値はデシジョン・ボックス１２４の所定増分値を用いて選択できる。時間間隔の選択に用いる値は通常サブセカンド、例えば５０から５００ミリ秒の範囲である。
図８を参照すると、各種時間間隔にて上記コマンドおよびデシジョン・ボックスの実行後、パターン特徴化データセットから得られるトランザクション・パターン数（例えば、縦軸）は対応する時間間隔（例えば、横軸）に対して図表化されている。最適な時間間隔値は曲線１８０上の平坦部１７６の中央部分になる。デシジョン・ボックス１２４の最適値を用いて、トランザクション・パターン発見工程はくり返され第２のパターン特徴化データセットが作られる。第２のパターン特徴化データセットにおけるトランザクション・パターンは記録ファイルの各種サービス要求に対して実質的に最適なトランザクション・パターンのリストと考えられる。
図９Ａに本発明の第２の実施例を示す。図９Ａは図６Ｃに代わるもので、図第６Ａ，Ｂの第１の実施例と同じ工程を示している。デシジョン・ボックス２００とコマンド・ボックス２０４を除いて、図６Ｃは図９Ａとほぼ同じである。上記のように、第２の実施例は第１の実施例と異なり、１トランザクションに対して１つ以上のスレッドを持つアプリケーションまたはトランザクションに適用できる。
アプリケーションまたはトランザクションが１トランザクションにつき１つ以上のスレッドを持つ場合には一般的に３つの場合がある。一つは、特定スレッドがサービス要求の一つのタイプだけを実行する場合。サービス要求が実行された後、アプリケーションまたはトランザクションは他のスレッドを利用する。第２は、アプリケーションまたはトランザクションがシーケンス中の多数のユーザー・スレッドについて実行される場合。例えば、多数のサービス要求が一つのユーザー・スレッドについて実行され、後続の多数のサービス要求が別のユーザー・スレッドについて実行される。このようにして、アプリケーションまたはトランザクションはユーザー・スレッド間を自由に行き来できる。第３は、２つ以上のコンピュータが１つの共用スレッドを用いてサービス要求を実行する場合。
１トランザクションにつき一つ以上のスレッドの使用に対処するため、デシジョン・ボックス２００はデシジョン・ボックス１４８への否定応答に答えて、主サービス要求の直前にあるサービス要求シーケンスが他のスレッドデータセットに対してローカルであるかどうかを確認する。
図７、図１０ー１１に、別々のスレッドデータセットのサービス要求を比較してデシジョンボックス２００に得られると思われる３つの結果を示す。図７では、一つのスレッド・データセットにあるサービス要求１５６ｄが別のスレッド・データセットにあるすぐ前のサービス要求シーケンス（例、サービス要求１５６ａ−ｃ）に対してローカルだが、これはサービス要求１５６ｃとサービス要求シーケンスにあるサービス要求１５６ｄとの間の時間間隔△Ｔｃが選択された時間間隔より大きくないからである。図１０では、一つのスレッド・データセットにあるサービス要求２１０は別のスレッド・データセットにあるサービス要求シーケンス（例、サービス要求２１４ａ−ｂ）に対してローカルだが、これはこのサービス要求がそのサービス要求シーケンスと重複しているからである。言い換えれば、このサービス要求がそのサービス要求シーケンスにある任意のサービス要求が完了または初期化される前に初期化、完了された場合には、そのサービス要求シーケンスに対してローカルではない。別のスレッド・データセットにコピーされる個別のサービス要求またはサービス要求シーケンスにとって、そのサービス要求またはサービス要求シーケンスが他のスレッド・データセット上のサービス要求シーケンス（例えば、サービス要求２１４ａ−ｂ）の一部と重複しないことは重要なことである。図１１では、一つのスレッド・データセットにあるサービス要求２１８は別のスレッド・データセットにあるサービス要求シーケンス（例、サービス要求２１４ａ−ｂ）に対してローカルだが、これはサービス要求２１８とサービス要求シーケンスにあるサービス要求２２２ｂとの間の時間間隔△Ｔｅが選択された時間間隔より大きいからである。
サービス要求またはサービス要求シーケンスは一つまたはそれ以上のスレッド・データセットに直列または並列に転送できる。例えば、一つのスレッド・データセットにあるサービス要求またはサービス要求シーケンスを順次第２、第３のスレッド・データセットに転送でき（直列）、２つまたはそれ以上のスレッド・データセットにほぼ同時に転送できる（並列）。
サービス要求シーケンスが別のスレッドにあるサービス要求に対してローカルの場合、コマンド・ボックス２０４にあるサービス要求シーケンスは他のスレッド・データセットにて予測しうるトランザクション・パターンリストへ転送される。コマンド・ボックス２０４を完了した後、監視コンピュータはコマンド・ボックス１４０に戻る。
サービス要求シーケンスが別のスレッドにあるサービス要求に対してローカルでない場合、監視コンピュータはデシジョン・ボックス１５２へ移る。
トランザクション・パターン・マッチング工程
トランザクション・パターン・マッチング工程では、通信データセットはトランザクション・パターン発見工程から得たパターン特徴化データと比較され複数のサービスパケットの少なくとも一部が一つまたはそれ以上のトランザクションの一部かどうかを確認する。サービスパケットに対応するサービス要求の開始、終了時間を用いてトランザクションまたはアプリケーションに対する応答時間を得ることができる。
図６Ｄをみると、トランザクション・パターン・マッチング工程を始めるために、サービス要求フィルはコマンド・ボックス２５０にて開かれ、通信データセットから読み取ったサービス要求が受信されている。
コマンド・ボックス２５４では、サービス要求が通信データセットから読み取られ、コマンド・ボックス２５４にて適当なスレッドへ割り当てられ、サービス記録ファイルにて１スレッドにつき１スレッド・データセットになるようにスレッド・データセットが形成される。
デシジョン・ボックス２５６では、監視コンピュータは通信データセット中の最後のサービス要求が読み取られたかどうかを確認する。読み取られている場合には、監視コンピュータはコマンド・ボックス２５４へ進む。そうでない場合には、監視コンピュータはコマンド・ボックス２５４へ戻る。このようにして、通信データセットのサービス要求はすべて図６Ｅの各工程に先だってスレッドデータセットに記憶される。
図６Ｅをみると、各スレッドデータセットにあるサービス要求は開始、終了時間によって順序付けられ、パターン特徴化データセットに比較され、サービス要求シーケンスの少なくとも一部が可能なトランザクション・パターンの一部であるかどうかを確認する。
デシジョン・ボックス２６６では、スレッドデータセットにある主サービス要求と、パターン特徴化データセット中のすべてのスレッドデータセットから得られる各種のトランザクション・パターンでの最初のサービス要求とを比較することによってマッチング処理が開始される。サービス要求がすべてのスレッドについて得られるトランザクション・パターン中の最初のサービス要求のどれにも一致しない場合、監視コンピュータはコマンド・ボックス２６２の別のサービス要求を受け取り、デシジョン・ボックス２６６をくり返す。
サービス要求が最初のサービス要求に一致する場合には、スレッドデータセットからの別のサービス要求がコマンド・ボックス２７０に取り込まれる。
デシジョン・ボックス２７４では、監視コンピュータはコマンド・ボックス２７０に取り込まれたサービス要求がデシジョン・ボックス２６６で識別された最初のサービス要求に対してローカルかどうかを確認する。ローカルでない場合、監視コンピュータはコマンド・ボックス２６２に戻り、別のサービス要求によって上記の各工程をくり返す。ローカルの場合には、監視コンピュータはデシジョン・ボックス２７８にて、パターン特徴化データにあるトランザクション・パターンに基づいて、コマンド・ボックス２７０から読み出されたサービス要求がそのトランザクション・パターンでの最後のサービス要求であるかどうかを確認する。
サービス要求が発生しうるトランザクションにおける最後のサービス要求かどうかを確認するために、監視コンピュータはスレッドデータセットにあるトランザクション・パターンでのサービス要求順序を調べる。そのサービス要求がこのトランザクションでの最後のサービス要求ではない場合、監視コンピュータはコマンド・ボックス２７０へ戻る。そのサービス要求が最後のサービス要求である場合、監視コンピュータはコマンド・ボックス２８２にそのトランザクション・パターンの開始と終了時間を記録し、デシジョン・ボックス２８６へ進む。
デシジョン・ボックス２８２では、スレッドデータセットのすべてのサービス要求がサービス要求シーケンスとして特徴付けられていることが確認された場合、プログラムは終了する。もしそうでない場合、監視コンピュータはコマンド・ボックス２６２へ戻る。上記の各工程がスレッドデータセッ全部について平行に実行されていることが好ましい。
上記の各工程によって、各種トランザクションを共に構成するさまざまなサービス要求シーケンス、各トランザクションに対する応答時間、記録装置の位置を含むパターン分析データが得られる。このパターン分析データにはユーザー識別情報やスレッド識別情報などの追加情報を入れることができる。
図９Ｂに本発明の第２の実施例を示す。図９Ｂは図６Ｅに代わるもので、そのほか図６Ｄに示した第１の実施例と同じ工程を含んでいる。図９Ｂは、デシジョン・ボックス３００とコマンド・ボックス３０４を除いては、図６Ｅとほぼ同じである。１トランザクションにつき一つ以上のスレッドの使用に対処するため、デシジョン・ボックス３００はデシジョン・ボックス２７４への否定応答に答えて、サービス要求シーケンスが別のスレッドデータセットサービス要求に対してローカルであるかどうかを確認する。サービス要求シーケンスが一つ以上のスレッドデータセットにあるサービス要求に対してローカルな場合、コマンド・ボックス３０４のサービス要求シーケンスは他のスレッドデータセットへ転送される。コマンド・ボックス３０４を完了した後、監視コンピュータはコマンド・ボックス２６２へ戻る。サービス要求シーケンスが別のスレッドデータセットのサービス要求に対してローカルでない場合、監視コンピュータはコマンド・ボックス２７８へ移る。
第１および第２の実施例の上記の工程を完了した後、パターン分析データセットの情報を用いてネットワーク性能の統計的データとトランザクションの発生回数を得ることができる。例えば、結果として得られるトランザクション応答データをトランザクションのタイプによって、例えば５などといった一定の時間間隔に、応答時間の統計量を、最大、平均といったような標準偏差に、また７０、８０、９０のような百分位数にまとめることができる。個別のトランザクション応答時間データを用いて、そのトランザクション中のサービス要求のダウン時間によって、またユーザー・クラスやその他の変量によって応答時間を分析することができる。トランザクションについての分析レポートの例を図１２に示す。このデータはまた別々の時間間隔で実行されたトランザクション回数を確認するのにも使用できる。
パターン特徴化データセットにはトランザクション・パターン発見工程以外の処理によって確認されたトランザクション・パターンを入れることができる。例をあげると、関心のあるトランザクションについてテストを行いそのトランザクション中に生じるサービス要求シーケンスを識別できる。しかし、ユーザーが選択する特定の応答によって、１つのトランザクションが複数のサービス要求シーケンスを生じさせることがあるので、この方法はある場合には不完全なものになる。
トランザクション・パターン発見、適合工程を修正して不完全なサービス要求シーケンスを放棄するようにすることができる。こうしたサービス要求は通例、一つのトランザクションが開始された後でサービスパケットを記録するために、選択された時間間隔を開始する結果として、または１つのトランザクションが終了する前に、選択された時間間隔を終了させる結果として生じる。不完全なサービス要求シーケンスをなくすためには、スレッドデータセット中にあり、選択された時間間隔より大きい間隔によって先行または後行のサービス要求から分けられていないサービス要求シーケンスはどれでも放棄する。この修正はもちろん、選択された時間間隔より大きい間隔によって分けられているサービス要求シーケンスは同一サービス要求シーケンスの一部ではない、ということを前提にしている。
本発明のさまざまな実施例を詳細に説明してきたが、当業者であればこうした実施例の修正や応用を行うことができる。しかし、こうした修正や応用は添付のクレームに示す本発明の範囲内のものである。
Claims (31)
- 第１ノードと一つ以上の第２ノードとの間で交信される複数サービス・パケットに含まれるトランザクションの発生を識別するための方法であって、
前記第１ノードと前記一つ以上の第２ノードとの間の通信回線上で交信される前記複数サービス・パケットの集合の順序に関する情報を含む通信データセットを提供する工程と、
前記トランザクションの発生に対応する前記複数サービス・パケットの少なくともいくつかについてのグループ分けに関するデータを用いてパターン特徴化データセットを形成する工程と、
前記複数サービス・パケットの少なくともいくつかの集合が該トランザクションの発生に対応しているかどうかを判定するために、該通信データセットと前記パターン特徴化データセットとを比較する工程とを備える方法。 - 前記通信データセット提供工程は、
プローブ用いて前記通信回線から前記サービス・パケットを検出する工程と、
前記複数サービス・パケットの各々について、当該サービス・パケットが前記プローブによって検出された時の対応受信時間を判定する工程と、
前記複数サービス・パケットの各々の識別情報と、前記対応受信時間とを記録する工程とを含む請求項１に記載の方法。 - サービス・パケットが前記プローブから第１ノードおよび前記一つ以上の第２ノードの一つの少なくとも一方へ移動するのに要する時間にほぼ対応した通過時間を、一つのサービスパケットの対応受信時間に追加する工程をさらに備える請求項２に記載の方法。
- 前記複数のサービス・パケットの大部分は各々が対応ノード・アドレスと対応ポート番号の少なくとも一方を持つものであり、前記通信データセットは各サービス・パケットについて、当該サービス・パケットが前記通信回線上に検出されたときの対応した受信時間を含み、前記データセット提供工程は、
各サービス・パケットを検出するために、プローブで前記通信回線から各サービス・パケットを読み出す工程と、
前記プローブによって読み出されたサービス・パケットをノード・アドレスおよびポート番号の少なくとも一方に基づいてフィルタリングして前記複数サービス・パケットの選択されたセットを形成する工程と、
前記選択されたセットの各サービス・パケットについて、前記対応受信時間を記録する工程とを備える、請求項１に記載の方法。 - 前記複数のサービス・パケットが複数のスレッドに対応し、各スレッドがスレッド識別情報に対応しており、前記比較工程は、前記通信データセット中のサービス・パケットを複数のスレッドデータセットとして分類する工程を備え、各スレッド・データセット中の複数サービス・パケットが同一識別情報を持っている、請求項１に記載の方法。
- 前記複数のサービス・パケットがサービス要求パケットとサービス結果パケットを含み、各サービス要求が前記第１ノードまたは前記一つ以上の第２ノードの一つからのサービス要求に相当し、前記比較工程は、前記サービス・パケットの内容を用いてサービス・パケット中の前記サービス要求パケットを識別する工程を備える請求項１に記載の方法。
- 前記複数のサービス・パケットの集合が複数のサービス要求パケットと複数のサービス結果パケットを含み、前記提供する工程は、
前記集合中の複数のサービス・パケットの内容を用いて前記集合中の複数のサービス要求パケットを識別する工程と、
一集合中の各サービス結果パケットを、前記複数のサービス要求パケット内の対応する一つのサービス要求パケットに関連づける工程と、
各サービス要求について、開始、および終了時間を決定する工程とを備え、前記サービス・パケットの集合についての順序に関する情報が、各サービス要求についての開始時間と終了時間の少なくとも一つを含むものである請求項１に記載の方法。 - 複数の開始時間及び複数の終了時間のいくつかを用いて、前記トランザクションへの応答時間を計算する工程をさらに備える請求項７に記載の方法。
- 前記形成する工程は、一つのトランザクションの発生に対応する一連のサービス要求を識別するために、複数サービス・パケットの第一のサービス要求の終了時間と複数サービス・パケットの第二のサービス要求の開始時間との間の時間間隔をこの時間間隔の所定値と比較する工程を含み、前記サービス・パケットのグループ分けがこの一連のサービス要求に対応している請求項７に記載の方法。
- 前記サービス・パケットの集合内の少なくともいくつかのサービス・パケットは前記第１ノードから、前記一つ以上の第２ノードの少なくとも一つにサービスを要求するためのサービス要求パケットであり、前記比較工程は、
前記集合中の第一のサービス要求パケットを前記パターン特徴化データセットにおけるサービス要求パケットの表記に一致させる第一の一致工程と、
前記集合中の第二のサービス要求パケットを前記パターン特徴化データセットにおけるサービス要求パケットの別の表記に一致させる第二の一致工程と
を備え、該第一と第二サービス要求パケット間の時間間隔が所定値以下である請求項１に記載の方法。 - 前記集合の複数のサービス・パケットが前記第１ノードから前記一つ以上の第２ノードのひとつへの複数のサービス要求に対応し、前記複数のサービス要求が複数のスレッドデータセットに対応し、前記比較工程は、
一番目のスレッドに対応する第一のサービス要求を前記パターン特徴化データセットにおけるサービス要求パケットの表記に一致させる第一の一致工程と、
第二のスレッドに対応する第二のサービス要求を前記パターン特徴化データセットにおける第二のサービス要求の表記に一致させる第二の一致工程と
を備え、該第一と第二サービス要求間の時間間隔が所定値より以下である請求項１に記載の方法。 - 第１ノードと少なくとも一つの第２ノード間の通信回線と接続され、前記通信回線上で交信される複数のサービス・パケットを記録する手段と、
前記記録手段と接続され、前記トランザクションの発生に関する前記複数サービス・パケットの少なくともいくつかについてのグループ分けに関するデータを用いてパターン特徴化データセットを形成する手段と、
前記形成手段と交信し、前記パターン特徴化データセットを用いて前記複数のサービスパケットの少なくとも一部に対応する前記トランザクションの一つ以上の発生を識別する手段とを備えている、第１ノードと少なくとも一つの第２ノードとの間で交信する複数サービス・パケットに含まれるトランザクションの発生を識別する非侵入的システム。 - 前記識別手段は、前記複数サービス・パケットと、前記記録手段によるこれら複数サービス・パケットの受信順序とを、前記パターン特徴化データセットと比較する手段を備える請求項１２に記載の非侵入的システム。
- 前記記録手段は前記サービス・パケットを検出するサービスパケット検出手段を含み、当該検出手段が前記第１ノードと少なくとも一つの第２ノード間の前記通信回線上の一部に位置するものである、請求項１２に記載の非侵入的システム。
- 第１ノードと少なくとも一つの第２ノード間で交信される複数サービス・パケットに対応するトランザクションを識別するための方法であって、
（i）複数のサービス要求に対応する前記複数のサービス・パケットの各サービス・パケットを識別するデータと(ii)各サービス要求の開始、および終了時間とから成る通信データセットを提供する工程と、
前記トランザクションに含まれる前記一連のサービス要求を識別するために、第一のサービス要求の終了時間と第二のサービス要求の開始時間との間の時間間隔を、この時間間隔の所定値と比較する工程とを備える方法。 - 前記所定値が５０から５００ミリ秒の範囲にある請求項１５に記載の方法。
- 前記複数のサービス・パケットの一部が一つのスレッドに対応しており、少なくとも二つのサービス・パケットが別々のスレッドに対応しており、前記複数のサービス・パケットが、（ａ）各々が前記サービス要求の異なる一つと対応付けられている複数のサービス要求パケットと、（ｂ）複数のサービス結果パケットとを備え、前記サービス結果パケットの大部分のサービス要求パケットの各々において、当該サービス結果パケットは前記サービス要求パケットの異なる一つに対応するものであり、前記比較工程が、
前記複数のサービス・パケット中の各サービス要求パケットを識別する工程と、
各サービス結果パケットを、対応するサービス要求パケットに関連づけて、当該関連付けられたサービス要求パケットとサービス結果パケットとを含むサービスデータサブセットを形成する工程と、
前記スレッドデータセット内において同一のスレッドアドレスを有するサービスパケットを伴う複数のスレッドデータセットを形成するために、該サービスデータサブセットをスレッドによって分類する工程とを備える請求項１５に記載の方法。 - 複数のサービス要求シーケンスが複数のトランザクションに対応し、前記比較工程は、これら複数のサービス要求シーケンスの各シーケンスと、各シーケンスの発生回数とをパターン特徴化データセットに記録する工程を備える請求項１５に記載の方法。
- 第二の所定値を選択する工程と、
二番目のトランザクションに対応する前記サービス要求の第二のシーケンスを識別するために、前記時間間隔と第二の所定値とを比較する工程と、
サービス要求の各第２のシーケンスの発生と各第２のシーケンスの発生回数とを第二の通信データセットに記録する工程とを備える請求項１５に記載の方法。 - (i)前記サービス要求シーケンスの発生回数と前記所定値ならびに(ii)前記第二のサービス要求シーケンスの発生回数と前記第二の所定値との関係に基づいて第三の所定値を選択する工程を更に備える請求項１９に記載の方法。
- 前記時間間隔を前記第三の所定値に比較して三番目のトランザクションに対応する第三のサービス要求シーケンスを識別する工程を更に備える請求項２０に記載の方法。
- 前記第三のシーケンスを前記通信データセットに比較して前記複数のサービス・パケットの少なくとも一部が前記トランザクションに対応しているかどうかを判定する工程を更に備える請求項２１に記載の方法。
- 前記トランザクションへの応答時間を計算することをされに含んだ、請求項２２に記載の方法。
- 前記比較工程が複数のサービス要求シーケンスの表記を有するパターン特徴化データセットを作成し、
該サービス要求がパターン特徴化データセットに含まれているかどうかを判定するために、前記比較工程から得た前記サービス要求と、前記パターン特徴化データセットとを比較する第二の比較工程をさらに備える請求項１５に記載の方法。 - 前記第一のサービス要求が一番目のスレッドに対応し、前記第二のサービス要求が二番目のスレッドに対応している、請求項１５に記載の方法。
- 第１ノードと少なくとも一つの第２ノード間の通信回線上で交信される複数のサービス・パケットを記録する手段を備え、該サービス・パケットがトランザクション数に関係があり、該記録手段が該通信回線と交信状態にあり、さらに
該記録手段と交信状態にある該トランザクションの数を決定する手段を備えている、第１ノードと少なくとも一つの第２ノード間のトランザクション・レベルの使用率を決定する非侵入的システム。 - 前記決定手段が、前記複数のサービス・パケットと、前記記録手段によるこれら複数サービス・パケットの受信順序とを、前記トランザクションに関係するサービス・パケットの所定順序とに比較する手段を備える請求項２６に記載の非侵入的システム。
- 前記複数のサービス・パケットの少なくとも一部が別々のサービス要求パケットに対応し、各サービス要求パケットが一つのサービス要求に対応し、前記記録手段が、(i)前記複数のサービス・パケットと(ii)各サービス要求の開始時間と終了時間とを含む第１のデータセットを提供し、前記決定手段が、第一のサービス要求の終了時間と第二のサービス要求の開始時間との間の時間間隔をこの時間間隔の所定値に比較して一つのトランザクションに対応する前記サービス要求のシーケンスを識別する手段を備える請求項２６に記載の非侵入的システム。
- 前記集合が前記複数のサービス・パケットと実質的に同一である請求項１に記載の方法。
- 前記集合が前記複数のサービス・パケットのグループを含む請求項１に記載の方法。
- 前記グループと前記集合は実質的に異なるサービスパケットを有する請求項１に記載の方法。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US08/513,435 US5781449A (en) | 1995-08-10 | 1995-08-10 | Response time measurement apparatus and method |
| US513,435 | 1995-08-10 | ||
| PCT/US1996/012035 WO1997006494A1 (en) | 1995-08-10 | 1996-07-19 | Response time measurement apparatus and method |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH11510660A JPH11510660A (ja) | 1999-09-14 |
| JP3774729B2 true JP3774729B2 (ja) | 2006-05-17 |
Family
ID=24043252
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP50844997A Expired - Fee Related JP3774729B2 (ja) | 1995-08-10 | 1996-07-19 | 応答時間測定装置及び方法 |
Country Status (13)
| Country | Link |
|---|---|
| US (7) | US5781449A (ja) |
| EP (1) | EP0871938B1 (ja) |
| JP (1) | JP3774729B2 (ja) |
| KR (1) | KR100473304B1 (ja) |
| CN (1) | CN1197521A (ja) |
| AT (1) | ATE371894T1 (ja) |
| AU (1) | AU699693B2 (ja) |
| BR (1) | BR9610130A (ja) |
| CA (1) | CA2229022A1 (ja) |
| DE (1) | DE69637228T2 (ja) |
| IL (1) | IL123154A (ja) |
| MX (1) | MX9801142A (ja) |
| WO (1) | WO1997006494A1 (ja) |
Families Citing this family (227)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5781449A (en) | 1995-08-10 | 1998-07-14 | Advanced System Technologies, Inc. | Response time measurement apparatus and method |
| US5878420A (en) * | 1995-08-31 | 1999-03-02 | Compuware Corporation | Network monitoring and management system |
| US6144961A (en) * | 1995-08-31 | 2000-11-07 | Compuware Corporation | Method and system for non-intrusive measurement of transaction response times on a network |
| US8229844B2 (en) | 1996-06-05 | 2012-07-24 | Fraud Control Systems.Com Corporation | Method of billing a purchase made over a computer network |
| US20030195847A1 (en) | 1996-06-05 | 2003-10-16 | David Felger | Method of billing a purchase made over a computer network |
| US7555458B1 (en) | 1996-06-05 | 2009-06-30 | Fraud Control System.Com Corporation | Method of billing a purchase made over a computer network |
| EP0825506B1 (en) | 1996-08-20 | 2013-03-06 | Invensys Systems, Inc. | Methods and apparatus for remote process control |
| US6085243A (en) * | 1996-12-13 | 2000-07-04 | 3Com Corporation | Distributed remote management (dRMON) for networks |
| US6271843B1 (en) | 1997-05-30 | 2001-08-07 | International Business Machines Corporation | Methods systems and computer program products for transporting users in three dimensional virtual reality worlds using transportation vehicles |
| US6094677A (en) * | 1997-05-30 | 2000-07-25 | International Business Machines Corporation | Methods, systems and computer program products for providing insertions during delays in interactive systems |
| US5974460A (en) * | 1997-06-16 | 1999-10-26 | International Business Machines Corporation | Apparatus and method for selecting an optimum telecommunications link |
| US6182146B1 (en) * | 1997-06-27 | 2001-01-30 | Compuware Corporation | Automatic identification of application protocols through dynamic mapping of application-port associations |
| WO1999001819A1 (en) * | 1997-07-01 | 1999-01-14 | Progress Software Corporation | Testing and debugging tool for network applications |
| US5905868A (en) * | 1997-07-22 | 1999-05-18 | Ncr Corporation | Client/server distribution of performance monitoring data |
| US7171483B2 (en) * | 1997-07-23 | 2007-01-30 | International Business Machines Corporation | Reducing information transmission time by adapting information delivery to the speed of a given network connection |
| US6526371B1 (en) * | 1999-10-27 | 2003-02-25 | Candle Distributed Solutions, Inc. | Round trip response time measurement for computer programs |
| US6078956A (en) * | 1997-09-08 | 2000-06-20 | International Business Machines Corporation | World wide web end user response time monitor |
| US6026391A (en) * | 1997-10-31 | 2000-02-15 | Oracle Corporation | Systems and methods for estimating query response times in a computer system |
| US6178449B1 (en) * | 1997-11-26 | 2001-01-23 | International Business Machines Corporation | Apparatus and method for measuring transaction time in a computer system |
| US6120298A (en) * | 1998-01-23 | 2000-09-19 | Scientific Learning Corp. | Uniform motivation for multiple computer-assisted training systems |
| US6041352A (en) * | 1998-01-23 | 2000-03-21 | Hewlett-Packard Company | Response time measuring system and method for determining and isolating time delays within a network |
| US6293801B1 (en) | 1998-01-23 | 2001-09-25 | Scientific Learning Corp. | Adaptive motivation for computer-assisted training system |
| US6208640B1 (en) | 1998-02-27 | 2001-03-27 | David Spell | Predictive bandwidth allocation method and apparatus |
| US6113645A (en) * | 1998-04-22 | 2000-09-05 | Scientific Learning Corp. | Simulated play of interactive multimedia applications for error detection |
| US6067638A (en) * | 1998-04-22 | 2000-05-23 | Scientific Learning Corp. | Simulated play of interactive multimedia applications for error detection |
| US7035943B2 (en) | 1998-05-29 | 2006-04-25 | Yahoo! Inc. | Web server content replication |
| US6317786B1 (en) | 1998-05-29 | 2001-11-13 | Webspective Software, Inc. | Web service |
| US6976093B2 (en) | 1998-05-29 | 2005-12-13 | Yahoo! Inc. | Web server content replication |
| US6279001B1 (en) | 1998-05-29 | 2001-08-21 | Webspective Software, Inc. | Web service |
| US7143193B1 (en) * | 1998-05-29 | 2006-11-28 | Yahoo! Inc. | Content collection |
| US6314463B1 (en) * | 1998-05-29 | 2001-11-06 | Webspective Software, Inc. | Method and system for measuring queue length and delay |
| US7581006B1 (en) | 1998-05-29 | 2009-08-25 | Yahoo! Inc. | Web service |
| US6205413B1 (en) * | 1998-06-11 | 2001-03-20 | Chatschik Bisdikian | End-user oriented performance monitoring system for interactive end-to-end data communications |
| US6477571B1 (en) | 1998-08-11 | 2002-11-05 | Computer Associates Think, Inc. | Transaction recognition and prediction using regular expressions |
| WO2000019664A2 (en) * | 1998-09-30 | 2000-04-06 | Netscout Service Level Corporation | Managing computer resources |
| US6813640B1 (en) * | 1998-12-08 | 2004-11-02 | Macrovision Corporation | System and method for controlling the editing by user action of digital objects created in a document server application |
| FR2790348B1 (fr) * | 1999-02-26 | 2001-05-25 | Thierry Grenot | Systeme et procede de mesure des durees de transfert et des taux de pertes dans des reseaux de telecommunication haut-debit |
| US6560648B1 (en) * | 1999-04-19 | 2003-05-06 | International Business Machines Corporation | Method and apparatus for network latency performance measurement |
| US6754885B1 (en) | 1999-05-17 | 2004-06-22 | Invensys Systems, Inc. | Methods and apparatus for controlling object appearance in a process control configuration system |
| US7089530B1 (en) | 1999-05-17 | 2006-08-08 | Invensys Systems, Inc. | Process control configuration system with connection validation and configuration |
| AU5273100A (en) | 1999-05-17 | 2000-12-05 | Foxboro Company, The | Methods and apparatus for control configuration with versioning, security, composite blocks, edit selection, object swapping, formulaic values and other aspects |
| US6788980B1 (en) | 1999-06-11 | 2004-09-07 | Invensys Systems, Inc. | Methods and apparatus for control using control devices that provide a virtual machine environment and that communicate via an IP network |
| US6957255B1 (en) * | 1999-06-28 | 2005-10-18 | Amdocs (Israel) Ltd. | Method and apparatus for session reconstruction and accounting involving VoIP calls |
| AU6615600A (en) | 1999-07-29 | 2001-02-19 | Foxboro Company, The | Methods and apparatus for object-based process control |
| US6983350B1 (en) * | 1999-08-31 | 2006-01-03 | Intel Corporation | SDRAM controller for parallel processor architecture |
| US6954739B1 (en) * | 1999-11-16 | 2005-10-11 | Lucent Technologies Inc. | Measurement-based management method for packet communication networks |
| US6473660B1 (en) | 1999-12-03 | 2002-10-29 | The Foxboro Company | Process control system and method with automatic fault avoidance |
| US6661794B1 (en) * | 1999-12-29 | 2003-12-09 | Intel Corporation | Method and apparatus for gigabit packet assignment for multithreaded packet processing |
| US6725272B1 (en) * | 2000-02-18 | 2004-04-20 | Netscaler, Inc. | Apparatus, method and computer program product for guaranteed content delivery incorporating putting a client on-hold based on response time |
| US6738349B1 (en) * | 2000-03-01 | 2004-05-18 | Tektronix, Inc. | Non-intrusive measurement of end-to-end network properties |
| US20080281963A1 (en) * | 2000-03-02 | 2008-11-13 | Rick Fletcher | Distributed remote management (drmon) for networks |
| US7249192B1 (en) * | 2000-03-09 | 2007-07-24 | Hewlett-Packard Development Company, L.P. | Protocol for insuring exactly once semantics of transactions across an unordered, unreliable network |
| TW508485B (en) * | 2000-04-13 | 2002-11-01 | Infineon Technologies Ag | Voltage-converter |
| JP2003533925A (ja) * | 2000-05-12 | 2003-11-11 | ニクスン インコーポレイテツド | ネットワーク用のセキュリティ・カメラ |
| US6748431B1 (en) * | 2000-05-26 | 2004-06-08 | Microsoft Corporation | Systems and methods for monitoring network exchanges between a client and a server |
| US7840691B1 (en) | 2000-09-07 | 2010-11-23 | Zamora Radio, Llc | Personal broadcast server system for providing a customized broadcast |
| US6567767B1 (en) * | 2000-09-19 | 2003-05-20 | Unisys Corporation | Terminal server simulated client performance measurement tool |
| US6831890B1 (en) * | 2000-10-31 | 2004-12-14 | Agilent Technologies, Inc. | Measuring network performance parameters in data communication networks |
| US6735541B2 (en) * | 2001-02-16 | 2004-05-11 | Exxonmobil Research And Engineering Company | Process unit monitoring program |
| US7506047B2 (en) * | 2001-03-30 | 2009-03-17 | Bmc Software, Inc. | Synthetic transaction monitor with replay capability |
| US7461369B2 (en) * | 2001-03-30 | 2008-12-02 | Bmc Software, Inc. | Java application response time analyzer |
| US7792948B2 (en) * | 2001-03-30 | 2010-09-07 | Bmc Software, Inc. | Method and system for collecting, aggregating and viewing performance data on a site-wide basis |
| US8271678B2 (en) * | 2001-04-03 | 2012-09-18 | Arbor Networks, Inc. | Independent detection and filtering of undesirable packets |
| US20020184363A1 (en) * | 2001-04-20 | 2002-12-05 | Steven Viavant | Techniques for server-controlled measurement of client-side performance |
| US20020156878A1 (en) * | 2001-04-24 | 2002-10-24 | Conrad Jeffrey Richard | Method and system for monitoring node response time |
| US7913261B2 (en) * | 2001-05-02 | 2011-03-22 | nCipher Corporation, Ltd. | Application-specific information-processing method, system, and apparatus |
| US8140659B2 (en) * | 2001-05-08 | 2012-03-20 | Hewlett-Packard Development Company, L.P. | Calculating an estimated time to complete a request |
| US7197559B2 (en) * | 2001-05-09 | 2007-03-27 | Mercury Interactive Corporation | Transaction breakdown feature to facilitate analysis of end user performance of a server system |
| US20020198985A1 (en) * | 2001-05-09 | 2002-12-26 | Noam Fraenkel | Post-deployment monitoring and analysis of server performance |
| US7962482B2 (en) | 2001-05-16 | 2011-06-14 | Pandora Media, Inc. | Methods and systems for utilizing contextual feedback to generate and modify playlists |
| US6874099B1 (en) * | 2001-05-31 | 2005-03-29 | Sprint Communications Company L.P. | Method and software for testing and performance monitoring |
| US7024477B2 (en) * | 2001-06-29 | 2006-04-04 | International Business Machines Corporation | Service time analysis methods for the WSM QOS monitor |
| US20030033404A1 (en) * | 2001-08-09 | 2003-02-13 | Richardson David E. | Method for automatically monitoring a network |
| US7194553B2 (en) | 2001-10-16 | 2007-03-20 | Microsoft Corporation | Resolving virtual network names |
| US6976074B2 (en) * | 2001-10-16 | 2005-12-13 | Microsoft Corporation | Systems and methods for negotiating transactions between nodes |
| EP1303097A3 (en) * | 2001-10-16 | 2005-11-30 | Microsoft Corporation | Virtual distributed security system |
| US20030074579A1 (en) * | 2001-10-16 | 2003-04-17 | Microsoft Corporation | Virtual distributed security system |
| US7536712B2 (en) * | 2001-10-16 | 2009-05-19 | Microsoft Corporation | Flexible electronic message security mechanism |
| US8015204B2 (en) * | 2001-10-16 | 2011-09-06 | Microsoft Corporation | Scoped access control metadata element |
| US7676540B2 (en) * | 2001-10-16 | 2010-03-09 | Microsoft Corporation | Scoped referral statements |
| US6915450B2 (en) * | 2001-11-01 | 2005-07-05 | Sun Microsystems, Inc. | Method and apparatus for arbitrating transactions between domains in a computer system |
| US7899047B2 (en) | 2001-11-27 | 2011-03-01 | Microsoft Corporation | Virtual network with adaptive dispatcher |
| US7065102B1 (en) * | 2002-03-01 | 2006-06-20 | Network General Technology | System and method for correlating request and reply packets |
| WO2003084134A1 (en) * | 2002-03-29 | 2003-10-09 | Network Genomics, Inc. | Systems and methods for end-to-end quality of service measurements in a distributed network environment |
| AU2003228411A1 (en) * | 2002-03-29 | 2003-10-13 | Network Genomics, Inc. | Forward looking infrastructure re-provisioning |
| US20030223367A1 (en) * | 2002-03-29 | 2003-12-04 | Shay A. David | Methods for identifying network traffic flows |
| EP1502218A4 (en) | 2002-04-15 | 2005-08-17 | Invensys Sys Inc | METHOD AND DEVICES FOR A PROCESS-, FACTORY-, ENVIRONMENT-, ENVIRONMENT- AND COMPUTER AIDED MANUFACTURING-BASED OR OTHERWISE CONTROL SYSTEM WITH REAL-TIME DATA DISTRIBUTION |
| US7662094B2 (en) * | 2002-05-14 | 2010-02-16 | Given Imaging Ltd. | Optical head assembly with dome, and device for use thereof |
| US6792460B2 (en) | 2002-10-02 | 2004-09-14 | Mercury Interactive Corporation | System and methods for monitoring application server performance |
| US7542471B2 (en) | 2002-10-30 | 2009-06-02 | Citrix Systems, Inc. | Method of determining path maximum transmission unit |
| US7630305B2 (en) | 2003-07-29 | 2009-12-08 | Orbital Data Corporation | TCP selective acknowledgements for communicating delivered and missed data packets |
| US7616638B2 (en) | 2003-07-29 | 2009-11-10 | Orbital Data Corporation | Wavefront detection and disambiguation of acknowledgments |
| US8233392B2 (en) * | 2003-07-29 | 2012-07-31 | Citrix Systems, Inc. | Transaction boundary detection for reduction in timeout penalties |
| US8270423B2 (en) | 2003-07-29 | 2012-09-18 | Citrix Systems, Inc. | Systems and methods of using packet boundaries for reduction in timeout prevention |
| US20040123279A1 (en) * | 2002-12-18 | 2004-06-24 | International Business Machines Corporation | Method and system for auto-instrumenting java applications through probe injection |
| FR2849313B1 (fr) * | 2002-12-20 | 2005-03-11 | Cit Alcatel | Dispositif de controle de traitements associes a des flux au sein d'un reseau de communications |
| US7568023B2 (en) * | 2002-12-24 | 2009-07-28 | Hewlett-Packard Development Company, L.P. | Method, system, and data structure for monitoring transaction performance in a managed computer network environment |
| GB2399189B (en) * | 2003-03-05 | 2006-07-19 | Quazal Technologies Inc | Coherent data sharing |
| US6976144B1 (en) * | 2003-05-06 | 2005-12-13 | Pegasystems, Inc. | Methods and apparatus for digital data processing with mutable inheritance |
| AU2003298973A1 (en) * | 2003-07-15 | 2005-01-28 | Intel, Zakrytoe Aktsionernoe Obschestvo | A method of efficient performance monitoring for symmetric multi-threading systems |
| US7698453B2 (en) * | 2003-07-29 | 2010-04-13 | Oribital Data Corporation | Early generation of acknowledgements for flow control |
| US8432800B2 (en) | 2003-07-29 | 2013-04-30 | Citrix Systems, Inc. | Systems and methods for stochastic-based quality of service |
| US8238241B2 (en) | 2003-07-29 | 2012-08-07 | Citrix Systems, Inc. | Automatic detection and window virtualization for flow control |
| US8437284B2 (en) | 2003-07-29 | 2013-05-07 | Citrix Systems, Inc. | Systems and methods for additional retransmissions of dropped packets |
| US7656799B2 (en) | 2003-07-29 | 2010-02-02 | Citrix Systems, Inc. | Flow control system architecture |
| US7464181B2 (en) * | 2003-09-11 | 2008-12-09 | International Business Machines Corporation | Method for caching lookups based upon TCP traffic flow characteristics |
| US20050097196A1 (en) * | 2003-10-03 | 2005-05-05 | Wronski Leszek D. | Network status messaging |
| US7978716B2 (en) | 2003-11-24 | 2011-07-12 | Citrix Systems, Inc. | Systems and methods for providing a VPN solution |
| JP3937341B2 (ja) | 2004-01-30 | 2007-06-27 | 日本電気株式会社 | 計算機システム性能測定分析用のトランザクションプロファイルの生成システム、その生成方法及びプログラム |
| US7761923B2 (en) | 2004-03-01 | 2010-07-20 | Invensys Systems, Inc. | Process control methods and apparatus for intrusion detection, protection and network hardening |
| US7665063B1 (en) | 2004-05-26 | 2010-02-16 | Pegasystems, Inc. | Integration of declarative rule-based processing with procedural programming |
| US8495305B2 (en) | 2004-06-30 | 2013-07-23 | Citrix Systems, Inc. | Method and device for performing caching of dynamically generated objects in a data communication network |
| US7757074B2 (en) | 2004-06-30 | 2010-07-13 | Citrix Application Networking, Llc | System and method for establishing a virtual private network |
| US8739274B2 (en) | 2004-06-30 | 2014-05-27 | Citrix Systems, Inc. | Method and device for performing integrated caching in a data communication network |
| EP2264956B1 (en) | 2004-07-23 | 2017-06-14 | Citrix Systems, Inc. | Method for securing remote access to private networks |
| US7808906B2 (en) | 2004-07-23 | 2010-10-05 | Citrix Systems, Inc. | Systems and methods for communicating a lossy protocol via a lossless protocol using false acknowledgements |
| KR100608833B1 (ko) * | 2004-11-22 | 2006-08-08 | 엘지전자 주식회사 | 인터넷을 통한 디버깅 장치의 원격 제어 장치 및 방법 |
| US8549149B2 (en) | 2004-12-30 | 2013-10-01 | Citrix Systems, Inc. | Systems and methods for providing client-side accelerated access to remote applications via TCP multiplexing |
| US8706877B2 (en) | 2004-12-30 | 2014-04-22 | Citrix Systems, Inc. | Systems and methods for providing client-side dynamic redirection to bypass an intermediary |
| US8700695B2 (en) | 2004-12-30 | 2014-04-15 | Citrix Systems, Inc. | Systems and methods for providing client-side accelerated access to remote applications via TCP pooling |
| US8954595B2 (en) | 2004-12-30 | 2015-02-10 | Citrix Systems, Inc. | Systems and methods for providing client-side accelerated access to remote applications via TCP buffering |
| US7810089B2 (en) | 2004-12-30 | 2010-10-05 | Citrix Systems, Inc. | Systems and methods for automatic installation and execution of a client-side acceleration program |
| US8255456B2 (en) | 2005-12-30 | 2012-08-28 | Citrix Systems, Inc. | System and method for performing flash caching of dynamically generated objects in a data communication network |
| AU2005325674A1 (en) | 2005-01-24 | 2006-08-03 | Citrix Systems, Inc. | Systems and methods for performing caching of dynamically generated objects in a network |
| US7975000B2 (en) * | 2005-01-27 | 2011-07-05 | Fmr Llc | A/B testing of a webpage |
| US8335704B2 (en) | 2005-01-28 | 2012-12-18 | Pegasystems Inc. | Methods and apparatus for work management and routing |
| US20060224822A1 (en) * | 2005-03-18 | 2006-10-05 | Blomquist Scott A | System and method for tagging and filtering electronic data |
| US7519007B2 (en) | 2005-04-01 | 2009-04-14 | International Business Machines Corporation | Method utilizing a single agent on a non-origin node for measuring the roundtrip response time of web pages with embedded HTML frames over a public or private network |
| US7580365B2 (en) * | 2005-04-01 | 2009-08-25 | International Business Machines Corporation | System and method utilizing a single agent on a non-origin node for measuring the roundtrip response time over a public or private network with HTTP/HTTPS network protocol |
| US20060221851A1 (en) * | 2005-04-01 | 2006-10-05 | International Business Machines Corporation | System and method for measuring the roundtrip response time of network protocols utilizing a single agent on a non-origin node |
| GB2428534B (en) * | 2005-07-20 | 2010-06-02 | Agilent Technologies Inc | Measurement system and method of measuring a transit metric |
| US20070047438A1 (en) * | 2005-08-20 | 2007-03-01 | Malloy Patrick J | Identifying a transaction of interest within a network |
| US7991971B2 (en) * | 2005-09-09 | 2011-08-02 | Microsoft Corporation | State management for transactional backup consistency |
| US20070084638A1 (en) * | 2005-10-19 | 2007-04-19 | Clyde Bohnsack | Drilling fluid flow facilitation |
| US8014389B2 (en) * | 2005-12-06 | 2011-09-06 | Lippershy Celestial Llc | Bidding network |
| US8055897B2 (en) * | 2005-12-06 | 2011-11-08 | Lippershy Celestial Llc | Digital object title and transmission information |
| US9686183B2 (en) * | 2005-12-06 | 2017-06-20 | Zarbaña Digital Fund Llc | Digital object routing based on a service request |
| US20070136209A1 (en) * | 2005-12-06 | 2007-06-14 | Shabbir Khan | Digital object title authentication |
| US8194701B2 (en) * | 2005-12-06 | 2012-06-05 | Lippershy Celestial Llc | System and/or method for downstream bidding |
| US7921184B2 (en) | 2005-12-30 | 2011-04-05 | Citrix Systems, Inc. | System and method for performing flash crowd caching of dynamically generated objects in a data communication network |
| US8301839B2 (en) | 2005-12-30 | 2012-10-30 | Citrix Systems, Inc. | System and method for performing granular invalidation of cached dynamically generated objects in a data communication network |
| US7640222B2 (en) * | 2006-03-03 | 2009-12-29 | Pegasystems Inc. | Rules base systems and methods with circumstance translation |
| JP4566148B2 (ja) * | 2006-03-20 | 2010-10-20 | 富士通株式会社 | ネットワーク疎通監視システム、ネットワーク疎通監視方法、中央装置、中継装置及びコンピュータプログラム |
| US7945251B2 (en) * | 2006-03-27 | 2011-05-17 | Sony Ericsson Mobile Communications Ab | Locating a service device for a portable communication device |
| WO2007123753A2 (en) | 2006-03-30 | 2007-11-01 | Invensys Systems, Inc. | Digital data processing apparatus and methods for improving plant performance |
| US8924335B1 (en) | 2006-03-30 | 2014-12-30 | Pegasystems Inc. | Rule-based user interface conformance methods |
| US8468283B2 (en) * | 2006-06-01 | 2013-06-18 | Telefonaktiebolaget Lm Ericsson (Publ) | Arbiter diagnostic apparatus and method |
| US20080016062A1 (en) * | 2006-06-30 | 2008-01-17 | Drescher Keith A | Request-response trigger generation in link-connected computing systems |
| US7877373B2 (en) * | 2006-06-30 | 2011-01-25 | Oracle International Corporation | Executing alternative plans for a SQL statement |
| US9027011B1 (en) * | 2006-08-31 | 2015-05-05 | Oracle America, Inc. | Using method-profiling to dynamically tune a virtual machine for responsiveness |
| US10110687B2 (en) * | 2006-10-06 | 2018-10-23 | International Business Machines Corporation | Session based web usage reporter |
| US8396834B2 (en) * | 2006-10-10 | 2013-03-12 | International Business Machines Corporation | Real time web usage reporter using RAM |
| US7779133B2 (en) * | 2007-01-04 | 2010-08-17 | Yahoo! Inc. | Estimation of web client response time |
| US8250525B2 (en) * | 2007-03-02 | 2012-08-21 | Pegasystems Inc. | Proactive performance management for multi-user enterprise software systems |
| US7779127B2 (en) * | 2007-03-09 | 2010-08-17 | Hewlett-Packard Development Company, L.P. | System and method for determining a subset of transactions of a computing system for use in determing resource costs |
| US8681643B2 (en) * | 2007-04-05 | 2014-03-25 | Bloomberg Finance L.P. | System and method of determining data latency over a network |
| US8903801B2 (en) * | 2007-09-14 | 2014-12-02 | Oracle International Corporation | Fully automated SQL tuning |
| US8341178B2 (en) * | 2007-09-18 | 2012-12-25 | Oracle International Corporation | SQL performance analyzer |
| US8069240B1 (en) | 2007-09-25 | 2011-11-29 | United Services Automobile Association (Usaa) | Performance tuning of IT services |
| US8700608B2 (en) | 2007-10-17 | 2014-04-15 | Oracle International Corporation | SQL execution plan verification |
| US8326970B2 (en) * | 2007-11-05 | 2012-12-04 | Hewlett-Packard Development Company, L.P. | System and method for modeling a session-based system with a transaction-based analytic model |
| US8127235B2 (en) | 2007-11-30 | 2012-02-28 | International Business Machines Corporation | Automatic increasing of capacity of a virtual space in a virtual world |
| US20090164919A1 (en) | 2007-12-24 | 2009-06-25 | Cary Lee Bates | Generating data for managing encounters in a virtual world environment |
| JP4739364B2 (ja) * | 2008-04-08 | 2011-08-03 | 株式会社日立製作所 | サービス使用経路出力システム、管理サーバ、サービス使用経路出力方法、およびサービス使用経路出力プログラム |
| CN104407518B (zh) | 2008-06-20 | 2017-05-31 | 因文西斯系统公司 | 对用于过程控制的实际和仿真设施进行交互的系统和方法 |
| US8015276B2 (en) * | 2008-11-18 | 2011-09-06 | At&T Intellectual Property I, L.P. | Method to identify performance and capacity bottlenecks of complex systems |
| JP5422989B2 (ja) * | 2008-12-17 | 2014-02-19 | 富士通株式会社 | トランザクションモデル生成支援プログラム、トランザクションモデル生成支援装置、およびトランザクションモデル生成支援方法 |
| US8843435B1 (en) | 2009-03-12 | 2014-09-23 | Pegasystems Inc. | Techniques for dynamic data processing |
| US8468492B1 (en) | 2009-03-30 | 2013-06-18 | Pegasystems, Inc. | System and method for creation and modification of software applications |
| US8463964B2 (en) | 2009-05-29 | 2013-06-11 | Invensys Systems, Inc. | Methods and apparatus for control configuration with enhanced change-tracking |
| US8127060B2 (en) | 2009-05-29 | 2012-02-28 | Invensys Systems, Inc | Methods and apparatus for control configuration with control objects that are fieldbus protocol-aware |
| US9654505B2 (en) | 2009-06-22 | 2017-05-16 | Citrix Systems, Inc. | Systems and methods for encoding the core identifier in the session identifier |
| US8601556B2 (en) | 2009-06-22 | 2013-12-03 | Citrix Systems, Inc. | Systems and methods for handling SSL session not reusable across multiple cores |
| US8250198B2 (en) * | 2009-08-12 | 2012-08-21 | Microsoft Corporation | Capacity planning for data center services |
| US8938533B1 (en) | 2009-09-10 | 2015-01-20 | AppDynamics Inc. | Automatic capture of diagnostic data based on transaction behavior learning |
| JP5482243B2 (ja) * | 2010-01-29 | 2014-05-07 | 富士通株式会社 | 系列生成プログラム、系列生成方法、および系列生成装置 |
| US8429616B2 (en) * | 2010-03-19 | 2013-04-23 | Ebay Inc. | Orthogonal experimentation in a computing environment |
| US8572252B2 (en) | 2010-04-09 | 2013-10-29 | Microsoft Corporation | Extensible dynamic performance instrumentation of pages |
| US8688982B2 (en) * | 2010-08-13 | 2014-04-01 | Bmc Software, Inc. | Monitoring based on client perspective |
| US8510601B1 (en) * | 2010-09-27 | 2013-08-13 | Amazon Technologies, Inc. | Generating service call patterns for systems under test |
| US8886795B2 (en) * | 2011-01-27 | 2014-11-11 | Hewlett-Packard Development Company, L.P. | Method and system for determining response time of a server |
| US8880487B1 (en) | 2011-02-18 | 2014-11-04 | Pegasystems Inc. | Systems and methods for distributed rules processing |
| ITRM20110436A1 (it) * | 2011-08-11 | 2013-02-12 | B P Informatica S R L | Metodo di monitoraggio del tempo di download lato client di una pagina html, e relativo sistema di monitoraggio . |
| US9100320B2 (en) | 2011-12-30 | 2015-08-04 | Bmc Software, Inc. | Monitoring network performance remotely |
| US9195936B1 (en) | 2011-12-30 | 2015-11-24 | Pegasystems Inc. | System and method for updating or modifying an application without manual coding |
| US9311598B1 (en) * | 2012-02-02 | 2016-04-12 | AppDynamics, Inc. | Automatic capture of detailed analysis information for web application outliers with very low overhead |
| US9197606B2 (en) | 2012-03-28 | 2015-11-24 | Bmc Software, Inc. | Monitoring network performance of encrypted communications |
| CN104516819B (zh) * | 2012-03-29 | 2018-01-19 | 北京奇虎科技有限公司 | 软件的界面状态变化时间的测试方法和装置 |
| US9438488B2 (en) * | 2012-11-09 | 2016-09-06 | Citrix Systems, Inc. | Systems and methods for appflow for datastream |
| JP5856988B2 (ja) * | 2013-02-04 | 2016-02-10 | 日本電信電話株式会社 | 通信分類装置及び方法及びプログラム |
| US10127273B2 (en) | 2014-04-15 | 2018-11-13 | Splunk Inc. | Distributed processing of network data using remote capture agents |
| US9762443B2 (en) | 2014-04-15 | 2017-09-12 | Splunk Inc. | Transformation of network data at remote capture agents |
| US10462004B2 (en) | 2014-04-15 | 2019-10-29 | Splunk Inc. | Visualizations of statistics associated with captured network data |
| US10523521B2 (en) | 2014-04-15 | 2019-12-31 | Splunk Inc. | Managing ephemeral event streams generated from captured network data |
| US9923767B2 (en) | 2014-04-15 | 2018-03-20 | Splunk Inc. | Dynamic configuration of remote capture agents for network data capture |
| US10360196B2 (en) | 2014-04-15 | 2019-07-23 | Splunk Inc. | Grouping and managing event streams generated from captured network data |
| US11086897B2 (en) | 2014-04-15 | 2021-08-10 | Splunk Inc. | Linking event streams across applications of a data intake and query system |
| US10366101B2 (en) | 2014-04-15 | 2019-07-30 | Splunk Inc. | Bidirectional linking of ephemeral event streams to creators of the ephemeral event streams |
| US11281643B2 (en) | 2014-04-15 | 2022-03-22 | Splunk Inc. | Generating event streams including aggregated values from monitored network data |
| US10700950B2 (en) | 2014-04-15 | 2020-06-30 | Splunk Inc. | Adjusting network data storage based on event stream statistics |
| US9838512B2 (en) | 2014-10-30 | 2017-12-05 | Splunk Inc. | Protocol-based capture of network data using remote capture agents |
| US10693742B2 (en) | 2014-04-15 | 2020-06-23 | Splunk Inc. | Inline visualizations of metrics related to captured network data |
| US9733847B2 (en) * | 2014-06-02 | 2017-08-15 | Micron Technology, Inc. | Systems and methods for transmitting packets in a scalable memory system protocol |
| US10182129B1 (en) * | 2014-06-19 | 2019-01-15 | Amazon Technologies, Inc. | Global optimization of a service-oriented system |
| US10091061B1 (en) | 2014-06-19 | 2018-10-02 | Amazon Technologies, Inc. | Service-oriented system optimization using static analysis |
| US9998328B1 (en) | 2014-06-19 | 2018-06-12 | Amazon Technologies, Inc. | Service-oriented system optimization using client device relocation |
| US9998562B1 (en) | 2014-06-19 | 2018-06-12 | Amazon Technologies, Inc. | Service-oriented system optimization using partial service relocation |
| US9998330B1 (en) | 2014-06-19 | 2018-06-12 | Amazon Technologies, Inc. | Service-oriented system optimization using edge relocation |
| US10621064B2 (en) | 2014-07-07 | 2020-04-14 | Oracle International Corporation | Proactive impact measurement of database changes on production systems |
| US9967164B2 (en) * | 2014-09-02 | 2018-05-08 | Netscout Systems Texas, Llc | Methods and devices to efficiently determine node delay in a communication network |
| US10469396B2 (en) | 2014-10-10 | 2019-11-05 | Pegasystems, Inc. | Event processing with enhanced throughput |
| US9596253B2 (en) | 2014-10-30 | 2017-03-14 | Splunk Inc. | Capture triggers for capturing network data |
| US10334085B2 (en) | 2015-01-29 | 2019-06-25 | Splunk Inc. | Facilitating custom content extraction from network packets |
| US10834065B1 (en) | 2015-03-31 | 2020-11-10 | F5 Networks, Inc. | Methods for SSL protected NTLM re-authentication and devices thereof |
| US9647950B2 (en) | 2015-05-11 | 2017-05-09 | Ebay Inc. | System and method of site traffic control |
| US10404698B1 (en) | 2016-01-15 | 2019-09-03 | F5 Networks, Inc. | Methods for adaptive organization of web application access points in webtops and devices thereof |
| US10698599B2 (en) | 2016-06-03 | 2020-06-30 | Pegasystems, Inc. | Connecting graphical shapes using gestures |
| US10698647B2 (en) | 2016-07-11 | 2020-06-30 | Pegasystems Inc. | Selective sharing for collaborative application usage |
| US10810230B2 (en) * | 2017-03-21 | 2020-10-20 | Salesforce.Com, Inc. | Thread record provider |
| US10803080B2 (en) * | 2017-03-21 | 2020-10-13 | Salesforce.Com, Inc. | Thread record provider |
| CN109284212A (zh) * | 2017-07-21 | 2019-01-29 | 中兴通讯股份有限公司 | 一种跟踪、监控软件行为的方法、装置及设备 |
| US11386058B2 (en) | 2017-09-29 | 2022-07-12 | Oracle International Corporation | Rule-based autonomous database cloud service framework |
| US11327932B2 (en) | 2017-09-30 | 2022-05-10 | Oracle International Corporation | Autonomous multitenant database cloud service framework |
| US11048488B2 (en) | 2018-08-14 | 2021-06-29 | Pegasystems, Inc. | Software code optimizer and method |
| US11086963B2 (en) | 2018-12-05 | 2021-08-10 | Ebay Inc. | Adaptive data platforms |
| US11567945B1 (en) | 2020-08-27 | 2023-01-31 | Pegasystems Inc. | Customized digital content generation systems and methods |
| KR102503272B1 (ko) * | 2021-02-24 | 2023-02-24 | 주식회사 윈스 | 네트워크 장비에서의 패킷 프로세싱 방법, 장치 및 컴퓨터 프로그램 |
Family Cites Families (53)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4369493A (en) * | 1979-05-14 | 1983-01-18 | Metropolitan Life Insurance Company | Response time monitor |
| JPH07120299B2 (ja) * | 1986-01-10 | 1995-12-20 | 株式会社日立製作所 | マルチプロセッサシステムの試験方法 |
| US4894823A (en) * | 1986-02-28 | 1990-01-16 | American Telephone And Telegraph Company | Time stamping for packet system nodes |
| JP2570289B2 (ja) * | 1986-05-20 | 1997-01-08 | 日本電気株式会社 | 監視方式 |
| US5045994A (en) * | 1986-09-23 | 1991-09-03 | Bell Communications Research, Inc. | Emulation process having several displayed input formats and output formats and windows for creating and testing computer systems |
| US4905171A (en) * | 1987-11-09 | 1990-02-27 | International Business Machines Corporation | Workstation controller performance monitor |
| US5101402A (en) | 1988-05-24 | 1992-03-31 | Digital Equipment Corporation | Apparatus and method for realtime monitoring of network sessions in a local area network |
| US4894846A (en) * | 1988-06-30 | 1990-01-16 | Digital Equipment Corporation | Method for maintaining a correct time in a distributed processing system |
| US4930093A (en) * | 1988-08-01 | 1990-05-29 | Ncr Corporation | Method of measuring message response time performance of a data processing system including data terminals |
| US5067107A (en) * | 1988-08-05 | 1991-11-19 | Hewlett-Packard Company | Continuous computer performance measurement tool that reduces operating system produced performance data for logging into global, process, and workload files |
| US5247517A (en) | 1989-10-20 | 1993-09-21 | Novell, Inc. | Method and apparatus for analyzing networks |
| DE69019917T2 (de) * | 1989-11-06 | 1995-10-12 | Fujitsu Ltd | Schalterinformationsvorrichtung. |
| US5095444A (en) * | 1989-12-21 | 1992-03-10 | Legent Corporation | System and method for measuring inter-nodal transmission delays in a communications network |
| EP0477448B1 (en) | 1990-09-28 | 1995-07-12 | Hewlett-Packard Company | Network monitoring device and system |
| JPH04148242A (ja) | 1990-10-08 | 1992-05-21 | Fujitsu Ltd | ロード・モジュール実行時トレース処理方法 |
| US5245638A (en) * | 1990-10-29 | 1993-09-14 | Iowa State University Research Foundation, Inc. | Method and system for benchmarking computers |
| US5331574A (en) * | 1991-08-06 | 1994-07-19 | International Business Machines Corporation | System and method for collecting response times for exception response applications |
| US5351243A (en) | 1991-12-27 | 1994-09-27 | Digital Equipment Corporation | Monitor for packets on a communications network |
| US5303166A (en) * | 1992-04-14 | 1994-04-12 | International Business Machines Corporation | Method and system for automated network benchmark performance analysis |
| US5278901A (en) * | 1992-04-30 | 1994-01-11 | International Business Machines Corporation | Pattern-oriented intrusion-detection system and method |
| JPH05316170A (ja) | 1992-05-07 | 1993-11-26 | Matsushita Electric Ind Co Ltd | データモニタ装置 |
| US5430709A (en) | 1992-06-17 | 1995-07-04 | Hewlett-Packard Company | Network monitoring method and apparatus |
| US5553235A (en) * | 1992-10-23 | 1996-09-03 | International Business Machines Corporation | System and method for maintaining performance data in a data processing system |
| WO1994014118A1 (en) | 1992-12-17 | 1994-06-23 | Legent Corporation | System and method for generating local area network operating statistics |
| GB9303527D0 (en) * | 1993-02-22 | 1993-04-07 | Hewlett Packard Ltd | Network analysis method |
| US5862335A (en) * | 1993-04-01 | 1999-01-19 | Intel Corp. | Method and apparatus for monitoring file transfers and logical connections in a computer network |
| SE515419C2 (sv) * | 1993-06-15 | 2001-07-30 | Ericsson Telefon Ab L M | Förfarande och anordning för resekvensiering |
| US5491750A (en) * | 1993-12-30 | 1996-02-13 | International Business Machines Corporation | Method and apparatus for three-party entity authentication and key distribution using message authentication codes |
| US5706429A (en) | 1994-03-21 | 1998-01-06 | International Business Machines Corporation | Transaction processing system and method |
| US5619656A (en) | 1994-05-05 | 1997-04-08 | Openservice, Inc. | System for uninterruptively displaying only relevant and non-redundant alert message of the highest severity for specific condition associated with group of computers being managed |
| EP0696119B1 (de) | 1994-07-28 | 2003-09-24 | Alcatel | Verfahren zum Ermitteln einer Anzahl diskriminierter digitaler Dateneinheiten und zur Abschätzung der Antwortzeit |
| US5598535A (en) | 1994-08-01 | 1997-01-28 | International Business Machines Corporation | System for selectively and cumulatively grouping packets from different sessions upon the absence of exception condition and sending the packets after preselected time conditions |
| US5627886A (en) | 1994-09-22 | 1997-05-06 | Electronic Data Systems Corporation | System and method for detecting fraudulent network usage patterns using real-time network monitoring |
| US5491792A (en) * | 1994-09-23 | 1996-02-13 | Forney International, Inc. | Sequence of events system using a redundant analog I/O board system |
| US5675510A (en) * | 1995-06-07 | 1997-10-07 | Pc Meter L.P. | Computer use meter and analyzer |
| US5708780A (en) * | 1995-06-07 | 1998-01-13 | Open Market, Inc. | Internet server access control and monitoring systems |
| US5802302A (en) * | 1995-06-29 | 1998-09-01 | International Business Machines Corporation | System and method for response time measurement in high speed data transmission networks |
| US5563875A (en) | 1995-07-10 | 1996-10-08 | International Business Machines Corporation | Wrap-around route testing in packet communications networks |
| US5881051A (en) * | 1995-07-10 | 1999-03-09 | International Business Machines | Management of route testing in packet communications networks |
| US5781449A (en) | 1995-08-10 | 1998-07-14 | Advanced System Technologies, Inc. | Response time measurement apparatus and method |
| US6144961A (en) * | 1995-08-31 | 2000-11-07 | Compuware Corporation | Method and system for non-intrusive measurement of transaction response times on a network |
| US5826270A (en) | 1995-12-28 | 1998-10-20 | Csg Systems, Inc. | Methods and systems for client or customer-site transaction processing in a distributed database system |
| US6006242A (en) | 1996-04-05 | 1999-12-21 | Bankers Systems, Inc. | Apparatus and method for dynamically creating a document |
| US6018619A (en) | 1996-05-24 | 2000-01-25 | Microsoft Corporation | Method, system and apparatus for client-side usage tracking of information server systems |
| US5787253A (en) * | 1996-05-28 | 1998-07-28 | The Ag Group | Apparatus and method of analyzing internet activity |
| US5933602A (en) | 1996-07-31 | 1999-08-03 | Novell, Inc. | System for selecting command packet and corresponding response packet from communication stream of packets by monitoring packets sent between nodes on network |
| US5872976A (en) | 1997-04-01 | 1999-02-16 | Landmark Systems Corporation | Client-based system for monitoring the performance of application programs |
| US5838820A (en) | 1997-04-30 | 1998-11-17 | Bergman; Anthony J. | Pattern recognition apparatus and method |
| US6012096A (en) * | 1998-04-23 | 2000-01-04 | Microsoft Corporation | Method and system for peer-to-peer network latency measurement |
| US6070190A (en) | 1998-05-11 | 2000-05-30 | International Business Machines Corporation | Client-based application availability and response monitoring and reporting for distributed computing environments |
| US6205122B1 (en) * | 1998-07-21 | 2001-03-20 | Mercury Interactive Corporation | Automatic network topology analysis |
| US6477571B1 (en) | 1998-08-11 | 2002-11-05 | Computer Associates Think, Inc. | Transaction recognition and prediction using regular expressions |
| US6317787B1 (en) * | 1998-08-11 | 2001-11-13 | Webtrends Corporation | System and method for analyzing web-server log files |
-
1995
- 1995-08-10 US US08/513,435 patent/US5781449A/en not_active Expired - Lifetime
-
1996
- 1996-07-19 CA CA002229022A patent/CA2229022A1/en not_active Abandoned
- 1996-07-19 CN CN96197113A patent/CN1197521A/zh active Pending
- 1996-07-19 WO PCT/US1996/012035 patent/WO1997006494A1/en active IP Right Grant
- 1996-07-19 EP EP96924658A patent/EP0871938B1/en not_active Expired - Lifetime
- 1996-07-19 KR KR10-1998-0700999A patent/KR100473304B1/ko not_active IP Right Cessation
- 1996-07-19 IL IL12315496A patent/IL123154A/en not_active IP Right Cessation
- 1996-07-19 JP JP50844997A patent/JP3774729B2/ja not_active Expired - Fee Related
- 1996-07-19 AT AT96924658T patent/ATE371894T1/de not_active IP Right Cessation
- 1996-07-19 BR BR9610130-0A patent/BR9610130A/pt not_active IP Right Cessation
- 1996-07-19 DE DE69637228T patent/DE69637228T2/de not_active Expired - Lifetime
- 1996-07-19 AU AU65053/96A patent/AU699693B2/en not_active Ceased
-
1997
- 1997-05-20 US US08/858,953 patent/US5764912A/en not_active Expired - Lifetime
- 1997-07-18 US US08/896,749 patent/US5838920A/en not_active Expired - Lifetime
-
1998
- 1998-02-10 MX MX9801142A patent/MX9801142A/es not_active IP Right Cessation
- 1998-11-05 US US09/186,906 patent/US6493754B1/en not_active Expired - Lifetime
- 1998-12-16 US US09/212,836 patent/US6308211B1/en not_active Expired - Lifetime
-
1999
- 1999-07-28 US US09/363,001 patent/US8255511B1/en not_active Expired - Fee Related
-
2002
- 2002-04-09 US US10/119,465 patent/US6522631B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| US5764912A (en) | 1998-06-09 |
| EP0871938B1 (en) | 2007-08-29 |
| DE69637228T2 (de) | 2008-06-19 |
| MX9801142A (es) | 1998-11-30 |
| US20020110091A1 (en) | 2002-08-15 |
| AU699693B2 (en) | 1998-12-10 |
| US5838920A (en) | 1998-11-17 |
| DE69637228D1 (de) | 2007-10-11 |
| IL123154A (en) | 2002-09-12 |
| WO1997006494A1 (en) | 1997-02-20 |
| EP0871938A1 (en) | 1998-10-21 |
| KR19990036331A (ko) | 1999-05-25 |
| CN1197521A (zh) | 1998-10-28 |
| IL123154A0 (en) | 1998-09-24 |
| AU6505396A (en) | 1997-03-05 |
| US8255511B1 (en) | 2012-08-28 |
| ATE371894T1 (de) | 2007-09-15 |
| BR9610130A (pt) | 2000-06-20 |
| KR100473304B1 (ko) | 2005-05-16 |
| JPH11510660A (ja) | 1999-09-14 |
| US5781449A (en) | 1998-07-14 |
| CA2229022A1 (en) | 1997-02-20 |
| EP0871938A4 (en) | 2005-09-07 |
| US6522631B2 (en) | 2003-02-18 |
| US6308211B1 (en) | 2001-10-23 |
| US6493754B1 (en) | 2002-12-10 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3774729B2 (ja) | 応答時間測定装置及び方法 | |
| US8495006B2 (en) | System analysis program, system analysis method, and system analysis apparatus | |
| AU770611B2 (en) | Transaction recognition and prediction using regular expressions | |
| EP2590081B1 (en) | Method, computer program, and information processing apparatus for analyzing performance of computer system | |
| US6804627B1 (en) | System and method for gathering and analyzing database performance statistics | |
| EP2698712B1 (en) | Computer program, method, and information processing apparatus for analyzing performance of computer system | |
| JP5471859B2 (ja) | 解析プログラム、解析方法、および解析装置 | |
| US20060235742A1 (en) | System and method for process evaluation | |
| US20040122942A1 (en) | Method, system, and data structure for monitoring transaction performance in a managed computer network environment | |
| US20060047623A1 (en) | Information transmission system by collaborative filtering, information processing apparatus for use with information processing system and program for use with information processing apparatus | |
| US20040059544A1 (en) | Software system and methods for analyzing the performance of a server | |
| JP2003523578A (ja) | ネットワーク上の対話の妥当性を決定するためのシステムおよび方法 | |
| US20050108384A1 (en) | Analysis of message sequences | |
| US20070140295A1 (en) | Packet data analysis program, packet data analyzer, and packet data analysis method | |
| CN109274669A (zh) | 一种基于在线流量镜像旁路waf反向代理方法 | |
| US9258203B1 (en) | Monitoring computer performance metrics utilizing baseline performance metric filtering | |
| CN110222084B (zh) | 热点设备监控信息的上报方法及装置、存储介质、终端 | |
| US20100128615A1 (en) | Method and apparatus for the discrimination and storage of application specific network protocol data from generic network protocol data | |
| JP2001094602A (ja) | 不正アクセス検知装置 | |
| CN115378906A (zh) | 一种基于vpn框架的本地dns代理方法、装置、设备及介质 | |
| CN117880463A (zh) | 一种考试监控录像传输方法、装置及系统 | |
| CN117097578A (zh) | 一种网络流量的安全监控方法、系统、介质及电子设备 | |
| Nguyen | User Behaviour in Web Surfing | |
| JPH08227388A (ja) | システム分析装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20040825 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20041102 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050202 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20050322 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20050421 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| LAPS | Cancellation because of no payment of annual fees |