JP7312208B2 - ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム - Google Patents

ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム Download PDF

Info

Publication number
JP7312208B2
JP7312208B2 JP2021049925A JP2021049925A JP7312208B2 JP 7312208 B2 JP7312208 B2 JP 7312208B2 JP 2021049925 A JP2021049925 A JP 2021049925A JP 2021049925 A JP2021049925 A JP 2021049925A JP 7312208 B2 JP7312208 B2 JP 7312208B2
Authority
JP
Japan
Prior art keywords
service system
stress test
service
monitoring data
request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2021049925A
Other languages
English (en)
Other versions
JP2022003507A (ja
Inventor
ワン、ツォーユイ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Publication of JP2022003507A publication Critical patent/JP2022003507A/ja
Application granted granted Critical
Publication of JP7312208B2 publication Critical patent/JP7312208B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/06Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063Operations research, analysis or management
    • G06Q10/0639Performance analysis of employees; Performance analysis of enterprise or organisation operations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/50Testing arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3433Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment for load management
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/22Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/24Marginal checking or other specified testing methods not covered by G06F11/26, e.g. race tests
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3419Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment by assessing time
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466Performance evaluation by tracing or monitoring
    • G06F11/3495Performance evaluation by tracing or monitoring for systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5003Managing SLA; Interaction between SLA and QoS
    • H04L41/5009Determining service level performance parameters or violations of service level contracts, e.g. violations of agreed response time or mean time between failures [MTBF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/508Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement
    • H04L41/5096Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement wherein the managed service relates to distributed or central networked applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/81Threshold
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0817Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Strategic Management (AREA)
  • Development Economics (AREA)
  • Educational Administration (AREA)
  • Economics (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Debugging And Monitoring (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Testing And Monitoring For Control Systems (AREA)

Description

本出願の実施例はコンピュータ技術分野に関し、具体的にクラウドコンピューティング技術分野に関し、特にストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラムに関する。
インターネット産業の発展に伴い、製品プロモーション、新製品の発売、その他のイベントがますます多くなり、次第に登場し、これらのイベントの主な特徴は、トラフィックのピークをもたらし、バックエンドサービスの容量に対するアタックが激しくなり、クラウド時代の背景において、大部分の企業の基礎となるアーキテクチャはいずれもクラウドを基にして構築され、そのため、クラウド環境において、如何に容量解析と評価を合理的に行うかは多くのインターネット企業が直面している1つの重要な課題である。
ストレステストは、システムにストレスを加えることにより、システムの最大負荷能力を測定するための方法であり、容量解析と評価を行う際に、効果的なストレステストに依存し、ストレステスト技術の正確性とテスト効率はシステムの容量解析及び評価に直接的な影響を与える。
ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラムを提供する。
第1態様において、少なくとも1つのテストトラフィックを含む事前設定されたストレス・テスト・コンフィグレーション情報に基づいて、クラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送することと、サービスシステムによるストレス・テスト・リクエストに応答した性能監視データを取得することと、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定することと、を備えるストレステスト方法を提供する。
第2態様において、少なくとも1つのテストトラフィックを含む事前設定されたストレス・テスト・コンフィグレーション情報に基づいて、クラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送するように構成されるリクエストユニットと、サービスシステムによるストレス・テスト・リクエストに応答した性能監視データを取得するように構成される取得ユニットと、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定するように構成される確定ユニットと、を備えるストレステスト装置を提供する。
第3態様において、少なくとも1つのプロセッサと、少なくとも1つのプロセッサと通信可能に接続されるメモリとを備え、メモリに、少なくとも1つのプロセッサにより実行可能な指令が格納され、指令は少なくとも1つのプロセッサにより実行されると、少なくとも1つのプロセッサに本出願の第1態様のいずれかの実施形態に記載の方法を実行させる、電子機器を提供する。
第4態様において、コンピュータ指令が格納される非一時的なコンピュータ可読記憶媒体であって、コンピュータ指令は、本出願の第1態様のいずれかの実施形態に記載の方法をコンピュータに実行させる非一時的なコンピュータ可読記憶媒体を提供する。
第5態様において、プロセッサにより実行されると、本出願の第1態様のいずれかの実施形態に記載の方法を実現するコンピュータプログラムを提供する。
本出願の実施例により提供されるストレステスト方法及び装置は、まず、事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムに対してストレス・テスト・リクエストを発送し、次に、サービスシステムがストレス・テスト・リクエストの性能監視データに応答し、最後に、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定する。そのため、本出願は事前設定されたストレス・テスト・コンフィグレーション情報に基づいてサービスシステムにストレス・テスト・リクエストを発送することで、クラウドサービスにおけるサービスシステムに予め要求したストレステストを発送でき、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定し、テスト・コンフィグレーションと性能監視データの一致性を保持する上で、クラウドサービスにおけるサービスシステムに対してストレステストを便利かつ効率的に行うことができ、且つ、低コストで正確なリクエスト容量評価結果を取得できる。
この部分に記載された内容は、本出願の実施例の肝要又は重要な特徴を標識するものではなく、本出願の範囲を限定するものでもないことを理解すべきである。本出願のほかの特徴は以下の説明を通して容易に理解される。
図面は本解決手段をさらによく理解させるためのものであり、本出願を限定するものではない。
図1は本出願のストレステスト方法による1つの実施例のフローチャートである。 図2は本出願の実施例による適用可能な例示的なシステムアーキテクチャを示す図である。 図3は本出願のストレステスト方法によるもう1つの実施例のフローチャートである。 図4は本出願のストレステスト方法による第3の実施例のフローチャートである。 図5は本出願のストレステスト装置の実施例による構造概略図である。 図6は本出願の実施例のストレステスト方法を実現するための電子機器のブロック図である。
以下は図面を参照して本出願の例示的な実施形態を説明し、ここでは理解を助けるため、本出願の実施形態の様々な詳細が記載されるが、これらは単なる例示であるに過ぎない。従って、本出願の範囲および要旨を逸脱しない限り、当業者が本明細書の実施形態に対して様々な変更と修正を行うことができることを理解すべきである。なお、以下の説明では、明確化および簡略化のため、公知の機能および構成については説明を省略する。
図1は本出願のストレステスト方法による1つの実施例のフロー100を示す。上記ストレステスト方法は以下のステップを含む。
ステップ101、事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムに対してストレス・テスト・リクエストを発送する。
本実施例において、事前設定されたストレス・テスト・コンフィグレーション情報はストレステストの肝要なコンフィグレーション情報の集合であり、少なくとも1つのテストトラフィックを含む。ストレス・テスト・コンフィグレーション情報はストレステストオブジェクト、ストレス受けオブジェクト、トラフィックサイズ、組成比、トラフィック内容などのコンフィグレーション情報をさらに含むことができる。事前設定されたストレス・テスト・コンフィグレーション情報のほか、ストレス・テスト・リクエストはさらにクラウドサービスにおけるサービスシステムの識別子などを含んでもよい。サービスシステムの識別子を用いてテスト対象であるサービスシステムを見つけることができ、具体的に、サービスシステムの識別子はサービスシステムのエントランスドメイン又はIPアドレスであってもよい。
クラウドサービスはインターネットの関連サービスに基づく増加、利用及びインタラクションモードであり、インターネットを介した動的で、容易に拡張可能で、しばしば仮想化されたリソースの提供が一般に含まれる。クラウドサービスとは、オンデマンドで簡単に拡張可能な方法で、ネットワークを介して要求されたサービスを取得することを指す。クラウドサービスは、対応するサービスシステムを構築するために、企業が必要とするソフトウェア、ハードウェア、および/またはデータをクラウドネットワークに配置することができる。クラウドサービスプロバイダは、サーバ、仮想マシン、ネットワークセグメントなどのサービスリソースを企業に提供する。
現在では、一般的なクラウドサービスはパブリッククラウド(Public Cloud)とプライベートクラウド(Private Cloud)の二種類がある。パブリッククラウドはもっとも基礎的なサービスであり、複数のクライアントは1つのサービスプロバイダのシステムリソースを共有でき、機器をセットアップしたり、管理者を配置したりすることなく、プロフェッショナルITサービスを利用できる。
プライベートクラウドは1つのクライアントが単一のクライアントによって使用されるように構築されており、データ、安全性およびサービス品質に対するもっとも効果的な制御を提供する。該クライアントはインフラストラクチャを持ち、且つこのインフラストラクチャ上でアプリケーションをデプロイする方式を制御できる。プライベートクラウドはクライアントのデータセンタのファイアウォール内にデプロイすることが可能であり、それらを1つの安全なコロケーションプラットフォームにもデプロイ可能であり、プライベートクラウドのコア属性は独自のリソースである。
本実施例において、サービスシステムは、クラウドサービスのリソースを共有し、且つ1つのサービス機能(例えば、支払い、記憶、権限)を実現できるシステムであり、図2に示されるように、サービスシステムはクライアントサービスシステムであってもよい。クライアントサービスシステムはエントランスモジュール、データベース及び複数のサービスモジュールA、B、Cを備え、本出願のストレステスト方法を通してサービスシステムの容量評価を実現できる。
サービスシステムのサービスリクエスト容量情報は、サービスシステムが負担できるサービスリクエスト量を示す情報であり、最大サービスリクエスト速度、最大サービスリクエスト量、各事前設定されたタイプのリクエストの最大リクエスト量又はリクエスト速度のうちの少なくとも1つを含むが、それらに限定されない。
具体的に、ストレステスト方法が実行される実行主体は、クラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送する前、まず、事前設定されたストレス・テスト・コンフィグレーション情報を取得できる。具体的に、ユーザ端末から取得するか、メモリから読み取るなどの方式により、事前設定されたストレス・テスト・コンフィグレーション情報を取得することができる。事前設定されたストレス・テスト・コンフィグレーション情報は、本体が事前に構成した情報であってもよく、実行主体が確定した変更可能な情報であってもよく、繰り返して利用できる。
本実施例の一部のオプション的な実施形態において、ストレス・テスト・コンフィグレーション情報を取得することは、サービスシステムにおけるユーザが設定した事前設定されたストレス・テスト・コンフィグレーション情報を取得することを含む。実行主体は、ユーザ端末を通して、ユーザが設定した事前設定されたストレス・テスト・コンフィグレーション情報を取得でき、ストレス・テスト・コンフィグレーション情報を取得する正確性と即時性を高め、さらに、図2に示されるストレステストプラットフォームを設置でき、それにより、サービスシステムのユーザが該ストレステストプラットフォームにアクセスして、サービスシステムに対応する事前設定されたストレス・テスト・コンフィグレーション情報を設定することができ、ユーザが事前設定されたストレス・テスト・コンフィグレーション情報をストレステストプラットフォーム又はユーザ端末にすでに設定した場合、即ち、ストレステストプラットフォーム又はユーザ端末に履歴コンフィグレーション情報がある場合、上記実行主体は、履歴コンフィグレーション情報を現在のストレス・テスト・リクエストに対応するストレス・テスト・コンフィグレーション情報として取得でき、ストレス・テスト・コンフィグレーション情報の再利用度を高める。
上記事前設定されたストレス・テスト・コンフィグレーション情報に基づいてテスト対象のサービスシステムにストレス・テスト・リクエストを発送し、具体的には、設定された少なくとも1つのテストトラフィックに基づいてユーザのアクセス操作を模擬し、アクセスリクエストをサービスシステムに発送し且つサービスシステムのフィードバックを待つことができる。
ステップ102、サービスシステムがストレス・テスト・リクエストに応答する性能監視データを取得する。
本実施例において、サービスシステムはストレス・テスト・リクエストに応答し、ストレス・テスト・リクエストの内容に基づいて、対応するデータ処理とフィードバック動作とを実行することができる。
性能監視データは、サービスシステムの性能を評価する監視データであり、該性能監視データは、CPU使用率、メモリ使用率、読み取り/書き込み使用率、CPU入出力トラフィック、リクエスト応答時間、エラーコードなどの少なくとも1つを含むが、それらに限定されない。性能監視データは、サービスシステムのフィードバック結果の正確性指標、フィードバック時間指標など、サービスシステム処理効率又は処理能力を示すデータ(例えば、ストレス・テスト・リクエストに対するサービスシステムの応答時間)、及び/又は、ストレステスト過程中に、サービスシステムのリソース使用状況を示す性能データ(ネットワークカードのI/Oデータなど)を含むことができる。
ステップ103、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定する。
本実施例において、サービスシステムのサービスリクエスト容量情報は、サービスシステムが同時に負担できるか又はサポートできる最大リクエスト量を指し、即ちストレステスト容量であり、サービスリクエスト容量情報はサービスシステムに関連するストレステスト容量の情報であり、例えば、サービスリクエスト容量情報は、様々なリクエストタイプの最大リクエスト量情報を含み、さらに、サービスモジュールにおけるリソースボトルネックモジュール、サービスシステムのリソース拡張需要量などを含んでもよい。
性能監視データに基づいてサービスシステムの性能を評価でき、例えば、性能データの値が所属する区間を通してサービスシステムの性能レベルを確定することができる。その後、ストレス・テスト・コンフィグレーション情報における対応するテストトラフィックによって、対応するテストトラフィックにおけるサービスシステムの性能を確定できる。且つ、さらに、各テストトラフィックにおけるサービスシステムの性能によって、サービスシステムが、対応するテストトラフィックを負担できるか否かを確定し、或いは、サービスシステムが負担できる最大テストトラフィックを確定し、さらに、サービスシステムのサービスリクエスト容量情報を確定することができる。
異なる性能監視データについて、異なる解析方案を作成することができ、例えば、ストレステストプラットフォームがフィードバックしたテストコンフィグレーション情報に対応する性能監視データについて、所定時間内の性能監視データの平均値を取ることができ、平均値が平均値閾値範囲内にあることに応答して、サービスシステムのサービスリクエスト容量情報がストレス・テスト・リクエストを満たすと判定し、即ち、サービスシステムのリクエスト容量がストレス・テスト・リクエストの中のリクエスト量以上であると判定できる。
本出願の実施例に係るストレステスト方法は、まず、事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムに対してストレス・テスト・リクエストを発送し、次に、サービスシステムがストレス・テスト・リクエストの性能監視データに応答し、最後に、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定する。そのため、本出願の事前設定されたストレス・テスト・コンフィグレーション情報に基づいてサービスシステムにストレス・テスト・リクエストを発送することは、クラウドサービスにおけるサービスシステムに事前設定された所望のストレステストを発送でき、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定し、テスト・コンフィグレーション情報と性能監視データの一致性を保持する上で、クラウドサービスにおけるサービスシステムに対してストレステストを便利かつ効率的に行うことができ、且つ、低コストで正確なリクエスト容量評価結果を取得できる。
図2は本出願の実施例が適用可能な例示的なシステムアーキテクチャ図を示し、該アーキテクチャ図において、インテリジェントな解析システムは上記実施例のストレステスト方法を実行できる実行主体とされてもよい。さらに、該システムアーキテクチャ図はストレステストプラットフォーム、クライアントサービスシステム及び監視システムを備える。ここで、ストレステストプラットフォームはストレス・テスト・コンフィグレーション情報の設定インターフェースを提供し、クライアントサービスシステムの稼働・保守作業員は、クラウドサービスにおけるクライアントサービスシステムに対してストレス・テスト・リクエストを発送するために、ストレステストプラットフォームを通してストレス・テスト・コンフィグレーション情報を設定することができる。クライアントサービスシステムはエントランスモジュール、データベース及び複数のサービスモジュールA、B、Cを備え、ストレステストプラットフォーム及び監視システムはエントランスモジュールを通してクライアントサービスシステムにおける各サービスモジュールA、B、Cにアクセスし、且つ、サービスモジュールA、Bはそれぞれの情報をデータベースに格納することができる。
さらに、ストレス・テスト・コンフィグレーション情報は少なくとも1つのテストトラフィックを備え、インテリジェント解析システムはさらにストレステストプラットフォームを通してクラウドサービスにおけるクライアントサービスシステムに対してストレス・テスト・リクエストを発送することができ、ストレステストプラットフォームはさらに、クライアントサービスシステムがストレス・テスト・リクエストに応答した動作データ(例えば、応答時間など)を記録し、且つインテリジェント解析システムに送信することができる。
さらに、図2に示される監視システムは、クラウドサービスにより提供される監視システムであってもよく、図2に示される監視システムは、クライアントサービスシステムがストレス・テスト・リクエストを受信した後、クライアントサービスシステムにおける様々なタイプのリソースの使用状況を監視することができる。監視システムはさらにクライアントサービスシステムのリソース使用状況をインテリジェント解析システムに送信することができる。
本出願のもう1つの実施例において、性能監視データは、サービスシステム及びサービスシステムに含まれる各サービスモジュールがストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データを備えてもよい。さらに図3に示されるように、図3は本出願のストレステスト方法によるもう1つの実施例のフロー300を示し、上記ストレステスト方法は以下のステップを含む。
ステップ301、各テストリクエストトラフィックに基づいてサービスシステムにストレス・テスト・リクエストをそれぞれ発送する。
具体的に、テストリクエストトラフィックはサービスシステムに発送されるトラフィックであり、それに対応してストレス・テスト・コンフィグレーション情報は該テストリクエストトラフィックのコンフィグレーション要求を含み、例えば、1つのテストリクエストトラフィックに対応するストレス・テスト・コンフィグレーション情報は、ストレステストオブジェクト、ストレステスト内容、トラフィックサイズ、トラフィック比率、応答時間の閾値、リターンエラー率の閾値を備える。ストレステストオブジェクトはクライアントサービスシステムなどであり、ストレステスト内容はテストリクエストトラフィックの内容などであり、トラフィックサイズは上限10wqpsなどであり、トラフィック比率は、ログイン類が50%、ブラウズ類が30%、支払い類が20%を占めすなどを備えてもよい。
ステップ302、サービスシステムがストレス・テスト・リクエストに応答するリソース類監視データを取得する。
具体的には、リソース占有量のリソース類監視データは、サービスシステムの各サービスモジュールのCPU使用率、メモリ占有率のいずれかを含むことができるが、それらに限定されない。
ステップ303、サービスシステムの各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックに伴う変化に基づいて、サービスシステムのリソースボトルネックモジュールを確定する。
具体的には、ストレス・テスト・コンフィグレーション情報に設定されたリクエストトラフィックの上限により限定された範囲内、ストレス・テスト・リクエストのリクエストトラフィックを次第に増大し、サービスシステムのリソース類監視データのトラフィックの増大に伴う変化を測定することができる。リソース類監視データは1つのトラフィック位置に急に変化する場合(急に大幅に上がるか或いは下がる)、サービスシステムはボトルネック状態に達したことを示す。この時、サービスシステムの異なるサービス処理モジュールのリソース類監視データのテストリクエストトラフィックに応じた変化をさらに解析し、さらにリソースボトルネックモジュールを確定することができる。Cannikin Lawという法則に基づいてサービスシステムのリソースボトルネックモジュールを確定することができる。本実施例において、サービスシステムがサポートできる最大ストレス・テスト・リクエストトラフィックは、各サービスモジュールにおけるストレス・テスト・リクエストをサポートする能力が一番低いサービスモジュールにより決められ、該ストレス・テスト・リクエストをサポートする能力が一番低いサービスモジュールはリソースボトルネックモジュールである。
具体的に、各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックによる変化を監視する過程中、サービスシステムにおいて、各サービス処理モジュールのリソース類監視データにおけるテストリクエストトラフィックの増加に伴って最初に急に変化(例えば、突然低下又は突然上昇)するサービス処理モジュールを、サービスシステムのリソースボトルネックモジュールとして確定することができる。
本実施例により提供されるストレステスト方法は、ストレステスト過程中に、各テストリクエストトラフィックに基づいてサービスシステムにストレス・テスト・リクエストをそれぞれ発送し、サービスシステムにおける各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックに伴う変化に基づいて、サービスシステムのリソースボトルネックモジュールを確定することができ、リソースボトルネックモジュールを正確に特定でき、したがってさらに指向性を持つ評価結果を取得でき、サービスシステムのリソースコンフィグレーションに効果的なサポートを提供し、トラフィックピークになる時にサービスシステムがトラフィックによって衝撃されて正常に稼働できないことを効果的に回避できる。
本実施例の一部のオプション的な実施形態において、上記性能監視データは、サービスシステムの応答能力を示す動作類監視データを含む。
具体的に、動作類監視データは、平均応答時間、90パーセンタイル応答時間、リターンエラー率のいずれかを含むが、それらに限定されない。
上記事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定することは、サービスシステムにおいて、ストレス・テスト・コンフィグレーション情報における最大テストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えていないことを確定したことに応答して、サービスシステムのサービスリクエスト容量情報が最大テストリクエストトラフィックの要求を満たすと判定することを備える。
動作類監視データに対応する閾値範囲は、動作類監視データのタイプに基づいて設定されることができ、ここで、動作類監視データのタイプは時間、エラー許容率を備える。例示として、動作類監視データが時間タイプのデータである場合、動作類監視データの閾値は1000msに設定されてもよく、動作類監視データはエラー許容率タイプのデータである場合、動作類監視データの閾値はリターンエラー率90%に設定されてもよい。
さらに、最大テストリクエストトラフィックはストレス・テスト・コンフィグレーション情報に設定されたすべてのテストリクエストトラフィックの上限であり、サービスシステムのサービスリクエスト容量情報が最大テストリクエストトラフィックの要求を満たす場合、サービスシステムのサービスリクエスト容量情報はストレステスト要求を満たす容量情報である。該実施形態は動作類監視データに対して閾値の解析を行い、したがって、サービスシステムのサービスリクエスト容量を素早く評価できる。
本出願のもう1つの実施例において、性能監視データは、サービスシステムの応答能力を示す動作類監視データを備え、性能監視データは、サービスシステム及びサービスシステムに含まれる各サービスモジュールがストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データをさらに備え、即ち、性能監視データは動作類監視データとリソース類監視データとを備える。さらに図4に示されるように、図4は本出願のストレステスト方法による第3の実施例のフロー400を示し、上記ストレステスト方法は以下のステップを含む。
ステップ401、各テストリクエストトラフィックに基づいてサービスシステムにストレス・テスト・リクエストをそれぞれ発送する。
ステップ402、サービスシステムがストレス・テスト・リクエストに応答した動作類監視データとリソース類監視データとを取得する。
ステップ403、サービスシステムの、ストレス・テスト・コンフィグレーション情報における少なくとも1つのテストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えたと判断されたことに応答して、サービスシステムの各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックに伴う変化に基づいて、サービスシステムのリソースボトルネックモジュールを確定する。
本実施例において、サービスシステムにおいて、ストレス・テスト・コンフィグレーション情報における少なくとも1つのテストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えた場合、サービスシステムのサービスリクエスト容量情報が最大テストリクエストトラフィックの要求を満たさないことがわかる。
本実施例において、まず、テストリクエストトラフィックの動作類監視データを評価し、少なくとも1つの動作類監視データが閾値範囲を超えた場合、リソース類監視データのテストリクエストトラフィックに伴う変化に基づいて、リソースボトルネックモジュールをさらに確定し、サービスシステムの漸進的な容量評価戦略を通して、ストレステスト結果の解析効率と解析結果の信頼性を高める。
図4に示される実施例の一部のオプション的な実施形態において、上記サービスシステムの各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックに伴う変化に基づいて、サービスシステムのリソースボトルネックモジュールを確定するステップの後、さらにリソースボトルネックモジュールに対応するリソース類監視データに基づいて、サービスシステムのリソース拡張需要情報を推測することができる。
リソースボトルネックモジュールは、ストレステスト過程中に、サービスシステムにおけるリソースの突然変化が最初に現れたサービスモジュールである。各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックに伴う変化を監視する過程中、ストレステスト方法が実行される実行主体は、サービスシステムにおいて、各サービス処理モジュールのリソース類監視データにリソースの突然変化(例えば、突然低下又は突然上昇)が発生したか否かを判断することにより、サービスシステムのリソースボトルネックモジュールを確定する。
さらに、リソースボトルネックモジュールが急に変化する勾配又は比率によって、サービスシステムのリソース拡張量を推測することができる。
このオプション的な実施形態において、性能監視データは、動作類監視データとリソース類監視データを含み、サービスシステムのリソースボトルネックモジュールを確定した後、リソースボトルネックモジュールに対応するリソース類監視データに基づいてサービスシステムのリソース拡張需要情報を推測し、サービスシステムの拡張に根拠を提供し、サービスシステムの拡張に効果的なサポートを提供する。
さらに図5に示されるように、上記各図に示される方法の実現として、本出願はストレステスト装置の1つの実施例を提供し、該装置の実施例は図1に示される方法の実施例に対応し、該装置は具体的に様々な電子機器に適用できる。
図5に示されるように、本実施例により提供されるストレステスト装置500は、リクエストユニット501と、取得ユニット502と、確定ユニット503とを備える。ここで、上記リクエストユニット501は、事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムに対してストレス・テスト・リクエストを発送するように構成され、ここで、ストレス・テスト・コンフィグレーション情報は少なくとも1つのテストトラフィックを含む。上記取得ユニット502は、サービスシステムがストレス・テスト・リクエストに応答した性能監視データを取得するように構成されてもよい。上記確定ユニット503は、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定するように構成されてもよい。
本実施例において、ストレステスト装置500において、リクエストユニット501、取得ユニット502、確定ユニット503の具体的な処理及びそれがもたらす技術的効果は、それぞれ図1に対応する実施例におけるステップ101、ステップ102およびステップ103の関連する説明を参照することができるため、ここで説明を省略する。
本実施例の一部のオプション的な実施形態において、上記ストレステスト装置500はさらにコンフィグレーションユニット(図示されていない)を備える。ここで、コンフィグレーションユニットは、サービスシステムにおけるユーザが設定した事前設定されたストレス・テスト・コンフィグレーション情報を取得するように構成されてもよい。
本実施例の一部のオプション的な実施形態において、上記リクエストユニット501はさらに、各テストリクエストトラフィックに基づいてそれぞれサービスシステムにストレス・テスト・リクエストを発送するように構成され、上記性能監視データは、サービスシステム及びサービスシステムに含まれる各サービスモジュールがストレス・テスト・リクエストのリソース占有量を示すリソース類監視データを備え、上記確定ユニット503はリソースモジュール(図示されていない)を備える。上記リソースモジュールは、サービスシステムの各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックに伴う変化に基づいて、サービスシステムのリソースボトルネックモジュールを確定するように構成されてもよい。
本実施例の一部のオプション的な実施形態において、上記性能監視データは、サービスシステムの応答能力を示す動作類監視データを含み、確定ユニット503は動作類モジュール(図示されていない)を備える。ここで、上記動作類モジュールは、サービスシステムにおいて、ストレス・テスト・コンフィグレーション情報における最大テストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えていないと判断されたことに応答して、サービスシステムのサービスリクエスト容量情報が最大テストリクエストトラフィックの要求を満たすと判定するように構成されてもよい。
本実施例の一部のオプション的な実施形態において、上記リクエストユニット501は、各テストリクエストトラフィックに基づいてサービスシステムにストレス・テスト・リクエストをそれぞれ発送するようにさらに構成される。上記性能監視データは、サービスシステム及びサービスシステムに含まれる各サービスモジュールがストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データをさらに備える。上記確定ユニット503はリソースモジュール(図示されていない)をさらに備える。上記リソースモジュールは、サービスシステムにおいて、ストレス・テスト・コンフィグレーション情報における少なくとも1つのテストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えたと判断されたことに応答して、サービスシステムの各サービス処理モジュールのリソース類監視データのテストリクエストトラフィックに伴う変化に基づいて、サービスシステムのリソースボトルネックモジュールを確定するように構成されてもよい。
本実施例の一部のオプション的な実施形態において、上記確定ユニット503はさらに拡張モジュール(図示されていない)を備える。上記拡張モジュールは、リソースボトルネックモジュールに対応するリソース類監視データによってサービスシステムのリソース拡張需要情報を推測するように構成されてもよい。
本出願の実施例に係るストレステスト方法及び装置は、まず、事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムに対してストレス・テスト・リクエストを発送し、次に、サービスシステムがストレス・テスト・リクエストの性能監視データに応答し、最後に、事前設定されたストレス・テスト・コンフィグレーション情報と性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定する。そのため、本出願の事前設定されたストレス・テスト・コンフィグレーションに基づいてサービスシステムにストレス・テスト・リクエストを発送することは、クラウドサービスにおけるサービスシステムに事前設定されたストレステストを発送でき、事前設定されたストレス・テスト・コンフィグレーションと性能監視データとに基づいて、サービスシステムのサービスリクエスト容量情報を確定し、テスト・コンフィグレーションと性能監視データの一致性を保持する上で、クラウドサービスにおけるサービスシステムに対してストレステストを便利かつ効率的に行うことができ、且つ、低コストかつ正確なリクエスト容量評価結果を取得できる。
本出願の実施例により、本出願は電子機器と可読記憶媒体をさらに提供する。
図6に示されるように、本出願の実施例のストレステスト方法による電子機器のブロック図である。電子機器は、ラップトップコンピュータ、デスクトップコンピュータ、ワークステーション、パーソナルデジタルアシスタント、サーバ、ブレード型サーバ、メインフレームコンピュータおよびその他の適切なコンピュータ等の様々な形態のデジタルコンピュータを表す。また、電子機器は、個人デジタル処理、携帯電話、スマートフォン、ウェアラブル機器およびその他の類似するコンピューティングデバイス等の様々な形態のモバイルデバイスを表すことができる。なお、ここで示したコンポーネント、それらの接続関係、およびそれらの機能はあくまでも例示であり、ここで記述および/または要求した本出願の実施形態を限定することを意図するものではない。
図6に示すように、該電子機器は、1つまたは複数のプロセッサ601、メモリ602、および各コンポーネントを接続するためのインタフェース(高速インタフェースおよび低速インタフェースを含む)を含む。各コンポーネントは、互いに異なるバスで接続されており、共通のマザーボード上に実装されていてもよいし、必要に応じて他の方式で実装されていてもよい。プロセッサは、電子機器内で実行される指令を処理することができ、前記指令は、インタフェースに結合された表示装置等の外部入出力装置にグラフィカルユーザインタフェース(GUI,Graphical User Interface)のグラフィック情報を表示するために、メモリ内またはメモリ上に格納される指令を含む。他の実施形態では、必要に応じて、複数のプロセッサおよび/または複数のバスを、複数のメモリとともに使用することができる。また、複数の電子機器が接続されていてもよく、各機器は、例えば、サーバアレイ、ブレードサーバ群またはマルチプロセッサシステムなど、一部の必要な動作を提供する。図6では、1つのプロセッサ601を例としている。
メモリ602は、本出願に係る非一時的なコンピュータ可読記憶媒体である。ここで、メモリには、少なくとも1つのプロセッサに本出願に係るストレステスト方法を実行させるための少なくとも1つのプロセッサにより実行される指令が格納される。本出願の非一時的なコンピュータ可読記憶媒体はコンピュータ指令を格納し、該コンピュータ指令は、コンピュータに本出願に係るストレステスト方法を実行させるために用いられる。
メモリ602は、非一時的なコンピュータ可読記憶媒体として、非一時的なソフトウェアプログラム、非一時的なコンピュータ実行可能なプログラム並びに、例えば本出願の実施形態におけるストレステスト方法に対応するプログラム指令/モジュール(例えば、図5に示されるリクエストユニット501、取得ユニット502および確定ユニット503)などのモジュールを格納することに用いられる。プロセッサ601は、メモリ602に格納された非一時的なコンピュータ実行可能なプログラム、指令及びモジュールを実行することにより、サーバの様々な機能アプリケーション及びデータ処理を実行し、上記方法の実施例におけるストレステスト方法を実現する。
メモリ602は、オペレーティングシステム、少なくとも1つの機能に必要なアプリケーションを格納できるプログラム記憶領域、およびストレステスト方法を実行する電子機器の使用に作成されるデータ等を格納できるデータ記憶領域を備えてもよい。また、メモリ602は高速ランダムアクセスメモリを含むことができ、また非一時的メモリ(例えば、少なくとも1つの磁気ディスク記憶装置、フラッシュメモリデバイスまたはその他の非一時的ソリッドステート記憶装置)を含み得る。いくつかの実施形態において、メモリ602は任意選択でプロセッサ601に対して遠隔に設置されたリモートメモリを含み、これらのリモートメモリはネットワークを介してストレステスト方法を実行する電子機器に接続することができる。上記ネットワークとしては、例えば、インターネット、企業イントラネット、ローカルエリアネットワーク、移動体通信網およびこれらの組み合わせなどが挙げられるが、それらに限定されない。
ストレステスト方法の電子機器はさらに入力装置603と出力装置604とを備えてもよい。プロセッサ601、メモリ602、入力装置603および出力装置604はバス605又はほかの方式で接続可能であり、図6はバス605で接続することを例示とする。
入力装置603は(例えばタッチパネル、キーパッド、マウス、トラックパッド、タッチパッド、ポインティングデバイス、1つまたは複数のマウスボタン、トラックボール、ジョイスティック等)は、入力された数字や文字情報を受信でき、ストレステスト方法を実行する電子機器のユーザ設定および機能制御に関するキー信号入力を生成することができる。出力装置604は表示装置、補助照明装置(例えば、LED)および触覚フィードバック装置(例えば、振動モータ)等を含むことができる。該表示装置は、液晶ディスプレイ(LCD)、発光ダイオード(LED)ディスプレイおよびプラズマディスプレイを含むことができるが、これらに限定されない。いくつかの実施形態において、表示装置はタッチパネルであってもよい。
ここで記述するシステムおよび技術の各実施形態はデジタル電子回路システム、集積回路システム、特定用途向け集積回路(Application Specific Integrated Circuit,ASIC)、コンピュータハードウェア、ファームウェア、ソフトウェア、および/またはそれらの組み合わせにおいて実装され得る。これらの各実施形態は、1つまたは複数のコンピュータプログラムに実装され、該1つまたは複数のコンピュータプログラムは少なくとも1つのプログラマブルプロセッサを含むプログラマブルシステムにおいて実行および/または解釈することができ、該プログラマブルプロセッサは専用または汎用プログラマブルプロセッサであってもよく、記憶システム、少なくとも1つの入力装置および少なくとも1つの出力装置からデータおよび指令を受信することができ、且つデータおよび指令を該記憶システム、該少なくとも1つの入力装置および該少なくとも1つの出力装置に伝送することを含み得る。
これらのコンピュータプログラムは、プログラム、ソフトウェア、ソフトウェアアプリケーションまたはコードとも呼ばれ、プログラマブルプロセッサの機械命令を含み、且つ高度プロセスおよび/またはオブジェクト指向のプログラミング言語、および/またはアセンブリ言語/機械語により実装され得る。ここで、「機械可読媒体」および「コンピュータ可読媒体」という用語は、機械指令および/またはデータをプログラマブルプロセッサに供給するための任意のコンピュータプログラム、機器、および/または装置(たとえば、磁気ディスク、光ディスク、メモリ、プログラマブルロジックデバイス(PLD))を意味し、機械可読信号である機械命令を受信する機械可読媒体を含む。「機械可読信号」という用語は、機械命令および/またはデータをプログラマブルプロセッサに供給するための任意の信号を意味する。
ユーザとのやりとりを行うために、ここで記述するシステムと技術は、ユーザに情報を表示するための表示装置(例えば、陰極線管(Cathode Ray Tube,CRT)またはLCD(液晶ディスプレイ)モニタ)と、キーボードおよびポインティングデバイス(例えば、マウスまたはトラックボール)とを備えるコンピュータ上で実装することができ、ユーザが該キーボードおよび該ポインティングデバイスを介してコンピュータに入力を提供できる。他の種類の装置もユーザとのやりとりを行うことに用いることができる。例えば、ユーザに提供されるフィードバックは、例えば、視覚フィードバック、聴覚フィードバック、または触覚フィードバックであるいかなる形態のセンシングフィードバックであってもよく、且つ音入力、音声入力若しくは触覚入力を含むいかなる形態でユーザからの入力を受信してもよい。
ここで記述したシステムおよび技術は、バックグラウンドコンポーネントを含む演算システム(例えば、データサーバ)に実施されてもよく、またはミドルウェアコンポーネントを含む演算システム(例えば、アプリケーションサーバ)に実施されてもよく、またはフロントエンドコンポーネントを含む演算システム(例えば、グラフィカルユーザインタフェースまたはウェブブラウザを有するユーザコンピュータ)に実施されてもよく、ユーザは該グラフィカルユーザインタフェースまたはウェブブラウザを介してここで記述したシステムおよび技術の実施形態とやりとりを行っていてもよく、またはこのようなバックグラウンドコンポーネント、ミドルウェアコンポーネントまたはフロントエンドコンポーネントのいずれかの組み合わせを含む演算システムに実施されてもよい。また、システムの各コンポーネントの間は、通信ネットワーク等の任意の形態または媒体を介してデジタルデータ通信により接続されていてもよい。通信ネットワークとしては、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)およびインターネットなどを含む。
コンピュータシステムは、クライアントとサーバとを含んでもよい。クライアントとサーバは、通常、互いに離れており、通信ネットワークを介してやりとりを行う。クライアントとサーバとの関係は、互いにクライアント-サーバの関係を有するコンピュータプログラムをそれぞれのコンピュータ上で動作することによって生成される。
なお、上述した様々な形態のフローを用いて、ステップを改めて並び替え、追加または削除を行うことができる。例えば、本出願に記載された各ステップは、本出願に開示された技術案の所望の結果が達成できる限り、並行して実行されてもよいし、順序に実行されてもよいし、異なる順番で実行されてもよい。本明細書はここで制限しない。
上記具体的な実施形態は、本出願の保護範囲を限定するものではない。設計要件および他の要因に従って、様々な修正、組み合わせ、副次的な組み合わせ、および置換を行うことができることを当業者は理解すべきである。本出願の趣旨および原理を逸脱せずに行われたあらゆる修正、均等置換および改善などは、いずれも本出願の保護範囲内に含まれるべきである。

Claims (15)

  1. 事前設定されたストレス・テスト・コンフィグレーション情報に基づいて、クラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送することであって、前記ストレス・テスト・コンフィグレーション情報は少なくとも1つのテストトラフィックを含む、ことと、
    前記サービスシステムが前記ストレス・テスト・リクエストに応答する性能監視データを取得することと、
    前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することと、
    前記性能監視データに基づいて前記サービスシステムの拡張すべきリソース拡張需要情報を推定することと、を含み、
    前記サービスリクエスト容量情報は、前記サービスシステムが負担できるサービスリクエスト量を示すための情報である、ストレステスト方法。
  2. 前記性能監視データは、前記サービスシステムの応答能力を示す動作類監視データを含み、
    前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することは、
    前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における最大テストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えていないと判断されたことに応答して、前記サービスシステムのサービスリクエスト容量情報が前記最大テストリクエストトラフィックの要求を満たすと判定することを備える請求項1に記載の方法。
  3. 前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送することは、
    各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送することを含み、
    前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データをさらに含み、
    前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することは、
    前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における少なくとも1つのテストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えたと判断されたことに応答して、前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定することを含む請求項2に記載の方法。
  4. 前記性能監視データに基づいて前記サービスシステムの拡張すべきリソース拡張需要情報を推定することは、
    前記リソースボトルネックモジュールに対応する前記リソース類監視データの急に変化する勾配又は比率によって前記サービスシステムのリソース拡張量を推定することをさらに含む請求項3に記載の方法。
  5. 前記の、事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送することは、
    各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送することを含み、
    前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データを備え、
    前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することは、
    前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定することを含む請求項1に記載の方法。
  6. 前記サービスシステムのユーザが設定した前記事前設定されたストレス・テスト・コンフィグレーション情報を取得することをさらに含む請求項1に記載の方法。
  7. 事前設定されたストレス・テスト・コンフィグレーション情報に基づいて、クラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送するように構成されるリクエストユニットであって、前記ストレス・テスト・コンフィグレーション情報は少なくとも1つのテストトラフィックを含む、リクエストユニットと、
    前記サービスシステムが前記ストレス・テスト・リクエストに応答する性能監視データを取得するように構成される取得ユニットと、
    前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定するように構成される確定ユニットと、
    前記性能監視データに基づいて前記サービスシステムの拡張すべきリソース拡張需要情報を推定するように構成される拡張ユニットと、を備え、
    前記サービスリクエスト容量情報は、前記サービスシステムが負担できるサービスリクエスト量を示すための情報である、ストレステスト装置。
  8. 前記性能監視データは、前記サービスシステムの応答能力を示す動作類監視データを備え、
    前記確定ユニットは、前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における最大テストリクエストトラフィックに対する動作類監視データが、対応する閾値範囲を超えていないと判断されたことに応答して、前記サービスシステムのサービスリクエスト容量情報が前記最大テストリクエストトラフィックの要求を満たすと判定するように構成される動作モジュールを備える請求項7に記載の装置。
  9. 前記リクエストユニットはさらに、各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送するように構成され、
    前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データをさらに含み、
    前記確定ユニットは、前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における少なくとも1つのテストリクエストトラフィックに対する動作類監視データが、対応する閾値範囲を超えたと判断されたことに応答して、前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定するように構成されるリソースモジュールをさらに備える請求項8に記載の装置。
  10. 前記拡張ユニットは、
    前記リソースボトルネックモジュールに対応する前記リソース類監視データの急に変化する勾配又は比率によって前記サービスシステムのリソース拡張量を推定するようにさらに構成される請求項9に記載の装置。
  11. 前記リクエストユニットはさらに、各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送するように構成され、
    前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データを備え、
    前記確定ユニットは、前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定するように構成されるリソースモジュールを備える請求項7に記載の装置。
  12. 前記サービスシステムにおけるユーザが設定した前記事前設定されたストレス・テスト・コンフィグレーション情報を取得するように構成される構成ユニットをさらに備える請求項7に記載の装置。
  13. 少なくとも1つのプロセッサと、
    前記少なくとも1つのプロセッサと通信可能に接続されるメモリとを備え、
    前記メモリに、前記少なくとも1つのプロセッサにより実行可能な指令が格納され、前記指令は前記少なくとも1つのプロセッサにより実行されると、前記少なくとも1つのプロセッサに請求項1~6のいずれか一項に記載の方法を実行させる、電子機器。
  14. コンピュータ指令が格納される非一時的なコンピュータ可読記憶媒体であって、
    前記コンピュータ指令は、請求項1~6のいずれか一項に記載の方法をコンピュータに実行させることを特徴とする非一時的なコンピュータ可読記憶媒体。
  15. プロセッサにより実行されると、請求項1~6のいずれか一項に記載の方法を実現する、コンピュータプログラム。
JP2021049925A 2020-06-05 2021-03-24 ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム Active JP7312208B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010507220.9 2020-06-05
CN202010507220.9A CN111666197B (zh) 2020-06-05 2020-06-05 压力测试方法和装置、电子设备以及计算机可读介质

Publications (2)

Publication Number Publication Date
JP2022003507A JP2022003507A (ja) 2022-01-11
JP7312208B2 true JP7312208B2 (ja) 2023-07-20

Family

ID=72386855

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2021049925A Active JP7312208B2 (ja) 2020-06-05 2021-03-24 ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム

Country Status (5)

Country Link
US (1) US20210383295A1 (ja)
EP (1) EP3920469A1 (ja)
JP (1) JP7312208B2 (ja)
KR (1) KR20210040293A (ja)
CN (1) CN111666197B (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113114504B (zh) * 2021-04-13 2022-08-30 百度在线网络技术(北京)有限公司 用于分配资源的方法、装置、设备、介质和产品
CN113608949A (zh) * 2021-08-11 2021-11-05 盐城金堤科技有限公司 压力测试方法和装置、以及存储介质和电子设备
CN114124747B (zh) * 2021-10-15 2024-04-30 微梦创科网络科技(中国)有限公司 一种流量压测系统
CN114880182B (zh) * 2022-06-10 2024-01-02 中国电信股份有限公司 监控平台测试方法、装置、电子设备和可读存储介质
CN116450485B (zh) * 2023-06-09 2023-11-10 杭州谐云科技有限公司 一种应用性能干扰的检测方法和系统
CN116627747A (zh) * 2023-07-24 2023-08-22 北京微吼时代科技有限公司 服务器压力测试巡检方法、系统、电子设备及存储介质
CN116781591B (zh) * 2023-08-23 2024-01-02 国网信息通信产业集团有限公司 一种基于流量染色和透传技术的压力测试系统、压测终端及存储介质
CN117808275A (zh) * 2024-03-01 2024-04-02 江苏天创科技有限公司 一种基于acs可视化技术的靶场管理方法及系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170242774A1 (en) 2014-09-25 2017-08-24 Hewlett Packard Enterprise Development Lp Testing a cloud service
US20170315900A1 (en) 2014-11-24 2017-11-02 Hewlett Packard Enterprise Development Lp Application management based on data correlations

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9477587B2 (en) * 2008-04-11 2016-10-25 Micron Technology, Inc. Method and apparatus for a volume management system in a non-volatile memory device
US20150058409A1 (en) * 2013-03-22 2015-02-26 Frank C. Wang Enhanced content delivery system and method spanning multiple data processing systems
US8977903B1 (en) * 2012-05-08 2015-03-10 Amazon Technologies, Inc. Scalable testing in a production system with autoshutdown
US8869157B2 (en) * 2012-06-21 2014-10-21 Breakingpoint Systems, Inc. Systems and methods for distributing tasks and/or processing recources in a system
US9300552B2 (en) * 2013-12-16 2016-03-29 International Business Machines Corporation Scaling a cloud infrastructure
US9767371B2 (en) * 2014-03-27 2017-09-19 Georgia Tech Research Corporation Systems and methods for identifying traffic control devices and testing the retroreflectivity of the same
US20160008024A1 (en) * 2014-07-09 2016-01-14 Arapeen Medical, LLC Renal denervation with staged assessment
US9823988B2 (en) * 2014-09-16 2017-11-21 Spirent Communications, Inc. System and method of test iteration via property chaining
PT3292471T (pt) * 2015-05-04 2022-02-17 Syed Kamran Hasan Método e dispositivo para gerenciamento de segurança em uma rede de computadores referência cruzada com pedidos relacionados
US11953618B2 (en) * 2015-07-17 2024-04-09 Origin Research Wireless, Inc. Method, apparatus, and system for wireless motion recognition
US10388411B1 (en) * 2015-09-02 2019-08-20 Life365, Inc. Device configured for functional diagnosis and updates
CN108009017B (zh) * 2016-11-01 2022-02-18 阿里巴巴集团控股有限公司 一种应用链路的扩容方法、装置和系统
EP3559508B1 (en) * 2016-12-22 2023-07-12 Eaton Cummins Automated Transmission Technologies, LLC High efficiency, high output transmission
CN107547261B (zh) * 2017-07-24 2020-10-27 华为技术有限公司 云平台性能测试方法及装置
CN107976342B (zh) * 2017-11-20 2019-07-02 浙江大学 采样制样系统及采样制样方法
CN108376112B (zh) * 2018-02-09 2021-03-26 腾讯科技(深圳)有限公司 压力测试方法、装置及可读介质
CN109412829B (zh) * 2018-08-30 2020-11-17 华为技术有限公司 一种资源配置的预测方法及设备
CN109660421A (zh) * 2018-10-26 2019-04-19 平安科技(深圳)有限公司 弹性调度资源的方法、装置、服务器及存储介质
CN109460348B (zh) * 2018-10-31 2022-02-22 网易(杭州)网络有限公司 游戏服务器的压测方法和装置
US20210133669A1 (en) * 2019-11-05 2021-05-06 Strong Force Vcn Portfolio 2019, Llc Control tower and enterprise management platform with robotic process automation layer to automate actions for subset of applications benefitting value chain network entities

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20170242774A1 (en) 2014-09-25 2017-08-24 Hewlett Packard Enterprise Development Lp Testing a cloud service
US20170315900A1 (en) 2014-11-24 2017-11-02 Hewlett Packard Enterprise Development Lp Application management based on data correlations

Also Published As

Publication number Publication date
JP2022003507A (ja) 2022-01-11
EP3920469A1 (en) 2021-12-08
CN111666197A (zh) 2020-09-15
US20210383295A1 (en) 2021-12-09
KR20210040293A (ko) 2021-04-13
CN111666197B (zh) 2024-05-24

Similar Documents

Publication Publication Date Title
JP7312208B2 (ja) ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム
Gao et al. SaaS performance and scalability evaluation in clouds
Fatema et al. A survey of cloud monitoring tools: Taxonomy, capabilities and objectives
JP4240062B2 (ja) 計算機システムおよび性能計測方法ならびに管理サーバ装置
US8782215B2 (en) Performance testing in a cloud environment
US10225333B2 (en) Management method and apparatus
US8402468B2 (en) Capacity planning based on resource utilization as a function of workload
US8661438B2 (en) Virtualization planning system that models performance of virtual machines allocated on computer systems
JP6526907B2 (ja) 分散型記憶システムの性能監視
US9712410B1 (en) Local metrics in a service provider environment
US20140351394A1 (en) Reporting performance capabilities of a computer resource service
US10367705B1 (en) Selecting and configuring metrics for monitoring
US20210141708A1 (en) Systems and methods for determining optimal cost-to-serve for cloud applications in the public cloud
US11032152B2 (en) Machine-learning based self-populating dashboard for resource utilization monitoring in hyper-converged information technology environments
US20230353467A1 (en) Methods and apparatus for determining low latency network connectivity in computing systems
KR20140099109A (ko) 다중 클라우드를 이용한 응용 서비스 시험 지원 시스템 및 그 방법
US10552282B2 (en) On demand monitoring mechanism to identify root cause of operation problems
US20180343186A1 (en) User interface with expected response times of commands
US10360614B1 (en) Assessing and rating deployments of resources
US9800480B1 (en) Hosted load generator framework
Viratanapanu et al. On demand fine grain resource monitoring system for server consolidation
Reddy et al. Early performance prediction of web services
Merenstein et al. The case for benchmarking control operations in cloud native storage
CN113032237A (zh) 数据处理方法及装置、电子设备和计算机可读存储介质
JP2013232035A (ja) 情報処理システム、情報処理装置、情報処理方法、及びプログラム

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210930

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220712

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221006

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230117

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230417

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230620

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230707

R150 Certificate of patent or registration of utility model

Ref document number: 7312208

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150