JP7312208B2 - ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム - Google Patents
ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム Download PDFInfo
- Publication number
- JP7312208B2 JP7312208B2 JP2021049925A JP2021049925A JP7312208B2 JP 7312208 B2 JP7312208 B2 JP 7312208B2 JP 2021049925 A JP2021049925 A JP 2021049925A JP 2021049925 A JP2021049925 A JP 2021049925A JP 7312208 B2 JP7312208 B2 JP 7312208B2
- Authority
- JP
- Japan
- Prior art keywords
- service system
- stress test
- service
- monitoring data
- request
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0639—Performance analysis of employees; Performance analysis of enterprise or organisation operations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/50—Testing arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
- G06F11/3433—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment for load management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/24—Marginal checking or other specified testing methods not covered by G06F11/26, e.g. race tests
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
- G06F11/3419—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment by assessing time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3495—Performance evaluation by tracing or monitoring for systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/5003—Managing SLA; Interaction between SLA and QoS
- H04L41/5009—Determining service level performance parameters or violations of service level contracts, e.g. violations of agreed response time or mean time between failures [MTBF]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
- H04L41/508—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement
- H04L41/5096—Network service management, e.g. ensuring proper service fulfilment according to agreements based on type of value added network service under agreement wherein the managed service relates to distributed or central networked applications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/81—Threshold
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
- H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Strategic Management (AREA)
- Development Economics (AREA)
- Educational Administration (AREA)
- Economics (AREA)
- Entrepreneurship & Innovation (AREA)
- Game Theory and Decision Science (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Debugging And Monitoring (AREA)
- Testing And Monitoring For Control Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
Claims (15)
- 事前設定されたストレス・テスト・コンフィグレーション情報に基づいて、クラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送することであって、前記ストレス・テスト・コンフィグレーション情報は少なくとも1つのテストトラフィックを含む、ことと、
前記サービスシステムが前記ストレス・テスト・リクエストに応答する性能監視データを取得することと、
前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することと、
前記性能監視データに基づいて前記サービスシステムの拡張すべきリソース拡張需要情報を推定することと、を含み、
前記サービスリクエスト容量情報は、前記サービスシステムが負担できるサービスリクエスト量を示すための情報である、ストレステスト方法。 - 前記性能監視データは、前記サービスシステムの応答能力を示す動作類監視データを含み、
前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することは、
前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における最大テストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えていないと判断されたことに応答して、前記サービスシステムのサービスリクエスト容量情報が前記最大テストリクエストトラフィックの要求を満たすと判定することを備える請求項1に記載の方法。 - 前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送することは、
各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送することを含み、
前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データをさらに含み、
前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することは、
前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における少なくとも1つのテストリクエストトラフィックに対する動作類監視データが対応する閾値範囲を超えたと判断されたことに応答して、前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定することを含む請求項2に記載の方法。 - 前記性能監視データに基づいて前記サービスシステムの拡張すべきリソース拡張需要情報を推定することは、
前記リソースボトルネックモジュールに対応する前記リソース類監視データの急に変化する勾配又は比率によって前記サービスシステムのリソース拡張量を推定することをさらに含む請求項3に記載の方法。 - 前記の、事前設定されたストレス・テスト・コンフィグレーション情報に基づいてクラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送することは、
各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送することを含み、
前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データを備え、
前記の、前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定することは、
前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定することを含む請求項1に記載の方法。 - 前記サービスシステムのユーザが設定した前記事前設定されたストレス・テスト・コンフィグレーション情報を取得することをさらに含む請求項1に記載の方法。
- 事前設定されたストレス・テスト・コンフィグレーション情報に基づいて、クラウドサービスにおけるサービスシステムにストレス・テスト・リクエストを発送するように構成されるリクエストユニットであって、前記ストレス・テスト・コンフィグレーション情報は少なくとも1つのテストトラフィックを含む、リクエストユニットと、
前記サービスシステムが前記ストレス・テスト・リクエストに応答する性能監視データを取得するように構成される取得ユニットと、
前記事前設定されたストレス・テスト・コンフィグレーション情報と前記性能監視データとに基づいて、前記サービスシステムのサービスリクエスト容量情報を確定するように構成される確定ユニットと、
前記性能監視データに基づいて前記サービスシステムの拡張すべきリソース拡張需要情報を推定するように構成される拡張ユニットと、を備え、
前記サービスリクエスト容量情報は、前記サービスシステムが負担できるサービスリクエスト量を示すための情報である、ストレステスト装置。 - 前記性能監視データは、前記サービスシステムの応答能力を示す動作類監視データを備え、
前記確定ユニットは、前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における最大テストリクエストトラフィックに対する動作類監視データが、対応する閾値範囲を超えていないと判断されたことに応答して、前記サービスシステムのサービスリクエスト容量情報が前記最大テストリクエストトラフィックの要求を満たすと判定するように構成される動作モジュールを備える請求項7に記載の装置。 - 前記リクエストユニットはさらに、各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送するように構成され、
前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データをさらに含み、
前記確定ユニットは、前記サービスシステムの、前記ストレス・テスト・コンフィグレーション情報における少なくとも1つのテストリクエストトラフィックに対する動作類監視データが、対応する閾値範囲を超えたと判断されたことに応答して、前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定するように構成されるリソースモジュールをさらに備える請求項8に記載の装置。 - 前記拡張ユニットは、
前記リソースボトルネックモジュールに対応する前記リソース類監視データの急に変化する勾配又は比率によって前記サービスシステムのリソース拡張量を推定するようにさらに構成される請求項9に記載の装置。 - 前記リクエストユニットはさらに、各テストリクエストトラフィックに基づいて前記サービスシステムにストレス・テスト・リクエストをそれぞれ発送するように構成され、
前記性能監視データは、前記サービスシステム及び前記サービスシステムに含まれた各サービスモジュールが前記ストレス・テスト・リクエストを処理するリソース占有量を示すリソース類監視データを備え、
前記確定ユニットは、前記サービスシステムの各サービス処理モジュールの前記リソース類監視データの前記テストリクエストトラフィックに伴う変化に基づいて、前記サービスシステムのリソースボトルネックモジュールを確定するように構成されるリソースモジュールを備える請求項7に記載の装置。 - 前記サービスシステムにおけるユーザが設定した前記事前設定されたストレス・テスト・コンフィグレーション情報を取得するように構成される構成ユニットをさらに備える請求項7に記載の装置。
- 少なくとも1つのプロセッサと、
前記少なくとも1つのプロセッサと通信可能に接続されるメモリとを備え、
前記メモリに、前記少なくとも1つのプロセッサにより実行可能な指令が格納され、前記指令は前記少なくとも1つのプロセッサにより実行されると、前記少なくとも1つのプロセッサに請求項1~6のいずれか一項に記載の方法を実行させる、電子機器。 - コンピュータ指令が格納される非一時的なコンピュータ可読記憶媒体であって、
前記コンピュータ指令は、請求項1~6のいずれか一項に記載の方法をコンピュータに実行させることを特徴とする非一時的なコンピュータ可読記憶媒体。 - プロセッサにより実行されると、請求項1~6のいずれか一項に記載の方法を実現する、コンピュータプログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010507220.9A CN111666197B (zh) | 2020-06-05 | 2020-06-05 | 压力测试方法和装置、电子设备以及计算机可读介质 |
CN202010507220.9 | 2020-06-05 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022003507A JP2022003507A (ja) | 2022-01-11 |
JP7312208B2 true JP7312208B2 (ja) | 2023-07-20 |
Family
ID=72386855
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021049925A Active JP7312208B2 (ja) | 2020-06-05 | 2021-03-24 | ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム |
Country Status (5)
Country | Link |
---|---|
US (1) | US20210383295A1 (ja) |
EP (1) | EP3920469A1 (ja) |
JP (1) | JP7312208B2 (ja) |
KR (1) | KR20210040293A (ja) |
CN (1) | CN111666197B (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113114504B (zh) * | 2021-04-13 | 2022-08-30 | 百度在线网络技术(北京)有限公司 | 用于分配资源的方法、装置、设备、介质和产品 |
CN113608949A (zh) * | 2021-08-11 | 2021-11-05 | 盐城金堤科技有限公司 | 压力测试方法和装置、以及存储介质和电子设备 |
CN114124747B (zh) * | 2021-10-15 | 2024-04-30 | 微梦创科网络科技(中国)有限公司 | 一种流量压测系统 |
CN114880182B (zh) * | 2022-06-10 | 2024-01-02 | 中国电信股份有限公司 | 监控平台测试方法、装置、电子设备和可读存储介质 |
CN116450485B (zh) * | 2023-06-09 | 2023-11-10 | 杭州谐云科技有限公司 | 一种应用性能干扰的检测方法和系统 |
CN116627747A (zh) * | 2023-07-24 | 2023-08-22 | 北京微吼时代科技有限公司 | 服务器压力测试巡检方法、系统、电子设备及存储介质 |
CN116781591B (zh) * | 2023-08-23 | 2024-01-02 | 国网信息通信产业集团有限公司 | 一种基于流量染色和透传技术的压力测试系统、压测终端及存储介质 |
CN117808275A (zh) * | 2024-03-01 | 2024-04-02 | 江苏天创科技有限公司 | 一种基于acs可视化技术的靶场管理方法及系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170242774A1 (en) | 2014-09-25 | 2017-08-24 | Hewlett Packard Enterprise Development Lp | Testing a cloud service |
US20170315900A1 (en) | 2014-11-24 | 2017-11-02 | Hewlett Packard Enterprise Development Lp | Application management based on data correlations |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9477587B2 (en) * | 2008-04-11 | 2016-10-25 | Micron Technology, Inc. | Method and apparatus for a volume management system in a non-volatile memory device |
US20150058409A1 (en) * | 2013-03-22 | 2015-02-26 | Frank C. Wang | Enhanced content delivery system and method spanning multiple data processing systems |
US8977903B1 (en) * | 2012-05-08 | 2015-03-10 | Amazon Technologies, Inc. | Scalable testing in a production system with autoshutdown |
US8869157B2 (en) * | 2012-06-21 | 2014-10-21 | Breakingpoint Systems, Inc. | Systems and methods for distributing tasks and/or processing recources in a system |
US9300552B2 (en) * | 2013-12-16 | 2016-03-29 | International Business Machines Corporation | Scaling a cloud infrastructure |
EP3123397A4 (en) * | 2014-03-27 | 2017-11-08 | The Georgia Tech Research Corporation | Systems and methods for identifying traffic control devices and testing the retroreflectivity of the same |
US20160008024A1 (en) * | 2014-07-09 | 2016-01-14 | Arapeen Medical, LLC | Renal denervation with staged assessment |
US9817737B2 (en) * | 2014-09-16 | 2017-11-14 | Spirent Communications, Inc. | Systems and methods of building sequenceable test methodologies |
NZ737959A (en) * | 2015-05-04 | 2023-03-31 | Syed Kamran Hasan | Method and device for managing security in a computer network |
US11953618B2 (en) * | 2015-07-17 | 2024-04-09 | Origin Research Wireless, Inc. | Method, apparatus, and system for wireless motion recognition |
US10388411B1 (en) * | 2015-09-02 | 2019-08-20 | Life365, Inc. | Device configured for functional diagnosis and updates |
CN108009017B (zh) * | 2016-11-01 | 2022-02-18 | 阿里巴巴集团控股有限公司 | 一种应用链路的扩容方法、装置和系统 |
WO2018118128A1 (en) * | 2016-12-22 | 2018-06-28 | Eaton Corporation | High efficiency, high output transmission |
CN107547261B (zh) * | 2017-07-24 | 2020-10-27 | 华为技术有限公司 | 云平台性能测试方法及装置 |
CN107976342B (zh) * | 2017-11-20 | 2019-07-02 | 浙江大学 | 采样制样系统及采样制样方法 |
CN108376112B (zh) * | 2018-02-09 | 2021-03-26 | 腾讯科技(深圳)有限公司 | 压力测试方法、装置及可读介质 |
CN109412829B (zh) * | 2018-08-30 | 2020-11-17 | 华为技术有限公司 | 一种资源配置的预测方法及设备 |
CN109660421A (zh) * | 2018-10-26 | 2019-04-19 | 平安科技(深圳)有限公司 | 弹性调度资源的方法、装置、服务器及存储介质 |
CN109460348B (zh) * | 2018-10-31 | 2022-02-22 | 网易(杭州)网络有限公司 | 游戏服务器的压测方法和装置 |
US20210133670A1 (en) * | 2019-11-05 | 2021-05-06 | Strong Force Vcn Portfolio 2019, Llc | Control tower and enterprise management platform with a machine learning/artificial intelligence managing sensor and the camera feeds into digital twin |
-
2020
- 2020-06-05 CN CN202010507220.9A patent/CN111666197B/zh active Active
-
2021
- 2021-02-18 US US17/249,068 patent/US20210383295A1/en not_active Abandoned
- 2021-02-23 EP EP21158751.4A patent/EP3920469A1/en active Pending
- 2021-03-15 KR KR1020210033285A patent/KR20210040293A/ko not_active Application Discontinuation
- 2021-03-24 JP JP2021049925A patent/JP7312208B2/ja active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170242774A1 (en) | 2014-09-25 | 2017-08-24 | Hewlett Packard Enterprise Development Lp | Testing a cloud service |
US20170315900A1 (en) | 2014-11-24 | 2017-11-02 | Hewlett Packard Enterprise Development Lp | Application management based on data correlations |
Also Published As
Publication number | Publication date |
---|---|
CN111666197A (zh) | 2020-09-15 |
US20210383295A1 (en) | 2021-12-09 |
CN111666197B (zh) | 2024-05-24 |
KR20210040293A (ko) | 2021-04-13 |
JP2022003507A (ja) | 2022-01-11 |
EP3920469A1 (en) | 2021-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7312208B2 (ja) | ストレステスト方法及び装置、電子機器、コンピュータ可読記憶媒体並びにコンピュータプログラム | |
Gao et al. | SaaS performance and scalability evaluation in clouds | |
EP3281360B1 (en) | Virtualized network function monitoring | |
JP4240062B2 (ja) | 計算機システムおよび性能計測方法ならびに管理サーバ装置 | |
US8782215B2 (en) | Performance testing in a cloud environment | |
US10225333B2 (en) | Management method and apparatus | |
US9584364B2 (en) | Reporting performance capabilities of a computer resource service | |
US8402468B2 (en) | Capacity planning based on resource utilization as a function of workload | |
KR102110757B1 (ko) | 분산형 저장 시스템의 성능 모니터링 | |
US8661438B2 (en) | Virtualization planning system that models performance of virtual machines allocated on computer systems | |
US11307957B2 (en) | Systems and methods for determining optimal cost-to-serve for cloud applications in the public cloud | |
US10367705B1 (en) | Selecting and configuring metrics for monitoring | |
US11057280B2 (en) | User interface with expected response times of commands | |
JP2022033685A (ja) | 堅牢性を確定するための方法、装置、電子機器、コンピュータ可読記憶媒体、及びコンピュータプログラム | |
US10360614B1 (en) | Assessing and rating deployments of resources | |
KR20140099109A (ko) | 다중 클라우드를 이용한 응용 서비스 시험 지원 시스템 및 그 방법 | |
US10552282B2 (en) | On demand monitoring mechanism to identify root cause of operation problems | |
US9800480B1 (en) | Hosted load generator framework | |
CN113032237A (zh) | 数据处理方法及装置、电子设备和计算机可读存储介质 | |
Tao et al. | Cloud-based infrastructure for mobile testing as a service | |
Merenstein et al. | The case for benchmarking control operations in cloud native storage | |
Liu et al. | Automatic cloud service testing and bottleneck detection system with scaling recommendation | |
Reddy et al. | Early performance prediction of web services | |
Ustiugov et al. | Enabling In-Vitro Serverless Systems Research | |
US9455887B1 (en) | Distributed performance evaluation framework |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210930 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220712 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221006 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230417 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230620 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230707 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7312208 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |