JP2015092354A - 待ち時間を誘発することにより、分散計算サービスの弾力性を評価する方法及びシステム - Google Patents
待ち時間を誘発することにより、分散計算サービスの弾力性を評価する方法及びシステム Download PDFInfo
- Publication number
- JP2015092354A JP2015092354A JP2014244827A JP2014244827A JP2015092354A JP 2015092354 A JP2015092354 A JP 2015092354A JP 2014244827 A JP2014244827 A JP 2014244827A JP 2014244827 A JP2014244827 A JP 2014244827A JP 2015092354 A JP2015092354 A JP 2015092354A
- Authority
- JP
- Japan
- Prior art keywords
- active application
- message
- application component
- latency
- application
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/26—Functional testing
- G06F11/263—Generation of test inputs, e.g. test vectors, patterns or sequences ; with adaptation of the tested hardware for testability with external testers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
- G06F11/2205—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing using arrangements specific to the hardware being tested
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/28—Error detection; Error correction; Monitoring by checking the correct order of processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/30—Definitions, standards or architectural aspects of layered protocol stacks
- H04L69/32—Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
- H04L69/322—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
- H04L69/329—Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the application layer [OSI layer 7]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computer Security & Cryptography (AREA)
- Debugging And Monitoring (AREA)
- Computer And Data Communications (AREA)
- Test And Diagnosis Of Digital Computers (AREA)
- Hardware Redundancy (AREA)
Abstract
【解決手段】待ち時間監視アプリケーション164が、各アクティブアプリケーション構成要素を観測し、指定又は非指定間隔で、1つのアクティブアプリケーション構成要素223を選択し、選択されたアクティブアプリケーション構成要素から発せられる1つ以上のメッセージに待ち時間又はエラーメッセージを導入する。次に、待ち時間監視アプリケーション164は、影響を受けるアクティブアプリケーション構成要素に依存する、他のアクティブアプリケーション構成要素に対する待ち時間又はエラーメッセージの影響を測定する。故障サーバの、残りのネットワークアプリケーションに対する影響を観測することにより、プロバイダは、各構成要素が、分散計算基盤でいかなる待ち時間又はエラー状況にも耐えることを保証する。
【選択図】図2
Description
102、300 計算ノード
110 クラウド
120 ネットワーク
130 通信リンク
142 クライアント装置
144 クライアントアプリケーション
162 管理サーバ
164 待ち時間アプリケーション
205 中央演算処理装置
210 I/O装置インタフェース
212 I/O装置
215 ネットワークインタフェース
220 相互接続
223 待ち時間構成要素
225 メモリ
227 復元モニタ
229 シミュレーション監視パラメータ
230 記憶装置
235 監視ログ
312 クライアントインタフェース
314 サーバインタフェース
316 アプリケーション構成要素
400 ネットワーク化アプリケーションの弾力性を検証する方法
Claims (11)
- ネットワーク化アプリケーションの弾力性を検証するコンピュータ実行方法において、
前記ネットワーク化アプリケーションが提供されるネットワーク内の複数のアクティブアプリケーション構成要素を識別するステップと、
1つ以上の選択基準に基づいて、前記複数のアクティブアプリケーション構成要素から第1のアクティブアプリケーション構成要素を選択するステップと、
所定の変更規則に従って、前記第1のアクティブアプリケーション構成要素により送信されるメッセージを変更するステップであって、前記メッセージが、ネットワーク管理者により指定される1つ以上のイベント記述子を満たす要求に対する応答であるステップと、
前記複数のアクティブアプリケーション構成要素に含まれる第2のアクティブアプリケ−ション構成要素を監視して、前記変更されたメッセージにより生じる前記第2のアクティブアプリケーション構成要素に対する影響を特定するステップと、
を含むことを特徴とする、コンピュータ実行方法。 - 変更するステップが、前記メッセージの送信を遅延させることを含むことを特徴とする、請求項1に記載の方法。
- 変更するステップが、前記メッセージをエラーメッセージで置換することを含むことを特徴とする、請求項1または2に記載の方法。
- 前記メッセージが、前記第2のアクティブアプリケーション構成要素以外の前記複数のアクティブアプリケーション構成要素に含まれる任意のアクティブアプリケーション構成要素から受信されるメッセージへの応答を含むことを特徴とする、請求項1から3のいずれか1項に記載の方法。
- 前記1つ以上のイベント記述子が、指定されたユニフォームリソースロケータ(URL)に関連付けられたアクセス動作を記述することを特徴とする、請求項1から4のいずれか1項に記載の方法。
- 1つ以上のログエントリを作成して、前記メッセージの変更に起因する前記第2のアクティブアプリケーション構成要素に対する影響を記録するステップをさらに含むことを特徴とする、請求項1から5のいずれか1項に記載の方法。
- 処理ユニットにより実行されると、ネットワーク化アプリケーションの柔軟性を検証する動作を前記処理ユニットに実行させる命令を含むコンピュータ可読記憶媒体において、前記動作が、
前記ネットワーク化アプリケーションが提供されるネットワーク内の複数のアクティブアプリケーション構成要素を識別するステップと、
1つ以上の選択基準に基づいて、前記複数のアクティブアプリケーション構成要素から第1のアクティブアプリケーション構成要素を選択するステップと、
所定の変更規則に従って、前記第1のアクティブアプリケーション構成要素により送信されるメッセージを変更するステップであって、前記メッセージが、ネットワーク管理者により指定される1つ以上のイベント記述子を満たす要求に対する応答であるステップと、
前記複数のアクティブアプリケーション構成要素に含まれる第2のアクティブアプリケ−ション構成要素を監視して、前記変更されたメッセージにより生じる前記第2のアクティブアプリケーション構成要素に対する影響を特定するステップと、
を含むことを特徴とする、コンピュータ可読記憶媒体。 - 前記メッセージが、ネットワーク管理者により指定される1つ以上のイベント記述子を満たす要求に対する応答であることを特徴とする、請求項7に記載のコンピュータ可読記憶媒体。
- 前記動作が、1つ以上のログエントリを作成して、前記メッセージの変更に起因する前記第2のアクティブアプリケーション構成要素に対する影響を記録するステップをさらに含むことを特徴とする、請求項7または8に記載のコンピュータ可読記憶媒体。
- プロセッサと、
前記プロセッサにより実行されると、ネットワーク化アプリケーションの柔軟性を検証する動作を実行する命令を含むメモリと、
を備えるシステムにおいて、前記動作が、
前記ネットワーク化アプリケーションが提供されるネットワーク内の複数のアクティブアプリケーション構成要素を識別すること、
1つ以上の選択基準に基づいて、前記複数のアクティブアプリケーション構成要素から第1のアクティブアプリケーション構成要素を選択すること、
所定の変更規則に従って、前記第1のアクティブアプリケーション構成要素により送信されるメッセージを変更することであって、前記メッセージが、ネットワーク管理者により指定される1つ以上のイベント記述子を満たす要求に対する応答であること、及び
前記複数のアクティブアプリケーション構成要素に含まれる第2のアクティブアプリケ−ション構成要素を監視して、前記変更されたメッセージにより生じる前記第2のアクティブアプリケーション構成要素に対する影響を特定すること、
を含むことを特徴とする、システム。 - ネットワーク化アプリケーションの弾力性を検証するコンピュータ実行方法において、
前記ネットワーク化アプリケーションが提供されるネットワーク内の複数のアクティブアプリケーション構成要素を識別するステップと、
1つ以上の選択基準に基づいて、前記複数のアクティブアプリケーション構成要素から第1のアクティブアプリケーション構成要素を選択するステップと、
所定の変更規則に従って、前記第1のアクティブアプリケーション構成要素により送信されるメッセージを変更するステップであって、前記メッセージをエラーメッセージで置換することを含むステップと、
前記複数のアクティブアプリケーション構成要素に含まれる第2のアクティブアプリケ−ション構成要素を監視して、前記変更されたメッセージにより生じる前記第2のアクティブアプリケーション構成要素に対する影響を特定するステップと、
を含むことを特徴とする、コンピュータ実行方法。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/445,862 US9015289B2 (en) | 2012-04-12 | 2012-04-12 | Method and system for evaluating the resiliency of a distributed computing service by inducing a latency |
US13/445,862 | 2012-04-12 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013080302A Division JP2013232187A (ja) | 2012-04-12 | 2013-04-08 | 待ち時間を誘発することにより、分散計算サービスの弾力性を評価する方法及びシステム |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015092354A true JP2015092354A (ja) | 2015-05-14 |
Family
ID=48095650
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013080302A Pending JP2013232187A (ja) | 2012-04-12 | 2013-04-08 | 待ち時間を誘発することにより、分散計算サービスの弾力性を評価する方法及びシステム |
JP2014244827A Pending JP2015092354A (ja) | 2012-04-12 | 2014-12-03 | 待ち時間を誘発することにより、分散計算サービスの弾力性を評価する方法及びシステム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2013080302A Pending JP2013232187A (ja) | 2012-04-12 | 2013-04-08 | 待ち時間を誘発することにより、分散計算サービスの弾力性を評価する方法及びシステム |
Country Status (8)
Country | Link |
---|---|
US (2) | US9015289B2 (ja) |
EP (1) | EP2650791B1 (ja) |
JP (2) | JP2013232187A (ja) |
KR (1) | KR101478698B1 (ja) |
CN (1) | CN103377077B (ja) |
AU (1) | AU2013202560B2 (ja) |
CA (1) | CA2810869C (ja) |
DK (1) | DK2650791T3 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022504087A (ja) * | 2018-10-12 | 2022-01-13 | インターナショナル・ビジネス・マシーンズ・コーポレーション | クラウド・マイクロサービス埋め込み用自動チューナ |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9015289B2 (en) * | 2012-04-12 | 2015-04-21 | Netflix, Inc. | Method and system for evaluating the resiliency of a distributed computing service by inducing a latency |
GB2502571A (en) * | 2012-05-31 | 2013-12-04 | Ibm | Modifying the lifespan of metrics in response to detecting a fault |
US9182949B2 (en) * | 2013-03-15 | 2015-11-10 | Imagine Communications Corp. | Systems and methods for controlling branch latency within computing applications |
US9519557B2 (en) * | 2014-07-11 | 2016-12-13 | Microsoft Technology Licensing, Llc | Compliance testing through sandbox environments |
US9692665B2 (en) * | 2014-07-30 | 2017-06-27 | Microsoft Technology Licensing, Llc | Failure analysis in cloud based service using synthetic measurements |
US9444708B2 (en) * | 2014-07-30 | 2016-09-13 | Microsoft Technology Licensing, Llc | Detection of outage in cloud based service using synthetic measurements and anonymized usage data |
US9436553B2 (en) * | 2014-08-04 | 2016-09-06 | Microsoft Technology Licensing, Llc | Recovering usability of cloud based service from system failure |
US9747153B2 (en) * | 2015-06-22 | 2017-08-29 | Microsoft Technology Licensing, Llc | Resilience as a service |
US10212034B1 (en) * | 2015-09-24 | 2019-02-19 | Amazon Technologies, Inc. | Automated network change management |
US11093836B2 (en) * | 2016-06-15 | 2021-08-17 | International Business Machines Corporation | Detecting and predicting bottlenecks in complex systems |
US10387231B2 (en) * | 2016-08-26 | 2019-08-20 | Microsoft Technology Licensing, Llc | Distributed system resiliency assessment using faults |
US10320957B2 (en) | 2016-09-01 | 2019-06-11 | International Business Machines Corporation | Increasing data resiliency operations based on identifying bottleneck operators |
US10866851B2 (en) * | 2016-09-28 | 2020-12-15 | Netflix, Inc. | Determining the failure resiliency of a service in a distributed computing system |
US10691516B2 (en) * | 2017-04-05 | 2020-06-23 | International Business Machines Corporation | Measurement and visualization of resiliency in a hybrid IT infrastructure environment |
US11234157B2 (en) * | 2019-04-08 | 2022-01-25 | T-Mobile Usa, Inc. | Network latency aware mobile edge computing routing |
CN110427329B (zh) * | 2019-08-13 | 2023-04-25 | 杭州有赞科技有限公司 | 一种数据库sql性能数据的采集方法及系统 |
US11223552B1 (en) | 2021-01-08 | 2022-01-11 | Microsoft Technology Licensing, Llc | Aggregation-based determination of cloud computing service resiliency to chaos events |
US11921604B2 (en) * | 2021-10-28 | 2024-03-05 | Red Hat, Inc. | Evaluating system recovery using emulated production systems |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07225707A (ja) * | 1994-02-10 | 1995-08-22 | Fujitsu Ltd | アプリケーションのテスト方法及びそのテスト支援装置 |
WO2012040241A1 (en) * | 2010-09-20 | 2012-03-29 | Netflix, Inc. | Validating the resiliency of networked applications |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3571121B2 (ja) | 1995-08-09 | 2004-09-29 | ヤンマー農機株式会社 | 耕耘装置 |
US6618389B2 (en) * | 1999-11-22 | 2003-09-09 | Worldcom, Inc. | Validation of call processing network performance |
US7240364B1 (en) * | 2000-05-20 | 2007-07-03 | Ciena Corporation | Network device identity authentication |
US7336613B2 (en) * | 2000-10-17 | 2008-02-26 | Avaya Technology Corp. | Method and apparatus for the assessment and optimization of network traffic |
US7089456B2 (en) | 2002-06-03 | 2006-08-08 | Honeywell International, Inc | Error response test system and method using test mask variable |
US7334222B2 (en) | 2002-09-11 | 2008-02-19 | International Business Machines Corporation | Methods and apparatus for dependency-based impact simulation and vulnerability analysis |
EP1678888B1 (en) * | 2003-08-21 | 2010-02-10 | Vidiator Enterprises Inc. | Quality of experience (qoe) metrics for wireless communication networks |
US7809982B2 (en) * | 2004-10-01 | 2010-10-05 | Lockheed Martin Corporation | Reconfigurable computing machine and related systems and methods |
US8116731B2 (en) * | 2007-11-01 | 2012-02-14 | Finsphere, Inc. | System and method for mobile identity protection of a user of multiple computer applications, networks or devices |
JPWO2010131425A1 (ja) | 2009-05-14 | 2012-11-01 | 日本電気株式会社 | 逐次発生データ解析装置、システム、方法、及びプログラム |
US8073946B1 (en) * | 2009-08-17 | 2011-12-06 | Google Inc. | Monitoring of metrics to identify abnormalities in a large scale distributed computing environment |
US8397138B2 (en) * | 2009-12-08 | 2013-03-12 | At & T Intellectual Property I, Lp | Method and system for network latency virtualization in a cloud transport environment |
GB2477921A (en) * | 2010-02-17 | 2011-08-24 | Sidonis Ltd | Analysing a network using a network model with simulated changes |
US8171137B1 (en) * | 2011-05-09 | 2012-05-01 | Google Inc. | Transferring application state across devices |
US9015289B2 (en) * | 2012-04-12 | 2015-04-21 | Netflix, Inc. | Method and system for evaluating the resiliency of a distributed computing service by inducing a latency |
US9612935B2 (en) * | 2014-11-21 | 2017-04-04 | Vmware, Inc. | Enhanced resiliency testing by enabling state level control for request |
-
2012
- 2012-04-12 US US13/445,862 patent/US9015289B2/en active Active
-
2013
- 2013-03-26 CA CA2810869A patent/CA2810869C/en active Active
- 2013-03-27 AU AU2013202560A patent/AU2013202560B2/en active Active
- 2013-04-08 JP JP2013080302A patent/JP2013232187A/ja active Pending
- 2013-04-11 EP EP13163304.2A patent/EP2650791B1/en active Active
- 2013-04-11 KR KR20130039653A patent/KR101478698B1/ko active IP Right Grant
- 2013-04-11 DK DK13163304.2T patent/DK2650791T3/da active
- 2013-04-12 CN CN201310126250.5A patent/CN103377077B/zh active Active
-
2014
- 2014-12-03 JP JP2014244827A patent/JP2015092354A/ja active Pending
-
2015
- 2015-04-20 US US14/691,538 patent/US9864666B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH07225707A (ja) * | 1994-02-10 | 1995-08-22 | Fujitsu Ltd | アプリケーションのテスト方法及びそのテスト支援装置 |
WO2012040241A1 (en) * | 2010-09-20 | 2012-03-29 | Netflix, Inc. | Validating the resiliency of networked applications |
Non-Patent Citations (2)
Title |
---|
JPN6015041603; 石井直史: 'Netscape Enterprise Server' OPEN DESIGN 第5巻,第5号, 19981001, pp.34-53, CQ出版株式会社 * |
JPN6015041604; 縣俊貴: 'Java グッドデザイン・バッドデザイン 第3回 テストしま専科!?' WEB+DB PRESS 第25巻, 20050315, pp.210-219, (株)技術評論社 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2022504087A (ja) * | 2018-10-12 | 2022-01-13 | インターナショナル・ビジネス・マシーンズ・コーポレーション | クラウド・マイクロサービス埋め込み用自動チューナ |
JP7355404B2 (ja) | 2018-10-12 | 2023-10-03 | インターナショナル・ビジネス・マシーンズ・コーポレーション | クラウド・マイクロサービス埋め込み用自動チューナ |
Also Published As
Publication number | Publication date |
---|---|
AU2013202560B2 (en) | 2015-09-17 |
CA2810869C (en) | 2017-03-21 |
JP2013232187A (ja) | 2013-11-14 |
US9015289B2 (en) | 2015-04-21 |
KR20130116184A (ko) | 2013-10-23 |
EP2650791A3 (en) | 2017-09-20 |
CN103377077B (zh) | 2018-01-02 |
US9864666B2 (en) | 2018-01-09 |
CN103377077A (zh) | 2013-10-30 |
CA2810869A1 (en) | 2013-10-12 |
US20150227444A1 (en) | 2015-08-13 |
AU2013202560A1 (en) | 2013-10-31 |
DK2650791T3 (da) | 2020-07-20 |
KR101478698B1 (ko) | 2015-01-02 |
US20130275518A1 (en) | 2013-10-17 |
EP2650791B1 (en) | 2020-05-06 |
EP2650791A2 (en) | 2013-10-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2015092354A (ja) | 待ち時間を誘発することにより、分散計算サービスの弾力性を評価する方法及びシステム | |
Alhamazani et al. | Cross-layer multi-cloud real-time application QoS monitoring and benchmarking as-a-service framework | |
EP2619664B1 (en) | Validating the resiliency of networked applications | |
US10318399B2 (en) | Using canary instances for software analysis | |
CA2952807A1 (en) | Load generation application and cloud computing benchmarking | |
CN111597099B (zh) | 一种监测部署于云平台的应用运行质量的无侵入仿真方法 | |
Jayathilaka et al. | Detecting performance anomalies in cloud platform applications | |
US20160094392A1 (en) | Evaluating Configuration Changes Based on Aggregate Activity Level | |
US20180285082A1 (en) | Comparing scripts | |
Cotroneo et al. | Dependability evaluation of middleware technology for large-scale distributed caching | |
AU2015271911B9 (en) | Method and system for evaluating the resiliency of a distributed computing service by inducing latency | |
Povzner et al. | Kora: A Cloud-Native Event Streaming Platform For Kafka | |
Baset et al. | Toward achieving operational excellence in a cloud | |
US10079715B1 (en) | Methods, systems and computer readable mediums for performing metadata-driven data collection | |
Björnberg | Cloud native chaos engineering for IoT systems | |
Munonye et al. | Recursive redundancy zoning for highly available microservices architecture | |
Mashat | CPU Autoscaling in Cloud Computing Environments | |
Ringhede | Application–level Fault Tolerance in Groupware Using Web Technologies: A proposed solution | |
JARZĄB et al. | PaaS Performance Evaluation Methodology. | |
Srirama et al. | Deliverable D6. 7 Performance testing of cloud applications, Final Release | |
Moulavi | Self Tuning for Elastic Storage in Cloud Environment | |
Baakind | Automatic scaling of Cassandra clusters |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150317 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20150929 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151020 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160120 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20160329 |