JP2019531559A - ストレージシステム内に入力/出力帯域を割り当てるシステムと方法 - Google Patents
ストレージシステム内に入力/出力帯域を割り当てるシステムと方法 Download PDFInfo
- Publication number
- JP2019531559A JP2019531559A JP2019520403A JP2019520403A JP2019531559A JP 2019531559 A JP2019531559 A JP 2019531559A JP 2019520403 A JP2019520403 A JP 2019520403A JP 2019520403 A JP2019520403 A JP 2019520403A JP 2019531559 A JP2019531559 A JP 2019531559A
- Authority
- JP
- Japan
- Prior art keywords
- input
- output
- amount
- application
- bandwidth
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
- G06F3/0611—Improving I/O performance in relation to response time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0631—Configuration or reconfiguration of storage systems by allocating resources to storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0653—Monitoring storage devices or systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0662—Virtualisation aspects
- G06F3/0667—Virtualisation aspects at data level, e.g. file, record or object virtualisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/068—Hybrid storage device
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
Claims (20)
- ストレージシステム内に入力/出力帯域を割り当てるコンピュータ実装方法において、前記方法の少なくとも一部は、少なくとも1つのプロセッサを含むコンピュータ装置により実行され、前記方法は、
所定のサービス水準合意に従って、割り当てられた量の入力/出力帯域をストレージシステム上で動作するアプリケーションに割り当てるステップと、
前記アプリケーションから、前記ストレージシステム上で入力/出力操作を実行する要求を受信するステップと、
前記入力/出力操作の遂行に関連するレイテンシの量を特定するステップと、
前記入力/出力操作の遂行に関連する前記レイテンシの量に少なくとも部分的に基づいて、前記入力/出力操作で消費される入力/出力帯域の量を計算するステップと、
前記アプリケーションに割り当てられた前記割り当て済みの入力/出力帯域の量から、前記入力/出力操作で消費された前記入力/出力帯域の量を差し引くステップと、
前記アプリケーションに割り当てられた前記残りの入力/出力帯域の量からの帯域を、前記アプリケーションによる将来の入力/出力要求に割り当てるステップと、を含む、方法。 - 前記入力/出力操作の遂行に関連する前記レイテンシの量を特定するステップは、前記入力/出力操作の完了にかかる時間の量を測定するステップを含む、請求項1に記載の方法。
- 前記入力/出力操作の遂行に関連する前記レイテンシの量を特定するステップは、前記入力/出力操作が複数の一連の入力/出力操作を含むかどうかに少なくとも部分的に基づいて、前記入力/出力操作で生じるレイテンシの推定量を計算するステップを含む、請求項1に記載の方法。
- 前記レイテンシの推定量を計算するステップは、前記入力/出力操作と類似した過去の入力/出力操作の観測に基づいて、前記レイテンシの推定量を計算するステップを含む、請求項3に記載の方法。
- 前記アプリケーションに割り当てられた前記割り当て済みの入力/出力帯域の量から差し引かれる前記入力/出力操作で消費される前記入力/出力帯域の量は、前記入力/出力操作のサイズだけではなく、前記入力/出力操作で生じるレイテンシにも比例する、請求項1に記載の方法。
- 前記アプリケーションから前記要求を受信するステップは、複数の入力/出力操作を実行する要求を受信するステップを含む、請求項1に記載の方法。
- 前記アプリケーションから前記要求を受信するステップは、前記複数の入力/出力操作を単一の入力/出力操作として処理するステップを含む、請求項6に記載の方法。
- 前記複数の入力/出力操作を単一の入力/出力操作として処理するステップは、
前記複数の入力/出力操作で消費された全入力/出力帯域量を計算するステップと、
前記複数の入力/出力操作で消費された前記全入力/出力帯域量を差し引くステップと、を含む、請求項7に記載の方法。 - 前記アプリケーションからの前記要求は、
バックアップ操作と、
復元操作と、
復旧操作と、
複製操作と、の少なくとも1つを実行する要求を含む、請求項1に記載の方法。 - 前記割り当て済みの入力/出力帯域の量を前記アプリケーションに割り当てるステップは、前記ストレージシステムから入力/出力帯域を要求するアプリケーションの数と、入力/出力操作を実行するための前記ストレージシステムの容量の双方を基に、前記割り当て済みの入力/出力帯域の量を割り当てるステップを含む、請求項1に記載の方法。
- 前記アプリケーションに割り当てられた残りの前記入力/出力帯域の量からの帯域を前記アプリケーションによる将来の入力/出力要求に割り当てるステップは、前記アプリケーションに将来の入力/出力操作を実行するのに十分な入力/出力帯域の量が残っていないと判断したことを受けて、前記アプリケーションが前記ストレージシステムにおいて少なくとも1つの前記将来の入力/出力操作を実行することを防止するステップを含む、請求項1に記載の方法。
- ストレージシステム内に入力/出力帯域を割り当てるシステムにおいて、
メモリに記憶され、所定のサービス水準合意に従って、割り当てられた量の入力/出力帯域をストレージシステム上で動作するアプリケーションに割り当てる割当モジュールと、
メモリに記憶され、前記アプリケーションから、前記ストレージシステム上で入力/出力操作を実行する要求を受信する受信モジュールと、
メモリに記憶され、前記入力/出力操作の遂行に関連するレイテンシの量を特定する特定モジュールと、
メモリに記憶され、前記入力/出力操作の遂行に関連する前記レイテンシの量に少なくとも部分的に基づいて、前記入力/出力操作で消費される入力/出力帯域の量を計算する計算モジュールと、
メモリに記憶され、前記アプリケーションに割り当てられた前記割り当て済みの入力/出力帯域の量から、前記入力/出力操作で消費された前記入力/出力帯域の量を差し引く減算モジュールと、
前記割当モジュール、前記受信モジュール、前記特定モジュール、前記計算モジュール、及び、前記減算モジュールを実行するように構成された少なくとも1つの物理プロセッサと、を含む、システム。 - 前記割当モジュールは、前記アプリケーションに割り当てられた残りの前記入力/出力帯域の量からの帯域を、前記アプリケーションによる将来の入力/出力要求に割り当てる、請求項12に記載のシステム。
- 前記特定モジュールは、前記入力/出力操作の完了にかかる時間量を測定することで、前記入力/出力操作の遂行に関連する前記レイテンシの量を特定する、請求項12に記載のシステム。
- 前記特定モジュールは、前記入力/出力操作が複数の一連の入力/出力操作を含むかどうかに少なくとも部分的に基づいて、前記入力/出力操作で生じるレイテンシの推定量を計算することで、前記入力/出力操作の遂行に関連する前記レイテンシの量を特定する、請求項12に記載のシステム。
- 前記特定モジュールは、前記入力/出力操作と類似した過去の入力/出力操作の観測に基づいて、前記レイテンシの推定量を計算することで、前記推定されたレイテンシ量を計算する、請求項15に記載のシステム。
- 前記アプリケーションに割り当てられた前記割り当て済みの入力/出力帯域の量から差し引かれる前記入力/出力操作で消費される前記入力/出力帯域の量は、前記入力/出力操作のサイズだけではなく、前記入力/出力操作で生じるレイテンシにも比例する、請求項12に記載のシステム。
- 前記受信モジュールは、複数の入力/出力操作を実行する要求を受信することで、前記アプリケーションから前記要求を受信する、請求項12に記載のシステム。
- 前記アプリケーションからの前記要求は、
バックアップ操作と、
復元操作と、
復旧操作と、
複製操作と、の少なくとも1つを実行する要求を含む、請求項12に記載のシステム。 - 1つ以上のコンピュータ可読命令を含む非一時的コンピュータ可読媒体であって、前記命令が、コンピュータ装置の少なくとも1つのプロセッサによって実行される時、前記コンピュータ装置に対して、
所定のサービス水準合意に従って、割り当てられた量の入力/出力帯域をストレージシステム上で動作するアプリケーションに割り当てるステップと、
前記アプリケーションから、前記ストレージシステム上で入力/出力操作を実行する要求を受信するステップと、
前記入力/出力操作の遂行に関連するレイテンシの量を特定するステップと、
前記入力/出力操作の遂行に関連する前記レイテンシの量に少なくとも部分的に基づいて、前記入力/出力操作で消費される入力/出力帯域の量を計算するステップと、
前記アプリケーションに割り当てられた前記割り当て済みの入力/出力帯域の量から、前記入力/出力操作で消費された前記入力/出力帯域の量を差し引くステップと、
前記アプリケーションに割り当てられた前記残りの入力/出力帯域の量からの帯域を、前記アプリケーションによる将来の入力/出力要求に割り当てるステップと、を実行させる、非一時的コンピュータ可読媒体。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/337,667 | 2016-10-28 | ||
US15/337,667 US10095422B2 (en) | 2016-10-28 | 2016-10-28 | Systems and methods for allocating input/output bandwidth in storage systems |
PCT/US2017/058525 WO2018081421A1 (en) | 2016-10-28 | 2017-10-26 | Systems and methods for allocating input/output bandwidth in storage systems |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019531559A true JP2019531559A (ja) | 2019-10-31 |
JP6730522B2 JP6730522B2 (ja) | 2020-07-29 |
Family
ID=60269981
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019520403A Active JP6730522B2 (ja) | 2016-10-28 | 2017-10-26 | ストレージシステム内に入力/出力帯域を割り当てるシステムと方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10095422B2 (ja) |
EP (1) | EP3532918B1 (ja) |
JP (1) | JP6730522B2 (ja) |
CN (1) | CN109844714B (ja) |
WO (1) | WO2018081421A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10452553B1 (en) * | 2017-10-16 | 2019-10-22 | Veritas Technologies Llc | Systems and methods for distributing cache space |
US10481802B1 (en) * | 2017-10-16 | 2019-11-19 | EMC IP Holding Company LLC | Balancing Mapped RAID background I/O with user I/O via dynamically changing background credits on Mapped RAID system and method |
US10635355B1 (en) * | 2018-11-13 | 2020-04-28 | Western Digital Technologies, Inc. | Bandwidth limiting in solid state drives |
US11249667B2 (en) * | 2019-09-05 | 2022-02-15 | International Business Machines Corporation | Storage performance enhancement |
US11481156B1 (en) * | 2020-02-26 | 2022-10-25 | Marvell Asia Pte, Ltd. | Throughput management of distributed storage system |
CN115914140B (zh) * | 2023-01-10 | 2023-06-20 | 苏州浪潮智能科技有限公司 | 一种存储数据处理方法、装置、电子设备和存储介质 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH09319672A (ja) * | 1996-05-30 | 1997-12-12 | Fuji Xerox Co Ltd | データ伝送装置および方法 |
US6108306A (en) * | 1997-08-08 | 2000-08-22 | Advanced Micro Devices, Inc. | Apparatus and method in a network switch for dynamically allocating bandwidth in ethernet workgroup switches |
US6735633B1 (en) * | 1999-06-01 | 2004-05-11 | Fast Forward Networks | System for bandwidth allocation in a computer network |
US7130807B1 (en) * | 1999-11-22 | 2006-10-31 | Accenture Llp | Technology sharing during demand and supply planning in a network-based supply chain environment |
US7260635B2 (en) * | 2000-03-21 | 2007-08-21 | Centrisoft Corporation | Software, systems and methods for managing a distributed network |
US6947998B2 (en) * | 2001-03-08 | 2005-09-20 | Broadband Royalty Corporation | Method and system for bandwidth allocation tracking in a packet data network |
KR100436365B1 (ko) * | 2001-06-23 | 2004-06-18 | 삼성전자주식회사 | 비동기전송모드 기반의 트래픽 유형에 따른 지연적응적스케줄링 장치 및 방법 |
US7257632B2 (en) * | 2001-07-30 | 2007-08-14 | Fujitsu Limited | Method and apparatus for a bandwidth broker in a packet network |
US20040103193A1 (en) * | 2002-11-08 | 2004-05-27 | Pandya Suketu J. | Response time and resource consumption management in a distributed network environment |
US20040153614A1 (en) * | 2003-02-05 | 2004-08-05 | Haim Bitner | Tape storage emulation for open systems environments |
US7818252B2 (en) * | 2003-02-20 | 2010-10-19 | Gilat Satellite Networks, Ltd | Enforcement of network service level agreements |
JP2005084907A (ja) * | 2003-09-08 | 2005-03-31 | Sony Corp | メモリ帯域制御装置 |
US8265019B2 (en) * | 2007-11-05 | 2012-09-11 | Qualcomm Incorporated | Scheduling a mix of best effort (BE) and delay QoS flows |
US7738492B2 (en) * | 2007-11-19 | 2010-06-15 | Avistar Communications Corporation | Network communication bandwidth management |
US7877495B2 (en) * | 2008-05-29 | 2011-01-25 | Qwest Communications International Inc. | Application levels of service over a network |
US9325583B2 (en) * | 2009-01-27 | 2016-04-26 | Hewlett Packard Enterprise Development Lp | Method and system for optimizing network input/output performance |
US8195888B2 (en) * | 2009-03-20 | 2012-06-05 | Empire Technology Development Llc | Multiprocessor cache prefetch with off-chip bandwidth allocation |
US8667493B2 (en) * | 2010-05-07 | 2014-03-04 | Advanced Micro Devices, Inc. | Memory-controller-parallelism-aware scheduling for multiple memory controllers |
US8522244B2 (en) * | 2010-05-07 | 2013-08-27 | Advanced Micro Devices, Inc. | Method and apparatus for scheduling for multiple memory controllers |
US9559956B2 (en) * | 2011-02-01 | 2017-01-31 | Google Inc. | Sharing bandwidth among multiple users of network applications |
US9215138B2 (en) * | 2012-12-06 | 2015-12-15 | International Business Machines Corporation | Determining a system configuration for performing a collective operation on a parallel computer |
US9363199B1 (en) * | 2013-03-13 | 2016-06-07 | Western Digital Technologies, Inc. | Bandwidth management for data services operating on a local network |
US9391915B2 (en) * | 2013-06-20 | 2016-07-12 | Microsoft Technology Licensing, Llc | Controlling bandwidth across multiple users for interactive services |
CN103500073B (zh) * | 2013-10-08 | 2016-05-18 | 浪潮(北京)电子信息产业有限公司 | 一种数据块迁移方法及装置 |
US9807434B2 (en) * | 2015-09-15 | 2017-10-31 | Arris Enterprises Llc | Dynamic bandwidth allocation for non-real time operations |
-
2016
- 2016-10-28 US US15/337,667 patent/US10095422B2/en active Active
-
2017
- 2017-10-26 CN CN201780063255.4A patent/CN109844714B/zh active Active
- 2017-10-26 JP JP2019520403A patent/JP6730522B2/ja active Active
- 2017-10-26 WO PCT/US2017/058525 patent/WO2018081421A1/en unknown
- 2017-10-26 EP EP17795169.6A patent/EP3532918B1/en active Active
Also Published As
Publication number | Publication date |
---|---|
EP3532918A1 (en) | 2019-09-04 |
US10095422B2 (en) | 2018-10-09 |
CN109844714A (zh) | 2019-06-04 |
US20180121102A1 (en) | 2018-05-03 |
EP3532918B1 (en) | 2023-10-18 |
JP6730522B2 (ja) | 2020-07-29 |
WO2018081421A1 (en) | 2018-05-03 |
CN109844714B (zh) | 2022-08-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6730522B2 (ja) | ストレージシステム内に入力/出力帯域を割り当てるシステムと方法 | |
Shastri et al. | HotSpot: automated server hopping in cloud spot markets | |
US10469565B2 (en) | Management of unreturned system pool resources | |
US9575657B2 (en) | Dataset replica migration | |
US10241681B2 (en) | Management of physical extents for space efficient storage volumes | |
US10216429B2 (en) | Performing post-processing operations for log file writes | |
US10944581B2 (en) | Increasing processing capacity of processor cores during initial program load processing | |
US11573946B2 (en) | Management of memory usage using usage analytics | |
US20170220263A1 (en) | Management of extents for space efficient storage volumes by reusing previously allocated extents | |
US10884818B2 (en) | Increasing processing capacity of virtual machines | |
US10884845B2 (en) | Increasing processing capacity of processor cores during initial program load processing | |
CN111066005A (zh) | 响应于经由总线接口上的i/o操作产生的高速缓存命中对元数据道的异步更新 | |
US10613896B2 (en) | Prioritizing I/O operations | |
US10587527B1 (en) | Systems and methods for apportioning bandwidth in storage systems | |
US10938891B2 (en) | Reducing cloud application execution latency | |
US20140229937A1 (en) | Resource allocation based on revalidation and invalidation rates | |
US10789008B2 (en) | Reducing write collisions in data copy | |
US10990434B2 (en) | Increasing processing capacity of virtual machines for an abnormal event | |
US10657079B1 (en) | Output processor for transaction processing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190414 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190414 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190423 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200303 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200522 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200609 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200702 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6730522 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |