JP5187017B2 - 分散ディスクキャッシュシステム及び分散ディスクキャッシュ方法 - Google Patents
分散ディスクキャッシュシステム及び分散ディスクキャッシュ方法 Download PDFInfo
- Publication number
- JP5187017B2 JP5187017B2 JP2008158591A JP2008158591A JP5187017B2 JP 5187017 B2 JP5187017 B2 JP 5187017B2 JP 2008158591 A JP2008158591 A JP 2008158591A JP 2008158591 A JP2008158591 A JP 2008158591A JP 5187017 B2 JP5187017 B2 JP 5187017B2
- Authority
- JP
- Japan
- Prior art keywords
- cache
- access
- server
- data area
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
- G06F12/0866—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches for peripheral storage systems, e.g. disk cache
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
- G06F12/0888—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches using selective caching, e.g. bypass
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0629—Configuration or reconfiguration of storage systems
- G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
- G06F3/0656—Data buffering arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Memory System Of A Hierarchy Structure (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
2 キャッシュ管理サーバ
3 アクセス装置
4 パケット解析装置
5 キャッシュサーバ
6 ネットワーク
10 ストレージサーバ
11 ディスク装置(RAID)
41 情報蓄積テーブル
42 情報管理テーブル
51 キャッシュ
52 割当てキャッシュ領域
110 スライス(セグメント)
111 デバイスメタ情報
112 スライスアクセスカウンタ
113 スライスメタ情報
114 スライスデータ
Claims (4)
- 複数のデータ領域に分割されたストレージ装置と、
前記ストレージ装置の1又は複数のデータ領域をキャッシュするキャッシュサーバと、
ネットワークを介して、前記ストレージ装置又はキャッシュサーバにアクセスするアクセス装置と、
前記ネットワークに接続され、前記アクセス装置からの前記ストレージ装置への前記ネットワークを介してのアクセスを監視し、前記アクセスの集中度が予め定められた第1の閾値を超えるデータ領域を、前記キャッシュサーバにキャッシュする監視装置と、
前記データ領域毎に設定され、前記キャッシュサーバにキャッシュされた前記データ領域のキャッシュの継続を制御する制御情報を格納する情報管理テーブルと、
前記アクセス装置からの前記ストレージ装置へのアクセスを監視した結果を統計処理することにより生成した統計情報を格納する情報蓄積テーブルとを備え、
前記監視装置が、前記キャッシュサーバにキャッシュされた前記データ領域の制御情報を前記情報管理テーブルに格納し、所定の時間帯毎に又は所定の単位時間毎に前記ストレージ装置の前記データ領域についての前記統計情報を更新し、前記データ領域毎に設定された前記制御情報に従って、更新された前記統計情報に基づいて、前記ストレージ装置の前記データ領域への前記アクセスの集中度が前記第1の閾値を超えるか否かを監視し、前記キャッシュされたデータ領域への前記アクセスの集中度が予め定められた第2の閾値を下回るか否かを監視する
ことを特徴とする分散ディスクキャッシュシステム。 - 前記監視装置が、前記アクセス装置からの前記キャッシュサーバへの前記ネットワークを介してのアクセスを監視し、前記キャッシュされたデータ領域へのアクセスの集中度が前記第2の閾値を下回る場合に、前記キャッシュされたデータ領域の前記キャッシュサーバへのキャッシュを解消する
ことを特徴とする請求項1に記載の分散ディスクキャッシュシステム。 - 当該分散ディスクキャッシュシステムが、更に、
キャッシュサーバを管理するキャッシュ管理サーバを備え、
前記監視装置が、前記第1の閾値を超えるデータ領域を前記キャッシュサーバにキャッシュするキャッシュ指示を前記ストレージ装置に送信し、
前記ストレージ装置が、前記キャッシュ指示に応じて、前記キャッシュ管理サーバにキャッシュ領域割当て要求を行い、
前記キャッシュ管理サーバが、前記要求に応じて、前記キャッシュサーバにおける記憶領域を割り当て、
前記ストレージ装置が、前記第1の閾値を超えるデータ領域を、前記割り当てられた記憶領域にキャッシュする
ことを特徴とする請求項1に記載の分散ディスクキャッシュシステム。 - 複数のデータ領域に分割されたストレージ装置と、前記ストレージ装置の1又は複数のデータ領域をキャッシュするキャッシュサーバと、ネットワークを介して、前記ストレージ装置又はキャッシュサーバにアクセスするアクセス装置と、前記ネットワークに接続され、前記アクセス装置からの前記ストレージ装置への前記ネットワークを介してのアクセスを監視し、前記アクセスの集中度が予め定められた第1の閾値を超えるデータ領域を、前記キャッシュサーバにキャッシュする監視装置と、前記データ領域毎に設定され、前記キャッシュサーバにキャッシュされた前記データ領域のキャッシュの継続を制御する制御情報を格納する情報管理テーブルと、前記アクセス装置からの前記ストレージ装置へのアクセスを監視した結果を統計処理することにより生成した統計情報を格納する情報蓄積テーブルとを備える分散ディスクキャッシュシステムにおける分散ディスクキャッシュ方法であって、
前記監視装置が、
前記アクセス装置からの前記ストレージ装置への前記ネットワークを介してのアクセスを監視し、
前記アクセスの集中度が予め定められた第1の閾値を超えるデータ領域を、前記キャッシュサーバにキャッシュし、
前記キャッシュサーバにキャッシュされた前記データ領域の制御情報を前記情報管理テーブルに格納し、
所定の時間帯毎に又は所定の単位時間毎に前記ストレージ装置の前記データ領域についての前記統計情報を更新し、
前記データ領域毎に設定された前記制御情報に従って、更新された前記統計情報に基づいて、前記ストレージ装置の前記データ領域への前記アクセスの集中度が前記第1の閾値を超えるか否かを監視し、前記キャッシュされたデータ領域への前記アクセスの集中度が予め定められた第2の閾値を下回るか否かを監視する
ことを特徴とする分散ディスクキャッシュ方法。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008158591A JP5187017B2 (ja) | 2008-06-18 | 2008-06-18 | 分散ディスクキャッシュシステム及び分散ディスクキャッシュ方法 |
EP09156350A EP2136299A1 (en) | 2008-06-18 | 2009-03-26 | Distributed disk cache system and distributed disk cache method |
US12/471,940 US8166242B2 (en) | 2008-06-18 | 2009-05-26 | Distributed disk cache system and distributed disk cache method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008158591A JP5187017B2 (ja) | 2008-06-18 | 2008-06-18 | 分散ディスクキャッシュシステム及び分散ディスクキャッシュ方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010002942A JP2010002942A (ja) | 2010-01-07 |
JP5187017B2 true JP5187017B2 (ja) | 2013-04-24 |
Family
ID=40651425
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008158591A Expired - Fee Related JP5187017B2 (ja) | 2008-06-18 | 2008-06-18 | 分散ディスクキャッシュシステム及び分散ディスクキャッシュ方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US8166242B2 (ja) |
EP (1) | EP2136299A1 (ja) |
JP (1) | JP5187017B2 (ja) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5491932B2 (ja) * | 2010-03-30 | 2014-05-14 | 株式会社インテック | ネットワーク・ストレージ・システム、方法、クライアント装置、キャッシュ装置、管理サーバ、及びプログラム |
US20110314226A1 (en) * | 2010-06-16 | 2011-12-22 | Byungcheol Cho | Semiconductor storage device based cache manager |
KR101694307B1 (ko) * | 2012-02-29 | 2017-01-09 | 한국전자통신연구원 | 디스크 캐쉬 효과를 극대화하는 워크플로우 작업 스케줄링 장치 및 방법 |
US8825724B2 (en) | 2012-03-29 | 2014-09-02 | Lsi Corporation | File system hinting |
US9015525B2 (en) * | 2012-06-19 | 2015-04-21 | Lsi Corporation | Smart active-active high availability DAS systems |
GB2503274A (en) * | 2012-06-22 | 2013-12-25 | Ibm | Restoring redundancy in a RAID |
US9367412B2 (en) * | 2012-06-25 | 2016-06-14 | Netapp, Inc. | Non-disruptive controller replacement in network storage systems |
TWI485560B (zh) * | 2012-08-31 | 2015-05-21 | Ibm | 資料分析系統、快取裝置、與資料處理方法 |
CN103678405B (zh) * | 2012-09-21 | 2016-12-21 | 阿里巴巴集团控股有限公司 | 邮件索引建立方法及系统、邮件搜索方法及系统 |
JP5741544B2 (ja) * | 2012-09-27 | 2015-07-01 | 日本電気株式会社 | キャッシュ制御装置、ディスクアレイ装置、アレイコントローラおよびキャッシュ制御方法 |
CN103902592B (zh) * | 2012-12-27 | 2018-02-27 | 深圳市腾讯计算机系统有限公司 | 基于MapReduce实现分析函数的方法及系统 |
JP6020291B2 (ja) * | 2013-03-27 | 2016-11-02 | 富士通株式会社 | 通信監視方法、通信監視装置、通信監視プログラム |
JP6131170B2 (ja) * | 2013-10-29 | 2017-05-17 | 株式会社日立製作所 | 計算機システム、及びデータ配置制御方法 |
JP6299169B2 (ja) * | 2013-11-14 | 2018-03-28 | 富士通株式会社 | ストレージ装置、ストレージ装置の制御方法、及びストレージ装置の制御プログラム |
JP2016110305A (ja) | 2014-12-04 | 2016-06-20 | 富士通株式会社 | ストレージ制御装置、キャッシュ制御方法、キャッシュ制御プログラム、及びコンピュータシステム |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06124239A (ja) * | 1992-10-13 | 1994-05-06 | Kawasaki Steel Corp | キャッシュメモリの常駐データ制御装置 |
JP3117003B2 (ja) * | 1997-07-03 | 2000-12-11 | 日本電気株式会社 | 広域分散ファイルシステム |
US6438652B1 (en) * | 1998-10-09 | 2002-08-20 | International Business Machines Corporation | Load balancing cooperating cache servers by shifting forwarded request |
JP2001134522A (ja) | 1999-11-01 | 2001-05-18 | Prostor Japan:Kk | San型インテリジェント・データ・キャッシュ装置 |
US6813693B2 (en) * | 2000-12-11 | 2004-11-02 | Microsoft Corporation | System and method for the discovery and use of repetitively accessed data |
JP4039821B2 (ja) | 2001-05-09 | 2008-01-30 | 株式会社日立製作所 | ディスク制御装置を用いた計算機システムおよびその運用サービス |
JP3999004B2 (ja) * | 2002-03-12 | 2007-10-31 | 富士通株式会社 | コンテンツ管理方法 |
JP2005141575A (ja) * | 2003-11-07 | 2005-06-02 | Fujitsu Ltd | 情報処理装置およびバス制御装置 |
JP4189342B2 (ja) * | 2004-03-11 | 2008-12-03 | 東芝ソリューション株式会社 | ストレージ装置、ストレージコントローラ及びライトバックキャッシュ制御方法 |
CN100342352C (zh) * | 2005-03-14 | 2007-10-10 | 北京邦诺存储科技有限公司 | 一种可扩充的高速存储网络缓存系统 |
JP2007233700A (ja) * | 2006-03-01 | 2007-09-13 | Hitachi Ltd | キャッシュシステム、負荷監視サーバ、キャッシュ管理サーバ及びキャッシュサーバ。 |
JP2008181243A (ja) * | 2007-01-23 | 2008-08-07 | Hitachi Ltd | ストレージシステムのキャッシュパーティション領域の設定を制御するデータベース管理システム |
-
2008
- 2008-06-18 JP JP2008158591A patent/JP5187017B2/ja not_active Expired - Fee Related
-
2009
- 2009-03-26 EP EP09156350A patent/EP2136299A1/en not_active Withdrawn
- 2009-05-26 US US12/471,940 patent/US8166242B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010002942A (ja) | 2010-01-07 |
US8166242B2 (en) | 2012-04-24 |
US20090319724A1 (en) | 2009-12-24 |
EP2136299A1 (en) | 2009-12-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5187017B2 (ja) | 分散ディスクキャッシュシステム及び分散ディスクキャッシュ方法 | |
EP2239655B1 (en) | Storage controller and storage control method | |
US8566550B2 (en) | Application and tier configuration management in dynamic page reallocation storage system | |
JP7135162B2 (ja) | 情報処理システム、ストレージシステム及びデータ転送方法 | |
US9983935B2 (en) | Storage checkpointing in a mirrored virtual machine system | |
US8812785B2 (en) | Managing track discard requests to include in discard track messages | |
JP4918940B2 (ja) | 正センタの仮想テープ装置、副センタの仮想テープ装置、仮想ライブラリシステムおよび仮想テープ制御方法 | |
US20150293708A1 (en) | Connectivity-Aware Storage Controller Load Balancing | |
US8250284B2 (en) | Adaptive memory allocation of a second data storage volume based on an updated history of capacity of a first data volume | |
US8725971B2 (en) | Storage apparatus and method for controlling storage apparatus involving snapshots | |
JP2012104097A (ja) | ストレージシステムにおける要求に対する応答に関連した待ち時間削減 | |
US10897517B2 (en) | Distributed cache live migration | |
US20150199253A1 (en) | Method and system for collecting and pre-processing quality of service data in a storage system | |
US20160179432A1 (en) | Information processing apparatus and memory management method | |
US9645926B2 (en) | Storage system and method for managing file cache and block cache based on access type | |
US10152242B1 (en) | Host based hints | |
US20170220476A1 (en) | Systems and Methods for Data Caching in Storage Array Systems | |
WO2017126003A1 (ja) | 複数種類のメモリデバイスを含む計算機システム及び方法 | |
US11315028B2 (en) | Method and apparatus for increasing the accuracy of predicting future IO operations on a storage system | |
US7853757B2 (en) | Avoiding failure of an initial program load in a logical partition of a data storage system | |
US20180052750A1 (en) | Online nvm format upgrade in a data storage system operating with active and standby memory controllers | |
Eswaran et al. | Tackling memory footprint expansion during live migration of virtual machines,” | |
JP5172594B2 (ja) | 情報処理システム及び情報処理システムの運用方法 | |
JP6200100B2 (ja) | 計算機システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110315 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120625 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120703 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120830 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121225 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130107 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160201 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |