JP5023018B2 - ストレージシステム及びデータ管理方法 - Google Patents
ストレージシステム及びデータ管理方法 Download PDFInfo
- Publication number
- JP5023018B2 JP5023018B2 JP2008213154A JP2008213154A JP5023018B2 JP 5023018 B2 JP5023018 B2 JP 5023018B2 JP 2008213154 A JP2008213154 A JP 2008213154A JP 2008213154 A JP2008213154 A JP 2008213154A JP 5023018 B2 JP5023018 B2 JP 5023018B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- volume
- file
- metadata
- storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
- G06F12/0866—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches for peripheral storage systems, e.g. disk cache
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1415—Saving, restoring, recovering or retrying at system level
- G06F11/1435—Saving, restoring, recovering or retrying at system level using file system or storage system metadata
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/907—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/84—Using snapshots, i.e. a logical point-in-time copy of the data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
プロセッサ12は、リストLをユーザに提示する(ステップ6540)。例えば、プロセッサ12は、NAS装置10に接続された表示装置等に、リストLに追加したエントリの情報を表示する。この表示により、ユーザは、例えば、対象ファイルの更新時刻を適切に把握することができるとともに、或る世代において対象ファイルが不在であることや、ファイル名が変更された可能性があることや、ファイルが複製や移動された可能性があること等を把握することができる。このため、ファイル名が移動や、ファイル名が変更された場合においても、必要なデータが含まれているファイルを把握することができる。なお、このリストLに対してユーザが必要なファイルを含む世代の選択を行うと、上記した実施形態と同様な処理により、選択された世代のデータボリュームを復元するリストアが実行されることとなる。
Claims (15)
- 1以上のファイルについて、前記ファイルの更新時刻情報を含むメタデータ及び実データを含むファイルシステムを記憶するボリュームを格納し、前記ボリュームのブロックを指定したブロックライト要求を受け付けるストレージ装置と、
計算機からファイルを指定したファイルライト要求を受け付け、前記ファイルライト要求が指定するファイルが格納されているボリュームのブロックを特定し、特定した前記ボリュームの前記ブロックを指定したブロックライト要求を前記ストレージ装置に送信するファイルサーバと、を有するストレージシステムであって、
前記ファイルサーバは、
前記ボリュームの復元の基準となる複数の基準時点において、前記ボリュームから前記ファイルシステムに含まれている全てのファイルの前記メタデータを読み込み、読み込んだ全ての前記メタデータを前記ストレージ装置の所定の差分データ記録ボリュームに順次書き込む書込処理部を有し、
前記ストレージ装置は、
最新の基準時点から次の基準時点までに、前記ブロックライト要求を受け付けた場合に、前記ブロックライト要求により指定されたブロックに格納されているデータを、前記差分データ記録ボリュームの前記メタデータを書き込んだ記憶領域以降の記憶領域に時系列に書き込む差分データ退避処理部を有する
ストレージシステム。 - 前記ファイルサーバは、
復元対象ファイルの識別データを受け付ける識別データ受付部と、
前記差分データ記憶ボリュームの前記メタデータが格納された記憶領域を読み取ることにより、前記識別データが含まれているメタデータを検索する検索部と、
検索部により前記識別データが含まれているメタデータが検索できた場合に、前記メタデータから前記復元対象ファイルの前記更新時刻情報を取得する取得部と、
前記取得した更新時刻情報を含む前記復元対象ファイルに関するリストを提示する提示部と
を有する請求項1に記載のストレージシステム。 - 前記メタデータには、各ファイルに対応する実データが格納されている前記ボリュームのブロック番号を含む複数のinodeと、前記識別データと前記inodeとの対応関係が含まれており、
前記ファイルサーバは、
一の基準時点における前記識別データに対応する第1のinodeを取得し、次の基準時点における前記識別データに対応する第2のinodeがなく、前記第1のinodeが存在する場合には、そのinodeの識別データが変更されている可能性があると判断する判断部を更に有し、
前記提示部は、前記識別データが変更されている可能性があることを示す情報及び更新時刻情報を提示する
請求項2に記載のストレージシステム。 - 前記ファイルサーバは、
前記リストの中からどの更新時刻の前記復元対象ファイルを復元するかの指定を受け付け、前記ストレージ装置に前記指定を通知する復元指定処理部を更に有し、
前記ストレージ装置は、
前記差分データ記憶ボリュームから前記指定に対応する更新時刻の前記復元対象ファイルの復元に必要なデータを読み出して、前記復元対象ファイルを復元する復元処理部
を更に有する
請求項2又は請求項3に記載のストレージシステム。 - 前記ストレージ装置は、
データを記憶可能な半導体メモリを更に有し、
前記ファイルサーバは、
前記差分データ記憶ボリュームに格納された複数の前記基準時点における全てのファイルのメタデータを前記半導体メモリに格納させるキャッシュ制御部をさらに備え、
前記検索部は、前記半導体メモリの前記メタデータから前記識別データが含まれているメタデータを検索する
請求項2乃至請求項4のいずれか一項に記載のストレージシステム。 - データを格納可能な外部デバイスを更に有し、
前記ストレージ装置は、
前記差分データ記憶ボリュームのデータを前記外部デバイスに退避する退避部を更に備え、
前記復元処理部は、前記指定に対応する状態の前記復元対象ファイルの復元に必要なデータを、前記外部デバイスから読み出して、前記復元対象ファイルを復元する
請求項4に記載のストレージシステム。 - 前記ストレージ装置は、
前記差分データ記憶ボリュームのデータを前記外部デバイスに退避させた後において、前記差分データ記憶ボリュームに前記メタデータを維持しておくメタデータ維持部を更に有し、
前記検索部は、前記差分データ記憶ボリュームの前記メタデータから前記識別データが含まれているメタデータを検索する
請求項6に記載のストレージシステム。 - 前記ストレージ装置の前記差分データ退避処理部は、
一の前記基準時点における全てのファイルのメタデータが連続する記憶領域に格納されるとともに、前記一の基準時点から次の基準時点までに、前記差分データ退避処理部により書き込まれるデータが前記メタデータの記憶領域に後続する記憶領域に格納されるような仮想ボリュームを、前記差分データ記憶ボリュームの記憶領域を利用して生成する
請求項1乃至請求項7のいずれか一項に記載のストレージシステム。 - 1以上のファイルについて、前記ファイルの更新時刻情報を含むメタデータ及び実データを含むファイルシステムを記憶する論理ボリュームを格納し、前記論理ボリュームのブロックを指定したブロックライト要求を受け付けるストレージ装置と、計算機からファイルを指定したファイルライト要求を受け付け、前記ファイルライト要求が指定するファイルが格納されている前記論理ボリュームのブロックを特定し、特定した前記論理ボリュームの前記ブロックを指定したブロックライト要求を前記ストレージ装置に送信するファイルサーバと、を有するストレージシステムにおけるデータ管理方法であって、
前記論理ボリュームの復元の基準となる複数の基準時点において、前記論理ボリュームから前記ファイルシステムに含まれている全てのファイルの前記メタデータを読み込み、読み込んだ全ての前記メタデータを前記ストレージ装置の所定の差分データ記録ボリュームに順次書き込む書込処理ステップと、
各基準時点から次の基準時点までに、前記ストレージ装置が前記ブロックライト要求を受け付けた場合に、前記ブロックライト要求により指定されたブロックに格納されているデータを、前記差分データ記録ボリュームの前記メタデータを書き込んだ記憶領域以降の記憶領域に時系列に書き込む差分データ退避処理ステップと、
を有するデータ管理方法。 - 前記ファイルサーバは、
復元対象ファイルの識別データを受け付ける識別データ受付ステップと、
前記差分データ記憶ボリュームの前記メタデータが格納された記憶領域を読み取ることにより、前記識別データが含まれているメタデータを検索する検索ステップと、
前記識別データが含まれているメタデータが検索できた場合に、前記メタデータから前記復元対象ファイルの前記更新時刻情報を取得する取得ステップと、
前記取得した更新時刻情報を含む前記復元対象ファイルに関するリストを提示する提示ステップと
を有する請求項9に記載のデータ管理方法。 - 前記メタデータには、各ファイルに対応する実データが格納されている前記ボリュームのブロック番号を含む複数のinodeと、前記識別データと前記inodeとの対応関係が含まれており、
一の基準時点における前記識別データに対応する第1のinodeを取得し、次の基準時点における前記識別データに対応する第2のinodeがなく、前記第1のinodeが存在する場合には、そのinodeの識別データが変更されている可能性があると判断する判断ステップを更に有し、
前記提示ステップは、前記識別データが変更されている可能性のあることを示す情報及び更新時刻情報を提示する
請求項10に記載のデータ管理方法。 - 前記リストの中からどの更新時刻の前記復元対象ファイルを復元するかの指定を受け付け、ストレージ装置に前記指定を通知する復元指定処理ステップと、
前記差分データ記憶ボリュームから前記指定に対応する更新時刻の前記復元候補ファイルの復元に必要なデータを読み出して、前記復元対象ファイルを復元する復元処理ステップと
を有する請求項10又は請求項11に記載のデータ管理方法。 - 前記ストレージ装置は、データを記憶可能な半導体メモリを有し、
前記差分データ記憶ボリュームに格納された複数の前記基準時点における全てのファイルのメタデータを前記半導体メモリに格納するキャッシュ実行ステップを更に備え、
前記検索ステップは、前記半導体メモリの前記メタデータから前記識別データが含まれているメタデータを検索する
請求項10乃至請求項12のいずれか一項に記載のデータ管理方法。 - 前記ストレージシステムは、データを格納可能な外部デバイスを更に有し、
前記差分データ記憶ボリュームのデータを前記外部デバイスに退避する退避ステップを更に備え、
前記復元処理ステップは、前記指定に対応する状態の前記復元対象ファイルの復元に必要なデータを、前記外部デバイスから読み出して、前記復元対象ファイルを復元する
請求項13に記載のデータ管理方法。 - 差分データ退避処理ステップは、
一の前記基準時点における全てのファイルのメタデータが連続する記憶領域に格納されるとともに、前記一の基準時点から次の基準時点までに、前記ブロックライト要求により指定されたブロックの前記データが前記メタデータの記憶領域に後続する記憶領域に格納されるような仮想ボリュームを、前記差分データ記憶ボリュームの記憶領域を利用して生成する
請求項9乃至請求項14のいずれか一項に記載のデータ管理方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008213154A JP5023018B2 (ja) | 2008-08-21 | 2008-08-21 | ストレージシステム及びデータ管理方法 |
US12/243,004 US20100049754A1 (en) | 2008-08-21 | 2008-10-01 | Storage system and data management method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008213154A JP5023018B2 (ja) | 2008-08-21 | 2008-08-21 | ストレージシステム及びデータ管理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010049488A JP2010049488A (ja) | 2010-03-04 |
JP5023018B2 true JP5023018B2 (ja) | 2012-09-12 |
Family
ID=41697313
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008213154A Expired - Fee Related JP5023018B2 (ja) | 2008-08-21 | 2008-08-21 | ストレージシステム及びデータ管理方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20100049754A1 (ja) |
JP (1) | JP5023018B2 (ja) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8312242B2 (en) * | 2008-10-30 | 2012-11-13 | Hewlett-Packard Development Company, L.P. | Tracking memory space in a storage system |
US8560524B2 (en) * | 2008-10-30 | 2013-10-15 | Hewlett-Packard Development Company, L.P. | Allocating priorities to prevent deadlocks in a storage system |
US9176963B2 (en) * | 2008-10-30 | 2015-11-03 | Hewlett-Packard Development Company, L.P. | Managing counters in a distributed file system |
US8874627B2 (en) * | 2008-10-30 | 2014-10-28 | Hewlett-Packard Development Company, L.P. | Enumerating metadata in file system directories |
US9076239B2 (en) * | 2009-04-30 | 2015-07-07 | Stmicroelectronics S.R.L. | Method and systems for thumbnail generation, and corresponding computer program product |
EP2845103A4 (en) * | 2012-04-30 | 2016-04-20 | Hewlett Packard Development Co | BLOCK LEVEL STORAGE |
JP5944502B2 (ja) * | 2012-06-11 | 2016-07-05 | 株式会社日立製作所 | 計算機システム及び制御方法 |
WO2014054078A1 (en) | 2012-10-05 | 2014-04-10 | Hitachi, Ltd. | Restoring method and computer system |
US10713183B2 (en) * | 2012-11-28 | 2020-07-14 | Red Hat Israel, Ltd. | Virtual machine backup using snapshots and current configuration |
US9342256B2 (en) * | 2013-03-14 | 2016-05-17 | SanDisk Technologies, Inc. | Epoch based storage management for a storage device |
WO2015004769A1 (ja) * | 2013-07-11 | 2015-01-15 | 株式会社 東芝 | 仮想ディスクイメージを処理するシステム、クライアント端末、及び方法 |
US20160006829A1 (en) * | 2013-10-02 | 2016-01-07 | Hitachi, Ltd. | Data management system and data management method |
JP5991699B2 (ja) | 2014-08-08 | 2016-09-14 | インターナショナル・ビジネス・マシーンズ・コーポレーションInternational Business Machines Corporation | 情報処理装置、情報処理システム、バックアップ方法、およびプログラム |
JP6520448B2 (ja) | 2015-06-18 | 2019-05-29 | 富士通株式会社 | 情報処理システム、情報処理装置及び情報処理装置制御方法 |
US9961141B1 (en) | 2015-06-29 | 2018-05-01 | Amazon Technologies, Inc. | Techniques and systems for tray-based storage and organization in automated data storage systems |
US10379959B1 (en) | 2015-06-29 | 2019-08-13 | Amazon Technologies, Inc. | Techniques and systems for physical manipulation of data storage devices |
US10649850B1 (en) | 2015-06-29 | 2020-05-12 | Amazon Technologies, Inc. | Heterogenous media storage and organization in automated data storage systems |
US9923966B1 (en) * | 2015-06-29 | 2018-03-20 | Amazon Technologies, Inc. | Flexible media storage and organization in automated data storage systems |
US10838911B1 (en) | 2015-12-14 | 2020-11-17 | Amazon Technologies, Inc. | Optimization of data request processing for data storage systems |
US11301422B2 (en) * | 2016-02-23 | 2022-04-12 | Samsung Electronics Co., Ltd. | System and methods for providing fast cacheable access to a key-value device through a filesystem interface |
US10331374B2 (en) * | 2017-06-30 | 2019-06-25 | Oracle International Corporation | High-performance writable snapshots in data storage systems |
JP2019204278A (ja) | 2018-05-23 | 2019-11-28 | 富士通株式会社 | 情報処理システム、情報処理装置およびプログラム |
JP7127439B2 (ja) * | 2018-09-06 | 2022-08-30 | オムロン株式会社 | データ処理装置、データ処理方法及びデータ処理プログラム |
US10921986B2 (en) | 2019-05-14 | 2021-02-16 | Oracle International Corporation | Efficient space management for high performance writable snapshots |
US11892983B2 (en) | 2021-04-29 | 2024-02-06 | EMC IP Holding Company LLC | Methods and systems for seamless tiering in a distributed storage system |
US11677633B2 (en) | 2021-10-27 | 2023-06-13 | EMC IP Holding Company LLC | Methods and systems for distributing topology information to client nodes |
US11762682B2 (en) | 2021-10-27 | 2023-09-19 | EMC IP Holding Company LLC | Methods and systems for storing data in a distributed system using offload components with advanced data services |
US12007942B2 (en) * | 2021-10-27 | 2024-06-11 | EMC IP Holding Company LLC | Methods and systems for seamlessly provisioning client application nodes in a distributed system |
US11922071B2 (en) | 2021-10-27 | 2024-03-05 | EMC IP Holding Company LLC | Methods and systems for storing data in a distributed system using offload components and a GPU module |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7475098B2 (en) * | 2002-03-19 | 2009-01-06 | Network Appliance, Inc. | System and method for managing a plurality of snapshots |
US7383264B2 (en) * | 2003-03-27 | 2008-06-03 | Hitachi, Ltd. | Data control method for duplicating data between computer systems |
US7155465B2 (en) * | 2003-04-18 | 2006-12-26 | Lee Howard F | Method and apparatus for automatically archiving a file system |
JP2005050024A (ja) * | 2003-07-31 | 2005-02-24 | Toshiba Corp | 計算機システムおよびプログラム |
US7814056B2 (en) * | 2004-05-21 | 2010-10-12 | Computer Associates Think, Inc. | Method and apparatus for data backup using data blocks |
US7966495B2 (en) * | 2005-03-21 | 2011-06-21 | Revinetix, Inc. | Conserving file system with backup and validation |
US7974952B1 (en) * | 2005-04-18 | 2011-07-05 | Emc Corporation | Tracking file system changes for backup |
JP4809040B2 (ja) * | 2005-11-08 | 2011-11-02 | 株式会社日立製作所 | ストレージ装置及びスナップショットのリストア方法 |
US20070185936A1 (en) * | 2006-02-07 | 2007-08-09 | Derk David G | Managing deletions in backup sets |
US7873601B1 (en) * | 2006-06-29 | 2011-01-18 | Emc Corporation | Backup of incremental metadata in block based backup systems |
JP2008033527A (ja) * | 2006-07-27 | 2008-02-14 | Hitachi Ltd | ストレージ装置、ディスク装置及びデータ復元方法 |
US7761424B2 (en) * | 2006-08-10 | 2010-07-20 | International Business Machines Corporation | Recording notations per file of changed blocks coherent with a draining agent |
-
2008
- 2008-08-21 JP JP2008213154A patent/JP5023018B2/ja not_active Expired - Fee Related
- 2008-10-01 US US12/243,004 patent/US20100049754A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US20100049754A1 (en) | 2010-02-25 |
JP2010049488A (ja) | 2010-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5023018B2 (ja) | ストレージシステム及びデータ管理方法 | |
US9747036B2 (en) | Tiered storage device providing for migration of prioritized application specific data responsive to frequently referenced data | |
US9965216B1 (en) | Targetless snapshots | |
JP4776342B2 (ja) | ストレージシステムでオブジェクトレベルのスナップショットを生成するシステムと方法 | |
US8478729B2 (en) | System and method for controlling the storage of redundant electronic files to increase storage reliability and space efficiency | |
JP4741371B2 (ja) | システム、サーバ装置及びスナップショットの形式変換方法 | |
US8200631B2 (en) | Snapshot reset method and apparatus | |
US8510526B2 (en) | Storage apparatus and snapshot control method of the same | |
US9396198B2 (en) | Computer system, file management method and metadata server | |
JP4143611B2 (ja) | バックアップ生成装置、リカバリ処理装置、バックアップ生成方法、リカバリ処理方法、及びプログラム | |
US20070168398A1 (en) | Permanent Storage Appliance | |
US9569311B2 (en) | Computer system for backing up data | |
US8108637B2 (en) | Information processing system, controlling method in information processing system, and managing apparatus to manage remote copy in consideration of saving power | |
JP4713951B2 (ja) | 仮想テープライブラリシステムおよび仮想テープ書き込み方法 | |
JP2008242744A (ja) | Cdpに従うリカバリを実行するストレージ装置の管理装置及び方法 | |
JP2006031446A (ja) | データ記憶装置、データ記憶方法およびデータ記憶プログラム | |
JP4667225B2 (ja) | 制御装置およびコピー制御方法 | |
JP2005215940A (ja) | ストレージシステム、サーバ装置及び先行コピーデータ生成方法 | |
US8117405B2 (en) | Storage control method for managing access environment enabling host to access data | |
US7587466B2 (en) | Method and computer system for information notification | |
JP2010152781A (ja) | バックアップサーバ装置、バックアップ/リストアプログラム、およびバックアップ/リストア方法 | |
JP2000227868A (ja) | バックアップ取得方法および計算機システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20101110 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120531 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120612 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120618 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150622 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |