JP5235899B2 - 階層型ストレージ・システムへのトランスペアレントなバックアップの方法、システム、及びプログラム - Google Patents
階層型ストレージ・システムへのトランスペアレントなバックアップの方法、システム、及びプログラム Download PDFInfo
- Publication number
- JP5235899B2 JP5235899B2 JP2009545897A JP2009545897A JP5235899B2 JP 5235899 B2 JP5235899 B2 JP 5235899B2 JP 2009545897 A JP2009545897 A JP 2009545897A JP 2009545897 A JP2009545897 A JP 2009545897A JP 5235899 B2 JP5235899 B2 JP 5235899B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- data set
- management application
- server
- tape
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 52
- 238000013523 data management Methods 0.000 claims description 103
- 230000004044 response Effects 0.000 claims description 7
- 230000008569 process Effects 0.000 claims description 5
- 230000010076 replication Effects 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 13
- 238000004891 communication Methods 0.000 description 12
- 230000008901 benefit Effects 0.000 description 9
- 238000012545 processing Methods 0.000 description 9
- 238000012546 transfer Methods 0.000 description 8
- 238000007726 management method Methods 0.000 description 7
- 238000004590 computer program Methods 0.000 description 4
- 238000003491 array Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 239000000463 material Substances 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 238000005538 encapsulation Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1456—Hardware arrangements for backup
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1464—Management of the backup or restore process for networked environments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1469—Backup restoration techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
Claims (8)
- データ管理アプリケーションおよびテープ・サーバによる階層型ストレージ・システムへのトランスペアレントなバックアップの方法であって、
前記データ管理アプリケーションがバックアップ動作を要求するステップであって、前記要求をネットワーク・データ・管理プロトコル(NDMP)を使って前記テープ・サーバへ通信する、前記要求するステップと、
前記テープ・サーバがデータ・セットの一意の識別子を生成するステップと、
前記テープ・サーバが前記データ・セットをデータ・ソースから前記階層型ストレージ・システムへ転送するステップと、
前記テープ・サーバが前記要求に応えて前記識別子を前記データ管理アプリケーションへ送信するステップであって、前記識別子は、前記階層型ストレージ・システム内で前記データ・セットを特定する、前記送信するステップと、
前記データ管理アプリケーションが前記識別子を前記テープ・サーバから受信するステップと、
前記テープ・サーバが、前記データ・セットの複数のインスタンスを、前記階層型ストレージ・システム内の前記データ管理アプリケーションに対してトランスペアレントな位置に保存するステップであって、第1データ・セット・インスタンスは、ハード・ディスク上に保存され、第2データ・セット・インスタンスは、磁気テープ上に保存される、前記保存するステップと、
前記データ管理アプリケーションが、前記第1データ・セット・インスタンスが利用可能であれば、前記識別子を用いて前記データ・セットを前記ハード・ディスクから前記データ・ソースへリストアするステップと、
前記データ管理アプリケーションが、前記第1データ・セット・インスタンスが利用不可能であれば、前記識別子を用いて前記データ・セットを前記磁気テープから前記データ・ソースへリストアするステップと、
を含む、方法。 - 前記テープ・サーバが、前記階層型ストレージ・システム内で、前記データ・セットの移動および複製の中から選択されるプロセスを実行するステップをさらに含む、請求項1に記載の方法。
- 前記データ管理アプリケーションが、前記プロセスを実行するステップに先立って、前記データ・セットのデータ特性を前記テープ・サーバへ送信するステップをさらに含む、請求項2に記載の方法。
- 前記データ管理アプリケーションが、前記階層型ストレージ・システムに保存された前記データ・セットの部分をリストア用に特定するステップと、
前記データ管理アプリケーションが、前記データ・セットの前記部分を、前記識別子を用いて、前記テープ・サーバに対して要求するステップと、
前記テープ・サーバが、前記データ・セットの前記要求された部分を前記階層型ストレージ・システムから前記データ・ソースへ送信するステップと、
をさらに含む、請求項1に記載の方法。 - 階層型ストレージ・システムへのトランスペアレントなバックアップ用のシステムであって、
バックアップ動作の要求を、ネットワーク・データ管理プロトコル(NDMP)を使ってテープ・サーバおよびデータ・サーバへ通信するように構成されている、データ管理アプリケーションと、
前記要求に応えて、データ・セットの一意の識別子を生成し、前記データ・セットを前記データ・サーバから前記階層型ストレージ・システムへ転送し、前記識別子を前記データ管理アプリケーションへ送信するように構成されている、前記テープ・サーバであって、前記識別子は、前記階層型ストレージ・システム内で前記データ・セットを特定し、前記データ・セットの複数のインスタンスを、前記階層型ストレージ・システム内の前記データ管理アプリケーションに対してトランスペアレントな位置に保存する前記テープ・サーバであって、第1データ・セット・インスタンスは、ハード・ディスク上に保存され、第2データ・セット・インスタンスは、磁気テープ上に保存される、前記テープ・サーバと、
を含み、
前記データ管理アプリケーションは、さらに、前記識別子を前記テープ・サーバから受信し、前記第1データ・セット・インスタンスが利用可能であれば、前記識別子を用いて前記データ・セットを前記ハード・ディスクから前記データ・ソースへリストアし、前記第1データ・セット・インスタンスが利用不可能であれば、前記識別子を用いて前記データ・セットを前記磁気テープから前記データ・ソースへリストアする、システム。 - 前記テープ・サーバは、前記データ管理アプリケーションとは論理的に別個であり、前記データ管理アプリケーションが、さらに、前記データ・セットのデータ特性を前記テープ・サーバへ送信するように構成されている、請求項5に記載のシステム。
- 前記テープ・サーバが、さらに、前記階層型ストレージ・システム内で、前記データ・セットの保存、移動、および複製の中から選択されるプロセスを用いて前記データ・セットを管理するように構成されている、請求項6に記載のシステム。
- コンピュータに、請求項1乃至4のいずれかに記載のステップを実行させる、プログラム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/625,418 | 2007-01-22 | ||
US11/625,418 US7716186B2 (en) | 2007-01-22 | 2007-01-22 | Method and system for transparent backup to a hierarchical storage system |
PCT/EP2008/050320 WO2008090043A1 (en) | 2007-01-22 | 2008-01-14 | Method and system for transparent backup to a hierarchical storage system |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010517125A JP2010517125A (ja) | 2010-05-20 |
JP5235899B2 true JP5235899B2 (ja) | 2013-07-10 |
Family
ID=39261607
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009545897A Expired - Fee Related JP5235899B2 (ja) | 2007-01-22 | 2008-01-14 | 階層型ストレージ・システムへのトランスペアレントなバックアップの方法、システム、及びプログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US7716186B2 (ja) |
JP (1) | JP5235899B2 (ja) |
CN (1) | CN101589371B (ja) |
WO (1) | WO2008090043A1 (ja) |
Families Citing this family (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8325886B1 (en) | 2007-03-26 | 2012-12-04 | Callwave Communications, Llc | Methods and systems for managing telecommunications |
US8447285B1 (en) | 2007-03-26 | 2013-05-21 | Callwave Communications, Llc | Methods and systems for managing telecommunications and for translating voice messages to text messages |
US8583746B1 (en) | 2007-05-25 | 2013-11-12 | Callwave Communications, Llc | Methods and systems for web and call processing |
US20100070466A1 (en) | 2008-09-15 | 2010-03-18 | Anand Prahlad | Data transfer techniques within data storage devices, such as network attached storage performing data migration |
US8930497B1 (en) * | 2008-10-31 | 2015-01-06 | Netapp, Inc. | Centralized execution of snapshot backups in a distributed application environment |
US8332365B2 (en) | 2009-03-31 | 2012-12-11 | Amazon Technologies, Inc. | Cloning and recovery of data volumes |
EP2323084A1 (en) * | 2009-10-23 | 2011-05-18 | Alcatel Lucent | Artifact management method |
US9244779B2 (en) * | 2010-09-30 | 2016-01-26 | Commvault Systems, Inc. | Data recovery operations, such as recovery from modified network data management protocol data |
US9785641B2 (en) | 2011-04-01 | 2017-10-10 | International Business Machines Corporation | Reducing a backup time of a backup of data files |
AU2013202553B2 (en) | 2012-03-30 | 2015-10-01 | Commvault Systems, Inc. | Information management of mobile device data |
US9069799B2 (en) | 2012-12-27 | 2015-06-30 | Commvault Systems, Inc. | Restoration of centralized data storage manager, such as data storage manager in a hierarchical data storage system |
US9116904B2 (en) * | 2013-03-14 | 2015-08-25 | Microsoft Technology Licensing, Llc | File system operation on multi-tiered volume |
US9794135B2 (en) * | 2013-11-11 | 2017-10-17 | Amazon Technologies, Inc. | Managed service for acquisition, storage and consumption of large-scale data streams |
CN105765575B (zh) * | 2013-11-11 | 2019-11-05 | 亚马逊科技公司 | 数据流摄取和持久性技术 |
US9858322B2 (en) | 2013-11-11 | 2018-01-02 | Amazon Technologies, Inc. | Data stream ingestion and persistence techniques |
US10635644B2 (en) | 2013-11-11 | 2020-04-28 | Amazon Technologies, Inc. | Partition-based data stream processing framework |
US9720989B2 (en) * | 2013-11-11 | 2017-08-01 | Amazon Technologies, Inc. | Dynamic partitioning techniques for data streams |
US9639589B1 (en) | 2013-12-20 | 2017-05-02 | Amazon Technologies, Inc. | Chained replication techniques for large-scale data streams |
US9785510B1 (en) | 2014-05-09 | 2017-10-10 | Amazon Technologies, Inc. | Variable data replication for storage implementing data backup |
US9734021B1 (en) | 2014-08-18 | 2017-08-15 | Amazon Technologies, Inc. | Visualizing restoration operation granularity for a database |
US10587688B2 (en) * | 2014-09-19 | 2020-03-10 | Netapp, Inc. | Techniques for coordinating parallel performance and cancellation of commands in a storage cluster system |
US10356150B1 (en) | 2014-12-15 | 2019-07-16 | Amazon Technologies, Inc. | Automated repartitioning of streaming data |
US9928144B2 (en) | 2015-03-30 | 2018-03-27 | Commvault Systems, Inc. | Storage management of data using an open-archive architecture, including streamlined access to primary data originally stored on network-attached storage and archived to secondary storage |
US10101913B2 (en) | 2015-09-02 | 2018-10-16 | Commvault Systems, Inc. | Migrating data to disk without interrupting running backup operations |
US10853182B1 (en) | 2015-12-21 | 2020-12-01 | Amazon Technologies, Inc. | Scalable log-based secondary indexes for non-relational databases |
US10567500B1 (en) | 2015-12-21 | 2020-02-18 | Amazon Technologies, Inc. | Continuous backup of data in a distributed data store |
US10423493B1 (en) | 2015-12-21 | 2019-09-24 | Amazon Technologies, Inc. | Scalable log-based continuous data protection for distributed databases |
KR101712594B1 (ko) * | 2016-06-22 | 2017-03-07 | 주식회사 모비젠 | 다계층 구조 스토리지에 대한 데이터 관리 시스템 및 그 방법 |
US10481800B1 (en) * | 2017-04-28 | 2019-11-19 | EMC IP Holding Company LLC | Network data management protocol redirector |
US10896097B1 (en) * | 2017-05-25 | 2021-01-19 | Palantir Technologies Inc. | Approaches for backup and restoration of integrated databases |
US10637846B2 (en) * | 2017-08-30 | 2020-04-28 | Capital One Services, Llc | System and method for cloud-based analytics |
US10990581B1 (en) | 2017-09-27 | 2021-04-27 | Amazon Technologies, Inc. | Tracking a size of a database change log |
US10754844B1 (en) | 2017-09-27 | 2020-08-25 | Amazon Technologies, Inc. | Efficient database snapshot generation |
US11182372B1 (en) | 2017-11-08 | 2021-11-23 | Amazon Technologies, Inc. | Tracking database partition change log dependencies |
US11269731B1 (en) | 2017-11-22 | 2022-03-08 | Amazon Technologies, Inc. | Continuous data protection |
US11042503B1 (en) | 2017-11-22 | 2021-06-22 | Amazon Technologies, Inc. | Continuous data protection and restoration |
US10742735B2 (en) | 2017-12-12 | 2020-08-11 | Commvault Systems, Inc. | Enhanced network attached storage (NAS) services interfacing to cloud storage |
US10621049B1 (en) | 2018-03-12 | 2020-04-14 | Amazon Technologies, Inc. | Consistent backups based on local node clock |
US11070600B1 (en) | 2018-07-16 | 2021-07-20 | Amazon Technologies, Inc. | Optimization techniques to support lagging readers at streaming data service |
US10956246B1 (en) | 2018-07-16 | 2021-03-23 | Amazon Technologies, Inc. | Isolated read channel management interfaces at streaming data service |
US10798140B1 (en) | 2018-07-16 | 2020-10-06 | Amazon Technologies, Inc. | Stream data record reads using push-mode persistent connections |
US10768830B1 (en) | 2018-07-16 | 2020-09-08 | Amazon Technologies, Inc. | Streaming data service with isolated read channels |
US10855754B1 (en) | 2018-07-16 | 2020-12-01 | Amazon Technologies, Inc. | Isolated read channel categories at streaming data service |
US11075984B1 (en) | 2018-07-16 | 2021-07-27 | Amazon Technologies, Inc. | Workload management at streaming data service supporting persistent connections for reads |
US11126505B1 (en) | 2018-08-10 | 2021-09-21 | Amazon Technologies, Inc. | Past-state backup generator and interface for database systems |
US11042454B1 (en) | 2018-11-20 | 2021-06-22 | Amazon Technologies, Inc. | Restoration of a data source |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5778395A (en) * | 1995-10-23 | 1998-07-07 | Stac, Inc. | System for backing up files from disk volumes on multiple nodes of a computer network |
US6397308B1 (en) * | 1998-12-31 | 2002-05-28 | Emc Corporation | Apparatus and method for differential backup and restoration of data in a computer storage system |
CN1159654C (zh) * | 1999-05-26 | 2004-07-28 | 富士通株式会社 | 网络元件管理系统和方法 |
JP3901883B2 (ja) * | 1999-09-07 | 2007-04-04 | 富士通株式会社 | データバックアップ方法、データバックアップシステム及び記録媒体 |
US6549992B1 (en) * | 1999-12-02 | 2003-04-15 | Emc Corporation | Computer data storage backup with tape overflow control of disk caching of backup data stream |
US6434681B1 (en) * | 1999-12-02 | 2002-08-13 | Emc Corporation | Snapshot copy facility for a data storage system permitting continued host read/write access |
EP1238335A1 (en) * | 1999-12-07 | 2002-09-11 | Data Foundation, Inc. | Scalable storage architecture |
US6615225B1 (en) * | 2000-04-27 | 2003-09-02 | International Business Machines Corporation | System and method for relating files in a distributed data storage environment |
US7065610B1 (en) * | 2000-06-27 | 2006-06-20 | Emc Corporation | Method and apparatus for maintaining inventory of logical volumes stored on storage elements |
US8949471B2 (en) * | 2000-11-02 | 2015-02-03 | Oracle America, Inc. | TCP/UDP acceleration |
JP4278452B2 (ja) * | 2003-08-04 | 2009-06-17 | 株式会社日立製作所 | 計算機システム |
US20050193235A1 (en) * | 2003-08-05 | 2005-09-01 | Miklos Sandorfi | Emulated storage system |
JP2005108061A (ja) * | 2003-10-01 | 2005-04-21 | Hitachi Maxell Ltd | 情報の保存方法 |
US8244903B2 (en) * | 2003-12-22 | 2012-08-14 | Emc Corporation | Data streaming and backup systems having multiple concurrent read threads for improved small file performance |
JP4325524B2 (ja) * | 2004-09-29 | 2009-09-02 | 日本電気株式会社 | スイッチ装置とシステム並びにバックアップ及びリストア方法とプログラム |
US20060112219A1 (en) * | 2004-11-19 | 2006-05-25 | Gaurav Chawla | Functional partitioning method for providing modular data storage systems |
US7657550B2 (en) * | 2005-11-28 | 2010-02-02 | Commvault Systems, Inc. | User interfaces and methods for managing data in a metabase |
US20070214384A1 (en) * | 2006-03-07 | 2007-09-13 | Manabu Kitamura | Method for backing up data in a clustered file system |
US20080016390A1 (en) * | 2006-07-13 | 2008-01-17 | David Maxwell Cannon | Apparatus, system, and method for concurrent storage pool migration and backup |
-
2007
- 2007-01-22 US US11/625,418 patent/US7716186B2/en not_active Expired - Fee Related
-
2008
- 2008-01-14 WO PCT/EP2008/050320 patent/WO2008090043A1/en active Application Filing
- 2008-01-14 CN CN200880002487.XA patent/CN101589371B/zh not_active Expired - Fee Related
- 2008-01-14 JP JP2009545897A patent/JP5235899B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2010517125A (ja) | 2010-05-20 |
US20080177806A1 (en) | 2008-07-24 |
US7716186B2 (en) | 2010-05-11 |
CN101589371A (zh) | 2009-11-25 |
CN101589371B (zh) | 2012-06-27 |
WO2008090043A1 (en) | 2008-07-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5235899B2 (ja) | 階層型ストレージ・システムへのトランスペアレントなバックアップの方法、システム、及びプログラム | |
US11755415B2 (en) | Variable data replication for storage implementing data backup | |
US10437721B2 (en) | Efficient garbage collection for a log-structured data store | |
US7127577B2 (en) | Distributed snapshot process | |
US10534768B2 (en) | Optimized log storage for asynchronous log updates | |
US7962714B2 (en) | System and method for performing auxiliary storage operations | |
US8037264B2 (en) | Distributed snapshot process | |
US10769024B2 (en) | Incremental transfer with unused data block reclamation | |
EP3416060A1 (en) | Fast crash recovery for distributed database systems | |
US20160110262A1 (en) | Restoring a file system object | |
AU2014235185A1 (en) | System-wide checkpoint avoidance for distributed database systems | |
US10803012B1 (en) | Variable data replication for storage systems implementing quorum-based durability schemes | |
US11768624B2 (en) | Resilient implementation of client file operations and replication | |
US8140886B2 (en) | Apparatus, system, and method for virtual storage access method volume data set recovery | |
US11442894B2 (en) | Methods for scalable file backup catalogs and devices thereof | |
CN110663034B (zh) | 用于云环境中改进的数据复制的方法及其设备 | |
US11269539B2 (en) | Methods for managing deletion of data objects by utilizing cold storage and devices thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100824 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120727 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120807 |
|
RD13 | Notification of appointment of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7433 Effective date: 20120920 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20120920 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121019 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130305 |
|
RD14 | Notification of resignation of power of sub attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7434 Effective date: 20130305 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130326 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20160405 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |