CN100407205C - 用于基于文件优化快照操作的方法 - Google Patents

用于基于文件优化快照操作的方法 Download PDF

Info

Publication number
CN100407205C
CN100407205C CN2005101291791A CN200510129179A CN100407205C CN 100407205 C CN100407205 C CN 100407205C CN 2005101291791 A CN2005101291791 A CN 2005101291791A CN 200510129179 A CN200510129179 A CN 200510129179A CN 100407205 C CN100407205 C CN 100407205C
Authority
CN
China
Prior art keywords
storage volume
mentioned
file
snapshot
catalogue
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2005101291791A
Other languages
English (en)
Other versions
CN1786959A (zh
Inventor
D·G·德克
R·C·小爱德华兹
O·B·瓦尔加斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
International Business Machines Corp
Original Assignee
International Business Machines Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by International Business Machines Corp filed Critical International Business Machines Corp
Publication of CN1786959A publication Critical patent/CN1786959A/zh
Application granted granted Critical
Publication of CN100407205C publication Critical patent/CN100407205C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • G06F11/1466Management of the backup or restore process to make the backup process non-disruptive
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • G06F11/1451Management of the data involved in backup or backup restore by selection of backup contents

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

为了实现存储卷的快照操作,调用快照代理,以启动该存储卷的快照操作,建立对于要被排除在该存储卷的快照操作之外的一个或多个文件的目录的访问,并基于要被排除在该存储卷的快照操作之外的文件的目录,对该存储卷的每一写请求进行处理。存储代理可另外基于要被排除在该存储卷的快照操作之外的文件的目录,对该存储卷的每一读请求进行处理。

Description

用于基于文件优化快照操作的方法
技术领域
本发明总体涉及便于存储卷的更新和读取的存储卷的快照处理.本发明具体涉及基于文件的优化存储卷的每一快照操作(例如,写时拷贝操作和高速缓存写操作).
背景技术
为了在存储卷或其相关的计算机系统出现故障时允许数据的恢复,通过从存储卷读取数据并将读取的数据写入备份卷,而在计算机系统的工作期间周期性地进行数据到备份卷的备份.然而,由于是在计算机系统仍在工作时对数据进行备份,因此如果在存储卷的备份期间在存储卷中出现其他程序对读取数据的任何更新,则被写入到备份卷的读取数据可能与存储卷不一致.这一问题的一种解决方法是在备份操作期间运行快照代理,以便于存储卷的时间点拷贝的生成和管理,该时间点拷贝能够在快照代理的运行时保持备份卷与存储卷之间的一致性.对于计算机工业的一个挑战是在对存储卷的更新和读取的快照处理期间确保快照代理不会负面地影响系统性能.
发明内容
本发明提供了一种基于文件的对存储卷的更新和读取的快照处理的新的独特方法.
本发明的一种形式是一种信号承载介质,其有形地包括可由一个或多个处理器执行以实现以下操作的机器可读指令的程序,该操作用于(1)启动存储卷的快照操作;(2)访问要被排除在上述存储卷的快照操作之外的至少一个文件的目录;以及(3)基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理.
本发明的第二种形式是一种系统,其使用一个或多个处理器以及一个或多个存储器,用于执行指令以(1)启动存储卷的快照操作;(2)访问要被排除在上述存储卷的快照操作之外的至少一个文件的目录;以及(3)基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理.
本发明的第三种形式是一种系统,其使用(1)用于启动存储卷的快照操作的装置;(2)用于访问要被排除在上述存储卷的快照操作之外的至少一个文件的目录的装置;以及(3)用于基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录对与该存储卷相关的写请求进行处理的装置.
本发明的第四种形式是一种客户端计算机,其使用备份模块和快照代理的.备份模块和快照代理包括用于基于要被排除在存储卷的集成的备份/快照操作之外的至少一个文件的目录,实现该存储卷的集成的备份/快照操作的装置.
根据本发明的一个方面,提供一种基于文件优化快照操作的方法,包括:启动存储卷的快照操作;访问要被排除在上述存储卷的快照操作之外的至少一个文件的目录;以及基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理.
根据本发明的另一个方面,提供一种基于文件优化快照操作的系统,包括:用于启动存储卷的快照操作的装置;用于访问要被排除在上述存储卷的快照操作之外的至少一个文件的目录的装置;以及用于基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录对与该存储卷相关的写请求进行处理的装置.
根据本发明的再一个方面,提供一种客户端计算机,包括:备份模块,其可操作地处理存储卷的备份操作;以及快照代理,其可操作地处理上述存储卷的快照操作,其中,上述备份模块和快照代理基于要被排除在上述存储卷的集成的备份/快照操作之外的至少一个文件的目录,将该存储卷的备份操作和该存储卷的快照操作集成在一起.
从下面结合附图对本发明的各种实施例的详细描述中,本发明的上述形式和其他形式、目的和方面以及特征和优点将变得进一步显而易见.这些详细描述和附图仅是为了说明本发明,而不是限制本发明的范围,本发明的范围由所附权利要求及其等价表述来定义的.
附图说明
图1示出了根据本发明的用于备份模块和快照模块的集成的示例性工作环境;
图2示出了表示根据本发明的存储卷访问方法的流程图和表示根据本发明的快照处理方法的流程图;
图3示出了排除范围列表目录的示例性生成;
图4示出了表示根据本发明的写请求的写时拷贝处理方法的一个实施例的流程图;
图5示出了图4所示的流程图的示例性执行;
图6示出了表示根据本发明的读请求的写时拷贝处理方法的一个实施例的流程图;
图7示出了图6所示的流程图的示例性执行;
图8示出了表示根据本发明的写请求的高速缓存写处理方法的一个实施例的流程图;
图9示出了图8所示的流程图的示例性执行;
图10示出了表示根据本发明的读请求的高速缓存写处理方法的一个实施例的流程图;以及
图11示出了图10所示的流程图的示例性执行.
具体实施方式
具有备份模块30和快照代理40的集成的本发明防止了对非必要文件和非期望文件的基于文件的快照操作(例如,写时拷贝和高速缓存写),备份模块30和快照代理40可安装在图1所示的传统客户机20上.通常,模块30和代理40便于存储在客户机20的存储卷21内的文件的备份,该备份基于除由客户机20的操作系统指定的、由客户机20的用户/管理员指定的和/或由客户机20内部获得的任何非必要文件和任何非期望文件之外的文件,由快照代理40创建存储卷21的时间点拷贝.其后,可由客户机20的虚拟文件系统内的备份模块30对存储卷21的时间点拷贝进行备份,该时间点拷贝可通过网络50存储在传统文件服务器51上,以便于随后在必要时对对应于客户机20内的存储卷21的时间点拷贝的数据的恢复。
具体地,如图2所示,模块30实现表示本发明的存储卷访问方法的流程图60,代理40实现表示本发明的快照处理方法的流程图70.模块30和代理40分别对流程图60和70的实现以集成的方式完成,以确保非必要文件和非期望文件不会由模块30所备份和由代理40所处理.
参照图1和2,流程图60的阶段S62包含模块30调用代理40以启动存储卷21的快照操作,流程图70的阶段S72包含快照代理40被备份模块30调用时启动存储卷21的快照操作,从而建立用于对存储卷21的集成备份/快照操作的存储卷21的时间点版本.
在阶段S72的一个实施例中,快照代理40启动对存储卷21的写时拷贝操作,包括快照代理40在客户机20的存储器内建立高速缓存,和快照代理40用作存储卷21与高速缓存的访问接口,以便于在流程图70的阶段S76期间涉及存储卷21和高速缓存的对存储卷21的每一更新的写时拷贝操作,从而维护用于存储卷21的备份操作的存储卷21的时间点拷贝,如本领域的普通技术人员将理解的那样.此外,在用作存储卷21与高速缓存的访问接口时,快照代理40可拒绝快照代理40所接收的存储卷21的每一写请求和每一读请求或使其排队,直到快照代理40前进到阶段S76.
在阶段S72的第二个实施例中,快照代理40启动对存储卷21的高速缓存写操作,包括快照代理40在客户机20的存储器内建立高速缓存,且快照代理40用作存储卷21与高速缓存的访问接口,以便于在阶段S76期间涉及高速缓存的对存储卷21的每一更新的高速缓存写操作,从而维护用于存储卷21的备份操作的存储卷21的时间点拷贝,如本领域的普通技术人员将理解的那样.此外,在用作存储卷21与高速缓存的访问接口时,快照代理40可拒绝快照代理40所接收的存储卷21的每一写请求和每一读请求或者使其排队,直到快照代理40前进到阶段S76.
本领域的普通技术人员还将理解可适用于本发明的其他快照操作.
仍参照图1和2,流程图60的阶段S64包含备份模块30确定要排除在存储卷21的快照操作(例如,快照写时拷贝操作或快照高速缓存写操作)之外的文件的目录,流程图70的阶段S74还包含快照代理40建立对于要排除在存储卷21的快照操作之外的文件的目录的访问.实际上,模块30实现阶段S64的方式和代理40实现阶段S74的方式是没有限制的.因此,图3所示的排除范围列表目录EELD的以下描述并不限于阶段S64和S74的范围.
参照图1和3,其示出了在快照代理40被涉及启动存储卷21的快照操作时,客户机20的文件系统所提供的示例性主文件目录MFD,以及备份模块30所提供的示例性排除文件列表EFL.所示的主文件目录MFD列出了存储卷21的七(7)个已使用文件范围、它们对应的文件名以及存储卷21的未使用文件范围.排除文件列表EFL包括由客户机20的操作系统指定的、由客户机20的用户/管理员指定的和/或由客户机20内部获得的对于备份来说的非必要文件和非期望文件.
在阶段S64期间,备份模块30将排除文件列表EFL应用于主文件目录MFD,从而产生如图所示的排除范围列表目录EELD.排除范围列表目录EELD从主文件目录MFD列出了要排除在存储卷21的快照操作之外的每一文件范围和对应的文件名,包括在排除文件列表EFL中列出的文件以及在代理模块40启动存储卷21的快照操作时存储卷21的未使用范围.在阶段S74期间,备份模块30将排除范围列表目录EELD提供给快照代理40.
再次参照图1和2,在完成阶段S64和S74时,备份模块30前进到流程图60的阶段S66,以访问存储卷21,目的是除了被排除在存储卷21的快照操作之外的文件和存储卷21的未使用范围(例如,图3中所示的排除范围列表目录EELD中列出的文件范围)之外,通过生成存储卷21的读请求对存储卷21的时间点拷贝进行备份.同时,快照代理40前进到流程图70的阶段S76,以根据被排除在存储卷21的快照操作之外的文件和存储卷21的未使用范围(例如,图3中所示的排除范围列表目录EELD中列出的文件范围),处理在阶段S72-S76期间接收到的与存储卷21相关联的每一写请求和每一读请求.
在模块30完成存储卷21的时间点拷贝的备份(例如,代理40处理完对于模块30备份存储卷21的时间点拷贝所必须的所有读请求)时,流程图60由模块30终止,流程图70由代理40终止.
实际上,模块30和代理40分别实现阶段S66和S67的方式是没有限制的.因此,以下对根据本发明的阶段S76的示例性实施例的描述并不限于阶段S76的范围.
图4示出了流程图80,其作为阶段S76(图2)的用于在存储卷21的集成备份/快照操作期间实现代理40接收到的存储卷21的写请求的快照写时拷贝操作的一个实施例.每一写请求涉及新数据到存储卷21的特定文件范围的写操作.
参照图1和4,流程图80的阶段S82由与存储卷21的文件相关联的写请求WR启动,其中快照代理40确定与写请求WR的文件相对应的文件范围是否被排除在该文件的写时拷贝之外.在一个实施例中,快照代理40在确定与文件相对应的文件范围是否被排除在该文件的写时拷贝之外时参考本发明的排除范围列表目录.如果文件范围被排除在该文件的写时拷贝之外,则快照代理40前进到流程图80的阶段S88,以将与写请求WR的文件相关联的新数据写入存储卷21中的文件的文件范围.否则,在前进到阶段S88之前,快照代理40顺序前进到流程图80的阶段S84和阶段S86,以读取存储卷21中存储的快照数据并分别将该快照数据写入客户机20的高速缓存22.为了本发明的目的,存储卷21的快照数据被定义为快照代理40运行的时间点的存储卷21内的数据.
图5示出了快照代理40实现的流程图80的三(3)个例子.
参照图5,第一个例子涉及文件范围(0,100)的写请求WR(0,100),文件范围(0,100)未在所示出的排除范围列表目录EELD上列出。同样,文件范围(0,100)未被排除在文件范围(0,100)的写时拷贝之外.因此,快照代理40通过顺序地(1)读取存储卷21的文件范围(0,100)的快照数据SD(0,100),(2)将快照数据SD(0,100)写入高速缓存22,以及(3)将文件范围(0,100)的新数据ND(0,100)写入存储卷21,来处理写请求WR(0,100).
第二个例子涉及文件范围(300,100)的写请求WR(300,100),文件范围(300,100)处于所示出的排除范围列表目录EELD上.同样,文件范围(300,100)被排除在文件范围(300,100)的写时拷贝之外.因此,快照代理40通过将文件范围(300,100)的新数据ND(300,100)写入存储卷21,来处理写请求WR(300,100).在本发明之前,在这些情况下,会执行文件范围(300,100)的写时拷贝.以虚轮廓线示出了从存储卷21对文件范围(300,100)的快照数据SD(300,100)的读取,以表示未根据本发明的排除范围列表目录EELD执行文件范围(300,100)的写时拷贝.
第三个实例涉及文件范围(700,100)的写请求WR(700,100),文件范围(700,100)处于所示出的排除范围列表目录EELD上.同样,文件范围(700,100)被排除在文件范围(700,100)的写时拷贝之外.因此,快照代理40通过将文件范围(700,100)的新数据ND(700,100)写入存储卷21,来处理写请求WR(700,100).
图6示出了流程图90,其作为阶段S76(图2)的用于在存储卷21的集成备份/快照操作期间实现代理40接收到的存储卷21的读请求的快照写时拷贝操作的一个实施例.每一读请求涉及对存储卷21的特定文件范围的数据的读取.
参照图1和6,流程图90的阶段S92由与存储卷21的文件相关联的读请求RR启动,其中快照代理40确定与读请求RR的文件相对应的文件范围是否被排除在存储卷21的备份操作之外.在一个实施例中,快照代理40在确定与读请求RR的文件相对应的文件范围是否被排除在存储卷21的备份操作之外时参考本发明的排除范围列表目录.如果文件范围被排除在存储卷21的备份操作之外,则快照代理40前进到流程图90的阶段S94,以拒绝读请求RR.应该指出,阶段S92和阶段S94以虚线示出,以表示这样的事实,即由于对于存储卷21中根据阶段S66(图2)被排除在存储卷21的备份操作之外的文件,备份模块30不应该生成任何读请求的事实,因此阶段S92和S94是可选的.虽然如此,这里仍提供了阶段S92和阶段S94,以针对备份模块30对存储卷21中被排除在存储卷21的备份操作之外的文件错误地生成读请求的情况.
返回图1和6,如果该文件范围未被排除在存储卷21的备份操作之外,则快照代理40前进到流程图90的阶段S96,以确定对于读请求RR的文件之前是否发生过该文件范围的写时拷贝.如果是,则快照代理40前进到阶段S98,以从高速缓存22读取该文件范围的快照数据.否则,快照代理40前进到阶段S100,以从存储卷21读取该文件范围的快照数据.
图7示出了快照代理40实现的流程图100的三(3)个例子.
参照图7,第一个例子涉及来自备份模块30的文件范围(0,100)的读请求RR(0,100),文件范围(0,100)未在所示出的排除范围列表目录EELD上列出,但是之前包含在快照写时拷贝操作(图5)中.因此,快照代理40通过从高速缓存22中读出快照数据SD(0,100)并将快照数据SD(0,100)发送到备份模块30,来处理读请求RR(0,100).
第二个例子涉及来自备份模块30的文件范围(100,100)的读请求RR(100,100),文件范围(100,100)未在所示出的排除范围列表目录EELD上列出,并且之前不包含在快照写时拷贝操作中.因此,快照代理40通过从存储卷21读出快照数据SD(100,100)并将快照数据SD(100,100)发送到备份模块30,来处理读请求RR(100,100).
最后的例子涉及来自备份模块30的文件范围(300,100)的读请求RR(300,100),文件范围(300,100)在所示出的排除范围列表目录EELD上被列出.因此,快照代理40通过拒绝由快照数据SD(300,100)的虚轮廓线所表示的读请求RR(300,100),来处理读请求RR(300,100).
图8示出了流程图110,其作为阶段S76(图2)的用于在存储卷21的集成备份/快照操作期间实现代理40接收到的存储卷21的写请求的快照高速缓存写操作的一个实施例.每一写请求涉及对存储卷21的特定文件范围的新数据的写操作.
参照图1和8,流程图110的阶段S112由与存储卷21的文件相关联的写请求WR启动,其中快照代理40确定与写请求WR的文件相对应的文件范围是否被排除在该文件的高速缓存写之外.在一个实施例中,快照代理40在确定与该文件相对应的文件范围是否被排除在该文件的高速缓存写之外时参考本发明的排除范围列表目录.如果该文件范围被排除在该文件的高速缓存写之外,则快照代理40前进到流程图110的阶段S116,以将与写请求WR的文件相关联的新数据写入存储卷21。否则,快照代理40前进到流程图110的阶段S114,以将与写请求WR的文件相关联的新数据写入高速缓存22.
图9示出了由快照代理40实现的流程图110的三(3)个例子.
参照图9,第一个例子涉及文件范围(0,100)的写请求WR(0,100),文件范围(0,100)未在所示出的排除范围列表目录EELD上列出.同样,文件范围(0,100)未被排斥在文件范围(0,100)的高速缓存写之外.因此,快照代理40通过顺序地将新数据ND(0,100)写入高速缓存22,来处理写请求WR(0,100).
第二个例子涉及文件范围(300,100)的写请求WR(300,100),文件范围(300,100)在所示出的排除范围列表目录EELD上被列出.同样,文件范围(300,100)被排除在文件范围(300,100)的高速缓存写之外。因此,快照代理40通过顺序地将新数据ND(300,100)写入存储卷21,来处理写请求WR(300,100).
最后的例子涉及文件范围(700,100)的写请求WR(700,100),文件范围(700,100)在所示出的排除范围列表目录EELD上被列出.同样,文件范围(700,100)被排除在文件范围(700,100)的高速缓存写之外.因此,快照代理40通过顺序地将新数据ND(700,100)写入存储卷21,来处理写请求WR(700,100).
图10示出了流程图120,其作为阶段S76(图2)的用于在存储卷21的集成备份/快照操作期间实现代理40接收到的存储卷21的读请求的快照高速缓存写操作的一个实施例.每一读请求涉及对存储卷21的特定文件范围的数据的读取.
参照图1和10,流程图120的阶段S122由与存储卷21的文件相关联的读请求RR启动,其中快照代理40确定与读请求RR的文件相对应的文件范围是否被排除在存储卷21的备份操作之外.在一个实施例中,快照代理40在确定与文件相对应的文件范围是否被排除在存储卷21的备份操作之外时参考本发明的排除范围列表目录.如果该文件范围被排除在存储卷21的备份操作之外,则快照代理40前进到流程图120的阶段S124,以拒绝读请求RR.应该指出,阶段S122和阶段S124以虚线示出,以表示这样的事实,即由于对于存储卷21中根据阶段S66(图2)被排除在存储卷21的备份操作之外的文件,备份模块30不应该生成任何读请求的事实,因此阶段S122和阶段S124是可选的.虽然如此,这里仍提供了阶段S122和阶段S124,以针对备份模块30对存储卷21中被排除在存储卷21的备份操作之外的文件错误地生成读请求的情况.
返回图1和10,如果该文件范围未被排除在存储卷21的备份操作之外,则快照代理40前进到流程图120的阶段S126,以从存储卷21读取该文件范围的快照数据.
图11示出了快照代理40实现的流程图120的三(3)个例子.
参照图11,第一个例子涉及来自备份模块30的文件范围(0,100)的读请求RR(0,100),文件范围(0,100)未在所示出的排除范围列表目录EELD上列出,但是之前包含在快照高速缓存写操作(图9)中.因此,快照代理40通过从存储卷21读出快照数据SD(0,100)并将快照数据SD(0,100)发送到备份模块30,来处理读请求RR(0,100).
第二个例子涉及来自备份模块30的文件范围(100,100)的读请求RR(100,100),文件范围(100,100)未在所示出的排除范围列表目录EELD上列出,并且之前也不包含在快照高速缓存写操作中.因此,快照代理40通过从存储卷21读出快照数据SD(100,100)并将快照数据SD(100,100)发送到备份模块30,来处理读请求RR(100,100).
最后的例子涉及来自备份模块30的文件范围(300,100)的读请求RR(300,100),文件范围(300,100)在排除范围列表目录EELD上被列出,并且之前包含在快照高速缓存写操作(图9)中.因此,快照代理40通过拒绝读取由新数据ND(300,100)的虚轮廓线所表示的新数据ND(300,100),来处理读请求RR(300,100).
根据前面图1-11的描述,本领域的普通技术人员将会理解本发明的众多优点.这些优点中最重要的是,在存储卷的集成备份/快照操作期间非必要的和非期望的快照操作的消除,以及在存储卷的集成备份/快照操作期间所建立的高速缓存的最小限度的大小.
此外,本领域的普通技术人员将会理解如图2所示的根据本发明的存储卷21的快照操作与除了存储卷21的备份操作之外的操作的集成,这些操作诸如数据库测试或用于测试、训练或问题分析的任何应用.
参照图1,在一个实际的实施例中,模块30和代理40包括在与称为“IBM Tivoli Storage Manager”的可购买到的软件应用集成在一起的软件模块中.同样,模块30和代理40被一起安装在客户机20的存储器中或者分布在各客户机存储器之中,籍此客户机处理器能够执行模块30和代理40,以执行如图1-11所示的示例性的本发明的各种操作.在作为软件模块被包括时,理解本文的图1-11的描述的本领域的普通技术人员能够以任何传统的编程语言(例如C++语言)来编写模块30和代理40.
尽管这里公开的本发明实施例当前被认为是优选实施例,但可以在不脱离本发明的精神和范围的情况下作出各种变换和修改.本发明的范围在所附权利要求中指明,所有落入其等价含义和范围中的改变都旨在包含于其中.

Claims (22)

1.一种基于文件优化快照操作的方法,包括:
启动存储卷的快照操作;
访问要被排除在上述存储卷的快照操作之外的至少一个文件的目录;以及
基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理。
2.根据权利要求1的方法,其中上述目录得自于在上述存储卷的快照操作被启动时的与该存储卷相关的主文件目录和与该存储卷的快照操作相关的排除文件列表。
3.根据权利要求1的方法,其中上述目录列出要被排除在上述存储卷的快照操作之外的至少一个文件的每一文件的文件范围。
4.根据权利要求3的方法,其中上述目录还列出在上述存储卷的快照操作被启动时的该存储卷的每一未使用范围的文件范围。
5.根据权利要求1的方法,其中上述快照操作包括写时拷贝操作。
6.根据权利要求5的方法,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
将与该写请求相关的新数据写入该存储卷的、与该写请求相应的文件范围,以响应该文件范围被列出在该目录中的情况。
7.根据权利要求5的方法,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
响应该目录中未列出的文件范围,从该存储卷的与该写请求对应的文件范围读出快照数据;以及
随后将上述从该存储卷读出的快照数据写入高速缓存的相应文件范围,并将与上述写请求相关的新数据写入该存储卷的该文件范围。
8.根据权利要求1的方法,其中上述快照操作包括高速缓存写操作。
9.根据权利要求8的方法,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
将与该写请求相关的新数据写入该存储卷的、与该写请求相应的文件范围,以响应该文件范围被列出在该目录中的情况。
10.根据权利要求8的方法,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
响应该目录中未列出的文件范围,将与该写请求相关的新数据写入高速缓存的相应文件范围。
11.一种基于文件优化快照操作的系统,包括:
用于启动存储卷的快照操作的装置;
用于访问要被排除在上述存储卷的快照操作之外的至少一个文件的目录的装置;以及
用于基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录对与该存储卷相关的写请求进行处理的装置。
12.根据权利要求11的系统,其中上述目录得自于在上述存储卷的快照操作被启动时的与该存储卷相关的主文件目录和与该存储卷的快照操作相关的排除文件列表。
13.根据权利要求11的系统,其中上述目录列出要被排除在上述存储卷的快照操作之外的至少一个文件的每一文件的文件范围。
14.根据权利要求13的系统,其中上述目录还列出在上述存储卷的快照操作被启动时的该存储卷的每一未使用范围的文件范围。
15.根据权利要求11的系统,其中上述快照操作包括写时拷贝操作。
16.根据权利要求15的系统,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
将与该写请求相关的新数据写入该存储卷的、与该写请求相应的文件范围,以响应该文件范围被列出在该目录中的情况。
17.根据权利要求15的系统,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
响应该目录中未列出的文件范围,从该存储卷的与该写请求对应的文件范围读出快照数据;以及
随后将上述从该存储卷读出的快照数据写入高速缓存的相应文件范围,并将与上述写请求相关的新数据写入该存储卷的该文件范围。
18.根据权利要求11的系统,其中上述快照操作包括高速缓存写操作。
19.根据权利要求18的系统,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
将与该写请求相关的新数据写入该存储卷的、与该写请求相应的文件范围,以响应该文件范围被列出在该目录中的情况。
20.根据权利要求18的系统,其中基于上述要被排除在上述存储卷的快照操作之外的至少一个文件的目录,对与该存储卷相关的写请求进行处理包括:
响应该目录中未列出的文件范围,将与上述写请求相关的新数据写入高速缓存的相应文件范围。
21.根据权利要求11的系统,其中上述存储卷的快照操作与该存储卷的备份操作集成在一起。
22.一种客户端计算机,包括:
备份模块,其可操作地处理存储卷的备份操作;以及
快照代理,其可操作地处理上述存储卷的快照操作,
其中,上述备份模块和快照代理基于要被排除在上述存储卷的集成的备份/快照操作之外的至少一个文件的目录,将该存储卷的备份操作和该存储卷的快照操作集成在一起。
CN2005101291791A 2004-12-08 2005-11-14 用于基于文件优化快照操作的方法 Expired - Fee Related CN100407205C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/007,528 2004-12-08
US11/007,528 US20060123211A1 (en) 2004-12-08 2004-12-08 Method for optimizing a snapshot operation on a file basis

Publications (2)

Publication Number Publication Date
CN1786959A CN1786959A (zh) 2006-06-14
CN100407205C true CN100407205C (zh) 2008-07-30

Family

ID=36575740

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2005101291791A Expired - Fee Related CN100407205C (zh) 2004-12-08 2005-11-14 用于基于文件优化快照操作的方法

Country Status (2)

Country Link
US (1) US20060123211A1 (zh)
CN (1) CN100407205C (zh)

Families Citing this family (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7424497B1 (en) * 2005-01-27 2008-09-09 Network Appliance, Inc. Technique for accelerating the creation of a point in time prepresentation of a virtual file system
US7848261B2 (en) 2006-02-17 2010-12-07 Isilon Systems, Inc. Systems and methods for providing a quiescing protocol
US7467268B2 (en) * 2006-04-14 2008-12-16 Hewlett-Packard Development Company, L.P. Concurrent data restore and background copy operations in storage networks
US8539253B2 (en) * 2006-07-18 2013-09-17 Netapp, Inc. System and method for securing information by obscuring contents of a persistent image
US7822932B2 (en) 2006-08-18 2010-10-26 Isilon Systems, Inc. Systems and methods for providing nonlinear journaling
US7899800B2 (en) 2006-08-18 2011-03-01 Isilon Systems, Inc. Systems and methods for providing nonlinear journaling
US8286029B2 (en) 2006-12-21 2012-10-09 Emc Corporation Systems and methods for managing unavailable storage devices
US8966080B2 (en) 2007-04-13 2015-02-24 Emc Corporation Systems and methods of managing resource utilization on a threaded computer system
US7882068B2 (en) * 2007-08-21 2011-02-01 Isilon Systems, Inc. Systems and methods for adaptive copy on write
US8364644B1 (en) * 2009-04-22 2013-01-29 Network Appliance, Inc. Exclusion of data from a persistent point-in-time image
US8645647B2 (en) * 2009-09-02 2014-02-04 International Business Machines Corporation Data storage snapshot with reduced copy-on-write
US9141300B2 (en) * 2009-09-22 2015-09-22 Emc Corporation Performance improvement of a capacity optimized storage system using a performance segment storage system and a segment storage system
US8417907B2 (en) * 2009-10-29 2013-04-09 Symantec Corporation Synchronizing snapshot volumes across hosts
US8341370B2 (en) * 2009-11-16 2012-12-25 Symantec Corporation Restricting access to object based storage
US9176853B2 (en) * 2010-01-29 2015-11-03 Symantec Corporation Managing copy-on-writes to snapshots
US8745002B2 (en) * 2010-02-04 2014-06-03 Symantec Corporation Mounting applications on a partially replicated snapshot volume
US9146822B2 (en) 2010-06-30 2015-09-29 Symantec Corporation Cluster configuration systems and methods
US9823981B2 (en) * 2011-03-11 2017-11-21 Microsoft Technology Licensing, Llc Backup and restore strategies for data deduplication
US9098452B2 (en) * 2011-12-19 2015-08-04 International Business Machines Corporation Selecting files to backup in a block level backup
US20130159257A1 (en) * 2011-12-20 2013-06-20 Netapp, Inc. Systems, Method, and Computer Program Products Providing Sparse Snapshots
US9235582B1 (en) * 2013-03-14 2016-01-12 Emc Corporation Tracking files excluded from backup
CN104463014B (zh) * 2014-12-10 2017-06-09 上海爱数信息技术股份有限公司 一种基于快照的oracle数据库保护方法
US10257273B2 (en) 2015-07-31 2019-04-09 Netapp, Inc. Systems, methods and devices for RDMA read/write operations
US9952797B2 (en) 2015-07-31 2018-04-24 Netapp, Inc. Systems, methods and devices for addressing data blocks in mass storage filing systems
CN105138429B (zh) * 2015-08-21 2018-11-02 浪潮(北京)电子信息产业有限公司 一种写时拷贝快照方法和系统
CN105302665B (zh) * 2015-10-12 2018-02-02 深圳市安云信息科技有限公司 一种改进的写时拷贝快照方法及系统
US10289687B2 (en) * 2016-04-07 2019-05-14 Vmware, Inc. Space optimized snapshot for network backup
CN108733508B (zh) * 2017-04-17 2022-03-11 伊姆西Ip控股有限责任公司 用于控制数据备份的方法和系统
US11132332B2 (en) * 2018-11-02 2021-09-28 International Business Machines Corporation Method to write data ahead to snapshot area to avoid copy-on-write
US11704035B2 (en) 2020-03-30 2023-07-18 Pure Storage, Inc. Unified storage on block containers
US11940950B2 (en) * 2021-10-22 2024-03-26 EMC IP Holding Company, LLC System and method for reducing CPU load and latency for scheduled snapshots using pre-allocated extents

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6081875A (en) * 1997-05-19 2000-06-27 Emc Corporation Apparatus and method for backup of a disk storage system
US6157931A (en) * 1997-02-11 2000-12-05 Connected Corporation Database/template driven file selection for backup programs
US6606685B2 (en) * 2001-11-15 2003-08-12 Bmc Software, Inc. System and method for intercepting file system writes
CN1481534A (zh) * 2000-12-21 2004-03-10 ���ܿ���ϵͳ���޹�˾ 主系统和备份系统之间数据的恢复

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020174329A1 (en) * 1999-04-28 2002-11-21 Bowler Richard A. Method and system for automatically transitioning files among computer systems
US6453396B1 (en) * 1999-07-14 2002-09-17 Compaq Computer Corporation System, method and computer program product for hardware assisted backup for a computer mass storage system
US6453326B1 (en) * 1999-07-19 2002-09-17 Microsoft Corporation Method and system for network data replication
GB0002019D0 (en) * 2000-01-29 2000-03-22 Ibm Data migration tool
US6651075B1 (en) * 2000-02-16 2003-11-18 Microsoft Corporation Support for multiple temporal snapshots of same volume
JP3868708B2 (ja) * 2000-04-19 2007-01-17 株式会社日立製作所 スナップショット管理方法及び計算機システム
US6578121B1 (en) * 2001-02-05 2003-06-10 Emc Corporation File mapping system and related techniques
US7296125B2 (en) * 2001-11-29 2007-11-13 Emc Corporation Preserving a snapshot of selected data of a mass storage system
US7237075B2 (en) * 2002-01-22 2007-06-26 Columbia Data Products, Inc. Persistent snapshot methods
KR100439675B1 (ko) * 2002-10-24 2004-07-14 한국전자통신연구원 대용량 공유 저장장치를 위한 효율적인 스냅샷 수행방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6157931A (en) * 1997-02-11 2000-12-05 Connected Corporation Database/template driven file selection for backup programs
US6081875A (en) * 1997-05-19 2000-06-27 Emc Corporation Apparatus and method for backup of a disk storage system
CN1481534A (zh) * 2000-12-21 2004-03-10 ���ܿ���ϵͳ���޹�˾ 主系统和备份系统之间数据的恢复
US6606685B2 (en) * 2001-11-15 2003-08-12 Bmc Software, Inc. System and method for intercepting file system writes

Also Published As

Publication number Publication date
US20060123211A1 (en) 2006-06-08
CN1786959A (zh) 2006-06-14

Similar Documents

Publication Publication Date Title
CN100407205C (zh) 用于基于文件优化快照操作的方法
JP4570312B2 (ja) コンピュータシステムにおいてボリュームスナップショット依存関係を提供する方法および装置
WO2017049828A1 (zh) 基于Linux的数据处理方法、装置和系统
US7305424B2 (en) Manipulation of zombie files and evil-twin files
EP1693757B1 (en) System and method for using a file system to automatically backup a file as a generational file
US7162599B2 (en) System and method for backing up and restoring data
US6801914B2 (en) Persistent client-server database sessions
JP4419884B2 (ja) データ複製装置、方法及びプログラム並びに記憶システム
Srinivasan et al. Spritely NFS: Experiments with cache-consistency protocols
US7698319B2 (en) Database system management method, database system, database device, and backup program
FR2869128A1 (fr) Procede de copie a distance et systeme de copie a distance
MX2007002204A (es) Aparato, sistema y metodo para reinicio de serializacion de sistema de archivos.
JP2004013563A (ja) コンピュータシステム、ユーザデータ記憶装置、記憶装置のデータ受け渡し方法、ユーザデータのバックアップ方法、およびプログラム
US6944635B2 (en) Method for file deletion and recovery against system failures in database management system
WO2009092254A1 (zh) 一种高速缓存数据恢复的方法、装置和系统
CN1682193A (zh) 存储服务与系统
WO2007030805A1 (en) Transaction consistency and problematic states
JP5241298B2 (ja) 履歴上のファイル名およびロケーションをインデックス付きにすることによりファイル・サーチおよびファイル操作を支援するためのシステムおよび方法
WO2018076633A1 (zh) 一种远程数据复制方法、存储设备及存储系统
US20090006619A1 (en) Directory Snapshot Browser
CN110837441A (zh) 基于脏数据位图和网络块设备的kvm虚拟机备份方法
US20090157767A1 (en) Circular log amnesia detection
US10915403B2 (en) Versioned records management using restart era
US20050246385A1 (en) Database-rearranging program, database-rearranging method, and database-rearranging apparatus
JP5465401B2 (ja) ファイル管理方法、装置及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C19 Lapse of patent right due to non-payment of the annual fee
CF01 Termination of patent right due to non-payment of annual fee