CN111475340A - 用于创建复制品的方法、装置和计算机程序产品 - Google Patents
用于创建复制品的方法、装置和计算机程序产品 Download PDFInfo
- Publication number
- CN111475340A CN111475340A CN202010266766.XA CN202010266766A CN111475340A CN 111475340 A CN111475340 A CN 111475340A CN 202010266766 A CN202010266766 A CN 202010266766A CN 111475340 A CN111475340 A CN 111475340A
- Authority
- CN
- China
- Prior art keywords
- replica
- retention period
- value
- counter
- predetermined threshold
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1461—Backup scheduling policy
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/122—File system administration, e.g. details of archiving or snapshots using management policies
- G06F16/125—File system administration, e.g. details of archiving or snapshots using management policies characterised by the use of retention policies
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
- G06F16/273—Asynchronous replication or reconciliation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/065—Replication mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/84—Using snapshots, i.e. a logical point-in-time copy of the data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明的示例实施例涉及用于创建复制品的方法、装置和计算机程序产品,特别是用于如在数据留存策略中定义的那样确定从多个复制品中移除的复制品的方法、装置和计算机程序产品。该方法包括根据基于时间的复制循环执行从源到目标的异步复制。然后可以标识留存策略,该留存策略定义待留存的异步复制复制品的数目和多个相关联时段的留存策略,然后可以根据策略留存异步复制复制品。
Description
本申请是申请日为2016年03月30日、申请号为201610191131.1的发明专利申请的分案申请。
本专利文献的公开内容的部分可以包含都受到版权保护的命令格式和其它计算机语言清单。版权所有者并不反对由任何人影印复制如在专利和商标局专利文件或者记录中出现的那样的专利文献或者专利公开内容、但是除此之外保留所有无论任何版权权利。
有关申请的交叉引用
本申请与同日提交、标题为“RETENTION POLICIES FOR UNSCHEDULED REPLICASIN BACKUP,SNAPSHOTS,AND REMOTE REPLICATION”(EMC案号EMC-15-0694)的美国专利申请序列号__/___,___有关,通过完全引用而将该申请的教导结合于此。
技术领域
本申请涉及数据复制。
背景技术
计算机数据对于今日的组织而言至关重要,并且灾难防范的显著部分聚焦于数据保护。随着固态存储器已经发展到存储器成本已经变成相对不显著的因素这一点,组织可以负担得起利用存储和处理兆兆字节数据的系统进行操作。
常规数据保护系统包括用于在周期基础上存储组织生产地点数据的带备份驱动。这样的系统受若干缺点困扰。第一,它们需要在备份期间的系统关停,因为不能在备份操作期间使用正在被备份的数据。第二,它们限制生产地点可以恢复到的时间点。例如,如果在每天基础上备份数据,可能在灾难的事件中有数小时的丢失数据。第三,数据恢复过程本身需要长时间。
另一常规数据保护系统通过在辅助备份存储系统上创建组织的生产地点数据的副本并且随着改变而更新备份,来使用数据复制。备份存储系统可以处于与生产存储系统相同的物理位置中或者处于物理上远离的位置中。数据复制系统一般地在应用级、在文件系统级、在管理程序(hypervisor)级或者在数据块级进行操作。
发明内容
本发明的示例实施例涉及用于如在数据留存策略中定义的那样确定从多个复制品中移除的复制品的方法、系统和计算机程序产品。该方法包括根据基于时间的复制循环执行从源到目标的异步复制。然后可以标识留存策略,该留存策略定义待留存的异步复制复制品的数目和多个相关联时段,这些然后可以根据策略来留存。
附图说明
可以通过参照结合附图的以下描述更好地理解在本文中公开的实施例的目的、特征和优点。附图不是为了限制在本文中包括的权利要求的范围。为了清楚,可能没有在每幅图中标注每个单元。附图未必按比例,而是着重于图示实施例、原理和概念。因此,本公开内容的特征和优点将从结合附图进行的对示例实施例的以下具体描述而变得清楚,在附图中:
图1是图示根据本发明的一个示例实施例的系统的框图;
图2是图示根据本发明的一个示例实施例的用于根据基于时间的复制循环而执行从源到目标的异步复制的方法的流程图;
图3是图示根据本发明的一个示例实施例的复制循环开始的时间和每复制循环的流逝时间的状态图;
图4是图示根据本发明的一个示例实施例的用于根据多个留存时段和留存循环级而执行从源到目标的异步复制的方法的流程图;
图5是图示根据本发明的一个示例实施例的用于确定下一异步复制循环切换的时间的方法的流程图;
图6是根据本发明的一个示例实施例的具有各自具有相应多个复制品的多个留存窗口的时间的框图;
图7A-7C是根据本发明的一个示例实施例的计算得分的框图,该得分指示在针对图6的每个相应留存窗口的多个复制品的复制品范围中每个复制品的重要性;
图8是图示根据本发明的一个示例实施例的用于确定从多个复制品中移除的复制品的方法的流程图;
图9是图示根据本发明的一个示例实施例的用于计算在多个复制品的复制品范围中的每个复制品的得分的方法的流程图;
图10是图示根据本发明的一个示例实施例的用于针对每个留存窗口从窗口移除具有最小得分的复制品的方法的流程图;
图11是图示根据本发明的一个示例实施例的用于对可以个别地或者组合地采用的复制品进行打分的多种方法的流程图;
图12是根据本发明的一个示例实施例的装置的框图;以及
图13是包括如在计算机程序代码中体现的本发明的一个示例实施例的计算机程序产品的框图。
具体实施方式
传统地,许多分布式系统使用一致快照机来在源地点与目标地点之间复制数据。典型地,使用一致快照机制的复制受限于存储系统能够完成复制循环的速度。对使用一致快照机制的常规复制的改进将有益于数据存储行业。
典型地,在复制循环开始时从来自一个或者多个源的在存储系统内的数据创建一致快照。一般地,一旦数据改变,向目标地点传送那些改变。常规地,在完成数据传送时,在目标地点创建包含与在(多个)源地点驻留的(多个)快照相同的数据的快照、由此完成复制循环。传统地,每个源地点直至完成复制循环才可以发送后续快照。
常规地,在异步复制中,可能有在例如在源地点的存储应用经由异步复制向目标地点发送快照的时间与在源地点接收对在目标地点处理该快照的确认的时间之间的滞后。在一些实施例中,滞后时间或者等待时间可以用任何数目的方式来表达、诸如不多于给定的时间段、所设置的数据数量(即块的数目)、或者数据事务的数目。时间段可以变化或者可以是通过用户配置而选择的预定时间段。
在更多实施例中,在异步复制中,在向在目标地点处的存储装置实际地写入快照之前可能已经记录下对该快照的接收的确认时,可能出现数据丢失的可能性。如果存在确认与在写入快照的时间之间的冲突,则可能丢失这一数据。在备选实施例中,异步复制可以提供用于运行生产地点而有很少或者没有由于数据保护要求所致的减缓的能力。这可以是因为在需要被复制的数据方面的复制要求可能不恒定并且可能波动。异步数据复制可以提供可以缓冲数据复制的缓冲器或者滞后,从而允许它在繁重复制时段期间积累并且允许它在更轻松复制时段期间追赶。
传统异步复制产品、诸如曼彻斯特霍普金斯的EMC公司的对称远程数据设施(Symmetrix Remote Data Facility,)异步模式(SRDF/A)使用复制循环以最小化滞后,其中每个循环在先前循环完成时立即地开始。在这一传统异步复制与在目标地点上维护所得一致时间点(PIT)进行组合时,用户可以享受过去的PIT复制品的历史。然而,由于对新循环的创建在传统异步复制中不可预测(即它依赖于先前循环的完成),所以这些复制品的定时也不可预测。
常规地,数据复制策略可以描述不同类型的恢复、诸如灾难恢复、操作恢复和逻辑破坏恢复,并且可以具有多个策略属性、诸如在源地点拍摄的快照的频率和在目标地点保持每个快照多久、远程复制品滞后(例如,在源地点故障的情况下在其期间更新可能被丢失的时间长度)、恢复点目标(recovery point objective,RPO)(即,在向源地点提交数据的时间与向目标地点提交它的时间之间的最大可接受滞后时间、或者以时间为单位测量的数据丢失的可接受数量)、恢复时间目标(recovery time objective,RTO)(即执行恢复所花费的时间)、副本的数目、自动化的存储分层、以及位置。策略属性也可以包括副本的数目、复制类型(即曼彻斯特霍普金斯的EMC公司的SRDF或者EMC)、复制模式(即同步、异步、连续数据保护(CDP)、时间点(PIT))、源引擎类型和目标引擎类型(即,曼彻斯特霍普金斯的EMC公司的或者)。
另外,在典型数据保护环境中,有可能在策略服从时需要折衷的竞争目标。例如,RPO与应用延迟竞争,并且保护窗口(即数据往回多远时间受到保护)与快照粒度(即数据多么经常被备份)竞争,该快照粒度进而与目标地点处理存储大小(即,为了存储在访问目标侧上的图像之时接收的新数据而需要的存储量)竞争。例如,在某些实施例中,源地点可以减缓它的响应时间,这将造成更少新数据来自用户,因此随着更少数据累积而减少RPO。
传统数据保护环境缺陷在于它们:(1)仅维护最后的一致副本(即不支持保留来自不同时间的多个PIT副本);(2)维护所有副本(这将造成空间耗尽、或者要求用户不断地监测和移除冗余副本);(3)维护最近N个副本,其中N是用户定义的数目(这一方法造成不可预测的保护窗口和可能的冗余副本(例如,来自24小时以前和24.01小时以前的副本));以及(4)使用留存策略,该留存策略基于用户的要求来稀释PIT副本(这将近似于所希望的结果、但是不会确保它(即,如果用户想要每分钟一个PIT,但是循环是30分钟长度,则不可能遵从用户的策略))。
本发明的某些实施例认识到希望遵从用户策略,该用户策略要求针对PIT复制品的某个时间表(例如,在最近10分钟内的5个和在最近24个小时内的24个)而继续最小化在源与目标之间的滞后。另外,根据本发明的示例实施例,有可能基于创建副本的时间或者它们保护的数据数量或者它们包含的改变数量来选择自动地留存哪些副本。因而,有了足够资源(例如存储空间),本发明的示例实施例能够遵从用户的确切策略要求而无妥协。
可以全文可互换地使用词语PIT、快照和复制品。
图1是图示根据本发明的一个示例实施例的系统100的框图。如图1中所示,系统100包括源地点110和目标地点120。源地点110包括主机115、存储应用130和存储装置135。目标地点120包括可以根据策略165管理多个复制品1601-N(统称为160)的复制品管理器150。主机115可以对存储装置135执行I/O 117操作,这些操作可以被存储应用130截获。随着从主机经由I/O操作117对存储装置135做出改变,存储应用130可以执行从源地点110到目标地点120的异步复制140。如以下将更具体地描述的那样,在本发明的示例实施例中,异步复制循环的定时和对复制品的留存可以由在目标地点120的复制品管理器150管理。
图2是图示根据本发明的一个示例实施例的用于根据基于时间的复制循环执行从源到目标的异步复制的方法的流程图。可以结合图1描述图2。如图2中所示,可以根据基于时间的复制循环执行从源地点110到目标地点120的异步复制(205)。可以标识留存策略165(210),该留存策略定义待留存的异步复制复制品的数目和多个相关联时段(即留存窗口)。如以上描述的那样,留存策略165也可以包括其它策略属性、诸如在源地点拍摄的快照的频率和在目标地点保持每个快照多久、远程复制品滞后、RPO、RTO、自动化的存储分层、以及位置。然后可以根据策略165来留存异步复制复制品160。
在某些实施例中,多个时段可以是时段序列,从而多个时段中的每个相继时段是多个时段中的紧接的先前时段的倍数。例如,对于多个时段L0、L1、L2、L3等(以秒为单位),L0等分成L1,L1等分成L2,等等。可以将要求集合L=(L0,L1,L2,L3,…)解释为如下:
·L0是最小滞后。本发明的示例实施例将尝试至少每L0秒(但是不高于此频率)切换异步复制循环(换而言之,根据RPO或者在从最新PIT恢复时的所允许的数据丢失的最大数量得到L0)。
·L1是第一留存时段(每L1秒创建要一个PIT,并且在L2时段期间保存该PIT);L2是第二留存时段(每L2秒创建一个PIT,并且在L3时段期间保存该PIT);等等。
例如,数目L0=5、L1=60、L2=3600、L3=86400的集合提供5秒的最小滞后,其中如以下将更具体地描述的,目标地点120在最后一小时的每分钟和最后一天的每小时具有一个PIT复制品160。在一个优选实施例中,每个窗口从先前留存窗口排除所有复制品160。在某些实施例中,策略165可以对于每个留存时段定义对待留存的PIT副本的数目的限制(例如,该限制可以任意、包括0)。例如,策略165可以指定“在最后12分钟内的5个”、“在最后一个小时内的2个”和“在最后24个小时内的24个”。在一些实施例中,窗口按大小排序(例如,从小到大)。在一些实施例中,在“现在”与过去的先前时间点之间定义留存窗口。
图3是图示根据本发明的一个示例实施例的复制循环开始的时间和每复制循环的流逝时间的状态图。如图3中所示,X轴示出了每异步复制循环的流逝时间,其中每个复制循环起始于例如相对于它本身的0秒(但是每个先前循环的循环时间是绝对复制循环开始时间),而Y轴示出复制循环开始的时间。换而言之,一般而言,具体地参照图4,异步复制循环C[P0]=2的开始跟随在紧接着它之前的异步复制循环C[P0]=1的完成之后出现(如以下将更具体地描述的,异步复制循环C[P1]=2为例外)。
图4是图示根据本发明的一个示例实施例的用于根据多个留存时段和留存循环级而执行从源110到目标120的异步复制的方法的流程图。可以结合图1和3描述图4。如图4中所示,定义异步复制策略以具有最小滞后L0,因此至少与每L0秒一样经常地尝试异步复制循环切换。如果异步复制系统100具有充分资源,则它应当能够达到这一复制目标并且每L0(即5)秒异步地复制新的快照。在这一情况下,链路带宽足以用于在峰值写入可以在L0时段内被平滑时传输主机写入(换而言之,在L0秒的任何窗口内的写入数量不多于在L0秒内的链路的传送容量)。在这一情况下,确保循环切换可以确切地每L0秒出现。
如图1、3和4中所示,第一异步复制循环可以开始(405)。循环可以是第一类型(即具有第一留存时段)P0,并且用于第一循环类型的相关联计数器可以被递增(即C[P0]++)(410)至C[P0]=1。复制品管理器150然后可以确定计数器C[P0]是否等于第二留存时段(即L1)和第一留存时段(即L0)的比率(或者是该比率的倍数)(即C[P0]=L1/L0?)(415)。如果C[P0]不等于第二留存时段(即L1)和第一留存时段(即L0)的比率(或者不是该比率的倍数)(即C[P0]≠L1/L0)(417),则可以执行下一复制循环(405),这将触发用于第一循环类型P0的计数器递增(即C[P0]++)(410)至C[P0]=2。复制品管理器150将通过C[P0]=(L1/L0)-1继续确定计数器C[P0]是否不等于第二留存时段(即L1)和第一留存时段(即L0)的比率(或者不是该比率的倍数)(即C[P0]≠L1/L0)(417)(在此,类型P0的循环11,因为L0=5和L1=60)。
对于类型P0的循环12(即在L0=5和L1=60时,C[P0]=L1/L0=12),复制品管理器将确定[P0]等于第二留存时段(即L1)和第一留存时段(即L0)的比率(或者是该比率的倍数)(即C[P0]=L1/L0)(418)并且将递增用于第二循环类型的相关联计数器(即C[P1]++)(420)并且将循环L1/L0标记为第二类型(即P1)。复制品管理器然后可以重置用于第一循环类型的计数器(即C[P0]=0)(425)。备选地,复制品管理器可以跳过这一重置步骤,因为复制品管理器可以确定用于第一循环类型的计数器是否为第二留存时段(即L1)和第一留存时段(即L0)的比率的倍数(即C[P0]=L1/L0?)。
复制品管理器然后可以确定标记第一类型的循环L1/L0为第二类型的循环是否使得用于第二循环类型的计数器等于第三留存时段(即L2)和第二留存时段(即L1)的比率(或者是该比率的倍数)(即C[P1]≠L2/L1?)(430)。与以上讨论相似,如果C[P1]不等于第三留存时段(即L2)和第二留存时段(即L1)的比率(或者不是该比率的倍数)(即C[P1]≠L2/L1)(432),则可以执行下一复制循环(405),这将触发用于第一循环类型P0的计数器递增(即C[P0]++)(410)至C[P0]=1。异步复制可以继续执行,而C[P0]继续随着多组L2/L1而递增,这进而使得每个L2/L1循环被标记为第二类型(即P1)并且用于第二循环类型的相关联计数器递增(C[P1]++)(420)直至用于第二循环类型的计数器等于第三留存时段(即L2)和第二留存时段(即L1)的比率(或者是该比率的倍数)(即C[P1]=L2/L1)(433)。如图4中所示,递增计数器和标记循环的以上布置通过针对每个留存时段L0-LN的相继级而继续。
例如,针对留存时段值L0=5、L1=60、L2=3600、L3=86400的集合,每第12个快照(即L1/L0=60/5=12)将被标记为P1以在目标侧被留存1分钟(即L1=60秒)。类似地,被标记为P1的每第60个快照(即L2/L1=3600/60=60)将被标记作为P2以在目标侧被留存1小时(即L2=3600秒)。相似地,标记为P2的每第24个快照(即L3/L2=86400/3600=24)将被标记作为P3以在目标侧被留存24小时(即L3=86400秒)。应当理解的是,对快照的标记从源地点被传送到目标地点,因此复制品管理器150可以根据策略165来管理对复制品160的留存。
图5是图示根据本发明的一个示例实施例的用于确定下一异步留存循环的时间的方法的流程图。在某些实施例中,主机写入可以超过在源地点110与目标地点120之间的平均链路带宽,并且在这一情况下,异步复制循环可能不能够在L0秒内完成。例如,在本例中使用L0=5秒,它可能花费20秒、一分钟、一小时或者更多。因而,在一个循环根据本发明的示例实施例超过它的最小循环时间L0时,系统100使用以下方法以确定下一循环切换的时间。
可以结合图3描述图5。在一个优选实施例中,结合如以上关于图4描述的将循环标记为P1、P2、P3、…来执行以下描述的方法。
系统100可以执行类型P0的第一异步复制循环(505)并且确定循环传输是否完成(510)。
如果循环传输完成(512),则系统100确定在完成异步复制循环时流逝多少时间(515)。
如果用于完成的异步复制循环的流逝时间的数量高达和包括L1-L0(即T≤L1-L0)(517),则系统100可以继续类型P0的下一异步复制循环(505)。例如,如图3中所示,异步复制循环C[P0]=1的传输在L1-L0(即55秒)之前完成,并且系统100可以在完成异步复制循环C[P0]=1时继续类型P0的下一异步复制循环,C[P0]=2。
如果用于完成的异步复制循环的流逝时间的数量在L1-L0(即55秒)之后、但是在L1(即60秒)之前(即L1-L0<T<L1)(518),则系统100可以等待直至过去L1秒(例如以便将循环时间与L1对准)。例如,如图3中所示,异步复制循环C[P0]=2的传输在L1-L0(即55秒)之后、但是在L1(即60秒)之前完成,并且系统100在继续类型P0的下一异步复制循环C[P0]=3(未示出)之前等待直至流逝时间的数量是L1(即60秒)(即T=L1)(519)。换而言之,在本发明的示例实施例中,没有跨越L1的部分循环。
如果异步复制循环传输未完成(513),则系统100确定多少时间已经在异步复制循环中流逝(520)。如果用于异步复制循环的流逝时间的数量在L1(即60秒)之前(即T<L1)(522),则系统100允许异步复制循环继续,以恢复监测该循环是否完成(510)。
然而,如果异步复制循环传输未完成并且用于异步复制循环的流逝时间的数量是L1(即60秒)(即T=L1)(523),则系统100强制在源地点110创建新的异步复制循环并且将它标记为类型P1(525)。应当注意的是,现有异步复制循环的传输继续。例如,如图3中所示,异步复制循环C[P0]=6的传输在L1(即60秒)处未完成,系统100强制源地点110创建类型P1的新的异步复制循环C[P1]=2(注意,先前在L1/L0循环中创建了C[P1]=1),并且现有异步复制循环C[P0]=6继续直至它在L1之后的某个时间完成。
应当注意的是,在某些实施例中,由于强开始制新异步复制循环可能发生多次,所以在源地点110的循环的数目可以增长至系统100可以支持的任何数目(例如根据它的资源)。另外,如果循环的传输不能够在下一循环开始之前完成则系统可以调整新的异步复制循环开始的频率,或者系统可以对源地点110上的所允许的循环的数目设上限。然而,重要的是,注意本发明的某些实施例解决可以解决本身的暂时资源短缺并且允许异步复制系统追赶异步复制循环的积压的传输。
图6是具有多个留存窗口P1 6201、P2 6202和P3 6203(统称为620)的时间的框图,具有P1覆盖范围T0=0秒至T1=-12分钟(即L1/L0)、P2覆盖范围T1至T2=-1小时(即L2/L1)和P3覆盖范围T2至T3=-24小时(即L3/L2)。根据本发明的一个示例实施例,每个留存窗口620具有相应多个复制品6101-10、61011-40、61041-88(统称为610)。复制品610(例如图1的复制品160)在目标地点120处,并且复制品管理器150可以执行留存策略165以确定针对多个时间段留存来自留存窗口620相应复制品160。
如图6中所示,在第一窗口P1 6201中有10个复制品6101-10、在第二窗口P2 6202中有30个复制品61011-40和在第三窗口P3 6203中有48个复制品61041-88。然而,在这一示例实施例中,留存策略165定义第一窗口P1 6201应当在过去的12分钟内留存5个复制品,第二窗口P26202应当在过去的一小时内留存2个复制品(排除在所有先前窗口中的那些复制品(即P16201),并且第三窗口P3 6203应当在过去的24小时内留存24个复制品(排除在所有先前窗口中的那些复制品(即P1 6201和P2 6202)),每个窗口620中的无关复制品的数目由哈希表示。如以下将更具体地描述的那样,在不可预测时间出在目标地点120接收新的快照,并且本发明的示例实施例可以判断留存哪些快照和消除哪些快照(例如基于创建它们的时间、它们保护的数据的数量或者它们包含的改变的数量)。在其它实施例中,时间窗口可以重叠,从而包括了在先前窗口中的复制品。
图7A-7C是根据本发明的一个示例实施例的计算得分的框图,该得分指示在针对图6的每个相应留存窗口的多个复制品的复制品范围中每个复制品的重要性。可以结合图8描述图7A-7C,图8是图示根据本发明的一个示例实施例的用于确定从多个复制品移除的复制品的方法的流程图。如图7A-7C和8中所示,复制品管理器160可以如在数据留存策略165中定义的那样标识与第一窗口P1相关联的用户条件集合(805)。例如,复制品管理器160可以从数据留存策略165确定第一窗口P1应当在过去的12分钟内留存5个复制品,第二窗口P2应当在过去的一小时内留存2个复制品,以及第三窗口P3应当在过去的24小时内留存24个复制品。
如图7A和8中所示,针对第一窗口(例如图6的第一窗口P1 6201),复制品管理器160可以确定满足具有相关联时间窗口中的时间值的用户条件(即窗口)的多个复制品(810)。换而言之,复制品管理器160可以确定在第一窗口P1中有10个复制品7601-10。相似地,针对图7B、7C和8,复制品管理器160可以确定分别在第二和第三窗口中有30个复制品76011-76040和48个复制品76041-76088(810)。复制品管理器160然后可以确定多个复制品是否超过如在数据留存策略中定义的针对每个窗口的最大值(即在第一窗口P1中的5个、在第二窗口P2中的2个和在第三窗口P3中的24个)并且如果是这样的话,则从多个复制品中移除无关复制品,从而多个复制品未超过针对该窗口的最大值(815)。
图9是图示根据本发明的一个示例实施例的用于计算在多个复制品的复制品范围中的每个复制品的得分的方法的流程图。如图9中所示,为了确定应当留存多个复制品的哪些复制品和应当移除哪些复制品以便服从留存策略,复制品管理器160生成针对每个复制品的得分。如以下将关于图10更具体地描述的那样,复制品管理器160标识相对于正在被打分的复制品的先前复制品(905)并且标识相对于正在被打分的复制品的后续复制品(910)。复制品管理器160然后可以如以下将关于图10更具体地描述的那样根据与先前的、被打分的和后续的复制品相关联的值来计算得分(915)。
图10是图示根据本发明的一个示例实施例的用于针对每个留存窗口从窗口移除具有最小得分的复制品的方法的流程图。可以参照图7A-7C描述图10。复制品管理器160可以检查第一窗口P1(1005)并且对窗口P1中的复制品的数目进行计数(忽略属于先前窗口的任何副本,如果有的话)(1010)。因此,复制品管理器160可以确定在图7A的第一窗口P1中有10个副本并且确定复制品的数目n是否至少为2、但是处于针对第一窗口P1的用户策略最大值M内(即2≥n≤M?)(1015)。
如果副本的数目在用户策略内(1017),则复制品管理器可以行进至下一留存窗口P2(1005)。然而,如果副本的数目n超过针对窗口M的用户策略最大值(即n>M)(1018),则复制品管理器160可以自动地留存在留存窗口P1中的第一个复制品和最新的复制品(即复制品集合中的{C1,…,Cn}中的复制品C1和Cn)(例如图7A的最新的复制品7601和第一个复制品76010)(1020)。
复制品管理器160然后可以计算针对留存窗口P1中的剩余复制品(例如图7A的复制品7602-7609)中的每个复制品的得分S[j](1025)。以下将参照图11描述用于计算得分的示例方法。然后可以从留存窗口P1移除具有最小得分的复制品(即得分集合{S2,…,Sn-1}中的SMIN)(1030)。该方法然后返回以递归地确定复制品的数目是否满足策略(1015)直至它满足(1017)。
复制品管理器160可以确定它是否已经检查最后的留存窗口(1035),并且如果它不是(1037),则向下一(即第二)留存窗口转变(1005)并且确定第二留存窗口P2中的复制品的数目(1010)。因此,复制品管理器160可以确定在图7B的第二窗口P2中有30个复制品并且确定复制品的数目n是否至少为2、但是在针对第一窗口P2的用户策略最大值M内(即2≥n≤M?)(1015)。
如果复制品的数目n在用户策略内(1017),则复制品管理器可以继续下一留存窗口P3(1005)。然而,如果复制品的数目n超过针对窗口M的用户策略最大值(即n>M)(1018),则复制品管理器160可以自动地留存在留存窗口P2中的第一个复制品和最新的复制品(即复制品集合中的{C1,…,Cn}中的复制品C1和Cn)(例如图7B的最新的复制品76011和第一个复制品76040)(1020)。
复制品管理器160然后可以计算针对留存窗口P2中的剩余复制品(即在1<j<n时的复制品Cj)(例如图7B的复制品76012-76039)中的每个复制品的得分S[j](1025)。以下将参照图11描述用于计算得分的示例方法。然后可以从留存窗口P2移除具有最小得分的复制品(即得分集合{S2,…,Sn-1}中的SMIN)(1030)。该方法然后返回以递归地确定复制品的数目是否满足策略(1015)直至它满足(1017)。
复制品管理器160可以确定它是否已经检查最后的留存窗口(1035),并且如果它不是(1037),则它向下一(即第三)留存窗口转变(1005)并且确定第三留存窗口P3中的复制品的数目(1010)。因此,复制品管理器160可以确定在图7C的第三窗口P3中有48个复制品并且确定复制品的数目n是否至少为2、但是在针对第一窗口P2的用户策略最大值M内(即2≥n≤M?)(1015)。
如果复制品的数目n在用户策略内(1017),则复制品管理器可以尝试继续下一留存窗口,但是复制品管理器将确定P3是否为最后窗口(1035)(其中它是(1038)并且结束(1040))。然而,如果副本的数目超过用于窗口M的用户策略最大值(即n>M)(1018),则复制品管理器160可以自动地留存在留存窗口P3中的第一个复制品和最新的复制品(即复制品集合中的{C1,…,Cn}中的复制品C1和Cn)(例如图7C的最新的复制品76041和第一个复制品76088)(1020)。
复制品管理器160然后可以计算针对留存窗口P3中的剩余复制品(即在1<j<n时的复制品Cj)(例如图7C的复制品76042-76087)中的每个复制品的得分S[j](1025)。以下将参照图11描述用于计算得分的示例方法。然后可以从留存窗口P3移除具有最小得分的复制品(即得分集合{S2,…,Sn-1}中的SMIN)(1030)。该方法然后返回以递归地确定复制品的数目是否满足策略(1015)直至它满足(1017),在该点,复制品管理器将确定P3是否为最后窗口(其中它是(1038)并且结束(1040))。
图11是图示根据本发明的一个示例实施例的用于对可以个别地或者组合地采用的复制品进行打分的多种方法的流程图。如图11中所示,复制品管理器160可以计算针对留存窗口中的剩余复制品(即在1<j<n时的复制品Cj)(例如针对第一留存窗口P1的图7A的复制品7602-7609、针对第二留存窗口P2的图7B的复制品76012-76039和针对第三留存窗口P3的图7C的复制品76042-76087)中的每个复制品的得分S[j](1130)。如以上关于图9描述的那样,在示例实施例中,根据与先前的、被打分的和后续的复制品相关联的值计算针对复制品的得分。复制品管理器然后可以确定它是否已经对最后的复制品(即在j=n-1时)进行打分(1150)。如果复制品仍然留在正在被打分的留存窗口中(即j<n-1)(1152),则复制品管理器然后可以对下一复制品进行打分(1130)。然而,如果复制品管理器已经对最后的复制品(即j=n-1)进行打分(1153),则打分方法结束(1140)。
第一示例实施例的打分方法可以基于时间。复制品管理器160可以确定先前复制品的时间(即Tj-1)(1135A)并且确定后续复制品(即Tj+1)的时间(1140A)。复制品管理器160然后可以根据在先前复制品和后续复制品的时间之间的差异计算得分(即S[j]=Tj+1-Tj-1)。应当理解的是,间隙越大,j就越重要。另外,在时间上更可能均匀地分布所得复制品。例如,对于在最后24小时内寻求24个复制品的用户,本发明的示例实施例将收敛(在正常条件之下)至每小时一个复制品。
第二示例实施例的打分方法可以基于改变的数据的数量。复制品管理器160可以确定在先前复制品的时间处写入的数据的数量(即D[Tj-1])(1135B)并且确定在后续复制品的时间处写入的数据的数量(即D[Tk+1])(1140B)。复制品管理器160然后可以根据在先前复制品和后续复制品的时间处的数据数量之间的差异计算得分(1145B)(即S[j]=D[Tj+1]-D[Tj-1])。应当理解的是,表示最大数据数量的复制品具有更高得分。另外,所得复制品收敛至在复制品之间的均匀改变数量(例如以字节为单位)。
第三示例实施例打分方法可以基于写入的数目。复制品管理器160可以确定在先前复制品与被打分的复制品之间的写入的数目(即Wj-1→j)(1135C)并且确定在被打分的复制品与后续复制品之间的写入的数目(即Wj→j+1)(1140C)。复制品管理器160然后可以根据在先前复制品与后续复制品之间的写入的数目计算得分(即S[j]=Wj→j+1-Wj-1→j)(1145C)。应当理解的是,由每个复制品表示的写入的数目向该复制品给定更高的值。另外,所得复制品收敛至在复制品之间的均匀改变数目(例如,以I/O为单位)。
应当理解的是,可以个别地或者组合地使用三种对复制品进行打分的方法中的每种方法。可以构造附加方法以对以上因素的组合(例如时间差、字节差和IO差)进行加权以计算用于副本Cj的任何用户定义的得分S[j]。例如,得分可以是以上讨论的得分的归一化的值之和。
图12是根据本发明的示例实施例装置1205的框图。装置1205可以是系统1200的部分并且包括经由总线1235连接的存储程序逻辑1215的存储器、用于执行过程1225的处理器1220和通信I/O接口1230。
可以在硬件、软件或者二者的组合中实施处理。可以在可编程计算机/机器上执行的计算机程序中实施处理,每个可编程计算机/机器包括处理器、可由处理器读取的存储介质或者其它制造品(包括易失性和非易失性存储器和/或存储单元)、至少一个输入设备和一个或者多个输出设备。程序代码可以被应用于使用输入设备而键入的数据以执行处理和生成输出信息。
本发明的方法和装置可以采用至少部分地为在有形非瞬态介质、诸如软盘、CD-ROM、硬驱动、随机存取或者只读存储器或者任何其它机器可读存储介质中体现的程序代码(即指令)的形式。在程序代码被加载到机器、诸如图12的计算机中并且由机器执行时,机器变成用于实现本发明的装置。在一个或者多个通用处理器上实施时,程序代码与这样的处理器组合以提供与具体逻辑电路类似地操作的独特装置。这样,通用数字机器可以被变换成专用数字机器。
图13是根据本发明的一个示例实施例的计算机程序产品1300的框图,该计算机程序产品包括在配置用于实现本发明的方法的计算机可执行代码中在计算机可读介质1360上编码的程序逻辑1355。可以体现用于实现该方法的逻辑作为前述系统的部分,该部分可用于实现参照所示实施例描述的方法。
虽然已经出于理解清楚的目的而用一些细节描述前述发明,但是将清楚可以在所附权利要求的范围内实现某些改变和修改。本发明的范围仅受权利要求所限制,并且本发明涵盖许多备选、修改和等效物。在以上描述中阐述许多具体细节以便提供对本发明的透彻理解。出于示例的目的而提供这些细节并且可以根据权利要求实现本发明而无这些具体细节中的一些或者所有细节。为了清楚,尚未具体地描述在与本发明有关的技术领域中已知的技术细节,从而未不必要地模糊本发明。因而,以上实现方式将视为示例而不是限制,并且本发明将不限于本文中给出的细节、但是可以在所附权利要求的范围和等效含义内加以修改。
Claims (20)
1.一种计算机实现的方法,包括:
根据基于时间的复制循环来执行从源到目标的第一复制,以生成第一复制品;
递增对应于第一复制品留存时段的计数器的值;
确定所述计数器的所述值不等于与第二复制品留存时段相关联的预定阈值或者不是与第二复制品留存时段相关联的预定阈值的倍数;
至少部分基于确定所述计数器的所述值不等于与所述第二复制品留存时段相关联的所述预定阈值或者不是与所述第二复制品留存时段相关联的所述预定阈值的倍数,将所述第一复制品标记为属于所述第一复制品留存时段;
根据所述基于时间的复制循环来执行从所述源到所述目标的第二复制,以生成第二复制品;
递增对应于所述第一复制品留存时段的所述计数器的所述值;
确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数;以及
至少部分基于确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,将所述第二复制品标记为属于所述第二复制品留存时段。
2.根据权利要求1所述的计算机实现的方法,还包括:
至少部分基于确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,重置所述计数器的所述值。
3.根据权利要求1所述的计算机实现的方法,还包括:
至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,递增对应于所述第二复制品留存时段的第二计数器的第二值;
确定所述第二计数器的所述第二值不等于与第三复制品留存时段相关联的第二预定阈值或者不是与第三复制品留存时段相关联的第二预定阈值的倍数;以及
其中至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数来将所述第二复制品标记为属于所述第二复制品留存时段包括:至少部分基于确定所述第二计数器的所述第二值不等于与所述第三复制品留存时段相关联的所述第二预定阈值或者不是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数,将所述第二复制品标记为属于所述第二复制品留存时段。
4.根据权利要求3所述的计算机实现的方法,还包括:
根据所述基于时间的复制循环来执行从所述源到所述目标的第三复制,以生成第三复制品;
递增对应于所述第一复制品留存时段的所述计数器的所述值;
确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数;
至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,递增对应于所述第二复制品留存时段的所述第二计数器的所述第二值;
确定所述第二计数器的所述第二值等于与所述第三复制品留存时段相关联的所述第二预定阈值或者是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数;以及
至少部分基于确定所述第二计数器的所述第二值等于与所述第三复制品留存时段相关联的所述第二预定阈值或者是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数,将所述第三复制品标记为属于所述第三复制品留存时段。
5.根据权利要求1所述的计算机实现的方法,其中所述第一预定阈值包括对应于所述第一复制品留存时段的第一时间值除以对应于所述第二复制品留存时段的第二时间值。
6.根据权利要求5所述的计算机实现的方法,其中所述第二预定阈值包括对应于所述第二复制品留存时段的所述第二时间值除以对应于所述第三复制品留存时段的第三时间值。
7.根据权利要求1所述的计算机实现的方法,还包括:向所述目标提供所述第一复制品和所述第二复制品的所述标记。
8.一种装置,包括:
包括多个存储设备的存储系统以及耦合到存储器的至少一个处理设备,所述至少一个处理设备被配置为:
根据基于时间的复制循环来执行从源到目标的第一复制,以生成第一复制品;
递增对应于第一复制品留存时段的计数器的值;
确定所述计数器的所述值不等于与第二复制品留存时段相关联的预定阈值或者不是与第二复制品留存时段相关联的预定阈值的倍数;
至少部分基于确定所述计数器的所述值不等于与所述第二复制品留存时段相关联的所述预定阈值或者不是与所述第二复制品留存时段相关联的所述预定阈值的倍数,将所述第一复制品标记为属于所述第一复制品留存时段;
根据所述基于时间的复制循环来执行从所述源到所述目标的第二复制,以生成第二复制品;
递增对应于所述第一复制品留存时段的所述计数器的所述值;
确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数;以及
至少部分基于确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,将所述第二复制品标记为属于所述第二复制品留存时段。
9.根据权利要求8所述的装置,其中所述至少一个处理设备还被配置为:
至少部分基于确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,重置所述计数器的所述值。
10.根据权利要求8所述的装置,其中所述至少一个处理设备还被配置为:
至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,递增对应于所述第二复制品留存时段的第二计数器的第二值;
确定所述第二计数器的所述第二值不等于与第三复制品留存时段相关联的第二预定阈值或者不是与第三复制品留存时段相关联的第二预定阈值的倍数;以及
其中至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数来将所述第二复制品标记为属于所述第二复制品留存时段包括:至少部分基于确定所述第二计数器的所述第二值不等于与所述第三复制品留存时段相关联的所述第二预定阈值或者不是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数,将所述第二复制品标记为属于所述第二复制品留存时段。
11.根据权利要求10所述的装置,其中所述至少一个处理设备还被配置为:
根据所述基于时间的复制循环来执行从所述源到所述目标的第三复制,以生成第三复制品;
递增对应于所述第一复制品留存时段的所述计数器的所述值;
确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数;
至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,递增对应于所述第二复制品留存时段的所述第二计数器的所述第二值;
确定所述第二计数器的所述第二值等于与所述第三复制品留存时段相关联的所述第二预定阈值或者是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数;以及
至少部分基于确定所述第二计数器的所述第二值等于与所述第三复制品留存时段相关联的所述第二预定阈值或者是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数,将所述第三复制品标记为属于所述第三复制品留存时段。
12.根据权利要求8所述的装置,其中所述第一预定阈值包括对应于所述第一复制品留存时段的第一时间值除以对应于所述第二复制品留存时段的第二时间值。
13.根据权利要求12所述的装置,其中所述第二预定阈值包括对应于所述第二复制品留存时段的所述第二时间值除以对应于所述第三复制品留存时段的第三时间值。
14.根据权利要求8所述的装置,其中所述至少一个处理设备还被配置为:向所述目标提供所述第一复制品和所述第二复制品的所述标记。
15.一种计算机程序产品,包括非瞬态处理器可读存储介质,所述非瞬态处理器可读存储介质具有存储在其中的一个或多个软件程序的程序代码,其中所述程序代码在由至少一个处理设备执行时使所述至少一个处理设备:
根据基于时间的复制循环来执行从源到目标的第一复制,以生成第一复制品;
递增对应于第一复制品留存时段的计数器的值;
确定所述计数器的所述值不等于与第二复制品留存时段相关联的预定阈值或者不是与第二复制品留存时段相关联的预定阈值的倍数;
至少部分基于确定所述计数器的所述值不等于与所述第二复制品留存时段相关联的所述预定阈值或者不是与所述第二复制品留存时段相关联的所述预定阈值的倍数,将所述第一复制品标记为属于所述第一复制品留存时段;
根据所述基于时间的复制循环来执行从所述源到所述目标的第二复制,以生成第二复制品;
递增对应于所述第一复制品留存时段的所述计数器的所述值;
确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数;以及
至少部分基于确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,将所述第二复制品标记为属于所述第二复制品留存时段。
16.根据权利要求15所述的计算机程序产品,其中所述程序代码还使所述至少一个处理设备:
至少部分基于确定所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,重置所述计数器的所述值。
17.根据权利要求15所述的计算机程序产品,其中所述程序代码还使所述至少一个处理设备:
至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,递增对应于所述第二复制品留存时段的第二计数器的第二值;
确定所述第二计数器的所述第二值不等于与第三复制品留存时段相关联的第二预定阈值或者不是与第三复制品留存时段相关联的第二预定阈值的倍数;以及
其中至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数来将所述第二复制品标记为属于所述第二复制品留存时段包括:至少部分基于确定所述第二计数器的所述第二值不等于与所述第三复制品留存时段相关联的所述第二预定阈值或者不是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数,将所述第二复制品标记为属于所述第二复制品留存时段。
18.根据权利要求17所述的计算机程序产品,其中所述程序代码还使所述至少一个处理设备:
根据所述基于时间的复制循环来执行从所述源到所述目标的第三复制,以生成第三复制品;
递增对应于所述第一复制品留存时段的所述计数器的所述值;
确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数;
至少部分基于确定对应于第一复制品留存时段的所述计数器的所述值等于与所述第二复制品留存时段相关联的所述预定阈值或者是与所述第二复制品留存时段相关联的所述预定阈值的倍数,递增对应于所述第二复制品留存时段的所述第二计数器的所述第二值;
确定所述第二计数器的所述第二值等于与所述第三复制品留存时段相关联的所述第二预定阈值或者是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数;以及
至少部分基于确定所述第二计数器的所述第二值等于与所述第三复制品留存时段相关联的所述第二预定阈值或者是与所述第三复制品留存时段相关联的所述第二预定阈值的倍数,将所述第三复制品标记为属于所述第三复制品留存时段。
19.根据权利要求15所述的计算机程序产品,其中所述第一预定阈值包括对应于所述第一复制品留存时段的第一时间值除以对应于所述第二复制品留存时段的第二时间值。
20.根据权利要求19所述的计算机程序产品,其中所述第二预定阈值包括对应于所述第二复制品留存时段的所述第二时间值除以对应于所述第三复制品留存时段的第三时间值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010266766.XA CN111475340B (zh) | 2015-12-30 | 2016-03-30 | 用于创建复制品的方法、装置和计算机程序产品 |
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/984,334 | 2015-12-30 | ||
US14/984,334 US10496672B2 (en) | 2015-12-30 | 2015-12-30 | Creating replicas at user-defined points in time |
CN201610191131.1A CN106933501B (zh) | 2015-12-30 | 2016-03-30 | 用于创建复制品的方法、系统和计算机程序产品 |
CN202010266766.XA CN111475340B (zh) | 2015-12-30 | 2016-03-30 | 用于创建复制品的方法、装置和计算机程序产品 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610191131.1A Division CN106933501B (zh) | 2015-12-30 | 2016-03-30 | 用于创建复制品的方法、系统和计算机程序产品 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111475340A true CN111475340A (zh) | 2020-07-31 |
CN111475340B CN111475340B (zh) | 2023-07-11 |
Family
ID=59226349
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610191131.1A Active CN106933501B (zh) | 2015-12-30 | 2016-03-30 | 用于创建复制品的方法、系统和计算机程序产品 |
CN202010266766.XA Active CN111475340B (zh) | 2015-12-30 | 2016-03-30 | 用于创建复制品的方法、装置和计算机程序产品 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610191131.1A Active CN106933501B (zh) | 2015-12-30 | 2016-03-30 | 用于创建复制品的方法、系统和计算机程序产品 |
Country Status (2)
Country | Link |
---|---|
US (2) | US10496672B2 (zh) |
CN (2) | CN106933501B (zh) |
Families Citing this family (148)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170206148A1 (en) * | 2016-01-20 | 2017-07-20 | Facebook, Inc. | Cross-region failover of application services |
US11080242B1 (en) * | 2016-03-30 | 2021-08-03 | EMC IP Holding Company LLC | Multi copy journal consolidation |
US10007695B1 (en) * | 2017-05-22 | 2018-06-26 | Dropbox, Inc. | Replication lag-constrained deletion of data in a large-scale distributed data storage system |
US10956052B1 (en) | 2017-07-21 | 2021-03-23 | EMC IP Holding Company LLC | Online address to hash (A2H) metadata scanner |
US10705918B1 (en) | 2017-07-21 | 2020-07-07 | EMC IP Holding Company LLC | Online metadata backup consistency check |
US10884650B1 (en) | 2017-10-25 | 2021-01-05 | EMC IP Holding Company LLC | Opportunistic compression of replicated data in a content addressable storage system |
US10452296B1 (en) | 2018-03-23 | 2019-10-22 | Amazon Technologies, Inc. | Accelerated volumes |
US10956078B2 (en) | 2018-03-27 | 2021-03-23 | EMC IP Holding Company LLC | Storage system with loopback replication process providing object-dependent slice assignment |
US10866969B2 (en) | 2018-03-28 | 2020-12-15 | EMC IP Holding Company LLC | Storage system with loopback replication process providing unique identifiers for collision-free object pairing |
US11343314B1 (en) | 2018-04-30 | 2022-05-24 | Amazon Technologies, Inc. | Stream-based logging for distributed storage systems |
US11023157B2 (en) | 2018-04-30 | 2021-06-01 | Amazon Technologies, Inc. | Intermediary duplication to facilitate copy requests in distributed storage systems |
US10459655B1 (en) | 2018-04-30 | 2019-10-29 | Amazon Technologies, Inc. | Rapid volume backup generation from distributed replica |
US10705753B2 (en) | 2018-05-04 | 2020-07-07 | EMC IP Holding Company LLC | Fan-out asynchronous replication logical level caching |
US10977216B2 (en) | 2018-05-29 | 2021-04-13 | EMC IP Holding Company LLC | Processing device utilizing content-based signature prefix for efficient generation of deduplication estimate |
US10996898B2 (en) | 2018-05-29 | 2021-05-04 | EMC IP Holding Company LLC | Storage system configured for efficient generation of capacity release estimates for deletion of datasets |
US11609883B2 (en) | 2018-05-29 | 2023-03-21 | EMC IP Holding Company LLC | Processing device configured for efficient generation of compression estimates for datasets |
US11593313B2 (en) | 2018-05-29 | 2023-02-28 | EMC IP Holding Company LLC | Processing device configured for efficient generation of data reduction estimates for combinations of datasets |
US10983962B2 (en) | 2018-05-29 | 2021-04-20 | EMC IP Holding Company LLC | Processing device utilizing polynomial-based signature subspace for efficient generation of deduplication estimate |
US11100135B2 (en) * | 2018-07-18 | 2021-08-24 | EMC IP Holding Company LLC | Synchronous replication in a storage system |
US10558613B1 (en) | 2018-07-19 | 2020-02-11 | EMC IP Holding Company LLC | Storage system with decrement protection of reference counts |
US10922147B2 (en) | 2018-07-19 | 2021-02-16 | EMC IP Holding Company LLC | Storage system destaging based on synchronization object with watermark |
US10802935B2 (en) | 2018-07-23 | 2020-10-13 | EMC IP Holding Company LLC | Method to support synchronous replication failover |
US10705965B2 (en) | 2018-07-23 | 2020-07-07 | EMC IP Holding Company LLC | Metadata loading in storage systems |
US10884651B2 (en) | 2018-07-23 | 2021-01-05 | EMC IP Holding Company LLC | Storage system with multi-phase verification of synchronously replicated data |
US10826990B2 (en) | 2018-07-23 | 2020-11-03 | EMC IP Holding Company LLC | Clustered storage system configured for bandwidth efficient processing of writes at sizes below a native page size |
US10691551B2 (en) | 2018-07-24 | 2020-06-23 | EMC IP Holding Company LLC | Storage system with snapshot generation control utilizing monitored differentials of respective storage volumes |
US10684915B2 (en) | 2018-07-25 | 2020-06-16 | EMC IP Holding Company LLC | Efficient packing of compressed data in storage system implementing data striping |
US10831735B2 (en) | 2018-07-25 | 2020-11-10 | EMC IP Holding Company LLC | Processing device configured for efficient generation of a direct mapped hash table persisted to non-volatile block memory |
US10747677B2 (en) | 2018-07-27 | 2020-08-18 | EMC IP Holding Company LLC | Snapshot locking mechanism |
US10956442B1 (en) | 2018-07-30 | 2021-03-23 | Amazon Technologies, Inc. | Dedicated source volume pool for accelerated creation of block data volumes from object data snapshots |
US11106810B2 (en) | 2018-07-30 | 2021-08-31 | EMC IP Holding Company LLC | Multi-tenant deduplication with non-trusted storage system |
US10635533B2 (en) | 2018-07-30 | 2020-04-28 | EMC IP Holding Company LLC | Efficient computation of parity data in storage system implementing data striping |
US10824512B2 (en) | 2018-07-31 | 2020-11-03 | EMC IP Holding Company LLC | Managing journaling resources with copies stored in multiple locations |
US10852999B2 (en) | 2018-07-31 | 2020-12-01 | EMC IP Holding Company LLC | Storage system with decoupling of reference count updates |
US11030314B2 (en) | 2018-07-31 | 2021-06-08 | EMC IP Holding Company LLC | Storage system with snapshot-based detection and remediation of ransomware attacks |
US10901847B2 (en) | 2018-07-31 | 2021-01-26 | EMC IP Holding Company LLC | Maintaining logical to physical address mapping during in place sector rebuild |
US10817385B2 (en) | 2018-07-31 | 2020-10-27 | EMC IP Holding Company LLC | Storage system with backup control utilizing content-based signatures |
US10783134B2 (en) | 2018-07-31 | 2020-09-22 | EMC IP Holding Company LLC | Polling process for monitoring interdependent hardware components |
US10929047B2 (en) | 2018-07-31 | 2021-02-23 | EMC IP Holding Company LLC | Storage system with snapshot generation and/or preservation control responsive to monitored replication data |
US10783038B2 (en) | 2018-09-21 | 2020-09-22 | EMC IP Holding Company LLC | Distributed generation of random data in a storage system |
US10642788B1 (en) | 2018-10-17 | 2020-05-05 | EMC IP Holding Company LLC | Sand timer algorithm for tracking in-flight data storage requests for data replication |
US10606519B1 (en) | 2018-10-19 | 2020-03-31 | EMC IP Holding Company LLC | Edge case handling in system with dynamic flow control |
US10725855B2 (en) | 2018-10-22 | 2020-07-28 | EMC IP Holding Company LLC | Storage system with data integrity verification performed in conjunction with internal data movement |
US10747474B2 (en) | 2018-10-22 | 2020-08-18 | EMC IP Holding Company LLC | Online cluster expansion for storage system with decoupled logical and physical capacity |
US10860241B2 (en) | 2018-10-24 | 2020-12-08 | EMC IP Holding Company LLC | Storage system configured for token-based data transfer in active-active configuration with synchronous replication |
US10754736B2 (en) | 2018-10-25 | 2020-08-25 | EMC IP Holding Company LLC | Storage system with scanning and recovery of internal hash metadata structures |
US10852965B2 (en) | 2018-10-30 | 2020-12-01 | EMC IP Holding Company LLC | Write folding mechanism using reusable shared striping in a storage system |
CN111125241B (zh) * | 2018-10-31 | 2023-10-20 | 伊姆西Ip控股有限责任公司 | 用于数据同步的方法、设备和计算机存储介质 |
US10719253B2 (en) | 2018-10-31 | 2020-07-21 | EMC IP Holding Company LLC | Efficient compression of data in storage systems through offloading computation to storage devices |
US11003629B2 (en) | 2018-10-31 | 2021-05-11 | EMC IP Holding Company LLC | Dual layer deduplication for application specific file types in an information processing system |
US10613793B1 (en) | 2018-11-01 | 2020-04-07 | EMC IP Holding Company LLC | Method to support hash based xcopy synchronous replication |
US10996871B2 (en) | 2018-11-01 | 2021-05-04 | EMC IP Holding Company LLC | Hash-based data recovery from remote storage system responsive to missing or corrupted hash digest |
US10942654B2 (en) | 2018-11-01 | 2021-03-09 | EMC IP Holding Company LLC | Hash-based data recovery from remote storage system |
US10296451B1 (en) | 2018-11-01 | 2019-05-21 | EMC IP Holding Company LLC | Content addressable storage system utilizing content-based and address-based mappings |
US11144229B2 (en) | 2018-11-01 | 2021-10-12 | EMC IP Holding Company LLC | Bandwidth efficient hash-based migration of storage volumes between storage systems |
US11086558B2 (en) | 2018-11-01 | 2021-08-10 | EMC IP Holding Company LLC | Storage system with storage volume undelete functionality |
US10691355B2 (en) | 2018-11-02 | 2020-06-23 | EMC IP Holding Company LLC | Apparatus, method and computer program product for controlled ordering of data pages for migration from source storage system into target storage system |
US10846178B2 (en) | 2019-01-11 | 2020-11-24 | EMC IP Holding Company LLC | Hash-based remote rebuild assistance for content addressable storage systems |
US11232128B2 (en) * | 2019-01-14 | 2022-01-25 | EMC IP Holding Company LLC | Storage systems configured with time-to-live clustering for replication in active-active configuration |
US11093159B2 (en) | 2019-01-15 | 2021-08-17 | EMC IP Holding Company LLC | Storage system with storage volume pre-copy functionality for increased efficiency in asynchronous replication |
US10871991B2 (en) | 2019-01-18 | 2020-12-22 | EMC IP Holding Company LLC | Multi-core processor in storage system executing dedicated polling thread for increased core availability |
US10884799B2 (en) | 2019-01-18 | 2021-01-05 | EMC IP Holding Company LLC | Multi-core processor in storage system executing dynamic thread for increased core availability |
US11288286B2 (en) | 2019-01-22 | 2022-03-29 | EMC IP Holding Company LLC | Storage system with data consistency checking in synchronous replication using active snapshot set |
US10592161B1 (en) | 2019-01-22 | 2020-03-17 | EMC IP Holding Company LLC | Storage system with flexible scanning supporting storage volume addition and/or recovery in asynchronous replication |
US11068191B2 (en) | 2019-01-23 | 2021-07-20 | EMC IP Holding Company LLC | Adaptive replication modes in a storage system |
US11275765B2 (en) | 2019-01-28 | 2022-03-15 | EMC IP Holding Company LLC | Storage systems configured for storage volume addition in synchronous replication using active-active configuration |
US11204716B2 (en) | 2019-01-31 | 2021-12-21 | EMC IP Holding Company LLC | Compression offloading to RAID array storage enclosure |
US10719249B1 (en) | 2019-01-31 | 2020-07-21 | EMC IP Holding Company LLC | Extent lock resolution in active/active replication |
US10831407B2 (en) | 2019-01-31 | 2020-11-10 | EMC IP Holding Company LLC | Write flow offloading to raid array storage enclosure |
US10838863B2 (en) | 2019-02-01 | 2020-11-17 | EMC IP Holding Company LLC | Storage system with write cache release protection |
US11392551B2 (en) | 2019-02-04 | 2022-07-19 | EMC IP Holding Company LLC | Storage system utilizing content-based and address-based mappings for deduplicatable and non-deduplicatable types of data |
US11397705B2 (en) | 2019-02-26 | 2022-07-26 | EMC IP Holding Company LLC | Storage system configured to generate sub-volume snapshots |
US10936010B2 (en) | 2019-03-08 | 2021-03-02 | EMC IP Holding Company LLC | Clock synchronization for storage systems in an active-active configuration |
US10754559B1 (en) | 2019-03-08 | 2020-08-25 | EMC IP Holding Company LLC | Active-active storage clustering with clock synchronization |
US10891195B2 (en) | 2019-03-19 | 2021-01-12 | EMC IP Holding Company LLC | Storage system with differential scanning of non-ancestor snapshot pairs in asynchronous replication |
US10866735B2 (en) | 2019-03-26 | 2020-12-15 | EMC IP Holding Company LLC | Storage system with variable granularity counters |
US11068192B1 (en) * | 2019-03-26 | 2021-07-20 | Amazon Technologies, Inc. | Utilizing mutiple snapshot sources for creating new copy of volume in a networked environment wherein additional snapshot sources are reserved with lower performance levels than a primary snapshot source |
US11055014B2 (en) | 2019-03-26 | 2021-07-06 | EMC IP Holding Company LLC | Storage system providing automatic configuration updates for remote storage objects in a replication process |
US10983719B1 (en) | 2019-03-28 | 2021-04-20 | Amazon Technologies, Inc. | Replica pools to support volume replication in distributed storage systems |
US11379142B2 (en) | 2019-03-29 | 2022-07-05 | EMC IP Holding Company LLC | Snapshot-enabled storage system implementing algorithm for efficient reclamation of snapshot storage space |
WO2020204882A1 (en) | 2019-03-29 | 2020-10-08 | EMC IP Holding Company LLC | Snapshot-enabled storage system implementing algorithm for efficient reading of data from stored snapshots |
US10740024B1 (en) | 2019-04-04 | 2020-08-11 | EMC IP Holding Company LLC | Minimizing runtime feature overhead in a storage system |
US10929049B2 (en) | 2019-04-10 | 2021-02-23 | EMC IP Holding Company LLC | Minimizing recovery time after a high availability event in a large-scale storage system |
US11055188B2 (en) | 2019-04-12 | 2021-07-06 | EMC IP Holding Company LLC | Offloading error processing to raid array storage enclosure |
US10866760B2 (en) | 2019-04-15 | 2020-12-15 | EMC IP Holding Company LLC | Storage system with efficient detection and clean-up of stale data for sparsely-allocated storage in replication |
US10871960B2 (en) | 2019-04-23 | 2020-12-22 | EMC IP Holding Company LLC | Upgrading a storage controller operating system without rebooting a storage system |
US10996887B2 (en) | 2019-04-29 | 2021-05-04 | EMC IP Holding Company LLC | Clustered storage system with dynamic space assignments across processing modules to counter unbalanced conditions |
US10929050B2 (en) | 2019-04-29 | 2021-02-23 | EMC IP Holding Company LLC | Storage system with deduplication-aware replication implemented using a standard storage command protocol |
US11216388B2 (en) | 2019-04-30 | 2022-01-04 | EMC IP Holding Company LLC | Tiering between storage media in a content aware storage system |
US11249834B2 (en) | 2019-05-15 | 2022-02-15 | EMC IP Holding Company LLC | Storage system with coordinated recovery across multiple input-output journals of different types |
US11237747B1 (en) | 2019-06-06 | 2022-02-01 | Amazon Technologies, Inc. | Arbitrary server metadata persistence for control plane static stability |
US11137929B2 (en) | 2019-06-21 | 2021-10-05 | EMC IP Holding Company LLC | Storage system configured to support cascade replication |
US11099766B2 (en) | 2019-06-21 | 2021-08-24 | EMC IP Holding Company LLC | Storage system configured to support one-to-many replication |
US10929239B2 (en) | 2019-07-19 | 2021-02-23 | EMC IP Holding Company LLC | Storage system with snapshot group merge functionality |
US11467906B2 (en) | 2019-08-02 | 2022-10-11 | EMC IP Holding Company LLC | Storage system resource rebuild based on input-output operation indicator |
US11494103B2 (en) | 2019-08-02 | 2022-11-08 | EMC IP Holding Company LLC | Memory-efficient processing of RAID metadata bitmaps |
US10909001B1 (en) | 2019-08-23 | 2021-02-02 | EMC IP Holding Company LLC | Storage system with snapshot group split functionality |
GB201913348D0 (en) * | 2019-09-16 | 2019-10-30 | Palantir Technologies Inc | Data deletion system and method |
US11281548B2 (en) | 2019-10-03 | 2022-03-22 | EMC IP Holding Company LLC | 2-phase sync replication recovery to optimize recovery point objective (RPO) |
US11070654B2 (en) | 2019-10-03 | 2021-07-20 | EMC IP Holding Company LLC | Sockets for shared link applications |
US10997072B1 (en) | 2019-10-16 | 2021-05-04 | EMC IP Holding Company LLC | Host-based acceleration of a content addressable storage system |
US11151048B2 (en) | 2019-10-25 | 2021-10-19 | Dell Products L.P. | Host-based read performance optimization of a content addressable storage system |
US11099767B2 (en) | 2019-10-25 | 2021-08-24 | EMC IP Holding Company LLC | Storage system with throughput-based timing of synchronous replication recovery |
US11645174B2 (en) | 2019-10-28 | 2023-05-09 | Dell Products L.P. | Recovery flow with reduced address lock contention in a content addressable storage system |
US11163799B2 (en) | 2019-10-29 | 2021-11-02 | Dell Products L.P. | Automatic rollback to target for synchronous replication |
US11656782B2 (en) | 2019-10-30 | 2023-05-23 | Dell Products L.P. | Global deadline driven local synchronous replication I/O handling and recover |
US10990286B1 (en) | 2019-10-30 | 2021-04-27 | EMC IP Holding Company LLC | Parallel upgrade of nodes in a storage system |
US11079957B2 (en) | 2019-11-01 | 2021-08-03 | Dell Products L.P. | Storage system capacity expansion using mixed-capacity storage devices |
US11036602B1 (en) | 2019-11-25 | 2021-06-15 | EMC IP Holding Company LLC | Storage system with prioritized RAID rebuild |
US11386124B2 (en) | 2020-01-15 | 2022-07-12 | Dell Products L.P. | Snapshot rollback for synchronous replication |
US11232010B2 (en) | 2020-01-20 | 2022-01-25 | EMC IP Holding Company LLC | Performance monitoring for storage system with core thread comprising internal and external schedulers |
US11429493B2 (en) | 2020-01-20 | 2022-08-30 | EMC IP Holding Company LLC | Remote rollback of snapshots for asynchronous replication |
US11106557B2 (en) | 2020-01-21 | 2021-08-31 | EMC IP Holding Company LLC | Persistence points based coverage mechanism for flow testing in high-performance storage systems |
US11055028B1 (en) | 2020-02-03 | 2021-07-06 | EMC IP Holding Company LLC | Storage system with reduced read latency |
US11079961B1 (en) | 2020-02-03 | 2021-08-03 | EMC IP Holding Company LLC | Storage system with write-via-hash functionality for synchronous replication of logical storage volumes |
US11360712B2 (en) | 2020-02-03 | 2022-06-14 | EMC IP Holding Company LLC | Storage system with continuous data verification for synchronous replication of logical storage volumes |
US11106365B1 (en) | 2020-02-10 | 2021-08-31 | EMC IP Holding Company LLC | Flow control of input/output (IO) in a synchronous replication session |
US11061835B1 (en) | 2020-02-12 | 2021-07-13 | EMC IP Holding Company LLC | Sensitivity matrix for system load indication and overload prevention |
US11249654B2 (en) | 2020-02-18 | 2022-02-15 | EMC IP Holding Company LLC | Storage system with efficient data and parity distribution across mixed-capacity storage devices |
US11144232B2 (en) | 2020-02-21 | 2021-10-12 | EMC IP Holding Company LLC | Storage system with efficient snapshot pair creation during synchronous replication of logical storage volumes |
US11061618B1 (en) | 2020-02-25 | 2021-07-13 | EMC IP Holding Company LLC | Disk array enclosure configured to determine metadata page location based on metadata identifier |
US11079969B1 (en) | 2020-02-25 | 2021-08-03 | EMC IP Holding Company LLC | Disk array enclosure configured for metadata and data storage processing |
US11281386B2 (en) | 2020-02-25 | 2022-03-22 | EMC IP Holding Company LLC | Disk array enclosure with metadata journal |
US11144461B2 (en) | 2020-03-09 | 2021-10-12 | EMC IP Holding Company LLC | Bandwidth efficient access to persistent storage in a distributed storage system |
US11010251B1 (en) | 2020-03-10 | 2021-05-18 | EMC IP Holding Company LLC | Metadata update journal destaging with preload phase for efficient metadata recovery in a distributed storage system |
US11126361B1 (en) | 2020-03-16 | 2021-09-21 | EMC IP Holding Company LLC | Multi-level bucket aggregation for journal destaging in a distributed storage system |
US11194664B2 (en) | 2020-04-20 | 2021-12-07 | EMC IP Holding Company LLC | Storage system configured to guarantee sufficient capacity for a distributed raid rebuild process |
US11169880B1 (en) | 2020-04-20 | 2021-11-09 | EMC IP Holding Company LLC | Storage system configured to guarantee sufficient capacity for a distributed raid rebuild process |
US11494301B2 (en) | 2020-05-12 | 2022-11-08 | EMC IP Holding Company LLC | Storage system journal ownership mechanism |
US11392295B2 (en) | 2020-05-27 | 2022-07-19 | EMC IP Holding Company LLC | Front-end offload of storage system processing |
US11093161B1 (en) | 2020-06-01 | 2021-08-17 | EMC IP Holding Company LLC | Storage system with module affinity link selection for synchronous replication of logical storage volumes |
US11513882B2 (en) | 2020-06-08 | 2022-11-29 | EMC IP Holding Company LLC | Dynamic modification of IO shaping mechanisms of multiple storage nodes in a distributed storage system |
US11886911B2 (en) | 2020-06-29 | 2024-01-30 | EMC IP Holding Company LLC | End-to-end quality of service mechanism for storage system using prioritized thread queues |
US11593396B2 (en) | 2020-09-23 | 2023-02-28 | EMC IP Holding Company LLC | Smart data offload sync replication |
US11281407B1 (en) | 2020-09-23 | 2022-03-22 | EMC IP Holding Company LLC | Verified write command in active-active replication |
US11327812B1 (en) | 2020-10-19 | 2022-05-10 | EMC IP Holding Company LLC | Distributed storage system with per-core rebalancing of thread queues |
US11853568B2 (en) | 2020-10-21 | 2023-12-26 | EMC IP Holding Company LLC | Front-end offload of storage system hash and compression processing |
US11436138B2 (en) | 2020-10-21 | 2022-09-06 | EMC IP Holding Company LLC | Adaptive endurance tuning of solid-state storage system |
US11531470B2 (en) | 2020-10-21 | 2022-12-20 | EMC IP Holding Company LLC | Offload of storage system data recovery to storage devices |
US11616722B2 (en) | 2020-10-22 | 2023-03-28 | EMC IP Holding Company LLC | Storage system with adaptive flow control using multiple feedback loops |
US11314416B1 (en) | 2020-10-23 | 2022-04-26 | EMC IP Holding Company LLC | Defragmentation of striped volume in data storage system |
US11435921B2 (en) | 2020-11-19 | 2022-09-06 | EMC IP Holding Company LLC | Selective deduplication in a distributed storage system |
US11687245B2 (en) | 2020-11-19 | 2023-06-27 | EMC IP Holding Company LLC | Dynamic slice assignment in a distributed storage system |
US11494405B2 (en) | 2020-12-21 | 2022-11-08 | EMC IP Holding Company LLC | Lock contention resolution for active-active replication performed in conjunction with journal recovery |
US11481291B2 (en) | 2021-01-12 | 2022-10-25 | EMC IP Holding Company LLC | Alternative storage node communication channel using storage devices group in a distributed storage system |
US11875198B2 (en) | 2021-03-22 | 2024-01-16 | EMC IP Holding Company LLC | Synchronization object issue detection using object type queues and associated monitor threads in a storage system |
US11520527B1 (en) | 2021-06-11 | 2022-12-06 | EMC IP Holding Company LLC | Persistent metadata storage in a storage system |
US11775202B2 (en) | 2021-07-12 | 2023-10-03 | EMC IP Holding Company LLC | Read stream identification in a distributed storage system |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101650678A (zh) * | 2009-07-27 | 2010-02-17 | 浪潮电子信息产业股份有限公司 | 一种基于文件操作语义异步复制的方法 |
US20120123999A1 (en) * | 2010-11-16 | 2012-05-17 | Actifio, Inc. | System and method for managing data with service level agreements that may specify non-uniform copying of data |
CN102483711A (zh) * | 2009-08-11 | 2012-05-30 | 国际商业机器公司 | 对复制顺序访问存储组件进行同步 |
US20120254122A1 (en) * | 2011-03-30 | 2012-10-04 | International Business Machines Corporation | Near continuous space-efficient data protection |
US20140143207A1 (en) * | 2012-11-21 | 2014-05-22 | International Business Machines Corporation | Managing replicated data |
US20150088826A1 (en) * | 2013-09-25 | 2015-03-26 | Futurewei Technologies, Inc. | Enhanced Performance for Data Duplication |
Family Cites Families (46)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3483364B2 (ja) * | 1995-09-07 | 2004-01-06 | Kddi株式会社 | Snmp/osi管理ゲートウェイ装置 |
US5933822A (en) * | 1997-07-22 | 1999-08-03 | Microsoft Corporation | Apparatus and methods for an information retrieval system that employs natural language processing of search results to improve overall precision |
US7010553B2 (en) * | 2002-03-19 | 2006-03-07 | Network Appliance, Inc. | System and method for redirecting access to a remote mirrored snapshot |
WO2005029334A2 (en) * | 2003-09-19 | 2005-03-31 | Hewlett-Packard Development Company, L.P. | Method of designing storage system |
DE602004026422D1 (de) | 2004-02-25 | 2010-05-20 | Microsoft Corp | Datenbank-datenwiederherstellungssystem und -verfahren |
US8949395B2 (en) * | 2004-06-01 | 2015-02-03 | Inmage Systems, Inc. | Systems and methods of event driven recovery management |
US7606844B2 (en) * | 2005-12-19 | 2009-10-20 | Commvault Systems, Inc. | System and method for performing replication copy storage operations |
US7870172B1 (en) | 2005-12-22 | 2011-01-11 | Network Appliance, Inc. | File system having a hybrid file system format |
US20070174246A1 (en) | 2006-01-25 | 2007-07-26 | Sigurdsson Johann T | Multiple client search method and system |
US7827146B1 (en) | 2007-03-30 | 2010-11-02 | Symantec Operating Corporation | Storage system |
US8352431B1 (en) * | 2007-10-31 | 2013-01-08 | Emc Corporation | Fine-grain policy-based snapshots |
US9462056B1 (en) * | 2007-10-31 | 2016-10-04 | Emc Corporation | Policy-based meta-data driven co-location of computation and datasets in the cloud |
EP2235646A1 (en) * | 2007-12-18 | 2010-10-06 | BAE Systems PLC | Improvements relating to data curation |
CN100555289C (zh) | 2007-12-20 | 2009-10-28 | 中国科学院计算技术研究所 | 一种持续数据保护系统及其实现方法 |
CN101930431A (zh) | 2009-06-25 | 2010-12-29 | 升东网络科技发展(上海)有限公司 | 数据库备份信息清理系统及方法 |
US9135261B2 (en) | 2009-12-15 | 2015-09-15 | Emc Corporation | Systems and methods for facilitating data discovery |
US8224781B2 (en) * | 2010-05-14 | 2012-07-17 | Lsi Corporation | Data protection in a data storage system |
US8515910B1 (en) | 2010-08-26 | 2013-08-20 | Amazon Technologies, Inc. | Data set capture management with forecasting |
US8676763B2 (en) * | 2011-02-08 | 2014-03-18 | International Business Machines Corporation | Remote data protection in a networked storage computing environment |
WO2012116078A1 (en) * | 2011-02-23 | 2012-08-30 | Level 3 Communications, Llc | Analytics management |
US8949367B2 (en) | 2011-10-31 | 2015-02-03 | Oracle International Corporation | Cooperative storage management |
CN104040481B (zh) * | 2011-11-18 | 2017-10-10 | 戴尔软件股份有限公司 | 用于融合、存储和检索增量式备份数据的方法和系统 |
US9251086B2 (en) * | 2012-01-24 | 2016-02-02 | SanDisk Technologies, Inc. | Apparatus, system, and method for managing a cache |
US8452741B1 (en) | 2012-02-27 | 2013-05-28 | Sap Ag | Reconciling data retention requirements |
JP2015525419A (ja) | 2012-06-18 | 2015-09-03 | アクテフィオ,インク. | 高度データ管理仮想化システム |
US9002805B1 (en) | 2012-12-14 | 2015-04-07 | Amazon Technologies, Inc. | Conditional storage object deletion |
US20150227602A1 (en) * | 2014-02-13 | 2015-08-13 | Actifio, Inc. | Virtual data backup |
US9703787B2 (en) | 2014-03-25 | 2017-07-11 | Yokogawa Electric Corporation | Data storage management apparatus and data storage management method |
US10387449B2 (en) * | 2014-05-30 | 2019-08-20 | Hitachi Vantara Corporation | Metadata favored replication in active topologies |
US9760446B2 (en) | 2014-06-11 | 2017-09-12 | Micron Technology, Inc. | Conveying value of implementing an integrated data management and protection system |
US9251371B2 (en) * | 2014-07-07 | 2016-02-02 | Twilio, Inc. | Method and system for applying data retention policies in a computing platform |
US20160147830A1 (en) | 2014-07-09 | 2016-05-26 | Splunk Inc. | Managing datasets produced by alert-triggering search queries |
US10031917B2 (en) | 2014-07-29 | 2018-07-24 | Commvault Systems, Inc. | Efficient volume-level replication of data via snapshots in an information management system |
US10042908B2 (en) * | 2014-09-26 | 2018-08-07 | Oracle International Corporation | Method and system for implementing a unified DB clone system |
US9984139B1 (en) * | 2014-11-10 | 2018-05-29 | Amazon Technologies, Inc. | Publish session framework for datastore operation records |
US9648105B2 (en) | 2014-11-14 | 2017-05-09 | Commvault Systems, Inc. | Unified snapshot storage management, using an enhanced storage manager and enhanced media agents |
US10140188B2 (en) * | 2014-11-26 | 2018-11-27 | ArcServe (USA) LLC | Snapshot management |
US9600377B1 (en) * | 2014-12-03 | 2017-03-21 | EMC IP Holding Company LLC | Providing data protection using point-in-time images from multiple types of storage devices |
US9645891B2 (en) | 2014-12-04 | 2017-05-09 | Commvault Systems, Inc. | Opportunistic execution of secondary copy operations |
US9448894B1 (en) * | 2014-12-17 | 2016-09-20 | Vce Company, Llc | Data protection tiering |
US9922114B2 (en) | 2015-01-30 | 2018-03-20 | Splunk Inc. | Systems and methods for distributing indexer configurations |
US9912752B1 (en) * | 2015-06-29 | 2018-03-06 | Amazon Technologies, Inc. | Retention-based data management in a network-based data store |
US10033702B2 (en) | 2015-08-05 | 2018-07-24 | Intralinks, Inc. | Systems and methods of secure data exchange |
US9766927B1 (en) | 2015-10-06 | 2017-09-19 | Amazon Technologies, Inc. | Data flow management in processing workflows |
US10007577B2 (en) | 2015-12-21 | 2018-06-26 | Intel Corporation | Methods and apparatus to facilitate distributed data backup |
KR102615151B1 (ko) * | 2016-06-23 | 2023-12-18 | 삼성전자주식회사 | 불휘발성 메모리 장치를 포함하는 스토리지 시스템 |
-
2015
- 2015-12-30 US US14/984,334 patent/US10496672B2/en active Active
-
2016
- 2016-03-30 CN CN201610191131.1A patent/CN106933501B/zh active Active
- 2016-03-30 CN CN202010266766.XA patent/CN111475340B/zh active Active
-
2019
- 2019-09-19 US US16/576,063 patent/US10997209B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101650678A (zh) * | 2009-07-27 | 2010-02-17 | 浪潮电子信息产业股份有限公司 | 一种基于文件操作语义异步复制的方法 |
CN102483711A (zh) * | 2009-08-11 | 2012-05-30 | 国际商业机器公司 | 对复制顺序访问存储组件进行同步 |
US20120123999A1 (en) * | 2010-11-16 | 2012-05-17 | Actifio, Inc. | System and method for managing data with service level agreements that may specify non-uniform copying of data |
US20120254122A1 (en) * | 2011-03-30 | 2012-10-04 | International Business Machines Corporation | Near continuous space-efficient data protection |
US20140143207A1 (en) * | 2012-11-21 | 2014-05-22 | International Business Machines Corporation | Managing replicated data |
US20150088826A1 (en) * | 2013-09-25 | 2015-03-26 | Futurewei Technologies, Inc. | Enhanced Performance for Data Duplication |
Also Published As
Publication number | Publication date |
---|---|
CN106933501B (zh) | 2020-04-28 |
CN106933501A (zh) | 2017-07-07 |
US20200012660A1 (en) | 2020-01-09 |
CN111475340B (zh) | 2023-07-11 |
US20170192857A1 (en) | 2017-07-06 |
US10496672B2 (en) | 2019-12-03 |
US10997209B2 (en) | 2021-05-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106933501B (zh) | 用于创建复制品的方法、系统和计算机程序产品 | |
US10459883B1 (en) | Retention policies for unscheduled replicas in backup, snapshots, and remote replication | |
US10310951B1 (en) | Storage system asynchronous data replication cycle trigger with empty cycle detection | |
US7814057B2 (en) | Page recovery using volume snapshots and logs | |
US20070208918A1 (en) | Method and apparatus for providing virtual machine backup | |
US7509468B1 (en) | Policy-based data protection | |
US9251008B2 (en) | Client object replication between a first backup server and a second backup server | |
US9317374B2 (en) | Performing a background copy process during a backup operation | |
US7908515B1 (en) | Methods and apparatus for action regulation for continuous data replication systems | |
WO2016069029A1 (en) | Snapshot creation | |
TW201220050A (en) | Automated and self-adjusting data protection driven by business and data activity events | |
US20140358858A1 (en) | Determining A Schedule For A Job To Replicate An Object Stored On A Storage Appliance | |
WO2014060881A1 (en) | Consistency group management | |
WO2014060882A1 (en) | Consistency group management | |
US10409691B1 (en) | Linking backup files based on data partitions | |
US11604703B2 (en) | Systems and methods for performing backups of a server database | |
US9639701B1 (en) | Scheduling data protection operations based on data activity | |
US9734022B1 (en) | Identifying virtual machines and errors for snapshots | |
US11099946B1 (en) | Differential restore using block-based backups | |
US20160274793A1 (en) | Storage apparatus, storage control method, and computer-readable recording medium for recording storage control program | |
US10671488B2 (en) | Database in-memory protection system | |
US10387264B1 (en) | Initiating backups based on data changes | |
EP4291983A1 (en) | Reducing the impact of network latency during a restore operation | |
US11403192B1 (en) | Enabling point-in-time recovery for databases that change transaction log recovery models | |
US10853201B1 (en) | Backing up files storing virtual machines |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |