CN104461774B - 异步复制方法、装置与系统 - Google Patents
异步复制方法、装置与系统 Download PDFInfo
- Publication number
- CN104461774B CN104461774B CN201410682690.3A CN201410682690A CN104461774B CN 104461774 B CN104461774 B CN 104461774B CN 201410682690 A CN201410682690 A CN 201410682690A CN 104461774 B CN104461774 B CN 104461774B
- Authority
- CN
- China
- Prior art keywords
- data
- equipment
- additional information
- packet
- generation time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种异步复制方法、装置与系统,用于将写入第一设备的数据备份到第二设备,该方法包括:第一设备根据第一数据和附加信息构造待发送的数据包,其中,所述第一数据为已写入所述第一设备并且待发送到第二设备上进行备份的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的第一数据数据包之前最后写入所述第一设备的数据;所述第一设备向所述第二设备发送所构造的数据包。本发明,通过第一设备向第二设备发送包含有附加信息和第一数据的数据包,使得第二设备可以根据附加信息确定第一设备的最后写入数据的生成时间,进而可以快速准确地获得第一设备的RPO信息。
Description
技术领域
本发明涉及存储技术,尤其涉及一种异步复制方法、装置与系统。
背景技术
现有的容灾(Disaster Recovery,简称DR)系统,将主数据中心的数据传输到备数据中心进行备份,使得在主数据中心发生灾难时,启用备数据中心对主数据中心的业务进行接管,以保证业务的连续性。在备数据中心距离主数据中心较远或者网络带宽受限的情况下,通常采用基于存储的异步复制方式将主数据中心存储系统的数据传输到备数据中心的存储系统进行备份。复原点目标(Recovery Point Object,简称RPO)是衡量容灾系统的一个重要指标,指能把数据复原到过去的哪一个时间点。
异步复制的处理过程,通常为:在周期N将新写入主数据中心的数据写入缓存(cache)中,在周期(N+n),将周期N缓存的数据复制到备数据中心,同时将周期(N+n)新接收到的数据写入主数据中心本地缓存,其中N为大于等于0的整数,n为大于等于1的整数。理论上RPO取决于复制时间的周期间隔。由于距离和带宽的限制,在主数据中心采用异步复制使得备数据中心和主数据中心的数据存在一定的延迟,比如说,在周期(N+n)备数据中心已写入数据包1和数据包2,主数据中心正在向备数据中心发送数据3和数据包4,而当前主数据中心正在写入数据包6,使得实际上,RPO取决于待传输数据的排队时间。
在备数据中心接管业务时,迫切需要知道主数据中心的数据复制到了哪个时间点,也即主数据中心的RPO,以便根据RPO对丢失的数据进行数据补录。现有技术中,通常地根据累计的数据以及网络带宽对RPO进行估算,然后根据估算的RPO进行数据补录。然而,上述根据估算的RPO确定数据丢失量,对丢失数据进行补录,存在估算复杂、估算时间长,不利于准确补录数据和快速恢复业务的问题。
发明内容
本发明实施例提供一种异步复制方法、装置与系统,以克服现有技术中备数据中心根据估算的RPO对数据进行补录,存在估算复杂、估算时间长,不利于准确补录数据和快速复原业务的问题。
第一方面,本发明实施例提供一种异步复制方法,用于将写入第一设备的数据备份到第二设备,包括:
第一设备根据第一数据和附加信息构造待发送的数据包,其中,所述第一数据为已写入所述第一设备并且待发送到第二设备上进行备份的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的第一数据数据包之前最后写入所述第一设备的数据;
所述第一设备向所述第二设备发送所构造的数据包。
结合第一方面,在第一方面的第一种可能的实现方式中,包括:
所述第二设备接收所述第一设备发送的数据包;
所述第二设备从所述数据包中提取所述第一数据和所述附加信息;
所述第二设备存储所述第一数据和所述附加信息。
结合第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,所述第二设备存储所述第一数据和所述附加信息之后,还包括:
在所述第一设备发生灾难时,所述第二设备根据保存的所述附加信息确定所述第二数据的生成时间,以根据所述第二数据的生成时间接管业务,并对所述第二数据和所述第一数据之间的未备份数据进行补录。
结合第一方面和第一方面的第一到第二任一种可能的实现方式中的任一种,在第一方面的第三种可能的实现方式中,所述附加信息包括所述第一设备的复原点目标RPO信息,其中所述RPO信息是根据所述第二数据的生成时间与第一数据生成时间的差值获得的;或者所述RPO信息是根据所述第一设备的存储复制周期获得的。
结合第一方面和第一方面的第一到第二任一种可能的实现方式中的任一种,在第一方面的第四种可能的实现方式中,所述附加信息包括所述第二数据的数据类型,以及所述数据类型的更新时间。
结合第一方面的第四种可能的实现方式,在第一方面的第五种可能的实现方式中,所述第二数据的数据类型包括下述任一项:数据库系统变更号SCN、数据库服务器、以及文件系统。
结合第一方面的第三到第五种可能的实现方式中的任一种,在第一方面的第六种可能的实现方式中,所述附加信息还包括一致性组号,所述一致性组号用于确定所述第一数据和第二数据的业务类别。
第二方面,本发明实施例提供一种异步复制装置,包括存储模块,用于存储写入数据,所述异步复制装置还包括:
构造模块,用于根据第一数据和附加信息构造待发送的数据包,其中,所述第一数据为已写入所述存储模块并且待发送到第二设备上进行备份的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的第一数据数据包之前最后写入所述存储模块的数据;
发送模块,用于向所述第二设备发送所构造的数据包。
结合第二方面,在第二方面的第一种可能的实现方式中,所述附加信息包括所述异步复制装置的复原点目标RPO信息,其中所述RPO信息是根据所述第二数据的生成时间与第一数据生成时间的差值获得的;或者所述RPO信息是根据所述异步复制装置的存储复制周期获得的。
结合第二方面,在第二方面的第二种可能的实现方式中,所述附加信息包括所述第二数据的数据类型,以及所述数据类型的更新时间。
结合第二方面的第二种可能的实现方式,在第二方面的第三种可能的实现方式中,所述第二数据的数据类型包括下述任一项:数据库系统变更号SCN、数据库服务器、以及文件系统。
结合第二方面的第一到第三种可能的实现方式中的任一种,在第二方面的第四种可能的实现方式中,所述附加信息还包括一致性组号,所述一致性组号用于确定所述第一数据和第二数据的业务类别。
第三方面,本发明实施例提供一种异步复制装置,包括:
接收模块,用于接收第一设备发送的数据包,所述数据包是所述第一设备根据根据第一数据和附加信息构造的,其中所述第一数据为已写入第一设备且待发送到第二设备的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的数据包之前最后写入所述第一设备的数据;
提取模块,用于从所述接收模块接收到的数据包中提取所述第一数据和所述附加信息;
存储模块,用于存储所述第一数据和所述附加信息。
结合第三方面,在第三方面的第一种可能的实现方式中,还包括:确定模块,用于在所述第一设备发生灾难时,根据保存的所述附加信息确定所述第二数据的生成时间,以根据所述第二数据的生成时间接管业务,并对所述第二数据和所述第一数据之间的未备份数据进行补录。
第四方面,本发明实施例提供一种异步复制系统,包括:如第二方面以及第二方面的第一到第四种可能的方式中的任一项所述的第一异步复制装置,以及如第三方面或第三方面的第一种可能的实现方式所述的第二异步复制装置。
基于上述方案,本发明实施例,通过第一设备,在发送待备份的第一数据时,根据附加信息和第一数据构成待发送的数据包后,向第二设备发送,其中附加信息为第一设备在准备发送第一数据时最后写入第一设备的第二数据的生成时间,以使得在第一设备发生灾难时,第二设备能根据附加信息准确地获得第二数据的生成时间,通过第一设备,在发送待备份的第一数据时,根据附加信息和第一数据构成待发送的数据包后,向第二设备发送,其中附加信息为第一设备在准备发送第一数据时最后写入第一设备的第二数据的生成时间,以使得第二设备在第一设备发生灾难后,能根据附加信息快速准确地获得第二数据的生成时间,进而准确获得第一设备的RPO信息,并且根据该RPO信息接管业务以及对数据进行补录,克服了现有技术中根据估算的RPO进行业务接管和数据补录存在的估算复杂、估算时间长,不利于准确补录数据和快速恢复业务的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明一个实施例提供的异步复制方法实施例的流程图;
图2为本发明另一实施例提供的异步复制方法实施例的流程图;
图3为本发明一个实施例提供的构造的数据包结构示意图;
图4为本发明另一个实施例提供的构造的数据结构示意图;
图5为本发明再一个实施例提供的异步复制方法实施例的流程图;
图6为本发明还一个实施例提供的异步复制方法实施例的流程图;
图7为本发明一个实施例提供的异步复制装置实施例的结构示意图;
图8为本发明另一个实施例提供的异步复制装置实施例的结构示意图;
图9为本发明一个实施例提供的异步复制系统实施例的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明一个实施例提供的异步复制方法实施例的流程图,用于将写入第一设备的数据备份到第二设备,如图1所示,该方法包括:
步骤11、第一设备根据第一数据和附加信息构造待发送的数据包。
其中,所述第一数据为已写入所述第一设备并且待发送到第二设备上进行备份的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的第一数据数据包之前最后写入所述第一设备的数据。
上述第二数据的生成时间,为第二数据在第一设备的创建时间。
步骤12、第一设备向第二设备发送所构造的数据包。
上述第一设备和第二设备在容灾系统中,可以分别为以生产数据为主的主数据中心和以备份数据为主的备数据中心。
实际应用时,在主数据中心发生灾难时,备数据中心可以根据最后接收到的附加信息来获得主数据中心最后写入数据的生成时间,进而获得主数据中心的RPO信息,以根据获得的RPO信息进行数据补录,提高获取RPO信息的效率和准确率,保证数据补录的准确性和恢复业务的快速性。
进一步地,如图2所示,在步骤11之前,还可以包括:
步骤10a、第一设备在创建第二数据时获取附加信息;
步骤10b、第一设备保存获取的附加信息。
其中,上述步骤10b中,第一设备可以将获取的附加信息保存在存储缓存中。
相应地,步骤11之前,还可以包括:第一设备从存储缓存中获取附加信息。
具体的,步骤10b可以采取对先前保存的用于确定其他数据的生成时间的附加信息进行覆盖的方式,或者在准备发送第一数据,第二数据正在写入时,可以采取实时获取用于确定第二数据的生成时间的附加信息,以保证附加信息的实时性,通过附加信息确定的始终是在发送数据包前最后写入数据的生成时间,使得第二设备在接收到构造的数据包后,根据该数据包中的附加信息可以比较快速、准确地确定第二数据的生成时间,进而获得准确的第一设备的RPO信息,从而在第一设备发生灾难时,第二设备可以快速地根据该RPO信息对丢失的数据量进行补录和接管业务。
进一步地,上述附加信息可以包括第二数据的数据类型,以及数据类型的更新时间,以使第二设备在接收到附加信息后,根据附加信息里对应的数据类型,以及数据类型的更新时间来确定第二数据在第一设备的生成时间。
其中,所述第二数据的数据类型包括但不限于下述任一项:数据库系统变更号(System Change Number,以下简称SCN)、数据库服务器、以及文件系统;相应地,所述数据类型的更新时间包括但不限于下述任一项:所述数据库SCN的更新时间,所述数据库服务器的更新时间、以及所述文件系统的更新时间。对于其他可用于确定RPO信息的第二数据的数据类型和数据类型的更新时间,在此不再一一列举。本发明中的数据库包括但不限于现行的Oracle数据库,DB数据库,以及SQL数据库。
或者,上述附加信息包括RPO信息,其中该第一设备的RPO信息根据第二数据的生成时间与第一数据生成时间的差值获得的;或者所述RPO信息是根据所述第一设备的存储复制周期获得的。
进一步地,在数据有多个业务类别的时候,上述附加信息还包括一致性组号,该一致性组号用于确定第一数据和第二数据的业务类别,以使第第二设备在接收到附加信息后,还可以根据一致性组号确定第一数据和第二数据的业务类别,并确定该业务类别的第二数据的生成时间。
具体来说,第一设备在写入数据时,实时获取并保存附加信息,该附加信息用于确定该写入数据的生成时间,并可以采用覆盖的方式或者在第一数据即将发送之前实时获取的方式确保根据获取的附加信息可以确定的是最后写入数据的生成时间。通常地,由于待备份的数据通常保存在存储缓存中,或者在存储缓存空间不够的时候,待备份的数据保存在磁盘中,然后在发送的时候,将磁盘中保存的待备份数据读取到存储缓存中再发送,第一设备可以将附加信息发送到存储缓存进行保存,在第一设备准备向第二设备发送待备份的第一数据时,从存储缓存中获取第一数据以及附加信息,并根据第一数据和附加信息构造待发送的数据包,然后将构造的数据包发送给第二设备,以使第二设备从该数据包中提取附加信息和第一数据,对提取的第一数据和附加信息进行保存,此时第二设备也可以采用覆盖的方式,使得保存的附加信息始终为最后接收到的数据包中包括的附加信息,从而在第一设备发生灾难时,第二设备可以根据最后接收到的附加信息准备地确定第一设备最后写入的第二数据的生成时间,根据该第二数据的生成时间确定第一设备对应业务的RPO信息,根据确定的RPO信息接管业务,并对第二数据和第一数据之间的未备份数据进行补录。
具体实现时,第一设备根据附加信息和第一数据可以采用图3或图4所示的结构构造待发送的数据包。
其中,在附加信息包括第二数据的数据类型,数据类型的更新时间时,可采用如图3所示的数据包结构,该数据结构包括数据类型部分,时间信息部分,原始数据包部分,以及循环冗余校验(Cyclic Redundancy Check,简称:CRC)部分,可选的,在数据业务类别不止一种时,该数据结构还可以包括一致性组号部分,其中,数据类型部分用于填充第二数据的数据类型,时间信息部分用于填充数据类型的更新时间,一致性组号部分用于填充一致性组号,原始数据包部分用于填充第一数据,其中该原始数据包可以为现有技术中异步传输时所采用的数据包结构,具体不再赘述,CRC部分用于填充前述已填充信息的校验和,该校验和的计算与现有技术中相似,具体不再赘述。
在附加信息包括RPO信息时,可采用如图4所示的数据包结构,该数据结构包括RPO信息部分,原始数据包部分,以及CRC部分,可选的,在数据业务类别不止一种时,该数据结构还可以包括一致性组号部分,其中,RPO信息部分用于填充根据第一设备的复制周期获得的或者根据第二数据的生成时间与第一数据生成时间的差值获得的RPO信息,一致性组号部分用于填充一致性组号,原始数据包部分用于填充第一数据,其中该原始数据包可以为现有技术中异步传输时所采用的数据包结构,具体不再赘述,CRC部分用于填充前述已填充信息的校验和,该校验和的计算与现有技术中相似,具体不再赘述。上述第一设备根据复制周期或者第二数据的生成时间与第一数据生成时间的差值来获得RPO信息也可以采用现有技术实现,具体不再赘述。
值得注意的是,上述图3或图4所示的结构仅为一种优选的实施方式,本发明不对数据结构中各部分的顺序作限定。
本实施例,通过第一设备,在发送待备份的第一数据时,根据附加信息和第一数据构成待发送的数据包后,向第二设备发送,其中附加信息为第一设备在准备发送第一数据时最后写入第一设备的第二数据的生成时间,以使得在第一设备发生灾难时,第二设备能根据附加信息准确地获得第二数据的生成时间,通过第一设备,在发送待备份的第一数据时,根据附加信息和第一数据构成待发送的数据包后,向第二设备发送,其中附加信息为第一设备在准备发送第一数据时最后写入第一设备的第二数据的生成时间,以使得第二设备在第一设备发生灾难后,能根据附加信息准确地获得第二数据的生成时间,进而快速准确获得第一设备的RPO信息,并且根据该RPO信息接管业务以及对数据进行补录,克服了现有技术中根据估算的RPO进行业务接管和数据补录存在的估算复杂、估算时间长,不利于准确补录数据和快速恢复业务的问题。
图5为本发明再一个实施例提供的异步复制方法实施例的流程图,该实施例为图1所示方法实施例对应,如图5所示,该方法,包括:
步骤21、第二设备接收第一设备发送的数据包。其中该数据包是第一设备根据第一数据和附加信息构造的,第一数据为已写入第一设备且待发送到第二设备的数据,附加信息用于确定第二数据的生成时间,第二数据为发送所构造的数据包之前最后写入第一设备的数据。
其中,第一设备和第二设备在容灾系统中,可以分别位于以生产数据为主的主数据中心和以备份数据为主的备数据中心。具体的,附加信息的获取可参照图1或图2对应的方法实施例中相关的部分,具体不再赘述;根据附加信息和第一数据构造数据包的实现方式,可参见图3或图4,具体不再赘述。
步骤22、第二设备从数据包中提取第一数据和附加信息;
步骤23、第二设备存储第一数据和附加信息。
其中,步骤23中,第二设备在存储附加信息时,可以采用覆盖的方式,以保证第二设备中存储的附加信息为第一设备发生灾难后,第二设备最后接收到的数据包中包括的附加信息,从而根据该附加信息确定的第二数据为第一设备在发生灾难时最后写入第一设备中的。
进一步地,上述步骤23之后,如图6所示,还可以包括:
步骤24、在第一设备发生灾难时,第二设备根据保存的附加信息确定第二数据的生成时间,以根据第二数据的生成时间接管业务,并对第二数据和第一数据之间的未备份数据进行补录。
其中,附加信息可以包括第二数据的数据类型,以及数据类型的更新时间;
相应地,步骤24中,第二设备根据附加信息确定第二数据的生成时间,可以包括:
第二设备根据第二数据的数据类型,以及数据类型的更新时间确定第二数据的生成时间。
其中,第二数据的数据类型包括下述任一项:数据库SCN、数据库服务器、以及文件系统。
上述数据库包括但不限于现行的Oracle数据库,DB数据库,以及SQL数据库。
此时,第二设备接收到如图3所示的数据包,则第二设备从原始数据包部分提取第一数据,并从数据类型部分和时间部分提取附加信息中包括的第二数据的数据类型和该数据类型的更新时间。
或者,附加信息可以包括第一设备的RPO信息;其中RPO信息是根据所述第二数据的生成时间与第一数据生成时间的差值获得的,或者该RPO信息是根据所述第一设备的存储复制周期获得的。
相应地,步骤24中,第二设备根据附加信息确定第二数据的生成时间,可以包括:第二设备根据RPO信息确定第二数据的生成时间。
此时,第二设备接收到如图4所示的数据包,则第二设备从原始数据包部分提取第一数据,并从RPO信息部分提取附加信息中包括的RPO信息。
进一步地,在数据业务类别不止一种,上述附加信息还可以包括一致性组号,该一致性组号用于确定第一数据和第二数据的业务类别;
相应地,步骤24中,第二设备根据附加信息确定第二数据的生成时间之前,还可以包括:
第二设备根据一致性组号确定第一数据和第二数据的业务类别。
具体的,在第二设备接收到图3或图4所示的数据包时,可以从其中一致性组号部分提取第二数据对应的一致性组号,根据该一致性组号确定第一数据和第二数据的业务类别,进而根据数据包中的RPO信息或者数据类型信息和时间信息确定该业务类别的第二数据的生成时间。
本实施例中,通过第二设备接收由附加信息和待备份的第一数据构成的数据包,可以根据附加信息准确地获取到第一设备在发送第一数据时最后写入的第二数据的生成时间,使得第二设备可以根据第二数据的生成时间准确快速地获得第一设备的RPO信息;在第一设备发生灾难时,第二设备可以根据确定的RPO信息对第二数据与第一数据之间的待备份数据进行准确的补录并快速地恢复业务。
图7为本发明一个实施例提供的异步复制装置实施例的结构示意图,如图7所示,该异步复制装置700,包括存储模块701,构造模块702以及发送模块703,其中,
存储模块701,用于存储写入数据;
构造模块702,用于根据第一数据和附加信息构造待发送的数据包,其中,所述第一数据为已写入所述存储模块701并且待发送到第二设备上进行备份的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的第一数据数据包之前最后写入所述存储模块701的数据;
发送模块703,用于向所述第二设备发送所构造的数据包。
进一步地,上述附加信息包括所述异步复制装置的RPO信息,其中所述RPO信息是根据所述第二数据的生成时间与第一数据生成时间的差值获得的;或者所述RPO信息是根据所述异步复制装置的存储复制周期获得的。
或者,所述附加信息包括所述第二数据的数据类型,以及所述数据类型的更新时间。其中所述第二数据的数据类型包括下述任一项:数据库系统变更号SCN、数据库服务器、以及文件系统。
优选地,在业务类别不止一种时,所述附加信息还包括一致性组号,所述一致性组号用于确定所述第一数据和第二数据的业务类别。
本实施例提供的异步复制装置可用于执行图1或图2所示方法实施例中的技术方案,其实现原理和技术效果是类似的,具体不再赘述。
图8为本发明另一个实施例提供的异步复制装置实施例的结构示意图,如图8所示,该异步复制装置800,包括接收模块801,提取模块802,以及存储模块803,其中,
接收模块801,用于接收第一设备发送的数据包,所述数据包是所述第一设备根据第一数据和附加信息构造的,其中所述第一数据为已写入第一设备且待发送到第二设备的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的数据包之前最后写入所述第一设备的数据;
提取模块802,用于从所述接收模块801接收到的数据包中提取所述第一数据和所述附加信息;
存储模块803,用于存储所述第一数据和所述附加信息。
进一步地,该异步复制装置800,还可以包括确定模块804,用于在所述第一设备发生灾难时,根据保存的所述附加信息确定所述第二数据的生成时间,以根据所述第二数据的生成时间接管业务,并对所述第二数据和所述第一数据之间的未备份数据进行补录。
本实施例提供的异步复制装置可用于执行图5或图6所示方法实施例中的技术方案,其实现原理和技术效果是类似的,具体不再赘述。
图9为本发明一个实施例提供的异步复制系统实施例的结构示意图,如图9所示,该异步复制系统900,包括第一异步复制装置901和第二异步复制装置902,其中第一异步复制装置901可以为图7所示的异步复制装置,可用于执行图1或图2所示方法实施例中的技术方案,第二异步复制装置902可以为图8所示的异步复制装置,可用于执行图5或图6所示方法实施例中的技术方案,其实现原理和技术效果是类似的,具体不再赘述。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。
Claims (11)
1.一种异步复制方法,用于将写入第一设备的数据备份到第二设备,其特征在于,包括:
第一设备根据第一数据和附加信息构造待发送的数据包,所述数据包包括所述第一数据和所述附加信息;其中,所述第一数据为已写入所述第一设备并且待发送到第二设备上进行备份的数据;
所述附加信息用于确定第二数据的生成时间,所述第二数据为所述第一设备发送所述第一数据之前最后写入所述第一设备的数据;所述附加信息包括所述第一设备的复原点目标RPO信息,或者,所述第二数据的数据类型以及所述数据类型的更新时间;
其中,所述RPO信息是根据所述第二数据的生成时间与所述第一数据的生成时间的差值获得的;或者所述RPO信息是根据所述第一设备的存储复制周期获得的;
所述第一设备向所述第二设备发送所述数据包。
2.根据权利要求1所述的方法,其特征在于,包括:
所述第二设备接收所述第一设备发送的数据包;
所述第二设备从所述数据包中提取所述第一数据和所述附加信息;
所述第二设备存储所述第一数据和所述附加信息。
3.根据权利要求2所述的方法,其特征在于,所述第二设备存储所述第一数据和所述附加信息之后,还包括:
在所述第一设备发生灾难时,所述第二设备根据保存的所述附加信息确定所述第二数据的生成时间,以根据所述第二数据的生成时间接管业务,并对所述第二数据和所述第一数据之间的未备份数据进行补录。
4.根据权利要求1所述的方法,其特征在于,所述第二数据的数据类型包括下述任一项:数据库系统变更号SCN、数据库服务器、以及文件系统。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述附加信息还包括一致性组号,所述一致性组号用于确定所述第一数据和第二数据的业务类别。
6.一种异步复制装置,包括存储模块,用于存储写入数据,其特征在于,所述异步复制装置还包括:
构造模块,用于根据第一数据和附加信息构造待发送的数据包,所述数据包包括所述第一数据和所述附加信息;其中,所述第一数据为已写入所述存储模块并且待发送到第二设备上进行备份的数据;
所述附加信息用于确定第二数据的生成时间,所述第二数据为第一设备发送所述第一数据之前最后写入所述存储模块的数据;所述附加信息包括所述异步复制装置的复原点目标RPO信息,或者,所述第二数据的数据类型以及所述数据类型的更新时间;
其中,所述RPO信息是根据所述第二数据的生成时间与所述第一数据的生成时间的差值获得的;或者所述RPO信息是根据所述异步复制装置的存储复制周期获得的;
发送模块,用于向所述第二设备发送所述数据包。
7.根据权利要求6所述的异步复制装置,其特征在于,所述第二数据的数据类型包括下述任一项:数据库系统变更号SCN、数据库服务器、以及文件系统。
8.根据权利要求6或7所述的异步复制装置,其特征在于,所述附加信息还包括一致性组号,所述一致性组号用于确定所述第一数据和第二数据的业务类别。
9.一种异步复制装置,其特征在于,包括:
接收模块,用于接收第一设备发送的数据包,所述数据包是所述第一设备根据第一数据和附加信息构造的,其中所述第一数据为已写入第一设备且待发送到第二设备的数据,所述附加信息用于确定第二数据的生成时间,所述第二数据为发送所构造的数据包之前最后写入所述第一设备的数据;
提取模块,用于从所述接收模块接收到的数据包中提取所述第一数据和所述附加信息;
存储模块,用于存储所述第一数据和所述附加信息。
10.根据权利要求9所述的异步复制装置,其特征在于,还包括:确定模块,用于在所述第一设备发生灾难时,根据保存的所述附加信息确定所述第二数据的生成时间,以根据所述第二数据的生成时间接管业务,并对所述第二数据和所述第一数据之间的未备份数据进行补录。
11.一种异步复制系统,其特征在于,包括:如权利要求6至8任一项所述的异步复制装置,以及如权利要求9或10所述的异步复制装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410682690.3A CN104461774B (zh) | 2014-11-24 | 2014-11-24 | 异步复制方法、装置与系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410682690.3A CN104461774B (zh) | 2014-11-24 | 2014-11-24 | 异步复制方法、装置与系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104461774A CN104461774A (zh) | 2015-03-25 |
CN104461774B true CN104461774B (zh) | 2018-01-16 |
Family
ID=52907870
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410682690.3A Active CN104461774B (zh) | 2014-11-24 | 2014-11-24 | 异步复制方法、装置与系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104461774B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104881336A (zh) * | 2015-05-22 | 2015-09-02 | 北京奇虎科技有限公司 | 数据备份方法及装置 |
CN106357703B (zh) | 2015-07-13 | 2020-03-10 | 阿里巴巴集团控股有限公司 | 集群切换方法与设备 |
CN106383709B (zh) * | 2016-09-14 | 2020-02-14 | Oppo广东移动通信有限公司 | 一种数据迁移中进度显示的方法及装置 |
CN107566481B (zh) * | 2017-08-30 | 2020-11-24 | 北京珞安科技有限责任公司 | 一种远程数据复制控制信息传输实现方法 |
CN109164985B (zh) * | 2018-08-27 | 2020-07-07 | 华为技术有限公司 | 用于复制数据的方法、主设备以及从设备 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1581091A (zh) * | 2003-08-11 | 2005-02-16 | 株式会社日立制作所 | 多点远程拷贝系统 |
WO2006111958A2 (en) * | 2005-04-20 | 2006-10-26 | Axxana (Israel) Ltd. | Remote data mirroring system |
CN101808137A (zh) * | 2010-03-29 | 2010-08-18 | 成都市华为赛门铁克科技有限公司 | 数据传输方法、装置和系统 |
CN102752404A (zh) * | 2012-07-25 | 2012-10-24 | 高旭磊 | 一种新型的灾难备份恢复方法与系统 |
-
2014
- 2014-11-24 CN CN201410682690.3A patent/CN104461774B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1581091A (zh) * | 2003-08-11 | 2005-02-16 | 株式会社日立制作所 | 多点远程拷贝系统 |
WO2006111958A2 (en) * | 2005-04-20 | 2006-10-26 | Axxana (Israel) Ltd. | Remote data mirroring system |
CN101808137A (zh) * | 2010-03-29 | 2010-08-18 | 成都市华为赛门铁克科技有限公司 | 数据传输方法、装置和系统 |
CN102752404A (zh) * | 2012-07-25 | 2012-10-24 | 高旭磊 | 一种新型的灾难备份恢复方法与系统 |
Also Published As
Publication number | Publication date |
---|---|
CN104461774A (zh) | 2015-03-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104461774B (zh) | 异步复制方法、装置与系统 | |
CN106709069B (zh) | 高可靠性的大数据日志采集与传输方法 | |
CN103885895B (zh) | 容错集群存储系统中的写入性能 | |
CN106815254B (zh) | 一种数据处理方法和装置 | |
CN106802892B (zh) | 用于主备数据一致性校验的方法和设备 | |
CN106815530A (zh) | 数据存证方法、数据校验方法及装置 | |
CN106610854A (zh) | 一种模型更新方法及装置 | |
CN103778030B (zh) | 日志子系统写入方法、错误追踪方法及处理器 | |
CN106202028B (zh) | 一种地址信息识别方法及装置 | |
CN106709043A (zh) | 一种基于数据库日志的数据同步加载方法 | |
CN105824846B (zh) | 数据迁移方法及装置 | |
CN108875061A (zh) | 一种分布式文件系统的一致性测试方法及相关装置 | |
CN107340971B (zh) | 一种数据存储与恢复架构与方法 | |
CN104092717A (zh) | 消息处理方法及系统、消息目的端设备与分布式消息系统 | |
CN109710185A (zh) | 数据处理方法及装置 | |
CN103106124B (zh) | 一种基于纠删码集群存储系统的交叉重构方法 | |
CN104809250B (zh) | 一种松散式数据一致性校验方法 | |
CN106897338A (zh) | 一种针对数据库的数据修改请求处理方法及装置 | |
CN104536852B (zh) | 数据恢复方法及装置 | |
CN107341070A (zh) | 一种基于纠删码的随机写方法及系统 | |
CN109936474A (zh) | 一种生成网络拓扑图的方法及设备 | |
CN112558875A (zh) | 数据校验方法、装置、电子设备及存储介质 | |
CN109120067A (zh) | 一种事件顺序记录上报方法、装置、设备及可读存储介质 | |
CN114205274A (zh) | 网络设备的测试方法及其装置 | |
CN105808627A (zh) | Poi信息更新、检索、poi数据包生成方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |