CN105550062B - 基于持续数据保护与时间点浏览恢复的数据回流方法 - Google Patents

基于持续数据保护与时间点浏览恢复的数据回流方法 Download PDF

Info

Publication number
CN105550062B
CN105550062B CN201510884259.1A CN201510884259A CN105550062B CN 105550062 B CN105550062 B CN 105550062B CN 201510884259 A CN201510884259 A CN 201510884259A CN 105550062 B CN105550062 B CN 105550062B
Authority
CN
China
Prior art keywords
disaster tolerance
task
data
time point
volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201510884259.1A
Other languages
English (en)
Other versions
CN105550062A (zh
Inventor
陈其然
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Eisoo Information Technology Co Ltd
Original Assignee
Shanghai Eisoo Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Eisoo Information Technology Co Ltd filed Critical Shanghai Eisoo Information Technology Co Ltd
Priority to CN201510884259.1A priority Critical patent/CN105550062B/zh
Publication of CN105550062A publication Critical patent/CN105550062A/zh
Application granted granted Critical
Publication of CN105550062B publication Critical patent/CN105550062B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种基于持续数据保护与时间点浏览恢复的数据回流方法,包括以下步骤:A、启动容灾任务,任务涉及备份端与容灾端,所述的备份端提供持续数据保护cdp,所述的容灾端提供持续数据恢复cdr;B、容灾任务完成后,容灾机启动并接管原物理生产机;C、在容灾机中启动容灾任务的反向cdp,将监控卷中的哈希文件拷贝至日志卷中,并进行哈希增量初始化复制;D、反向cdp任务完成后,原物理生产机挂载WindowsPE,对容灾任务产生的所有时间点依次进行浏览恢复。与现有技术相比,本发明具有方便快捷且节省空间和时间等优点。

Description

基于持续数据保护与时间点浏览恢复的数据回流方法
技术领域
本发明涉及计算机信息存储技术领域,尤其是涉及一种基于持续数据保护与时间点浏览恢复的数据回流方法。
背景技术
随着信息时代的到来,在计算机领域中数据作为信息的载体,其容量已成指数式的增长,数据的价值凸显而出,但是日常生活中由于各种主观或客观的原因导致数据损坏或者丢失的情况时有发生,这给企业和用户造成了极大的损失和不便,所以如何对数据进行有效的保护变得尤为重要和紧迫。持续数据保护,即是当前比较流行,且恢复点目标(RPO)和恢复时间目标(RTO)都较高的一种实时数据保护的方案。而持续数据保护又是基于块级备份来实现的。
块级备份,是指为防止系统出现操作失误或系统故障导致数据丢失,而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。如中国专利CN103365745A公开一种基于内容地址存储的块级备份方法,该方法包括两个阶段:第一阶段,采用全量状态位图技术对磁盘数据进行分块和初始化备份。第二阶段,采用增量状态位图技术对磁盘数据进行分块和增量备份。其中,全量状态位图是特指从数据卷获取的第一个份位图,反映的是数据卷中数据块的被使用情况,具体记录的是源卷数据块使用状态的0和1序列,一个数据块对应位图的一位,0表示该数据块尚未被使用,1表示相反的情形。增量状态位图反映的是自上次位图以来数据卷中数据块的更新状态,根据数据的时空分布特性,增量状态位图中的1序列通常比全量状态位图中的1序列少得多,而且也更集中。该方法具体的步骤为:
1、源卷分段:根据预定义的数据段大小阀值和源卷全量状态位图,以数据块为单位,源卷全量状态位图中的连续1序列为依据,对源卷数据区进行分段,每个单一段称为一个数据段;
2、初始化传输(备份):将源卷的所有数据段通过网络传输到存储介质;
3、获取增量状态位图:实时获取源卷数据更新状态,计算数据块更新区间,然后生成源卷增量状态位图,最后进行增量数据块备份;
4、增量传输(备份):将源卷的增量数据段通过网络传输到存储介质。
持续数据保护CDP,是指通过在操作系统核心层中植入文件过滤驱动程序,来实时捕获所有文件访问操作。对于需要CDP持续备份保护的文件,当CDP管理模块经由文件过滤驱动拦截到其改写操作时,则预先将文件数据变化部分连同当前的系统时间戳(SystemTime Stamp)一起通过块级拷贝技术自动备份到存储介质中。从理论上说,任何一次的文件数据变化都会被自动记录,所以称其为持续数据保护。
在上述基于块级拷贝技术的持续数据保护方法的基础上,可以使用持续数据复制(CDR)和VMware公司提供的VDDK(Virtual Disk Development Kit)套件来建立一台容灾虚拟机,用于临时顶替原生产机开展业务。
但是考虑到性能问题,虚拟机并不能够长时间代替物理机生产业务,所以如何快速、便捷、有效地将原物理生产机上的数据和容灾虚拟机顶替原生产机开展业务时所产生的数据回流到原生产机上,是本发明要解决的问题。
发明内容
本发明的目的就是为了克服上述现有技术存在的缺陷而提供一种方便快捷且节省空间和时间的基于持续数据保护与时间点浏览恢复的数据回流方法。
本发明的目的可以通过以下技术方案来实现:
一种基于持续数据保护与时间点浏览恢复的数据回流方法,其特征在于,包括以下步骤:
A、启动容灾任务,任务涉及备份端与容灾端,所述的备份端提供持续数据保护cdp,所述的容灾端提供持续数据恢复cdr,所述的备份端将监控卷的数据保护情况持续记录于哈希文件内,该哈希文件保存在日志卷上,当待备份端cdp产生完全初始化时间点后将用于哈希增量初始化复制的哈希文件从日志卷拷贝到监控卷中;
B、容灾任务完成后,容灾机启动并接管原物理生产机;
C、在容灾机中启动容灾任务的反向cdp,将监控卷中的哈希文件拷贝至日志卷中,并进行哈希增量初始化复制;
D、反向cdp任务完成后,原物理生产机挂载WindowsPE,对容灾任务产生的所有时间点依次进行浏览恢复。
所述的步骤A具体为:
A1)启动容灾任务,所述的备份端在日志卷中对每一个监控卷以卷驱动器号为名分别创建哈希文件;
A2)所述的备份端开始复制数据块至介质服务器,并持续地根据对监控卷的数据保护情况动态更新哈希文件;
A3)所述的备份端产生完全初始化时间点后将哈希文件从日志卷拷贝到监控卷中;
A4)所述的备份端持续产生增量时间点,同时步骤A3)中拷贝的哈希文件也会被监控,其所在的数据块也会被复制至介质服务器,并存于增量时间点中;
A5)所述的容灾端则异步地向介质服务器发送恢复请求,介质服务器将备份端已产生的所有时间点依次推送给容灾端,容灾端持续恢复每一个时间点中的数据。
所述的步骤A中的哈希文件通过所述的备份端中的客户端代理进行记录生成。
所述的步骤C具体为:
C1)在容灾机启动后,发起原容灾任务;
C2)检测到当前容灾机作为原容灾任务的备份端,故此次的容灾任务只有备份端且没有容灾端,并在备份端进行反向cdp;
C3)根据监控卷的驱动器号,依次将每个监控卷对应的哈希文件拷贝至新的日志卷中;
C4)容灾任务在当前备份端的日志卷中检测到哈希文件,直接对监控卷进行哈希增量初始化复制,哈希增量初始化复制完成后,持续进行增量复制直至容灾任务被停止。
所述的步骤D具体为:
D1)原物理生产机挂载内置代理程序的WindowsPE,并向介质服务器发送浏览恢复请求;
D2)介质服务器遍历容灾任务产生的所有时间点,并逐一推送给原物理生产机;
D3)WindowsPE中的代理程序依次将每个时间点内的数据写入原物理生产机中。
与现有技术相比,本发明具有以下优点:
1)反向持续数据保护时,无需对监控卷重新进行完全初始化复制,节省了用户的介质存储空间,且加快了反向持续数据复制的速度,节约了时间。
2)本发明采用WindowsPE作为中间介质,解决了无法将数据写入物理裸设备的问题。
3)反向持续数据保护时,原物理生产机无需处于启动状态,仅需在时间点浏览恢复时启动,降低了资源的消耗。
附图说明
图1为本发明正向容灾结构示意图;
图2为本发明反向复制结构示意图;
图3为本发明浏览恢复结构示意图;
图4为本发明正向容灾流程示意图;
图5为本发明反向复制流程示意图;
图6为本发明浏览恢复流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都应属于本发明保护的范围。
数据回流系统由生产服务器(内置备份客户端代理)、虚拟化容灾平台(内置恢复客户端代理)、控制台(内置介质服务器)和WindowsPE(内置恢复客户端代理)组成,所有连接均通过以太网建立,采用的传输协议是TCP/IP。整个数据回流系统分成正向容灾、反向复制和浏览恢复三个过程,其结构图分别如图1、图2、图3所示。
正向容灾工作流程如图4所示,具体为:
步骤s101,任务发起后,根据每一个监控卷的驱动器名称,分别在日志卷中创建相对应的哈希文件,该哈希文件用于记录备份代理对监控卷的数据保护情况;
步骤s102,备份代理对监控卷进行完全初始化复制,并根据初始化的情况持续地更新日志卷中的哈希文件;
步骤s103,判断完全初始化复制是否完成,若是,则进入步骤s104,若否,则返回s102;
步骤s104,将日志卷中的每个哈希文件拷贝至相应的监控卷中;
步骤s105,对监控卷进行增量复制,并持续地产生增量时间点,步骤s104中拷贝的哈希文件也会在增量时间点中被保护起来;
步骤s106,cdp具体实现过程,非本专利重点,在此不作具体描述;
步骤s107,在cdp端产生完全初始化时间点后,cdr端从等待状态中被唤醒,cdr具体实现过程,非本专利重点,在此不作具体描述;
步骤s108,判断是否发起了接管操作,若是,则结束容灾任务,若否,则返回步骤s107。
反向复制工作流程如图5所示,具体为:
步骤s201,由于原生产机日志卷中的数据没有被容灾到虚拟容灾机中,导致原日志卷在当前容灾机中是raw格式,故先对日志卷进行格式化操作;
步骤s202,将步骤s105中容灾过来的哈希文件从容灾机的监控卷拷贝至步骤s201中格式化的日志卷(以下称作新日志卷)中;
步骤s203,判断新日志卷中是否存在哈希文件,若是,则进入步骤s204,若否,则进入步骤s205;
步骤s204,备份代理对监控卷进行哈希增量初始化复制,并产生哈希增量初始化时间点;
步骤s205,备份代理对监控卷进行完全初始化复制,并产生完全初始化时间点;
步骤s206,判断是否发起了停止操作,若是,则结束反向复制任务,若否,则进入步骤s207;
步骤s207,对监控卷进行增量复制,并持续地产生增量时间点。
浏览恢复工作流程如图6所示,具体为:
步骤s301,介质服务器推送时间点到挂载了Windows PE(WindowsPE作为浏览恢复的中间介质,且内置了恢复客户端代理)的原物理服务器,由恢复客户端代理将时间点中的数据写入物理磁盘中;
步骤s302,判断是否还有时间点没有被恢复,若是,则返回步骤s301,若否,则结束浏览恢复任务。
完成正向容灾、反向复制和浏览恢复过程后,即可实现对数据的回流。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到各种等效的修改或替换,这些修改或替换都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (4)

1.一种基于持续数据保护与时间点浏览恢复的数据回流方法,其特征在于,包括以下步骤:
A、启动容灾任务,任务涉及备份端与容灾端,所述的备份端提供持续数据保护cdp,所述的容灾端提供持续数据恢复cdr,所述的备份端将监控卷的数据保护情况持续记录于哈希文件内,该哈希文件保存在日志卷上,当待备份端cdp产生完全初始化时间点后将用于哈希增量初始化复制的哈希文件从日志卷拷贝到监控卷中;
B、容灾任务完成后,容灾机启动并接管原物理生产机;
C、在容灾机中启动容灾任务的反向cdp,将监控卷中的哈希文件拷贝至日志卷中,并进行哈希增量初始化复制;
D、反向cdp任务完成后,原物理生产机挂载WindowsPE,对容灾任务产生的所有时间点依次进行浏览恢复;
所述的步骤A具体为:
A1)启动容灾任务,所述的备份端在日志卷中对每一个监控卷以卷驱动器号为名分别创建哈希文件;
A2)所述的备份端开始复制数据块至介质服务器,并持续地根据对监控卷的数据保护情况动态更新哈希文件;
A3)所述的备份端产生完全初始化时间点后将哈希文件从日志卷拷贝到监控卷中;
A4)所述的备份端持续产生增量时间点,同时步骤A3)中拷贝的哈希文件也会被监控,其所在的数据块也会被复制至介质服务器,并存于增量时间点中;
A5)所述的容灾端则异步地向介质服务器发送恢复请求,介质服务器将备份端已产生的所有时间点依次推送给容灾端,容灾端持续恢复每一个时间点中的数据。
2.根据权利要求1所述的数据回流方法,其特征在于,所述的步骤A中的哈希文件通过所述的备份端中的客户端代理进行记录生成。
3.根据权利要求1所述的数据回流方法,其特征在于,所述的步骤C具体为:
C1)在容灾机启动后,发起原容灾任务;
C2)检测到当前容灾机作为原容灾任务的备份端,故此次的容灾任务只有备份端且没有容灾端,并在备份端进行反向cdp;
C3)根据监控卷的驱动器号,依次将每个监控卷对应的哈希文件拷贝至新的日志卷中;
C4)容灾任务在当前备份端的日志卷中检测到哈希文件,直接对监控卷进行哈希增量初始化复制,哈希增量初始化复制完成后,持续进行增量复制直至容灾任务被停止。
4.根据权利要求1所述的数据回流方法,其特征在于,所述的步骤D具体为:
D1)原物理生产机挂载内置代理程序的WindowsPE,并向介质服务器发送浏览恢复请求;
D2)介质服务器遍历容灾任务产生的所有时间点,并逐一推送给原物理生产机;
D3)WindowsPE中的代理程序依次将每个时间点内的数据写入原物理生产机中。
CN201510884259.1A 2015-12-03 2015-12-03 基于持续数据保护与时间点浏览恢复的数据回流方法 Expired - Fee Related CN105550062B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510884259.1A CN105550062B (zh) 2015-12-03 2015-12-03 基于持续数据保护与时间点浏览恢复的数据回流方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510884259.1A CN105550062B (zh) 2015-12-03 2015-12-03 基于持续数据保护与时间点浏览恢复的数据回流方法

Publications (2)

Publication Number Publication Date
CN105550062A CN105550062A (zh) 2016-05-04
CN105550062B true CN105550062B (zh) 2018-10-12

Family

ID=55829258

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510884259.1A Expired - Fee Related CN105550062B (zh) 2015-12-03 2015-12-03 基于持续数据保护与时间点浏览恢复的数据回流方法

Country Status (1)

Country Link
CN (1) CN105550062B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106371952A (zh) * 2016-08-30 2017-02-01 北京中科同向信息技术有限公司 一种基于物理机应急的管理系统
CN107784016B (zh) * 2016-08-30 2019-02-15 北京京东尚科信息技术有限公司 数据同步控制装置和数据同步系统及方法
CN109710453A (zh) * 2017-10-26 2019-05-03 深圳市沃土科技有限公司 一种连续数据保存方法
CN107797888A (zh) * 2017-11-06 2018-03-13 长沙曙通信息科技有限公司 一种持续数据保护系统数据回滚实现方法
CN108255645A (zh) * 2018-01-08 2018-07-06 长沙曙通信息科技有限公司 一种持续数据保护系统数据回滚实现方法
CN109086169A (zh) * 2018-07-19 2018-12-25 郑州云海信息技术有限公司 一种数据恢复方法、装置和计算机可读存储介质
US11442958B2 (en) * 2019-04-25 2022-09-13 EMC IP Holding Company LLC Data distribution in continuous replication systems
CN110209530B (zh) * 2019-05-09 2024-02-09 上海爱数信息技术股份有限公司 一种恢复cdp系统io数据的方法及系统
CN110674502A (zh) * 2019-09-19 2020-01-10 华为技术有限公司 一种数据检测方法和装置
CN112464044B (zh) * 2020-12-09 2023-04-07 上海爱数信息技术股份有限公司 一种文件数据块变化信息监控管理系统及其方法
CN115328704A (zh) * 2022-09-06 2022-11-11 安徽鼎甲计算机科技有限公司 文件备份方法、文件恢复方法、装置、设备和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101187948A (zh) * 2007-12-20 2008-05-28 中国科学院计算技术研究所 一种持续数据保护系统及其实现方法
CN101777016A (zh) * 2010-02-08 2010-07-14 北京同有飞骥科技有限公司 一种连续数据保护系统的快照存储和数据恢复方法
CN102012851A (zh) * 2010-12-20 2011-04-13 浪潮(北京)电子信息产业有限公司 一种持续数据保护方法及服务器
US8554734B1 (en) * 2007-07-19 2013-10-08 American Megatrends, Inc. Continuous data protection journaling in data storage systems
CN104090828A (zh) * 2014-07-24 2014-10-08 浪潮(北京)电子信息产业有限公司 一种实现数据实时备份的方法及系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8554734B1 (en) * 2007-07-19 2013-10-08 American Megatrends, Inc. Continuous data protection journaling in data storage systems
CN101187948A (zh) * 2007-12-20 2008-05-28 中国科学院计算技术研究所 一种持续数据保护系统及其实现方法
CN101777016A (zh) * 2010-02-08 2010-07-14 北京同有飞骥科技有限公司 一种连续数据保护系统的快照存储和数据恢复方法
CN102012851A (zh) * 2010-12-20 2011-04-13 浪潮(北京)电子信息产业有限公司 一种持续数据保护方法及服务器
CN104090828A (zh) * 2014-07-24 2014-10-08 浪潮(北京)电子信息产业有限公司 一种实现数据实时备份的方法及系统

Also Published As

Publication number Publication date
CN105550062A (zh) 2016-05-04

Similar Documents

Publication Publication Date Title
CN105550062B (zh) 基于持续数据保护与时间点浏览恢复的数据回流方法
US8856080B2 (en) Backup using metadata virtual hard drive and differential virtual hard drive
US8244681B2 (en) Creating synthetic backup images on a remote computer system
US8214685B2 (en) Recovering from a backup copy of data in a multi-site storage system
EP2366151B1 (en) Method and system for managing replicated database data
US8145603B2 (en) Method and apparatus for data recovery using storage based journaling
US7334098B1 (en) Producing a mass storage backup using a log of write commands and time information
WO2018098972A1 (zh) 一种日志恢复方法、存储装置和存储节点
CN105446828A (zh) 一种数据库备份、恢复方法、装置及系统
CN102999564B (zh) 写入数据的方法、装置和设备
CN104461776A (zh) 基于CDP和iSCSI虚拟磁盘技术的应用容灾方法
CN101441582A (zh) 计算机数据对象的备份和恢复方法及实现该方法的系统和程序产品
CN107256182A (zh) 一种数据库还原的方法及设备
CN105550063B (zh) 一种基于持续数据保护与kvm虚拟化的容灾方法
CN109086425B (zh) 用于数据库的数据处理方法和装置
CN105302667A (zh) 基于集群架构的高可靠性数据备份与恢复方法
CN106776147A (zh) 一种差异数据备份方法和差异数据备份装置
CN104407940A (zh) 一种快速恢复cdp系统的方法
CN104461773A (zh) 一种虚拟机备份去重的方法
WO2013170702A1 (zh) 基于快照的文件处理方法及具有快照功能的固态硬盘
US9348828B1 (en) System and method of enhanced backup and recovery configuration
JP2003140981A (ja) バックアップ管理方法およびこの方法に用いる記憶制御装置
JP6070146B2 (ja) 情報処理装置及びバックアップ方法
CN104142943A (zh) 一种数据库扩容方法和一种数据库
US7600151B2 (en) RAID capacity expansion interruption recovery handling method and system

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181012

Termination date: 20191203

CF01 Termination of patent right due to non-payment of annual fee