CN102081560A - 一种基于代理操作的备份方法 - Google Patents

一种基于代理操作的备份方法 Download PDF

Info

Publication number
CN102081560A
CN102081560A CN 201110051286 CN201110051286A CN102081560A CN 102081560 A CN102081560 A CN 102081560A CN 201110051286 CN201110051286 CN 201110051286 CN 201110051286 A CN201110051286 A CN 201110051286A CN 102081560 A CN102081560 A CN 102081560A
Authority
CN
China
Prior art keywords
backup
data
script
party
software
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 201110051286
Other languages
English (en)
Other versions
CN102081560B (zh
Inventor
任永坚
王田
芮琨
万健
徐向华
张纪林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Dianzi University
Original Assignee
Hangzhou Dianzi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Dianzi University filed Critical Hangzhou Dianzi University
Priority to CN 201110051286 priority Critical patent/CN102081560B/zh
Publication of CN102081560A publication Critical patent/CN102081560A/zh
Application granted granted Critical
Publication of CN102081560B publication Critical patent/CN102081560B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种基于代理操作的备份方法。传统的备份方法软件选择余地存在很大的限制。本发明中的代理层通过负责磁盘数据源访问和读取操作的管理软件创建数据读取脚本,代理层根据数据读取脚本获取的备份数据和用户自己的备份策略建立磁带端的备份脚本,代理层可以管理并执行数据读取脚本和备份脚本。本发明方法采用基于代理操作的备份方法,可以让用户在两端软件的选取上有更大的自由,提高备份的效率,改善了整个备份技术的可扩展性和健壮性。

Description

一种基于代理操作的备份方法
技术领域
本发明属于存储数据备份技术领域,涉及一种基于代理操作的备份方法。
背景技术
当前备份技术主要有磁带备份技术、磁盘备份技术和D2D2T磁盘到磁盘到磁带备份技术。
磁带备份技术可以提供成本低并且长期的数据存储服务,但磁带备份技术存在恢复能力弱,备份质量不稳定的问题。相对于磁带备份技术,磁盘备份技术简化备份的过程,加快备份的速度,并且拥有高可靠性,但作为恢复或者备份装置来说磁带仍是最经济的选择。综合以上两种备份技术的优劣,研究人员提出了一种新的备份技术D2D2T技术。该技术以企业现有的磁带系统为主,磁盘系统为辅,结合了两种存储介质作为备份恢复装置所展现出的优点。D2D2T技术先将数据传输到磁盘上,然后写入磁带内,磁盘起的是缓存数据的作用,磁带才是真正的永久性备份和存档数据的目标设备。
目前,在D2D2T备份技术中从磁盘往磁带备份数据时,通常利用第三方备份软件把备份数据拷贝到磁带设备当中。而管理磁盘数据源的软件和第三方备份软件往往会因为生产厂商的不同而不相互兼容。因此,在D2D2T的具体实施过程中,在磁盘数据源端和磁带备份端不得不选择同一个生产厂商所生产的软件,软件选择余地有极大地限制。
发明内容
本发明的目的在于避免现有D2D2T技术中磁盘数据源管理软件和磁带端第三方备份软件相互不兼容的问题,而提出一种基于D2D2T备份技术磁盘端和磁带端之间的代理操作的技术解决方案,该方案通过磁盘端的管理软件对数据源中的数据进行访问和读取,又可以通过第三方备份软件对磁带端进行备份,实现不同厂商软件之间的相互兼容,消除用户在软件选择上的局限性。
本发明解决其技术问题的技术方案是:
在已有的两端即数据源管理软件和第三方备份软件之间,设立一个代理层,目的是让两端的软件相互兼容,实现对磁盘数据源中连续数据保护卷(以下简称CDP卷)和普通快照卷的磁带备份。本方案的特征包括以下三个方面:代理层通过负责磁盘数据源访问和读取操作的管理软件创建数据读取脚本、代理层根据数据读取脚本获取的备份数据和用户自己的备份策略建立磁带端的备份脚本、代理层可以管理并执行数据读取脚本和备份脚本。
整个技术方案的执行步骤是代理层根据从磁盘数据源端获取的备份数据创建数据读取脚本,然后代理层通过第三方备份软件对磁带端进行数据备份。具体步骤如下:
步骤1是在代理层上创建数据读取脚本具体的操作步骤如下:
1) 定制数据读取脚本名称并选择需要备份数据所在的数据源服务器;
2) 根据用户使用环境选择一个数据传输协议;
3) 在数据源服务器中选择需要备份数据的CDP源卷或普通快照卷,在代理层选择可使用的目标卷;
4) 为目标卷定制卷标,然后创建数据读取脚本;
步骤2是代理层通过第三方备份软件对磁带端进行数据备份的步骤如下:
1) 代理层根据步骤1创建的数据读取脚本从数据源读取备份数据,备份数据包括CDP源卷和普通快照卷,代理层在读取CDP源卷时,间隔的把CDP源卷的最后一个CDP时间点的数据复制出一个只读副本,另外代理层在代理普通快照卷时,间隔的对目标卷做一次普通快照,复制出一个只读副本;
2) 代理层把1)中目标卷中的只读副本映射到第三方备份软件所在的服务器上,形成副本卷;
3) 第三方备份软件对所在服务器上的副本卷上的数据备份到磁带当中去;
本发明具有的有益效果是:
在D2D2T备份技术中,数据源的管理软件因为厂商的不同很可能与第三方备份软件不相兼容,这样用户在对数据源进行管理和对数据源进行备份上要做出取舍。采用基于代理操作的备份方法,可以让用户在两端软件的选取上有更大的自由,提高备份的效率,改善了整个备份技术的可扩展性和健壮性。
附图说明
图1是代理层协调数据源端和第三方备份软件图。
图2是备份代理系统的功能结构框图。
图3是备份代理工作流程图。
图4是生成脚本流程图。
图5是生成策略流程图。
具体实施方式
下面结合附图和具体实施应用过程对本发明进一步说明。
在D2D2T组网中,备份代理系统发挥上述代理层的作用,连接数据源管理软件和第三方备份软件,使两者互相兼容。用户采用数据源管理软件对数据源进行在线数据保护,采用第三方备份软件对数据源中的普通快照卷或者CDP卷进行备份。数据源管理软件管理下的普通快照目标卷和CDP存储卷在在线数据保护时存在访问限制,因此用户使用其他第三方备份软件无法正常访问它们,也更无法对这些卷进行数据备份操作了。在D2D2T技术实施过程中,备份代理系统能将在进行在线数据保护的磁盘数据源端中的CDP卷和普通快照卷恢复出一个只读副本,然后映射到第三方备份软件所在服务器上,供其对磁带端备份使用。这样,拥有备份代理系统的D2D2T技术可以弥补数据源端和备份端不同厂商软件之间的兼容性问题。网内备份代理系统和其他软件的部署形式如图1所示。
在一次完整的实施过程中,因为备份的数据通常会定期更新,备份代理系统同样要保证第三方备份软件读取的只读副本中的数据与数据源卷中的数据同步。因此上面所描述的这个过程需要能定期间隔执行。第三方备份软件一般都执行一定的备份策略,保证在相当长的时间里,备份工作能自动完成,备份代理系统也需要制定相应的策略,保证第三方备份软件能在每次执行备份时,读取到最新的数据。所以用户既需要用到其代理功能,即通过备份代理系统使第三方备份软件访问到数据源中的数据,又需要用到其策略功能,即数据副本也能按需更新。因此用户往往会依次使用创建脚本模块和创建策略模块。备份代理具体的工作流程如图2所示。
以下是基于代理操作的备份方法的实现方式如图3所示:这个实现方案由Web界面、脚本模块和策略模块三部分组成。其中脚本模块由创建脚本和管理脚本两部分组成,创建脚本会调用数据源管理软件提供的功能创建出数据读取脚本,然后通过命令行界面执行。策略模块由创建策略和管理策略两部分组成,生成的策略会变成Windows任务计划由操作系统执行。
Web界面是代理层与用户之间的界面接口。在脚本模块中,脚本代理包括CDP代理和普通快照代理两部分。CDP代理是指创建针对CDP操作的数据读取脚本,快照代理是指创建针对普通快照操作的数据读取脚本。两者的区别仅在于数据源的不同,但两者的实现方法非常相似:从数据源中取出数据,复制到一个目标卷中生成数据副本,且这个副本标记为只读;将这个包含了数据副本的卷映射到第三方备份软件所在的服务器上,第三方备份软件就可以同读本地卷一样的去读取该副本上的数据了。如CDP脚本,主要的命令就是恢复当前最后一个CDP快照和映射目标卷。由于考虑到脚本在加到一个策略中后,需要反复执行。所以实际生成的脚本包括了:取消上一次映射,取消快照关系,恢复当前最后一个CDP快照和映射目标卷这样四步。同时在初次生成脚本的时候,还会先用后两条命令做一个初始化。普通快照脚本类似,只是将恢复当前最后一个CDP快照这条命令,更换为新建快照关系。
新建脚本模块所需的流程如图4所示。备份代理系统首先通过调用数据源管理软件提供的功能,获得数据源的一些相关数据,每个脚本都需要用户定制备份数据所在数据源服务器、数据传输协议、可使用目标卷等参数,然后根据这些参数生成相应的脚本,脚本会在生成时初始化,之后生成的脚本既可以手动执行,也可以由后面的策略来调用。
管理脚本模块可提供查看现有脚本信息和删除现有脚本的功能。用户每次创建一个脚本,都会在备份代理系统的日志文件中记录脚本的相关信息,包括脚本的类型、涉及到的卷、涉及到的服务器、客户端、通道等。用户通过这个模块可以看到每个脚本的这些信息,同时也可以根据需要删除某些脚本。
在策略模块中,用户根据自己的需要定制Windows任务计划,该计划只是顺序执行用户定制的数据读取脚本和备份脚本。用户通过备份代理系统可以相应的生成每10分钟、每30分钟、每小时、每日、工作日、每周和每月等等的备份任务。Windows任务计划最终由操作系统执行。
新建策略模块所需的流程如图5所示。备份代理系统首先读取用户定制的脚本列表,然后根据用户使用环境选择策略类型,每个策略都需要用户定制执行策略的账户密码、策略执行频率、策略起始时间、策略起始日期以及不同策略的一些特殊参数,最后生成Windows任务计划。
管理策略模块可提供查看现有策略信息和删除现有策略的功能。用户每次创建一个策略,都会在备份代理系统的日志文件中记录策略的相关信息,包括策略的类型、策略起始时间、策略起始日期以及策略详细信息等。用户在这个窗口可以看到每个策略的这些信息,同时也可以根据需要删除某些策略。
本发明解决了在D2D2T备份技术中因为软件兼容性问题产生的数据源管理软件的在线数据保护功能和第三方备份软件的备份功能很难同时进行的难题。它消除了用户在软件选择上的限制性,提高了系统的管理效率,改善了系统的可扩充性。

Claims (1)

1.一种基于代理操作的备份方法,其特征在于:该方法首先是在代理层上创建数据读取脚本,然后代理层通过第三方备份软件来进行备份数据;
所述的代理层上创建数据读取脚本的具体过程是:
1)定制数据读取脚本名称并选择数据源服务器;
2)根据备份使用环境为数据源端选择一个数据传输通道;
3)在数据源服务器中选择需要备份数据的CDP源卷或普通快照卷,在代理层选择可使用的目标卷;
4)为目标卷定制卷标,然后创建数据读取脚本;
所述的代理层通过第三方备份软件来进行备份数据的具体过程是:
A)数据源管理软件提供备份数据,所述的备份数据包括代理CDP源卷和普通快照卷;代理层在代理CDP源卷时,间隔的把目标卷的最后一个CDP时间点的数据恢复出一个只读副本,再将该卷映射到第三方备份软件所在服务器上,第三方备份软件即可对该卷进行操作;代理层在代理普通快照卷时,间隔的对目标卷做一次普通快照,再将快照目标卷映射到第三方备份软件所在服务器,第三方备份软件即可对该卷进行操作;
B)代理层对备份数据做一个副本,该副本可以被第三方备份软件访问使用;
C)第三方备份软件对磁带端进行备份。
CN 201110051286 2011-03-03 2011-03-03 一种基于代理操作的备份方法 Expired - Fee Related CN102081560B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201110051286 CN102081560B (zh) 2011-03-03 2011-03-03 一种基于代理操作的备份方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201110051286 CN102081560B (zh) 2011-03-03 2011-03-03 一种基于代理操作的备份方法

Publications (2)

Publication Number Publication Date
CN102081560A true CN102081560A (zh) 2011-06-01
CN102081560B CN102081560B (zh) 2013-01-16

Family

ID=44087535

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201110051286 Expired - Fee Related CN102081560B (zh) 2011-03-03 2011-03-03 一种基于代理操作的备份方法

Country Status (1)

Country Link
CN (1) CN102081560B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105740102A (zh) * 2016-02-02 2016-07-06 北京京东尚科信息技术有限公司 用于数据备份的设备及其中的方法
CN112286734A (zh) * 2020-12-24 2021-01-29 深圳市科力锐科技有限公司 备份任务执行方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003003209A1 (en) * 2001-06-28 2003-01-09 Emc Corporation Information replication system having enhanced error detection and recovery
CN1851662A (zh) * 2006-06-01 2006-10-25 中山大学 一种数据备份系统
CN101741809A (zh) * 2008-11-04 2010-06-16 北京众志和达信息技术有限公司 基于嵌入式一体化虚拟磁带库的远程数据复制的方法和系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003003209A1 (en) * 2001-06-28 2003-01-09 Emc Corporation Information replication system having enhanced error detection and recovery
CN1851662A (zh) * 2006-06-01 2006-10-25 中山大学 一种数据备份系统
CN101741809A (zh) * 2008-11-04 2010-06-16 北京众志和达信息技术有限公司 基于嵌入式一体化虚拟磁带库的远程数据复制的方法和系统

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105740102A (zh) * 2016-02-02 2016-07-06 北京京东尚科信息技术有限公司 用于数据备份的设备及其中的方法
CN112286734A (zh) * 2020-12-24 2021-01-29 深圳市科力锐科技有限公司 备份任务执行方法、装置、设备及存储介质
CN112286734B (zh) * 2020-12-24 2021-06-11 深圳市科力锐科技有限公司 备份任务执行方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN102081560B (zh) 2013-01-16

Similar Documents

Publication Publication Date Title
CN100354824C (zh) 操作系统配置的方法和系统
CN101090356B (zh) 使能对远程存储装置的访问的方法和系统
CN101854392B (zh) 一种基于云计算环境的个人数据管理方法
CN103026343B (zh) 为数据镜像定义生命周期策略的方法和系统
CN101253484B (zh) 一种用于保存来自客户端的数据的方法及一种客户端
CN102457567B (zh) 一种web管理方式的镜像备份/恢复方法及工具
CN104050216B (zh) 用于定制化资源分配的文件系统管理器
CN103176860B (zh) 数据备份方法和系统
CN105912428B (zh) 实现源数据实时转化为虚拟机镜像的系统及方法
CN102193807A (zh) 一种镜像文件升级的方法、服务器及计算机网络系统
CN103780638A (zh) 数据同步方法及系统
CN105339903A (zh) 恢复文件系统对象
CN103034592B (zh) 数据处理方法和装置
US11275522B2 (en) Efficient data storage management system
CN101668048A (zh) 支持任意时间数据访问和修改的数据保护方法及系统
CN108037937A (zh) 一种动态更新资源的方法
CN101742254B (zh) 视频监控系统信息的备份方法和中心平台服务器
US20130198137A1 (en) Data backup and restoral apparatus, system, and methods
CN103841178B (zh) 网络附连存储环境的带内管理的方法和系统
CN102081560B (zh) 一种基于代理操作的备份方法
CN108459929A (zh) 一种基于云计算的数据备份方法
CN103593258A (zh) 界面备份方法、备份信息处理方法、终端及服务器
CN104142943B (zh) 一种数据库扩容方法和一种数据库
US20130185260A1 (en) Data backup and restoral apparatus, system, and methods
CN103714089B (zh) 一种实现云数据库回滚的方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20130116

CF01 Termination of patent right due to non-payment of annual fee