CN108259569B - 一种基于ipsan共享存储的无代理连续数据保护方法及系统 - Google Patents

一种基于ipsan共享存储的无代理连续数据保护方法及系统 Download PDF

Info

Publication number
CN108259569B
CN108259569B CN201711418445.1A CN201711418445A CN108259569B CN 108259569 B CN108259569 B CN 108259569B CN 201711418445 A CN201711418445 A CN 201711418445A CN 108259569 B CN108259569 B CN 108259569B
Authority
CN
China
Prior art keywords
data
server
backup
ipsan
shared storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711418445.1A
Other languages
English (en)
Other versions
CN108259569A (zh
Inventor
李毅
张有成
许萍萍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aerospace One System Jiangsu Information Technology Co ltd
Original Assignee
Nanjing Unary Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Unary Information Technology Co ltd filed Critical Nanjing Unary Information Technology Co ltd
Priority to CN201711418445.1A priority Critical patent/CN108259569B/zh
Publication of CN108259569A publication Critical patent/CN108259569A/zh
Application granted granted Critical
Publication of CN108259569B publication Critical patent/CN108259569B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • G06F11/1464Management of the backup or restore process for networked environments
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于IPSAN共享存储的无代理连续数据保护方法,1)创建一个虚拟块存储设备,使用开源iSCSI工具将该虚拟块设备映射为一个iSCSI的target端,2)将备份服务器和生产服务器网络连接,备份服务器和IPSAN共享存储服务器网络连接;3)虚拟块设备驱动程序将读写请求的数据提交给备份服务器上的数据处理模块处理,数据处理模块同步转发读写请求给IPSAN共享存储服务器,同时将数据变化提交给备份服务器上的CDP备份模块处理,CDP备份模块记录数据变化日志;4)当需要对数据进行恢复时,CDP恢复模块根据步骤3)中记录的数据变化日志进行恢复操作。本发明减少了工作量。

Description

一种基于IPSAN共享存储的无代理连续数据保护方法及系统
技术领域
本发明涉及数据备份技术领域,具体涉及一种基于IPSAN共享存储的无代理连续数据保护方法。
背景技术
IP SAN简称SAN(Storage Area Network存储局域网络),IP SAN使存储空间得到更加充分的利用,并使得安装和管理更加有效。
SAN是一种将存储设备、连接设备和接口集成在一个高速网络中的技术。 SAN本身就是一个存储网络,承担了数据存储任务,SAN网络与LAN业务网络相隔离,存储数据流不会占用业务网络带宽。
CDP(Continuous Data Protection连续数据保护)是一种连续捕获和保存数据变化,并将变化后的数据独立于初始数据进行保存的方法,该方法可以实现过去任意一个时间点的数据恢复。通过CDP实时备份技术,可以实现到秒级的细颗粒度抓捕效果,将备份窗口降至可以实现的最小值,数据丢失的间隔误差随着备份技术的这种改进也达到秒级,与此同时存在的风险日益凸显。
现在的CDP实时备份技术都需要在用户的生产服务器上安装代理程序(后述简称为代理),这样对服务器的性能有较大的影响,对服务器的稳定运行也存在一定的风险。
以往,代理一直用于扫描并从操作系统、文件系统和应用程序中收集数据。代理可以备份完整的数据集、增量的文件变更或增量的块变更。近来,代理功能进一步发展为包括复制、压缩和加密等功能,所有这些功能都需要一定数量的系统资源。用于结构化数据库备份(RDBMS关系数据库管理系统、电子邮件、 ERP等)的应用程序代理通常是安装到系统的一种特殊代理或一些代码,每个代理都是独特的,无法与其他系统或应用程序共享。
传统备份和数据保护软件都需要在生产系统中安装代理,当代理需要更新升级时也需要对所有的生产系统操作,当需要备份的生产系统的数量很大时,这个过程将会非常繁琐,常常会导致备份管理员将升级或安装补丁推迟到预先安排的维护期进行。
应用服务器越来越多的迁移到虚拟化的机器中(VM)运行,在虚拟化应用的早期,备份在虚拟机(VM)上的实现方式与在物理机上大多相同,每台虚拟机上安装代理,用这种方式进行备份会降低VM的集中和整合,每个代理也会占用不少资源,而且代理对资源的占用会随着VM的数量呈线性增长。同时运行的多个代理还会导致I/O争用,因为每个代理都试图同时进行备份,产生争用通常是因为这些代理并不知道争用的是相同的网络和存储资源,资源争用会导致备份性能下降,并使备份周期延误。
生产系统中的代理如果被黑客直接攻克,会造成生产系统中的数据泄漏,所以代理的使用增加了数据泄漏的风险,提高了安全防范的成本。
现有的无代理备份只能基于虚拟化软件做定时备份,比如基于KVM
(Kernel-based Virtual Machine)、ESXi(专为运行虚拟机、最大限度降低配置要求和简化部署而设计)实现对虚拟机的定时备份。
发明内容
为解决现有技术中的不足,本发明提供一种基于IPSAN共享存储的无代理连续数据保护方法,解决了使用代理对服务器产生的稳定性、安全性问题,避免了生产机系统中安装代理导致的系统性能损耗,减少了代理的部署安装以及卸载等过程中的需要较大工作量的问题。
为了实现上述目标,本发明采用如下技术方案:一种基于IPSAN共享存储的无代理连续数据保护方法,其特征在于:包括步骤:
1)备份服务器上加载一个虚拟块设备驱动程序,创建一个虚拟块存储设备,使用开源iSCSI工具将该虚拟块设备映射为一个iSCSI的target端,该target端的iSCSI限定名称IQN和IPSAN共享存储服务器提供给生产服务器所用的target 端名称相同;
2)断开生产服务器和IPSAN共享存储服务器之间的网络连接,将备份服务器和生产服务器网络连接,备份服务器和IPSAN共享存储服务器网络连接;
3)步骤1)中创建的虚拟块存储设备处理生产服务器发送给备份服务器的所有读写请求,虚拟块设备驱动程序将读写请求的数据提交给备份服务器上的数据处理模块处理,数据处理模块同步转发读写请求给IPSAN共享存储服务器,同时将数据变化提交给备份服务器上的CDP备份模块处理,CDP备份模块记录数据变化日志;
4)当需要对数据进行恢复时,CDP恢复模块根据步骤3)中记录的数据变化日志进行恢复操作。
前述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述数据变化日志包括时间戳、数据内容、数据大小、数据位置。
前述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述步骤3),备份具体步骤包括:
a)生产服务器的写请求数据包通过IP网络传送到备份服务器;
b)备份服务器上CDP备份模块将所有的写请求数据的变化按时间记录到数据变化日志;
c)备份服务器转发写请求数据到IPSAN共享存储服务器存储,完成原来的数据存储过程。
前述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述步骤4)中恢复操作,具体步骤包括:
a)根据选择的恢复时间点,从备份服务器中的数据变化日志中选择所需的数据;
b)按照数据变化日志中记录的数据信息,将数据恢复写入IPSAN共享存储服务器中;
c)启动生产服务器的应用程序,加载恢复的数据。
前述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述数据变化日志包括时间戳、数据内容、数据大小、数据位置。
一种基于IPSAN共享存储的无代理连续数据保护系统,其特征是:包括生产服务器、IPSAN共享存储服务器、存储中转及数据保护服务器,存储中转及数据保护服务器即备份服务器,备份服务器与生产服务器、IPSAN共享存储服务器之间分别通过网络交换机实现IP网络互连,备份服务器负责将生产服务器中所使用的数据进行备份,同时将数据转发到IPSAN共享存储服务器中。
本发明所达到的有益效果:本发明不影响原有生产系统的数据存放,原有的生产系统的数据是存放在IPSAN共享存储中的,在使用本方法后,数据仍应完好的在IPSAN共享存储中存放,且本发明方法可实现无代理的连续数据的 CDP保护。
附图说明
图1是使用IPSAN共享存储的生产系统的网络拓扑示意图;
图2是本发明无代理备份系统网络拓扑示意图;
图3是本发明无代理连续数据保护方法流程图;
图4是本发明无代理备份系统的备份过程示意图;
图5是本发明无代理备份系统的恢复过程示意图。
具体实施方式
下面结合附图对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
如图1所示,为现有技术中使用IPSAN共享存储的生产系统,包括生产服务器、IPSAN共享存储服务器,两者之间通过网络交换机实现网络连接。
如图2所示,一种基于IPSAN共享存储的无代理连续数据保护系统,包括生产服务器、IPSAN共享存储服务器、存储中转及数据保护服务器(简称为备份服务器),该备份服务器与生产服务器、IPSAN共享存储服务器之间分别通过网络交换机实现IP网络互连;该备份服务器负责将生产服务器中所使用的数据进行备份,同时将数据转发到IPSAN共享存储服务器中。
如图3所示,一种基于IPSAN共享存储的无代理连续数据保护方法,包括步骤:
1)备份服务器上加载一个虚拟块设备驱动程序,创建一个虚拟块存储设备V,使用开源iSCSI工具将该虚拟块设备V映射为一个iSCSI(Internet小型计算机系统接口)的target(目标)端,该target端的IQN(iSCSI qualified name,iSCSI 限定名称)和IPSAN共享存储服务器提供给生产服务器所用的target端名称相同;
2)断开生产服务器和IPSAN共享存储服务器之间的网络连接,将备份服务器和生产服务器网络连接,假设该网络命名为A,备份服务器和IPSAN共享存储服务器网络连接,假设该网络命名为B,网络A和网络B互相不连通;
3)步骤1)中创建的虚拟块存储设备V会处理生产服务器发送给备份服务器的所有读写请求,虚拟块设备驱动程序会把读写请求的数据提交给备份服务器上的数据处理模块处理,数据处理模块同步转发读写请求给IPSAN共享存储服务器,同时将数据变化提交给备份服务器上的CDP备份模块处理,CDP备份模块记录数据变化日志;
4)当需要对数据进行恢复时,CDP恢复模块根据步骤3)中记录的数据变化日志进行恢复操作。
如图4所示,所述步骤3),备份具体步骤包括:
b)生产服务器的写请求数据包通过IP网络传送到备份服务器;
b)备份服务器上CDP备份模块将所有的写请求数据的变化按时间记录到数据变化日志,数据变化日志包括时间戳、数据内容、数据大小、数据位置等信息;
c)备份服务器转发写请求数据到IPSAN共享存储服务器存储,完成原来的数据存储过程。
如图5所示,所述步骤4)中恢复操作,具体步骤包括:
a)根据选择的恢复时间点,从备份服务器中的数据变化日志中选择所需的
数据;
b)按照数据变化日志中记录的数据信息,将数据恢复写入IPSAN共享存储
服务器中;
c)启动生产服务器的应用程序,加载恢复的数据。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和变形,这些改进和变形也应视为本发明的保护范围。

Claims (6)

1.一种基于IPSAN共享存储的无代理连续数据保护方法,其特征在于:包括步骤:
1)备份服务器上加载一个虚拟块设备驱动程序,创建一个虚拟块存储设备,使用开源iSCSI工具将该虚拟块设备映射为一个iSCSI的target端,该target端的iSCSI限定名称IQN和IPSAN共享存储服务器提供给生产服务器所用的target端名称相同;
2)断开生产服务器和IPSAN共享存储服务器之间的网络连接,将备份服务器和生产服务器网络连接,备份服务器和IPSAN共享存储服务器网络连接;
3)步骤1)中创建的虚拟块存储设备处理生产服务器发送给备份服务器的所有读写请求,虚拟块设备驱动程序将读写请求的数据提交给备份服务器上的数据处理模块处理,数据处理模块同步转发读写请求给IPSAN共享存储服务器,同时将数据变化提交给备份服务器上的CDP备份模块处理,CDP备份模块记录数据变化日志;
4)当需要对数据进行恢复时,CDP恢复模块根据步骤3)中记录的数据变化日志进行恢复操作。
2.根据权利要求1所述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述数据变化日志包括时间戳、数据内容、数据大小、数据位置。
3.根据权利要求1所述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述步骤3),备份具体步骤包括:
a)生产服务器的写请求数据包通过IP网络传送到备份服务器;
b)备份服务器上CDP备份模块将所有的写请求数据的变化按时间记录到数据变化日志;
c)备份服务器转发写请求数据到IPSAN共享存储服务器存储,完成数据存储过程。
4.根据权利要求1所述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述步骤4)中恢复操作,具体步骤包括:
a)根据选择的恢复时间点,从备份服务器中的数据变化日志中选择所需的数据;
b)按照数据变化日志中记录的数据信息,将数据恢复写入IPSAN共享存储服务器中;
c)启动生产服务器的应用程序,加载恢复的数据。
5.根据权利要求3或4所述的一种基于IPSAN共享存储的无代理连续数据保护方法,其特征是:所述数据变化日志包括时间戳、数据内容、数据大小、数据位置。
6.一种基于IPSAN共享存储的无代理连续数据保护系统,其特征是:包括生产服务器、IPSAN共享存储服务器、存储中转及数据保护服务器,存储中转及数据保护服务器即备份服务器,备份服务器与生产服务器、IPSAN共享存储服务器之间分别通过网络交换机实现IP网络互连,备份服务器负责将生产服务器中所使用的数据进行备份,同时将数据转发到IPSAN共享存储服务器中;
备份服务器上CDP备份模块将所有的写请求数据的变化按时间记录到数据变化日志;
备份服务器上加载一个虚拟块设备驱动程序,创建一个虚拟块存储设备,使用开源iSCSI工具将该虚拟块设备映射为一个iSCSI的target端,该target端的iSCSI限定名称IQN和IPSAN共享存储服务器提供给生产服务器所用的target端名称相同。
CN201711418445.1A 2017-12-25 2017-12-25 一种基于ipsan共享存储的无代理连续数据保护方法及系统 Active CN108259569B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201711418445.1A CN108259569B (zh) 2017-12-25 2017-12-25 一种基于ipsan共享存储的无代理连续数据保护方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201711418445.1A CN108259569B (zh) 2017-12-25 2017-12-25 一种基于ipsan共享存储的无代理连续数据保护方法及系统

Publications (2)

Publication Number Publication Date
CN108259569A CN108259569A (zh) 2018-07-06
CN108259569B true CN108259569B (zh) 2020-10-27

Family

ID=62722952

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711418445.1A Active CN108259569B (zh) 2017-12-25 2017-12-25 一种基于ipsan共享存储的无代理连续数据保护方法及系统

Country Status (1)

Country Link
CN (1) CN108259569B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109445986A (zh) * 2018-09-30 2019-03-08 南京壹进制信息技术股份有限公司 一种备份数据集挂载方法和备份数据集快速恢复、挂载系统
CN110336857B (zh) * 2019-06-03 2022-04-12 平安科技(深圳)有限公司 网络块设备的创建方法、装置、设备和存储介质
CN110456984A (zh) * 2019-06-21 2019-11-15 南京壹进制信息科技有限公司 一种对Ceph存储的块设备进行连续数据保护的方法
CN111625401B (zh) * 2020-05-29 2023-03-21 浪潮电子信息产业股份有限公司 基于集群文件系统的数据备份方法、装置及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102866935A (zh) * 2011-07-07 2013-01-09 北京飞杰信息技术有限公司 基于iscsi的即时复制方法和存储系统
CN104866435A (zh) * 2015-06-06 2015-08-26 成都云祺科技有限公司 一种连续数据保护方法
CN105763599A (zh) * 2016-01-13 2016-07-13 杭州华三通信技术有限公司 一种ipsan下的t-cdp实现方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8706694B2 (en) * 2008-07-15 2014-04-22 American Megatrends, Inc. Continuous data protection of files stored on a remote storage device
CN101739313B (zh) * 2009-11-27 2012-02-29 华中科技大学 一种连续数据保护和恢复方法
CN102655460B (zh) * 2012-01-05 2014-09-24 中国工商银行股份有限公司 一种生产服务器冗余备份方法及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102866935A (zh) * 2011-07-07 2013-01-09 北京飞杰信息技术有限公司 基于iscsi的即时复制方法和存储系统
CN104866435A (zh) * 2015-06-06 2015-08-26 成都云祺科技有限公司 一种连续数据保护方法
CN105763599A (zh) * 2016-01-13 2016-07-13 杭州华三通信技术有限公司 一种ipsan下的t-cdp实现方法及装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
IP-SAN存储技术的特点及应用;陈广旭,郭延红;《电脑知识与技术》;20100215;第2节及图1 *
基于ISCSI协议的IP SAN网络存储技术研究;陈大恒;《工学硕士学位论文》;20060601;第4.5节 *
陈广旭,郭延红.IP-SAN存储技术的特点及应用.《电脑知识与技术》.2010, *

Also Published As

Publication number Publication date
CN108259569A (zh) 2018-07-06

Similar Documents

Publication Publication Date Title
CN108259569B (zh) 一种基于ipsan共享存储的无代理连续数据保护方法及系统
US11650842B2 (en) Methods and apparatus for providing hypervisor level data services for server virtualization
US10067837B1 (en) Continuous data protection with cloud resources
US10216589B2 (en) Smart data replication recoverer
US9389892B2 (en) Multiple points in time disk images for disaster recovery
US9405765B1 (en) Replication of virtual machines
US9710294B2 (en) Methods and apparatus for providing hypervisor level data services for server virtualization
US8055937B2 (en) High availability and disaster recovery using virtualization
EP3750066B1 (en) Protection of infrastructure-as-a-service workloads in public cloud
CN102609281B (zh) 分布式软件补丁更新方法及系统
US20110040811A1 (en) Distributed file system logging
CN104239166A (zh) 一种对运行中虚拟机实现文件备份的方法
CN110851302A (zh) 一种数据库信息的备份方法及恢复方法
CN104486131B (zh) 一种基于安腾平台的db2数据库的故障检测和切换方法
CN102801711B (zh) 基于硬件处理板的自主可控网站安全防御系统
CN108255643A (zh) 一种无代理的连续数据保护方法
CN111985906A (zh) 一种远程办公系统、方法、装置及存储介质
CN111124620B (zh) 一种用于io过滤的应用程序编程接口的持续数据保护方法
US9800569B2 (en) Data protection backup agent management
CN117643015A (zh) 基于日志记录的客户端密钥修改的快照跨一系列节点管理密钥
US10210013B1 (en) Systems and methods for making snapshots available
US11941030B2 (en) Methods for hierarchical propagation in tree structures and devices thereof
US10949102B2 (en) Leveraging snapshot for time series pattern analysis prediction
CN114281600A (zh) 一种容灾备份和容灾恢复方法、装置、设备及存储介质
CN113934575A (zh) 一种基于分布式拷贝的大数据备份系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 210014 Building B, Building C, Building 3, No. 5 Yongzhi Road, Baixia High-tech Industrial Park, Nanjing, Jiangsu Province

Applicant after: NANJING UNARY INFORMATION TECHNOLOGY Co.,Ltd.

Address before: 210014 Building B, Building C, Building 3, No. 5 Yongzhi Road, Baixia High-tech Industrial Park, Nanjing, Jiangsu Province

Applicant before: NANJING UNARY INFORMATION TECHNOLOGY Inc.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant
CP03 Change of name, title or address

Address after: Building 1, 6th Floor, Changfeng Building, No.14 Xinghuo Road, Research and Innovation Park, Jiangbei New District, Nanjing City, Jiangsu Province, 210000

Patentee after: Aerospace One System (Jiangsu) Information Technology Co.,Ltd.

Address before: 210014 Building B, Building C, Building 3, No. 5 Yongzhi Road, Baixia High-tech Industrial Park, Nanjing, Jiangsu Province

Patentee before: NANJING UNARY INFORMATION TECHNOLOGY Co.,Ltd.

CP03 Change of name, title or address