CN106293998A - 一种基于快照技术的系统备份方法 - Google Patents

Abstract

本发明公开了一种基于快照技术的备份方法，该方法旨在备份过程中主要用途就是保证业务的连续性，达到最短的恢复时间和最小的数据丢失量(最小的RTO和RPO)。本发明通常用在计算机数据归档、存储、备份、远程容灾、灾难恢复中。

Description

一种基于快照技术的系统备份方法

技术领域

本发明涉及一种基于快照技术的系统备份方法，属于计算机数据处理领域

背景技术

近年来使用计算机进行数据存储的需求越来越大，随着存储应用需求的提高，用户需要在线方式进行数据保护，快照就是在线存储设备防范数据丢失的有效方法之一，在过去十年时间中，快照已经成为磁盘阵列、卷管理器、文件系统甚至PCI RAID(独立磁盘冗余阵列)控制器的标准配置功能。越来越多的设备都开始支持这项功能。越来越多的存储设备支持快照功能，在这些产品的资料中宣传了各自快照技术的优势，有的是快照数量多，有的是占用空间小。

SNIA(存储网络行业协会)对快照的定义是：关于指定数据集合的一个完全可用拷贝，该拷贝包括相应数据在某个时间点(拷贝开始的时间点)的映像。快照可以是其所表示的数据的一个副本，也可以是数据的一个复制品。而从具体的技术细节来讲，快照是指向保存在存储设备中的数据的引用标记或指针。我们可以这样理解，快照有点像是详细的目录表，但它被计算机作为完整的数据备份来对待。

快照有三种基本形式：基于文件系统式的、基于子系统式的和基于卷管理器/虚拟化式的，而且这三种形式差别很大。市场上已经出现了能够自动生成这些快照的实用工具，比如有代表性的有NetApp的存储设备基于文件系统实现，高中低端设备使用共同的操作系统，都能够实现快照应用。

快照技术的作用：主要是能够进行在线数据恢复，当存储设备发生应用故障或者文件损坏时可以进行及时数据恢复，将数据恢复成快照产生时间点的状态。快照的另一个作用是为存储用户提供了另外一个数据访问通道，当原数据 进行在线应用处理时，用户可以访问快照数据，还可以利用快照进行测试等工作。因此，所有存储系统，不论高中低端，只要应用于在线系统，那么快照就成为一个不可或缺的功能。

有两大类存储快照，一种叫做即写即拷快照，另一种叫做分割镜像快照。

即写即拷快照可以在每次输入新数据或已有数据被更新时生成对存储数据改动的快照。这样做可以在发生硬盘写错误、文件损坏或程序故障时迅速地恢复数据。但是，如果需要对网络或存储媒介上的所有数据进行完全的存档或恢复时，所有以前的快照都必须可供使用。即写即拷快照是表现数据外观特征的“照片”。这种方式通常也被称为“元数据”拷贝，即所有的数据并没有被真正拷贝到另一个位置，只是指示数据实际所处位置的指针被拷贝。在使用这项技术的情况下，当已经有了快照时，如果有人试图改写原始的LUN上的数据，快照软件将首先将原始的数据块拷贝到一个新位置(专用于复制操作的存储资源池)，然后再进行写操作。以后当你引用原始数据时，快照软件将指针映射到新位置，或者当你引用快照时将指针映射到老位置。

分割镜像快照引用镜像硬盘组上所有数据。每次应用运行时，都生成整个卷的快照，而不只是新数据或更新的数据。这种使离线访问数据成为可能，并且简化了恢复、复制或存档一块硬盘上的所有数据的过程。但是，这是个较慢的过程，而且每个快照需要占用更多的存储空间，也叫作原样复制，由于它是某一LUN或文件系统上的数据的物理拷贝，有的管理员称之为克隆、映像等。原样复制的过程可以由主机或在存储级上用硬件完成。

快照技术使用方法：具体使用快照时，存储管理员可以有三种形式，即冷快照拷贝、暖快照拷贝和热快照拷贝。

冷快照拷贝：进行冷快照拷贝是保证系统可以被完全恢复的最安全的方式。在进行任何大的配置变化或维护过程之前和之后，一般都需要进行冷拷贝，以保证完全的恢复原状(rollback)。冷拷贝还可以与克隆技术相结合复制整个服务器系统，以实现各种目的，如扩展、制作生产系统的复本供测试/开发之用以及向二层存储迁移。

暖快照拷贝：暖快照拷贝利用服务器的挂起功能。当执行挂起行动时，程序计数器被停止，所有的活动内存都被保存在引导硬盘所在的文件系统中的一个临时文件(.vmss文件)中，并且暂停服务器应用。在这个时间点上，复制整个服务器(包括内存内容文件和所有的LUN以及相关的活动文件系统)的快照拷贝。在这个拷贝中，机器和所有的数据将被冻结在完成挂起操作时的处理点上。

当快照操作完成时，服务器可以被重新启动，在挂起行动开始的点上恢复运行。应用程序和服务器过程将从同一时间点上恢复运行。从表面上看，就好像在快照活动期间按下了一个暂停键一样。对于服务器的网络客户机看来，就好像网络服务暂时中断了一下一样。对于适度加载的服务器来说，这段时间通常在30到120秒。

热快照拷贝：在这种状态下，发生的所有的写操作都立即应用在一个虚硬盘上，以保持文件系统的高度的一致性。服务器提供让持续的虚拟硬盘处于热备份模式的工具，以通过添加REDO日志文件在硬盘子系统层上复制快照拷贝。

一旦REDO日志被激活，复制包含服务器文件系统的LUN的快照是安全的。在快照操作完成后，可以发出另一个命令，这个命令将REDO日志处理提交给下面的虚拟硬盘文件。当提交活动完成时，所有的日志项都将被应用，REDO文件将被删除。在执行这个操作过程中，会出现处理速度的略微下降，不过所有的 操作将继续执行。但是，在多数情况下，快照进程几乎是瞬间完成的，REDO的创建和提交之间的时间非常短。

热快照操作过程从表面上看基本上察觉不到服务器速度下降。在最差情况下，它看起来就是网络拥塞或超载的CPU可能造成的一般服务器速度下降。在最好情况下，不会出现可察觉到的影响。

快照技术-快照与镜像、复制的区别

镜像、快照和复制是三种不同的功能

镜像是通过从一个I/O创建两个I/O来复制数据。磁盘镜像通过OS或卷管理软件在主系统上创建。磁盘镜像是依靠平台和本地连接特性的本地选件。镜像可用于DAS和SAN并且大多数NAS支持它。存储转发式镜像磁盘子系统(例如，EMC SRDF，IBM PPRC，Hitachi TrueCopy)主要用于SAN产品。

复制是通过网络传输数据对象(文件、表格等)。传输是从系统到系统进行的，而不是在存储设备之间或子系统之间进行。复制一般也针对具体平台，因此用于Windows 2000复制产品的运行方式与Unix平台存在很大不同。

快照技术-容灾技术中的数据快照技术

远程镜像技术往往同快照技术结合起来实现远程备份，即通过镜像把数据备份到远程存储系统中，再用快照技术把远程存储系统中的信息备份到远程的磁带库、光盘库中。

快照技术分为两类，一类指针型，是通过软件对要备份的磁盘子系统的数据快速扫描，建立一个要备份数据的快照逻辑单元号LU

无论是生产、测试、灾难恢复，还是数据仓库应用，该系统件套件都能提供业务数据影像拷贝的生成和管理维护，使客户以不同的方式更好、更充分的利用业务数据，获得更大的增值效益。基于数据复制、保护和信息共享而设计 的复制管理系统件，提供了非常强大的功能：既可以在一个数据中心内部或者不同数据中心之间实现数据复制，也可以在不同部门之间实现信息共享，快速、有效地适应业务的灵活扩展，在竞争中获得领先优势。它可使用户在正常业务不受影响的情况下，实时提取当前在线业务数据。其“备份窗口”接近于零，可大大增加系统业务的连续性，为实现系统真正的7×24运转提供了保证。

发明内容

本发明是针对备份过程中所利用的快照技术的备份方法，以解决在计算机数据归档、存储、备份、远程容灾、灾难恢复中计算机存储空间利用率低和降低数据删除误判的几率。

本发明提出的是快照方式的备份方步包括以下步骤：

首先，在应用服务期安装一个客户端的基本模块，就如同给服务器增加了一个数据过滤器

其次，当用户往硬盘里面写入数据的时候，是按照字节方式写入，在写入到硬盘前，过滤器已经知道了数据的写入值，在不影响服务期的写入IO情况下同时通过网络传输到服务器的存储池里面。而数据库写入硬盘的方式是按照自己的规则，以完整交易为单位，字节的方式写入到硬盘上，这个时候，数据库写入到本地磁盘和写入到存储池里面的方式完全一致，数据库的写入方式模拟了数据库在本地硬盘的写入方式，这种数据库模拟写入方式，保证了数据库数据的严格一致性。由于写入CDP存储池的数据不需要扫描应用服务器的数据库存储硬盘，而是按照相同模式，直接写入CDP存储池，所以数据同步快速，更加保证了业务数据的一致性和完整性。

附图说明

图1、基于快照技术的备份方式图

具体实施方式

本发明是提出一种快照技术的备份方法，具体数据存储流程

上述方法其详细的步骤可分为如下几步：

当用户向应用系统写入数据的同时，也实时传输到HeartsOne-CDP的存储池里面，存储池自动可以按照你设定的时间(比如为1分钟)，将存储池中的该数据做一个快照，用户可以看到每一个时间点的全量数据。而且没有个数的限制。如果用户的数据丢失或者损毁的时候，直接从存储池里面恢复最新时间点的快照数据即可。

Claims (2)

1.一种基于快照技术的系统备份方法，其步骤如下：

首先，在应用服务期安装一个客户端的基本模块

其次，当用户往硬盘里面写入数据的时候，是按照字节方式写入，在写入到硬盘前，过滤器已经知道了数据的写入值，在不影响服务期的写入IO情况下同时通过网络传输到服务器的存储池里面。而数据库写入硬盘的方式是按照自己的规则，以完整交易为单位，字节的方式写入到硬盘上，这个时候，数据库写入到本地磁盘和写入到存储池里面的方式完全一致，数据库的写入方式模拟了数据库在本地硬盘的写入方式，这种数据库模拟写入方式，保证了数据库数据的严格一致性。由于写入CDP存储池的数据不需要扫描应用服务器的数据库存储硬盘，而是按照相同模式，直接写入CDP存储池，所以数据同步快速，更加保证了业务数据的一致性和完整性。

2.如权利要求1中所述的在应用服务期安装一个客户端的基本模块其目的是如同给服务器增加了一个数据过滤器。