CN102510340A

CN102510340A - 利用普通Internet网络实现异地快速备份的方法

Info

Publication number: CN102510340A
Application number: CN2011103073496A
Authority: CN
Inventors: 孙磊
Original assignee: Inspur Electronic Information Industry Co Ltd
Current assignee: Inspur Electronic Information Industry Co Ltd
Priority date: 2011-10-11
Filing date: 2011-10-11
Publication date: 2012-06-20

Abstract

本发明提供一种利用普通Internet网络实现异地快速备份的方法，采用指纹技术，从整个企业的冗余备份中识别出特定文件，从而不需要传输和存储冗余数据，使得在广域网上传输的数据量大大减少，步骤如下：对于小型的远程分支结构，只用安装轻量级代理软件；对于大中型远程分支结构，部署存储池，该存储池由浪潮服务器和存储阵列组成，存储该分支结构的数据，在总部的备份中心部署大型的存储池，将远程分支机构的数据进行全局重复数据删除后，通过广域网传输到总部备份中心；对于备份中心的数据，同样通过带宽优化的方式传输到异地的容灾中心，从而实现了广域网环境下企业数据的远程集中备份和异地容灾；安装在客户端的轻量级代理负责在本地执行全局唯一文件和文件段辨识。它只需要在网络上发送增量数据，这样将备份带宽减少50%或者更多。

Description

利用普通Internet网络实现异地快速备份的方法

技术领域

本发明涉及一种网络技术领域, 具体地说是一种利用普通Internet网络实现异地快速备份的方法。

背景技术

一直以来，广域网低带宽下的备份都困扰着企业。随着企业的发展，企业拥有越来越多的远程分支结构，这些分支机构的数据量也日益增长，将这些数据进行远程集中管理和备份非常重要，但广域网低带宽下如何安全可靠地备份这些日益增长的数据，一直困扰着这些企业。本发明采用业界领先的重复删除技术，极大的减低了广域网下需要传输的数据量，并通过在网络上传输加密后的数据，提供了一种安全可靠的广域网备份解决方案。

对于拥有多个不同远程分支结构的公司来说，将IT基础设施分配到远程站点，并将本地文件、电子邮件、演示文件等主要保存在远程文件服务器上，以便提高网络性能，并在发生数据丢失的时候快速恢复。这些企业选择在远程进行本地站点信息的备份，而不是通过广域网将数据发送到中央备份服务器。但是远程本地备份具有很大的风险，例如：

不利于中央集中控制和监控，从而会导致错误。

执行远程备份的人可能无法严格遵守明确规定的集中流程和安全策略。比如磁带是否已经系统安全的转移到存储库中，并保存在不受温度和湿度变化影响的安全环境中？备份是否按照规定每天进行等？

远程的分支机构缺乏技能熟练的IT人员，或者其他不易远程解决的技术问题，备份和恢复操作可能无法正确执行。

许多研究和现场调查表明，远程站点上的数据备份通常由非IT专业人员进行。有时候，人们插入了错误的磁带，但却没有人去检查。对系统错误的处理通常不正确，但没有人向IT中央机构上报；可能更槽糕的是，磁带装载流程发生故障时，还没有进行备份。由于远程员工通常无法正确检查备份是否成功完成，所以也无人知道磁带中的数据是否得到了正确的保存。

随着保存在远程本地文件服务器上的文件数量和容量的大幅增加，通过广域网连接进行远程数据的完全备份需要占用大量的带宽，费用也可能很高。随着企业的发展，这个问题变得日益严重，并在远程站点和数据中心的备份系统之间造成了瓶颈。要解决这些广域网环境下的问题，需要备份解决方案具有下面方面的能力。

发明内容

本发明的目的是提供一种在网络上传输的数据量要尽可能少，占用的带宽尽可能低，备份时间要尽可能短，尽量避免在本地备份，将备份磁带保存在现场或者发送到异地的方式，要采取一种安全的方式在广域网上传输数据操作要简单，易于管理，不需要复杂的操作的Internet网络异地快速备份的方法。

本发明的目的是按以下方式实现的，采用指纹技术，从整个企业的冗余备份中识别出特定文件，从而不需要传输和存储冗余数据，使得在广域网上传输的数据量大大减少，步骤如下：

对于小型的远程分支结构，只用安装轻量级代理软件；

对于大中型远程分支结构，部署存储池，该存储池由浪潮服务器和存储阵列组成，存储该分支结构的数据，

在总部的备份中心部署大型的存储池，将远程分支机构的数据进行全局重复数据删除后，通过广域网传输到总部备份中心；

对于备份中心的数据，同样通过带宽优化的方式传输到异地的容灾中心，从而实现了广域网环境下企业数据的远程集中备份和异地容灾；

安装在客户端的轻量级代理负责在本地执行全局唯一文件和文件段辨识。它只需要在网络上发送增量数据，这样将备份带宽减少50%或者更多。

该解决方案可以灵活部署，对于小型的远程分支结构来说，只用安装轻量级代理软件就可以；对于大中型远程分支结构来说，可以部署存储池，该存储池由浪潮服务器和存储阵列组成，存储该分支结构的数据；在总部的备份中心，部署大型的存储池。将远程分支机构的数据进行全局重复数据删除后，通过广域网传输到总部备份中心，对于备份中心的数据来说，同样可以通过带宽优化的方式传输到异地的容灾中心。从而实现了广域网环境下企业数据的远程集中备份和异地容灾。

安装在客户端的轻量级代理负责在本地执行全局唯一文件和文件段辨识。它只需要在网络上发送增量数据，这样可以将备份带宽减少50%或者更多。

本发明的优异效果是：采用该解决方案后，备份数据量减少了50倍，备份可以更快的完成，结合本发明提供的并行处理能力，可以大大缩短整个备份时间。管理的数据量的减少，所需要的存储操作人员也随着减少，从而减少了备份中心需要雇用的人力成本。同时，该解决方案可以大大降低在远程办公室备份数据需要的维护成本，包括系统维护、磁带管理、运送物理介质到存储库站点等。通过基于WEB的用户界面远程管理，可以实现基于磁盘的自动备份，从而消除了手动备份系统操作，提高了备份和恢复的成功率。

本发明特点：

降低带宽占用，满足广域网下的备份需求

通过WAN传输到备份中心的数据可以减少50-500倍，更少的数据在网络上传输，满足广域网（比如互联网VPN等）下的数据集中备份。

备份时间窗口小，对业务系统影响小

因为传输的数据量大大减少，并可以同时并行启动多个备份作业，减小了整个任务的备份时间，减少了对企业业务系统的影响。

加密传输和存储，保证数据的安全性

在数据被发送到网络前，会对数据进行加密；同时，数据在存储介质中保存的时候，也可以选择对数据进行加密；另外，通过对数据加密密钥的统一管理，可以防止密钥的意外泄漏等；整个数据传输过程中，支持数据的断点续传。所有这些方式，最大程度地保证了数据在广域网上传输以及物理保存时的数据安全性。

高可靠性，提供更高级别的数据保障

该方案支持冗余结点的在线Fail Over，在数据结点出现故障的时候，通过冗余结点自动接管备份任务，保证了数据的高可靠性。同时，提供Disaster Recovery等策略，对用户数据提供了更高级别的数据保障。

全局重复数据删除，极大地节省了存储空间。

附图说明

图1是本发明的方法与传统备份方案相比可以节省的带宽。

具体实施方式

在本解决方案中，因为只需要传输新的唯一文件段，利用当前的广域网（比如互联网VPN），只需要很少的带宽就可以将远程数据传送到数据中心。

实施例

在通常的系统中，每天约有13%的文件需要修改和备份。本发明采用了独特的指纹技术，可以全局唯一辨识文件和文件段，实际修改的字节数量只有总量的1-2%。例如，假设一家公司有TB字节的数据，数据保存期为16周，如果每周执行4次增量备份和1次完全备份，那么80次备份需要16TB以上的存储空间；而本解决方案中，会保存优化的初始备份和16周的增量备份，16周后，通常只需要1.5TB的空间就可以保存这16周内所有的文件版本。总共可以减少50倍的备份数据量。

由于采用了全局重复删除技术，冗余数据在传输前已经进行了辨识处理，在整个企业数据系统中只保存一份唯一的数据。保存的数据量只有原有整个数据总量的10-50分之一，从而极大的节省了存储空间。对于备份中心的物理空间、电源、空调等能耗大大减小，满足绿色存储的需求。

基于WEB的管理，简单易用

整个方案数据备份策略制定、用户管理、监控报警、容量管理、系统报表、软件在线升级等都可以通过WEB方式进行管理。界面美观易用，只需要简单的点击就可以轻松完成整个备份方案的设置，降低了管理的复杂度。

降低客户成本

该方案中，通过减少备份数据，减化备份操作等，减低了对IT管理人员的数量和技能的要求；同时，降低了系统维护、磁带管理、运送物理介质到存储库站点等的维护成本；降低了备份中心能耗、物理空间等。通过一系列的方式，降低了企业备份的建设和维护成本。

除说明书所述的技术特征外，均为本专业技术人员的已知技术。

Claims

1.利用普通Internet网络实现异地快速备份的方法, 其特征在于采用指纹技术，从整个企业的冗余备份中识别出特定文件，从而不需要传输和存储冗余数据，使得在广域网上传输的数据量大大减少，步骤如下：

对于小型的远程分支结构，只用安装轻量级代理软件；

安装在客户端的轻量级代理负责在本地执行全局唯一文件和文件段辨识，它只需要在网络上发送增量数据，这样将备份带宽减少50%或者更多。