CN103605585B - 一种基于数据发现的智能备份方法 - Google Patents

Abstract

本申请公开了一种基于数据发现的智能备份方法，该方法应用于备份客户端与备份服务器组成的数据备份系统，包括：备份客户端基于数据发现技术，实时记录备份保护路径下数据的数据对象描述信息；根据备份策略条件向备份服务器发送备份请求；备份服务器获取所述数据对象描述信息，根据所述数据对象描述信息从预先配置的备份策略中匹配出对应的备份子策略，根据匹配出的备份子策略对所述备份客户端备份保护路径下数据进行数据备份。

Description

一种基于数据发现的智能备份方法

技术领域

本申请涉及计算机数据存储与备份技术领域，尤其涉及一种基于数据发现的智能备份方法。

背景技术

在计算机领域，备份是指为了防止计算机数据因计算机故障、病毒、人为因素等原因而造成的数据丢失及损坏，从而对原始数据进行复制或拷贝进行单独存储，通过原始数据的备份副本可以提供在数据丢失或故障后的数据恢复的一种技术手段。

当前对数据的备份方式主要有两种，分别是定时备份和实时备份。定时备份通常都是根据预先设置的备份策略自动执行备份，又叫计划备份，而两个备份计划之间的时间间隔，则叫备份窗口。实时备份是指对数据进行自动监控，连续捕获和备份数据变化，只要数据发生变化，便实时、准确的备份下来，数据安全性更高，RPO可以为0。

随着IT业务系统的发展和普及，数据量增长速度非常明显，并且根据IT业务系统的不同而产生的数据种类繁多，数据的重要程度不一，访问频率也不一。有些数据经常会被访问和发生变化；有些数据自创建后，就不会发生变化；有些数据无关紧要，不需要进行备份保护；有些数据不再会被访问，但还长期存放在主存储空间中。现有技术中，无法准确地获取这些数据的价值和访问特点对不同类型及重要性的数据进行差别化备份。并且备份策略的应用主要依靠人工，无法根据数据的类型及生命周期进行智能的匹配。

发明内容

本申请提供了一种基于数据发现的智能备份方法，能够根据不同数据的实际情况自动进行差异化备份。

本申请实施例提供的一种基于数据发现的智能备份方法，该方法应用于备份客户端与备份服务器组成的数据备份系统，该方法包括：

A、备份客户端基于数据发现技术，实时记录备份保护路径下数据的数据对象描述信息；根据备份策略条件向备份服务器发送备份请求；

B、备份服务器获取所述数据对象描述信息，根据所述数据对象描述信息从预先配置的备份策略中匹配出对应的备份子策略，根据匹配出的备份子策略对所述备份客户端备份保护路径下数据进行数据备份。

较佳地，所述数据对象描述信息包括数据的文件类型、数据被访问的时间、数据被访问的频率、数据被修改的时间、数据被修改的频率、文件的数据量大小或以上内容的任意组合。

较佳地，步骤A所述备份客户端基于数据发现技术，实时记录备份保护路径下数据对象描述信息包括：

A1、备份客户端基于备份保护路径生成数据类型分布表，数据类型分布表中记录每一类型数据在存储分区或目录中的路径；

A2、以文件为单位，在数据类型分布表中记录的存储分区或目录中查找和识别数据，以文件为对象生成数据对象描述信息；

A3、根据对文件对象数据的访问、修改操作来更新数据在指定时间段的访问次数和修改次数，并且根据目录或文件数据的新建、修改或删除操作更新数据类型分布表中相应路径记录。

较佳地，步骤A3之后进一步包括：

A4、将数据类型分布表和数据对象描述信息按照转储策略转移存储到指定存储介质中；

步骤B所述备份服务器获取所述数据对象描述信息包括：备份服务器从所述指定存储介质中获取数据类型分布表和数据对象描述信息。

较佳地，所述备份子策略包括：数据类型、备份方式、备份窗口、数据保留周期、备份介质类型和满足备份的条件。

较佳地，所述备份方式包括：实时备份、周期性备份或不备份。

较佳地，步骤A之前进一步包括：备份客户端从备份服务器获取本备份客户端的备份策略及备份保护路径。

从以上技术方案可以看出，根据数据发现得到的数据对象描述信息自动应用对应的备份子策略，从而实现基于不同数据类型的重要程度等级来智能的匹配备份策略，在提升重要数据的安全性的同时，降低数据备份管理的复杂性，提升主存储设备、备份存储设备的存储空间利用价值；在数据服务器众多，数据类型繁多和数据量庞大的情况下，通过数据发现机制的数据分类和数据量统计，有利于更好更智能的管理数据的备份容灾情况，以及设计更好的备份策略。

附图说明

图1为本申请提供的智能备份方法中备份客户端的处理流程图；

图2为本申请提供的智能备份方法中备份服务器的处理流程图。

具体实施方式

本申请提供的一种基于数据发现的智能备份方法，备份客户端基于数据发现技术，实时记录备份保护路径下数据的数据对象描述信息；根据备份策略条件向备份服务器发送备份请求；备份服务器获取所述数据对象描述信息，根据所述数据对象描述信息从预先配置的备份策略中匹配出对应的备份子策略，根据匹配出的备份子策略对所述备份客户端进行数据备份。本申请方案可以提高数据的备份保护等级，提高数据的安全性，提升主存储的资源利用价值，降低数据备份产生的资源浪费。

本申请文件中所指的数据发现机制，是指通过在客户端主机中安装发现代理，通过发现代理获取和分析客户端主机中的数据及其类型，并对其进行分类、访问记录、变化、数据量统计等的一系列措施的过程。

本申请文件中的智能备份，是指可以在备份系统根据业务需要及政策规定预先设定好备份策略（包括数据类型、备份方式、备份窗口、数据保留周期、备份介质类型），然后备份系统根据备份客户端选择保护的数据类型范围和数据的访问及变化情况自动匹配相应的备份策略进行数据备份保护，不需要人工干预和定期检查的过程。

为使本申请技术方案的技术原理、特点以及技术效果更加清楚，以下结合具体实施例对本申请技术方案进行详细阐述。

本申请技术方案主要包括两个部分，第一个部分是基于数据发现机制的数据识别和分类、数据统计、数据变化记录，并主动向备份服务器发起备份请求；第二个部分是根据数据发现的结果，针对不同的数据类型来智能的选择和调整备份方式和备份策略，并根据需要管理和调整备份策略。

本申请涉及的数据备份系统主要包括备份客户端和备份服务器，两者通过网络连接。在备份客户端实现数据发现机制中的数据类型识别，数据量统计及数据访问记录，在备份服务器端实现备份策略管理及备份策略应用和执行情况。

备份客户端的处理过程如图1所示，包括如下步骤：

步骤101：获取备份策略和保护路径：从备份服务器获取本备份客户端的备份策略及备份保护路径。

步骤102：装载或生成数据类型分布表：所述数据类型分布表基于备份保护路径生成，所述数据类型分布表中记录每一类型数据在存储分区或目录中的位置，用于应用备份策略和执行备份。

步骤103：实时记录备份保护路径下数据的数据对象描述信息：

根据备份策略中的数据保护类型，以文件为单位在在数据类型分布表中记录的存储分区或目录中查找和识别数据，对所识别的数据进行分类，并以文件为对象生成数据对象描述信息。所述数据分类的方式可以包括但不限于：根据文件扩展名对数据进行分类；对文件的数据量大小进行统计并分类。根据对文件对象数据的访问、修改操作来更新数据在指定时间段的访问次数和修改次数，并且根据目录或文件数据的新建、修改或删除操作更新分布表中相应路径记录。

步骤104：转移存储数据对象描述信息：将上述数据类型分布表和数据对象描述信息按照转储策略转移存储到指定存储介质中，可供其他程序分析和访问；

步骤105：发起备份：根据备份策略条件发起指定数据类型或指定数据文件对象的备份。

基于上述步骤，备份客户端完成对指定计算机路径下的数据识别、数据分类、数据类型大小统计及修改次数相关信息的记录，并同时保持对文件或目录删除操作进行实时的更新。

备份服务器的处理过程如图2所示，包括如下步骤：

步骤201：制定和修改备份策略：备份策略中可以包含一个以上的子策略，每一条子策略用于指定特定数据类型在特定条件下执行具体的备份条件和参数，备份子策略包括：数据类型、备份方式、备份窗口、数据保留周期、备份介质类型、满足备份的条件；根据各方面要求制定和修改不同数据类型的备份策略。所述备份方式包括：实时备份、周期性备份或不备份。

步骤202：从指定存储介质获取数据类型分布表和数据对象描述信息。

步骤203：根据所述数据对象描述信息从预先配置的备份策略中匹配出对应的备份子策略。

步骤204：发送匹配出的备份子策略和备份保护路径到客户端；

步骤205：根据匹配出的备份子策略对所述备份客户端备份保护路径下数据进行数据备份。

基于本申请的技术方案，结合两个具体的实施例来进一步阐述。

实施例一包括如下步骤：

步骤301：安装部署备份客户端和备份服务器端。

计算机A：为文档服务器，已安装Windows2003操作系统、系统的D、E盘为数据盘，存有各部门设计图稿、工程文档、参考资料以及其他视频文件，在计算机A上安装部署备份客户端；

计算机B：已安装Windows2003操作系统，在计算机B上安装部署备份服务器，将备份客户端的备份服务器地址设置为备份服务器的地址。

步骤302：制定备份策略，添加备份子策略：在备份服务器上新建文档备份策略1。

在文档备份策略1中添加Office文档备份子策略，内容为：数据类型为Office文档（包含所有Office文档类型）；当数据的修改频率大于等于5次/小时，执行实时备份，无备份窗口；当数据的修改频率小于5次/小时，则每修改超过5次则执行一次备份，同时每天晚20：00定期执行一次备份，备份窗口最长为一天；当数据的最后访问时间超过1年时，备份数据后，对原数据进行删除，以释放主存储空间；使用磁盘备份介质保留最近三个月的数据，使用磁带介质保护最近三年的数据；

在文档备份策略1中添加设计图稿文档备份子策略，内容为：数据类型为扩展名为CAD的文档；当数据的修改频率大于等于10次/小时，执行实时备份，无备份窗口；当数据的修改频率小于10次/小时，但每修改超过10次则执行一次备份，同时每天晚20：00定期执行一次备份，备份窗口最长为一天；当数据的最后访问时间超过1年时，备份数据后，对原数据进行删除，以释放主存空间；使用磁盘备份介质保留最近三个月的数据，使用磁带介质保护最近三年的数据。

步骤303：选择备份客户端的数据保护路径为D:\和E:\；

步骤304：在备份服务器机器B上将备份客户端机器A选择应用文档备份策略1，备份系统的数据发现机制将自动分析和识别备份客户端机器A中D:\和E:\下的Office文档及CAD文档，并针对这两类数据的数据变化情况自动选择备份子策略。

实施例二包括如下步骤：

步骤401：安装部署备份客户端和备份服务器端：

计算机C为数据库服务器，已安装Windows2003操作系统、SQL Server数据库服务器，在计算机C上安装部署备份客户端；

计算机D已安装Windows2003操作系统，在计算机D上安装部署备份服务器，将备份客户端的备份服务器地址设置为备份服务器的地址；

步骤402：制定备份策略，添加备份子策略：在备份服务器上新建数据库备份策略2；

在数据库备份策略2中添加SQL Server数据库备份子策略，内容为：数据类型为SQL Server数据库；当数据库的修改频率大于等于20次/分钟，执行实时备份，无备份窗口；当数据的修改频率小于20次/分钟，但每修改超过20次则执行一次备份，同时每天晚20：00定期执行一次备份，备份窗口最长为一天；使用磁盘备份介质保留最近三个月的数据，使用磁带介质保护最近三年的数据；

在备份服务器计算机D上将备份客户端计算机C选择应用数据库备份策略2，备份系统将自动根据计算机C的数据类型情况及数据变化情况自动选择数据类型的备份子策略。

通过本申请技术方案，可以实现以下效果：

根据数据发现得到的数据对象描述信息自动应用对应的备份子策略，从而实现基于不同数据类型的重要程度等级来智能的匹配备份策略，在提升重要数据的安全性的同时，降低数据备份管理的复杂性，提升主存储设备、备份存储设备的存储空间利用价值；在数据服务器众多，数据类型繁多和数据量庞大的情况下，通过数据发现机制的数据分类和数据量统计，有利于更好更智能的管理数据的备份容灾情况，以及设计更好的备份策略。

以上所述仅为本申请的较佳实施例而已，并不用以限制本申请的保护范围，凡在本申请技术方案的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本申请保护的范围之内。

Claims (6)

1.一种基于数据发现的智能备份方法，该方法应用于备份客户端与备份服务器组成的数据备份系统，其特征在于，该方法包括：

A、备份客户端基于数据发现技术，实时记录备份保护路径下数据的数据对象描述信息；根据备份策略条件向备份服务器发送备份请求；

B、备份服务器获取所述数据对象描述信息，根据所述数据对象描述信息从预先配置的备份策略中匹配出对应的备份子策略，根据匹配出的备份子策略对所述备份客户端备份保护路径下数据进行数据备份；

其中，

步骤A所述备份客户端基于数据发现技术，实时记录备份保护路径下数据对象描述信息包括：

A1、备份客户端基于备份保护路径生成数据类型分布表，数据类型分布表中记录每一类型数据在存储分区或目录中的路径；

A2、以文件为单位，在数据类型分布表中记录的存储分区或目录中查找和识别数据，以文件为对象生成数据对象描述信息；

A3、根据对文件对象数据的访问、修改操作来更新数据在指定时间段的访问次数和修改次数，并且根据目录或文件数据的新建、修改或删除操作更新数据类型分布表中相应路径记录。

2.根据权利要求1所述的方法，其特征在于，所述数据对象描述信息包括数据的文件类型、数据被访问的时间、数据被访问的频率、数据被修改的时间、数据被修改的频率、文件的数据量大小或以上内容的任意组合。

3.根据权利要求1所述的方法，其特征在于，步骤A3之后进一步包括：

A4、将数据类型分布表和数据对象描述信息按照转储策略转移存储到指定存储介质中；

步骤B所述备份服务器获取所述数据对象描述信息包括：备份服务器从所述指定存储介质中获取数据类型分布表和数据对象描述信息。

4.根据权利要求1所述的方法，其特征在于，所述备份子策略包括：数据类型、备份方式、备份窗口、数据保留周期、备份介质类型和满足备份的条件。

5.根据权利要求4所述的方法，其特征在于，所述备份方式包括：实时备份、周期性备份或不备份。

6.根据权利要求1至5任一项所述的方法，其特征在于，步骤A之前进一步包括：备份客户端从备份服务器获取本备份客户端的备份策略及备份保护路径。