CN107193690A - 实时备份数据的方法及其系统和备份设备 - Google Patents

实时备份数据的方法及其系统和备份设备 Download PDF

Info

Publication number
CN107193690A
CN107193690A CN201710337435.9A CN201710337435A CN107193690A CN 107193690 A CN107193690 A CN 107193690A CN 201710337435 A CN201710337435 A CN 201710337435A CN 107193690 A CN107193690 A CN 107193690A
Authority
CN
China
Prior art keywords
backup
data
unit
storage device
storage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710337435.9A
Other languages
English (en)
Inventor
沈炤宇
王奇鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen City's Computer Co Ltd
Original Assignee
Shenzhen City's Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen City's Computer Co Ltd filed Critical Shenzhen City's Computer Co Ltd
Priority to CN201710337435.9A priority Critical patent/CN107193690A/zh
Publication of CN107193690A publication Critical patent/CN107193690A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1458Management of the backup or restore process
    • G06F11/1464Management of the backup or restore process for networked environments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • G06F3/0607Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0631Configuration or reconfiguration of storage systems by allocating resources to storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/0644Management of space entities, e.g. partitions, extents, pools
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Abstract

本发明提供了一种实时备份数据的方法及其系统和备份设备,其中所述实现系统,包括存储设备和备份设备,备份设备直接从存储设备上实时提取数据保存到备份设备上,备份设备包括备份空间管理单元、存储设备管理单元和数据备份管理单元。本发明所述实时备份数据的方法及其实现系统和备份设备,通过将具有备份管理及SAN存储功能的备份设备与存储设备连接,在存储设备上确认变化量数据,读取该变化量数据并将其保存到备份设备的备份空间,再将所述变化量数据与之前备份的数据合并为一个新的完整的全备份数据的方式,使得数据备份可以实时进行并对业务服务器的业务系统性能影响小,备份方法简单,易于操作。

Description

实时备份数据的方法及其系统和备份设备
技术领域
本发明涉及备份数据技术领域,尤其涉及一种实时备份数据的方法及其系统和备份设备。
背景技术
如图1所示,现有主流备份技术是由备份服务器1通过业务服务器2、光纤连接设备3读取存储设备4中的业务数据,并将读取的数据保存到备份服务器1中,以实现对数据的安全保护。
但是,这种数据备份方法中,备份服务器1的数据读取方式与业务服务器2的操作系统及业务系统使用的软件平台有关,例如,若备份服务器1要备份oracle数据库,就需要通过oracle数据库的备份接口来读取数据,若备份服务器1要备份MS-SQL数据库,就需要通过MS-SQL数据库的备份接口来读取业数据,若备份服务器1要备份EXCHANGE邮件系统,就需要通过EXCHANGE软件的备份接口来读取数据。当备份服务器1收到备份数据时,会将其保存到备份介质中,并为其创建检索信息用于备份数据的管理。
因此,上述数据备份方法存在以下缺陷:
1. 由于数据备份对业务性能的影响比较明显,并且数据备份需要花费较长时间,因此备份数据一般需要安排在业务空闲时段进行,备份策略一般是每天备份一次;
2. 由于备份间隔时间较长,因此在出现系统灾难时,业务数据丢失量较大;
3. 数据备份方法复杂,针对不同的操作系统、软件平台均需要使用不同的备份方法;
4. 对使用者的要求高,不仅要求使用者熟悉备份系统,还要求熟悉操作系统及各种软件平台的管理;
5. 对于不断出现的新软件平台,需要不断更新备份系统与之匹配。
发明内容
为此,本发明所要解决的技术问题是:提供一种实时备份数据的方法及其系统和备份设备,使得数据的备份可以实时进行,而且对业务性能影响小,备份方法简单,易于操作。
于是,本发明提供了一种实时备份数据的方法,包括:将具有备份管理及SAN存储功能的备份设备与用于存储业务服务器数据的存储设备连接,使备份设备直接从所述存储设备实时提取数据并保存到备份设备,在备份设备上:
建立备份空间管理,将备份设备的硬盘配置成用于保存所述存储设备数据的存储池,当存储池空间不足时,扩展存储池,当存储池空间使用率达到阈值时,删除最早的备份数据;
建立存储设备的管理,定义需要备份的存储设备并可提取存储设备信息,同时创建扫描识别,可扫描存储设备中已经配置的数据卷并可提取数据卷信息;
建立数据备份管理,创建备份作业、创建数据备份的执行及保留策略,备份作业执行时向所述存储设备发出备份指令,在存储设备上确认变化量数据,读取该变化量数据并将其保存到备份设备的备份空间,备份设备将所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并登记备份信息。
其中,所述在存储设备上确认变化量数据为通过存储设备上差异数据块map表定位前一次备份到当前时间的变化量数据。
所述建立备份空间管理还包括:提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则更新存储池信息。
所述建立数据备份管理还包括:自动备份和自动备份清理,所述自动备份包括:扫描数据备份的执行及保留策略信息,判断是否达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份空间并登记备份信息;所述自动备份清理包括:扫描数据备份的执行及保留策略信息,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
所述创建备份作业,包括:输入备份作业名称、用于存放备份数据的存储池名称、需要备份的数据卷,在存储池中创建与数据卷对应的备份卷,并分配给存储设备进行识别,创建备份关系并定义为一致性备份组,登记所创建的备份作业信息;所述创建备份作业、创建数据备份的执行及保留策略,包括:选择备份作业,确定备份作业执行的间隔周期以及数据备份保留的分数,登记所创建的策略信息。
本发明还提供了一种实时备份数据的实现系统,包括用于存储业务服务器数据的存储设备和具有备份管理及SAN存储功能的备份设备,备份设备与所述存储设备连接,并直接从所述存储设备上实时提取数据保存到备份设备上,所述备份设备包括:备份空间管理单元、存储设备管理单元和数据备份管理单元,所述备份空间管理单元包括:
配置单元,用于将存储单元配置成存储池并判断存储池空间是否充足及存储池空间使用率是否达到阈值;
扩展单元,用于当存储池空间不足时扩展存储池;
删除单元,用于当存储池空间使用率达到阈值时删除最早备份数据;
存储合并单元,用于保存所述存储设备数据的备份设备硬盘所在单元,并用于将所述数据备份管理单元的处理单元发来的所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并保存,同时登记备份信息;
所述存储设备管理单元包括:
存储设备信息提取单元,用于定义需要备份的存储设备并可提取存储设备信息;
数据卷提取单元,用于创建扫描识别、可扫描存储设备中已经配置的数据卷并提取数据卷信息;
所述数据备份管理单元包括:
创建单元,用于创建备份作业、创建数据备份的执行及保留策略的创建单元;
处理单元,用于当备份作业执行时向所述存储设备发出备份指令,在存储设备上确认变化量数据、读取该变化量数据并将其发送给所述备份空间管理单元保存。
其中,所述备份空间管理单元还包括更新单元、自动备份单元和自动备份清理单元,配置单元提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则通过更新单元更新存储池信息,所述自动备份单元根据备份数据的执行及保留策略信息,判断是否达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份空间并登记备份信息;所述自动备份清理单元用于根据数据备份的执行及保留策略信息来判断需要处理的备份组,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
本发明还提供了一种备份设备,与用于存储业务服务器数据的存储设备连接时,可直接从所述存储设备上实时提取数据并保存到该备份设备上,该备份设备包括:备份空间管理单元、存储设备管理单元和数据备份管理单元,所述备份空间管理单元包括:
配置单元,用于将存储单元配置成存储池并判断存储池空间是否充足及存储池空间使用率是否达到阈值;
扩展单元,用于当存储池空间不足时扩展存储池;
删除单元,用于当存储池空间使用率达到阈值时删除最早备份数据;
存储合并单元,用于保存所述存储设备数据的备份设备硬盘所在单元,并用于将所述数据备份管理单元的处理单元发来的所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并保存,同时登记备份信息;
所述存储设备管理单元包括:
存储设备信息提取单元,用于定义需要备份的存储设备并可提取存储设备信息;
数据卷提取单元,用于创建扫描识别、可扫描存储设备中已经配置的数据卷并提取数据卷信息;
所述数据备份管理单元包括:
创建单元,用于创建备份作业、创建数据备份的执行及保留策略的创建单元;
处理单元,用于当备份作业执行时向所述存储设备发出备份指令,在存储设备上确认变化量数据、读取该变化量数据并将其发送给所述备份空间管理单元保存。
其中,所述备份空间管理单元还包括更新单元,配置单元提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则通过更新单元更新存储池信息。
所述数据备份管理单元还包括:自动备份单元和自动备份清理单元,所述自动备份单元用于根据备份数据的执行及保留策略,判断是非达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份空间并登记备份信息;所述自动备份清理单元用于根据数据备份的执行及保留策略信息来判断需要处理的备份组,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
本发明所述实时备份数据的方法及其实现系统和备份设备,通过将具有备份管理及SAN存储功能的备份设备与存储设备连接,在存储设备上确认变化量数据,读取该变化量数据并将其保存到备份设备的备份空间,再将所述变化量数据与之前备份的数据合并为一个新的完整的全备份数据的方式,使得数据的备份可以实时进行,对业务服务器的业务系统性能影响小,备份方法简单,易于操作。
附图说明
图1为现有技术中数据备份系统结构及数据走向示意图;
图2为本发明实施例所述实时数据备份实现系统结构及数据走向示意图;
图3为本发明实施例所述实时数据备份实现系统结构框图;
图4为本发明实施例所述建立备份空间存储池管理的流程示意图;
图5为本发明实施例所述建立存储设备管理的流程示意图;
图6为本发明实施例所述建立数据备份管理的流程示意图;
图7为本实施例所述实时备份数据方法的流程示意图。
具体实施方式
下面,结合附图对本发明进行详细描述。
本实施例提供了一种实时备份数据的方法及其实现系统和备份设备。如图2和图3所示,本实施例提供了一种实时备份数据的实现系统,该实现系统包括:用于存储业务服务器数据的存储设备4和具有备份管理及SAN存储功能的备份设备6,备份设备6与所述存储设备4连接,备份设备6直接从存储设备4上实时提取数据并保存到备份设备6上。
备份设备6包括:备份空间管理单元61、存储设备管理单元62和数据备份管理单元63。
备份空间管理单元61,包括:
存储合并单元611,用于保存所述存储设备数据的备份设备硬盘所在单元,并用于将所述数据备份管理单元的处理单元发来的所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并保存,同时登记备份信息;
配置单元612,用于将存储单元配置成存储池并判断存储池空间是否充足及存储池空间使用率是否达到阈值;
扩展单元613,用于当存储池空间不足时扩展存储池;
删除单元614,用于当存储池空间使用率达到阈值时删除最早备份数据。
存储设备管理单元62,包括:
存储设备信息提取单元621,用于定义需要备份的存储设备并可提取存储设备信息;
数据卷提取单元622,用于创建扫描识别、可扫描存储设备中已经配置的数据卷并提取数据卷信息。
数据备份管理单元63,包括:
创建单元631,用于创建备份作业、创建数据备份的执行及保留策略;
处理单元632,用于当备份作业执行时向所述存储设备4发出备份指令,提取所述存储设备中的数据并保存到备份设备4。
进一步,为了及时识别扩展增加的新硬盘,备份空间管理单元61还可以包括:更新单元615,配置单元612提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则通过更新单元615更新存储池信息。
为了便于自动备份数据及自动清理早期备份数据,数据备份管理单元63还包括:自动备份单元633和自动备份清理单元634,所述自动备份单元633根据数据备份的执行及保留策略信息,判断是否达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份设备的备份空间并登记备份信息;所述自动备份清理单元634用于根据数据备份的执行及保留策略信息来判断需要处理的备份组,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
与上述实时备份数据的实现系统相对应的,本实施例还提供了一种实时备份数据的方法,该方法包括:
使用自行开发的软件将一台x86服务器建成具有备份管理及SAN存储功能的备份设备6,并建立该备份设备6与需要进行数据备份的业务服务器存储设备4的连接;备份设备6从所述存储设备提取数据并保存到备份设备。本实施例中备份设备6使用磁盘作为备份数据的存放介质。
这里,SAN(Storage Area Network,存储区域网络),是一种专门为存储建立的独立于TCP/IP网络之外的专用网络。目前一般的SAN提供2Gb/S到4Gb/S的传输数率,同时SAN网络独立于数据网络存在,存取速度快。
如图4-6所示,在备份设备上,建立如下管理:
建立备份空间管理,将备份设备的硬盘配置成用于保存所述存储设备数据的存储池,当存储池空间不足时,扩展存储池,当存储池空间使用率达到阈值时,删除最早备份的数据;
建立存储设备的管理,定义需要备份的存储设备并可提取存储设备信息,同时创建扫描识别,可扫描存储设备中已经配置的数据卷并可提取数据卷信息;
建立数据备份管理,创建备份作业、创建数据备份的执行及保留策略,备份作业执行时向所述存储设备发出备份指令,在存储设备上确认变化量数据,读取该变化量数据并将其保存到备份设备的备份空间,备份设备将所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并登记备份信息。
所述建立备份空间管理、建立存储设备的管理、建立数据备份管理的方法不存在步骤的先后,只要建立相应的管理即可。
具体的,如图4所示,在建立备份空间管理时,还可以包括:
提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则更新存储池信息。
将备份设备的硬盘配置成用于保存所述存储设备数据的存储池,包括:输入存储池名称,选择新硬盘,将该新硬盘创建成存储池并登记信息。
所述扩展存储池,包括:选择存储池、选择新硬盘,将该新硬盘加入到存储池中并登记信息。
如图5所示,在建立存储设备的管理时,定义需要备份的存储设备包括:输入存储设备名称、IP地址、用户名和秘密,连接存储设备,并提取存储设备的存储信息,如序列号、FC(Fiber Channel,光纤通道技术)端口等,并登记。创建扫描识别包括:扫描存储卷,选择存储设备,连接存储提取数据卷信息,例如ID、数据卷名称、数据卷大小等,并登记信息。
如图6所示,在建立数据备份管理时,所述创建备份作业,包括:输入备份作业名称、用于存放备份数据的存储池名称、需要备份的数据卷,在存储池中创建与数据卷对应的备份卷,并分配给存储设备进行识别,创建备份关系并定义为一致性备份组,登记所创建的备份作业信息。
所述创建备份作业的执行及保留策略,包括:选择备份作业,确定备份作业执行的间隔周期以及数据备份保留的份数,登记所创建的策略信息。
进一步,在建立数据备份管理时,还可以包括:
自动备份,根据数据备份的执行及保留策略,判断是否达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份设备的备份空间并登记备份信息;
自动备份清理,根据数据备份的执行及保留策略信息来判断需要处理的备份组,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
尤其需要说明的是,本实施例中,备份数据采用实时备份的方式进行,其实现方法如图7所示,在存储设备上确认变化量数据,读取该变化量数据并将其保存到备份设备的备份空间,备份设备将所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并登记备份信息。其中,在存储设备上确认变化量数据,采用通过采用存储设备上差异数据块map表定位前一次备份到当前时间的变化量数据形式完成。
在本实施例中,所述备份设备为X86服务器,所述存储池的备份介质、与建立的设备空间管理、存储设备管理和数据备份管理设置在相同的设备上或者不同的设备上。例如:可以将备份管理软件与备份介质分开在不同的硬件设备上,备份介质也可以不使用X86服务器,而采用其它具备存储特性的设备类型。
使用上述实时备份数据的方法及其实现系统,本实施例还提供了一种备份设备6,用于存储业务服务器业务数据的备份数据,业务服务器业务数据存储在存储设备4中。
如图3所示,备份设备6与所述存储设备4连接,备份设备6从存储设备4上提取数据保存到备份设备6上。备份设备6包括:备份空间管理单元61、存储设备管理单元62和数据备份管理单元63。
其中,备份空间管理单元61、存储设备管理单元62和数据备份管理单元63与上述实现系统中的描述一致,在此不再重复描述。
本实施例所述的实时备份数据的方法及其实现系统和备份设备,具有如下有益效果:
1. 备份设备在进行实时数据备份时,对业务服务器的业务系统性能影响轻微;
2. 数据的实时备份,极大程度提高了数据备份的实时性,并减少数据丢失量;
3. 本实施例的实时数据备份,直接从存储设备上备份数据,彻底简化了数据备份方法,实现了使用同一种方法及其实现备份可以进行不同操作系统、不同软件平台下的不同数据的实时备份;
4. 大幅度降低了备份设备的难度,仅要求使用者熟悉本实施例提供的技术方案及备份设备即可;
5. 无需跟随软件平台的更新更新备份设备。
综上所述,本发明实施例所述实时备份数据的方法及其实现系统和备份设备,通过将具有备份管理及SAN存储功能的备份设备与存储设备连接,在存储设备上确认变化量数据,读取该变化量数据并将其保存到备份设备的备份空间,再将所述变化量数据与之前备份的数据合并为一个新的完整的全备份数据的方式,使得数据的备份可以实时进行,对业务服务器的业务系统性能影响小,备份方法简单,易于操作。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种实时备份数据的方法,其特征在于,包括:将具有备份管理及SAN存储功能的备份设备与用于存储业务服务器数据的存储设备连接,使备份设备直接从所述存储设备实时提取数据并保存到备份设备,在备份设备上:
建立备份空间管理,将备份设备的硬盘配置成用于保存所述存储设备数据的存储池,当存储池空间不足时,扩展存储池,当存储池空间使用率达到阈值时,删除最早的备份数据;
建立存储设备的管理,定义需要备份的存储设备并可提取存储设备信息,同时创建扫描识别,可扫描存储设备中已经配置的数据卷并可提取数据卷信息;
建立数据备份管理,创建备份作业、创建数据备份的执行及保留策略,备份作业执行时向所述存储设备发出备份指令,在存储设备上确认变化量数据,读取该变化量数据并将其保存到备份设备的备份空间,备份设备将所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并登记备份信息。
2.根据权利要求1所述的方法,其特征在于,所述在存储设备上确认变化量数据为通过存储设备上差异数据块map表定位前一次备份到当前时间的变化量数据。
3.根据权利要求1所述的方法,其特征在于,所述建立备份空间管理还包括:提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则更新存储池信息。
4.根据权利要求1所述的方法,其特征在于,所述建立数据备份管理还包括:自动备份和自动备份清理,所述自动备份包括:扫描数据备份的执行及保留策略信息,判断是否达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份空间并登记备份信息;所述自动备份清理包括:扫描数据备份的执行及保留策略信息,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
5.根据权利要求1所述的方法,其特征在于,所述创建备份作业,包括:输入备份作业名称、用于存放备份数据的存储池名称、需要备份的数据卷,在存储池中创建与数据卷对应的备份卷,并分配给存储设备进行识别,创建备份关系并定义为一致性备份组,登记所创建的备份作业信息;所述创建备份作业、创建数据备份的执行及保留策略,包括:选择备份作业,确定备份作业执行的间隔周期以及数据备份保留的分数,登记所创建的策略信息。
6.一种实时备份数据的实现系统,其特征在于,包括用于存储业务服务器数据的存储设备和具有备份管理及SAN存储功能的备份设备,备份设备与所述存储设备连接,并直接从所述存储设备上实时提取数据保存到备份设备上,所述备份设备包括:备份空间管理单元、存储设备管理单元和数据备份管理单元,所述备份空间管理单元包括:
配置单元,用于将存储单元配置成存储池并判断存储池空间是否充足及存储池空间使用率是否达到阈值;
扩展单元,用于当存储池空间不足时扩展存储池;
删除单元,用于当存储池空间使用率达到阈值时删除最早备份数据;
存储合并单元,用于保存所述存储设备数据的备份设备硬盘所在单元,并用于将所述数据备份管理单元的处理单元发来的所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并保存,同时登记备份信息;
所述存储设备管理单元包括:
存储设备信息提取单元,用于定义需要备份的存储设备并可提取存储设备信息;
数据卷提取单元,用于创建扫描识别、可扫描存储设备中已经配置的数据卷并提取数据卷信息;
所述数据备份管理单元包括:
创建单元,用于创建备份作业、创建数据备份的执行及保留策略的创建单元;
处理单元,用于当备份作业执行时向所述存储设备发出备份指令,在存储设备上确认变化量数据、读取该变化量数据并将其发送给所述备份空间管理单元保存。
7.根据权利要求6所述的实现系统,其特征在于,所述备份空间管理单元还包括更新单元、自动备份单元和自动备份清理单元,配置单元提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则通过更新单元更新存储池信息,所述自动备份单元根据备份数据的执行及保留策略信息,判断是否达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份空间并登记备份信息;所述自动备份清理单元用于根据数据备份的执行及保留策略信息来判断需要处理的备份组,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
8.一种备份设备,其特征在于,与用于存储业务服务器数据的存储设备连接时,可直接从所述存储设备上实时提取数据并保存到该备份设备上,该备份设备包括:备份空间管理单元、存储设备管理单元和数据备份管理单元,所述备份空间管理单元包括:
配置单元,用于将存储单元配置成存储池并判断存储池空间是否充足及存储池空间使用率是否达到阈值;
扩展单元,用于当存储池空间不足时扩展存储池;
删除单元,用于当存储池空间使用率达到阈值时删除最早备份数据;
存储合并单元,用于保存所述存储设备数据的备份设备硬盘所在单元,并用于将所述数据备份管理单元的处理单元发来的所述变化量数据与其之前备份的数据合并为一个新的完整的全备份数据,并保存,同时登记备份信息;
所述存储设备管理单元包括:
存储设备信息提取单元,用于定义需要备份的存储设备并可提取存储设备信息;
数据卷提取单元,用于创建扫描识别、可扫描存储设备中已经配置的数据卷并提取数据卷信息;
所述数据备份管理单元包括:
创建单元,用于创建备份作业、创建数据备份的执行及保留策略的创建单元;
处理单元,用于当备份作业执行时向所述存储设备发出备份指令,在存储设备上确认变化量数据、读取该变化量数据并将其发送给所述备份空间管理单元保存。
9.根据权利要求8所述的备份设备,其特征在于,所述备份空间管理单元还包括更新单元,配置单元提取并判断备份设备的硬盘使用状态,若硬盘为新硬盘,则将新硬盘配置成存储池候选盘,若硬盘为已经是存储池成员盘,则通过更新单元更新存储池信息。
10.根据权利要求8所述的备份设备,其特征在于,所述数据备份管理单元还包括:自动备份单元和自动备份清理单元,所述自动备份单元用于根据备份数据的执行及保留策略,判断是非达到备份周期,若是,则读取存储设备数据,将读取的数据保存到备份空间并登记备份信息;所述自动备份清理单元用于根据数据备份的执行及保留策略信息来判断需要处理的备份组,判断备份空间是否达到阈值,若是,则删除早期的数据备份,若不是,则继续判断是否超过保留数量,若是,则删除早期的数据备份。
CN201710337435.9A 2017-05-15 2017-05-15 实时备份数据的方法及其系统和备份设备 Pending CN107193690A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710337435.9A CN107193690A (zh) 2017-05-15 2017-05-15 实时备份数据的方法及其系统和备份设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710337435.9A CN107193690A (zh) 2017-05-15 2017-05-15 实时备份数据的方法及其系统和备份设备

Publications (1)

Publication Number Publication Date
CN107193690A true CN107193690A (zh) 2017-09-22

Family

ID=59872383

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710337435.9A Pending CN107193690A (zh) 2017-05-15 2017-05-15 实时备份数据的方法及其系统和备份设备

Country Status (1)

Country Link
CN (1) CN107193690A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108399580A (zh) * 2018-02-09 2018-08-14 国网浙江省电力有限公司信息通信分公司 电力行业全业务统一数据服务器系统
CN108492209A (zh) * 2018-02-09 2018-09-04 国网浙江省电力有限公司信息通信分公司 基于大数据的电力全业务数据系统
CN108647117A (zh) * 2018-04-26 2018-10-12 郑州云海信息技术有限公司 一种数据备份的方法、主系统、设备及计算机可读存储介质
CN111338844A (zh) * 2020-02-14 2020-06-26 无锡华云数据技术服务有限公司 一种数据库备份管理的方法及电子设备
CN112000514A (zh) * 2020-05-28 2020-11-27 苏州浪潮智能科技有限公司 一种存储设备存储用户数据用数据备份推荐方法及系统
CN112286735A (zh) * 2020-12-24 2021-01-29 深圳市科力锐科技有限公司 备份成功率确定方法、装置、设备及存储介质
CN112527561A (zh) * 2020-12-09 2021-03-19 广州技象科技有限公司 基于物联网云存储的数据备份方法及装置
CN116560912A (zh) * 2023-07-10 2023-08-08 北京鲸鲨软件科技有限公司 基于lvm的多路可移动介质数据实时备份及识别方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101610303A (zh) * 2008-06-17 2009-12-23 中兴通讯股份有限公司 多媒体数据自动备份方法及系统
CN102088361A (zh) * 2009-12-02 2011-06-08 成都市华为赛门铁克科技有限公司 数据备份设备、方法和系统
CN104866391A (zh) * 2015-05-13 2015-08-26 三星电子(中国)研发中心 一种基于增量信息系统的终端信息备份方法和装置
CN105190567A (zh) * 2013-03-06 2015-12-23 戴尔产品有限公司 用于管理存储系统快照的系统和方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101610303A (zh) * 2008-06-17 2009-12-23 中兴通讯股份有限公司 多媒体数据自动备份方法及系统
CN102088361A (zh) * 2009-12-02 2011-06-08 成都市华为赛门铁克科技有限公司 数据备份设备、方法和系统
CN105190567A (zh) * 2013-03-06 2015-12-23 戴尔产品有限公司 用于管理存储系统快照的系统和方法
CN104866391A (zh) * 2015-05-13 2015-08-26 三星电子(中国)研发中心 一种基于增量信息系统的终端信息备份方法和装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108399580A (zh) * 2018-02-09 2018-08-14 国网浙江省电力有限公司信息通信分公司 电力行业全业务统一数据服务器系统
CN108492209A (zh) * 2018-02-09 2018-09-04 国网浙江省电力有限公司信息通信分公司 基于大数据的电力全业务数据系统
CN108647117A (zh) * 2018-04-26 2018-10-12 郑州云海信息技术有限公司 一种数据备份的方法、主系统、设备及计算机可读存储介质
CN111338844A (zh) * 2020-02-14 2020-06-26 无锡华云数据技术服务有限公司 一种数据库备份管理的方法及电子设备
CN112000514A (zh) * 2020-05-28 2020-11-27 苏州浪潮智能科技有限公司 一种存储设备存储用户数据用数据备份推荐方法及系统
CN112000514B (zh) * 2020-05-28 2022-07-08 苏州浪潮智能科技有限公司 一种存储设备存储用户数据用数据备份推荐方法及系统
CN112527561A (zh) * 2020-12-09 2021-03-19 广州技象科技有限公司 基于物联网云存储的数据备份方法及装置
CN112527561B (zh) * 2020-12-09 2021-10-01 广州技象科技有限公司 基于物联网云存储的数据备份方法及装置
CN112286735A (zh) * 2020-12-24 2021-01-29 深圳市科力锐科技有限公司 备份成功率确定方法、装置、设备及存储介质
CN116560912A (zh) * 2023-07-10 2023-08-08 北京鲸鲨软件科技有限公司 基于lvm的多路可移动介质数据实时备份及识别方法
CN116560912B (zh) * 2023-07-10 2023-09-19 北京鲸鲨软件科技有限公司 基于lvm的多路可移动介质数据实时备份及识别方法

Similar Documents

Publication Publication Date Title
CN107193690A (zh) 实时备份数据的方法及其系统和备份设备
CN104378423B (zh) 元数据集群分布式存储系统及读取、写入存储数据的方法
CN101788890B (zh) 在一储存系统架构下产生一虚拟卷的方法及数据存取方法
CN100562842C (zh) 存储系统
EP2414928B1 (en) Data redistribution in data replication systems
CN107102914A (zh) 备份及恢复数据的方法及其实现系统和备份设备
CN108632338A (zh) 存储系统和用于提供自动存储发现的方法
US20060190698A1 (en) Network system and method for setting volume group in the network system
CN108076090A (zh) 数据处理方法和存储管理系统
CN102541990A (zh) 利用虚拟分区的数据库重新分布方法和系统
CN104113735A (zh) 一种分布式视频监控存储系统及其方法
CN105718217A (zh) 一种精简配置存储池数据一致性维护的方法及装置
CN105095103B (zh) 用于云环境下的存储设备管理方法和装置
CN103516755A (zh) 虚拟存储方法及设备
CN107357681A (zh) 基于salt的Zookeeper备份管理系统及方法
CN104994135B (zh) 存储系统中融合san及nas存储架构的方法及装置
CN104793981B (zh) 一种虚拟机集群的在线快照管理方法及装置
CN107426288A (zh) 一种基于存储网络的资源共享调度方法和装置
CN104205730B (zh) 网元数据访问方法、虚拟网元、网络管理服务器及网络管理系统
CN103677660B (zh) 信息处理设备和区域释放控制方法
CN106341448A (zh) 分布式存储方法、装置及系统
CN108241469A (zh) 一种数据存储方法、装置及系统
CN109213447A (zh) 一种san存储卷挂载、卸载方法及系统
CN109787914A (zh) 负载分担方法、装置及网络设备
CN110263047B (zh) 一种数据中心节点分配方法、装置、系统及计算机设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170922

RJ01 Rejection of invention patent application after publication