CN109660611B - 一种云备份的数据存储方法及存储系统的数据云备份方法 - Google Patents
一种云备份的数据存储方法及存储系统的数据云备份方法 Download PDFInfo
- Publication number
- CN109660611B CN109660611B CN201811506119.0A CN201811506119A CN109660611B CN 109660611 B CN109660611 B CN 109660611B CN 201811506119 A CN201811506119 A CN 201811506119A CN 109660611 B CN109660611 B CN 109660611B
- Authority
- CN
- China
- Prior art keywords
- cloud backup
- data
- disk
- backup
- cloud
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000013500 data storage Methods 0.000 title claims abstract description 21
- 238000011084 recovery Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 12
- 238000010586 diagram Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种云备份的数据存储方法、装置、云备份服务器和存储系统的数据云备份方法、装置及存储系统,该数据存储方法包括:获取云备份磁盘数据和云备份磁盘数据对应的云备份信息;利用云存储设备对云备份磁盘数据进行存储,并生成云备份磁盘数据对应的段数据;根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据;本发明利用记录的段数据确定磁盘在每次云备份对应的全部磁盘数据,使得云备份服务器不必重复存储同一磁盘多次云备份的相同磁盘数据,节省了存储空间,便于数据保护,并且使存储系统可以在磁盘初次云备份后,每次仅上传磁盘发生变化的磁盘数据,降低了进行云备份的磁盘数据上传时间。
Description
技术领域
本发明涉及云备份技术领域,特别涉及一种云备份的数据存储方法、装置、云备份服务器和存储系统的数据云备份方法、装置及存储系统。
背景技术
随着现代社会科技的发展,存储系统的应用越来越广泛。云备份是应用在存储系统上的一种业务。它指的是将存储系统上的一个或多个磁盘的磁盘数据,上传到云厂商的云备份服务器上,从而达到数据备份的效果,类似于将电脑上的数据上传到百度网盘的操作。其中,云厂商是提供云服务的厂商,常见的有阿里云,百度云,腾讯云等。
由于存储系统上的磁盘数量多,且每个磁盘在不同时间点可能会进行多次云备份,若云备份服务器按现有技术的方式,对存储系统中每个磁盘在不同时间点云备份的磁盘数据进行完整存储,不仅存储的磁盘数据量巨大,会出现很多重复数据,造成存储空间的浪费,并且使得存储系统在每次云备份上传磁盘数据的时间过多,不利于用户体验。
因此,如何能够使云备份服务器可以对云备份磁盘数据进行有效地组织管理,避免同一磁盘的重复数据的存储,节省存储空间,降低存储系统的进行云备份的磁盘数据上传时间,提高用户体验,是现今急需解决的问题。
发明内容
本发明的目的是提供一种云备份的数据存储方法、装置、云备份服务器和存储系统的数据云备份方法、装置及存储系统,以避免云备份服务器对同一磁盘的重复数据的存储,节省存储空间,降低存储系统的进行云备份的磁盘数据上传时间。
为解决上述技术问题,本发明提供一种云备份的数据存储方法,包括:
获取云备份磁盘数据和所述云备份磁盘数据对应的云备份信息;其中,所述云备份信息包括来源信息和云备份版本信息;
利用云存储设备对所述云备份磁盘数据进行存储,并生成所述云备份磁盘数据对应的段数据;
根据所述云备份信息,记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据。
可选的,所述根据所述云备份信息,记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,包括:
根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应磁盘在本次云备份的全部磁盘数据对应的段数据。
可选的,所述云备份信息对应的存储系统为初次云备份时,所述根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,包括:
利用所述系统根目录,记录所述来源信息中的存储系统ID信息、存储系统名称信息和所述云备份版本信息中的云备份状态信息;
利用所述备份表,记录所述来源信息中的磁盘UUID信息和磁盘名称信息;
利用所述迭代表,记录本次云备份对应的所述云备份版本信息中的备份时间信息、备份类型信息和备份数据量信息;
利用所述段数据引导表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据大小信息;
利用所述段数据表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据。
可选的,所述磁盘不为初次云备份时,所述根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,包括:
利用所述迭代表,记录本次云备份对应的所述云备份版本信息中的备份时间信息、备份类型信息和备份数据量信息;
利用所述段数据引导表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据大小信息;其中,所述磁盘各自的云备份磁盘数据包括所述云备份磁盘数据中的磁盘数据和所述磁盘在预设次云本备份中的磁盘数据;
利用所述段数据表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据。
可选的,该方法还包括:
获取数据恢复信息;其中,所述数据恢复信息包含磁盘名称和备份时间;
根据所述数据恢复信息,获取对应的云备份版本的段数据;
根据所述段数据,从所述云存储设备中确定对应的云备份磁盘数据,并恢复至指定磁盘中。
本发明还提供了一种云备份的数据存储装置,包括:
获取模块,用于获取云备份磁盘数据和所述云备份磁盘数据对应的云备份信息;其中,所述云备份信息包括来源信息和云备份版本信息;
生成模块,用于利用云存储设备对所述云备份磁盘数据进行存储,并生成所述云备份磁盘数据对应的段数据;
记录模块,用于根据所述云备份信息,记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据。
本发明还提供了一种云备份服务器,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上述任意一项所述的云备份的数据存储方法的步骤。
本发明还提供了一种存储系统的数据云备份方法,包括:
获取云备份指令;
判断所述云备份指令对应的磁盘是否为初次云备份;
若否,则根据所述磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或所述云备份信息和所述云备份信息对应的云备份数据;其中,所述云备份数据为所述本次云备份的磁盘数据与所述预设次云备份的磁盘数据不同的磁盘数据。
本发明还提供了一种存储系统的数据云备份装置,包括:
指令获取模块,用于获取云备份指令;
判断模块,用于判断所述云备份指令对应的磁盘是否为初次云备份;
生成发送模块,用于若不为初次云备份,则根据所述磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或所述云备份信息和所述云备份信息对应的云备份数据;其中,所述云备份数据为所述本次云备份的磁盘数据与所述预设次云备份的磁盘数据不同的磁盘数据。
此外,本发明还提供了一种存储系统,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现上述所述的存储系统的数据云备份方法的步骤。
本发明所提供的一种云备份的数据存储方法,包括:获取云备份磁盘数据和云备份磁盘数据对应的云备份信息;其中,云备份信息包括来源信息和云备份版本信息;利用云存储设备对云备份磁盘数据进行存储,并生成云备份磁盘数据对应的段数据;根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据;
可见,本发明通过根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,可以利用记录的段数据确定磁盘在每次云备份对应的全部磁盘数据,使得云备份服务器不必重复存储同一磁盘多次云备份的相同磁盘数据,节省了存储空间,便于数据保护,并且使存储系统可以在磁盘初次云备份后,每次仅上传磁盘发生变化的磁盘数据,降低了存储系统的进行云备份的磁盘数据上传时间,提高了用户体验。此外,本发明还提供了一种云备份的数据存储装置、云备份服务器和一种存储系统的数据云备份方法、装置及存储系统,同样具有上述有益效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例所提供的一种云备份的数据存储方法的流程图;
图2为本发明实施例所提供的一种云备份服务器的元数据结构示意图;
图3为本发明实施例所提供的一种云备份的数据存储装置的结构图;
图4为本发明实施例所提供的一种存储系统的数据云备份方法的流程图;
图5为本发明实施例所提供的一种存储系统的数据云备份装置的结构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参考图1,图1为本发明实施例所提供的一种云备份的数据存储方法的流程图。该方法可以包括:
步骤101:获取云备份磁盘数据和云备份磁盘数据对应的云备份信息;其中,云备份信息包括来源信息和云备份版本信息。
其中,本步骤中的云备份磁盘数据可以为云备份服务器接收的存储系统发送的进行本次云备份的磁盘发送的磁盘数据。本步骤中的云备份信息可以为存储系统发送的包含云备份磁盘数据来源的信息(来源信息,如该存储系统ID、名称和云备份磁盘数据对应的磁盘的UUID和名称等)以及云备份磁盘数据版本的信息(云备份版本信息,如本次云备份的备份时间、备份类型和相对之前预设次云备份的版本变化的磁盘数据的信息等)。
可以理解的是,本实施例中云备份服务器接收的云备份磁盘数据和对应的云备份信息,可以为存储系统中进行云备份的磁盘的全部磁盘数据及对应的云备份信息,如该磁盘为初次云备份时,该存储系统可以将该磁盘需要进行云备份的全部磁盘数据和对应的云备份信息发送到云备份服务器;也可以为存储系统中进行云备份的磁盘中与之前预设次云备份中已上传的磁盘数据不同的磁盘数据及对应的云备份信息,如该磁盘不为初次云备份时,该存储系统可以将该磁盘需要进行云备份的与之前预设次云备份中的磁盘数据不同的磁盘数据和对应的云备份信息发送到云备份服务器。本实施例对此不做任何限制。
具体的,对于本步骤中获取云备份磁盘数据的具体方式,可以由设计人员根据实用场景和用户需求自行设置,如云备份服务器可以以数据块的形式接收云备份磁盘数据,即存储系统可以以数据块的形式向云备份服务器上传进行云备份的磁盘数据。
需要说明的是,本实施例是以云备份服务器接收存储系统发送的云备份磁盘数据和对应的云备份信息为例进行的展示,如存储系统可以将初次云备份的磁盘需要云备份的全部磁盘数据和对应的云备份信息发送到云备份服务器进行该磁盘的初次云备份,该磁盘再次云备份时,该存储系统可以将该磁盘需要进行云备份的磁盘数据中与预设次云备份(如初次云备份)发送的磁盘数据不同的磁盘数据和对应的云备份信息发送到云备份服务器进行该磁盘的本次云备份。云备份服务器还可以仅接收存储系统发送的云备份信息,如存储系统中需要进行云备份的磁盘不为初次云备份时,若本次云备份的磁盘数据与预设次云备份已发送的磁盘数据相同或仅为预设次云备份已发送的磁盘数据中的部分,如该磁盘相对于预设次云备份已发送的磁盘数据,在本次云备份之前删除了部分磁盘数据,则存储系统可以直接将该磁盘本次云备份的磁盘数据对应的云备份信息发送到云备份服务器,使云备份服务器了解该磁盘本次云备份的磁盘数据。
步骤102:利用云存储设备对云备份磁盘数据进行存储,并生成云备份磁盘数据对应的段数据。
其中,本步骤中的数据段可以为云备份服务器中存储的一种元数据,即云备份服务器自身生成的用于管理云存储设备存储的云备份磁盘数据的数据。其中,段数据与用户数据(云备份磁盘数据)息息相关,它相当于用户数据的索引目录。通过这些目录,可以有效的对用户数据进行管理。
可以理解的是,本步骤目的可以为通过生成云备份磁盘数据对应的段数据,可以利用段数据对云备份磁盘数据进行有效的管理,从而实现快速增删改查数据的目的。
步骤103:根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据。
可以理解的是,本步骤的目的可以为利用云备份信息,记录进行本次云备份的磁盘需要在本次云备份中的全部磁盘数据对应的段数据,即利用云备份信息,在云备份服务器中通过元数据记录进行本次云备份的存储系统、存储系统中的磁盘、磁盘云备份的全部磁盘数据对应的段数据之间对应关系,以使云备份服务器可以确定每个云备份的存储系统中的磁盘在不同的云备份版本(如备份时间)备份的全部磁盘数据对应的段数据,从而利用段数据找到存储在云存储设备中的云备份磁盘数据,实现磁盘数据的恢复。
其中,本步骤中记录的云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,可以为进行云备份的存储系统中的磁盘在本次云备份需要备份的全部磁盘数据对应的段数据,如存储系统中仅有1个磁盘需要进行云备份,且为初次云备份时,本步骤中云备份信息对应的磁盘在本次云备份的全部磁盘数据,可以为存储系统上传到云备份服务器,并存储到云存储设备中的全部云备份磁盘数据;如存储系统中仅有1个磁盘需要进行云备份,且不为初次云备份时,本步骤中云备份信息对应的磁盘在本次云备份的全部磁盘数据,可以为存储系统上传到云备份服务器,并存储到云存储设备中的全部云备份磁盘数据和云存储设备中在之前预设次云备份存储的全部或部分云备份磁盘数据。本实施例对此不做任何限制。
具体的,对于本步骤中的云备份信息的具体内容,可以由设计人员根据实用场景和用户需求自行设置,如可以包括如该存储系统ID、名称和云备份磁盘数据对应的磁盘的UUID(Universally Unique Identifier,通用唯一识别码)和名称等的来源信息,以及如本次云备份的备份时间、备份类型和相对之前预设次云备份的版本变化的磁盘数据的信息等的云备份版本信息。只要云备份服务器可以通过云备份信息,确定进行云备份的存储系统中的磁盘在本次云备份中需要备份的全部磁盘数据,本实施例对此不做任何限制。
对应的,对于本步骤中云备份服务器根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据的具体方式,即云备份服务器的元数据组织管理云存储设备存储的云备份磁盘数据的具体方式,可以由设计人员根据实用场景和用户需求自行设置,如图2所示,云备份服务器中的元数据一共有5层,从上到下分别是系统根目录、备份表、迭代表、段数据引导表和段数据表,通过这5层元数据去管理真实的用户数据(云存储设备存储的云备份磁盘数据),即本步骤可以为根据云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录云备份信息对应磁盘在本次云备份的全部磁盘数据对应的段数据。只要云备份服务器可以根据云备份信息,记录进行云备份的磁盘在本次云备份的全部磁盘数据对应的段数据,即记录磁盘每次云备份与段数据的对应关系,本实施例对此不做任何限制。
具体的,云备份服务器采用如图2所示的5层元数据去管理真实的用户数据时,系统根目录、备份表、迭代表、段数据引导表和段数据表可以以文件夹和配置文件的形式在云备份服务器中记录存储,如系统根目录可以用来下存放了一个配置文件,该配置文件可以如表1所示,写明了存储系统的系统编号,系统名称以及目前该系统是否已经激活了云备份功能。即云备份信息对应的存储系统为初次云备份时,本步骤可以利用系统根目录,记录云备份信息中来源信息中的存储系统ID信息、存储系统名称信息和云备份信息中云备份版本信息中的云备份状态信息。
表1系统根目录中的配置文件内容展示表
存储系统ID | 存储系统名称 | 云备份状态 |
000000000000 | C90 | 是 |
备份表下存放的配置文件,可以如表2所示,存放磁盘的UUID以及磁盘的名字,UUID是磁盘的唯一标识码。配置文件以磁盘的UUID命名,如果有多个磁盘,则有多个配置文件,配置文件与磁盘一一对应。即云备份信息对应的存储系统中磁盘为初次云备份时,本步骤可以利用备份表,记录来源信息中的磁盘UUID信息和磁盘名称信息。
表2备份表中的配置文件内容展示表
磁盘UUID | 磁盘名称 |
0001111023334894700000 | cloud-test1 |
迭代表下可以存在一个或多个文件夹,文件夹以磁盘的UUID命名,每一个文件夹对应一个磁盘,每个文件夹下面包含一个或多个配置文件,如表3所示,存放了每一个磁盘的备份时间、备份类型和备份数据量。配置文件从1开始,以迭代次数(云备份次数)进行命名,第一次云备份(初次云备份)的文件名叫1,第10代的文件名叫10。云备份信息对应的存储系统中磁盘在每次云备份时,本步骤可以利用迭代表,记录本次云备份对应的云备份版本信息中的备份时间信息、备份类型信息和备份数据量信息。
表3迭代表中的配置文件内容展示表
备份时间 | 备份类型 | 备份数据量 |
2018-10-23 08:00:00 | 全量 | 200MB |
段数据引导表可以用来索引不同磁盘不同云备份次数(迭代次数)的段数据表。该目录下根据磁盘数量存在一个或者多个文件夹,文件夹以磁盘的UUID命名,每一个文件夹对应一个磁盘。每个文件夹下面根据迭代次数存在一个或者多个配置文件,每个配置文件记录了该云备份次数备份的磁盘数据对应的段数据的大小。即本步骤可以利用段数据引导表,记录本次云备份对应的磁盘各自的云备份磁盘数据对应的段数据大小信息,其中,若本次云备份对应的磁盘不为初次云备份,则记录的段数据大小信息不仅包含本次云备份上传的云备份磁盘数据中的磁盘数据对应的段数据大小信息,还可以包含磁盘在预设次云本备份(如初次云备份、上一次云备份或之前全部次云备份)中的磁盘数据对应的段数据大小信息,即与预设次本备份相同部分的磁盘数据对应的段数据大小信息。
段数据与用户数据息息相关,它相当于用户数据的索引目录。通过这些目录,可以有效的对用户数据进行管理。段数据表的文件夹下可以根据磁盘数量存在一个或者多个文件夹,文件夹以磁盘的UUID命名,每一个文件夹对应一个磁盘,每个文件夹下面根据迭代次数存在一个或者多个元数据压缩文件。即本步骤可以利用段数据表,记录本次云备份对应的磁盘各自的云备份磁盘数据对应的段数据。其中,本次云备份对应的磁盘各自的云备份磁盘数据可以仅为本次云备份上传的云备份磁盘数据,如磁盘在初次云备份时,段数据表可以记录的该磁盘在本次云备份的云备份磁盘数据对应的段数据,可以为该磁盘所在存储系统发送的该磁盘的磁盘数据对应的段数据;也可以为本次云备份上传的云备份磁盘数据和预设次云备份上传的云备份磁盘数据,磁盘在非初次云备份时,段数据表可以记录的该磁盘在本次云备份的云备份磁盘数据对应的段数据,可以为该磁盘所在存储系统发送的该磁盘的磁盘数据对应的段数据和该磁盘在本次云备份中与预设次云备份时发送的相同的磁盘数据对应的段数据。
可以理解的是,上述文件的组织方式类似于一个表格,包含表格头和若干数据段。表格头记录了数据段的数量。数据段就是用户数据的索引。每一个数据段能索引的数据量是256K,最大可以有60000个数据段,也就是说每个元数据压缩文件所能索引的数据量大约在14.7GB。
对应的,通过上述组织方式,有效的把不同磁盘,同一磁盘多次云备份的磁盘数据有效的进行管理,便于磁盘数据的保护与恢复,并且使云备份可以增量上传数据,即同一磁盘第一次上传是上传完整数据,之后每次上传都是只上传每次发生变化的数据,而通过迭代表加段数据表的管理,可以分清同一磁盘的不同次数的上传内容,当需要将这些数据恢复时,便可以整合到一起统一恢复。
需要说明的是,本实施例所提供的方法还可以包括云备份磁盘数据的恢复过程,即本实施例还可以包括:获取数据恢复信息;其中,数据恢复信息包含磁盘名称和备份时间;根据数据恢复信息,获取对应的云备份版本的段数据;根据段数据,从云存储设备中确定对应的云备份磁盘数据,并恢复至指定磁盘中的步骤。即云备份服务器可以根据接收的存储系统发送的数据恢复信息,确定存储系统要恢复的磁盘的云备份版本,从而找到该云备份版本对应的段数据,并利用该段数据索引到该云备份版本的全部磁盘数据,将磁盘数据恢复到指定磁盘中,实现云备份磁盘数据的恢复。具体的,对于数据恢复信息的具体内容,可以由设计人员自行设置,云备份服务器可以根据数据恢复信息,获取对应的云备份版本的段数据,本实施例对此不做任何限制。
本实施例中,本发明实施例通过根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,可以利用记录的段数据确定磁盘在每次云备份对应的全部磁盘数据,使得云备份服务器不必重复存储同一磁盘多次云备份的相同磁盘数据,节省了存储空间,便于数据保护,并且使存储系统可以在磁盘初次云备份后,每次仅上传磁盘发生变化的磁盘数据,降低了存储系统的进行云备份的磁盘数据上传时间,提高了用户体验。
请参考图3,图3为本发明实施例所提供的一种云备份的数据存储装置的结构图。该装置可以包括:
获取模块100,用于获取云备份磁盘数据和云备份磁盘数据对应的云备份信息;其中,云备份信息包括来源信息和云备份版本信息;
生成模块200,用于利用云存储设备对云备份磁盘数据进行存储,并生成云备份磁盘数据对应的段数据;
记录模块300,用于根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据。
本实施例中,本发明实施例通过记录模块300根据云备份信息,记录云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,可以利用记录的段数据确定磁盘在每次云备份对应的全部磁盘数据,使得云备份服务器不必重复存储同一磁盘多次云备份的相同磁盘数据,节省了存储空间,便于数据保护,并且使存储系统可以在磁盘初次云备份后,每次仅上传磁盘发生变化的磁盘数据,降低了存储系统的进行云备份的磁盘数据上传时间,提高了用户体验。
本发明实施例还提供了一种云备份服务器,包括:存储器,用于存储计算机程序;处理器,用于执行计算机程序时实现如上述实施例所提供的云备份的数据存储方法的步骤。
请参考图4,图4为本发明实施例所提供的一种存储系统的数据云备份方法的流程图。该方法可以包括:
步骤201:获取云备份指令。
其中,本步骤中的云备份指令可以为存储系统接收或生成的确定需要对存储系统中对应的磁盘进行云备份的指令,如存储系统可以按预设时间间隔生成云备份指令,对存储系统中的全部或部分磁盘进行云备份。
步骤202:判断云备份指令对应的磁盘是否为初次云备份;若否,则进入步骤203。
可以理解的是,本步骤的目的可以为通过判断云备份指令对应的磁盘是否为初次云备份,确定存储系统中需要进行云备份的磁盘是否需要在本次云备份将需要备份的全部磁盘数据发送到云备份服务器;若为初次云备份,则可以将该磁盘在本次云备份需要备份的全部磁盘数据和对应的云备份信息,发送到云备份服务器。
步骤203:根据磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或云备份信息和云备份信息对应的云备份数据;其中,云备份数据为本次云备份的磁盘数据与预设次云备份的磁盘数据不同的磁盘数据。
可以理解的是,本步骤的目的可以为存储系统在云备份指令对应的磁盘不为初次云备份,即需要进行云备份的磁盘不需要在本次云备份将需要备份的全部磁盘数据发送到云备份服务器时,对比磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,若与预设次云备份的磁盘数据存在不同的磁盘数据,则将与预设次云备份的磁盘数据不同的磁盘数据和对应的云备份信息发送到云备份服务器,若与预设次云备份的磁盘数据不存在不同的磁盘数据,即该磁盘与预设次云备份的磁盘相比,未发生变化或仅删除了部分磁盘数据,则将对应的云备份信息发送到云备份服务器。
具体的,对于云备份信息的具体内容,可以由设计人员根据实用场景和用户需求自行设置,只要云备份服务器可以根据云备份信息,确定磁盘在本次云备份中备份的全部磁盘数据,即利用云备份信息,在以前云备份的磁盘数据和本次云备份上传的磁盘数据中找到本次云备份中需要备份的全部磁盘数据,本实施例对此不做任何限制。
本实施例中,本发明实施例通过根据磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或云备份信息和云备份信息对应的云备份数据,使云备份服务器不必重复存储同一磁盘多次云备份的相同磁盘数据,节省了存储空间,便于数据保护,并且使存储系统可以在磁盘初次云备份后,每次仅上传磁盘发生变化的磁盘数据,降低了存储系统的进行云备份的磁盘数据上传时间,提高了用户体验。
请参考图5,图5为本发明实施例所提供的一种存储系统的数据云备份装置的结构图。该装置可以包括:
指令获取模块400,用于获取云备份指令;
判断模块500,用于判断云备份指令对应的磁盘是否为初次云备份;
生成发送模块600,用于若不为初次云备份,则根据磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或云备份信息和云备份信息对应的云备份数据;其中,云备份数据为本次云备份的磁盘数据与预设次云备份的磁盘数据不同的磁盘数据。
本实施例中,本发明实施例通过生成发送模块600根据磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或云备份信息和云备份信息对应的云备份数据,使云备份服务器不必重复存储同一磁盘多次云备份的相同磁盘数据,节省了存储空间,便于数据保护,并且使存储系统可以在磁盘初次云备份后,每次仅上传磁盘发生变化的磁盘数据,降低了存储系统的进行云备份的磁盘数据上传时间,提高了用户体验。
此外,本发明实施例还提供了一种存储系统,包括:存储器,用于存储计算机程序;处理器,用于执行计算机程序时实现上述实施例所提供的存储系统的数据云备份方法的步骤。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置、云备份服务器及存储系统而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
以上对本发明所提供的一种云备份的数据存储方法、装置、云备份服务器和存储系统的数据云备份方法、装置及存储系统进行了详细介绍。本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以对本发明进行若干改进和修饰,这些改进和修饰也落入本发明权利要求的保护范围内。
Claims (8)
1.一种云备份的数据存储方法,其特征在于,包括:
获取云备份磁盘数据和所述云备份磁盘数据对应的云备份信息;其中,所述云备份信息包括来源信息和云备份版本信息;
利用云存储设备对所述云备份磁盘数据进行存储,并生成所述云备份磁盘数据对应的段数据;
根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应磁盘在本次云备份的全部磁盘数据对应的段数据;
所述磁盘不为初次云备份时,所述根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,包括:
利用所述迭代表,记录本次云备份对应的所述云备份版本信息中的备份时间信息、备份类型信息和备份数据量信息;
利用所述段数据引导表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据大小信息;其中,所述磁盘各自的云备份磁盘数据包括所述云备份磁盘数据中的磁盘数据和所述磁盘在预设次云本备份中的磁盘数据;
利用所述段数据表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据。
2.根据权利要求1所述的云备份的数据存储方法,其特征在于,所述云备份信息对应的存储系统为初次云备份时,所述根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,包括:
利用所述系统根目录,记录所述来源信息中的存储系统ID信息、存储系统名称信息和所述云备份版本信息中的云备份状态信息;
利用所述备份表,记录所述来源信息中的磁盘UUID信息和磁盘名称信息;
利用所述迭代表,记录本次云备份对应的所述云备份版本信息中的备份时间信息、备份类型信息和备份数据量信息;
利用所述段数据引导表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据大小信息;
利用所述段数据表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据。
3.根据权利要求1或2所述的云备份的数据存储方法,其特征在于,还包括:
获取数据恢复信息;其中,所述数据恢复信息包含磁盘名称和备份时间;
根据所述数据恢复信息,获取对应的云备份版本的段数据;
根据所述段数据,从所述云存储设备中确定对应的云备份磁盘数据,并恢复至指定磁盘中。
4.一种云备份的数据存储装置,其特征在于,包括:
获取模块,用于获取云备份磁盘数据和所述云备份磁盘数据对应的云备份信息;其中,所述云备份信息包括来源信息和云备份版本信息;
生成模块,用于利用云存储设备对所述云备份磁盘数据进行存储,并生成所述云备份磁盘数据对应的段数据;
记录模块,用于根据所述云备份信息,记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据;其中,根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应磁盘在本次云备份的全部磁盘数据对应的段数据;所述磁盘不为初次云备份时,所述根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应的磁盘在本次云备份的全部磁盘数据对应的段数据,包括:利用所述迭代表,记录本次云备份对应的所述云备份版本信息中的备份时间信息、备份类型信息和备份数据量信息;利用所述段数据引导表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据大小信息;其中,所述磁盘各自的云备份磁盘数据包括所述云备份磁盘数据中的磁盘数据和所述磁盘在预设次云本备份中的磁盘数据;利用所述段数据表,记录本次云备份对应的所述磁盘各自的云备份磁盘数据对应的段数据。
5.一种云备份服务器,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至3任意一项所述的云备份的数据存储方法的步骤。
6.一种存储系统的数据云备份方法,其特征在于,包括:
获取云备份指令;
判断所述云备份指令对应的磁盘是否为初次云备份;
若否,则根据所述磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或所述云备份信息和所述云备份信息对应的云备份数据;其中,所述云备份数据为所述本次云备份的磁盘数据与所述预设次云备份的磁盘数据不同的磁盘数据;所述云备份信息包括来源信息和云备份版本信息,以使云存储设备对所述本次云备份的磁盘数据进行存储,并生成所述本次云备份的磁盘数据对应的段数据;并根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应磁盘在本次云备份的全部磁盘数据对应的段数据。
7.一种存储系统的数据云备份装置,其特征在于,包括:
指令获取模块,用于获取云备份指令;
判断模块,用于判断所述云备份指令对应的磁盘是否为初次云备份;
生成发送模块,用于若不为初次云备份,则根据所述磁盘在本次云备份的磁盘数据和在预设次云备份的磁盘数据,生成并向云备份服务器发送云备份信息或所述云备份信息和所述云备份信息对应的云备份数据;其中,所述云备份数据为所述本次云备份的磁盘数据与所述预设次云备份的磁盘数据不同的磁盘数据;所述云备份信息包括来源信息和云备份版本信息,以使云存储设备对所述本次云备份的磁盘数据进行存储,并生成所述本次云备份的磁盘数据对应的段数据;并根据所述云备份信息,利用系统根目录、备份表、迭代表、段数据引导表和段数据表记录所述云备份信息对应磁盘在本次云备份的全部磁盘数据对应的段数据。
8.一种存储系统,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求6所述的存储系统的数据云备份方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811506119.0A CN109660611B (zh) | 2018-12-10 | 2018-12-10 | 一种云备份的数据存储方法及存储系统的数据云备份方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811506119.0A CN109660611B (zh) | 2018-12-10 | 2018-12-10 | 一种云备份的数据存储方法及存储系统的数据云备份方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109660611A CN109660611A (zh) | 2019-04-19 |
CN109660611B true CN109660611B (zh) | 2021-08-31 |
Family
ID=66113818
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811506119.0A Active CN109660611B (zh) | 2018-12-10 | 2018-12-10 | 一种云备份的数据存储方法及存储系统的数据云备份方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109660611B (zh) |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101739310A (zh) * | 2009-12-10 | 2010-06-16 | 上海爱数软件有限公司 | 一种循环备份的方法及装置 |
CN103095843A (zh) * | 2013-01-28 | 2013-05-08 | 刘海峰 | 一种基于版本矢量的数据备份方法及客户端 |
CN103729262A (zh) * | 2012-10-12 | 2014-04-16 | 武汉海康威视系统技术有限公司 | 操作系统热备份方法、装置及文件系统重构方法 |
CN104010042A (zh) * | 2014-06-10 | 2014-08-27 | 浪潮电子信息产业股份有限公司 | 一种云服务的重复数据删除的备份机制 |
CN104536849A (zh) * | 2015-01-20 | 2015-04-22 | 成都携恩科技有限公司 | 一种基于云计算的数据备份方法 |
CN104778095A (zh) * | 2015-01-20 | 2015-07-15 | 成都携恩科技有限公司 | 一种云平台数据管理方法 |
CN105095300A (zh) * | 2014-05-16 | 2015-11-25 | 阿里巴巴集团控股有限公司 | 一种数据库备份方法及系统 |
CN105162869A (zh) * | 2015-09-18 | 2015-12-16 | 久盈世纪(北京)科技有限公司 | 一种用于数据备份管理的方法与设备 |
CN106341485A (zh) * | 2016-09-27 | 2017-01-18 | 珠海市魅族科技有限公司 | 一种云存储的方法及装置 |
CN107391312A (zh) * | 2017-07-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 数据云备份方法及系统 |
CN107888636A (zh) * | 2016-09-30 | 2018-04-06 | 杭州海康威视数字技术股份有限公司 | 基于云存储的数据处理方法及系统 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10997211B2 (en) * | 2010-12-23 | 2021-05-04 | Mongodb, Inc. | Systems and methods for database zone sharding and API integration |
US20160100004A1 (en) * | 2014-10-06 | 2016-04-07 | International Business Machines Corporation | Data replication across servers |
-
2018
- 2018-12-10 CN CN201811506119.0A patent/CN109660611B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101739310A (zh) * | 2009-12-10 | 2010-06-16 | 上海爱数软件有限公司 | 一种循环备份的方法及装置 |
CN103729262A (zh) * | 2012-10-12 | 2014-04-16 | 武汉海康威视系统技术有限公司 | 操作系统热备份方法、装置及文件系统重构方法 |
CN103095843A (zh) * | 2013-01-28 | 2013-05-08 | 刘海峰 | 一种基于版本矢量的数据备份方法及客户端 |
CN105095300A (zh) * | 2014-05-16 | 2015-11-25 | 阿里巴巴集团控股有限公司 | 一种数据库备份方法及系统 |
CN104010042A (zh) * | 2014-06-10 | 2014-08-27 | 浪潮电子信息产业股份有限公司 | 一种云服务的重复数据删除的备份机制 |
CN104536849A (zh) * | 2015-01-20 | 2015-04-22 | 成都携恩科技有限公司 | 一种基于云计算的数据备份方法 |
CN104778095A (zh) * | 2015-01-20 | 2015-07-15 | 成都携恩科技有限公司 | 一种云平台数据管理方法 |
CN105162869A (zh) * | 2015-09-18 | 2015-12-16 | 久盈世纪(北京)科技有限公司 | 一种用于数据备份管理的方法与设备 |
CN106341485A (zh) * | 2016-09-27 | 2017-01-18 | 珠海市魅族科技有限公司 | 一种云存储的方法及装置 |
CN107888636A (zh) * | 2016-09-30 | 2018-04-06 | 杭州海康威视数字技术股份有限公司 | 基于云存储的数据处理方法及系统 |
CN107391312A (zh) * | 2017-07-31 | 2017-11-24 | 郑州云海信息技术有限公司 | 数据云备份方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN109660611A (zh) | 2019-04-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10705919B2 (en) | Data backup using metadata mapping | |
US8856080B2 (en) | Backup using metadata virtual hard drive and differential virtual hard drive | |
US9703640B2 (en) | Method and system of performing incremental SQL server database backups | |
CN106933703B (zh) | 一种数据库数据备份的方法、装置及电子设备 | |
CN107528872B (zh) | 一种数据恢复方法、装置及云存储系统 | |
CN102662992A (zh) | 一种海量小文件的存储、访问方法及装置 | |
CN111078464A (zh) | 一种备份数据的方法、装置和系统 | |
CN107885616A (zh) | 一种基于文件系统解析的海量小文件备份恢复方法 | |
CN108572888B (zh) | 磁盘快照创建方法和磁盘快照创建装置 | |
CN112800019A (zh) | 基于Hadoop分布式文件系统的数据备份方法及系统 | |
CN109753381B (zh) | 一种基于对象存储的持续数据保护方法 | |
CN113419897B (zh) | 一种文件处理方法、装置、电子设备及其存储介质 | |
WO2009031158A2 (en) | Method and apparatus for network based data recovery | |
US20100312753A1 (en) | File management apparatus, method, and program | |
CN109660611B (zh) | 一种云备份的数据存储方法及存储系统的数据云备份方法 | |
TW201227268A (en) | Data backup system and data backup and retrival method | |
CN107704208B (zh) | 一种元数据的修复方法、装置及介质 | |
CN103714089A (zh) | 一种实现云数据库回滚的方法及系统 | |
CN105787135A (zh) | 一种用于数据库日志备份的方法与设备 | |
CN111625397B (zh) | 业务日志备份方法、集群、装置、电子设备及存储介质 | |
US11645333B1 (en) | Garbage collection integrated with physical file verification | |
JP2010152707A (ja) | データベースのバックアップ方法及びデータベースシステム | |
US20160026390A1 (en) | Method of deleting information, computer program product and computer system | |
CN111858487A (zh) | 数据更新方法及设备 | |
CN104809033A (zh) | 一种备份方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |