CN104317676A - 一种数据备份容灾方法 - Google Patents
一种数据备份容灾方法 Download PDFInfo
- Publication number
- CN104317676A CN104317676A CN201410671753.5A CN201410671753A CN104317676A CN 104317676 A CN104317676 A CN 104317676A CN 201410671753 A CN201410671753 A CN 201410671753A CN 104317676 A CN104317676 A CN 104317676A
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- backed
- flag information
- recovery method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据备份容灾方法,包括如下步骤:接收备份数据的控制指令;基于控制指令,选择备份方式,将待备份数据进行分割处理,获得多个数据块;分别获取各个数据块中的第一标志信息,并在已备份的数据中查找是否有相同的第一标志信息;当查找结果表明没有相同的第一标志信息时,将待备份数据存储至本地存储端,再由本地存储端将待备份数据存储至云存储端,进而实现了能够有效控制传输的数据量,减少等待时间的技术效果。
Description
技术领域
本发明涉及存储设备安全技术领域,尤其涉及一种数据备份容灾方法。
背景技术
随着信息技术的不断发展,数据的安全性也越来越受到重视,人们需要对数据进行备份容灾保护,以便于在出现数据损毁时能够及时得到恢复。现有的数据备份需要特定的设备,这样对数据保护的效果较差,而且,成本也比较高。后期出现云存储,云存储的最大特点是可以为用户减少成本,但是,在实际运用中,由于网络等原因,使得对数据进行存储时,传输数据量大,等待时间长的技术问题。
发明内容
本发明实施例通过提供一种数据备份容灾方法,解决了现有技术中对数据进行云存储时,由于网络的原因,使得传输数据量大,等待时间长的技术问题,进而实现了能够有效控制传输的数据量,减少等待时间的技术效果。
本发明实施例提供一种数据备份容灾方法,包括如下步骤:
接收备份数据的控制指令;
基于控制指令,选择备份方式,将待备份数据进行分割处理,获得多个数据块;
分别获取各个数据块中的唯一标志信息,并在已备份的数据中查找是否有相同的唯一标志信息;
当查找结果表明没有相同的唯一标志信息时,将待备份数据存储至本地存储端,再由本地存储端将待备份数据存储至云存储端。
进一步地,分别获取各个数据块中的第一标志信息,并在已备份的数据中查找是否有相同的第一标志信息具体包括:
分别通过哈希数学运算获得各个数据块中的第一标志信息;
获取已备份数据中的第二标志信息;
将第一标志信息与第二标志信息进行逐次比较,获得比较结果。
进一步地,备份方式具体包括全备份,增量备份,差异备份以及合成全备份中的任意一种。
进一步地,当查找结果表明没有相同的唯一标志信息之后,对待备份数据进行加密和压缩处理。
采用本发明中的一个或者多个技术方案,具有如下有益效果:
由于采用了接收备份数据的控制指令;基于控制指令,选择备份方式,将待备份数据进行分割处理,获得多个数据块;分别获取各个数据块中的唯一标志信息,并在已备份的数据中查找是否有相同的唯一标志信息;当查找结果表明没有相同的唯一标志信息时,将待备份数据存储至本地存储端,再由本地存储端将待备份数据存储至云存储端,进而解决了现有技术中对数据进行云存储时,由于网络的原因,使得传输数据量大,等待时间长的技术问题,进而实现了能够有效控制传输的数据量,减少等待时间的技术效果。
附图说明
图1为本发明实施例中数据备份容灾方法的流程示意图。
具体实施方式
本发明实施例通过提供一种数据备份容灾方法,解决了现有技术中对数据进行云存储时,由于网络的原因,使得传输数据量大,等待时间长的技术问题,进而实现了能够有效控制传输的数据量,减少等待时间的技术效果。
为了解决上述对数据进行云存储时,由于网络的原因,使得传输数据量大,等待时间长的技术问题,下面将结合说明书附图以及具体的实施方式对本发明的技术方案进行详细的说明。
本发明提供的一种数据备份容灾方法,如图1所示,包括:S101,接收备份数据的控制指令;S102,基于控制指令,选择备份方式,将待备份数据进行分割处理,获得多个数据块;S103,分别获取各个数据块中的唯一标志信息,并在已备份的数据中查找是否有相同的唯一标志信息;S104,当查找结果表明没有相同的唯一标志信息时,将待备份数据存储至本地存储端,再由本地存储端将待备份数据存储至云存储端。
在具体的实施方式中,该S101中接收备份数据的控制指令是接收用户对选择的数据进行备份的选中操作,在S101之后,系统根据该控制指令,选中备份方式,具体地,该备份方式具体可以使全备份,增量备份,差异备份以及合成全备份中的任意一种,其中,全备份是对数据中使用过的数据进行备份,增量备份时在一次全备份或上一次增量备份后,以后每次备份只备份与前一次相比增加或者被修改的部分数据,差异备份是指一次全备份后到进行差异备份的这段时间内,对增加或者修改的数据进行备份,合成全备份是指通过将已经备份的数据与新变化的数据合成而生成的备份,系统自动识别数据对数据进行选择备份方式。
接着,对数据进行分割处理,获得多个数据块,比如,根据网元数量来确定,网元在1000以内的,数据块大小可以使1KB;网元在1000~5000之间的,数据块大小可以使4KB。
下面,在获取到多个数据块之后,分别通过哈希数学运算获得各个数据中的第一标志信息,该第一标志信息能够唯一标志该数据块,常用的哈希运算有FNV1、CRC、MD5等等,不同的哈希算法碰撞发生概率不同,计算出的唯一标志信息位数也不同,相应的计算量也不同。
因此,根据哈希算法获得第一标志信息,跟已备份的数据中的第二标志信息进行逐次比较,当第一标志信息与第二标志信息相同时,确定该数据块为重复的数据块,仅存储该数据块的标志索引即可,而当第一标志信息与第二标志信息不同时,确定该数据块为新的唯一块,存储当前数据块信息。
当然,具体地,将数据块存储之前,也就是当查找结果表明没有相同的第一标志信息之后,对带备份数据进行加密和压缩处理,这样更加保障了数据的安全性。
接着在S104中,将待备份的数据存储至本地存储但,再由本地端将待备份数据存储至云存储端,这样,当用户需要提取常用的存储数据时,可以直接从本地存储端提取,无需再连接至云存储端,这样在数据传输量大时,解决了了等待的时间。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (4)
1.一种数据备份容灾方法,其特征在于,包括如下步骤:
接收备份数据的控制指令;
基于控制指令,选择备份方式,将待备份数据进行分割处理,获得多个数据块;
分别获取各个数据块中的第一标志信息,并在已备份的数据中查找是否有相同的第一标志信息;
当查找结果表明没有相同的第一标志信息时,将待备份数据存储至本地存储端,再由本地存储端将待备份数据存储至云存储端。
2.根据权利要求1所述的数据备份容灾方法,其特征在于,分别获取各个数据块中的第一标志信息,并在已备份的数据中查找是否有相同的第一标志信息具体包括:
分别通过哈希数学运算获得各个数据块中的第一标志信息;
获取已备份数据中的第二标志信息;
将第一标志信息与第二标志信息进行逐次比较,获得比较结果。
3.根据权利要求1所述的数据备份容灾方法,其特征在于,备份方式具体包括全备份,增量备份,差异备份以及合成全备份中的任意一种。
4.根据权利要求1-3中任一权项所述的数据备份容灾方法,其特征在于,当查找结果表明没有相同的第一标志信息之后,对待备份数据进行加密和压缩处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410671753.5A CN104317676A (zh) | 2014-11-21 | 2014-11-21 | 一种数据备份容灾方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410671753.5A CN104317676A (zh) | 2014-11-21 | 2014-11-21 | 一种数据备份容灾方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104317676A true CN104317676A (zh) | 2015-01-28 |
Family
ID=52372911
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410671753.5A Pending CN104317676A (zh) | 2014-11-21 | 2014-11-21 | 一种数据备份容灾方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104317676A (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105607968A (zh) * | 2015-12-17 | 2016-05-25 | 浙江大华技术股份有限公司 | 一种增量备份方法及设备 |
WO2017088192A1 (zh) * | 2015-11-28 | 2017-06-01 | 华为技术有限公司 | 数据备份装置及方法、系统 |
CN106802841A (zh) * | 2017-01-19 | 2017-06-06 | 四川奥诚科技有限责任公司 | 数据提取解析方法、装置及服务器 |
CN106817419A (zh) * | 2017-01-19 | 2017-06-09 | 四川奥诚科技有限责任公司 | 基于VoLTE AS网元的数据提取解析方法、装置及服务终端 |
CN107454161A (zh) * | 2017-07-31 | 2017-12-08 | 郑州云海信息技术有限公司 | 一种数据备份方法及装置 |
CN109032837A (zh) * | 2018-06-15 | 2018-12-18 | 华为技术有限公司 | 数据备份的方法和装置 |
WO2020037985A1 (zh) * | 2018-08-23 | 2020-02-27 | 华为技术有限公司 | 一种计算备份文件大小的方法及装置 |
CN113157645A (zh) * | 2021-04-21 | 2021-07-23 | 平安科技(深圳)有限公司 | 集群数据迁移方法、装置、设备及存储介质 |
WO2022257789A1 (zh) * | 2021-06-11 | 2022-12-15 | 中兴通讯股份有限公司 | 数据备份方法、网管、网元以及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101814045A (zh) * | 2010-04-22 | 2010-08-25 | 华中科技大学 | 一种用于备份服务的数据组织方法 |
CN102306114A (zh) * | 2010-09-25 | 2012-01-04 | 广东电子工业研究院有限公司 | 基于云存储的数据定时备份和恢复方法 |
CN103067525A (zh) * | 2013-01-18 | 2013-04-24 | 广东工业大学 | 一种基于特征码的云存储数据备份方法 |
CN103778034A (zh) * | 2014-02-26 | 2014-05-07 | 广州杰赛科技股份有限公司 | 基于云存储的数据备份容灾方法及系统 |
CN103873503A (zh) * | 2012-12-12 | 2014-06-18 | 鸿富锦精密工业(深圳)有限公司 | 数据块备份系统及方法 |
CN103902410A (zh) * | 2014-03-28 | 2014-07-02 | 西北工业大学 | 云存储系统的数据备份加速方法 |
CN103914522A (zh) * | 2014-03-20 | 2014-07-09 | 电子科技大学 | 一种应用于云存储重复数据删除的数据块合并方法 |
-
2014
- 2014-11-21 CN CN201410671753.5A patent/CN104317676A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101814045A (zh) * | 2010-04-22 | 2010-08-25 | 华中科技大学 | 一种用于备份服务的数据组织方法 |
CN102306114A (zh) * | 2010-09-25 | 2012-01-04 | 广东电子工业研究院有限公司 | 基于云存储的数据定时备份和恢复方法 |
CN103873503A (zh) * | 2012-12-12 | 2014-06-18 | 鸿富锦精密工业(深圳)有限公司 | 数据块备份系统及方法 |
CN103067525A (zh) * | 2013-01-18 | 2013-04-24 | 广东工业大学 | 一种基于特征码的云存储数据备份方法 |
CN103778034A (zh) * | 2014-02-26 | 2014-05-07 | 广州杰赛科技股份有限公司 | 基于云存储的数据备份容灾方法及系统 |
CN103914522A (zh) * | 2014-03-20 | 2014-07-09 | 电子科技大学 | 一种应用于云存储重复数据删除的数据块合并方法 |
CN103902410A (zh) * | 2014-03-28 | 2014-07-02 | 西北工业大学 | 云存储系统的数据备份加速方法 |
Cited By (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2017088192A1 (zh) * | 2015-11-28 | 2017-06-01 | 华为技术有限公司 | 数据备份装置及方法、系统 |
CN107113324B (zh) * | 2015-11-28 | 2020-08-14 | 华为技术有限公司 | 数据备份装置及方法、系统 |
CN107113324A (zh) * | 2015-11-28 | 2017-08-29 | 华为技术有限公司 | 数据备份装置及方法、系统 |
CN105607968B (zh) * | 2015-12-17 | 2018-12-07 | 浙江大华技术股份有限公司 | 一种增量备份方法及设备 |
CN105607968A (zh) * | 2015-12-17 | 2016-05-25 | 浙江大华技术股份有限公司 | 一种增量备份方法及设备 |
CN106817419A (zh) * | 2017-01-19 | 2017-06-09 | 四川奥诚科技有限责任公司 | 基于VoLTE AS网元的数据提取解析方法、装置及服务终端 |
CN106817419B (zh) * | 2017-01-19 | 2020-06-30 | 四川奥诚科技有限责任公司 | 基于VoLTE AS网元的数据提取解析方法、装置及服务终端 |
CN106802841A (zh) * | 2017-01-19 | 2017-06-06 | 四川奥诚科技有限责任公司 | 数据提取解析方法、装置及服务器 |
CN107454161A (zh) * | 2017-07-31 | 2017-12-08 | 郑州云海信息技术有限公司 | 一种数据备份方法及装置 |
CN109032837A (zh) * | 2018-06-15 | 2018-12-18 | 华为技术有限公司 | 数据备份的方法和装置 |
US11907561B2 (en) | 2018-06-15 | 2024-02-20 | Huawei Cloud Computing Technologies Co., Ltd. | Data backup method and apparatus |
WO2020037985A1 (zh) * | 2018-08-23 | 2020-02-27 | 华为技术有限公司 | 一种计算备份文件大小的方法及装置 |
CN113157645A (zh) * | 2021-04-21 | 2021-07-23 | 平安科技(深圳)有限公司 | 集群数据迁移方法、装置、设备及存储介质 |
CN113157645B (zh) * | 2021-04-21 | 2023-12-19 | 平安科技(深圳)有限公司 | 集群数据迁移方法、装置、设备及存储介质 |
WO2022257789A1 (zh) * | 2021-06-11 | 2022-12-15 | 中兴通讯股份有限公司 | 数据备份方法、网管、网元以及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104317676A (zh) | 一种数据备份容灾方法 | |
CN101989929B (zh) | 容灾数据备份的方法及系统 | |
CN103473277B (zh) | 文件系统的快照方法和装置 | |
US10366072B2 (en) | De-duplication data bank | |
CN111104069B (zh) | 分布式存储系统的多区域数据处理方法、装置及电子设备 | |
CN102231881B (zh) | 移动终端的用户数据处理方法、服务器及系统 | |
CN107885619A (zh) | 一种数据精简去重和镜像异地备份保护的方法及系统 | |
CN104067239A (zh) | 用于数据组块去复制的系统和方法 | |
CN103677674B (zh) | 一种数据处理方法及装置 | |
CN102722583A (zh) | 重复数据删除硬件加速装置和方法 | |
CN104901983B (zh) | 一种信息同步方法、装置及系统 | |
CN105487942A (zh) | 一种基于重复数据删除的备份与远程复制方法 | |
CN104166621A (zh) | 一种数据处理方法及装置 | |
CN103440204B (zh) | 一种更新文件系统的方法和存储设备 | |
CN103902410A (zh) | 云存储系统的数据备份加速方法 | |
CN105095027A (zh) | 一种数据备份方法及装置 | |
CN103716384A (zh) | 跨数据中心实现云存储数据同步的方法和装置 | |
CN111143113A (zh) | 复制元数据的方法、电子设备和计算机程序产品 | |
CN104536852A (zh) | 数据恢复方法及装置 | |
CN107608821B (zh) | 一种基于纠删码的数据读取方法、装置、设备 | |
CN104079623A (zh) | 多级云存储同步控制方法及系统 | |
CN106201772A (zh) | 一种基于数据中心的操作系统备份、恢复方法及装置 | |
CN103500129A (zh) | 一种备份对象的发送、备份方法、生产端、灾备端及系统 | |
CN105224418A (zh) | 一种数据备份方法和装置 | |
CN105471955A (zh) | 分布式文件系统的写方法、客户端设备及分布式文件系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150128 |
|
RJ01 | Rejection of invention patent application after publication |