CN112527561A - 基于物联网云存储的数据备份方法及装置 - Google Patents
基于物联网云存储的数据备份方法及装置 Download PDFInfo
- Publication number
- CN112527561A CN112527561A CN202011426488.6A CN202011426488A CN112527561A CN 112527561 A CN112527561 A CN 112527561A CN 202011426488 A CN202011426488 A CN 202011426488A CN 112527561 A CN112527561 A CN 112527561A
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- storage
- target
- storage area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0608—Saving storage space on storage systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0638—Organizing or formatting or addressing of data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请实施例公开了基于物联网云存储的数据备份方法及装置,方法包括:接收源数据端的数据备份指令,数据备份指令包含数据备份策略;根据数据备份策略创建与源数据端对应的至少一个目标备份存储区,目标备份存储区分别具有备份地址;接收源数据端的备份数据,将备份数据存储至目标备份存储区;每隔预设时间监测源数据端当前的存储数据,当当前的存储数据存在更新数据时,获取该源数据端的更新数据为新的备份数据,将新的备份数据存储至目标备份存储区。本申请实施例提供的技术方案通过每隔预设时间备份更新的数据,可避免用备份数据过多而使得备份数据传输中容易出错、传输效率低、占用资源大的问题;并且避免重复备份,减少传输资源的消耗。
Description
技术领域
本申请实施例涉及数据通信技术领域,尤其涉及基于物联网云存储的数据备份方法及装置。
背景技术
数据备份,是指为防止系统出现操作失误或系统故障导致数据丢失,而将全部或部分数据集合从应用主机的硬盘或阵列复制到其它的存储介质的过程。最以往的数据备份主要是采用内置或外置的磁带机进行冷备份,但是这种方式只能防止操作失误等人为故障,而且其恢复时间也很长。
物联网是一个基于互联网、传统电信网等的信息承载体,它让所有能够被独立寻址的普通物理对象形成互联互通的网络。随着物联网技术的不断发展,数据的海量增加,开始采用网络备份。但是目前在物联网应用场景中的网络备份往往也是由用户主动发起备份请求,之后将源数据端的备份数据传输至备份端。如果用户长时间忘记对数据进行主动备份,可能由于各种问题导致源数据丢失而无法恢复,并且当长时间未进行数据备份时,下一次进行数据备份的数据量庞大,非常耗时,占用传输资源大,容易影响源数据端其他应用的进行。
发明内容
本申请实施例提供基于物联网云存储的数据备份方法及装置,以隔段时间自动对源数据端的数据进行备份,防止两次数据备份间隔过久而造成部分数据丢失,以及避免一次备份数量过大而影响传输效率。
在第一方面,本申请实施例提供了基于物联网云存储的数据备份方法,包括:
接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略;
根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址;
接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区;
每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
进一步的,每一次将所述备份数据存储至目标备份存储区后,更新备份列表,所述备份列表包括备份地址、备份数据类型、备份数据占用内存。
进一步的,每隔预设时间监测源数据端当前的存储数据,之后还包括:
判断当前的存储数据与上一次的存储数据相比是否存在缺失数据,当所述当前的存储数据存在缺失数据时,根据备份列表获取目标备份存储区的备份数据传输至源数据端。
进一步的,当所述当前的存储数据存在缺失数据时,获取目标备份存储区的备份数据传输至源数据端,包括:
计算缺失数据的缺失率;
当缺失率达到第一阈值时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据,并传输至源数据端;
当缺失率达到第二阈值时,根据备份列表获取目标备份存储区中的全部备份数据传输至源数据端;第二阈值大于第一阈值。
进一步的,当缺失率达到第一阈值或第二阈值时,发送数据恢复询问指令至源数据端,当接收到源数据端基于数据恢复询问指令所反馈的确认恢复指令时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据或全部备份数据传输至源数据端。
进一步的,所述目标备份存储区为两个;获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区,具体为:
获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至与相邻的上一次不同备份地址的所述目标备份存储区。
进一步的,所述目标备份存储区为两个;数据备份方法还包括:
判断备份数据的数据量是否满足预设条件,当满足预设条件,将备份数据依次划分为至少两部分的待备份数据;
将至少两部分的待备份数据一一对应分别且同步存储至不同的目标备份存储区。
在第二方面,本申请实施例提供了基于物联网云存储的数据备份装置,包括:
指令接收模块:用于接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略;
存储区创建模块:用于根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址;
备份数据接收模块:用于接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区;
存储数据监测模块:用于每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
进一步的,每一次将所述备份数据存储至目标备份存储区后,更新备份列表,所述备份列表包括备份地址、备份数据类型、备份数据占用内存。
进一步的,每隔预设时间监测源数据端当前的存储数据,之后还包括:
判断当前的存储数据与上一次的存储数据相比是否存在缺失数据,当所述当前的存储数据存在缺失数据时,根据备份列表获取目标备份存储区的备份数据传输至源数据端。
进一步的,当所述当前的存储数据存在缺失数据时,获取目标备份存储区的备份数据传输至源数据端,包括:
计算缺失数据的缺失率;
当缺失率达到第一阈值时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据,并传输至源数据端;
当缺失率达到第二阈值时,根据备份列表获取目标备份存储区中的全部备份数据传输至源数据端;第二阈值大于第一阈值。
进一步的,当缺失率达到第一阈值或第二阈值时,发送数据恢复询问指令至源数据端,当接收到源数据端基于数据恢复询问指令所反馈的确认恢复指令时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据或全部备份数据传输至源数据端。
进一步的,所述目标备份存储区为两个;获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区,具体为:
获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至与相邻的上一次不同备份地址的所述目标备份存储区。
进一步的,所述目标备份存储区为两个;数据备份方法还包括:
判断备份数据的数据量是否满足预设条件,当满足预设条件,将备份数据依次划分为至少两部分的待备份数据;
将至少两部分的待备份数据一一对应分别且同步存储至不同的目标备份存储区。
在第三方面,本申请实施例提供了一种计算机设备,包括:存储器以及一个或多个处理器;
所述存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如第一方面所述的基于物联网云存储的数据备份方法。
在第四方面,本申请实施例提供了一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如第一方面所述的基于物联网云存储的数据备份方法。
本申请实施例当第一次接到数据备份指令时根据备份创建目标备份存储区以存储备份数据,之后自动监测源数据端的存储数据,每隔预设时间当存储数据有更新时,备份更新的数据,如此可以避免用户主动备份而长时间忘记备份,带来积攒的备份数据过多而使得备份数据传输中容易出错、传输效率低、占用资源大、影响其他应用开展的问题;并且每次只备份更新的数据部分,避免重复备份,减少传输资源的消耗。
附图说明
图1是本申请实施例提供的一种基于物联网云存储的数据备份方法的流程图;
图2是本申请实施例提供的另一种基于物联网云存储的数据备份方法的流程图;
图3是本申请实施例提供的另一种基于物联网云存储的数据备份方法的流程图;
图4是本申请实施例提供的一种基于物联网云存储的数据备份装置的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚,下面结合附图对本申请具体实施例作进一步的详细描述。可以理解的是,此处所描述的具体实施例仅仅用于解释本申请,而非对本申请的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本申请相关的部分而非全部内容。在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
本申请实施例提供基于云存储的数据备份方法及装置,其当第一次接到数据备份指令时根据备份创建目标备份存储区以存储备份数据,之后自动监测源数据端的存储数据,每隔预设时间当存储数据有更新时,备份更新的数据,如此可以避免用户主动备份而长时间忘记备份,带来积攒的备份数据过多而使得备份数据传输中容易出错、传输效率低、占用资源大、影响其他应用开展的问题;并且每次只备份更新的数据部分,避免重复备份,减少传输资源的消耗。
图1至图3分别给出了本申请三种不同实施例的流程图,本申请实施例提供的基于物联网云存储的数据备份方法可以由基于物联网云存储的数据备份装置来执行,该基于物联网云存储的数据备份装置可以通过硬件和/或软件的方式实现,并集成在计算机设备中。
本申请实施例在物联网场景中,对源数据端的数据进行备份,接收备份数据的为备份端,源数据端和备份端均可为物联网中的一个终端设备。具体的实施场景中,源数据端通常为终端,终端包括任何智能设备,如智能手机、平板电脑、笔记本电脑、台式计算机、智能手表等智能设备,同时,终端还可以是服务器本身。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以提供云服务器、云数据库、云计算、云通信、大数据库和人工智能平台等基础云计算服务器的云服务器。终端与备份端之间通过通信网络进行通信,该网络可以为广域网、局域网。终端与备份端之间的连接可以通过有线网络也可以通过无线网络通信,可以直接通信也可以间接通信。在本申请实施例中,由终端主动获取自身的运行情况等,自动传输待备份数据至备份端,因此终端作为发送端,备份端作为接收端。
下述以基于物联网云存储的数据备份装置执行基于物联网云存储的数据备份方法为例进行描述。参考图1,该基于物联网云存储的数据备份方法包括:
S101:接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略。
数据备份指令由源数据端主动发起,或者由用户操作源数据端发出数据备份指令。由源数据端自身主动发起的情形,包括是事先有用户先设置了操作参数,包括设定发出数据备份指令的时间。数据备份指令中包含有数据备份请求,也即是建立数据备份的通信连接,同时还包括数据备份策略。数据备份策略包含有至少与数据备份相关的信息,包括目标备份存储区的备份地址、备份时间、同时备份还是分两部分备份,或者是将备份数据存储至一个目标备份存储区或者多个目标备份存储区。
S102:根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址。
由于数据备份策略指示与数据备份相关的备份规范,当指示数据备份至两个目标备份存储区时,则创建对应的两个目标备份存储区,当指示数据备份至一个目标备份存储区时,则创建对应的一个目标备份存储区。目标备份存储区分别具有独立的备份地址,因此通过备份地址,可以快速找到备份数据。
S103:接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区。
作为备份端,接收发送端的数据备份指令,并基于数据备份指令创建目标备份存储区,分配给目标备份存储区一个备份地址。之后接收备份数据,根据之前分配的目标备份存储区的备份地址,将该备份数据存储至目标备份存储区以作备份。需要说明的是,备份端往往会将备份地址返回给源数据端进行保管,当源数据端有需要对数据进行恢复或者下载备份数据时,根据该备份地址,也可以获取到当前备份的备份数据。
S104:每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
步骤S101-S103主要描述源数据端第一次在备份端进行数据备份的情况,因此需要创建目标备份存储区。当完成第一次备份之后,往后若是有数据更新,则只备份更新数据即可。本实施例提供的方案不需要每一次数据备份都要重新创建目标备份存储区,也不用每一次都要发送数据备份指令,提高了备份效率。
针对于当第一次创建的是多个目标备份存储区时,数据备份策略可以携带后续对更新数据的备份方案,例如每一次更新数据进行备份时,单次的更新数据都存储在同一个目标备份存储区,而相邻的下一次更新数据要备份时,则可备份在另一个目标备份存储区。以上仅仅是其中一种可行方式,在其他实施情况中,也可能有其他对更新数据的备份方式,例如当目标备份存储区只创建了一个时,则毫无疑问将更新数据都存储至该目标备份存储区。
如图2所示,本发明实施例还提供另外一种基于物联网云存储的数据备份方法,包括:
S201:接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略。
S202:根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址。
S203:接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区。
S204:每隔预设时间监测源数据端当前的存储数据。
S205:判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
S206:判断当前的存储数据与上一次的存储数据相比是否存在缺失数据,当所述当前的存储数据存在缺失数据时,根据备份列表获取目标备份存储区的备份数据传输至源数据端。
在本实施例中,每一次将所述备份数据存储至目标备份存储区后,更新备份列表,所述备份列表包括备份地址、备份数据类型、备份数据占用内存。
步骤S205和S206均是基于步骤S204每个预设时间监测了存储数据之后,将当前的存储数据与上一次的存储数据进行比较。实际上比对是否有更新数据或者缺失数据,主要是比对两组存储数据的差异数据,如果差异数据是新的,则意味着是新增的更新数据,如果差异数据是过往存在的,表明是缺失数据。当然,可能同一次监测中,可能同时检测到有更新数据,也有缺失数据。
当针对于本实施例S206中,根据存在缺失数据的情况,将备份数据传输至源数据端,也即是实现对源数据端的数据恢复。具体为:计算缺失数据的缺失率;当缺失率达到第一阈值时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据,并传输至源数据端;当缺失率达到第二阈值时,根据备份列表获取目标备份存储区中的全部备份数据传输至源数据端;第二阈值大于第一阈值。
第一阈值和第二阈值都由用户事先设置。当缺失率达到第二阈值时,表明丢失率很高,因此直接将全部备份数据传输至源数据端。
进一步的,当缺失率达到第一阈值或第二阈值时,发送数据恢复询问指令至源数据端,当接收到源数据端基于数据恢复询问指令所反馈的确认恢复指令时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据或全部备份数据传输至源数据端。当存在数据缺失时,先询问源数据端是否需要恢复数据,避免是由源数据端的操作用户主动删除数据的情况而直接将数据进行恢复,而给操作用户带来麻烦。
在本实施例中,假设目标备份存储区为两个;则获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区,具体为:
获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至与相邻的上一次不同备份地址的所述目标备份存储区。
如图3所示,本实施例提供了另外一种基于物联网云存储的数据备份方法,同样包括步骤如下:
S301:接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略。
S302:根据数据备份策略创建与所述源数据端对应的两个目标备份存储区,所述目标备份存储区分别具有备份地址。
S303:接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区。
S304:每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
S305:判断备份数据的数据量是否满足预设条件,当满足预设条件,将备份数据依次划分为至少两部分的待备份数据。本步骤中,预设条件同样由用户事先设定,是对应于数据量的一个阈值,用于表征当需要备份的数据量足够大时,则将备份数据划分为两部分的待备份数据,或者多于两部分的待备份数据。
S306:将至少两部分的待备份数据一一对应分别且同步存储至不同的目标备份存储区。
当待备份数据为两部分时,则与目标备份存储区一一对应,一组待备份数据存储至一个目标备份存储区,另一组待备份数据则存储至另一个目标备份存储区。而当待备份数据多于两部分,例如为三部分时,目标备份存储区为A和B,将其中两部分待备份数据与目标备份存储区一一对应,还有一部分待备份数据与A或者B对应。又例如当待备份数据有四部分时,则其中两部分对应A,另外两部分对应B。还例如为五部分时,将其中两部分对应A,另外两部分对应B,还有一部分对应A或B。
如图4所示,本申请实施例还提供基于物联网云存储的数据备份装置,包括指令接收模块41、存储区创建模块42、备份数据接收模块43和存储数据监测模块44。指令接收模块41用于接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略。存储区创建模块42用于根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址。备份数据接收模块43用于接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区。存储数据监测模块44用于每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
作为优选的实施方式,每一次将所述备份数据存储至目标备份存储区后,更新备份列表,所述备份列表包括备份地址、备份数据类型、备份数据占用内存。每隔预设时间监测源数据端当前的存储数据,之后还包括:判断当前的存储数据与上一次的存储数据相比是否存在缺失数据,当所述当前的存储数据存在缺失数据时,根据备份列表获取目标备份存储区的备份数据传输至源数据端。
进一步优选的,当所述当前的存储数据存在缺失数据时,获取目标备份存储区的备份数据传输至源数据端,包括:计算缺失数据的缺失率;当缺失率达到第一阈值时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据,并传输至源数据端;当缺失率达到第二阈值时,根据备份列表获取目标备份存储区中的全部备份数据传输至源数据端;第二阈值大于第一阈值。
进一步优选的,当缺失率达到第一阈值或第二阈值时,发送数据恢复询问指令至源数据端,当接收到源数据端基于数据恢复询问指令所反馈的确认恢复指令时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据或全部备份数据传输至源数据端。
本实施例中,当目标备份存储区为两个;获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区,具体为:获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至与相邻的上一次不同备份地址的所述目标备份存储区。
另外一种可实施方式中,目标备份存储区为两个;数据备份方法还包括:
判断备份数据的数据量是否满足预设条件,当满足预设条件,将备份数据依次划分为至少两部分的待备份数据;将至少两部分的待备份数据一一对应分别且同步存储至不同的目标备份存储区。
本申请实施例还提供一种计算机设备,包括:存储器以及一个或多个处理器;所述存储器,用于存储一个或多个程序;当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如本发明所述的基于物联网云存储的数据备份方法。
本申请实施例还提供一种包含计算机可执行指令的存储介质,所述计算机可执行指令在由计算机处理器执行时用于执行如上述实施例提供的基于物联网云存储的数据备份方法,该基于物联网云存储的数据备份方法包括:接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略;根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址;接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区;每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
存储介质——任何的各种类型的存储器设备或存储设备。术语“存储介质”旨在包括:安装介质,例如CD-ROM、软盘或磁带装置;计算机系统存储器或随机存取存储器,诸如DRAM、DDR RAM、SRAM、EDO RAM,兰巴斯(Rambus)RAM等;非易失性存储器,诸如闪存、磁介质(例如硬盘或光存储);寄存器或其它相似类型的存储器元件等。存储介质可以还包括其它类型的存储器或其组合。另外,存储介质可以位于程序在其中被执行的第一计算机系统中,或者可以位于不同的第二计算机系统中,第二计算机系统通过网络(诸如因特网)连接到第一计算机系统。第二计算机系统可以提供程序指令给第一计算机用于执行。术语“存储介质”可以包括可以驻留在不同位置中(例如在通过网络连接的不同计算机系统中)的两个或更多存储介质。存储介质可以存储可由一个或多个处理器执行的程序指令(例如具体实现为计算机程序)。
当然,本申请实施例所提供的一种包含计算机可执行指令的存储介质,其计算机可执行指令不限于如上所述的基于物联网云存储的数据备份方法,还可以执行本申请任意实施例所提供的基于物联网云存储的数据备份方法中的相关操作。
上述实施例中提供的基于物联网云存储的数据备份装置、设备及存储介质可执行本申请任意实施例所提供的基于物联网云存储的数据备份方法,未在上述实施例中详尽描述的技术细节,可参见本申请任意实施例所提供的基于云存储的数据备份方法。
上述仅为本申请的较佳实施例及所运用的技术原理。本申请不限于这里所述的特定实施例,对本领域技术人员来说能够进行的各种明显变化、重新调整及替代均不会脱离本申请的保护范围。因此,虽然通过以上实施例对本申请进行了较为详细的说明,但是本申请不仅仅限于以上实施例,在不脱离本申请构思的情况下,还可以包括更多其他等效实施例,而本申请的范围由权利要求的范围决定。
Claims (10)
1.基于物联网云存储的数据备份方法,其特征在于,包括:
接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略;
根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址;
接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区;
每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
2.根据权利要求1所述的数据备份方法,其特征在于,每一次将所述备份数据存储至目标备份存储区后,更新备份列表,所述备份列表包括备份地址、备份数据类型、备份数据占用内存。
3.根据权利要求2所述的数据备份方法,其特征在于,每隔预设时间监测源数据端当前的存储数据,之后还包括:
判断当前的存储数据与上一次的存储数据相比是否存在缺失数据,当所述当前的存储数据存在缺失数据时,根据备份列表获取目标备份存储区的备份数据传输至源数据端。
4.根据权利要求3所述的数据备份方法,其特征在于,当所述当前的存储数据存在缺失数据时,获取目标备份存储区的备份数据传输至源数据端,包括:
计算缺失数据的缺失率;
当缺失率达到第一阈值时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据,并传输至源数据端;
当缺失率达到第二阈值时,根据备份列表获取目标备份存储区中的全部备份数据传输至源数据端;第二阈值大于第一阈值。
5.根据权利要求4所述的数据备份方法,其特征在于,当缺失率达到第一阈值或第二阈值时,发送数据恢复询问指令至源数据端,当接收到源数据端基于数据恢复询问指令所反馈的确认恢复指令时,根据备份列表获取目标备份存储区中与缺失数据一致的备份数据或全部备份数据传输至源数据端。
6.根据权利要求1所述的数据备份方法,其特征在于,所述目标备份存储区为两个;获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区,具体为:
获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至与相邻的上一次不同备份地址的所述目标备份存储区。
7.根据权利要求1所述的数据备份方法,其特征在于,所述目标备份存储区为两个;数据备份方法还包括:
判断备份数据的数据量是否满足预设条件,当满足预设条件,将备份数据依次划分为至少两部分的待备份数据;
将至少两部分的待备份数据一一对应分别且同步存储至不同的目标备份存储区。
8.基于物联网云存储的数据备份装置,其特征在于,包括:
指令接收模块:用于接收源数据端的数据备份指令,所述数据备份指令包含数据备份策略;
存储区创建模块:用于根据数据备份策略创建与所述源数据端对应的至少一个目标备份存储区,所述目标备份存储区分别具有备份地址;
备份数据接收模块:用于接收源数据端的备份数据,将该备份数据存储至所述目标备份存储区;
存储数据监测模块:用于每隔预设时间监测源数据端当前的存储数据,判断当前的存储数据与上一次的存储数据相比是否存在更新数据,当所述当前的存储数据存在更新数据时,获取该源数据端的所述更新数据为新的备份数据,将新的备份数据存储至所述目标备份存储区。
9.一种计算机设备,其特征在于,包括:存储器以及一个或多个处理器;
所述存储器,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7任一所述的基于物联网云存储的数据备份方法。
10.一种包含计算机可执行指令的存储介质,其特征在于,所述计算机可执行指令在由计算机处理器执行时用于执行如权利要求1-12任一所述的基于物联网云存储的数据备份方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011426488.6A CN112527561B (zh) | 2020-12-09 | 2020-12-09 | 基于物联网云存储的数据备份方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011426488.6A CN112527561B (zh) | 2020-12-09 | 2020-12-09 | 基于物联网云存储的数据备份方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112527561A true CN112527561A (zh) | 2021-03-19 |
CN112527561B CN112527561B (zh) | 2021-10-01 |
Family
ID=74996803
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011426488.6A Active CN112527561B (zh) | 2020-12-09 | 2020-12-09 | 基于物联网云存储的数据备份方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112527561B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023185062A1 (zh) * | 2022-03-28 | 2023-10-05 | 华为技术有限公司 | 一种备份方法、通信装置及通信系统 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104331346A (zh) * | 2014-11-21 | 2015-02-04 | 四川神琥科技有限公司 | 一种数据保护方法 |
US20170269999A1 (en) * | 2012-08-31 | 2017-09-21 | International Business Machines Corporation | Securely storing data in a dispersed storage network |
CN107193690A (zh) * | 2017-05-15 | 2017-09-22 | 深圳市奇摩计算机有限公司 | 实时备份数据的方法及其系统和备份设备 |
CN108646982A (zh) * | 2018-05-04 | 2018-10-12 | 广东电网有限责任公司电力科学研究院 | 一种基于ubifs的数据自动修复方法及装置 |
CN109324760A (zh) * | 2018-09-21 | 2019-02-12 | 郑州云海信息技术有限公司 | 一种磁盘数据上云方法、系统、设备及计算机存储介质 |
US20190132390A1 (en) * | 2015-09-30 | 2019-05-02 | EMC IP Holding Company LLC | Data driven backup policy for data-centers and applications |
US20190317867A1 (en) * | 2018-04-17 | 2019-10-17 | EMC IP Holding Company LLC | Unified rct backup for different hypervisor configurations |
CN110825552A (zh) * | 2018-08-14 | 2020-02-21 | 华为技术有限公司 | 数据存储方法、数据恢复方法、节点及存储介质 |
CN110989938A (zh) * | 2019-12-15 | 2020-04-10 | 苏州浪潮智能科技有限公司 | 一种故障盘识别方法、装置、设备及计算机可读存储介质 |
CN111104254A (zh) * | 2019-11-29 | 2020-05-05 | 北京浪潮数据技术有限公司 | 存储系统数据刷写方法、装置、设备及可读存储介质 |
CN111176900A (zh) * | 2019-12-30 | 2020-05-19 | 浪潮电子信息产业股份有限公司 | 一种分布式存储系统及其数据恢复方法、装置和介质 |
CN111258821A (zh) * | 2020-03-23 | 2020-06-09 | 重庆忽米网络科技有限公司 | 一种基于云计算的备份数据快速提取方法 |
-
2020
- 2020-12-09 CN CN202011426488.6A patent/CN112527561B/zh active Active
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20170269999A1 (en) * | 2012-08-31 | 2017-09-21 | International Business Machines Corporation | Securely storing data in a dispersed storage network |
CN104331346A (zh) * | 2014-11-21 | 2015-02-04 | 四川神琥科技有限公司 | 一种数据保护方法 |
US20190132390A1 (en) * | 2015-09-30 | 2019-05-02 | EMC IP Holding Company LLC | Data driven backup policy for data-centers and applications |
CN107193690A (zh) * | 2017-05-15 | 2017-09-22 | 深圳市奇摩计算机有限公司 | 实时备份数据的方法及其系统和备份设备 |
US20190317867A1 (en) * | 2018-04-17 | 2019-10-17 | EMC IP Holding Company LLC | Unified rct backup for different hypervisor configurations |
CN108646982A (zh) * | 2018-05-04 | 2018-10-12 | 广东电网有限责任公司电力科学研究院 | 一种基于ubifs的数据自动修复方法及装置 |
CN110825552A (zh) * | 2018-08-14 | 2020-02-21 | 华为技术有限公司 | 数据存储方法、数据恢复方法、节点及存储介质 |
CN109324760A (zh) * | 2018-09-21 | 2019-02-12 | 郑州云海信息技术有限公司 | 一种磁盘数据上云方法、系统、设备及计算机存储介质 |
CN111104254A (zh) * | 2019-11-29 | 2020-05-05 | 北京浪潮数据技术有限公司 | 存储系统数据刷写方法、装置、设备及可读存储介质 |
CN110989938A (zh) * | 2019-12-15 | 2020-04-10 | 苏州浪潮智能科技有限公司 | 一种故障盘识别方法、装置、设备及计算机可读存储介质 |
CN111176900A (zh) * | 2019-12-30 | 2020-05-19 | 浪潮电子信息产业股份有限公司 | 一种分布式存储系统及其数据恢复方法、装置和介质 |
CN111258821A (zh) * | 2020-03-23 | 2020-06-09 | 重庆忽米网络科技有限公司 | 一种基于云计算的备份数据快速提取方法 |
Non-Patent Citations (3)
Title |
---|
HONGLIANG LI: ""Minimum Backups for Stream Processing With Recovery Latency Guarantees"", 《IEEE TRANSACTIONS ON RELIABILITY》 * |
LANCETOBIGDATA: ""MySQL(十四)之数据备份与还原"", 《HTTPS://WWW.CNBLOGS.COM/ZHANGYINHUA/P/7674505.HTML》 * |
王占业: ""大数据处理若干关键技术研究"", 《中国博士学位论文全文数据库 信息科技辑》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023185062A1 (zh) * | 2022-03-28 | 2023-10-05 | 华为技术有限公司 | 一种备份方法、通信装置及通信系统 |
Also Published As
Publication number | Publication date |
---|---|
CN112527561B (zh) | 2021-10-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3474516B1 (en) | Data processing method and device | |
WO2019085334A1 (zh) | 分布式存储方法、控制服务器及计算机可读存储介质 | |
CN108345617B (zh) | 一种数据同步方法、装置以及电子设备 | |
CN110532123B (zh) | HBase系统的故障转移方法及装置 | |
CN108140035B (zh) | 分布式系统的数据库复制方法及装置 | |
CN111399764B (zh) | 数据存储方法、读取方法、装置、设备及存储介质 | |
US20230098190A1 (en) | Data processing method, apparatus, device and medium based on distributed storage | |
US7228352B1 (en) | Data access management system in distributed processing system | |
CN112052230A (zh) | 多机房数据同步方法、计算设备及存储介质 | |
US9298765B2 (en) | Apparatus and method for handling partially inconsistent states among members of a cluster in an erratic storage network | |
CN109117086B (zh) | 存储设备数据位置的处理方法、装置、设备及存储介质 | |
CN112162773A (zh) | 差分升级方法及装置、存储介质、终端 | |
US20080133967A1 (en) | Distributed object sharing system and method thereof | |
CN112256433A (zh) | 基于Kafka集群的分区迁移方法和装置 | |
CN112527561B (zh) | 基于物联网云存储的数据备份方法及装置 | |
CN107943615B (zh) | 基于分布式集群的数据处理方法与系统 | |
CN112527559B (zh) | 一种物联网数据备份方法及装置 | |
CN114565502A (zh) | Gpu资源管理方法、调度方法、装置、电子设备及存储介质 | |
CN111966531B (zh) | 数据快照方法、装置、计算机设备及存储介质 | |
CN112711606A (zh) | 数据库访问方法、装置、计算机设备和存储介质 | |
CN114860505B (zh) | 一种对象存储数据异步备份方法及系统 | |
JP7429792B2 (ja) | データ伝送方法、端末及びコンピュータ読み取り可能な記憶媒体 | |
CN107045426B (zh) | 一种多副本读取方法和系统 | |
CN111752892A (zh) | 分布式文件系统及其实现方法、管理系统、设备及介质 | |
CN105511808A (zh) | 一种数据操作方法、系统及相关装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |