CN108780447A - 差异数据备份的方法和设备 - Google Patents

差异数据备份的方法和设备 Download PDF

Info

Publication number
CN108780447A
CN108780447A CN201680000498.9A CN201680000498A CN108780447A CN 108780447 A CN108780447 A CN 108780447A CN 201680000498 A CN201680000498 A CN 201680000498A CN 108780447 A CN108780447 A CN 108780447A
Authority
CN
China
Prior art keywords
data block
backup
target data
fingerprint
storage equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680000498.9A
Other languages
English (en)
Inventor
梁峰
王雪松
游俊
欧阳戟
屠伟新
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN108780447A publication Critical patent/CN108780447A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/065Replication mechanisms
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14Error detection or correction of the data by redundancy in operation
    • G06F11/1402Saving, restoring, recovering or retrying
    • G06F11/1446Point-in-time backing up or restoration of persistent data
    • G06F11/1448Management of the data involved in backup or backup restore
    • G06F11/1453Management of the data involved in backup or backup restore using de-duplication of the data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16Error detection or correction of the data by redundancy in hardware
    • G06F11/20Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2056Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16Error detection or correction of the data by redundancy in hardware
    • G06F11/20Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2094Redundant storage or storage space
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • G06F3/0619Improving the reliability of storage systems in relation to data integrity, e.g. data losses, bit errors
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638Organizing or formatting or addressing of data
    • G06F3/064Management of blocks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Abstract

一种差异数据备份的方法和设备,该方法应用于存储系统中,该存储系统包括源存储设备和备份存储设备,该方法由所述源存储设备执行,该方法包括:根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合(S110),该指纹信息集合包括在该当前备份周期的开始时刻与上一次备份周期的结束时刻之间该源存储设备保存的目标数据块的指纹信息,该目标数据块与该源存储设备在该上一次备份周期的结束时刻之前保存的所有数据块均不相同;根据该目标数据块的指纹信息,获取该目标数据块(S120);向该备份存储设备发送该目标数据块(S130)。由此,能够提高数据备份效率,降低计算资源和网络资源的消耗。

Description

差异数据备份的方法和设备 技术领域
本发明实施例涉及存储技术领域,并且更具体地,涉及差异数据备份的方法和设备。
背景技术
远程复制技术中,源存储设备将数据发送给备份存储设备之前,源存储设备需要将数据切分成多个数据块,计算每个数据块的指纹并发送给备份存储设备,备份存储设备通过将接收到的指纹与自身已存储的指纹进行对比,确定接收到的指纹中没有在备份存储设备中保存的指纹,并将对比结果反馈给源存储设备,源存储设备根据备份存储设备反馈的对比结果过滤该数据确定出增量数据。由于源存储设备需要将所有数据块的指纹发送给备份存储设备,因此,就需要消耗大量的计算资源和网络带宽。
发明内容
本发明提供一种差异数据备份的方法和设备,源存储设备能够根据备份周期的标识与指纹信息集合的对应关系确定当前备份周期对应的指纹信息集合,并根据确定的指纹信息集合确定需要备份的数据块,由此,能够提高备份数据的效率,降低计算资源和网络资源的消耗。
第一方面,提供了一种差异数据备份的方法,该方法应用于存储系统中,该存储系统包括源存储设备和备份存储设备,该方法由该源存储设备执行,该方法包括:根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,该指纹信息集合包括在该当前备份周期的开始时刻与上一次备份周期的结束时刻之间该源存储设备保存的目标数据块的指纹信息,该目标数据块与该源存储设备在该上一次备份周期的结束时刻之前保存的所有数据块均不相同;根据该目标数据块的指纹信息,获取该目标数据块;向该备份存储设备发送该目标数据块。
因此,本发明实施例的差异数据备份的方法,源存储设备仅需要根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,就可以确定当前备份周期中需要备份的数据块,并将需要备份的数据块发送给备份存储设备。由此,能够提高备份数据的效率,降低计算资源和网络资源的消耗。
结合第一方面,在第一方面的第一种可能的实现方式中,该方法还包括:向该备份存储设备发送该目标数据块的指纹。
由此,备份存储设备可以直接保存接收到的指纹,而不需要进行指纹的计算,能够节省备份存储设备的计算资源。
结合第一方面,或第一方面的第一种可能的实现方式,在第一方面的第二种可能的实现方式中,该目标数据块的指纹信息保存在链表中,其中,该链表的头节点中保存有该当前备份周期的标识,该链表的第i个元素结点中保存有该目标数据块中第i个目标数据块的指纹信息,k为该目标数据块的总个数,其中k为大于等于1的整数,i为大于0且小于等于k的整数。
源存储设备采用链表存储方式存储目标数据块的指纹信息,可以在源存储设备对数据进行重删处理过程中同时记录目标数据块的指纹信息,在需要获取当前备份周期对应的指纹信息集合时,可以直接从链表中存储的指纹信息中获取,由此能够节省计算资源和计算时间。
结合第一方面的第二种可能的实现方式,在第一方面的第三种可能的实现方式中,该第i个目标数据块的指纹信息为该第i个目标数据块的指纹,该链表的第i个元素结点中还保存有该第i个目标数据块的指纹与该第i个目标数据块的存储地址的映射关系;
其中,该根据该目标数据块的指纹信息,获取该目标数据块,包括:根据该第i个目标数据块的指纹、该第i个目标数据块的指纹与该第i个目标数据块的存储地址的映射关系,获取该第i个目标数据块。
第二方面,提供了一种差异数据备份的方法,该方法应用于存储系统中,该存储系统包括源存储设备和备份存储设备,该方法由源存储设备执行,该方法包括:根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,该指纹信息集合包括在该当前备份周期的开始时刻与上一次备份周期的结束时刻之间该源存储设备保存的目标数据块的指纹信息,该目标数据块与该源存储设备在该上一次备份周期的结束时刻之前保存的所有数据块均不相同;向该备份存储设备发送该目标数据块的指纹信息对应的该目标数据块的指纹;接收该备份存储设备发送的反馈消息,该反馈消息用于指示差异指纹,该差异指纹是该目标数据块的指纹的子集,并且与该备份存储设备中保存的数据块的指纹不同;向该备份存储设备发送该差异指纹对应的目标数据块。
与现有技术相比,本发明实施例的源存储设备只需要将当前备份周期的开始时刻与上一次备份周期的结束时刻之间存储的目标数据块的指纹发送给备份存储设备进行指纹对比即可,其中,目标数据块与源存储设备在上一次备份周期的结束时刻之前保存的所有数据块不相同,并根据对比结果确定当前备份周期中需要备份的数据块,而不需要将当前备份周期的开始时刻与上一次备份周期的结束时刻之前源存储设备接收到的数据包括的所有数据块的指纹发送给备份存储设备进行指纹对比,由此,能够降低向备份存储设备发送的指纹的数量,从而降低网络资源的消耗及减少备份存储设备进行指纹比对消耗的时间。
结合第二方面,在第二方面的第一种可能的实现方式中,该源存储设备具有重复数据删除功能,该备份存储设备具有重复数据删除功能,该源存储设备的重复数据删除范围小于该备份存储设备的重复数据删除范围。
第三方面,提供了一种存储设备,该存储设备应用于存储系统中,该存储系统包括该存储设备和备份存储设备,该存储设备用于执行上述第一方面或第一方面的任意可能的实现方式中的方法。具体地,该存储设备包括用于执行上述第一方面或第一方面的任意可能的实现方式中的方法的单元。
第四方面,提供了一种存储设备,该存储设备应用于存储系统中,该存储系统包括该存储设备和备份存储设备,该存储设备用于执行上述第二方面或第二方面的可能的实现方式中的方法,具体地,该存储设备包括用于执行上述第二方面或第二方面的可能的实现方式中的方法的单元。
第五方面,提供了一种存储设备,所述存储设备应用于存储系统中,所述存储系统包括所述存储设备和备份存储设备,所述存储设备包括:处理器、存储器和发送器,所述处理器、所述存储器和所述发送器通过总线系统相连,所述存储器用于存储指令,所述处理器用于执行该存储器存储的指令,使得所述存储设备执行上述第一方面或第一方面的任意可能的实现方式中的方法。
第六方面,提供了一种存储设备,该存储系统包括该存储设备和备份存储设备,该存储设备包括:处理器、存储器、发送器和接收器,该处理器、该存储器、该发送器和该接收器通过总线系统相连,该存储器用于存储指令,该处理器用于执行该存储器存储的指令,使得该存储设备执行上述第二方面或第二方面的可能的实现方式中的方法。
第七方面,提供了一种计算机可读介质,用于存储计算机程序,该计算机程序包括用于执行第一方面或第一方面的任意可能的实现方式中的方法的指令。
第八方面,提供了一种计算机可读介质,用于存储计算机程序,该计算机程序包括用于执行第二方面或第二方面的可能的实现方式中的方法的指令。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例中所需要使用的附图作简单地介绍,显而易见地,下面所描述的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例的一个应用场景图;
图2是根据本发明实施例的源存储设备的控制器的示意性框图;
图3是根据本发明实施例的差异数据备份的方法的示意性流程图;
图4是根据本发明实施例的链表的结构的示意性框图;
图5是根据本发明另一实施例的差异数据备份的方法的示意性流程图;
图6是根据本发明实施例的存储设备的示意性框图;
图7是根据本发明另一实施例的存储设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部实施例。
图1是本发明实施例的一个应用场景图。如图1所示包括主机10、源存储系统20和备份存储系统30,主机10与源存储系统20和备份存储系统30均有连接,但是正常情况下只使用与源存储系统20的连接,只有在源存储系统20发生故障,需要备份存储系统30提供业务时,才会使用与备份存储系统30的连接。源存储系统20和备份存储系统30之间通过网络连接,允许数据进行双向传输。
源存储系统20可以是一个存储设备,可以称为“源存储设备”,如图1 所示,源存储设备20包括控制器21和存储介质22。备份存储系统30可以是一个存储设备,可以称为“备份存储设备”,如图1所示,备份存储设备30包括控制器31和存储介质32。
下面对源存储设备20的结构和功能进行具体描述。
示例性地,如图2所示,源存储设备20的控制器21主要包括:处理器(processor)211、缓存(cache)212、存储器(memory)213、通信总线(简称总线)214以及通信接口(Communication Interface)215。处理器211、缓存212、存储器213以及通信接口215通过总线214进行相互间的通信。
处理器211可能是一个中央处理器(Central Processing Unit,简称为“CPU”),或者是特定集成电路(Application Specific Integrated Circuit,简称为“ASIC”),或者是被配置成实施本发明实施例的一个或多个集成电路。处理器211用于接收来自主机10的数据对象(数据对象是指包含实际数据的对象,可以是块数据,也可以是文件或者其他形式的数据),将该数据对象经过一定的处理后再发送给存储介质22。
通信接口215,用于与主机10、备份存储设备30或存储介质22通信。
存储器213用于存放程序216,存储器213可能包含高速RAM存储器,也可能包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。可以理解的是,存储器213可以为随机存储器(Random-Access Memory,简称为“RAM”)、磁碟、硬盘、光盘、固态硬盘(Solid State Disk,简称为“SSD”)或者非易失性存储器等各种可以存储程序代码的非短暂性的(non-transitory)机器可读介质。
缓存212用于暂时存放从主机10接收的数据对象或从存储介质22读取的数据对象。另外,由于缓存读写数据的速度较快,为了方便读取也可以将一些经常使用的信息存放在缓存中,例如,数据块的逻辑地址,写入时间等信息。缓存212可以是RAM、储存级内存(Storage-Class Memory,简称为“SCM”)、非易失存储(Non-Volatile Memory,简称为“NVM”)、闪存(Flash Memory)或固态硬盘(Solid State Disk,简称为“SSD”)等各种可以存储数据的非短暂性的(non-transitory)机器可读介质,在此不做限定。
缓存212和存储器213可以合设或者分开设置,本发明实施例对此不做限定。
程序216可以包括程序代码,该程序代码包括计算机操作指令。对于具 有重复数据删除功能的存储设备,程序代码可以包括重复数据删除模块。重复数据删除模块用于在将从主机10接收到的数据对象发送给存储介质22之前进行重复数据删除。
下面将以源存储设备20为例,对重复数据删除功能进行简要的介绍:
当控制器21接收到主机10发送的数据对象后,可以将该数据对象划分为尺寸相同的若干个数据块。对于每个数据块,处理器211判断存储介质22中是否保存有相同的数据块,如果没有,则将数据块写入存储介质22中,同时将数据块的引用计数设置为初始值(例如,等于1);如果有,则不需要将已保存的数据块再次写入存储介质22中,而是将数据块的引用计数加1。
对于如何判断存储介质22中是否存在相同的数据块,通常的做法是预先保存存储介质22中保存的各个数据块的指纹,其中每个数据块的指纹是根据预设的哈希函数对每个数据块进行计算获得的。然后根据该哈希函数对待存储的数据块进行计算,获得该待存储的数据块的指纹;将该指纹与预先保存的各个数据块的指纹进行匹配,如果有相同的指纹说明存储介质22中已保存有相同的数据块,否则说明没有保存该待存储的数据块。该各个数据块的指纹可以保存在缓存212中,也可以保存在存储介质22中。除此之外,还可以采用其他方式判断存储介质22中是否保存有相同的数据块,这里不再一一列举。
需要说明的是,在本发明实施例中,由于源存储设备20具有重复数据删除功能,因此保存有源存储设备20中所有数据块的指纹信息,本实施例将其称为指纹信息集合(可以理解的是,指纹信息集合中包含的数据块的指纹均不相同)。除此之外,处理器211还可以再单独保存每个备份周期对应的指纹信息集合。数据块的指纹信息可选地可以为数据块的指纹,也可以为数据块的指纹的索引(例如,指向数据块的指纹的指针),由此,在需要进行差异数据备份时,处理器211可以直接根据单独保存的每个备份周期对应的指纹信息集合,确定出每个备份周期中需要备份的数据块,并将需要备份的数据块发送给备份存储设备进行备份存储。
图3是根据本发明实施例的差异数据备份的方法的示意性流程图。该方法应用于图1所示的源存储设备20和备份存储设备30中。如图3所示,该方法100包括:
S110,源存储设备20确定当前备份周期对应的指纹信息集合。
在本实施例中,源存储设备20可以按周期将差异数据备份到备份存储设备30,每个周期在本实施例中称为备份周期。具体的,源存储设备20可以将每个备份周期内接收的差异数据发送给备份存储设备30。由于在本实施例中,差异数据需要被划分为若干数据块以判断是否与已经保存的数据块重复,因此差异数据也可以被称为差异数据块。另外,在本实施例中由于源存储设备20具有重复数据删除功能,因此保存有所述源存储设备20中所有数据块的指纹信息,本实施例将其称为指纹信息集合(可以理解的是,指纹信息集合中包含的数据块的指纹均不相同)。除了所有数据块的指纹信息集合之外,还可以再单独保存一份当前备份周期对应的指纹信息集合。可选地,所述指纹信息集合以及当前备份周期对应的指纹信息集合可以存在于存储介质22中,也可以存在于缓存212中。
所述当前备份周期对应的指纹信息集合包括在该当前备份周期的开始时刻与上一次备份周期的结束时刻之间源存储设备20保存的目标数据块的指纹信息,并且目标数据块与源存储设备20在上一次备份周期的结束时刻之前保存的所有数据块均不相同,也就是说,目标数据块即为当前备份周期中源存储设备20需要备份给备份存储设备30的数据块。
具体地,步骤S110是由源存储设备20中的处理器211执行的。处理器211对写入数据进行重复数据删除操作的同时记录重复数据删除过程中保存的目标数据块的指纹信息。
作为一个例子,处理器211可以将数据块的指纹信息保存在链表中,或者说,处理器211采用链表存储方式存储数据块的指纹信息。具体地,链表中可以保存有所有数据块的指纹信息、备份周期的标识以及指纹信息集合,备份周期的标识与指纹信息集合之间具有对应关系(对应关系的实现可以由链表的实现方式决定),由此,所述步骤S110具体可以是处理器211根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,直接从链表中取出与当前备份周期相对应的指纹信息集合。
示例性地,链表的结构如图4所示,链表的头节点中保存有备份周期的标识,链表的第i个元素节点中保存有目标数据块中第i个目标数据块的指纹信息,k为目标数据块的总个数,其中k为大于等于1的整数,i为大于0且小于k的整数。
可选地,链表可以存在于存储介质22中,也可以存在于缓存212中, 备份周期的标识可以包括备份周期的开始时间和/或结束时间。
应理解,存储数据块的指纹信息的方式还可以有其他的方式,例如,还可以采用堆栈或者队列的存储方式存储数据块的指纹信息。本实施例并不需要对存储数据块的指纹信息的方式进行任何限定。
S120,源存储设备20根据所述当前备份周期对应的指纹信息集合,获取当前备份周期中需要备份的数据块。
可选地,指纹信息可以是目标数据块的指纹的索引,例如可以是指向指纹的指针,此时处理器211在确定当前备份周期对应的指纹信息集合后,可以根据指纹信息集合中的指针的值确定当前备份周期对应的指纹,然后根据指纹、存储介质22或缓存212中保存的指纹与数据块的存储地址的映射关系,获取到目标数据块,也即当前备份周期中需要备份的数据块。
可选地,指纹信息还可以是目标数据块的指纹,此时处理器211在确定当前备份周期对应的指纹信息集合后,可以直接根据所述指纹信息集合中包含的指纹、存储介质22或缓存212中保存的指纹与对应数据块的存储地址的映射关系,获取到目标数据块。
进一步地,图4所示的链表中的第i个元素节点中还保存有第i个目标数据块的指纹与第i的目标数据块的存储地址的映射关系,由此,处理器211可以直接根据链表中保存的指纹、指纹与目标数据块的存储地址的映射关系,获取到目标数据块。
具体的,步骤S120可以是源存储设备20中的处理器211执行的。
S130,源存储设备20向备份存储设备30发送所述需要备份的数据块。
具体的,处理器211通过通信接口215将需要备份的数据块发送给备份存储设备30。
S140,备份存储设备30存储该需要备份的数据块。
本发明实施例中,在S140中,备份存储设备30可以在接收到需要备份的数据块时,采用与源存储设备相同的指纹计算方法计算接收到的需要备份的数据块的指纹,并将计算得到的指纹存储到备份存储设备30的存储介质32中。
可选地,在S130中,源存储设备20还可以向备份存储设备30发送需要备份的数据块的指纹,相应地,在S140中,备份存储设备30直接将接收到的指纹保存到存储介质32中,由此,可以节省备份存储设备30的计算资 源。
可选地,如图3所示,方法100还可以包括:
S150,备份存储设备30向源存储设备20反馈备份存储结果。
所述备份存储结果指示备份存储设备30已经成功存储需要备份的数据块。
图3所示的方法100,主要适用于源存储设备20与备份存储设备30使用相同的重删算法、重删范围、数据块大小的场景中,在图3所示的方法的基础上不需要备份存储设备30的参与,源存储设备20就可以判断一个备份周期内需要备份的数据块,能够提高数据备份的效率。
在某些场景下,源存储设备20的重删范围与备份存储设备30的重删范围不相同,比如源存储设备20采用局部重删机制,备份存储设备30采用全局重删机制,由于局部重删机制限定的重删范围为单个存储单元(如单个逻辑单元号(Logical Unit Number,简称为“LUN”或者单个资源池(POOL)),而全局重删机制限定的重删范围为整个系统的存储空间,在备份存储设备30采用全局重删机制时,可以理解为备份存储设备30除了用于备份源存储设备20中的数据块外,还用于备份其他源存储设备中的数据块,所以可能出现源存储设备20确定的需要备份的数据块在备份存储设备30中已经存储过了的情况,所以在源存储设备20实际发送数据块之前,可以增加发送源存储设备20确定的需要备份的数据块的指纹到备份存储设备30进行对比的步骤。具体如图5所示,图5中方法200包括:
S210,源存储设备20获取当前备份周期对应的指纹信息集合。
此步骤与S110相同,为避免重复,在此不再赘述。
S220,源存储设备20向备份存储设备30发送所述指纹信息集合对应的指纹。
在步骤S220中,源存储设备20的处理器211只需要将确定的当前备份周期中需要备份的数据块(当前备份周期的开始时刻与上一次备份周期的结束时刻之间源存储设备20保存的目标数据块,所述目标数据块与源存储设备20在上一次备份周期的结束时刻之前保存的所有数据块均不相同)的指纹发送给备份存储设备进行指纹对比,而现有技术中,源存储设备需要将当前备份周期的开始时刻与上一次备份周期的结束时刻之间源存储设备20接收到的数据包括的所有数据块的指纹发送给备份存储设备30进行指纹对比。 由此,本发明实施例的差异数据备份的方法,能够降低源存储设备向备份存储设备发送的指纹的数量,从而降低网络带宽的消耗及减少备份存储设备进行指纹比对消耗的时间。
S230,备份存储设备30将接收到的指纹与自身已保存的指纹进行对比。
本实施例与图3所示的实施例的区别在于,本实施例中备份存储设备30接收源存储设备20发送的指纹并与自身已保存的指纹的进行比对,而图3所示的实施例不需要。原因在于图3所示的实施例的方法主要应用于源存储设备20和备份存储设备30采用相同的重删范围的场景中,而本实施例的方法主要应用于源存储设备20采用局部重删机制,备份存储设备30采用全局重删机制的场景中,如上文所述,此场景中,源存储设备20确定的需要备份的数据块在备份存储设备30中可能已经存储过了,为了避免源存储设备20将不必要的数据块发送给备份存储设备30,源存储设备20在向备份存储设备30发送数据块之前,将源存储设备20确定的需要备份的数据块的指纹发送给备份存储设备30进行对比。
S240,源存储设备20接收备份存储设备30发送的反馈消息。
反馈消息会指示S230中指纹对比的结果,具体地,反馈消息用于指示差异指纹,这里的差异指纹指的是S220中备份存储设备30接收到的指纹中没有在备份存储设备30中保存过的指纹,也就是说差异指纹实际上是S220中备份存储设备30接收到的指纹中的部分指纹,这部分指纹与备份存储设备30中保存的数据块的指纹不同。
可选地,反馈消息可以采用间接指示的方式指示差异指纹,具体地,反馈消息中携带源存储设备20发送的指纹中已经在备份存储设备30中存在的那部分指纹,源存储设备20通过将反馈消息中携带的指纹与之前发送给备份存储设备30的指纹进行对比,即可得出差异指纹。反馈消息还可以采用直接指示的方式指示差异指纹,具体地,反馈消息中携带源存储设备20发送的指纹中没有在备份存储设备30中保存过的那部分指纹,源存储设备20直接将反馈消息中携带的指纹确定为差异指纹。
S250,源存储设备20根据反馈消息,重新确定当前备份周期中需要备份的数据块,并将重新确定的需要备份的数据块发送给备份存储设备30。
具体地,源存储设备20的处理器211根据反馈消息中携带的指纹确定出S220中发送给备份存储设备30的指纹中没有在备份存储设备30中保存 过的指纹(即差异指纹),并根据指纹与数据块的存储地址的映射关系,获取到与差异指纹相对应的数据块,并将这些数据块通过通信接口215发送给备份存储设备30。
S260,备份存储设备30接收源存储设备20发送的重新确定的需要备份的数据块并存储该需要备份的数据块。
可选地,如图4所示,方法200还可以包括:
S270,备份存储设备30向源存储设备20反馈备份存储结果。
所述备份存储结果指示备份存储设备30已经成功存储需要备份的数据块。
以上结合图3至图5详细描述了根据本发明实施例的差异数据备份的方法,下面将结合图6详细描述根据本发明实施例的存储设备。该存储设备应用于存储系统中,该存储系统包括该存储设备和备份存储设备,如图6所示,存储设备40包括:
处理单元41,用于根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,该指纹信息集合包括在该当前备份周期的开始时刻与上一次备份周期的结束时刻之间该存储设备保存的目标数据块的指纹信息,该目标数据块与该源存储设备在该上一次备份周期的结束时刻之前保存的所有数据块均不相同;
该处理单元41,还用于根据该目标数据块的指纹信息,获取该目标数据块;
发送单元42,用于向该备份存储设备发送该目标数据块。
因此,根据本发明实施例的存储设备仅需要根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,就可以确定当前备份周期中需要备份的数据块,并将需要备份的数据块发送给备份存储设备。由此,能够提高数据备份的效率,降低计算资源和网络资源的消耗。
在本发明实施例中,可选地,该发送单元42还用于:向该备份存储设备发送该目标数据块的指纹。
在本发明实施例中,可选地,该目标数据块的指纹信息保存在链表中,其中,该链表的头节点中保存有该当前备份周期的标识,该链表的第i个元素结点中保存有该目标数据块中第i个目标数据块的指纹信息,k为该目标数据块的总个数,i为大于0且小于等于k的整数。
在本发明实施例中,可选地,该第i个目标数据块的指纹信息为该第i个目标数据块的指纹,该链表的第i个元素结点中还保存有该第i个目标数据块的指纹与该第i个目标数据块的存储地址的映射关系;
其中,该处理单元41具体用于:根据该第i个目标数据块的指纹、该第i个目标数据块的指纹与该第i个目标数据块的存储地址的映射关系,获取该第i的目标数据块。
应理解,根据本发明实施例的存储设备40可对应于执行本发明实施例中的方法100中的源存储设备,并且存储设备40中的各个单元的上述和其它操作和/或功能分别为了实现图3中的方法中源存储设备对应的相应流程,为了简洁,在此不再赘述。
因此,根据本发明实施例的存储设备仅需要根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,就可以确定当前备份周期中需要备份的数据块,并将需要备份的数据块发送给备份存储设备。由此,能够提高数据备份的效率,降低计算资源和网络资源的消耗。
图7示出了根据本发明另一实施例的存储设备。该存储设备应用于存储系统中,该存储系统包括该存储设备和备份存储设备,如图7所示,存储设备50包括:
处理单元51,用于根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,该指纹信息集合包括在该当前备份周期的开始时刻与上一次备份周期的结束时刻之间该源存储设备保存的目标数据块的指纹信息,该目标数据块与该存储设备在该上一次备份周期的结束时刻之前保存的所有数据块均不相同;
发送单元52,用于向该备份存储设备发送该目标数据块的指纹信息对应的该目标数据块的指纹;
接收单元53,用于接收该备份存储设备发送的反馈消息,该反馈消息用于指示差异指纹,该差异指纹是该目标数据块的指纹的子集。并且与该备份存储设备中保存的数据块的指纹不同;
该发送单元52,还用于向该备份存储设备发送该差异指纹对应的目标数据块。
因此,根据本发明实施例的源存储设备只需要将当前备份周期的开始时刻与上一次备份周期的结束时刻之间存储的目标数据块的指纹发送给备份 存储设备进行指纹对比,其中,目标数据块与源存储设备在上一次备份周期的结束时刻之前保存的所有数据块均不相同,并根据对比结果确定当前备份周期中需要备份的数据块,而不需要将当前备份周期的开始时刻与上一次备份周期的结束时刻之间源存储设备接收到的数据包括的所有数据块的指纹发送给备份存储设备进行指纹对比,由此,能够降低向备份存储设备发送的指纹的数量,从而降低网络资源的消耗及减少备份存储设备进行指纹比对消耗的时间。
在本发明实施例中,可选地,该存储设备具有重复数据删除功能,该备份存储设备具有重复数据删除功能,该存储设备的重复数据删除范围小于该备份存储设备的重复数据删除范围。
应理解,根据本发明实施例的存储设备50可对应于执行本发明实施例中的方法200中的源存储设备,并且存储设备50中的各个单元的上述和其它操作和/或功能分别为了实现图5中的方法中源存储设备对应的相应流程,为了简洁,在此不再赘述。
因此,根据本发明实施例的源存储设备只需要将当前备份周期的开始时刻与上一次备份周期的结束时刻之间存储的目标数据块的指纹发送给备份存储设备进行指纹对比,其中,目标数据块与源存储设备在上一次备份周期的结束时刻之前保存的所有数据块均不相同,并根据对比结果确定当前备份周期中需要备份的数据块,而不需要将当前备份周期的开始时刻与上一次备份周期的结束时刻之间源存储设备接收到的数据包括的所有数据块的指纹发送给备份存储设备进行指纹对比,由此,能够降低向备份存储设备发送的指纹的数量,从而降低网络资源的消耗及减少备份存储设备进行指纹比对消耗的时间。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (14)

  1. 一种差异数据备份的方法,其特征在于,所述方法应用于存储系统中,所述存储系统包括源存储设备和备份存储设备,所述方法由所述源存储设备执行,所述方法包括:
    根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,所述指纹信息集合包括在所述当前备份周期的开始时刻与上一次备份周期的结束时刻之间所述源存储设备保存的目标数据块的指纹信息,所述目标数据块与所述源存储设备在所述上一次备份周期的结束时刻之前保存的所有数据块均不相同;
    根据所述目标数据块的指纹信息,获取所述目标数据块;
    向所述备份存储设备发送所述目标数据块。
  2. 根据权利要求1所述的方法,其特征在于,所述方法还包括:
    向所述备份存储设备发送所述目标数据块的指纹。
  3. 根据权利要求1或2所述的方法,其特征在于,所述目标数据块的指纹信息保存在链表中,其中,所述链表的头节点中保存有所述当前备份周期的标识,所述链表的第i个元素结点中保存有所述目标数据块中第i个目标数据块的指纹信息,k为所述目标数据块的总个数,其中k为大于等于1的整数,i为大于0且小于等于k的整数。
  4. 根据权利要求3所述的方法,其特征在于,所述第i个目标数据块的指纹信息为所述第i个目标数据块的指纹,所述链表的第i个元素结点中还保存有所述第i个目标数据块的指纹与所述第i个目标数据块的存储地址的映射关系;
    其中,所述根据所述目标数据块的指纹信息,获取所述目标数据块,包括:
    根据所述第i个目标数据块的指纹、所述第i个目标数据块的指纹与所述第i个目标数据块的存储地址的映射关系,获取所述第i个目标数据块。
  5. 一种差异数据备份的方法,其特征在于,所述方法应用于存储系统中,所述存储系统包括源存储设备和备份存储设备,所述方法由所述源存储设备执行,所述方法包括:
    根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,所述指纹信息集合包括在所述 当前备份周期的开始时刻与上一次备份周期的结束时刻之间所述源存储设备保存的目标数据块的指纹信息,所述目标数据块与所述源存储设备在所述上一次备份周期的结束时刻之前保存的所有数据块均不相同;
    向所述备份存储设备发送所述目标数据块的指纹信息对应的所述目标数据块的指纹;
    接收所述备份存储设备发送的反馈消息,所述反馈消息用于指示差异指纹,所述差异指纹是所述目标数据块的指纹的子集,并且与所述备份存储设备中保存的数据块的指纹不同;
    向所述备份存储设备发送所述差异指纹对应的目标数据块。
  6. 根据权利要求5所述的方法,其特征在于,所述源存储设备具有重复数据删除功能,所述备份存储设备具有重复数据删除功能,所述源存储设备的重复数据删除范围小于所述备份存储设备的重复数据删除范围。
  7. 一种存储设备,其特征在于,所述存储设备应用于存储系统中,所述存储系统包括所述存储设备和备份存储设备,所述存储设备包括:
    处理单元,用于根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,所述指纹信息集合包括在所述当前备份周期的开始时刻与上一次备份周期的结束时刻之间所述存储设备保存的目标数据块的指纹信息,所述目标数据块与所述源存储设备在所述上一次备份周期的结束时刻之前保存的所有数据块均不相同;
    所述处理单元,还用于根据所述目标数据块的指纹信息,获取所述目标数据块;
    发送单元,用于向所述备份存储设备发送所述目标数据块。
  8. 根据权利要求7所述的存储设备,其特征在于,所述发送单元还用于:
    向所述备份存储设备发送所述目标数据块的指纹。
  9. 根据权利要求7或8所述的存储设备,其特征在于,所述目标数据块的指纹信息保存在链表中,其中,所述链表的头节点中保存有所述当前备份周期的标识,所述链表的第i个元素结点中保存有所述目标数据块中第i个目标数据块的指纹信息,k为所述目标数据块的总个数,其中k为大于等于1的整数,i为大于0且小于等于k的整数。
  10. 根据权利要求9所述的存储设备,其特征在于,所述第i个目标数 据块的指纹信息为所述第i个目标数据块的指纹,所述链表的第i个元素结点中还保存有所述第i个目标数据块的指纹与所述第i个目标数据块的存储地址的映射关系;
    其中,所述处理单元具体用于:
    根据所述第i个目标数据块的指纹、所述第i个目标数据块的指纹与所述第i个目标数据块的存储地址的映射关系,获取所述第i的目标数据块。
  11. 一种存储设备,其特征在于,所述存储设备应用于存储系统中,所述存储系统包括所述存储设备和备份存储设备,所述存储设备包括:
    处理单元,用于根据当前备份周期的标识、备份周期的标识与指纹信息集合的对应关系,确定当前备份周期对应的指纹信息集合,所述指纹信息集合包括在所述当前备份周期的开始时刻与上一次备份周期的结束时刻之间所述源存储设备保存的目标数据块的指纹信息,所述目标数据块与所述存储设备在所述上一次备份周期的结束时刻之前保存的所有数据块均不相同;
    发送单元,用于向所述备份存储设备发送所述目标数据块的指纹信息对应的所述目标数据块的指纹;
    接收单元,用于接收所述备份存储设备发送的反馈消息,所述反馈消息用于指示差异指纹,所述差异指纹是所述目标数据块的指纹的子集。并且与所述备份存储设备中保存的数据块的指纹不同;
    所述发送单元,还用于向所述备份存储设备发送所述差异指纹对应的目标数据块。
  12. 根据权利要求11所述的存储设备,其特征在于,所述存储设备具有重复数据删除功能,所述备份存储设备具有重复数据删除功能,所述存储设备的重复数据删除范围小于所述备份存储设备的重复数据删除范围。
  13. 一种存储设备,其特征在于,所述存储设备应用于存储系统中,所述存储系统包括所述存储设备和备份存储设备,所述存储设备包括:处理器、存储器和发送器,所述处理器、所述存储器和所述发送器通过总线系统相连,所述存储器用于存储指令,所述处理器用于执行该存储器存储的指令,使得所述存储设备执行如权利要求1至4任意一项所述的方法。
  14. 一种存储设备,其特征在于,所述存储设备应用于存储系统中,所述存储系统包括所述存储设备和备份存储设备,所述存储设备包括:处理器、存储器、发送器和接收器,所述处理器、所述存储器、所述发送器和所述接 收器通过总线系统相连,所述存储器用于存储指令,所述处理器用于执行该存储器存储的指令,使得所述存储设备执行如权利要求5或6所述的方法。
CN201680000498.9A 2016-03-02 2016-03-02 差异数据备份的方法和设备 Pending CN108780447A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/075269 WO2017147794A1 (zh) 2016-03-02 2016-03-02 差异数据备份的方法和设备

Publications (1)

Publication Number Publication Date
CN108780447A true CN108780447A (zh) 2018-11-09

Family

ID=59742393

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680000498.9A Pending CN108780447A (zh) 2016-03-02 2016-03-02 差异数据备份的方法和设备

Country Status (5)

Country Link
US (1) US20170269847A1 (zh)
EP (1) EP3312727B1 (zh)
CN (1) CN108780447A (zh)
HU (1) HUE042884T2 (zh)
WO (1) WO2017147794A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113568561A (zh) * 2020-04-29 2021-10-29 伊姆西Ip控股有限责任公司 用于信息处理的方法、电子设备和计算机存储介质
CN114415955A (zh) * 2022-01-05 2022-04-29 上海交通大学 基于指纹的块粒度数据去重系统和方法
CN113568561B (zh) * 2020-04-29 2024-05-17 伊姆西Ip控股有限责任公司 用于信息处理的方法、电子设备和计算机存储介质

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109558270B (zh) * 2017-09-25 2021-02-05 北京国双科技有限公司 数据备份的方法和装置、数据还原的方法和装置
JP7248267B2 (ja) * 2018-06-06 2023-03-29 Necソリューションイノベータ株式会社 ストレージ装置、復旧方法、プログラム
US10929050B2 (en) * 2019-04-29 2021-02-23 EMC IP Holding Company LLC Storage system with deduplication-aware replication implemented using a standard storage command protocol

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104166606A (zh) * 2014-08-29 2014-11-26 华为技术有限公司 文件备份方法和主存储设备

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7843823B2 (en) * 2006-07-28 2010-11-30 Cisco Technology, Inc. Techniques for balancing throughput and compression in a network communication system
CN101064730A (zh) * 2006-09-21 2007-10-31 上海交通大学 计算机网络数据文件本地和远程的备份方法
US8190835B1 (en) * 2007-12-31 2012-05-29 Emc Corporation Global de-duplication in shared architectures
US8060715B2 (en) * 2009-03-31 2011-11-15 Symantec Corporation Systems and methods for controlling initialization of a fingerprint cache for data deduplication
US8667328B2 (en) * 2009-04-28 2014-03-04 Ca, Inc. System and method for protecting windows system state
US8356017B2 (en) * 2009-08-11 2013-01-15 International Business Machines Corporation Replication of deduplicated data
US9401967B2 (en) * 2010-06-09 2016-07-26 Brocade Communications Systems, Inc. Inline wire speed deduplication system
US8745003B1 (en) * 2011-05-13 2014-06-03 Emc Corporation Synchronization of storage using comparisons of fingerprints of blocks
US9183094B2 (en) * 2012-05-25 2015-11-10 Symantec Corporation Backup image duplication
WO2014030252A1 (ja) * 2012-08-24 2014-02-27 株式会社日立製作所 ストレージ装置及びデータ管理方法
CN103902407A (zh) * 2012-12-31 2014-07-02 华为技术有限公司 一种虚拟机恢复方法及服务器
US9367559B1 (en) * 2013-10-01 2016-06-14 Veritas Technologies Llc Data locality control for deduplication
US9990156B1 (en) * 2014-06-13 2018-06-05 EMC IP Holding Company LLC Deduplicating snapshots associated with a backup operation
US10430102B2 (en) * 2014-06-27 2019-10-01 Nec Corporation Storage device, program, and information processing method
CN104375905A (zh) * 2014-11-07 2015-02-25 北京云巢动脉科技有限公司 一种基于数据块的增量备份的方法和系统
US10339106B2 (en) * 2015-04-09 2019-07-02 Commvault Systems, Inc. Highly reusable deduplication database after disaster recovery
US9639274B2 (en) * 2015-04-14 2017-05-02 Commvault Systems, Inc. Efficient deduplication database validation
US20170017567A1 (en) * 2015-07-15 2017-01-19 Innovium, Inc. System And Method For Implementing Distributed-Linked Lists For Network Devices
CN111240902A (zh) * 2015-09-25 2020-06-05 华为技术有限公司 数据备份的方法和数据处理系统
US9842114B2 (en) * 2015-09-25 2017-12-12 Netapp, Inc. Peer to peer network write deduplication
JP6561765B2 (ja) * 2015-10-23 2019-08-21 富士通株式会社 ストレージ制御装置およびストレージ制御プログラム
CN107957848B (zh) * 2016-10-14 2020-01-10 上海交通大学 重删处理方法及存储设备

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104166606A (zh) * 2014-08-29 2014-11-26 华为技术有限公司 文件备份方法和主存储设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113568561A (zh) * 2020-04-29 2021-10-29 伊姆西Ip控股有限责任公司 用于信息处理的方法、电子设备和计算机存储介质
CN113568561B (zh) * 2020-04-29 2024-05-17 伊姆西Ip控股有限责任公司 用于信息处理的方法、电子设备和计算机存储介质
CN114415955A (zh) * 2022-01-05 2022-04-29 上海交通大学 基于指纹的块粒度数据去重系统和方法
CN114415955B (zh) * 2022-01-05 2024-04-09 上海交通大学 基于指纹的块粒度数据去重系统和方法

Also Published As

Publication number Publication date
EP3312727A4 (en) 2018-04-25
EP3312727A1 (en) 2018-04-25
EP3312727B1 (en) 2018-11-14
HUE042884T2 (hu) 2019-07-29
US20170269847A1 (en) 2017-09-21
WO2017147794A1 (zh) 2017-09-08

Similar Documents

Publication Publication Date Title
US10261853B1 (en) Dynamic replication error retry and recovery
CN103019960B (zh) 分布式缓存方法及系统
CN103765373B (zh) 数据存储方法、数据存储装置和存储设备
US11232073B2 (en) Method and apparatus for file compaction in key-value store system
EP2811392A1 (en) Method and device for reducing read delay
US10116746B2 (en) Data storage method and network interface card
CN109522154B (zh) 数据恢复方法及相关设备与系统
CN108780447A (zh) 差异数据备份的方法和设备
US20200151122A1 (en) Data access method and apparatus
CN108989432B (zh) 用户态的文件发送方法、文件接收方法和文件收发装置
US20130282939A1 (en) Method and apparatuses for monitoring system bus
US20150134672A1 (en) Data Copy Management Apparatus and Data Copy Method Thereof
US20200057715A1 (en) Metadata-based operations for use with solid state devices
CN113656501B (zh) 一种数据读取方法、装置、设备以及存储介质
CN113364877B (zh) 数据处理方法、装置、电子设备和介质
CN109445687A (zh) 一种数据存储方法以及协议服务器
KR20170013319A (ko) 데이터 관리 방법, 노드, 그리고 데이터베이스 클러스터를 위한 시스템
KR20180126921A (ko) 데이터 저장 장치 및 그것의 동작 방법
CN104317716A (zh) 分布式节点间的数据传输方法及分布式节点设备
US9959079B2 (en) Writing data into redundant array of independent disks (RAID) of storage system
US10963182B2 (en) System and method for on-demand recovery points
US9513821B2 (en) Apparatus and method for indicating flash memory life
US20220147254A1 (en) Ufs device, method of operating the ufs device, and system including the ufs device
US20240086113A1 (en) Synchronous write method and device, storage system and electronic device
CN103092725B (zh) 一种实现存储器中数据备份的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20181109