CN103065096A - 一种数据保护方法、装置及系统 - Google Patents
一种数据保护方法、装置及系统 Download PDFInfo
- Publication number
- CN103065096A CN103065096A CN2012105518889A CN201210551888A CN103065096A CN 103065096 A CN103065096 A CN 103065096A CN 2012105518889 A CN2012105518889 A CN 2012105518889A CN 201210551888 A CN201210551888 A CN 201210551888A CN 103065096 A CN103065096 A CN 103065096A
- Authority
- CN
- China
- Prior art keywords
- data
- data block
- sign
- memory device
- corresponding relation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Abstract
本发明公开了一种数据保护方法、装置及系统,涉及数据保护领域,能够提高数据恢复的效率,缩短数据恢复的时间。该方法包括:存储设备接收服务器发送的至少一个数据块、标识对应关系及服务器根据映射策略为各个数据块配置的数据块标识,其中,至少一个数据块是由数据拆分而成,该数据对应数据标识,映射策略为各个数据块与数据块标识之间的映射关系,标识对应关系为数据标识与数据块标识之间的对应关系;存储设备存储标识对应关系,并将数据块存储至存储设备的生产卷,将数据块及对应的数据块标识存储至存储设备的日志卷。本发明用于持续数据的保护与恢复。
Description
技术领域
本发明涉及数据保护领域,尤其涉及一种数据保护方法、装置及系统。
背景技术
随着数据信息资产在企业中占据的位置越来越重要,数据丢失所造成的损失也越来越严重。为了保护重要的信息资产,人们一直采用数据复制、备份和恢复等数据保护技术,定期的对重要数据进行备份和复制。但是随着企业数据增长的速度的逐渐加快,使得单位时间内数据的变化量变得越来越大。因此对于这些企业来说,就需要将数据备份的时间间隔尽可能的缩小,甚至缩为零,而持续数据保护(Continuous Data Protection,简称CDP)就是为了满足这样的需求而出现的数据保护技术。
现今的持续数据保护技术主要有:基于应用的持续数据保护、基于文件的持续数据保护和基于数据块的持续数据保护。这里主要介绍一下基于数据块的持续数据保护,基于数据块的持续数据保护是对服务器进行监控,当对服务器中的文件有修改操作时,将该修改操作产生的数据以数据块的形式存储在存储设备的日志中,通过恢复日志中的数据块来实现任意时间点的文件恢复,且上述的存储设备可以为卷或磁盘,该卷或磁盘可以是服务器中的存储设备,也可以是外置的存储设备。
由于所存储的数据均是以数据块的形式保存的,而数据块是无法区分的。因此当用户想要恢复某个文件或数据就必须遍历某个时间点之前的所有日志,把在该时间点之前存储在存储设备中的文件或数据全部恢复,才能从恢复的文件或数据中得到所需要的完整文件,使得存储设备在恢复数据时所要处理的数据量过大,恢复数据信息所需的时间也过长。
发明内容
本发明的实施例提供一种数据保护方法、装置及系统,能够提高数据恢复的效率,缩短数据恢复的时间。
为达到上述目的,本发明的实施例采用如下技术方案:
第一方面,提供一种数据保护方法,包括:
存储设备接收服务器发送的至少一个数据块、标识对应关系及所述服务器根据映射策略为各个所述数据块配置的数据块标识,其中,所述至少一个数据块是由数据拆分而成,所述数据对应数据标识,所述映射策略为各个所述数据块与所述数据块标识之间的映射关系,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系;
所述存储设备存储所述标识对应关系,并将所述数据块存储至所述存储设备的生产卷,将所述数据块及对应的所述数据块标识存储至所述存储设备的日志卷。
在第一种可能的实现方式中,根据第一方面,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系,具体包括:
所述数据标识与一个所述数据块标识有对应关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识相同;
或者,
所述数据标识与至少两个数据块标识有映射关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识为所述至少两个数据块标识中的任意一个。
在第二种可能的实现方式中,结合第一方面或第一种可能的实现方式,所述方法还包括:
所述存储设备接收所述服务器发送的数据恢复请求,所述数据恢复请求包含待恢复数据的数据标识;
所述存储设备根据所述数据标识从所述标识对应关系中查找所述数据标识对应的数据块标识,所述数据标识对应的数据块标识至少为一个;
所述存储设备搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块;
所述存储设备将所述配置有所述数据块标识的数据块写入所述存储设备的生产卷。
在第三种可能的实现方式中,根据第二种可能的实现方式,所述搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块,包括:
所述存储设备根据所述数据恢复请求确定对所述待恢复数据的恢复时间点,所述数据恢复请求还包括对所述待恢复数据的恢复时间点;
所述存储设备搜索所述恢复时间点之前存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块。
第二方面,提供一种存储设备,包括:
数据接收单元,用于接收服务器发送的至少一个数据块、标识对应关系及所述服务器根据映射策略为各个所述数据块配置的数据块标识,其中,所述至少一个数据块是由数据拆分而成,所述数据对应数据标识,所述映射策略为各个所述数据块与所述数据块标识之间的映射关系,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系;
数据存储单元,用于存储所述数据接收单元接收的所述标识对应关系,并将所述数据接收单元接收的所述数据块存储至所述存储设备的生产卷,将所述数据接收单元接收的所述数据块及对应的所述数据块标识存储至所述存储设备的日志卷。
在第一种可能的实现方式中,根据第二方面,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系,具体包括:
所述数据标识与一个所述数据块标识有对应关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识相同;
或者,
所述数据标识与至少两个数据块标识有映射关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识为所述至少两个数据块标识中的任意一个。
在第二种可能的实现方式中,结合第二方面或第一种可能的实现方式,所述存储设备还包括:
请求接收单元,用于接收所述服务器发送的数据恢复请求,所述数据恢复请求包含待恢复数据的数据标识;
标识确定单元,用于根据所述请求接收单元接收到的所述数据标识从所述标识对应关系中查找所述数据标识对应的数据块标识,所述数据标识对应的数据块标识至少为一个;
数据块获取单元,用于搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述标识确定单元确定的所述数据块标识的数据块;
数据恢复单元,用于将所述数据块获取单元获取的所述配置有所述数据块标识的数据块写入所述存储设备的生产卷。
在第三种可能的实现方式中,根据第二种可能的实现方式,所述数据块获取单元还用于:根据所述数据恢复请求确定对所述待恢复数据的恢复时间点,所述数据恢复请求还包括对所述待恢复数据的恢复时间点;搜索所述恢复时间点之前存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块。
第三方面,提供一种存储设备,包括至少一个处理器,存储器,通信总线以及至少一个通信接口;
其中,所述通信总线用于实现上述组件之间的连接并通信,所述通信接口用于与外部设备连接并通信;
所述存储器中存储需要执行的程序代码,所述程序代码具体可以包括:数据接收单元和数据存储单元;
所述处理器用于执行所述存储器中存储的单元,当上述单元被所述处理器执行时,实现如下功能:
所述数据接收单元,用于接收服务器发送的至少一个数据块、标识对应关系及所述服务器根据映射策略为各个所述数据块配置的数据块标识,其中,所述至少一个数据块是由数据拆分而成,所述数据对应数据标识,所述映射策略为各个所述数据块与所述数据块标识之间的映射关系,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系;
所述数据存储单元,用于存储所述数据接收单元接收的所述标识对应关系,并将所述数据接收单元接收的所述数据块存储至所述存储设备的生产卷,将所述数据接收单元接收的所述数据块及对应的所述数据块标识存储至所述存储设备的日志卷。
在第一种可能的实现方式中,根据第三方面,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系,具体包括:
所述数据标识与一个所述数据块标识有对应关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识相同;
或者,
所述数据标识与至少两个数据块标识有映射关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识为所述至少两个数据块标识中的任意一个。
在第二种可能的实现方式中,结合第三方面或第一种可能的实现方式,所述存储器中存储需要执行的所述程序代码还包括:请求接收单元、标识确定单元、数据块获取单元和数据恢复单元,其中:
所述请求接收单元,用于接收所述服务器发送的数据恢复请求,所述数据恢复请求包含待恢复数据的数据标识;
所述标识确定单元,用于根据所述请求接收单元接收到的所述数据标识从所述标识对应关系中查找所述数据标识对应的数据块标识,所述数据标识对应的数据块标识至少为一个;
所述数据块获取单元,用于搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述标识确定单元确定的所述数据块标识的数据块;
所述数据恢复单元,用于将所述数据块获取单元获取的所述配置有所述数据块标识的数据块写入所述存储设备的生产卷。
在第三种可能的实现方式中,根据第二种可能的实现方式,所述数据块获取单元还用于根据所述数据恢复请求确定对所述待恢复数据的恢复时间点,所述数据恢复请求还包括对所述待恢复数据的恢复时间点;搜索所述恢复时间点之前存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块。
第四方面,提供一种数据保护系统,包括至少一个存储设备和服务器,所述存储设备和所述服务器连接,其中:
所述服务器用于向所述存储设备发送至少一个数据块、标识对应关系及根据映射策略为各个所述数据块配置的数据块标识;
所述存储设备用于接收所述服务器发送的所述至少一个数据块、所述标识对应关系及所述服务器根据所述映射策略为各个所述数据块配置的数据块标识,其中,所述至少一个数据块是由所述数据拆分而成,所述数据对应数据标识,所述映射策略为各个所述数据块与所述数据块标识之间的映射关系,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系;
所述存储设备还用于存储所述标识对应关系,并将所述数据块存储至所述存储设备的生产卷,将所述数据块及对应的所述数据块标识存储至所述存储设备的日志卷;
所述服务器还用于向所述存储设备发送数据恢复请求,所述数据恢复请求包含待恢复数据的数据标识;
所述存储设备还用于接收所述服务器发送的数据恢复请求,根据所述数据标识从所述标识对应关系中查找所述数据标识对应的数据块标识,所述数据标识对应的数据块标识至少为一个;
所述存储设备还用于搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块;
所述存储设备还用于将所述配置有所述数据块标识的数据块写入所述存储设备的生产卷,替代存储在所述生产卷中的所述待恢复数据。
在第一种可能的实现方式中,根据第四方面,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系,具体包括:
所述数据标识与一个所述数据块标识有对应关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识相同;
或者,
所述数据标识与至少两个数据块标识有映射关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识为所述至少两个数据块标识中的任意一个。
在第二种可能的实现方式中,结合第四方面或第一种可能的实现方式,所述存储设备具体还用于根据所述数据恢复请求确定对所述待恢复数据的恢复时间点,所述数据恢复请求还包括对所述待恢复数据的恢复时间点;搜索所述恢复时间点之前存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块。
本发明的实施例提供的数据保护方法、装置及系统,存储设备将数据拆分的至少一个数据块存储至存储设备的生产卷,将数据拆分的至少一个数据块及对应的数据块标识存储至存储设备的日志卷,以便在需要进行数据恢复时,存储设备可以根据为数据的数据块配置的数据块标识,只将需要恢复的数据进行恢复,而不必将所有的数据进行恢复操作,提高了数据恢复的效率,缩短了数据恢复的时间。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明的实施例提供的一种数据保护方法的流程示意图;
图2为本发明的实施例提供的另一种数据保护方法的流程示意图;
图3为本发明的实施例提供的一种存储设备的结构示意图;
图4为本发明的实施例提供的另一种存储设备的结构示意图;
图5为本发明的另一实施例提供的存储设备的结构示意图;
图6为本发明的实施例提供的数据保护系统的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
持续数据保护是为了应对现今企业数据增长的速度逐渐加快而出现的数据保护技术,在对带有存储设备的电子产品(如手机、电脑、电子书等产品)的日常操作中,即时产生的数据一般存储在存储设备的可即时读写的生产卷中,此外,这部分数据还通过备份的形式存储于存储设备的日志卷中,而当生产卷中的数据产生损坏或丢失时,通过恢复日志卷中存储的数据块来实现任意时间点的文件的恢复,基于上述思想本发明的实施例提供了一种数据保护方法、装置及系统,其中,数据保护方法具体实现方式如下,参照图1所示,在存储设备侧,该数据保护方法包括如下步骤:
101、存储设备接收服务器发送的至少一个数据块、标识对应关系及服务器根据映射策略为各个数据块配置的数据块标识。
其中,至少一个数据块是由数据拆分而成,该数据对应数据标识,该映射策略为各个数据块与数据块标识之间的映射关系,该标识对应关系为数据标识与数据块标识之间的对应关系。
而上述映射策略中的映射关系和标识对应关系是用户终端按照实际需求而定义的,通常服务器发送的数据一般为重要数据或者易损坏易丢失的数据,而并不是存储设备接收到的所有数据的数据块都会在该映射关系中找到对应的数据块标识。
且本发明中描述的存储设备可以为阵列存储设备,如外置存储阵列组。
可选的,标识对应关系为数据标识与数据块标识之间的对应关系,具体包括:
数据标识与一个数据块标识有对应关系,服务器根据映射策略为各个数据块配置的数据块标识相同;
或者,
数据标识与至少两个数据块标识有映射关系,服务器根据映射策略为各个数据块配置的数据块标识为至少两个数据块标识中的任意一个。
102、存储设备存储标识对应关系,并将数据块存储至存储设备的生产卷,将数据块及对应的数据块标识存储至存储设备的日志卷。
步骤102中的存储设备的生产卷用来存储服务器发送的数据块,具体的可以为将服务器发送的数据块所包含的数据写入存储设备的生产卷进行存储,而存储设备的日志卷用来存储数据块及数据块对应的数据块标识和标识对应关系,这样存储设备的日志卷就包含了所有用来恢复存储设备的生产卷中的某个数据的所有信息;若存储设备的生产卷中的数据被破坏时,则可以利用存储设备的日志卷来恢复想要恢复的数据。
本发明的实施例提供的数据保护方法,存储设备将数据拆分的至少一个数据块存储至存储设备的生产卷,将数据拆分的至少一个数据块及对应的数据块标识存储至存储设备的日志卷,以便在需要进行数据恢复时,存储设备可以根据为数据的数据块配置的数据块标识,只将需要恢复的数据进行恢复,而不必将所有的数据进行恢复操作,提高了数据恢复的效率,缩短了数据恢复的时间。
本发明的实施例提供的另一种数据保护方法,如图2所示,在执行本发明的实施例提供的方法前,用户终端为服务器配置映射策略和标识对应关系,以便服务器根据映射策略为数据所拆分的至少一个数据块配置数据块标识,并在恢复数据时根据数据标识确定的数据块标识在存储设备中找到待恢复数据的数据块。其中,映射策略为数据块与数据块标识之间的映射关系,标识对应关系为数据标识与数据块标识之间的对应关系。且每个数据都对应有一个数据标识,每个数据标识对应至少一个数据块标识。
这里的映射策略是由用户终端按照实际需求所定义的,而标识对应关系则是根据映射策略所定义的,若将映射策略中的数据块标识定义为色彩数据,则该映射策略被定义为染色策略,即建立色彩数据和数据块之间的对应关系,这里的数据可以定义为电子产品当前操作的任意数据形式,包括文件、操作记录、应用执行等,这里可将数据定义为文件的形式进行说明,如,用户对文件A和文件B的数据块进行染色处理,其中字母A,B即两个文件的数据标识,而这两个文件的数据块的数据块标识则可以设定为文件A的数据块对应的数据块标识为红色,文件B的数据块对应的数据块标识为蓝色,且根据步骤101中所描述的,也可以设定文件A的数据块对应的数据块标识为红色或蓝色,文件B的数据块对应的数据块标识为黄色或绿色。
201、服务器根据映射策略为数据拆分的至少一个数据块配置数据块标识。
具体的,当服务器监控到某个记录有某一数据的修改数据(该修改数据可以为添加、删除或修改该数据所产生的数据)的数据块时,调用服务器配置好的映射策略,查看该映射策略中是否含有该数据块。若有,则该服务器为该数据块配置该数据块对应的数据块标识;若无,则不对该数据块进行数据块标识的配置。
202、服务器向存储设备发送数据拆分的至少一个数据块、标识对应关系及服务器根据映射策略为各个所述数据块配置的数据块标识。
当服务器和存储设备之间通过存储区域网络或路由器等数据传输通道或设备进行数据传输时,服务器和存储设备之间会有固定的数据传输的协议,则服务器向存储设备发送的数据拆分的至少一个数据块需要通过数据包的形式进行传输。且由于该协议是固定协议,则数据块标识直接附加到所有数据块组成的数据包上会不兼容当前协议。这样,为了兼容当前协议,在进行数据传输时,可以通过分开传输数据包和数据包中的数据块配置的数据块标识的方法来实现,即可以先传输数据包,再同步将数据包中的数据块配置的数据块标识发送到存储设备,而只有当数据包和数据块标识都传输成功后,才认为数据传输成功。这样分开传输的方法,能够不影响现有的数据传输的方法,可以很好地对当前的数据传输协议进行兼容。若对恢复时间目标(是指灾难发生后,从系统当机导致业务停顿之刻开始,到系统恢复至可以支持各部门业务恢复运营之时,此两点之间的时间)(RecoveryTime Object,简称RTO)要求不高的场景下,还可以对数据块标识进行异步传输,当传输多个数据块后,将这些数据块的数据块标识统一封装到一个数据块标识信息包中传输至存储设备,这样就可以减少同步传输的情况下的传输时间。总之,当服务器和存储设备之间通过存储区域网络或路由器等数据传输通道或设备进行数据传输时,数据包和数据块标识是分开传输的。而当存储设备为一个内置在服务器中的存储阵列或存储磁盘时,就不需要对数据拆分的至少一个数据块进行打包,可以直接进行存储。
203、存储设备接收服务器发送的数据拆分成的至少一个数据块、标识对应关系及服务器根据映射策略为各个数据块配置的数据块标识。
可选的,标识对应关系为数据标识与数据块标识之间的对应关系,该标识对应关系具体包括:
数据标识与一个数据块标识有对应关系,服务器根据映射策略为各个数据块配置的数据块标识相同;
或者,
数据标识与至少两个数据块标识有映射关系,服务器根据映射策略为各个数据块配置的数据块标识为至少两个数据块标识中的任意一个。
204、存储设备存储标识对应关系,并将数据块存储至存储设备的生产卷,将数据块及对应的数据块标识存储至存储设备的日志卷。
205、存储设备接收到服务器发送的数据恢复请求,该数据恢复请求包含待恢复数据的数据标识。
其中,这里的数据恢复请求可以是服务器在进行系统维护时,获知有数据被损坏向存储设备发送的数据恢复请求;也可以是用户终端向服务器发送数据恢复指令,指令服务器向存储设备发送的数据恢复请求。
206、存储设备根据数据标识从标识对应关系中查找数据标识对应的数据块标识,该数据标识对应的数据块标识至少为一个。
具体的,在进行数据的恢复时,由于待恢复数据是夹杂在存储设备的日志卷的众多日志中的。若只想恢复该待恢复数据,就要先根据数据恢复请求中包含的待恢复数据的数据标识,才能从标识对应关系中查找到数据标识对应的数据块标识,从而从存储设备的日志卷中找到配置有该数据块标识的数据块。
其中,存储设备在确定数据块标识时,根据步骤203中所描述的,若该待恢复数据的数据标识对应的数据块标识为一个时,只需确定一次数据块标识便可进行搜索,若该待恢复数据的数据标识对应的数据块标识为至少两个数据块标识,便需要确定所有的数据块标识才可进行搜索。
207、存储设备搜索存储在存储设备的日志卷中的所有数据块,获取配置有数据块标识的数据块。
可选的,步骤207还包括:
存储设备根据数据恢复请求确定对待恢复数据的恢复时间点,该数据恢复请求还包括对待恢复数据的恢复时间点。
存储设备搜索恢复时间点之前存储在存储设备的日志卷中的所有数据块,获取配置有数据块标识的数据块。
具体的,存储设备在进行搜索时,有两种可行的方法:一种是存储设备搜索存储在存储设备的日志卷中的所有数据块,从而找出配置有数据块标识的数据块;一种是先根据数据恢复请求确定一个恢复时间点,以便该存储设备搜索该恢复时间点之前存储在存储设备的日志卷中的所有数据块,获取配置有该数据块标识的数据块。这样存储设备就可以根据实际需求来选择是否搜索所有的存储在存储设备的日志卷中的数据块。相比于现有技术的遍历存储设备中的所有数据块将所有的数据进行恢复,再从中找出所要恢复的数据,本发明中的从存储在存储设备的日志卷中的数据块中搜索并找出配置有数据块标识的数据块,能够快速高效的恢复数据。
208、存储设备将配置有数据块标识的数据块写入存储设备的生产卷。
具体的,存储设备接收到的服务器发出的数据块中,每个数据块中都携带有写入地址,不论这个数据块是写到存储设备的生产卷还是存储设备的日志卷,都会保留有这个写入地址。由于待恢复数据的数据块与搜索存储设备后获取的数据块中的写入地址相同,因此,当把存储设备的日志卷中的数据块写入存储设备的生成卷时,同样是按照所携带的写入地址写入的,因此自然就替换了生产卷中的相应数据。
本发明的实施例提供的数据保护方法,存储设备将数据拆分的至少一个数据块存储至存储设备的生产卷,将数据拆分的至少一个数据块及对应的数据块标识存储至存储设备的日志卷,以便在需要进行数据恢复时,存储设备可以根据为数据的数据块配置的数据块标识,只将需要恢复的数据进行恢复,而不必将所有的数据进行恢复操作,提高了数据恢复的效率,缩短了数据恢复的时间。
本发明的实施例提供了一种存储设备,该存储设备用于实施上述的数据保护方法,具体如图3所示,该存储设备可以为外置的存储阵列,包括直接用于做数据存储和应用的生产卷、和用于数据备份恢复准备的日志卷,其中,该存储设备3包括:数据接收单元31和数据存储单元32,其中:
数据接收单元31,用于接收服务器发送的至少一个数据块、标识对应关系及服务器根据映射策略为各个数据块配置的数据块标识,其中,至少一个数据块是由数据拆分而成,该数据对应数据标识,该映射策略为各个数据块与数据块标识之间的映射关系,标识对应关系为数据标识与数据块标识之间的对应关系。
数据存储单元32,用于存储数据接收单元31接收的标识对应关系,并将数据接收单元31接收的数据块存储至存储设备的生产卷,将数据接收单元接收的数据块及对应的数据块标识存储至存储设备的日志卷。
可选的,标识对应关系为数据标识与数据块标识之间的对应关系,具体包括:
数据标识与一个数据块标识有对应关系,服务器根据映射策略为各个数据块配置的数据块标识相同;
或者,
数据标识与至少两个数据块标识有映射关系,服务器根据映射策略为各个数据块配置的数据块标识为至少两个数据块标识中的任意一个。
本发明的实施例提供的存储设备,该存储设备将数据拆分的至少一个数据块存储至存储设备的生产卷,将数据拆分的至少一个数据块及对应的数据块标识存储至存储设备的日志卷,以便在需要进行数据恢复时,存储设备可以根据为数据的数据块配置的数据块标识,只将需要恢复的数据进行恢复,而不必将所有的数据进行恢复操作,提高了数据恢复的效率,缩短了数据恢复的时间。
可选的,如图4所示,该存储设备还包括:请求接收单元33、标识确定单元34、数据块获取单元35和数据恢复单元36,其中:
请求接收单元33,用于接收服务器发送的数据恢复请求,该数据恢复请求包含待恢复数据的数据标识。
标识确定单元34,用于根据请求接收单元33接收到的数据标识从标识对应关系中查找数据标识对应的数据块标识,该数据标识对应的数据块标识至少为一个。
数据块获取单元35,用于搜索存储在存储设备的日志卷中的所有数据块,获取配置有标识确定单元34确定的数据块标识的数据块。
数据恢复单元36,用于将数据块获取单元35获取的配置有数据块标识的数据块写入存储设备的生产卷。
可选的,数据块获取单元35还用于根据请求接收单元33接收到的数据恢复请求确定对待恢复数据的恢复时间点,该数据恢复请求还包括对待恢复数据的恢复时间点;搜索恢复时间点之前存储在存储设备的日志卷中的所有数据块,获取配置有数据块标识的数据块。
本发明的实施例提供的存储设备,该存储设备将数据拆分的至少一个数据块存储至存储设备的生产卷,将数据拆分的至少一个数据块及对应的数据块标识存储至存储设备的日志卷,以便在需要进行数据恢复时,存储设备可以根据为数据的数据块配置的数据块标识,只将需要恢复的数据进行恢复,而不必将所有的数据进行恢复操作,提高了数据恢复的效率,缩短了数据恢复的时间。
本发明又一实施例提供一种存储设备,该存储设备用于实施上述的数据保护方法,具体参照图5所示,该存储设备可以为外置的存储阵列,包括直接用于做数据存储和应用的生产卷、和用于数据备份恢复准备的日志卷,其中,该存储设备包括至少一个处理器41,存储器42,通信总线43以及至少一个通信接口44。
其中,通信总线43用于实现上述组件之间的连接并通信,该通信接口44用于与外部设备连接并通信。
存储器42中存储需要执行的程序代码,这些程序代码具体可以包括:数据接收单元421和数据存储单元422。
处理器41用于执行存储器42中存储的单元,当上述单元被所述处理器41执行时,实现如下功能:
数据接收单元421,用于接收服务器发送的至少一个数据块、标识对应关系及服务器根据映射策略为各个数据块配置的数据块标识,其中,至少一个数据块是由数据拆分而成,该数据对应数据标识,该映射策略为各个数据块与数据块标识之间的映射关系,标识对应关系为数据标识与数据块标识之间的对应关系。
数据存储单元422,用于存储数据接收单元421接收的标识对应关系,并将数据接收单元421接收的数据块存储至存储设备的生产卷,将数据接收单元接收的数据块及对应的数据块标识存储至存储设备的日志卷。
可选的,标识对应关系为数据标识与数据块标识之间的对应关系,具体包括:
数据标识与一个数据块标识有对应关系,服务器根据映射策略为各个数据块配置的数据块标识相同;
或者,
数据标识与至少两个数据块标识有映射关系,服务器根据映射策略为各个数据块配置的数据块标识为至少两个数据块标识中的任意一个。
可选的,该存储器42还包括:请求接收单元423、标识确定单元424、数据块获取单元425和数据恢复单元426,其中:
请求接收单元423,用于接收服务器发送的数据恢复请求,该数据恢复请求包含待恢复数据的数据标识。
标识确定单元424,用于根据请求接收单元423接收到的数据标识从标识对应关系中查找数据标识对应的数据块标识,该数据标识对应的数据块标识至少为一个。
数据块获取单元425,用于搜索存储在存储设备的日志卷中的所有数据块,获取配置有标识确定单元424确定的数据块标识的数据块。
数据恢复单元426,用于将数据块获取单元425获取的配置有数据块标识的数据块写入存储设备的生产卷。
可选的,数据块获取单元425还用于根据请求接收单元423接收到的数据恢复请求确定对待恢复数据的恢复时间点,该数据恢复请求还包括对待恢复数据的恢复时间点;搜索恢复时间点之前存储在存储设备的日志卷中的所有数据块,获取配置有数据块标识的数据块。
本发明的实施例提供的存储设备,该存储设备将数据拆分的至少一个数据块存储至存储设备的生产卷,将数据拆分的至少一个数据块及对应的数据块标识存储至存储设备的日志卷,以便在需要进行数据恢复时,存储设备可以根据为数据的数据块配置的数据块标识,只将需要恢复的数据进行恢复,而不必将所有的数据进行恢复操作,提高了数据恢复的效率,缩短了数据恢复的时间。
本发明提供一种数据保护系统,该数据保护系统用于通过组成该系统的存储设备和服务器实施上述的数据保护方法,其中存储设备为上述各设备实施例中提供的任一存储设备,如图6所示,数据的备份系统8包括:至少一个存储设备51和服务器52,该存储设备51和该服务器52连接,数据的备份和恢复系统可以根据上述的实施例提供的数据的备份和恢复方法,通过用户终端为服务器52配置映射策略和标识对应关系,以便服务器52根据映射策略为数据所拆分的至少一个数据块配置数据块标识,并在恢复数据时根据数据标识确定的数据块标识在存储设备51中找到待恢复数据的数据块,其中:
服务器52用于向存储设备51发送至少一个数据块、标识对应关系及根据映射策略为各个数据块配置的数据块标识。
存储设备51用于接收服务器52发送的至少一个数据块、标识对应关系及服务器52根据映射策略为各个数据块配置的数据块标识,其中,至少一个数据块是由数据拆分而成,该数据对应数据标识,映射策略为各个数据块与数据块标识之间的映射关系,标识对应关系为数据标识与数据块标识之间的对应关系。
存储设备51还用于存储标识对应关系,并将数据块存储至存储设备51的生产卷,将数据块及对应的数据块标识存储至存储设备51的日志卷。
服务器52还用于向存储设备51发送数据恢复请求,该数据恢复请求包含待恢复数据的数据标识。
存储设备51还用于接收服务器52发送的数据恢复请求,根据数据标识从标识对应关系中查找数据标识对应的数据块标识,数据标识对应的数据块标识至少为一个。
存储设备51还用于搜索存储在存储设备51的日志卷中的所有数据块,获取配置有数据块标识的数据块。
存储设备51还用于将配置有数据块标识的数据块写入存储设备51的生产卷。
可选的,标识对应关系为数据标识与数据块标识之间的对应关系,具体包括:
数据标识与一个数据块标识有对应关系,服务器52根据映射策略为各个数据块配置的数据块标识相同;
或者,
数据标识与至少两个数据块标识有映射关系,服务器52根据映射策略为各个数据块配置的数据块标识为至少两个数据块标识中的任意一个。
可选的,存储设备51具体还用于根据数据恢复请求确定对待恢复数据的恢复时间点,数据恢复请求还包括对待恢复数据的恢复时间点;搜索恢复时间点之前存储在存储设备51的日志卷中的所有数据块,获取配置有数据块标识的数据块。
具体的,存储设备51在进行搜索时,有两种可行的方法:一种是存储设备51搜索存储在存储设备51的日志卷中的所有数据块,从而找出配置有数据块标识的数据块;一种是先根据数据恢复请求确定一个恢复时间点,以便该存储设备51搜索该恢复时间点之前存储在存储设备51的日志卷中的所有数据块,获取配置有该数据块标识的数据块。这样存储设备51就可以根据实际需求来选择是否搜索所有的存储在存储设备51的日志卷中的数据块。相比于现有技术的遍历存储设备51中的所有数据块将所有的数据进行恢复,再从中找出所要恢复的数据,本发明中的从存储在存储设备51的日志卷中的数据块中搜索并找出配置有数据块标识的数据块,能够快速高效的恢复数据。
本发明的实施例提供的数据保护系统,存储设备将数据拆分的至少一个数据块存储至存储设备的生产卷,将数据拆分的至少一个数据块及对应的数据块标识存储至存储设备的日志卷,以便在需要进行数据恢复时,存储设备可以根据为数据的数据块配置的数据块标识,只将需要恢复的数据进行恢复,而不必将所有的数据进行恢复操作,提高了数据恢复的效率,缩短了数据恢复的时间。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
Claims (11)
1.一种数据保护方法,其特征在于,包括:
存储设备接收服务器发送的至少一个数据块、标识对应关系及所述服务器根据映射策略为各个所述数据块配置的数据块标识,其中,所述至少一个数据块是由数据拆分而成,所述数据对应数据标识,所述映射策略为各个所述数据块与所述数据块标识之间的映射关系,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系;
所述存储设备存储所述标识对应关系,并将所述数据块存储至所述存储设备的生产卷,将所述数据块及对应的所述数据块标识存储至所述存储设备的日志卷。
2.根据权利要求1所述的方法,其特征在于,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系,具体包括:
所述数据标识与一个所述数据块标识有对应关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识相同;
或者,
所述数据标识与至少两个数据块标识有映射关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识为所述至少两个数据块标识中的任意一个。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
所述存储设备接收所述服务器发送的数据恢复请求,所述数据恢复请求包含待恢复数据的数据标识;
所述存储设备根据所述数据标识从所述标识对应关系中查找所述数据标识对应的数据块标识,所述数据标识对应的数据块标识至少为一个;
所述存储设备搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块;
所述存储设备将所述配置有所述数据块标识的数据块写入所述存储设备的生产卷。
4.根据权利要求3所述的方法,其特征在于,所述搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块,包括:
所述存储设备根据所述数据恢复请求确定对所述待恢复数据的恢复时间点,所述数据恢复请求还包括对所述待恢复数据的恢复时间点;
所述存储设备搜索所述恢复时间点之前存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块。
5.一种存储设备,其特征在于,包括:
数据接收单元,用于接收服务器发送的至少一个数据块、标识对应关系及所述服务器根据映射策略为各个所述数据块配置的数据块标识,其中,所述至少一个数据块是由数据拆分而成,所述数据对应数据标识,所述映射策略为各个所述数据块与所述数据块标识之间的映射关系,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系;
数据存储单元,用于存储所述数据接收单元接收的所述标识对应关系,并将所述数据接收单元接收的所述数据块存储至所述存储设备的生产卷,将所述数据接收单元接收的所述数据块及对应的所述数据块标识存储至所述存储设备的日志卷。
6.根据权利要求5所述的存储设备,其特征在于,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系,具体包括:
所述数据标识与一个所述数据块标识有对应关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识相同;
或者,
所述数据标识与至少两个数据块标识有映射关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识为所述至少两个数据块标识中的任意一个。
7.根据权利要求5或6所述的存储设备,其特征在于,所述存储设备还包括:
请求接收单元,用于接收所述服务器发送的数据恢复请求,所述数据恢复请求包含待恢复数据的数据标识;
标识确定单元,用于根据所述请求接收单元接收到的所述数据标识从所述标识对应关系中查找所述数据标识对应的数据块标识,所述数据标识对应的数据块标识至少为一个;
数据块获取单元,用于搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述标识确定单元确定的所述数据块标识的数据块;
数据恢复单元,用于将所述数据块获取单元获取的所述配置有所述数据块标识的数据块写入所述存储设备的生产卷。
8.根据权利要求7所述的存储设备,其特征在于,所述数据块获取单元还用于:根据所述数据恢复请求确定对所述待恢复数据的恢复时间点,所述数据恢复请求还包括对所述待恢复数据的恢复时间点;搜索所述恢复时间点之前存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块。
9.一种数据保护系统,其特征在于,包括至少一个存储设备和服务器,所述存储设备和所述服务器连接,其中:
所述服务器用于向所述存储设备发送至少一个数据块、标识对应关系及根据映射策略为各个所述数据块配置的数据块标识;
所述存储设备用于接收所述服务器发送的所述至少一个数据块、所述标识对应关系及所述服务器根据所述映射策略为各个所述数据块配置的数据块标识,其中,所述至少一个数据块是由所述数据拆分而成,所述数据对应数据标识,所述映射策略为各个所述数据块与所述数据块标识之间的映射关系,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系;
所述存储设备还用于存储所述标识对应关系,并将所述数据块存储至所述存储设备的生产卷,将所述数据块及对应的所述数据块标识存储至所述存储设备的日志卷;
所述服务器还用于向所述存储设备发送数据恢复请求,所述数据恢复请求包含待恢复数据的数据标识;
所述存储设备还用于接收所述服务器发送的数据恢复请求,根据所述数据标识从所述标识对应关系中查找所述数据标识对应的数据块标识,所述数据标识对应的数据块标识至少为一个;
所述存储设备还用于搜索存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块;
所述存储设备还用于将所述配置有所述数据块标识的数据块写入所述存储设备的生产卷。
10.根据权利要求9所述的系统,其特征在于,所述标识对应关系为所述数据标识与所述数据块标识之间的对应关系,具体包括:
所述数据标识与一个所述数据块标识有对应关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识相同;
或者,
所述数据标识与至少两个数据块标识有映射关系,所述服务器根据所述映射策略为各个所述数据块配置的数据块标识为所述至少两个数据块标识中的任意一个。
11.根据权利要求9或10所述的系统,其特征在于,
所述存储设备具体还用于根据所述数据恢复请求确定对所述待恢复数据的恢复时间点,所述数据恢复请求还包括对所述待恢复数据的恢复时间点;搜索所述恢复时间点之前存储在所述存储设备的日志卷中的所有数据块,获取配置有所述数据块标识的数据块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210551888.9A CN103065096B (zh) | 2012-12-18 | 2012-12-18 | 一种数据保护方法、装置及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210551888.9A CN103065096B (zh) | 2012-12-18 | 2012-12-18 | 一种数据保护方法、装置及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103065096A true CN103065096A (zh) | 2013-04-24 |
CN103065096B CN103065096B (zh) | 2016-06-08 |
Family
ID=48107723
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210551888.9A Active CN103065096B (zh) | 2012-12-18 | 2012-12-18 | 一种数据保护方法、装置及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103065096B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104424316A (zh) * | 2013-09-06 | 2015-03-18 | 华为技术有限公司 | 一种数据存储方法、数据查询方法、相关装置和系统 |
CN105915574A (zh) * | 2015-12-14 | 2016-08-31 | 乐视网信息技术(北京)股份有限公司 | 用于文件同步的方法、接收方设备及系统 |
CN106155875A (zh) * | 2016-06-29 | 2016-11-23 | 北京小米移动软件有限公司 | 一种导出系统日志的方法和装置 |
CN109522154A (zh) * | 2015-09-10 | 2019-03-26 | 华为技术有限公司 | 数据恢复方法及相关设备与系统 |
CN113316770A (zh) * | 2019-01-25 | 2021-08-27 | 华为技术有限公司 | 数据修复方法和装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101344868A (zh) * | 2008-08-28 | 2009-01-14 | 北京握奇数据系统有限公司 | 数据备份和获取的方法和装置 |
CN101419564A (zh) * | 2008-12-11 | 2009-04-29 | 杭州华三通信技术有限公司 | 一种采用快照恢复数据的方法和装置 |
EP2299375A2 (en) * | 2002-11-14 | 2011-03-23 | Isilon Systems, Inc. | Systems and methods for restriping files in a distributed file system |
CN102722506A (zh) * | 2009-12-29 | 2012-10-10 | 华为数字技术(成都)有限公司 | 数据存储方法及设备 |
-
2012
- 2012-12-18 CN CN201210551888.9A patent/CN103065096B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2299375A2 (en) * | 2002-11-14 | 2011-03-23 | Isilon Systems, Inc. | Systems and methods for restriping files in a distributed file system |
CN101344868A (zh) * | 2008-08-28 | 2009-01-14 | 北京握奇数据系统有限公司 | 数据备份和获取的方法和装置 |
CN101419564A (zh) * | 2008-12-11 | 2009-04-29 | 杭州华三通信技术有限公司 | 一种采用快照恢复数据的方法和装置 |
CN102722506A (zh) * | 2009-12-29 | 2012-10-10 | 华为数字技术(成都)有限公司 | 数据存储方法及设备 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104424316A (zh) * | 2013-09-06 | 2015-03-18 | 华为技术有限公司 | 一种数据存储方法、数据查询方法、相关装置和系统 |
CN104424316B (zh) * | 2013-09-06 | 2018-06-05 | 华为技术有限公司 | 一种数据存储方法、数据查询方法、相关装置和系统 |
CN109522154A (zh) * | 2015-09-10 | 2019-03-26 | 华为技术有限公司 | 数据恢复方法及相关设备与系统 |
CN105915574A (zh) * | 2015-12-14 | 2016-08-31 | 乐视网信息技术(北京)股份有限公司 | 用于文件同步的方法、接收方设备及系统 |
CN106155875A (zh) * | 2016-06-29 | 2016-11-23 | 北京小米移动软件有限公司 | 一种导出系统日志的方法和装置 |
CN113316770A (zh) * | 2019-01-25 | 2021-08-27 | 华为技术有限公司 | 数据修复方法和装置 |
CN113316770B (zh) * | 2019-01-25 | 2023-08-22 | 华为技术有限公司 | 数据修复方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN103065096B (zh) | 2016-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103473277B (zh) | 文件系统的快照方法和装置 | |
CN101741730B (zh) | 文件下载方法及设备、提供文件下载服务的方法及系统 | |
CN103049355B (zh) | 一种数据库系统恢复方法及设备 | |
CN103678337B (zh) | 数据清除方法、装置及系统 | |
CN103065096A (zh) | 一种数据保护方法、装置及系统 | |
CN103051681B (zh) | 一种面向分布式文件系统的协作式日志系统 | |
CN102609479B (zh) | 一种内存数据库节点复制方法 | |
CN105959298A (zh) | 数据传输方法及数据传输装置 | |
CN103152390A (zh) | 分布式存储系统的节点配置方法、装置、节点及系统 | |
CN101860493A (zh) | 为客户端分配应用服务器地址的方法、服务器及系统 | |
CN103064757A (zh) | 数据备份方法及系统 | |
CN107786638A (zh) | 一种数据处理方法、装置及系统 | |
CN102012899A (zh) | 一种数据更新的方法、系统及设备 | |
CN101808010B (zh) | 一种设备管理方法、装置和主控板 | |
CN103731489A (zh) | 一种数据存储方法、系统和设备 | |
CN104317676A (zh) | 一种数据备份容灾方法 | |
CN103823807A (zh) | 一种去除重复数据的方法、装置及系统 | |
CN102904977A (zh) | 网络地址分配方法、服务器和节点 | |
CN104901983A (zh) | 一种信息同步方法、装置及系统 | |
CN102708063B (zh) | 磁盘空间管理方法及装置 | |
CN104796336A (zh) | 一种配置、下发流表项的方法及装置 | |
CN105812221A (zh) | 虚拟可扩展本地区域网络中数据传输的设备和方法 | |
CN103503413A (zh) | 传输网络信息的方法及装置 | |
CN102833173A (zh) | 网络设备及隧道适配方法 | |
CN103412860A (zh) | 数据库扩展方法、数据库扩展装置和数据库系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |