CN109857596A - 时间一致性备份方法、设备、系统、装置及存储介质 - Google Patents
时间一致性备份方法、设备、系统、装置及存储介质 Download PDFInfo
- Publication number
- CN109857596A CN109857596A CN201910178272.3A CN201910178272A CN109857596A CN 109857596 A CN109857596 A CN 109857596A CN 201910178272 A CN201910178272 A CN 201910178272A CN 109857596 A CN109857596 A CN 109857596A
- Authority
- CN
- China
- Prior art keywords
- time
- data
- consistency
- backup
- snapshot
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Retry When Errors Occur (AREA)
Abstract
本发明公开了一种时间一致性备份方法、设备、系统、装置及存储介质。本发明能够对集群存储空间进行时间一致性的备份,能够对共享存储型集群中的操作系统、业务系统和共享数据一并进行时间一致性备份,并且与共享存储型集群使用的“共享存储型集群文件系统”无关,不需要共享存储型集群的系统提供数据同步、集群卷快照、数据操作记录或存储端备份功能特性,具有更强的适应性。
Description
技术领域
本发明涉及数据存储技术领域,尤其涉及一种时间一致性备份方法、设备、系统、装置及存储介质。
背景技术
共享存储型集群是指系统中有多台计算机识别到同一存储空间,并相互协调共同管理所述存储空间中的数据。此类系统在构架上分为3大部分:1、存储端,负责提供存储空间,例如:SAN存储设备等;2、计算端,负责提供数据处理能力,例如:安装有Oracle RAC数据库系统的计算机,使用微软故障转移集群卷的Hyper-V计算节点等;3、存储网络,负责在存储端与计算端之间传输数据。
由于涉及多台计算机对同一存储空间的共同管理,因此,备份的时间一致性问题是必须解决的问题,现有技术中通常采用以下四种方式来解决备份的时间一致性问题:
第一种:将共享存储型集群数据同步到非集群环境中,在非集群环境中进行备份;但这种方式依赖该系统是否提供同步功能,并且仅能备份数据,无法备份操作系统与业务软件;
第二种:在计算端创建集群卷快照,对集群卷快照进行备份;但这种方式依赖该系统是否提供集群卷快照功能,并且增量备份时,需要对快照与之前备份数据进行差异比较,时间复杂度高,另外,多个数据卷之间不支持时间一致性;
第三种:持续同步源系统的数据操作记录(例如:数据库日志),通过“回放”进行备份;但这种方式依赖系统是否提供数据操作记录,并且降低了源系统的性能,另外,仅能备份数据,无法备份操作系统与业务软件;
第四种:在存储端进行备份;但这种方式依赖该存储端是否提供多存储空间,多设备之间时间一致性备份功能,并且依赖非集群存储空间是否由存储端提供。
上述内容仅用于辅助理解本发明的技术方案,并不代表承认上述内容是现有技术。
发明内容
本发明的主要目的在于提供一种时间一致性备份方法、设备、系统、装置及存储介质,旨在解决现有技术中无法对共享存储型集群中的操作系统、业务系统和共享数据一并进行时间一致性备份,以及备份共享数据时需要依赖系统所提供特性的技术问题。
为实现上述目的,本发明提供一种时间一致性备份方法,所述时间一致性备份方法包括以下步骤:
向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
优选地,所述在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳,具体包括:
在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将获取到的所需数据添加上区别时间戳,将具有区别时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第一时间一致性时间戳;
所述根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份,具体包括:
将各集群逻辑磁盘中的第一快照、从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据、具有区别时间戳的所需数据、以及从所述区别时间戳对应的时间到第一时间一致性时间戳对应的时间之间所累积的写入数据作为各集群逻辑磁盘的时间一致性备份点。
优选地,所述向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据,具体包括:
向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间分别创建第一快照,并实时获取所述共享存储空间及非共享存储空间在创建第一快照后的写入数据;
相应地,所述根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份,还包括:
将各非共享存储空间的第一快照和从发送第一开始采集指令的时间到所述第一时间一致性时间戳对应的时间所累积的写入数据作为各非共享存储空间的第一时间一致性备份点。
优选地,所述根据所述时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份之后,所述时间一致性备份方法还包括:
向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间创建第二快照,并实时获取所述共享存储空间在上次时间一致性备份之后的增量数据;
将各计算机节点中的共享存储空间的第二快照以及增量数据备份至对应的集群逻辑磁盘中;
在各集群逻辑磁盘中的第二快照完成备份后,将当前时刻的当前时间戳作为增量时间戳;
将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照和从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据进行叠加,获得各集群逻辑磁盘的第二叠加数据;
对各集群逻辑磁盘的第二叠加数据进行比较,以确定各集群逻辑磁盘的增量区别区域;
从各计算机节点中获取各集群逻辑磁盘的增量区别区域的所需数据;
在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将当前时刻的当前时间戳作为第二时间一致性时间戳;
向各计算机节点分别发送第二停止采集指令,以使各计算机节点停止获取所述共享存储空间在上次时间一致性备份之后的增量数据;
根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份。
优选地,所述在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将当前时刻的当前时间戳作为第二时间一致性时间戳,具体包括:
在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将获取到的所需数据添加上增量时间戳,将具有增量时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第二时间一致性时间戳;
所述根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份,具体包括:
将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照、从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据、具有增量时间戳的所需数据、以及从增量时间戳对应的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各集群逻辑磁盘的第二时间一致性备份点。
优选地,所述向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间创建第二快照,并实时获取所述共享存储空间在上次时间一致性备份之后的增量数据,具体包括:
向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间创建第二快照,并实时获取所述共享存储空间及非共享存储空间在上次时间一致性备份之后的增量数据;
相应地,所述根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份,还包括:
将各非共享存储空间的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一结束采集指令的时间之间所累积的增量数据、第二快照、以及从发送第二开始采集指令的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各非共享存储空间的第二时间一致性备份点。
此外,为实现上述目的,本发明还提供一种时间一致性备份设备,所述时间一致性备份设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的时间一致性备份程序,所述时间一致性备份程序配置为实现如上所述的时间一致性备份方法的步骤。
此外,为实现上述目的,本发明还提供一种时间一致性备份系统,所述时间一致性备份系统包括:共享存储空间、多个计算机节点和如上所述的时间一致性备份设备。
此外,为实现上述目的,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有时间一致性备份程序,所述时间一致性备份程序被处理器执行时实现如上所述的时间一致性备份方法的步骤。
此外,为实现上述目的,本发明还提供一种时间一致性备份装置,所述时间一致性备份装置包括:
采集开始模块,用于向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
快照备份模块,用于将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
第一时间确定模块,用于在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
数据叠加模块,用于将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
数据比较模块,用于对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
数据获取模块,用于从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
第二时间确定模块,用于在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
采集停止模块,用于向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
一致性备份模块,用于根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
本发明能够对集群存储空间进行时间一致性的备份,能够对共享存储型集群中的操作系统、业务系统和共享数据一并进行时间一致性备份,并且与共享存储型集群使用的“共享存储型集群文件系统”无关,不需要共享存储型集群的系统提供数据同步、集群卷快照、数据操作记录或存储端备份功能特性,具有更强的适应性。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的时间一致性备份设备结构示意图;
图2为本发明时间一致性备份设备方法第一实施例的流程示意图;
图3为本发明实施例中时间一致性备份方法的执行主体的结构示意图;
图4为本发明时间一致性备份设备装置第一实施例的结构框图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
参照图1,图1为本发明实施例方案涉及的硬件运行环境的时间一致性备份设备的结构示意图。
如图1所示,该时间一致性备份设备可以包括:处理器1001,例如CPU,通信总线1002、用户接口1003,网络接口1004,存储器1005。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的结构并不构成对时间一致性备份设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及时间一致性备份程序。
在图1所示的时间一致性备份设备中,网络接口1004主要用于与外部网络进行数据通信;用户接口1003主要用于接收用户的输入指令;所述时间一致性备份设备通过处理器1001调用存储器1005中存储的时间一致性备份程序,并执行以下操作:
向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
进一步地,处理器1001可以调用存储器1005中存储的时间一致性备份程序,还执行以下操作:
在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将获取到的所需数据添加上区别时间戳,将具有区别时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第一时间一致性时间戳;
将各集群逻辑磁盘中的第一快照、从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据、具有区别时间戳的所需数据、以及从所述区别时间戳对应的时间到第一时间一致性时间戳对应的时间之间所累积的写入数据作为各集群逻辑磁盘的时间一致性备份点。
进一步地,处理器1001可以调用存储器1005中存储的时间一致性备份程序,还执行以下操作:
向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间分别创建第一快照,并实时获取所述共享存储空间及非共享存储空间在创建第一快照后的写入数据;
将各非共享存储空间的第一快照和从发送第一开始采集指令的时间到所述第一时间一致性时间戳对应的时间所累积的写入数据作为各非共享存储空间的第一时间一致性备份点。
进一步地,处理器1001可以调用存储器1005中存储的时间一致性备份程序,还执行以下操作:
向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间创建第二快照,并实时获取所述共享存储空间在上次时间一致性备份之后的增量数据;
将各计算机节点中的共享存储空间的第二快照以及增量数据备份至对应的集群逻辑磁盘中;
在各集群逻辑磁盘中的第二快照完成备份后,将当前时刻的当前时间戳作为增量时间戳;
将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照和从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据进行叠加,获得各集群逻辑磁盘的第二叠加数据;
对各集群逻辑磁盘的第二叠加数据进行比较,以确定各集群逻辑磁盘的增量区别区域;
从各计算机节点中获取各集群逻辑磁盘的增量区别区域的所需数据;
在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将当前时刻的当前时间戳作为第二时间一致性时间戳;
向各计算机节点分别发送第二停止采集指令,以使各计算机节点停止获取所述共享存储空间在上次时间一致性备份之后的增量数据;
根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份。
进一步地,处理器1001可以调用存储器1005中存储的时间一致性备份程序,还执行以下操作:
在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将获取到的所需数据添加上增量时间戳,将具有增量时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第二时间一致性时间戳;
将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照、从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据、具有增量时间戳的所需数据、以及从增量时间戳对应的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各集群逻辑磁盘的第二时间一致性备份点。
进一步地,处理器1001可以调用存储器1005中存储的时间一致性备份程序,还执行以下操作:
向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间创建第二快照,并实时获取所述共享存储空间及非共享存储空间在上次时间一致性备份之后的增量数据;
将各非共享存储空间的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一结束采集指令的时间之间所累积的增量数据、第二快照、以及从发送第二开始采集指令的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各非共享存储空间的第二时间一致性备份点。
本实施例通过上述方案,能够对集群存储空间进行时间一致性的备份,能够对共享存储型集群中的操作系统、业务系统和共享数据一并进行时间一致性备份,并且与共享存储型集群使用的“共享存储型集群文件系统”无关,不需要共享存储型集群的系统提供数据同步、集群卷快照、数据操作记录或存储端备份功能特性,具有更强的适应性。
基于上述硬件结构,提出本发明时间一致性备份方法实施例。
参照图2,图2为本发明时间一致性备份方法第一实施例的流程示意图。
在第一实施例中,所述时间一致性备份方法包括以下步骤:
S100:向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
需要说明的是,本实施例的时间一致性备份方法的执行主体为时间一致性备份设备,参照图3,其可为一服务器,当然,也可为具有类似功能的设备。
可理解的是,在向各计算机节点分别发送第一开始采集指令后,各计算机节点会开始为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据。
在具体实现中,每个计算机节点均为一个逻辑备份节点,并且每个计算机节点分别对应有存储磁盘,所述存储磁盘可分为集群逻辑磁盘和非集群逻辑磁盘,共享存储空间与集群逻辑磁盘对应,非共享存储空间与非集群逻辑磁盘对应。
当然,对于第一开始采集指令无需保证时间一致性。
S200:将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
在具体实现中,由于各计算机节点分别对应有集群逻辑磁盘,因此,可将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中。
当然,各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中时,无需保证时间一致性。
S300:在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
可理解的是,所述当前时刻的当前时间戳即为用于反映当前时刻的时间信息,假设当前时刻为2018年11月1日11点24分,此时,可将所述当前时刻的当前时间戳设置为201811011124,当然,还可以其他形式进行设置,本实施例对此不加以限制。
S400:将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
S500:对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
需要说明的是,在对各集群逻辑磁盘的第一叠加数据进行比较后,可确定各集群逻辑磁盘中数据存在区别的区域,即确定各集群逻辑磁盘的数据区别区域。
S600:从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
可理解的是,在获取各集群逻辑磁盘的数据区别区域的所需数据时,各集群逻辑磁盘可从对应的计算机节点中获取数据,但为了提高数据获取效率,本实施例中,各集群逻辑磁盘也可以从多个计算机节点中分别获取数据。
S700:在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
为便于进行后续的时间一致性备份,可在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将获取到的所需数据添加上区别时间戳,将具有区别时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第一时间一致性时间戳。
S800:向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
可理解的是,在向各计算机节点分别发送第一停止采集指令后,各计算机节点会停止获取所述共享存储空间在创建第一快照后的写入数据。
S900:根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
为便于时间一致性备份,本实施例中,可将各集群逻辑磁盘中的第一快照、从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据、具有区别时间戳的所需数据、以及从所述区别时间戳对应的时间到第一时间一致性时间戳对应的时间之间所累积的写入数据作为各集群逻辑磁盘的时间一致性备份点。
当然,由于各计算机节点还可能单独维护的非共享存储空间,为便于对所述非共享存储空间的数据进行时间一致性备份,本实施例中,步骤S100可具体包括:向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间分别创建第一快照,并实时获取所述共享存储空间及非共享存储空间在创建第一快照后的写入数据;
相应地,步骤S900还包括:将各非共享存储空间的第一快照和从发送第一开始采集指令的时间到所述第一时间一致性时间戳对应的时间所累积的写入数据作为各非共享存储空间的第一时间一致性备份点。
在进行时间一致性备份后,通常会对各区块的增量数据进行记录,因此,后续可能还需要对增量数据进行时间一致性备份,本实施例中,在步骤S900之后,还可包括:向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间创建第二快照,并实时获取所述共享存储空间在上次时间一致性备份之后的增量数据;将各计算机节点中的共享存储空间的第二快照以及增量数据备份至对应的集群逻辑磁盘中;在各集群逻辑磁盘中的第二快照完成备份后,将当前时刻的当前时间戳作为增量时间戳;将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照和从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据进行叠加,获得各集群逻辑磁盘的第二叠加数据;对各集群逻辑磁盘的第二叠加数据进行比较,以确定各集群逻辑磁盘的增量区别区域;从各计算机节点中获取各集群逻辑磁盘的增量区别区域的所需数据;在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将当前时刻的当前时间戳作为第二时间一致性时间戳;向各计算机节点分别发送第二停止采集指令,以使各计算机节点停止获取所述共享存储空间在上次时间一致性备份之后的增量数据;根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份。
为便于再次进行的时间一致性备份,可在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将获取到的所需数据添加上增量时间戳,将具有增量时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第二时间一致性时间戳。
相应地,所述根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份,可具体包括:将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照、从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据、具有增量时间戳的所需数据、以及从增量时间戳对应的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各集群逻辑磁盘的第二时间一致性备份点。
同样,由于各计算机节点还可能单独维护的非共享存储空间,为便于对所述非共享存储空间的数据进行时间一致性备份,本实施例中,可向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间创建第二快照,并实时获取所述共享存储空间及非共享存储空间在上次时间一致性备份之后的增量数据;
并且,根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份,还包括:将各非共享存储空间的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一结束采集指令的时间之间所累积的增量数据、第二快照、以及从发送第二开始采集指令的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各非共享存储空间的第二时间一致性备份点。
本实施例能够对集群存储空间进行时间一致性的备份,能够对共享存储型集群中的操作系统、业务系统和共享数据一并进行时间一致性备份,并且与共享存储型集群使用的“共享存储型集群文件系统”无关,不需要共享存储型集群的系统提供数据同步、集群卷快照、数据操作记录或存储端备份功能特性,具有更强的适应性。
此外,本发明实施例还提出一种计算机可读存储介质,所述计算机可读存储介质上存储有时间一致性备份程序,所述时间一致性备份程序被处理器执行时实现如下操作:
向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
本实施例的时间一致性备份程序还可用于实现上述时间一致性备份方法的各步骤,在此不再赘述。
此外,本发明实施例还提出一种时间一致性备份系统,所述时间一致性备份系统包括:共享存储空间、多个计算机节点和上述的时间一致性备份设备。
此外,本发明实施例还提出一种时间一致性备份装置,参照图4,所述装置包括:
采集开始模块401,用于向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
快照备份模块402,用于将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
第一时间确定模块403,用于在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
数据叠加模块404,用于将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
数据比较模块405,用于对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
数据获取模块406,用于从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
第二时间确定模块407,用于在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
采集停止模块408,用于向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
一致性备份模块409,用于根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
本实施例的各模块还可用于实现上述时间一致性备份方法的各步骤,在此不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种时间一致性备份方法,其特征在于,所述时间一致性备份方法包括以下步骤:
向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
2.如权利要求1所述的时间一致性备份方法,其特征在于,所述在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳,具体包括:
在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将获取到的所需数据添加上区别时间戳,将具有区别时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第一时间一致性时间戳;
所述根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份,具体包括:
将各集群逻辑磁盘中的第一快照、从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据、具有区别时间戳的所需数据、以及从所述区别时间戳对应的时间到第一时间一致性时间戳对应的时间之间所累积的写入数据作为各集群逻辑磁盘的时间一致性备份点。
3.如权利要求2所述的时间一致性备份方法,其特征在于,所述向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据,具体包括:
向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间分别创建第一快照,并实时获取所述共享存储空间及非共享存储空间在创建第一快照后的写入数据;
相应地,所述根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份,还包括:
将各非共享存储空间的第一快照和从发送第一开始采集指令的时间到所述第一时间一致性时间戳对应的时间所累积的写入数据作为各非共享存储空间的第一时间一致性备份点。
4.如权利要求3所述的时间一致性备份方法,其特征在于,所述根据所述时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份之后,所述时间一致性备份方法还包括:
向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间创建第二快照,并实时获取所述共享存储空间在上次时间一致性备份之后的增量数据;
将各计算机节点中的共享存储空间的第二快照以及增量数据备份至对应的集群逻辑磁盘中;
在各集群逻辑磁盘中的第二快照完成备份后,将当前时刻的当前时间戳作为增量时间戳;
将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照和从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据进行叠加,获得各集群逻辑磁盘的第二叠加数据;
对各集群逻辑磁盘的第二叠加数据进行比较,以确定各集群逻辑磁盘的增量区别区域;
从各计算机节点中获取各集群逻辑磁盘的增量区别区域的所需数据;
在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将当前时刻的当前时间戳作为第二时间一致性时间戳;
向各计算机节点分别发送第二停止采集指令,以使各计算机节点停止获取所述共享存储空间在上次时间一致性备份之后的增量数据;
根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份。
5.如权利要求4所述的时间一致性备份方法,其特征在于,所述在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将当前时刻的当前时间戳作为第二时间一致性时间戳,具体包括:
在获取到各集群逻辑磁盘的增量区别区域的所需数据后,将获取到的所需数据添加上增量时间戳,将具有增量时间戳的所需数据备份至对应的集群逻辑磁盘,并将当前时刻的当前时间戳作为第二时间一致性时间戳;
所述根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份,具体包括:
将各集群逻辑磁盘中的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一停止采集指令的时间之间所累积的增量数据、第二快照、从发送第二开始采集指令的时间到所述增量时间戳对应的时间之间所累积的增量数据、具有增量时间戳的所需数据、以及从增量时间戳对应的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各集群逻辑磁盘的第二时间一致性备份点。
6.如权利要求5所述的时间一致性备份方法,其特征在于,所述向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间创建第二快照,并实时获取所述共享存储空间在上次时间一致性备份之后的增量数据,具体包括:
向各计算机节点分别发送第二开始采集指令,以使各计算机节点为共享存储空间及非共享存储空间创建第二快照,并实时获取所述共享存储空间及非共享存储空间在上次时间一致性备份之后的增量数据;
相应地,所述根据所述第二时间一致性时间戳对各集群逻辑磁盘再次进行时间一致性备份,还包括:
将各非共享存储空间的第一时间一致性备份点、从第一时间一致性时间戳对应的时间到发送第一结束采集指令的时间之间所累积的增量数据、第二快照、以及从发送第二开始采集指令的时间到第二时间一致性时间戳对应的时间之间所累积的增量数据作为各非共享存储空间的第二时间一致性备份点。
7.一种时间一致性备份设备,其特征在于,所述时间一致性备份设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的时间一致性备份程序,所述时间一致性备份程序配置为实现如权利要求1至6中任一项所述的时间一致性备份方法的步骤。
8.一种时间一致性备份系统,其特征在于,所述时间一致性备份系统包括:共享存储空间、多个计算机节点和权利要求7所述的时间一致性备份设备。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有时间一致性备份程序,所述时间一致性备份程序被处理器执行时实现如权利要求1至6中任一项所述的时间一致性备份方法的步骤。
10.一种时间一致性备份装置,其特征在于,所述时间一致性备份装置包括:
采集开始模块,用于向各计算机节点分别发送第一开始采集指令,以使各计算机节点为共享存储空间创建第一快照,并实时获取所述共享存储空间在创建第一快照后的写入数据;
快照备份模块,用于将各计算机节点中的共享存储空间的第一快照以及写入数据备份至对应的集群逻辑磁盘中;
第一时间确定模块,用于在各集群逻辑磁盘中的第一快照完成备份后,将当前时刻的当前时间戳作为区别时间戳;
数据叠加模块,用于将各集群逻辑磁盘中的第一快照和从发送第一开始采集指令的时间到所述区别时间戳对应的时间所累积的写入数据进行叠加,获得各集群逻辑磁盘的第一叠加数据;
数据比较模块,用于对各集群逻辑磁盘的第一叠加数据进行比较,以确定各集群逻辑磁盘的数据区别区域;
数据获取模块,用于从各计算机节点中获取各集群逻辑磁盘的数据区别区域的所需数据;
第二时间确定模块,用于在获取到各集群逻辑磁盘的数据区别区域的所需数据后,将当前时刻的当前时间戳作为第一时间一致性时间戳;
采集停止模块,用于向各计算机节点分别发送第一停止采集指令,以使各计算机节点停止获取所述共享存储空间在创建第一快照后的写入数据;
一致性备份模块,用于根据所述第一时间一致性时间戳对各集群逻辑磁盘进行时间一致性备份。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910178272.3A CN109857596B (zh) | 2019-03-07 | 2019-03-07 | 时间一致性备份方法、设备、系统、装置及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910178272.3A CN109857596B (zh) | 2019-03-07 | 2019-03-07 | 时间一致性备份方法、设备、系统、装置及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109857596A true CN109857596A (zh) | 2019-06-07 |
CN109857596B CN109857596B (zh) | 2021-04-06 |
Family
ID=66900309
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910178272.3A Active CN109857596B (zh) | 2019-03-07 | 2019-03-07 | 时间一致性备份方法、设备、系统、装置及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109857596B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112579613A (zh) * | 2020-12-31 | 2021-03-30 | 华东计算技术研究所(中国电子科技集团公司第三十二研究所) | 数据库集群差异比对与数据同步的方法、系统及介质 |
CN112988472A (zh) * | 2021-05-08 | 2021-06-18 | 南京云信达科技有限公司 | 一种增量数据备份检索的方法及系统 |
CN113094207A (zh) * | 2019-12-23 | 2021-07-09 | 华为技术有限公司 | 数据备份方法及系统 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101256528A (zh) * | 2008-03-20 | 2008-09-03 | 中国科学院计算技术研究所 | 支持零备份窗口的磁盘级数据备份系统和方法 |
US20130179401A1 (en) * | 2012-01-06 | 2013-07-11 | Frank Lu | Checkpoint Based Progressive Backup |
CN103617097A (zh) * | 2013-11-19 | 2014-03-05 | 华为技术有限公司 | 文件恢复方法及装置 |
US20170048235A1 (en) * | 2015-07-14 | 2017-02-16 | Fmr Llc | Crypto Captcha and Social Aggregating, Fractionally Efficient Transfer Guidance, Conditional Triggered Transaction, Datastructures, Apparatuses, Methods and Systems |
CN106648993A (zh) * | 2016-12-30 | 2017-05-10 | 杭州宏杉科技股份有限公司 | 一致性组快照管理的方法及装置 |
-
2019
- 2019-03-07 CN CN201910178272.3A patent/CN109857596B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101256528A (zh) * | 2008-03-20 | 2008-09-03 | 中国科学院计算技术研究所 | 支持零备份窗口的磁盘级数据备份系统和方法 |
US20130179401A1 (en) * | 2012-01-06 | 2013-07-11 | Frank Lu | Checkpoint Based Progressive Backup |
CN103617097A (zh) * | 2013-11-19 | 2014-03-05 | 华为技术有限公司 | 文件恢复方法及装置 |
US20170048235A1 (en) * | 2015-07-14 | 2017-02-16 | Fmr Llc | Crypto Captcha and Social Aggregating, Fractionally Efficient Transfer Guidance, Conditional Triggered Transaction, Datastructures, Apparatuses, Methods and Systems |
CN106648993A (zh) * | 2016-12-30 | 2017-05-10 | 杭州宏杉科技股份有限公司 | 一致性组快照管理的方法及装置 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113094207A (zh) * | 2019-12-23 | 2021-07-09 | 华为技术有限公司 | 数据备份方法及系统 |
CN113094207B (zh) * | 2019-12-23 | 2023-11-03 | 华为技术有限公司 | 数据备份方法及系统 |
CN112579613A (zh) * | 2020-12-31 | 2021-03-30 | 华东计算技术研究所(中国电子科技集团公司第三十二研究所) | 数据库集群差异比对与数据同步的方法、系统及介质 |
CN112579613B (zh) * | 2020-12-31 | 2023-02-17 | 华东计算技术研究所(中国电子科技集团公司第三十二研究所) | 数据库集群差异比对与数据同步的方法、系统及介质 |
CN112988472A (zh) * | 2021-05-08 | 2021-06-18 | 南京云信达科技有限公司 | 一种增量数据备份检索的方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN109857596B (zh) | 2021-04-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3779732A1 (en) | Data backup method, storage medium, and computing device | |
CN109857596A (zh) | 时间一致性备份方法、设备、系统、装置及存储介质 | |
CN109558215A (zh) | 虚拟机的备份方法、恢复方法、装置及备份服务器集群 | |
CN106445414B (zh) | 终端设备可用存储空间扩展方法和系统 | |
CN108337303A (zh) | 一种数据同步方法和分布式系统 | |
CN104239166A (zh) | 一种对运行中虚拟机实现文件备份的方法 | |
EP2220609A2 (en) | Spreadsheet collaboration between rich and browser clients | |
CN101573923A (zh) | 冲突知识的传播 | |
CN109634970A (zh) | 表数据同步方法、设备、存储介质及装置 | |
US20060259521A1 (en) | Interface for synchronization of documents between a host computer and a portable device | |
CN101945131A (zh) | 一种基于存储虚拟化的数据迁移方法 | |
CN110795496A (zh) | 数据同步方法、装置及系统 | |
CN110083490A (zh) | 一种数据库备份方法、还原方法以及存储介质 | |
CN111831475B (zh) | 数据备份方法、装置、节点设备及可读存储介质 | |
CN109298977A (zh) | 一种虚拟机业务快速恢复方法、系统、装置及存储介质 | |
CN108595119A (zh) | 一种数据同步方法及分布式系统 | |
CN110837441A (zh) | 基于脏数据位图和网络块设备的kvm虚拟机备份方法 | |
CN101855839B (zh) | 用于异步地双重备份文件的方法 | |
CN107623705B (zh) | 基于视频云存储系统的存储模式升级方法、装置和系统 | |
CN110018987B (zh) | 快照创建方法、装置及系统 | |
CN102546815A (zh) | 一种数字电子终端间同步系统和数字电子终端间同步方法 | |
CN111538520B (zh) | 用于超融合集群的更新方法及装置、终端和存储介质 | |
CN106681866B (zh) | 一种保证应用一致性的方法、装置及系统 | |
CN115510072A (zh) | 一种基于多租户SaaS应用平台的主数据引擎 | |
CN113138717B (zh) | 节点部署方法、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |