CN113064760A - 数据库合成备份方法、装置、计算机设备和存储介质 - Google Patents
数据库合成备份方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN113064760A CN113064760A CN202110366746.4A CN202110366746A CN113064760A CN 113064760 A CN113064760 A CN 113064760A CN 202110366746 A CN202110366746 A CN 202110366746A CN 113064760 A CN113064760 A CN 113064760A
- Authority
- CN
- China
- Prior art keywords
- data
- backup
- backed
- database
- backup set
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
Abstract
本申请涉及一种数据库合成备份方法、装置、计算机设备和存储介质。通过获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集,并从备份集中提取待备份数据对应的有效数据块,该有效数据块可以是备份集中已使用的数据块,并根据上述备份集以及提取的有效数据块,还原得到待备份数据对应的镜像副本,并且可以将镜像副本进行存储。相较于传统的直接进行镜像备份的方式进行数据的合成备份,本方案通过接收数据库服务器发送的待备份的备份集后,利用备份集得到有效数据块,并根据备份集中的元数据以及有效数据块还原待备份数据的镜像副本,从而减少了备份带宽,实现提高数据库合成备份的备份效率的效果。
Description
技术领域
本申请涉及数据安全技术领域,特别是涉及一种数据库合成备份方法、装置、计算机设备和存储介质。
背景技术
数据库是用于存储数据的一种设置在计算机中的集合,数据库是“按照数据结构来组织、存储和管理数据的仓库”,数据库可以有多种类型,各种数据库中通常会存储有重要的数据,若数据库的数据丢失,可能会产生严重的后果。因此,对数据库中的数据进行保护成为了保护数据安全的重要措施。目前通常采用备份的方式对数据库中的数据进行保护。
目前的数据库如Oracle数据库提供了合成备份的方式,然而,目前的合成备份通常需要以网络磁盘的方式挂载到数据库服务器。同时由于合成备份所用的镜像副本为数据文件的原始格式,且无法进行数据压缩,备份过程需要占用大量网络带宽,并且消耗较多的数据库服务器资源,导致备份窗口过长。
因此,目前的数据库合成备份方法存在备份效率低的缺陷。
发明内容
基于此,有必要针对上述技术问题,提供一种能够提高合成备份效率的数据库合成备份方法、装置、计算机设备和存储介质。
一种数据库合成备份方法,应用于存储服务器,所述方法包括:
获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集;
从所述备份集中提取所述待备份数据对应的有效数据块;所述有效数据块表征所述备份集中已使用的数据块;
根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储;所述元数据记录有所述待备份数据对应的未使用数据块信息。
在其中一个实施例中,所述数据库服务器,用于:
对所述待备份数据进行全备份,得到所述待备份数据对应的备份集;并通过SBT接口对所述备份集进行压缩,并将压缩后的备份集发送至所述存储服务器。
在其中一个实施例中,所述获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集,包括:
获取所述待备份数据库所在数据库服务器发送的待备份数据对应的压缩后的备份集。
在其中一个实施例中,所述从所述备份集中提取所述待备份数据对应的有效数据块,包括:
将所述压缩后的备份集解压,得到解压后的备份集;
从所述解压后的备份集中提取所述待备份数据对应的有效数据块;
还包括:
将所述有效数据块中的待备份数据从备份格式转换为所述待备份数据对应的原始格式,并保存所述有效数据块。
在其中一个实施例中,根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本,包括:
根据所述备份集中所述待备份数据对应的元数据,获取所述待备份数据对应的空闲数据块;
根据所述空闲数据块以及所述有效数据块,还原所述待备份数据对应的镜像副本。
在其中一个实施例中,根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储之后,还包括:
根据所述镜像副本,生成当前时间所述镜像副本对应的快照。
在其中一个实施例中,所述备份包括首次备份以及再次备份;所述方法还包括:
若为再次备份,且当前备份周期位于增量备份周期,所述数据库服务器用于获取所述待备份数据库中相较于上一次备份新增和/或修改的数据,作为所述待备份数据;
若为再次备份,所述根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本,包括:
获取所述有效数据块对应的块偏移,根据所述块偏移得到所述有效数据块在所述镜像副本中的目标存储位置;
将所述有效数据块合并至所述镜像副本的目标存储位置中,得到所述镜像副本。
一种数据库合成备份装置,应用于存储服务器,所述装置包括:
获取模块,用于获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集;
提取模块,用于从所述备份集中提取所述待备份数据对应的有效数据块;所述有效数据块表征所述备份集中已使用的数据块;
还原模块,用于根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储;所述元数据记录有所述待备份数据对应的未使用数据块信息。
一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现上述的方法的步骤。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的方法的步骤。
上述数据库合成备份方法、装置、计算机设备和存储介质,通过获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集,并从备份集中提取待备份数据对应的有效数据块,该有效数据块可以是备份集中已使用的数据块,并根据上述备份集以及提取的有效数据块,还原得到待备份数据对应的镜像副本,并且可以将镜像副本进行存储。相较于传统的在合成备份时,在首次将数据库备份为镜像副本,后续每次增量备份都可合并到上一次的镜像副本,形成新的备份;借助磁盘快照功能,在恢复数据库时可直接使用快照时间点的镜像副本作为数据文件使用,只能在数据库服务器上进行增量合成操作,直接进行镜像备份的方式进行数据的合成备份,本方案通过接收数据库服务器发送的待备份的备份集后,利用备份集得到有效数据块,并根据备份集中的元数据以及有效数据块还原待备份数据的镜像副本,从而减少了备份带宽,实现提高数据库合成备份的备份效率的效果。
附图说明
图1为一个实施例中数据库合成备份方法的应用环境图;
图2为一个实施例中数据库合成备份方法的流程示意图;
图3为另一个实施例中数据库合成备份方法的流程示意图;
图4为一个实施例中数据库合成备份装置的结构框图;
图5为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的数据库合成备份方法,可以应用于如图1所示的应用环境中。其中,数据库服务器102通过网络与存储服务器104进行通信。待备份的数据库可以设置在数据库服务器102中,数据库服务器102可以将根据待备份的数据库中的待备份数据,生成相应的备份集,并向存储服务器104发送该备份集;存储服务器104可以获取数据库服务器102发送的备份集,并从备份集中提取待备份数据的有效数据块,根据备份集中的元数据以及得到的有效数据块,还原待备份数据对应的镜像副本并存储。其中,数据库服务器102以及存储服务器104可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一个实施例中,如图2所示,提供了一种数据库合成备份方法,以该方法应用于图1中的存储服务器为例进行说明,包括以下步骤:
步骤S202,获取待备份数据库所在数据库服务器102发送的待备份数据对应的备份集。
其中,待备份数据库可以是需要进行备份的数据库,该数据库可以设置在数据库服务器102中,数据库的类型可以包括多种,例如待备份数据库可以是Oracle数据库。Oracle数据库是甲骨文公司的一款关系数据库管理系统,Oracle数据库系统具有可移植性好、使用方便、功能强等特性,适用于各类大、中、小微机环境,它是一种高效率的、可靠性好的、适应高吞吐量的数据库方案。数据库服务器102可以根据从待备份的数据库中获取待备份数据,并根据待备份数据生成相应的备份集。其中,备份集可以是一次备份的集合,它包含本次备份的所有备份片,一个备份集根据备份的类型不同,可能构成一个全备份或增量备份,在本方案中,备份可以分为首次备份和再次备份,数据库服务器102可以根据是否为首次备份从而生成不同的备份集。例如若为首次备份,则需要对待备份数据进行全备份,若为再次备份,且当前备份周期位于增量备份周期,则可以根据备份次数或时间,判断只需要进行增量备份还是需要进行全备份。在一个实施例中,上述数据库服务器102可以是在对待备份数据进行相应处理后,生成待备份数据对应的备份集,例如,数据库服务器102可以通过在Oracle数据库中对待备份数据进行处理,得到待备份数据对应的备份集,还可以利用SBT(System Backup to Tape,Oracle提供给第三方厂商的备份存储接口)接口,对备份集进行压缩;形成经过压缩的备份集后,数据库服务器102可以将压缩后得到的备份集发送至上述存储服务器104。其中,上述数据库服务器102还可以在将备份集发送到上述存储服务器104的过程中进行加密传输,从而保证数据在传输过程的安全;上述待备份数据可以是数据库中的数据文件,例如Oracle数据库中的数据文件,数据库服务器102基于SBT接口对待备份数据进行压缩得到备份集,减少了网络数据的传输压力。
步骤S204,从备份集中提取待备份数据对应的有效数据块;有效数据块表征所述备份集中已使用的数据块。
其中,备份集可以是数据库服务器102对待备份数据进行压缩后传输至存储服务器104的集合,其可以是一个逻辑上的概念。备份集中可以存储有经过压缩后的待备份数据,存储服务器104可以从备份集中提取待备份数据对应的有效数据块。例如,若备份集为压缩的备份集,存储服务器104可以先对备份集进行解压,并从解压后的备份集中提取有效数据块。其中,有效数据块可以是表征备份集中待备份数据对应的已经被使用的数据块,例如存储有数据的数据块;有效数据块可以有多个。存储服务器104在提取出有效数据块后,还可以将有效数据块转换为原始格式,例如存储服务器104可以根据每个数据块中的数据的原来的格式,将这些数据从备份集格式转换为每个数据对应的原始格式。
步骤S206,根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储;元数据记录有待备份数据对应的未使用数据块信息。
其中,备份集可以是上述数据库服务器102上传的待备份数据经过SBT接口处理后得到的集合;有效数据块可以是从备份集中提取出来的已被使用的数据块。存储服务器104可以根据备份集中的相关信息,以及上述提取的有效数据块,还原得到待备份数据对应的镜像副本,并将镜像副本进行存储。例如,备份集中可以包括有效数据块,有效数据块可以是已被使用的数据块;而待备份数据中还可以包括未被使用的数据块,未被使用的数据块可以是空闲数据块,而完整的待备份数据对应的镜像副本可以包括有效数据块以及空闲数据块,存储服务器104可以基于备份集的元数据得到待备份数据对应的空闲数据块,并基于空闲数据块以及上述提取的有效数据块,还原得到待备份数据对应的镜像副本,在将上述镜像副本进行存储。其中,元数据可以是记录上述各个数据块的使用信息的数据,其中可以记录有待备份数据中未被使用的数据块的信息,例如位置信息等。存储服务器104可以利用元数据得到上述空闲数据块。
上述数据库合成备份方法中,通过获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集,并从备份集中提取待备份数据对应的有效数据块,该有效数据块可以是备份集中已使用的数据块,并根据上述备份集以及提取的有效数据块,还原得到待备份数据对应的镜像副本,并且可以将镜像副本进行存储。相较于传统的在合成备份时,在首次将数据库备份为镜像副本,后续每次增量备份都可合并到上一次的镜像副本,形成新的备份;借助磁盘快照功能,在恢复数据库时可直接使用快照时间点的镜像副本作为数据文件使用,只能在数据库服务器上进行增量合成操作,直接进行镜像备份的方式进行数据的合成备份,本方案通过接收数据库服务器发送的待备份数据的备份集后,利用备份集得到有效数据块,并根据备份集中的元数据以及有效数据块还原待备份数据的镜像副本,从而减少了备份带宽,实现提高数据库备份的备份效率的效果。
在一个实施例中,获取待备份数据库所在数据库服务器102发送的待备份数据对应的备份集,包括:获取待备份数据库所在数据库服务器102发送的待备份数据对应的压缩后的备份集。
本实施例中,待备份数据库可以是设置在数据库服务器102中的数据库,数据库服务器102可以从待备份数据库中获取待备份的数据,并将待备份数据进行相应处理后,发送至存储服务器104中。例如,数据库服务器102可以通过SBT接口对待备份数据进行压缩处理,从而得到压缩的备份集,数据库服务器102可以将压缩的备份集发送至存储服务器104,从而存储服务器104可以接收数据库服务器102发送的待备份数据对应的压缩后的备份集。
通过本实施例,数据库服务器102可以将待备份数据进行压缩后再发送至存储服务器104中,从而减轻了传输时的网络数据消耗,加快传输速度,实现提高待备份数据的备份效率的效果。
在一个实施例中,从备份集中提取待备份数据对应的有效数据块,包括:将压缩后的备份集解压,得到解压后的备份集;从解压后的备份集中提取待备份数据对应的有效数据块;还包括:将有效数据块中的待备份数据从备份格式转换为待备份数据对应的原始格式,并保存有效数据块。
本实施例中,备份集可以是包括待备份数据对应的多个数据块的集合,备份集通过数据库服务器102生成,并发送至存储服务器104,存储服务器104接收到的备份集可以是经过压缩后的集合。存储服务器104接收到上述备份集后,可以对备份集进行解压处理,从而得到解压后的备份集,存储服务器104可以从解压后的备份集中提取待备份数据对应的有效数据块。其中,备份集中的有效数据块可以有多个。
另外,由于待备份数据是以备份集格式发送至存储服务器104中,因此存储服务器104在从备份集中提取了有效数据块后,将有效数据块还原为数据原来的格式,例如存储服务器104可以基于有效数据块中各个数据的在数据库服务器102中的待备份数据库中存储的格式,将各个有效数据块还原为每个数据原本的格式。存储服务器104将有效数据块的格式进行还原后,可以将有效数据块进行保存,例如保存至存储服务器104的存储设备中。
通过本实施例,存储服务器104可以将压缩形成的备份集进行解压,并从解压后的备份集中提取有效数据块,且可以将提取的有效数据块还原为原始格式并存储。提高了数据库备份的效率。
在一个实施例中,根据备份集中的元数据以及有效数据块,还原待备份数据对应的镜像副本,包括:根据备份集中待备份数据对应的元数据,获取待备份数据对应的空闲数据块;根据空闲数据块以及有效数据块,还原待备份数据对应的镜像副本。
本实施例中,存储服务器104可以从备份集中提取有效数据块,并根据备份集中的与待备份数据对应的元数据,以及提取的有效数据块,还原得到待备份数据对应的完整镜像副本。例如,备份集中可以包括元数据,该元数据可以记录有待备份数据中各个数据块的相关信息,例如数据块的使用信息、以及数据块的位置信息等,存储服务器104可以根据备份集中的元数据,获取待备份数据中的空闲数据块,即未被使用的数据块,而上述有效数据块则是已被使用的数据块,存储服务器104可以从元数据中获取待备份中未包含在备份集中的空闲数据块,并根据获取的空闲数据块以及上述提取的有效数据块,还原得到待备份数据对应的镜像副本。例如根据空闲数据块在待备份数据中的位置,将空闲数据块补充至多个有效数据块间的相应位置,从而完成镜像副本的生成。
通过本实施例,存储服务器104可以根据元数据获取空闲数据块,从而利用空闲数据块和有效数据块还原待备份数据对应的镜像副本,实现了提高数据库的备份效率的效果。
在一个实施例中,根据备份集中的元数据以及有效数据块,还原待备份数据对应的镜像副本并存储之后,还包括:根据镜像副本,生成当前时间镜像副本对应的快照。
本实施例中,存储服务器104可以利用元数据得到空闲数据块,并且可以根据空闲数据块以及提取的有效数据块,还原得到待备份数据对应的镜像副本。存储服务器104还原镜像副本后,还可以创建当前时间的镜像副本对应的快照。其中,快照可以是关于待备份数据对应的镜像副本的一个完全可用拷贝,该拷贝包括相应数据在某个时间点(拷贝开始的时间点)的映像。快照可以是其所表示的数据的一个副本,也可以是数据的一个复制品。快照的作用主要是能够进行在线数据备份与恢复。当存储设备发生应用故障或者文件损坏时可以进行快速的数据恢复,将数据恢复某个可用的时间点的状态。快照的另一个作用是为存储用户提供了另外一个数据访问通道,当原数据进行在线应用处理时,用户可以访问快照数据,还可以利用快照进行测试等工作。存储服务器104可以在上述镜像副本完成后即创建快照,也可以周期性地对镜像副本进行快照创建,且每次创建快照时均可以包括创建时间。
通过本实施例,存储服务器104通过对镜像副本进行快照创建,提高了被备份数据的安全性,以防数据丢失后需要进行数据找回等流程,从而实现了提高数据备份的效率的效果。
在一个实施例中,还包括:若为再次备份,且当前备份周期位于增量备份周期,数据库服务器102用于获取待备份数据库中相较于上一次备份新增和/或修改的数据,作为待备份数据;
本实施例中,待备份数据的备份类型可以包括首次备份或者再次备份。首次备份可以是第一次对待备份数据进行备份,若此次备份为首次备份,则存储服务器104可以对待备份数据进行全备份,即将待备份数据的所有已使用数据块均进行备份。若为再次备份,则存储服务器104可以对待备份数据进行周期性的增量备份,但由于RMAN(RecoveryManager,恢复管理器)备份集格式备份无法实现永久增量,因此存储服务器104需要周期性进行全备份。例如,每周选择1天做全备份,其余日期每天做增量备份。因此,再次备份时,存储服务器104需要判断当前周期处于增量备份周期还是全备份周期内,若再次备份时,当前备份周期处于增量备份周期,RMAN可以发送“增量备份”指令,数据库服务器102可以将待备份数据中相较于上一次备份新增的数据作为待备份数据,也可将修改的数据作为待备份数据,还可以将新增的数据以及修改的数据作为待备份数据。例如,数据库服务器102可以将Oracle数据库根据上述增量周期对应的待备份数据形成的增量备份集,通过SBT接口进行压缩,从而得到压缩后的增量备份集。当处于全备份周期时,RMAN可以发送“全备份”指令,数据库服务器102可以将Oracle数据库根据待备份的数据库中的所有数据形成的全备份集,发送至SBT接口中,SBT接口可以对全备份集进行解析,删除其中相对前次备份未变化的数据块,生成只有增量数据块的备份集,并利用SBT接口对只有增量数据块的备份集进行压缩,得到压缩后的增量备份集,相当于将全备份转换为增量备份,从而实现提高备份效率的效果。
另外,在一个实施例中,再次备份时,根据备份集中的元数据以及有效数据块,还原待备份数据对应的镜像副本,包括:获取有效数据块对应的块偏移,根据块偏移得到有效数据块在镜像副本中的目标存储位置;将有效数据块合并至镜像副本的目标存储位置中,得到镜像副本。
本实施例中,存储服务器104可以在再次备份时,进行待备份数据的增量备份,存储服务器104可以接收数据库服务器102发送的包含增量数据的增量备份集,并对增量备份集进行解压,此时的有效数据块可以是增量数据块,存储服务器104可以提取其中的增量数据块转化为原始格式,存储服务器104需要将增量数据块插入存储至镜像副本中。例如存储服务器104可以解析增量数据块的头部,得到增量数据块的块偏移,即增量数据块在所有数据中的位置,存储服务器104可以根据该偏移,合并到全备份对应的镜像副本中,从而得到新的镜像副本,实现数据的增量备份。并且,存储服务器104还可以在得到新的镜像副本后,对新的镜像副本创建新的快照。
通过上述实施例,存储服务器104可以在再次备份时根据预设的周期进行全备份或增量备份,从而提高了数据库备份的效率的效果。
在一个实施例中,如图3所示,图3为另一个实施例中数据库合成备份方法的流程示意图。包括以下流程:
数据库服务器102可以备份集的格式对待备份数据进行备份。存储服务器104可以首先判断是否为首次备份。若为首次备份,则数据库服务器102可以对待备份数据进行全备份,并通过SBT接口进行压缩,得到备份集,发送至存储服务器104中,存储服务器104可以接收并解压该备份集,从备份集中提取有效数据块,并根据元数据补充空闲数据块,从而根据有效数据块以及空闲数据块还原得到镜像副本。
若不为首次备份,则存储服务器104可以判断是否为全备份周期还是增量备份周期,若为全备份周期,则对待备份数据库中的所有数据进行全备份,得到全备份集,并通过对比上一次备份,将未变更的数据块进行去除,从而转换为增量备份集;而若为增量备份周期,则数据库服务器102可以将相较于上一次备份增量和/或修改的数据作为待备份数据,通过SBT接口对待备份数据进行压缩处理,得到增量备份集。数据库服务器102可以在对上述增量备份集进行压缩后发送至存储服务器104。存储服务器104可以在接收到增量备份集后进行解压并提取增量数据块,并通过解析增量数据块的头部,得到增量数据块的块偏移,从而根据块偏移将增量数据块合并到镜像副本中的对应位置,得到新的镜像副本,并对镜像副本进行存储。
另外,存储服务器104还可以在每次创建或更新镜像副本后,创建当前时间的镜像副本对应的快照。存储服务器104在创建上述镜像副本后,在进行数据恢复时,可以通过iSCSI(Internet Small Computer System Interface,小型计算机系统接口)、FC(FibreChannel,光纤信道)、NFS(Network File System,网络文件系统)以及CIFS(CommonInternet File System,通用网络文件系统)等方式挂载到数据库服务器上,实现即时的挂载恢复,从而实现数据的恢复。
通过本实施例,存储服务器104通过接收数据库服务器102发送的待备份的备份集后,利用备份集得到有效数据块,并根据备份集中的元数据以及有效数据块还原待备份数据的镜像副本,从而减少了备份带宽,实现提高数据库备份的备份效率的效果。
应该理解的是,虽然图2及图3的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2及图3中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图4所示,提供了一种数据库合成备份装置,包括:获取模块500、提取模块502和还原模块504,其中:
获取模块500,用于获取待备份数据库所在数据库服务器102发送的待备份数据对应的备份集。
提取模块502,用于从备份集中提取待备份数据对应的有效数据块;有效数据块表征所述备份集中已使用的数据块。
还原模块504,用于根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储;元数据记录有待备份数据对应的未使用数据块信息。
在一个实施例中,上述获取模块500,具体用于获取待备份数据库所在数据库服务器102发送的待备份数据对应的压缩后的备份集。
在一个实施例中,上述提取模块502,具体用于将压缩后的备份集解压,得到解压后的备份集;从解压后的备份集中提取待备份数据对应的有效数据块。
在一个实施例中,上述装置还包括:转换存储模块,用于将有效数据块中的待备份数据从备份格式转换为待备份数据对应的原始格式,并保存有效数据块。
在一个实施例中,上述还原模块504,具体用于根据备份集中待备份数据对应的元数据,获取待备份数据对应的空闲数据块;根据空闲数据块以及有效数据块,还原待备份数据对应的镜像副本。
在一个实施例中,上述装置还包括:快照创建模块,用于根据镜像副本,生成当前时间镜像副本对应的快照。
在一个实施例中,上述装置还包括:增量数据获取模块,用于若为再次备份,且当前备份周期位于增量备份周期,数据库服务器102用于获取待备份数据库中相较于上一次备份新增和/或修改的数据,作为待备份数据。
在一个实施例中,上述还原模块504,用于获取有效数据块对应的块偏移,根据块偏移得到有效数据块在镜像副本中的目标存储位置;将有效数据块合并至镜像副本的目标存储位置中,得到镜像副本。
关于数据库合成备份装置的具体限定可以参见上文中对于数据库合成备份方法的限定,在此不再赘述。上述数据库合成备份装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图5所示。该计算机设备包括通过系统总线连接的处理器、存储器和网络接口。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储数据库备份相关的数据。该计算机设备的网络接口用于与外部的数据库服务器通过网络连接通信。该计算机程序被处理器执行时以实现一种数据库合成备份方法。
本领域技术人员可以理解,图5中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现上述数据库合成备份方法。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述数据库合成备份方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种数据库合成备份方法,其特征在于,应用于存储服务器,所述方法包括:
获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集;
从所述备份集中提取所述待备份数据对应的有效数据块;所述有效数据块表征所述备份集中已使用的数据块;
根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储;所述元数据记录有所述待备份数据对应的未使用数据块信息。
2.根据权利要求1所述的方法,其特征在于,所述数据库服务器,用于:
对所述待备份数据进行全备份,得到所述待备份数据对应的备份集;并通过SBT接口对所述备份集进行压缩,并将压缩后的备份集发送至所述存储服务器。
3.根据权利要求2所述的方法,其特征在于,所述获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集,包括:
获取所述待备份数据库所在数据库服务器发送的待备份数据对应的压缩后的备份集。
4.根据权利要求3所述的方法,其特征在于,所述从所述备份集中提取所述待备份数据对应的有效数据块,包括:
将所述压缩后的备份集解压,得到解压后的备份集;
从所述解压后的备份集中提取所述待备份数据对应的有效数据块;
还包括:
将所述有效数据块中的待备份数据从备份格式转换为所述待备份数据对应的原始格式,并保存所述有效数据块。
5.根据权利要求4所述的方法,其特征在于,根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本,包括:
根据所述备份集中所述待备份数据对应的元数据,获取所述待备份数据对应的空闲数据块;
根据所述空闲数据块以及所述有效数据块,还原所述待备份数据对应的镜像副本。
6.根据权利要求1所述的方法,其特征在于,根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储之后,还包括:
根据所述镜像副本,生成当前时间所述镜像副本对应的快照。
7.根据权利要求1所述的方法,其特征在于,所述备份包括首次备份以及再次备份;所述方法还包括:
若为再次备份,且当前备份周期位于增量备份周期,所述数据库服务器用于获取所述待备份数据库中相较于上一次备份新增和/或修改的数据,作为所述待备份数据;
若为再次备份,所述根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本,包括:
获取所述有效数据块对应的块偏移,根据所述块偏移得到所述有效数据块在所述镜像副本中的目标存储位置;
将所述有效数据块合并至所述镜像副本的目标存储位置中,得到所述镜像副本。
8.一种数据库合成备份装置,其特征在于,应用于存储服务器,所述装置包括:
获取模块,用于获取待备份数据库所在数据库服务器发送的待备份数据对应的备份集;
提取模块,用于从所述备份集中提取所述待备份数据对应的有效数据块;所述有效数据块表征所述备份集中已使用的数据块;
还原模块,用于根据所述备份集中的元数据以及所述有效数据块,还原所述待备份数据对应的镜像副本并存储;所述元数据记录有所述待备份数据对应的未使用数据块信息。
9.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110366746.4A CN113064760B (zh) | 2021-04-06 | 2021-04-06 | 数据库合成备份方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110366746.4A CN113064760B (zh) | 2021-04-06 | 2021-04-06 | 数据库合成备份方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113064760A true CN113064760A (zh) | 2021-07-02 |
CN113064760B CN113064760B (zh) | 2022-02-15 |
Family
ID=76566059
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110366746.4A Active CN113064760B (zh) | 2021-04-06 | 2021-04-06 | 数据库合成备份方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113064760B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115470043A (zh) * | 2022-09-14 | 2022-12-13 | 广州鼎甲计算机科技有限公司 | 数据库备份方法、装置、计算机设备和存储介质 |
WO2023000674A1 (zh) * | 2021-07-23 | 2023-01-26 | 苏州浪潮智能科技有限公司 | 云硬盘数据压缩备份及恢复方法、装置、设备及存储介质 |
CN117370078A (zh) * | 2023-10-31 | 2024-01-09 | 广州鼎甲计算机科技有限公司 | 数据库备份管理方法、装置、计算机设备和存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104166606A (zh) * | 2014-08-29 | 2014-11-26 | 华为技术有限公司 | 文件备份方法和主存储设备 |
CN104506619A (zh) * | 2014-12-22 | 2015-04-08 | 华为技术有限公司 | 一种数据备份、恢复方法及其装置、服务器 |
CN105868054A (zh) * | 2016-03-28 | 2016-08-17 | 上海上讯信息技术股份有限公司 | 一种在双机系统环境下备份数据的方法与设备 |
CN106528328A (zh) * | 2016-10-10 | 2017-03-22 | 乐视控股(北京)有限公司 | 基于分布式存储系统的数据恢复方法、装置及系统 |
CN111159313A (zh) * | 2019-12-31 | 2020-05-15 | 广州鼎甲计算机科技有限公司 | 一种数据库快速合成备份方法、系统、装置及存储介质 |
US10678652B1 (en) * | 2017-04-28 | 2020-06-09 | EMC IP Holding Company LLC | Identifying changed files in incremental block-based backups to backup indexes |
CN111651238A (zh) * | 2020-06-03 | 2020-09-11 | 上海英方软件股份有限公司 | 一种虚拟机保护中有效数据获取系统及方法 |
-
2021
- 2021-04-06 CN CN202110366746.4A patent/CN113064760B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104166606A (zh) * | 2014-08-29 | 2014-11-26 | 华为技术有限公司 | 文件备份方法和主存储设备 |
CN104506619A (zh) * | 2014-12-22 | 2015-04-08 | 华为技术有限公司 | 一种数据备份、恢复方法及其装置、服务器 |
CN105868054A (zh) * | 2016-03-28 | 2016-08-17 | 上海上讯信息技术股份有限公司 | 一种在双机系统环境下备份数据的方法与设备 |
CN106528328A (zh) * | 2016-10-10 | 2017-03-22 | 乐视控股(北京)有限公司 | 基于分布式存储系统的数据恢复方法、装置及系统 |
US10678652B1 (en) * | 2017-04-28 | 2020-06-09 | EMC IP Holding Company LLC | Identifying changed files in incremental block-based backups to backup indexes |
CN111159313A (zh) * | 2019-12-31 | 2020-05-15 | 广州鼎甲计算机科技有限公司 | 一种数据库快速合成备份方法、系统、装置及存储介质 |
CN111651238A (zh) * | 2020-06-03 | 2020-09-11 | 上海英方软件股份有限公司 | 一种虚拟机保护中有效数据获取系统及方法 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023000674A1 (zh) * | 2021-07-23 | 2023-01-26 | 苏州浪潮智能科技有限公司 | 云硬盘数据压缩备份及恢复方法、装置、设备及存储介质 |
CN115470043A (zh) * | 2022-09-14 | 2022-12-13 | 广州鼎甲计算机科技有限公司 | 数据库备份方法、装置、计算机设备和存储介质 |
CN115470043B (zh) * | 2022-09-14 | 2023-04-25 | 广州鼎甲计算机科技有限公司 | 数据库备份方法、装置、计算机设备和存储介质 |
CN117370078A (zh) * | 2023-10-31 | 2024-01-09 | 广州鼎甲计算机科技有限公司 | 数据库备份管理方法、装置、计算机设备和存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113064760B (zh) | 2022-02-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113064760B (zh) | 数据库合成备份方法、装置、计算机设备和存储介质 | |
CN108322533B (zh) | 基于操作日志的分布式集群节点间配置同步方法 | |
US6665815B1 (en) | Physical incremental backup using snapshots | |
US8793217B2 (en) | Block level incremental backup | |
US7680998B1 (en) | Journaled data backup during server quiescence or unavailability | |
US20080195677A1 (en) | Techniques for versioning files | |
CN111241062B (zh) | 一种数据库备份元数据的迁移方法及装置 | |
CN109460438B (zh) | 消息数据存储方法、装置、计算机设备和存储介质 | |
US20190227710A1 (en) | Incremental data restoration method and apparatus | |
CN112612576B (zh) | 虚拟机备份方法、装置、电子设备及存储介质 | |
CN113360322A (zh) | 一种基于备份系统恢复数据的方法及设备 | |
CN114138549A (zh) | 基于kubernetes系统的数据备份和恢复方法 | |
EP4042307A1 (en) | Method, system, electronic device, and storage medium for storing and collecting temperature data | |
EP3963461A1 (en) | Garbage collection for a deduplicated cloud tier | |
CN109753381B (zh) | 一种基于对象存储的持续数据保护方法 | |
CN106998436B (zh) | 录像备份方法及装置 | |
CN109471756A (zh) | 数据恢复方法、装置及计算机可读存储介质 | |
KR101111400B1 (ko) | 임베디드 시스템의 데이터 복원 장치 및 방법 | |
CN113312309B (zh) | 快照链的管理方法、装置和存储介质 | |
CN111581016B (zh) | 一种现代应用的副本数据管理系统及方法 | |
CN113535482A (zh) | 云备份链数据备份、管理方法及装置、设备、可读介质 | |
CN114138559A (zh) | 一种基于合成技术的快速备份方法及系统 | |
US20200341891A1 (en) | Garbage collection for a deduplicated cloud tier | |
CN103810056A (zh) | 一种在Linux平台上获得一致性备份的方法 | |
CN112612648B (zh) | 一种SQL Server数据库恢复方法、终端设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right | ||
PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Database synthetic backup method, device, computer equipment and storage medium Effective date of registration: 20221021 Granted publication date: 20220215 Pledgee: Industrial Bank Co.,Ltd. Guangzhou Development Zone sub branch Pledgor: Guangzhou Dingjia Computer Technology Co.,Ltd. Registration number: Y2022980018838 |