CN115904819B - 数据库备份数据的验证方法及装置 - Google Patents

数据库备份数据的验证方法及装置 Download PDF

Info

Publication number
CN115904819B
CN115904819B CN202310091216.2A CN202310091216A CN115904819B CN 115904819 B CN115904819 B CN 115904819B CN 202310091216 A CN202310091216 A CN 202310091216A CN 115904819 B CN115904819 B CN 115904819B
Authority
CN
China
Prior art keywords
target
data
backup
storage pool
verification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202310091216.2A
Other languages
English (en)
Other versions
CN115904819A (zh
Inventor
樊建
张伟
代维
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yunhe Enmo Beijing Information Technology Co ltd
Original Assignee
Yunhe Enmo Beijing Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yunhe Enmo Beijing Information Technology Co ltd filed Critical Yunhe Enmo Beijing Information Technology Co ltd
Priority to CN202310091216.2A priority Critical patent/CN115904819B/zh
Publication of CN115904819A publication Critical patent/CN115904819A/zh
Application granted granted Critical
Publication of CN115904819B publication Critical patent/CN115904819B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种数据库备份数据的验证方法及装置。其中,该方法包括:获取数据库的目标备份数据以及与目标备份数据对应的目标备份片;对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性;将目标备份片和第一验证数据存储至目标存储池;对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。本申请解决了相关备份技术未对输出备份数据的备份片以及存储备份数据的目标存储池进行验证,导致备份数据不可用的技术问题。

Description

数据库备份数据的验证方法及装置
技术领域
本申请涉及数据备份技术领域,具体而言,涉及一种数据库备份数据的验证方法及装置。
背景技术
当前,数据库用于组织、存储和管理数据,因此,随着存储数据量的不断增多,数据库常常会出现各种故障,因此,需要对数据库内存储的数据进行备份,从而花费尽可能小的时间和代价恢复数据库。
通常,相关备份软件在进行数据备份时,并不会对备份数据的有效性进行及时验证,同时,将备份数据存放在存储介质后也未对存储介质的可用性进行验证,使得后续只有在恢复数据时才能确定备份数据是否有效,从而一旦发生备份片无效或者存储介质损坏将会导致备份数据不可用,从而给使用者造成难以估量的损失。
针对上述的问题,目前尚未提出可用的解决方案。
发明内容
本申请实施例提供了一种数据库备份数据的验证方法及装置,以至少解决相关备份技术未对输出备份数据的备份片以及存储备份数据的目标存储池进行验证,导致备份数据不可用的技术问题。
根据本申请实施例的一个方面,提供了一种数据库备份数据的验证方法,包括:获取数据库的目标备份数据以及与目标备份数据对应的目标备份片;对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性;将目标备份片和第一验证数据存储至目标存储池;对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。
可选地,对目标备份片进行验证,得到第一验证数据,包括:将目标备份片恢复至验证库,得到多个恢复数据;对恢复数据进行访问操作,得到访问操作结果;若访问操作结果正确时,确定目标备份片可用;在访问操作结果错误时,确定目标备份片不可用。
可选地,获取数据库的日志文件对应的目标备份日志;将目标备份日志注册至验证库,得到注册结果,其中,注册结果包括:注册成功和注册失败;依据注册结果确定目标备份日志的可用性。
可选地,将目标备份日志应用至验证库,得到应用结果;依据应用结果更新目标备份片中的目标备份数据。
可选地,对存储介质进行验证,得到第二验证数据,包括:周期性地对存储介质进行验证,判断存储介质中是否存在坏块;在存储介质中不存在坏块时,确定存储介质可用;在存储介质中存在坏块时,确定存储介质不可用。
可选地,对第一验证数据进行存储快照,得到目标备份片的第一数据副本,并将第一数据副本存储至目标存储池。
可选地,对目标存储池进行检测,得到与目标存储池对应的检测结果,包括:周期性地对目标存储池进行检测,判定目标存储池中是否存在坏块;在目标存储池中存在坏块时,确定目标存储池异常,并发出相应的告警提示信息,其中,告警提示信息用于提示目标存储池内存在坏块;在目标存储池中不存在坏块时,确定目标存储池正常。
可选地,周期性地对目标存储池进行检测,包括:确定在验证周期内数据库在验证周期内进行数据备份时的运行负载;在运行负载小于预设阈值时,确定对目标存储池按照第一频率进行全速检测;在运行负载不小于预设阈值时,确定对目标存储池按照第二频率进行半速检测;其中,第一频率大于第二频率。
可选地,在确定目标存储池的状态异常之后,该方法还包括:通过目标存储池内的目标数据副本对坏块进行修复,其中,目标数据副本存储的数据信息与坏块的数据信息相同。
根据本申请实施例的另一方面,还提供了一种数据库备份数据的验证装置,包括:获取模块,用于获取数据库的目标备份数据以及与目标备份数据对应的目标备份片;验证模块,用于对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性;存储模块,用于将目标备份片和第一验证数据存储至目标存储池;检测模块,用于对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。
根据本申请实施例的另一方面,还提供了一种电子设备,该电子设备包括:存储器和处理器,其中,存储器中存储有计算机程序,处理器被配置为通过计算机程序执行上述的数据库备份数据的验证方法。
在本申请实施例中,获取数据库的目标备份数据以及与目标备份数据对应的目标备份片;对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性;将目标备份片和第一验证数据存储至目标存储池;对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。从而在确保输出备份数据的备份片可用的同时,通过目标存储池的状态信息反映目标存储池内是否存在坏块,进一步减少备份数据不可用的情况发生,进而解决了相关备份技术未对输出备份数据的备份片以及存储备份数据的目标存储池进行验证,导致备份数据不可用技术问题。
附图说明
此处所说明的附图用来提供对本申请的进一步理解,构成本申请的一部分,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1是根据本申请实施例的一种可选的数据库备份数据的验证方法的流程图;
图2是根据本申请实施例的一种可选的数据库备份数据的验证装置的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分的实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
需要说明的是,本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为了更好地理解本申请实施例,首先对本申请实施例描述过程中出现的部分名词或术语翻译解释如下:
备份片:指对数据库中的数据文件进行备份的输出文件,通常,一份数据文件或一个数据库输出一个备份片。
备份日志:指对数据库中的数据日志进行备份的输出文件。
验证库:指用于验证备份数据可用性和完整性的数据库。
目标存储池:目标存储池是DPM(Data Protection Manager)服务器在其中存储副本、卷影副本和传输日志的一组磁盘。目标存储池可以被认为是一组磁盘组成的“数据保护管理器”,即多个磁盘通过某种特殊阵列组合在一起,形成一个巨大的存储功能,同时,这个存储区域支持与阵列相对应的功能。
实施例1
在相关技术中,对数据备份后并未对备份数据的可用性以及存放备份数据的存储介质的可用性进行及时验证,导致后续在恢复数据时才能确定备份数据是否可用。为了解决该问题,本申请实施例中提供了相关的解决方案,以下详细说明。
根据本申请实施例,提供了一种数据库备份数据的验证方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本申请实施例的一种可选的数据库备份数据的验证方法的流程图,如图1所示,该方法至少包括步骤S102-S108,其中:
步骤S102,获取数据库的目标备份数据以及与目标备份数据对应的目标备份片。
在本发明上述步骤S102提供的技术方案中,通常对数据库中的备份源进行备份时,可能由于备份源中的数据本身存在问题或者备份的过程中存在问题,导致备份数据不具备可用性,从而无法通过备份数据还原初始数据,因此,有必要在数据备份完成后,及时对目标备份数据以及对应的目标备份片进行验证。其中,本申请实施例中的目标备份数据可以但不仅限于数据库实例的备份数据。
步骤S104,对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性。
在本发明上述步骤S104提供的技术方案中,由于目标备份片中包含数据库中所有备份信息,因此,对目标备份片进行可用性验证,从而确保目标备份片内的目标备份数据可用,避免在后续恢复备份数据时,才发现备份数据不具备可用性,造成资源浪费。
需要说明的是,若目标备份片未通过可用性校验,说明目标备份片内存在不可用的目标备份数据,可以对该目标备份片进行丢弃;并接着重新对数据库中备份源进行备份,获取对应的备份片。
步骤S106,将目标备份片和第一验证数据存储至目标存储池。
在本发明上述步骤S106提供的技术方案中,可以将目标备份片和第一验证数据存储至目标存储池内的存储介质的相同存储区域,确保备份数据可以长期存储下来,用于后续的数据恢复。
可选地,为了后续确保备份数据进行多场景使用,还可以对第一验证数据进行存储快照,得到目标备份片的第一数据副本,并将第一数据副本存储至目标存储池。
其中,第一数据副本可以与目标备份片和第一验证数据存储至相同存储区域,也可以存储至存储介质内的不同存储区域,此处不做具体限制。
步骤S108,对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。
在本发明上述步骤S108提供的技术方案中,为了避免数据在备份后无法进行长期保存,在本申请实施例中可以对存放目标备份片和第一验证数据的目标存储池进行检测,从而确保备份数据存储的可靠性。
在本申请上述步骤S102-S108中实施例中,获取数据库的目标备份数据以及与目标备份数据对应的目标备份片;对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性;将目标备份片和第一验证数据存储至目标存储池;对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。从而在确保输出备份数据的备份片可用的同时,通过目标存储池的状态信息反映目标存储池内是否存在坏块,进一步减少备份数据不可用的情况发生,进而解决了相关备份技术未对输出备份数据的备份片以及存储备份数据的目标存储池进行验证,导致备份数据不可用技术问题。
下面对该实施例的上述方法进行进一步地介绍。
作为一种可选的实施方式,在本发明上述步骤S104提供的技术方案中,该方法可以包括:将目标备份片恢复至验证库,得到多个恢复数据;对恢复数据进行访问操作,得到访问操作结果;若访问操作结果正确时,确定目标备份片可用;在访问操作结果错误时,确定目标备份片不可用。
在该实施例中,首先启动用于验证目标备份数据的验证数据库;接着通过将目标备份片恢复至验证库,得到与目标备份片对应的多个恢复数据;然后对恢复数据进行访问操作,得到访问操作结果,并依据访问操作结果判定目标备份片是否可用。例如,若访问操作结果显示相关的数据信息时,说明目标备份片可用;反之则说明目标备份片不可用。
作为另一种可选的实施方式,为了对备份数据的备份日志的可用性进行验证,还可以获取数据库的日志文件对应的目标备份日志;将目标备份日志注册至验证库,得到注册结果,其中,注册结果包括:注册成功和注册失败;依据注册结果确定目标备份日志的可用性。
在该实施例中,首先获取数据库中数据日志文件进行备份得到的目标备份日志;接着目标备份日志注册至验证库中,若目标备份日志在验证库内成功注册,则说明目标备份日志可用;反之则说明目标备份日志不可用,从而进一步地确保备份数据的安全性。
进一步地,若目标备份日志可用时,还可以将目标备份日志应用至验证库,得到应用结果;依据应用结果更新目标备份片中的目标备份数据。
具体地,通过在验证数据库中应用目标备份日志,得到应用结果,其中,应用结果中包括:多个第二备份数据;可以通过应用结果对目标备份片内的目标备份数据进行实时更新,保证目标备份数据的完整性。
例如,当目标备份片中存储数据库在当日8-10点的所有备份数据,而目标备份日志存储当日8-12点的所有数据信息相关的日志文件,此时可以在验证数据库中应用目标备份日志,则验证数据库中包括当日8-12点的所有数据信息,对这些数据信息进行备份,并将备份数据更新至目标备份片中,从而目标备份片将包含当日8-12点的所有数据信息,实现对目标备份数据的更新,同时确保目标备份片的完整性。
需要说明的是,在本申请实施例中,可以先对目标备份片的可用性进行校验,若可用性通过校验,再对目标备份片的完整性进行校验;也可以先对目标备份片的完整性进行校验,若完整性通过校验,再对目标备份片的可用性进行校验;还可以同时对目标备份片的可用性和完整性进行校验,当目标备份片的可用性和完整性均通过校验,可以确保目标备份片的有效性,进而对目标备份片进行存储,以便后续通过目标备份片还原原始数据。上述双重校验机制准确校验备份数据的有效性,进而确保备份数据可以完整还原原始数据。
作为一种可选的实施方式,在本发明上述步骤S108提供的技术方案中,该方法可以包括:周期性地对目标存储池进行检测,判定目标存储池中是否存在坏块;在目标存储池中存在坏块时,确定目标存储池的状态异常,并发出相应的告警提示信息,其中,告警提示信息用于提示目标存储池内存在坏块;在目标存储池中不存在坏块时,确定目标存储池的状态正常。
在该实施例中,定期对目标存储池进行检测,及时发现目标存储池内是否存在坏块,若目标存储池的状态信息异常,且该异常信息是由于目标存储池内存在坏块时,可以发出相应的告警提示信息,以提醒相关技术人员对目标存储池内的坏块执行相应的管理操作,避免因坏块导致存储的备份数据丢失或者数据损坏的情况发生。
作为一种可选的实施方式,可以按照如下规则周期性地对存储介质进行检测:确定数据库在验证周期内进行数据备份时的运行负载;在运行负载小于预设阈值时,确定对目标存储池按照第一频率进行全速检测;在运行负载不小于预设阈值时,确定对目标存储池按照第二频率进行半速检测;其中,第一频率大于第二频率。
可选地,获取在验证周期内,系统在数据库进行数据备份时的运行负载,当系统运行负载的低于10%(即预设阈值)时,确定对目标存储池按照第一频率进行全速检测;当系统运行负载的高于10%(即预设阈值),确定对目标存储池按照第二频率进行半速检测。
需要注意的是,预设阈值可以根据实际情况自行设定,此处不做具体限制。另外,当系统的运行负载超过40%时,需要将系统的允许负载限制在30%以内再对目标存储池按照第二频率进行半速扫描;而当系统的运行负载超过80%时,跳过本次对目标存储池的扫描校验。
作为一种可选的实施方式,在本发明上述步骤S108提供的技术方案中,在确定目标存储池的状态异常之后,该方法还可以包括:通过目标存储池内的目标数据副本对坏块进行修复,其中,目标数据副本存储的数据信息与坏块的数据信息相同。
在该实施例中,确定目标存储池的状态异常后,可以确定目标存储池内的坏块,相关技术人员可以通过目标存储池内与坏块存储的数据信息相同的其余多份冗余副本对坏块进行精准修复,换句话说,当目标存储池内出现坏块时,相关技术人员可以获取冗余副本的数据信息,并将该数据信息重新存储至损坏的数据块中完成修复,修复后的数据块仍存储与出现损坏之间相同的数据信息。
在上述步骤中,在数据备份完毕后,及时对数据库的目标备份片的可用性和完整性进行双重校验,确保目标备份片的有效性,从而便于后续的数据恢复;同时为了确保数据备份完成后可以进行长期可靠地存储,还可以对存放目标备份片和验证数据的目标存储池进行定期检测,及时发现目标存储池内的坏块,并对坏块进行精准修复,从而保障备份数据存储的可靠性。
实施例2
根据本申请实施例,还提供了一种用于实现上述数据库备份数据的验证方法的数据库备份数据的验证装置,图2是根据本申请实施例的一种可选的数据库备份数据的验证装置的结构实体图,如图2所示,该数据库备份数据的验证装置中至少包括获取模块21,验证模块22,存储模块23和检测模块24,其中:
获取模块21,用于获取数据库的目标备份数据以及与目标备份数据对应的目标备份片。
具体地,通常对数据库中的备份源进行备份时,可能由于备份源中的数据本身存在问题或者备份的过程中存在问题,导致备份数据不具备可用性,从而无法通过备份数据还原初始数据,因此,有必要在数据备份完成后,及时对目标备份数据以及对应的目标备份片进行验证。其中,本申请实施例中的目标备份数据可以但不仅限于数据库实例的备份数据。
进一步地,为了对备份数据的备份日志的有效性进行验证,获取模块21还可以获取数据库中数据日志文件进行备份得到的目标备份日志。
验证模块22,用于对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性。
由于目标备份片中包含数据库中所有备份信息,因此,对目标备份片进行可用性验证,从而确保目标备份片内的目标备份数据可用,避免在后续恢复备份数据时,才发现备份数据不具备可用性,造成资源浪费。
需要说明的是,若目标备份片未通过可用性校验,说明目标备份片内存在不可用的目标备份数据,可以对该目标备份片进行丢弃;并接着重新对数据库中备份源进行备份,获取对应的备份片。
作为一种可选的实施方式,验证模块22可以对第一备份片进行验证,得到第一验证数据,包括:将目标备份片恢复至验证库,得到多个恢复数据;对恢复数据进行访问操作,得到访问操作结果;若访问操作结果正确时,确定目标备份片可用;在访问操作结果错误时,确定目标备份片不可用。
在该实施例中,验证模块22首先启动用于验证目标备份数据的验证数据库;接着通过将目标备份片恢复至验证库,得到与目标备份片对应的多个恢复数据;然后对恢复数据进行访问操作,得到访问操作结果,并依据访问操作结果判定目标备份片是否可用。例如,若访问操作结果显示相关的数据信息时,说明目标备份片可用;反之则说明目标备份片不可用。
作为另一种可选的实施方式,为了对目标备份数据的目标备份日志的可用性进行验证,验证模块22还可以将获取模块21获取的目标备份日志注册至验证库,得到注册结果,其中,注册结果包括:注册成功和注册失败;依据注册结果确定目标备份日志的可用性。
在该实施例中,验证模块22首先获取数据库中数据日志文件进行备份得到的目标备份日志;接着目标备份日志注册至验证库中,若目标备份日志在验证库内成功注册,则说明目标备份日志可用;反之则说明目标备份日志不可用,从而进一步地确保备份数据的安全性。
进一步地,若目标备份日志可用时,验证模块22还可以将目标备份日志应用至验证库,得到应用结果;依据应用结果更新目标备份片中的目标备份数据。
具体地,验证模块22通过在验证数据库中应用目标备份日志,得到应用结果,其中,应用结果中包括:多个第二备份数据;可以通过应用结果对目标备份片内的目标备份数据进行实时更新,保证目标备份数据的完整性。
例如,当目标备份片中存储数据库在当日8-10点的所有备份数据,而目标备份日志存储当日8-12点的所有数据信息相关的日志文件,此时可以在验证数据库中应用目标备份日志,则验证数据库中包括当日8-12点的所有数据信息,对这些数据信息进行备份,并将备份数据更新至目标备份片中,从而目标备份片将包含当日8-12点的所有数据信息,实现对目标备份数据的更新,同时确保目标备份片的完整性。
需要说明的是,在本申请实施例中,验证模块22可以先对目标备份片的可用性进行校验,若可用性通过校验,再对目标备份片的完整性进行校验;验证模块22也可以先对目标备份片的完整性进行校验,若完整性通过校验,再对目标备份片的可用性进行校验;验证模块22还可以同时对目标备份片的可用性和完整性进行校验,当目标备份片的可用性和完整性均通过校验,可以确保目标备份片的有效性,进而对目标备份片进行存储,以便后续通过目标备份片还原原始数据。上述双重校验机制准确校验备份数据的有效性,进而确保备份数据可以完整还原原始数据。
存储模块23,用于将目标备份片和第一验证数据存储至目标存储池。
具体地,存储模块23可以将目标备份片和第一验证数据存储至目标存储池内的存储介质的相同存储区域,确保备份数据可以长期存储下来,用于后续的数据恢复。
可选地,为了后续确保备份数据进行多场景使用,存储模块23可以对第一验证数据进行存储快照,得到目标备份片的第一数据副本,并将第一数据副本存储至目标存储池。
其中,第一数据副本可以与目标备份片和第一验证数据存储至相同存储区域,也可以存储至存储介质内的不同存储区域,此处不做具体限制。
检测模块24,用于对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。
为了避免数据在备份后无法进行长期保存,在本申请实施例中,检测模块24可以对存放目标备份片和第一验证数据的目标存储池进行检测,从而确保备份数据存储的可靠性。
作为一种可选的实施方式,检测模块24可以周期性地对目标存储池进行检测,判定目标存储池中是否存在坏块;在目标存储池中存在坏块时,确定目标存储池的状态异常,并发出相应的告警提示信息,其中,告警提示信息用于提示目标存储池内存在坏块;在目标存储池中不存在坏块时,确定目标存储池的状态正常。
在该实施例中,检测模块24定期对目标存储池进行检测,及时发现目标存储池内是否存在坏块,若目标存储池的状态信息异常,且该异常信息是由于目标存储池内存在坏块时,可以发出相应的告警提示信息,以提醒相关技术人员对目标存储池内的坏块执行相应的管理操作,避免因坏块导致存储的备份数据丢失或者数据损坏的情况发生。
作为一种可选的实施方式,检测模块24可以按照如下规则周期性地对存储介质进行检测:确定数据库在验证周期内进行数据备份时的运行负载;在运行负载小于预设阈值时,确定对目标存储池按照第一频率进行全速检测;在运行负载不小于预设阈值时,确定对目标存储池按照第二频率进行半速检测;其中,第一频率大于第二频率。
具体地,检测模块24可以获取在验证周期内系统在数据库进行数据备份时的运行负载,当系统运行负载的低于10%(即预设阈值)时,确定对目标存储池按照第一频率进行全速检测;当系统运行负载的高于10%(即预设阈值),确定对目标存储池按照第二频率进行半速检测。
需要注意的是,预设阈值可以根据实际情况自行设定,此处不做具体限制。另外,当系统的运行负载超过40%时,需要将系统的允许负载限制在30%以内再对目标存储池按照第二频率进行半速扫描;而当系统的运行负载超过80%时,跳过本次对目标存储池的扫描校验。
作为一种可选的实施方式,在确定目标存储池的状态异常之后,检测模块24还可以通过目标存储池内的目标数据副本对坏块进行修复,其中,目标数据副本存储的数据信息与坏块的数据信息相同。
在该实施例中,当检测模块24确定目标存储池的状态异常后,可以确定目标存储池内的坏块,相关技术人员可以通过目标存储池内与坏块存储的数据信息相同的其余多份冗余副本对坏块进行精准修复,换句话说,当目标存储池内出现坏块时,相关技术人员可以获取冗余副本的数据信息,并将该数据信息重新存储至损坏的数据块中完成修复,修复后的数据块仍存储与出现损坏之间相同的数据信息。
需要说明的是,本申请实施例中的数据库备份数据的验证装置中的各模块与实施例1中的数据库备份数据的验证方法的各实施步骤一一对应,由于实施例1中已经进行了详尽的描述,本实施例中部分未体现的细节可以参考实施例1,在此不再过多赘述。
另外,上述数据库备份数据的验证装置中的各个模块可以是程序模块(例如是实现某种特定功能的程序指令集合),也可以是硬件模块,对于后者,其可以表现为以下形式,但不限于此:上述各个模块的表现形式均为一个处理器,或者,上述各个模块的功能通过一个处理器实现。
实施例3
根据本申请实施例,还提供了一种电子设备,该电子设备包括:存储器和处理器,其中,存储器中存储有计算机程序,处理器被配置为通过计算机程序执行实施例1中的数据库备份数据的验证方法。
可选地,处理器被配置为通过计算机程序执行实现以下步骤:获取数据库的目标备份数据以及与目标备份数据对应的目标备份片;对目标备份片进行验证,得到第一验证数据,其中,第一验证数据用于反映目标备份片的可用性;将目标备份片和第一验证数据存储至目标存储池;对目标存储池进行检测,得到与目标存储池对应的检测结果,其中,检测结果用于反映目标存储池的状态信息。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
在本申请的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对相关技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本申请的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本申请的保护范围。

Claims (9)

1.一种数据库备份数据的验证方法,其特征在于,包括:
获取数据库的目标备份数据、与所述目标备份数据对应的目标备份片以及所述数据库的日志文件对应的目标备份日志,其中,所述目标备份片中包括:对所述数据库的各个数据文件进行备份,得到每个所述数据文件对应的所述目标备份数据;
对所述目标备份片进行验证,得到第一验证数据,并对所述目标备份日志进行验证,得到第二验证数据,其中,所述第一验证数据用于反映所述目标备份片的可用性,所述第二验证数据用于反映所述目标备份片的完整性;
其中,对所述目标备份日志进行验证,得到所述第二验证数据,包括:将所述目标备份日志应用至验证库,得到应用结果,其中,所述应用结果中包括:多个第一备份数据;依据所述多个第一备份数据验证所述目标备份片的完整性,并在所述目标备份片不完整时,依据所述应用结果更新所述目标备份片中的所述目标备份数据;
将所述目标备份片、所述第一验证数据和所述第二验证数据存储至目标存储池;
对所述目标存储池进行检测,得到与所述目标存储池对应的检测结果,其中,所述检测结果用于反映所述目标存储池的状态信息。
2.根据权利要求1所述的方法,其特征在于,对所述目标备份片进行验证,得到第一验证数据,包括:
将所述目标备份片恢复至所述验证库,得到多个恢复数据;
对所述恢复数据进行访问操作,得到访问操作结果;
若所述访问操作结果正确时,确定所述目标备份片可用;
在所述访问操作结果错误时,确定所述目标备份片不可用。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述目标备份日志注册至所述验证库,得到注册结果,其中,所述注册结果包括:注册成功和注册失败;
依据所述注册结果确定所述目标备份日志的可用性。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
对所述第一验证数据进行存储快照,得到所述目标备份片的第一数据副本,并将所述第一数据副本存储至所述目标存储池。
5.根据权利要求1所述的方法,其特征在于,对所述目标存储池进行检测,得到与所述目标存储池对应的检测结果,包括:
周期性地对所述目标存储池进行检测,判定所述目标存储池中是否存在坏块;
在所述目标存储池中存在所述坏块时,确定所述目标存储池的状态异常,并发出相应的告警提示信息,其中,所述告警提示信息用于提示所述目标存储池内存在坏块;
在所述目标存储池中不存在所述坏块时,确定所述目标存储池的状态正常。
6.根据权利要求5所述的方法,其特征在于,周期性地对所述目标存储池进行检测,包括:
确定所述数据库在验证周期内进行数据备份时的运行负载;
在所述运行负载小于预设阈值时,确定对所述目标存储池按照第一频率进行全速检测;
在所述运行负载不小于所述预设阈值时,确定对所述目标存储池按照第二频率进行半速检测;
其中,所述第一频率大于所述第二频率。
7.根据权利要求5所述的方法,其特征在于,在确定所述目标存储池异常之后,所述方法还包括:
通过所述目标存储池内的目标数据副本对所述坏块进行修复,其中,所述目标数据副本存储的数据信息与所述坏块的数据信息相同。
8.一种数据库备份数据的验证装置,其特征在于,包括:
获取模块,用于获取数据库的目标备份数据、与所述目标备份数据对应的目标备份片以及所述数据库的日志文件对应的目标备份日志,其中,所述目标备份片中包括:对所述数据库的各个数据文件进行备份,得到每个所述数据文件对应的所述目标备份数据;
验证模块,用于对所述目标备份片进行验证,得到第一验证数据,并对所述目标备份日志进行验证,得到第二验证数据,其中,所述第一验证数据用于反映所述目标备份片的可用性,所述第二验证数据用于反映所述目标备份片的完整性;
其中,对所述目标备份日志进行验证,得到所述第二验证数据,包括:将所述目标备份日志应用至验证库,得到应用结果,其中,所述应用结果中包括:多个第一备份数据;依据所述多个第备份数据验证所述目标备份片的完整性,并在所述目标备份片不完整时,依据所述应用结果更新所述目标备份片中的所述目标备份数据;
存储模块,用于将所述目标备份片、所述第一验证数据和所述第二验证数据存储至目标存储池;
检测模块,用于对所述目标存储池进行检测,得到与所述目标存储池对应的检测结果,其中,所述检测结果用于反映所述目标存储池的状态信息。
9.一种电子设备,其特征在于,包括:存储器和处理器,所述处理器用于运行存储在所述存储器中的程序,其中,所述程序运行时执行权利要求1至7中任意一项所述的数据库备份数据的验证方法。
CN202310091216.2A 2023-02-09 2023-02-09 数据库备份数据的验证方法及装置 Active CN115904819B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310091216.2A CN115904819B (zh) 2023-02-09 2023-02-09 数据库备份数据的验证方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310091216.2A CN115904819B (zh) 2023-02-09 2023-02-09 数据库备份数据的验证方法及装置

Publications (2)

Publication Number Publication Date
CN115904819A CN115904819A (zh) 2023-04-04
CN115904819B true CN115904819B (zh) 2023-07-28

Family

ID=86491779

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310091216.2A Active CN115904819B (zh) 2023-02-09 2023-02-09 数据库备份数据的验证方法及装置

Country Status (1)

Country Link
CN (1) CN115904819B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113806138A (zh) * 2021-02-05 2021-12-17 京东科技控股股份有限公司 数据库的备份恢复检测方法、装置及电子设备、存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106951341A (zh) * 2017-01-20 2017-07-14 天翼阅读文化传播有限公司 一种实现分布式架构的数据库备份方法
CN109726051A (zh) * 2018-12-29 2019-05-07 上海上讯信息技术股份有限公司 一种数据库备份数据有效性自动化验证方法
CN112506928A (zh) * 2020-12-10 2021-03-16 中信百信银行股份有限公司 一种验证备份数据有效性的方法和装置
US11340998B1 (en) * 2020-12-31 2022-05-24 Verified Backups LLC Systems and methods for providing backup storage and verifying the integrity of backup files
CN114443332B (zh) * 2021-12-24 2024-01-09 苏州浪潮智能科技有限公司 一种存储池的检测方法、装置、电子设备及存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113806138A (zh) * 2021-02-05 2021-12-17 京东科技控股股份有限公司 数据库的备份恢复检测方法、装置及电子设备、存储介质

Also Published As

Publication number Publication date
CN115904819A (zh) 2023-04-04

Similar Documents

Publication Publication Date Title
CN101436138B (zh) 一种用于软件升级且动态回滚的控制装置以及控制方法
CN101329631B (zh) 一种嵌入式系统自动检测和恢复启动的方法及装置
US6785838B2 (en) Method and apparatus for recovering from failure of a mirrored boot device
CN100419698C (zh) 网络设备及监视其启动的方法
CN112286728A (zh) 数据备份方法、装置、设备及计算机存储介质
CN111273932B (zh) 一种部件刷新方法、系统及计算机可读存储介质
CN114780298B (zh) 文件数据处理方法、装置、计算机终端及存储介质
CN102542016B (zh) 文件系统弹性管理
CN112099825A (zh) 组件进行升级的方法、装置、设备及存储介质
CN115904819B (zh) 数据库备份数据的验证方法及装置
WO1994014126A1 (en) A system for relations recovery of a data base in case of errors
CN113268206B (zh) 一种网络靶场资源热插拔实现方法与系统
CN116149932A (zh) 软件系统状态的检测方法、装置及电子设备
US11782800B2 (en) Methods to automatically correct and improve system recovery and replication processes
JP2000330778A (ja) 修正ロードモジュール置換後の復旧方法ならびに装置
CN112463444A (zh) 一种数据不一致修复方法及相关装置
CN110348244B (zh) 基于仲裁的多校验和验证方法、系统、装置及存储介质
CN113946828A (zh) 一种工业控制系统的漏洞扫描方法及漏洞扫描装置
JP3235785B2 (ja) 二重化情報処理装置
JP3342039B2 (ja) ファイルを管理する処理装置
KR20030062793A (ko) 리눅스 운영 시스템의 백업 및 복원을 위한 운영 장치 및방법
WO2002021281A2 (en) Panic message analyzer
CN116418655B (zh) 一种tbox故障修复方法及系统
CN114265725A (zh) 一致性验证方法及装置
CN117539682A (zh) 一种大数据交易备份方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant