CN115237669A - 一种数据备份方法、数据恢复方法、装置及电子设备 - Google Patents
一种数据备份方法、数据恢复方法、装置及电子设备 Download PDFInfo
- Publication number
- CN115237669A CN115237669A CN202110444143.1A CN202110444143A CN115237669A CN 115237669 A CN115237669 A CN 115237669A CN 202110444143 A CN202110444143 A CN 202110444143A CN 115237669 A CN115237669 A CN 115237669A
- Authority
- CN
- China
- Prior art keywords
- data
- data block
- state
- service system
- content
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1469—Backup restoration techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1471—Saving, restoring, recovering or retrying involving logging of persistent data for recovery
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种数据备份方法、数据恢复方法、装置及电子设备。方法包括:调取之前备份的业务系统对应所述目标时间戳的目标数据块日志表。根据目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块。调取第一状态数据块对应目标时间戳前最近一次备份的数据内容以及第二状态数据块对应目标时间戳备份的数据内容,备份的存储介质存储有业务系统所有数据块初始的数据内容。基于调取到的第一状态数据块和第二状态数据块的数据内容,使所述业务系统恢复至所述目标时间戳对应的数据状态。
Description
技术领域
本文件数据保护技术领域,尤其涉及一种数据备份方法、数据恢复方法、装置及电子设备。
背景技术
随着信息技术的高速发展,业务系统的数据更新频率也越来越快,数据量也越来越多。业务系统在出现故障或者数据损坏时,经常采用全量备份与增量备份相配合的方式进行数据恢复,也就是先进行一个全量备份的恢复,之后再进行若干个增量备份恢复。
显然这个过程需要业务系统下线执行,且恢复次数较多,导致业务系统长时间处于不可用的状态。
发明内容
本发明实施例目的是提供一种数据备份方法、数据恢复方法、装置及电子设备,能够在不影响业务系统正常运行基础之上实现更高效率的数据恢复。
为了实现上述目的,本发明实施例是这样实现的:
第一方面,提供一种数据备份方法,包括:
根据所述业务系统当前的数据块日志表,确定所述业务系统中数据发生变更的数据块,所述数据块日志表用于记录所述业务系统中数据块在所述数据块日志表最后一次重置后的数据变更状态;
从所述业务系统中获取数据发生变更的数据块的数据内容;
将所述业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份;
在完成备份后,重置所述数据块日志,以清除对数据发生变更的数据块的记录。
第二方面,提供一种数据恢复方法,包括:
响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的所述业务系统对应所述目标时间戳的目标数据块日志表;
根据所述目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,所述第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,所述第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块;
调取第一状态数据块对应所述目标时间戳前最近一次备份的数据内容以及第二状态数据块对应所述目标时间戳备份的数据内容,其中,备份的存储介质存储有所述业务系统所有数据块初始的数据内容;
基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态。
第三方面,提供一种数据备份装置,包括:
数据块变更确定模块,用于根据所述业务系统当前的数据块日志表,确定所述业务系统中数据发生变更的数据块,所述数据块日志表用于记录所述业务系统中数据块在所述数据块日志表最后一次重置后的数据变更状态;
数据块内容获取模块,用于从所述业务系统中获取数据发生变更的数据块的数据内容;
数据块内容备份模块,用于将所述业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份;
数据块日志重置模块,用于在完成备份后,重置所述数据块日志对数据,以清除对数据发生变更的数据块的指示。
第四方面,提供一种数据恢复装置,包括:
数据块日志表调取模块,用于响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的所述业务系统对应所述目标时间戳的目标数据块日志表;
数据块变更确定模块,用于根据所述目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,所述第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,所述第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块;
数据块内容调取模块,用于调取第一状态数据块对应所述目标时间戳前最近一次备份的数据内容以及第二状态数据块对应所述目标时间戳备份的数据内容,其中,备份的存储介质存储有所述业务系统所有数据块初始的数据内容;
数据块内容恢复模块,用于基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态。
第三方面,提供一种电子设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行如第一方面所述的数据备份方法的步骤,或者,执行如第二方面所述的数据恢复方法的步骤。
第四方面,提供一种一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现第一方面上述的数据备份方法的步骤,或者,实现第二方面所述的数据恢复方法的步骤。
获取待检测的目标光交箱的光交箱图像;
将所述光交箱图像输入至目标识别模型的第一卷积神经网络,以对所述光交箱图像进行特征提取,得到初始特征图谱;
将所述初始特征图谱输入至所述目标识别模型的第二卷积神经网络,以在所述初始特征图谱上映射锚点框,得到以锚点框为单位的锚点框特征图谱,其中,所述第二卷积神经网络是基于光交箱部件的样本像素数据和所述样本像素数据对应的分类标签训练得到的;
将所述锚点框特征图谱输入至所述目标识别模型的第三卷积神经网络,以进行光交箱部件的目标识别,得到光交箱部件识别结果,其中,所述第三卷积神经网络是基于光交箱部件的锚点框样本特征图谱和所述锚点框特征图谱对应的分类标签训练得到的;
将所述光交箱部件识别结果中识别到的光交箱部件作为检测对象以进行检测,得到所述目标光交箱的检测结果。
本发明实施例的方案以数据块为数据管理单位,对业务系统的数据进行划分,并设置数据块日志表负责记录数据块日志表最后一次重置后的数据变更状态。在每次数据备份时,仅需要对当前时刻的数据块日志表以及数据发生变更的数据块进行备份。在数据恢复时,通过数据块日志表可以定位到业务系统中各数据块在期望恢复节点的备份,并一次完成数据恢复,从而缩短了执行时间。此外,若在业务系统创建引渡区完成恢复数据的构建,还可无需业务系统下线,保障了业务系统的连续作业。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明实施例中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的数据备份方法的流程示意图。
图2为本发明实施例提供的数据恢复方法的流程示意图。
图3为本发明实施例提供的实现数据恢复的第一种流程示意图。
图4为本发明实施例提供的实现数据恢复的第二种流程示意图。
图5为本发明实施例提供的实现数据恢复的第三种流程示意图。
图6为本发明实施例提供的实现数据恢复的第四种流程示意图。
图7为本发明实施例提供的数据备份装置的结构示意图。
图8为本发明实施例提供的数据恢复装置的结构示意图。
图9为本发明实施例提供的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本说明书中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本说明书一部分实施例,而不是全部的实施例。基于本说明书中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本说明书保护的范围。
如前,目前随着业务系统的数据更新频率越来越快,数据结构也越来越复杂。业务系统在发生故障或者数据损坏时,往往无法仅通过一次增量恢复或者一次全量恢复就能得到解决。而是通过全量与增量相配合的方式进行数据恢复,也就是先进行一个全量备份的恢复,之后再进行若干个增量备份恢复。而这种方式需要业务系统下线执行,由于涉及到的恢复次数较多,导致业务系统长时间处于不可用的状态。
为此,本申请旨在不影响业务系统正常运行基础之上,提供一种高效率的数据恢复方案。本方案涉及到数据备份和数据恢复两个阶段。
图1是本发明实施例执行数据备份的方法流程图,包括如下步骤:
S102,根据业务系统当前的数据块日志表,确定业务系统中数据发生变更的数据块,数据块日志表用于记录业务系统中数据块在数据块日志表最后一次重置后的数据变更状态。
需要说明的是,本说明书实施例的数据块日志表仅需要记录数据块是否发生数据表更即可,并不不需要记录数据块的数据内容。也就是说,在数据块日志表最精简的情况下,仅需要设置两种字段,一种负责记录数据块的索引标识,另一种负责记录数据变更状态,对应的结构可以如下表示所示:
其中,Remain表示未发生数据变更,Changed表示发生数据变更。
S104,从业务系统中获取数据发生变更的数据块的数据内容。
显然,基于数据块日志表可以确定于数据块日志表最后一次重置后各数据块是否发生数据变更。本步骤可以基于数据块日志表中发生数据变更的数据块的索引标识,在业务系统中找到对应的数据内容。应理解,本步骤获取到的发生数据变更的数据块的数据内容属于增量数据。
当然,数据块日志表也可以有选择地记录数据块的数据变更状态。比如,一些数据块在某些条件下进行数据变更后不会对业务系统造成实质性影响,也就是业务系统侧无感知,则数据块日志表可以不进行记录。
即,本发明实施例的业务系统中的至少部分数据块设置有对应的备份执行条件,数据块日志表在至少部分数据块发生数据变更且数据变更满足对应的备份执行条件时,记录至少部分数据块的数据变更状态。
S106,将业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份。
这里,可以采用与所述业务系统完全割裂的存储介质负责存储备份,以分散数据丢失的风险。
S108,在完成备份后,重置数据块日志,以清除对数据发生变更的数据块的记录。
以上表所示的数据块日志为例,重置的意思是将表中各个数据数据块的数据内容块的Status状态恢复为“Remain”。重置后的数据块日志会开始重新统计并记录数据块是否发生数据变更。
显然,基于本发明实施例的数据备份方法,可以以数据块为粒度对业务系统进行周期性的增量变化备份,每次的备份都会绑定时间戳,从而按照时间戳进行匹配。也就是在后续需要将业务系统恢复到某一时刻的数据状态时,通过时间戳找到想对应的备份。
对应地,图2是本发明实施例执行数据备份的方法流程图,包括如下步骤:
S202,响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的业务系统对应目标时间戳的目标数据块日志表。
应理解,本说明书实例方案预先在目标时间戳,按照图1所示方法对业务系统进行备份。
S204,根据目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,第一状态数据块是指目标数据块日志表未记录发生数据变更的数据块,第二状态数据块是指目标数据块日志表记录发生数据变更的数据块。
这里需要说明的,这里目标数据块日志所指示的发生数据变更的数据块和未发生数据变更的数据块是在目标时间戳对应的数据变更状态。在其他时间戳对应的数据块日志表中,第一状态数据块和第二状态数据块可能会发生改变,下文仅以恢复至目标时间戳的数据状态为例对方案进行介绍,因此不需要考虑第一状态数据块和第二状态数据块是否发生变化。
S206,调取第一状态数据块对应目标时间戳前最近一次备份的数据内容以及第二状态数据块对应目标时间戳备份的数据内容,其中,备份的存储介质存储有业务系统所有数据块初始的数据内容。
显然,在目标时间戳对应的时刻,本方案不会对目标数据块日志未指示发生数据变更的第一状态数据块进行备份,因此需要在目标时间戳之前的时间节点,找到第一状态数据块最近一次备份的数据内容。由于备份的存储介质存储有业务系统所有数据块初始的数据内容,因此向目标时间戳之前追溯第一状态数据块的备份不存在查找不到的情况发生。
此外,为了提高调取速度,若目标时间戳为当前最近一次进行备份的时间戳,则表示当前业务系统中的第一状态数据块的数据内容已经是最新版本的,此时可以从业务系统中直接获取第一状态数据块的数据内容进行固化后以作为在目标时间戳前最近一次备份的数据内容,而不是等待负责备份的存储介质向业务系统传输第一状态数据块的数据内容。
应理解,本步骤调取到的第一状态数据块和第二状态数据块的数据内容,即业务系统在目标时间戳的数据内容。
S208,基于调取到的第一状态数据块和第二状态数据块的数据内容,构建业务系统对应目标时间戳的数据块副本,以使业务系统恢复至目标时间戳对应的数据状态。
这里,为了不影响业务系统正常运行,可以在业务系统中创建引渡区,并将调取到的第一状态数据块和第二状态数据块的数据内容添加至引渡区,以在引渡区生成业务系统对应目标时间戳的数据块副本。在数据块副本生成后,禁用将业务系统的数据访问地址更改为引渡区的地址,即可完成线上将业务系统恢复至目标时间戳对应的数据状态。
显然,本发明实施例的方案以数据块为数据管理单位,对业务系统的数据进行划分,并设置数据块日志表负责记录数据块日志表最后一次重置后的数据变更状态。在每次数据备份时,仅需要对当前时刻的数据块日志表以及数据发生变更的数据块进行备份。在数据恢复时,通过数据块日志表可以定位到业务系统中各数据块在期望恢复节点的备份,并一次完成数据恢复,从而缩短了执行时间。此外,若在业务系统创建引渡区完成恢复数据的构建,还可无需业务系统下线,保障了业务系统的连续作业。
下面对本发明实施例的方案进行详细介绍。
本发明实施例针对作业系统(业务系统)设置一个独立的数据管理系统以作为数据备份的存储介质。
其中,数据备份阶段包括:
第一次数据备份:
如图3所示,第一数据备份需要捕获业务系统中所有数据块的数据内容,以对业务系统的初始数据状态留底。
这里,首业务系统及后端的数据管理系统会同步数据块日志表,数据块日志表用于记录业务系统中各数据块在数据块日志表最后一次重置后的数据变更状态。图3所示的数据块日志表(块日志表)包括:
Time Stamp–捕获时间戳,代表着执行数据捕获的:时间点-日期-捕获次数信息。
Data Block——业务系统中各个数据块的标识。
Capture Block——数据块捕获后在数据管理系统中相应的标识;
Status——Data Block在上一次捕获后是否有发生变更:
Remain–无变更;
Changed–有变更。
后续数据备份:
在第一次完整的数据捕获后,生产系统侧一旦存在数据块的更改,则将同步的对块日志表进行更新,日志表将不关注其进行了多少次变化,仅需要将对应数据块的Status更新为Changed。在下一次进行数据捕获时,数据管理系统将根据块日志表的更新,直接精准抓取所有变更的数据块的数据内容,并将其对应的捕获至后端的数据管理系统中:
如图4在第一次完整数据捕获后,业务系统中的O-2块发生了变化,其status状态被标记为了Changed,则在下一次数据捕获时,数据管理系统将优先对块日志表进行同步并读取,在读取时发现O-2的状态为Changed,此时数据管理系统将不关注O2到目前为止经过了多少次变更,仅关注其在本次数据捕获时的即时状态,对其进行精准抓取。
在执行精准抓取之前,数据管理系统将数据块C-2按照时间戳TimeStamp进行时间戳存留,以保留历史数据。图4当前的TimeStamp数值为:00::59:59-2020-09-09-1。
在完成C-2在时间戳00::59:59-2020-09-09-1的存留后,再执行精准抓取,将O-2的内容『111』捕获至对应的C-2中,将其内容由上一次捕获的『101』更改为『111』。
在完成本次数据捕获后,数据管理系统会对当前的数据块日志表按照时间戳00::59:59-2020-09-09-1进行归档保存,之后重置各个数据块的状态置为Remain,并下发给业务系统,由业务系统继续对数据块的变更进行记录。
数据恢复阶段:
数据管理系统接收数据恢复申请后,首先会在业务系统侧创建一个引渡区,同时数据管理系统将根据当前的数据块日志表以及数据变化的数据块的数据内容关联当前时间戳存留。
如图5所示,生产系统向数据管理系统提出数据返还申请时,希望返还到第1次捕获时(时间戳-00:59:59-2020-09-09-1)的数据,数据管理系统将再次同步当前的数据块日志表,发现O-2和O-3均发生了变化。
此时数据管理系统在生产系统上创建引渡区,因为生产系统申请返还的是第1次捕获时的数据,而数据管理系统中的数据是在希望返还到第2次捕获(时间戳-00:59:59-2020-09-10-2)时的数据,因此数据管理系统根据时间戳找到匹配的存留,发现当时仅有C-2有变化,因此数据管理系统会将第1次捕获的C-2和当前(第2次捕获)的C-3返还至引渡区中,并在引渡区中相应的将其更名为O-2和O-3。
同时,如果在数据返还的过程中产生新的访问,O-n需要变化为100,为了不影响生产系统的正常读写操作,将O-n之前的内容001固化写入引渡区,并更新数据块日志表将O-n相应的Status更新为Changed。
由于所有的返还操作(包括历史数据返还,生产数据引渡)都是在引渡区中进行的,因此数据返还的过程并不影响生产系统的正常运行。
如图6所示,在完成数据返还后,需要访问返还申请时间戳的数据时,可以在生产系统中的应用程序中将其访问路径由DataBlock-/datablock/database/data.file更改为引渡区路径:-/deliver/database/data.file。
此外,对应于图1所示的数据备份方法,本发明实施例还提供一种数据备份装置。图7本说明书实施例数据备份装置700的结构示意图,包括:
数据块变更确定模块710,用于根据所述业务系统当前的数据块日志表,确定所述业务系统中数据发生变更的数据块,所述数据块日志表用于记录所述业务系统中数据块在所述数据块日志表最后一次重置后的数据变更状态;
数据块内容获取模块720,用于从所述业务系统中获取数据发生变更的数据块的数据内容;
数据块内容备份模块730,用于将所述业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份;
数据块日志重置模块740,用于在完成备份后,重置所述数据块日志对数据,以清除对数据发生变更的数据块的指示。
可选地,所述业务系统中的至少部分数据块设置有对应的备份执行条件,所述数据块日志表在所述至少部分数据块发生数据变更且数据变更满足对应的备份执行条件时,记录所述至少部分数据块的数据变更状态。
可选地,所述业务系统的数据块日志表和数据块的数据内容的备份存储介质不属于所述业务系统。
显然,本发明实施例数据备份装置可以实现上述图1所示方法的步骤和功能。由于原理相同,本文不再赘述。
此外,对应于图2所示的数据恢复方法,本发明实施例还提供一种数据恢复装置。图8本说明书实施例数据备份装置800的结构示意图,包括:
数据块日志表调取模块810,用于响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的所述业务系统对应所述目标时间戳的目标数据块日志表。
数据块变更确定模块820,用于根据所述目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,所述第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,所述第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块。
数据块内容调取模块830,用于调取第一状态数据块对应所述目标时间戳前最近一次备份的数据内容以及第二状态数据块对应所述目标时间戳备份的数据内容,其中,备份的存储介质存储有所述业务系统所有数据块初始的数据内容。
数据块内容恢复模块840,用于基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态。
可选地,数据块内容恢复模块840具体在所述业务系统创建引渡区;之后,将调取到的第一状态数据块和第二状态数据块的数据内容添加至所述引渡区,以在所述引渡区生成所述业务系统对应所述目标时间戳的数据块副本;并将所述业务系统的数据访问地址更改为所述引渡区的地址,从而使业务系统恢复至所述目标时间戳对应的数据状态。
可选地,所述存储介质不属于所述业务系统,若所述目标时间戳为当前最近一次进行备份的时间戳,所述数据块内容调取模块830从所述业务系统中获取第一状态数据块的数据内容作为在所述目标时间戳前最近一次备份的数据内容;对应地,所述数据块内容恢复模块840将从所述业务系统中获取第一状态数据块的数据内容进行数据固化后添加至所述引渡区。
显然,本发明实施例数据恢复装置可以实现上述图2所示方法的步骤和功能。由于原理相同,本文不再赘述。
图9是本说明书的一个实施例电子设备的结构示意图。请参考图9,在硬件层面,该电子设备包括处理器,可选地还包括内部总线、网络接口、存储器。其中,存储器可能包含内存,例如高速随机存取存储器(Random-Access Memory,RAM),也可能还包括非易失性存储器(non-volatile memory),例如至少1个磁盘存储器等。当然,该电子设备还可能包括其他业务所需要的硬件。
处理器、网络接口和存储器可以通过内部总线相互连接,该内部总线可以是ISA(Industry Standard Architecture,工业标准体系结构)总线、PCI(PeripheralComponent Interconnect,外设部件互连标准)总线或EISA(Extended Industry StandardArchitecture,扩展工业标准结构)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示,图9中仅用一个双向箭头表示,但并不表示仅有一根总线或一种类型的总线。
存储器,用于存放程序。具体地,程序可以包括程序代码,所述程序代码包括计算机操作指令。存储器可以包括内存和非易失性存储器,并向处理器提供指令和数据。
其中,处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行,在逻辑层面上形成数据备份装置。对应地,处理器,执行存储器所存放的程序,并具体用于执行以下操作:
根据所述业务系统当前的数据块日志表,确定所述业务系统中数据发生变更的数据块,所述数据块日志表用于记录所述业务系统中数据块在所述数据块日志表最后一次重置后的数据变更状态。
从所述业务系统中获取数据发生变更的数据块的数据内容。
将所述业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份。
在完成备份后,重置所述数据块日志,以清除对数据发生变更的数据块的记录。
或者,处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行,在逻辑层面上形成数据恢复装置。对应地,处理器,执行存储器所存放的程序,并具体用于执行以下操作:
响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的所述业务系统对应所述目标时间戳的目标数据块日志表;
根据所述目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,所述第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,所述第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块;
调取第一状态数据块对应所述目标时间戳前最近一次备份的数据内容以及第二状态数据块对应所述目标时间戳备份的数据内容,其中,备份的存储介质存储有所述业务系统所有数据块初始的数据内容;
基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态。
上述如本说明书图1所示实施例揭示的数据备份方法或者数据恢复方法可以应用于处理器中,或者由处理器实现。处理器可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器,包括中央处理器(Central ProcessingUnit,CPU)、网络处理器(Network Processor,NP)等;还可以是数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器,处理器读取存储器中的信息,结合其硬件完成上述方法的步骤。
应理解,本发明实施例的电子设备可以使数据备份装置实现图1所示方法中的步骤和功能,或者使数据恢复装置实现图2所示方法中的步骤和功能。由于原理相同,本文不再赘述。
当然,除了软件实现方式之外,本说明书的电子设备并不排除其他实现方式,比如逻辑器件抑或软硬件结合的方式等等,也就是说以下处理流程的执行主体并不限定于各个逻辑单元,也可以是硬件或逻辑器件。
此外,本发明实施例还提出了一种计算机可读存储介质,该计算机可读存储介质存储一个或多个程序,该一个或多个程序包括指令。
其中,上述指令当被包括多个应用程序的便携式电子设备执行时,能够使该便携式电子设备执行图1所示数据备份方法的步骤,包括:
根据所述业务系统当前的数据块日志表,确定所述业务系统中数据发生变更的数据块,所述数据块日志表用于记录所述业务系统中数据块在所述数据块日志表最后一次重置后的数据变更状态。
从所述业务系统中获取数据发生变更的数据块的数据内容。
将所述业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份。
在完成备份后,重置所述数据块日志,以清除对数据发生变更的数据块的记录。
或者,上述指令当被包括多个应用程序的便携式电子设备执行时,能够使该便携式电子设备执行图2所示数据恢复方法的步骤,包括:
响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的所述业务系统对应所述目标时间戳的目标数据块日志表;
根据所述目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,所述第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,所述第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块;
调取第一状态数据块对应所述目标时间戳前最近一次备份的数据内容以及第二状态数据块对应所述目标时间戳备份的数据内容,其中,备份的存储介质存储有所述业务系统所有数据块初始的数据内容;
基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态。
本领域技术人员应明白,本说明书的实施例可提供为方法、系统或计算机程序产品。因此,本说明书可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且,本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
上述对本说明书特定实施例进行了描述。其它实施例在所附权利要求书的范围内。在一些情况下,在权利要求书中记载的动作或步骤可以按照不同于实施例中的顺序来执行并且仍然可以实现期望的结果。另外,在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
以上仅为本说明书的实施例而已,并不用于限制本说明书。对于本领域技术人员来说,本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等,均应包含在本说明书的权利要求范围之内。此外,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本文件的保护范围。
Claims (10)
1.一种数据备份方法,其特征在于,包括:
根据所述业务系统当前的数据块日志表,确定所述业务系统中数据发生变更的数据块,所述数据块日志表用于记录所述业务系统中数据块在所述数据块日志表最后一次重置后的数据变更状态;
从所述业务系统中获取数据发生变更的数据块的数据内容;
将所述业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份;
在完成备份后,重置所述数据块日志,以清除对数据发生变更的数据块的记录。
2.根据权利要求1所述的方法,其特征在于,
所述业务系统中的至少部分数据块设置有对应的备份执行条件,所述数据块日志表在所述至少部分数据块发生数据变更且数据变更满足对应的备份执行条件时,记录所述至少部分数据块的数据变更状态。
3.根据权利要求1所述的方法,其特征在于,
所述业务系统的数据块日志表和数据块的数据内容的备份存储介质不属于所述业务系统。
4.一种数据恢复方法,其特征在于,包括:
响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的所述业务系统对应所述目标时间戳的目标数据块日志表;
根据所述目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,所述第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,所述第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块;
调取第一状态数据块对应所述目标时间戳前最近一次备份的数据内容以及第二状态数据块对应所述目标时间戳备份的数据内容,其中,备份的存储介质存储有所述业务系统所有数据块初始的数据内容;
基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态。
5.根据权利要求4所述的方法,其特征在于,
基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态,包括:
在所述业务系统创建引渡区;
将调取到的第一状态数据块和第二状态数据块的数据内容添加至所述引渡区,以在所述引渡区生成所述业务系统对应所述目标时间戳的数据块副本;
将所述业务系统的数据访问地址更改为所述引渡区的地址,从而使业务系统恢复至所述目标时间戳对应的数据状态。
6.根据权利要求5所述的方法,其特征在于,
所述存储介质不属于所述业务系统,若所述目标时间戳为当前最近一次进行备份的时间戳,则调取在所述目标时间戳前最近一次备份的第一状态数据块的数据内容,包括:
从所述业务系统中获取第一状态数据块的数据内容作为在所述目标时间戳前最近一次备份的数据内容;
将调取到的第一状态数据块的数据内容添加至所述引渡区包括:
将从所述业务系统中获取第一状态数据块的数据内容进行数据固化后添加至所述引渡区。
7.一种数据备份装置,其特征在于,包括:
数据块变更确定模块,用于根据所述业务系统当前的数据块日志表,确定所述业务系统中数据发生变更的数据块,所述数据块日志表用于记录所述业务系统中数据块在所述数据块日志表最后一次重置后的数据变更状态;
数据块内容获取模块,用于从所述业务系统中获取数据发生变更的数据块的数据内容;
数据块内容备份模块,用于将所述业务系统当前的数据块日志表和获取到的数据块的数据内容关联当前的时间戳进行备份;
数据块日志重置模块,用于在完成备份后,重置所述数据块日志对数据,以清除对数据发生变更的数据块的指示。
8.一种数据恢复装置,其特征在于,包括:
数据块日志表调取模块,用于响应将业务系统恢复至目标时间戳对应的数据状态的数据恢复请求,调取之前备份的所述业务系统对应所述目标时间戳的目标数据块日志表;
数据块变更确定模块,用于根据所述目标数据块日志表确定业务系统中的第一状态数据块和第二状态数据块,其中,所述第一状态数据块是指所述目标数据块日志表未记录发生数据变更的数据块,所述第二状态数据块是指所述目标数据块日志表记录发生数据变更的数据块;
数据块内容调取模块,用于调取第一状态数据块对应所述目标时间戳前最近一次备份的数据内容以及第二状态数据块对应所述目标时间戳备份的数据内容,其中,备份的存储介质存储有所述业务系统所有数据块初始的数据内容;
数据块内容恢复模块,用于基于调取到的第一状态数据块和第二状态数据块的数据内容,构建所述业务系统对应所述目标时间戳的数据块副本,以使所述业务系统恢复至所述目标时间戳对应的数据状态。
9.一种电子设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述计算机程序被所述处理器执行如权利1-3中任一项所述的数据备份方法的步骤,或者,执行如权利4-6中任一项所述的数据恢复方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-3中任一项所述的数据备份方法,或者,实现如权利要求4-6中任一项所述的数据恢复方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110444143.1A CN115237669A (zh) | 2021-04-23 | 2021-04-23 | 一种数据备份方法、数据恢复方法、装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110444143.1A CN115237669A (zh) | 2021-04-23 | 2021-04-23 | 一种数据备份方法、数据恢复方法、装置及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115237669A true CN115237669A (zh) | 2022-10-25 |
Family
ID=83666401
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110444143.1A Pending CN115237669A (zh) | 2021-04-23 | 2021-04-23 | 一种数据备份方法、数据恢复方法、装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115237669A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115756968A (zh) * | 2022-12-02 | 2023-03-07 | 龙刚(烟台)科技咨询有限公司 | 基于网络的数据备份方法、系统及云平台 |
-
2021
- 2021-04-23 CN CN202110444143.1A patent/CN115237669A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115756968A (zh) * | 2022-12-02 | 2023-03-07 | 龙刚(烟台)科技咨询有限公司 | 基于网络的数据备份方法、系统及云平台 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109240886B (zh) | 异常处理方法、装置、计算机设备以及存储介质 | |
CN110086666B (zh) | 一种告警方法、装置及系统 | |
CN109710780B (zh) | 一种归档方法及装置 | |
US9037905B2 (en) | Data processing failure recovery method, system and program | |
US10459804B2 (en) | Database rollback using WAL | |
CN109800318B (zh) | 一种归档方法及装置 | |
CN115237669A (zh) | 一种数据备份方法、数据恢复方法、装置及电子设备 | |
CN113987393A (zh) | 一种网页操作记录器、系统、装置及方法 | |
CN106708699B (zh) | 错误信息记录方法及装置 | |
CN111694708A (zh) | 数据查询方法、装置及电子设备、存储介质 | |
CN106649000A (zh) | 实时处理引擎的故障恢复方法及相应的服务器 | |
CN115269519A (zh) | 一种日志检测方法、装置及电子设备 | |
CN115525523A (zh) | 数据处理方法、装置及电子设备、存储介质 | |
CN114239296A (zh) | 一种数据处理方法、装置及电子设备 | |
CN111061719B (zh) | 数据收集方法、装置、设备和存储介质 | |
CN115525662A (zh) | 保障数据一致性的处理方法、装置及相关设备 | |
CN113115069A (zh) | 一种行车记录仪的视频存储方法和系统 | |
CN111290910A (zh) | 日志处理方法、装置、服务器及存储介质 | |
CN113590257B (zh) | 一种基于容器的数据库容灾的方法、系统、设备及介质 | |
CN112052110B (zh) | 一种存储方法及装置 | |
CN117271471A (zh) | 业务数据处理方法、系统、电子设备及存储介质 | |
CN117608912B (zh) | 基于nlp大模型的全自动日志分析和故障处理系统和方法 | |
CN117614818A (zh) | 一种处理客户端问题的方法、装置及电子设备 | |
CN117742295A (zh) | 一种日志记录方法及系统、控制器及存储介质 | |
JPH05197597A (ja) | プログラム組み込み型プロセッサ装置におけるエラーロギング方式 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |