CN109241001A - 数据处理方法及装置 - Google Patents
数据处理方法及装置 Download PDFInfo
- Publication number
- CN109241001A CN109241001A CN201811002643.4A CN201811002643A CN109241001A CN 109241001 A CN109241001 A CN 109241001A CN 201811002643 A CN201811002643 A CN 201811002643A CN 109241001 A CN109241001 A CN 109241001A
- Authority
- CN
- China
- Prior art keywords
- data
- restored
- backup
- determined
- backup table
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本公开涉及一种数据处理方法及装置,该方法包括接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据;在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳;从所述原表中删除所述目标数据。由此,可以防止数据被误删除,并且能够减少进行了删除操作的原表所占用的存储空间。
Description
技术领域
本公开涉及数据处理技术领域,尤其涉及一种数据处理方法及装置。
背景技术
相关技术中,在需要删除数据库的原表中的目标文件时,修改原表中的用于表示原表中的目标文件是否被删除的标志位,以使目标文件对应的标志位表示目标文件为无效文件。
然而,上述技术并没有真正从原表中删除目标文件,而仅对原表中的目标文件进行了逻辑删除,因此,删除的目标文件仍然存在于原表中,从而无法减少进行了删除操作的原表所占用的存储空间。
发明内容
有鉴于此,本公开提出了一种数据处理方法及装置。
根据本公开的一方面,提供了一种数据处理方法,所述方法包括:
接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据;
在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳;
从所述原表中删除所述目标数据。
根据本公开的另一方面,提供了一种数据处理装置,所述装置包括:
处理模块,用于接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据;
插入模块,用于在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳;以及
删除模块,用于从所述原表中删除所述目标数据。
本公开的实施例提供的技术方案可以包括以下有益效果:在接收到数据删除请求时,将原表中的目标数据和对应的第一时间戳插入与原表对应的备份表中,并且将备份表的信息和对应的第一时间戳插入记录表中,再从原表中删除目标数据,由此,通过将删除的目标数据预先备份到备份表中,可以防止数据被误删除,通过对原表中的目标数据进行物理删除以从原表中真正删除目标数据,使得删除的目标数据存在于备份表而不是原表中,从而能够减少进行了删除操作的原表所占用的存储空间。
根据下面参考附图对示例性实施例的详细说明,本公开的其它特征及方面将变得清楚。
附图说明
包含在说明书中并且构成说明书的一部分的附图与说明书一起示出了本公开的示例性实施例、特征和方面,并且用于解释本公开的原理。
图1是根据一示例性实施例示出的一种数据处理方法的流程图。
图2是根据一示例性实施例示出的一种数据处理方法的流程图。
图3是根据一示例性实施例示出的一种数据处理装置的框图。
图4是根据一示例性实施例示出的一种数据处理装置的框图。
图5是根据一示例性实施例示出的一种数据处理装置的硬件结构框图。
具体实施方式
以下将参考附图详细说明本公开的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面,但是除非特别指出,不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
另外,为了更好的说明本公开,在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解,没有某些具体细节,本公开同样可以实施。在一些实例中,对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述,以便于凸显本公开的主旨。
图1是根据一示例性实施例示出的一种数据处理方法的流程图,该数据处理方法可以应用于运行有数据库的设备,例如计算机主机。如图1所示,该数据处理方法可以包括如下步骤。
在步骤S110中,接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据。
本实施例中,前端可以向运行有数据库的设备发送数据删除请求,相应地,设备可以从前端接收到数据删除请求。设备可以根据接收到的数据删除请求自动开始进行删除处理,而无需用户手动进行删除处理。数据删除请求可以指定设备删除数据库的原表中的数据,由此无需用户手动选择删除数据库中的哪个原表中的哪些数据。数据删除请求所指定的数据为目标数据,目标数据是待删除数据。前端例如为用户操作界面。
在一种实现方式中,运行有数据库的设备可以根据接收到数据删除请求的时间来生成第一时间戳。示例性的,运行有数据库的设备可以将接收到数据删除请求的时间作为第一时间戳、或者可以将接收到数据删除请求的时间与预设值进行运算并将运算结果的绝对值作为第一时间戳。
在步骤S130中,在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳。
本实施例中,运行有数据库的设备可以根据数据删除请求确定出目标数据。原表用于存储写入数据库的数据。示例性的,下述表a为原表的一个示例。
表a
年龄 | 性别 | 班级 | 入学时间 |
12 | 男 | 三(1) | 2010/9/1 |
11 | 男 | 三(1) | 2010/9/1 |
… | … | … | … |
12 | 女 | 三(2) | 2011/9/1 |
示例性的,下述表b为原表的另一个示例。
表b
工号 | 部门 | 入职时间 | 职位 |
01 | 行政部 | 2010/1/1 | 经理 |
12 | 财务部 | 2013/5/1 | 主管 |
… | … | … | … |
112 | 研发部 | 2015/4/1 | 职员 |
为了简化用于恢复从数据库的原表中删除的目标数据的恢复处理,本实施例中,创建了各自与目标数据所处的原表相对应的各备份表。备份表用于存储要从原表中删除的目标数据。对于存在目标数据的原表,均创建与该原表相对应的备份表。本实施例的备份表相比于现有技术,在原表的基础上进一步增加了时间戳字段。因此,备份表除了包括原表的各字段以外,还包括时间戳字段,其中时间戳字段的取值为步骤S110中所生成的第一时间戳。
在一种实现方式中,可以根据原表的名称来命名备份表。示例性的,可以将原表的名称与任意字符进行组合、并将组合后的名称作为备份表的名称。例如,可以根据原表的名称将备份表命名为“原表名_del”。
示例性的,若目标数据为上述表a中的第二行数据,则备份表为下述表a_del。
表a_del
年龄 | 性别 | 班级 | 入学时间 | 时间戳 |
11 | 男 | 三(1) | 2010/9/1 | 2018/8/21 14:21 |
示例性的,若目标数据为上述表b中的最后一行数据,则备份表为下述表b_del。
表b_del
工号 | 部门 | 入职时间 | 职位 | 时间戳 |
112 | 研发部 | 2015/4/1 | 职员 | 2018/8/21 13:01 |
在另一种实现方式中,可以任意命名备份表并且记录原表及其对应的备份表的对应关系。示例性的,若原表的名称为A,则可以将原表A对应的备份表命名为B,并且记录原表A与备份表B相对应。
为了简化用于恢复从数据库的原表中删除的目标数据的恢复处理,本实施例中,还创建了与各备份表相关联的一个记录表。记录表用于存储进行恢复处理时所需的参数,其中该参数包括各备份表的信息和各备份表对应的第一时间戳。在一种可能的实现方式中,备份表的信息例如为备份表的名称,因此,记录表包括表名字段和时间戳字段,其中表名字段的取值为备份表的名称,时间戳字段的取值为步骤S110中所生成的第一时间戳。
示例性的,下述表c为记录表的一个示例。
表c
表名 | 时间戳 |
a_del | 2018/8/21 14:21 |
b_del | 2018/8/21 13:01 |
需要说明的是,原表位于数据库中,备份表和记录表既可以位于数据库中,也可以位于数据库外。
在一种实现方式中,上述步骤S130可以包括:
在接收到所述数据删除请求时,确定是否存在与所述原表对应的备份表;
在确定为存在时,在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳;
在确定为不存在时,创建与所述原表对应的备份表,并在所创建的备份表中插入所述目标数据和对应的所述第一时间戳。
本实施例中,在接收到数据删除请求时,运行有数据库的设备可以根据数据删除请求确定目标数据及目标数据所处的原表,根据目标数据所处的原表在当前存在的所有备份表中查询是否存在与目标数据所处的原表对应的备份表。
在确定为存在与目标数据所处的原表对应的备份表的情况下,运行有数据库的设备直接将目标数据和对应的第一时间戳插入查询到的备份表(即,与目标数据所处的原表对应的备份表)中即可,而无需重新创建与查询到的原表对应的备份表。
与之相对地,在确定为不存在与目标数据所处的原表对应的备份表的情况下,运行有数据库的设备需要创建与目标数据所处的原表对应的备份表,并且将目标数据和对应的第一时间戳插入所创建的备份表中。
在步骤S150中,从所述原表中删除所述目标数据。
本实施例中,由于在步骤S130中已经将目标数据备份到备份表,因此可以对原表中的目标数据进行物理删除。
本实施例的数据处理方法,在接收到数据删除请求时,将原表中的目标数据和对应的第一时间戳插入与原表对应的备份表中,并且将备份表的信息和对应的第一时间戳插入记录表中,再从原表中删除目标数据,由此,通过将删除的目标数据预先备份到备份表中,可以防止数据被误删除,通过对原表中的目标数据进行物理删除以从原表中真正删除目标数据,使得删除的目标数据存在于备份表而不是原表中,从而能够减少进行了删除操作的原表所占用的存储空间。
在一种实现方式中,在步骤S130和步骤S150之间,上述数据处理方法还可以包括:
判断在所述备份表中已插入的所述目标数据与请求删除的所述原表中的目标数据是否一致;
在判断为一致时,从所述原表中删除所述目标数据;
在判断为不一致时,从所述备份表中删除已插入的所述目标数据,并且重新执行在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳的操作。
本实施例中,在将目标数据插入备份表后,将备份表中已插入的目标数据作为一个数据块并且将请求删除的原表中的目标数据作为一个数据块,根据这两个数据块是否一致来确定目标数据是否成功备份到备份表。示例性的,可以通过将上述两个数据块相减并根据差是否为0来确定这两个数据块是否一致。
若这两个数据块一致,则确定为目标数据成功备份到备份表并且执行步骤S150。相反,若这两个数据块不一致,则确定为目标数据没有成功备份到备份表,删除备份表中已插入的目标数据,并且返回执行步骤S130,直至目标数据成功备份到备份表。
由此,能够保证插入备份表中的目标数据与原表中的目标数据的一致性,从而能够保证原表中的目标数据被成功地、完整地备份到备份表中。
图2是根据一示例性实施例示出的一种数据处理方法的流程图,该数据处理方法可以应用于运行有数据库的设备,例如计算机主机。如图2所示,该数据处理方法可以包括如下步骤。
在步骤S210中,接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据。
在步骤S220中,在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳。
在步骤S230中,从所述原表中删除所述目标数据。
关于上述步骤S210-S230的说明具体可以参阅前文关于步骤S110-S150的描述,在此不再赘述。
另外,在步骤S210和S230之间,还可以执行如下步骤:
判断在所述备份表中已插入的所述目标数据与请求删除的所述原表中的目标数据是否一致;
在判断为一致时,从所述原表中删除所述目标数据;
在判断为不一致时,从所述备份表中删除已插入的所述目标数据,并且重新执行在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳的操作。
关于上述步骤的说明具体可以参阅前文的描述,在此不再赘述。
在步骤S240中,接收数据恢复请求。
本实施例中,前端可以向运行有数据库的设备发送数据恢复请求,相应地,设备可以从前端接收到数据恢复请求。设备可以根据接收到的数据恢复请求自动开始进行恢复处理,而无需用户手动进行恢复处理。
在步骤S250中,根据所述数据恢复请求确定待恢复数据。
本实施例中,数据恢复请求可以携带用于确定待恢复数据的相应信息。示例性的,数据恢复请求可以携带时间戳和备份表信息中的任意一项或多项。备份表信息例如为备份表名称、原表及其对应的备份表的对应关系等。可以理解的是,数据恢复请求也可以不携带用于确定待恢复数据的相应信息。
在一种实现方式中,上述步骤S250可以包括:
在所述数据恢复请求没有携带时间戳和备份表信息时,遍历所述记录表中最新的时间戳对应的备份表,将遍历到的备份表中与所述最新的时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳和备份表信息时,将该备份表信息指示的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳并且没有携带备份表信息时,遍历所述记录表中该时间戳对应的备份表,将遍历到的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带备份表信息并且没有携带时间戳时,将该备份表信息指示的备份表中与所述记录表最新的时间戳对应的数据确定为待恢复数据。
本实施例中,在数据恢复请求没有携带时间戳和备份表信息时,默认恢复最新删除的数据,因此遍历记录表中最新的时间戳对应的备份表,将遍历到的备份表中最新的时间戳对应的数据确定为待恢复数据。由此,即使数据恢复请求缺失时间戳和备份表信息,也仅需遍历记录表中最新的时间戳对应的备份表即可,而无需遍历所有的备份表,从而可以提高数据查询效率和数据恢复效率。
在数据恢复请求携带时间戳和备份表信息时,直接根据时间戳和备份表信息来确定待恢复数据,具体地,将备份表信息指示的备份表中与时间戳对应的数据确定为待恢复数据。由此,在数据恢复请求没有缺失时间戳和备份表信息时,可以根据时间戳和备份表信息来快速、精确地确定待恢复数据,从而可以提高数据查询效率和数据恢复的准确性。
在数据恢复请求携带时间戳而没有携带备份表信息时,根据时间戳来确定待恢复数据,具体地,遍历记录表中该时间戳对应的备份表,将遍历到的备份表中与该时间戳对应的数据确定为待恢复数据。由此,即使数据恢复请求缺失备份表信息,也仅需遍历记录表中该时间戳对应的备份表即可,而无需遍历所有的备份表,从而可以提高数据查询效率和数据恢复效率。
在数据恢复请求携带备份表信息而没有携带时间戳时,默认恢复备份表信息指示的备份表中最新删除的数据,因此将备份表信息指示的备份表中与记录表最新的时间戳对应的数据确定为待恢复数据。由此,即使数据恢复请求缺失时间戳,也仅将备份表信息指示的备份表中与记录表最新的时间戳对应的数据确定为待恢复数据,而不是将备份表信息指示的备份表中的所有数据都确定为待恢复数据,从而可以提高数据恢复的准确性。
在步骤S260中,将确定出的待恢复数据恢复至相应的原表中。
在步骤S270中,从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据。
本实施例的数据处理方法,在接收到数据删除请求时,将原表中的目标数据和对应的第一时间戳插入与原表对应的备份表中,并且将备份表的信息和对应的第一时间戳插入记录表中,再从原表中删除目标数据,由此,通过将删除的目标数据预先备份到备份表中,可以防止数据被误删除,通过对原表中的目标数据进行物理删除以从原表中真正删除目标数据,使得删除的目标数据存在于备份表而不是原表中,从而能够减少进行了删除操作的原表所占用的存储空间。
另外,在接收到数据恢复请求时,根据数据恢复请求确定出待恢复数据,将待恢复数据恢复至相应的原表中,并且从待恢复数据所处的备份表中删除待恢复数据,由此,相比于现有技术根据标志位过滤条件从原表中的所有数据中筛选出待恢复数据,本发明实施例根据数据恢复请求从备份表中查询出待恢复数据,由于本发明实施例的备份表中存储的数据量明显少于现有技术中的原表中存储的数据量,因此本发明实施例相比于现有技术不仅能够减少数据查询的复杂度,而且能够提高数据查询的效率,自然能够提高数据恢复的效率。
此外,在对原表中的数据进行多次删除操作时,相比于现有技术由于没有记录删除批次而无法准确恢复某次删除操作所删除的数据,本发明实施例由于记录表和备份表中均存储有时间戳,因此可以根据时间戳准确恢复某次删除操作所删除的数据。
在一种实现方式中,在步骤S260和S270之间,还可以执行以下步骤:
判断已恢复至相应的原表中的数据与所述确定出的待恢复数据是否一致;
在判断为一致时,从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据;
在判断为不一致时,从所述相应的原表中删除已恢复的数据,并且重新执行将确定出的待恢复数据恢复至相应的原表中的操作。
本实施例中,在将待恢复数据恢复到相应的原表后,将原表中已恢复的数据作为一个数据块并且将确定出的待恢复数据作为一个数据块,根据这两个数据块是否一致来确定待恢复数据是否成功恢复到相应的原表。示例性的,可以通过将上述两个数据块相减并根据差是否为0来确定这两个数据块是否一致。
若这两个数据块一致,则确定为待恢复数据成功恢复到相应的原表并且执行步骤S270。相反,若这两个数据块不一致,则确定为待恢复数据没有成功恢复到相应的原表,删除相应的原表中已恢复的数据,并且返回执行步骤S260,直至待恢复数据成功恢复到相应的原表。
由此,能够保证恢复至原表中的数据与备份表中的待恢复数据的一致性,从而能够保证备份表中的待恢复数据被成功地、完整地恢复到原表中。
在一种实现方式中,在步骤S270之后,上述数据处理方法还可以包括:
将所述相应的原表的信息添加到恢复列表中。
本实施例中,恢复列表是一个数组,用于存放已经成功进行了恢复处理的原表对应的信息、例如表名,由此,用户根据恢复列表能够快速地知晓对哪些原表进行了恢复处理。
图3是根据一示例性实施例示出的一种数据处理装置的框图。该数据处理装置可以应用于运行有数据库的设备,例如计算机主机。如图3所示,该数据处理装置300可以包括处理模块310、插入模块320和删除模块330。
处理模块310用于接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据。
插入模块320与处理模块310连接,用于在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳。
删除模块330与插入模块320连接,用于从所述原表中删除所述目标数据。
在一种实现方式中,所述插入模块320被配置为:
在接收到所述数据删除请求时,确定是否存在与所述原表对应的备份表;
在确定为存在时,在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳;
在确定为不存在时,创建与所述原表对应的备份表,并在所创建的备份表中插入所述目标数据和对应的所述第一时间戳。
在一种实现方式中,所述数据处理装置300还可以包括:
判断模块(未示出),用于判断在所述备份表中已插入的所述目标数据与请求删除的所述原表中的目标数据是否一致,
在所述判断模块判断为一致时,所述删除模块从所述原表中删除所述目标数据;
在所述判断模块判断为不一致时,所述删除模块从所述备份表中删除已插入的所述目标数据,并且所述插入模块重新在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳。
图4是根据一示例性实施例示出的一种大数据平台的部署装置的框图。该大数据平台的部署装置可以应用于云端服务器。如图4所示,该大数据平台的部署装置400可以包括处理模块410、插入模块420、删除模块430、接收模块440、确定模块450和恢复模块460。
处理模块410用于接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据。
插入模块420与处理模块410连接,用于在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳。
删除模块430与插入模块420连接,用于从所述原表中删除所述目标数据。
接收模块440用于接收数据恢复请求。
确定模块450与接收模块440连接,用于根据所述数据恢复请求确定待恢复数据;以及
恢复模块460与确定模块450连接,用于将确定出的待恢复数据恢复至相应的原表中。
其中,所述删除模块430从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据。
在一种实现方式中,所述插入模块420被配置为:
在接收到所述数据删除请求时,确定是否存在与所述原表对应的备份表;
在确定为存在时,在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳;
在确定为不存在时,创建与所述原表对应的备份表,并在所创建的备份表中插入所述目标数据和对应的所述第一时间戳。
在一种实现方式中,所述数据处理装置400还可以包括:
判断模块(未示出),用于判断在所述备份表中已插入的所述目标数据与请求删除的所述原表中的目标数据是否一致,
在所述判断模块判断为一致时,所述删除模块从所述原表中删除所述目标数据;
在所述判断模块判断为不一致时,所述删除模块从所述备份表中删除已插入的所述目标数据,并且所述插入模块重新在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳。
在一种实现方式中,所述确定模块450被配置为:
在所述数据恢复请求没有携带时间戳和备份表信息时,遍历所述记录表中最新的时间戳对应的备份表,将遍历到的备份表中与所述最新的时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳和备份表信息时,将该备份表信息指示的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳并且没有携带备份表信息时,遍历所述记录表中该时间戳对应的备份表,将遍历到的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带备份表信息并且没有携带时间戳时,将该备份表信息指示的备份表中与所述记录表最新的时间戳对应的数据确定为待恢复数据。
在一种实现方式中,所述数据处理装置400还可以包括:
判断模块(未示出),用于判断已恢复至相应的原表中的数据与所述确定出的待恢复数据是否一致,
在所述判断模块判断为一致时,所述删除模块从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据;
在所述判断模块判断为不一致时,所述删除模块从所述相应的原表中删除已恢复的数据,并且所述恢复模块重新将确定出的待恢复数据恢复至相应的原表中。
在一种实现方式中,所述数据处理装置400还可以包括:
添加模块(未示出),用于将所述相应的原表的信息添加到恢复列表中。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
图5是根据一示例性实施例示出的一种数据处理装置的硬件结构框图。参照图5,该装置900可包括处理器901、存储有机器可执行指令的机器可读存储介质902。处理器901与机器可读存储介质902可经由系统总线903通信。并且,处理器901通过读取机器可读存储介质902中与数据处理逻辑对应的机器可执行指令以执行上文所述的数据处理方法。
本文中提到的机器可读存储介质902可以是任何电子、磁性、光学或其它物理存储装置,可以包含或存储信息,如可执行指令、数据,等等。例如,机器可读存储介质可以是:RAM(Radom Access Memory,随机存取存储器)、易失存储器、非易失性存储器、闪存、存储驱动器(如硬盘驱动器)、固态硬盘、任何类型的存储盘(如光盘、dvd等),或者类似的存储介质,或者它们的组合。
以上已经描述了本公开的各实施例,上述说明是示例性的,并非穷尽性的,并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下,对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择,旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进,或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。
Claims (14)
1.一种数据处理方法,其特征在于,所述方法包括:
接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据;
在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳;
从所述原表中删除所述目标数据。
2.根据权利要求1所述的方法,其特征在于,在备份表中插入所述目标数据和对应的所述第一时间戳,包括:
在接收到所述数据删除请求时,确定是否存在与所述原表对应的备份表;
在确定为存在时,在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳;
在确定为不存在时,创建与所述原表对应的备份表,并在所创建的备份表中插入所述目标数据和对应的所述第一时间戳。
3.根据权利要求1所述的方法,其特征在于,在从所述原表中删除所述目标数据之前,所述方法还包括:
判断在所述备份表中已插入的所述目标数据与请求删除的所述原表中的目标数据是否一致;
在判断为一致时,从所述原表中删除所述目标数据;
在判断为不一致时,从所述备份表中删除已插入的所述目标数据,并且重新执行在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳的操作。
4.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收数据恢复请求;
根据所述数据恢复请求确定待恢复数据;
将确定出的待恢复数据恢复至相应的原表中;
从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据。
5.根据权利要求4所述的方法,其特征在于,根据所述数据恢复请求确定待恢复数据,包括:
在所述数据恢复请求没有携带时间戳和备份表信息时,遍历所述记录表中最新的时间戳对应的备份表,将遍历到的备份表中与所述最新的时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳和备份表信息时,将该备份表信息指示的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳并且没有携带备份表信息时,遍历所述记录表中该时间戳对应的备份表,将遍历到的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带备份表信息并且没有携带时间戳时,将该备份表信息指示的备份表中与所述记录表最新的时间戳对应的数据确定为待恢复数据。
6.根据权利要求4所述的方法,其特征在于,在从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据之前,所述方法还包括:
判断已恢复至相应的原表中的数据与所述确定出的待恢复数据是否一致;
在判断为一致时,从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据;
在判断为不一致时,从所述相应的原表中删除已恢复的数据,并且重新执行将确定出的待恢复数据恢复至相应的原表中的操作。
7.根据权利要求4所述的方法,其特征在于,在从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据之后,所述方法还包括:
将所述相应的原表的信息添加到恢复列表中。
8.一种数据处理装置,其特征在于,所述装置包括:
处理模块,用于接收数据删除请求并生成第一时间戳,所述数据删除请求用于请求删除数据库的原表中的目标数据;
插入模块,用于在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳,并且在记录表中插入所述备份表的信息和对应的所述第一时间戳;以及
删除模块,用于从所述原表中删除所述目标数据。
9.根据权利要求8所述的装置,其特征在于,所述插入模块被配置为:
在接收到所述数据删除请求时,确定是否存在与所述原表对应的备份表;
在确定为存在时,在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳;
在确定为不存在时,创建与所述原表对应的备份表,并在所创建的备份表中插入所述目标数据和对应的所述第一时间戳。
10.根据权利要求8所述的装置,其特征在于,所述装置还包括:
判断模块,用于判断在所述备份表中已插入的所述目标数据与请求删除的所述原表中的目标数据是否一致,
在所述判断模块判断为一致时,所述删除模块从所述原表中删除所述目标数据;
在所述判断模块判断为不一致时,所述删除模块从所述备份表中删除已插入的所述目标数据,并且所述插入模块重新在与所述原表对应的备份表中插入所述目标数据和对应的所述第一时间戳。
11.根据权利要求8所述的装置,其特征在于,所述装置还包括:
接收模块,用于接收数据恢复请求;
确定模块,用于根据所述数据恢复请求确定待恢复数据;以及
恢复模块,用于将确定出的待恢复数据恢复至相应的原表中,
其中,所述删除模块从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据。
12.根据权利要求11所述的装置,其特征在于,所述确定模块被配置为:
在所述数据恢复请求没有携带时间戳和备份表信息时,遍历所述记录表中最新的时间戳对应的备份表,将遍历到的备份表中与所述最新的时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳和备份表信息时,将该备份表信息指示的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带时间戳并且没有携带备份表信息时,遍历所述记录表中该时间戳对应的备份表,将遍历到的备份表中与该时间戳对应的数据确定为待恢复数据;
在所述数据恢复请求携带备份表信息并且没有携带时间戳时,将该备份表信息指示的备份表中与所述记录表最新的时间戳对应的数据确定为待恢复数据。
13.根据权利要求11所述的装置,其特征在于,所述装置还包括:
判断模块,用于判断已恢复至相应的原表中的数据与所述确定出的待恢复数据是否一致,
在所述判断模块判断为一致时,所述删除模块从所述确定出的待恢复数据所处的备份表中删除所述确定出的待恢复数据;
在所述判断模块判断为不一致时,所述删除模块从所述相应的原表中删除已恢复的数据,并且所述恢复模块重新将确定出的待恢复数据恢复至相应的原表中。
14.根据权利要求11所述的装置,其特征在于,所述装置还包括:
添加模块,用于将所述相应的原表的信息添加到恢复列表中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811002643.4A CN109241001A (zh) | 2018-08-30 | 2018-08-30 | 数据处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811002643.4A CN109241001A (zh) | 2018-08-30 | 2018-08-30 | 数据处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109241001A true CN109241001A (zh) | 2019-01-18 |
Family
ID=65069911
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811002643.4A Pending CN109241001A (zh) | 2018-08-30 | 2018-08-30 | 数据处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109241001A (zh) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101370212A (zh) * | 2008-09-22 | 2009-02-18 | 深圳华为通信技术有限公司 | 数据处理的方法和装置 |
CN102096614A (zh) * | 2011-01-24 | 2011-06-15 | 上海银杏界信息科技有限公司 | 应用系统的数据还原方法 |
CN103473296A (zh) * | 2013-09-04 | 2013-12-25 | 国云科技股份有限公司 | 一种适用于云计算的回收站机制及其系统 |
CN105653402A (zh) * | 2016-01-12 | 2016-06-08 | 浪潮(北京)电子信息产业有限公司 | 一种ssd以及用于ssd的数据恢复方法 |
US20170344442A1 (en) * | 2012-12-21 | 2017-11-30 | Commvault Systems, Inc. | Systems and methods to detect deleted files |
CN108228100A (zh) * | 2017-12-27 | 2018-06-29 | 郑州云海信息技术有限公司 | 一种基于海量存储系统的数据安全处理方法和系统 |
-
2018
- 2018-08-30 CN CN201811002643.4A patent/CN109241001A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101370212A (zh) * | 2008-09-22 | 2009-02-18 | 深圳华为通信技术有限公司 | 数据处理的方法和装置 |
CN102096614A (zh) * | 2011-01-24 | 2011-06-15 | 上海银杏界信息科技有限公司 | 应用系统的数据还原方法 |
US20170344442A1 (en) * | 2012-12-21 | 2017-11-30 | Commvault Systems, Inc. | Systems and methods to detect deleted files |
CN103473296A (zh) * | 2013-09-04 | 2013-12-25 | 国云科技股份有限公司 | 一种适用于云计算的回收站机制及其系统 |
CN105653402A (zh) * | 2016-01-12 | 2016-06-08 | 浪潮(北京)电子信息产业有限公司 | 一种ssd以及用于ssd的数据恢复方法 |
CN108228100A (zh) * | 2017-12-27 | 2018-06-29 | 郑州云海信息技术有限公司 | 一种基于海量存储系统的数据安全处理方法和系统 |
Non-Patent Citations (1)
Title |
---|
万冬: "《数字程控交换技术与应用》", 31 January 2013 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9251231B2 (en) | Merging an out of synchronization indicator and a change recording indicator in response to a failure in consistency group formation | |
US9183268B2 (en) | Partition level backup and restore of a massively parallel processing database | |
JP4304194B2 (ja) | ファイルシステム管理装置及び方法 | |
EP3185125A1 (en) | Data backup method, system, node and computer storage media | |
CN109669622B (zh) | 一种文件管理方法、文件管理装置、电子设备及存储介质 | |
CN110888837B (zh) | 对象存储小文件归并方法及装置 | |
CN109213817A (zh) | 增量数据抽取方法、装置及服务器 | |
CN115562905A (zh) | 一种备份方法、系统、装置及计算机可读存储介质 | |
CN109271097B (zh) | 数据处理方法、数据处理装置和服务器 | |
EP2372552B1 (en) | Automated relocation of in-use multi-site protected data storage | |
CN103092955B (zh) | 检查点操作方法、装置及系统 | |
CN111400248B (zh) | 写数据、恢复数据的方法及文件系统 | |
CN109241001A (zh) | 数据处理方法及装置 | |
CN114138756A (zh) | 数据去重方法、节点及计算机可读存储介质 | |
CN109669623B (zh) | 一种文件管理方法、文件管理装置、电子设备及存储介质 | |
CN107704208B (zh) | 一种元数据的修复方法、装置及介质 | |
CN114442944B (zh) | 一种数据复制方法、系统及设备 | |
CN106354830B (zh) | 一种数据库集群节点间数据同步的方法及装置 | |
CN111753141A (zh) | 一种数据管理方法及相关设备 | |
KR101797482B1 (ko) | 데이터베이스 시스템에서 블록 복구 방법, 장치 및 컴퓨터 판독가능 매체에 저장된 컴퓨터-프로그램 | |
CN115421856A (zh) | 一种数据恢复方法及装置 | |
CN108459925A (zh) | 私有云设备及其数据库的修复方法、具有存储功能的装置 | |
CN111444114B (zh) | 一种非易失性内存中数据的处理方法、装置及系统 | |
CN110874182B (zh) | 一种条带索引的处理方法、装置及设备 | |
CN111124306A (zh) | 一种数据删除方法、系统、设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190118 |