CN107515801A - 一种基于关系型数据库的数据自动修复方法 - Google Patents

一种基于关系型数据库的数据自动修复方法 Download PDF

Info

Publication number
CN107515801A
CN107515801A CN201710821059.0A CN201710821059A CN107515801A CN 107515801 A CN107515801 A CN 107515801A CN 201710821059 A CN201710821059 A CN 201710821059A CN 107515801 A CN107515801 A CN 107515801A
Authority
CN
China
Prior art keywords
backup
data
method based
database
repairing method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710821059.0A
Other languages
English (en)
Inventor
张文军
黄萌
英浩
周宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Green Gold Online Agel Ecommerce Ltd
Original Assignee
Green Gold Online Agel Ecommerce Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Green Gold Online Agel Ecommerce Ltd filed Critical Green Gold Online Agel Ecommerce Ltd
Priority to CN201710821059.0A priority Critical patent/CN107515801A/zh
Publication of CN107515801A publication Critical patent/CN107515801A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G06F11/1451—Management of the data involved in backup or backup restore by selection of backup contents
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1458—Management of the backup or restore process
    • G06F11/1469—Backup restoration techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于关系型数据库的数据自动修复方法，包括全量备份和增量备份，其中全量备份每次转储数据库的全部数据，生成所有数据的备份；而增量备份只转储上次全备份后更新过的数据，生成该部分数据的备份数据库恢复方面。该方法既可以对数据库进行完全恢复，也可以对数据库进行基于某个备份的时间点的不完全恢复，同时还大大缩短了备份时间。

Description

一种基于关系型数据库的数据自动修复方法
技术领域
本发明涉及计算机技术领域，尤其涉及一种基于关系型数据库的数据自动修复方法。
背景技术
随着社会的发展和科技的进步，企业日常工作越来越依赖于数据处理来进行，业务系统的连续性依赖于数据中心的稳定运行。然而，灾难就像灰尘一样伏击在运营环境周围，数据中心可能正在一个充满风险和威胁的环境下运行，一旦数据丢失，就很有可能对企业的日常工作造成严重的影响。如果核心数据丢失，将会使得某些核心功能陷入瘫痪，造成不可估量的损失。因此，为保证业务的连续性，就必须保证数据中心的高可靠性和可用性，就必须拥有有效的数据库备份和恢复技术。常规的数据库备份和恢复技术通常存在如下问题：1、数据量很大时备份、恢复速度较慢；2、不能进行基于时间点的不完全恢复；3、不能针对部分数据库表进行恢复。
发明内容
基于背景技术存在的技术问题，本发明提出一种基于关系型数据库的数据自动修复方法。
一种基于关系型数据库的数据自动修复方法，包括全量备份和增量备份，所述全量备份每次转储数据库的全部数据，生成所有数据的备份；所述增量备份只转储上次全备份后更新过的数据，生成该部分数据的备份。
优选的，所述全备份完成后，软件会立刻校验备份文件的有效性，以保证在灾难发生时可以利用该备份恢复数据库。
优选的，所述全备份和校验过程中会一直记录日志，其中的任意环节出现异常，软件都会终止该次备份，并将日志文件发送到配置好的邮箱。
优选的，所述增量备份是挖掘自上次全备份后的数据库变更日志，从中提取出DML语句以及语句执行的时间戳，并针对每天DML语句生成对应的撤销语句，最后将两种语句分别保存下来，通过这种备份方式，大大缩短了备份时间。
一种基于关系型数据库的数据自动修复方法，其特征在于，方法步骤如下：
S1：首先利用全量备份转储的数据文件替换掉现有的数据文件；
S2：然后启动数据库；
S3：应用增量备份中提取出的DML语句将数据库恢复到想要的时间点。
进一步的，所述S3中既可以对数据库进行完全恢复，也可以对数据库进行基于某个备份的时间点的不完全恢复。
进一步的，所述增量备份中记录了数据库变更的撤销语句，当有数据误操作发生时，可以很快将被误操作的表恢复到误操作之前的状态。
本发明中的有益效果：
本发明提出的一种基于关系型数据库的数据自动修复方法，包括全量备份和增量备份，其中全量备份每次转储数据库的全部数据，生成所有数据的备份；而增量备份只转储上次全备份后更新过的数据，生成该部分数据的备份数据库恢复方面。该方法既可以对数据库进行完全恢复，也可以对数据库进行基于某个备份的时间点的不完全恢复，同时还大大缩短了备份时间。
具体实施方式
下面结合具体实施例对本发明作进一步解说。
实施例1
一种基于关系型数据库的数据自动修复方法，方法步骤如下：
S1：首先利用全量备份转储的数据文件替换掉现有的数据文件；
S2：然后启动数据库；
S3：应用增量备份中提取出的DML语句将数据库恢复到想要的时间点；既可以对数据库进行完全恢复，也可以对数据库进行基于某个备份的时间点的不完全恢复。增量备份中记录了数据库变更的撤销语句，当有数据误操作发生时，可以很快将被误操作的表恢复到误操作之前的状态。
实施例2
下面以linux shell为模板对本实施例进行进一步说明：
以上所述，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (7)

1.一种基于关系型数据库的数据自动修复方法，其特征在于，包括全量备份和增量备份，所述全量备份每次转储数据库的全部数据，生成所有数据的备份；所述增量备份只转储上次全备份后更新过的数据，生成该部分数据的备份。
2.根据权利要求1所述的一种基于关系型数据库的数据自动修复方法，其特征在于，所述全备份完成后，软件会立刻校验备份文件的有效性，以保证在灾难发生时可以利用该备份恢复数据库。
3.根据权利要求2所述的一种基于关系型数据库的数据自动修复方法，其特征在于，所述全备份和校验过程中会一直记录日志，其中的任意环节出现异常，软件都会终止该次备份，并将日志文件发送到配置好的邮箱。
4.根据权利要求1所述的一种基于关系型数据库的数据自动修复方法，其特征在于，所述增量备份是挖掘自上次全备份后的数据库变更日志，从中提取出DML语句以及语句执行的时间戳，并针对每天DML语句生成对应的撤销语句，最后将两种语句分别保存下来。
5.根据权利要求1所述的一种基于关系型数据库的数据自动修复方法，其特征在于，方法步骤如下：
S1：首先利用全量备份转储的数据文件替换掉现有的数据文件；
S2：然后启动数据库；
S3：应用增量备份中提取出的DML语句将数据库恢复到想要的时间点。
6.根据权利要求5所述的一种基于关系型数据库的数据自动修复方法，其特征在于，所述S3中既可以对数据库进行完全恢复，也可以对数据库进行基于某个备份的时间点的不完全恢复。
7.根据权利要求5所述的一种基于关系型数据库的数据自动修复方法，其特征在于，所述增量备份中记录了数据库变更的撤销语句，当有数据误操作发生时，可以很快将被误操作的表恢复到误操作之前的状态。
CN201710821059.0A 2017-09-13 2017-09-13 一种基于关系型数据库的数据自动修复方法 Pending CN107515801A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710821059.0A CN107515801A (zh) 2017-09-13 2017-09-13 一种基于关系型数据库的数据自动修复方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710821059.0A CN107515801A (zh) 2017-09-13 2017-09-13 一种基于关系型数据库的数据自动修复方法

Publications (1)

Publication Number Publication Date
CN107515801A true CN107515801A (zh) 2017-12-26

Family

ID=60725344

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710821059.0A Pending CN107515801A (zh) 2017-09-13 2017-09-13 一种基于关系型数据库的数据自动修复方法

Country Status (1)

Country Link
CN (1) CN107515801A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108459925A (zh) * 2018-02-10 2018-08-28 深圳市先河系统技术有限公司 私有云设备及其数据库的修复方法、具有存储功能的装置
CN108614876A (zh) * 2018-04-26 2018-10-02 武汉斗鱼网络科技有限公司 一种基于Redis数据库的系统和数据处理方法
CN111078465A (zh) * 2019-11-08 2020-04-28 苏州浪潮智能科技有限公司 一种数据恢复方法、装置及计算机可读存储介质
CN111143123A (zh) * 2019-12-12 2020-05-12 广州兴森快捷电路科技有限公司 一种恢复未保存数据的方法及装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104850598A (zh) * 2015-04-28 2015-08-19 江苏瑞中数据股份有限公司 一种实时数据库备份恢复方法
CN105446828A (zh) * 2014-09-30 2016-03-30 北京金山云网络技术有限公司 一种数据库备份、恢复方法、装置及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105446828A (zh) * 2014-09-30 2016-03-30 北京金山云网络技术有限公司 一种数据库备份、恢复方法、装置及系统
CN104850598A (zh) * 2015-04-28 2015-08-19 江苏瑞中数据股份有限公司 一种实时数据库备份恢复方法

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108459925A (zh) * 2018-02-10 2018-08-28 深圳市先河系统技术有限公司 私有云设备及其数据库的修复方法、具有存储功能的装置
CN108459925B (zh) * 2018-02-10 2022-05-31 深圳市先河系统技术有限公司 私有云设备及其数据库的修复方法、具有存储功能的装置
CN108614876A (zh) * 2018-04-26 2018-10-02 武汉斗鱼网络科技有限公司 一种基于Redis数据库的系统和数据处理方法
CN108614876B (zh) * 2018-04-26 2021-02-02 武汉斗鱼网络科技有限公司 一种基于Redis数据库的系统和数据处理方法
CN111078465A (zh) * 2019-11-08 2020-04-28 苏州浪潮智能科技有限公司 一种数据恢复方法、装置及计算机可读存储介质
CN111143123A (zh) * 2019-12-12 2020-05-12 广州兴森快捷电路科技有限公司 一种恢复未保存数据的方法及装置

Similar Documents

Publication Publication Date Title
CN107515801A (zh) 一种基于关系型数据库的数据自动修复方法
US10146640B2 (en) Recovering a volume table and data sets
US9773015B2 (en) Dynamically varying the number of database replicas
US7805631B2 (en) Bare metal recovery from backup media to virtual machine
US7366740B2 (en) Systems and methods for automatic maintenance and repair of enitites in a data model
CN102891849B (zh) 业务数据同步方法、恢复方法及装置和网络设备
US10229152B2 (en) Automatically restoring data replication consistency without service interruption during parallel apply
US20120136827A1 (en) Periodic data replication
JP2005301329A (ja) データベースのためのトランザクション整合性のある変更追跡
CN104794138A (zh) 一种数据库交易结果确认方法、装置及系统
EP3026574B1 (en) Affair processing method and device
US20120041928A1 (en) Mirroring data changes in a database system
US10223205B2 (en) Disaster recovery data sync
CN105376329A (zh) 一种远程在线备份虚拟机的方法
US10613923B2 (en) Recovering log-structured filesystems from physical replicas
WO2017122060A1 (en) Parallel recovery for shared-disk databases
CN105022676B (zh) 一种内存数据库重做日志文件的恢复方法和装置
US20160275134A1 (en) Nosql database data validation
US8843472B2 (en) Recovery of inconsistent data in databases
US8639660B1 (en) Method and apparatus for creating a database replica
US10176240B2 (en) Methods and systems for real-time transactional database transformation
CN103207916A (zh) 元数据处理的方法和装置
CN104375903A (zh) 针对交易流水记录进行异步数据处理的方法和装置
CN104978279A (zh) 一种基于数据块的持续数据保护方法
CN106802842A (zh) 一种基于云平台的操作系统批量备份恢复方法和装置

Legal Events

Date Code Title Description
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20171226

RJ01 Rejection of invention patent application after publication