CN105550073A - 数据库备份方法及其系统 - Google Patents
数据库备份方法及其系统 Download PDFInfo
- Publication number
- CN105550073A CN105550073A CN201610137368.1A CN201610137368A CN105550073A CN 105550073 A CN105550073 A CN 105550073A CN 201610137368 A CN201610137368 A CN 201610137368A CN 105550073 A CN105550073 A CN 105550073A
- Authority
- CN
- China
- Prior art keywords
- backup
- database
- information
- subsystem
- remote
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1448—Management of the data involved in backup or backup restore
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/80—Database-specific techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Quality & Reliability (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及一种数据库备份方法及其系统。所述方法包括:备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划;数据库备份子系统根据所述备份计划对所述数据库进行自动备份,记录每次的备份执行信息并存储到备份信息中心子系统;备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示。通过本发明,能够提高数据库备份的实时性和可靠性,并且便于对大批量分布式数据库的备份进行统一管理。
Description
技术领域
本发明涉及数据库技术领域,特别是涉及数据库备份方法和数据库备份系统。
背景技术
数据库数据是一个系统应用的核心。生产线上的数据库通常面临着各种各样的风险威胁:数据库主机(数据库所在主机)硬盘损坏,使物理数据丢失;数据库主机受恶意攻击,数据存在安全隐患;数据库管理员人为的误操作等等。如果生产线上各个数据库没有进行实时备份,或者备份失败,那么将难以进行数据恢复。目前的数据库备份机制主要存在以下的不足:
数据库备份需要人为干预,人工成本高,数据库备份的实时性较差;
没有考虑生成的备份数据的完备性,导致存在大量不可用的备份数据,浪费存储空间,数据库恢复难以实现;
对大批量分布式的数据库缺乏统一规范化的备份管理。
发明内容
本发明提供一种数据库备份方法及其系统,能够提高数据库备份的实时性和可靠性,并且便于对大批量分布式数据库的备份进行统一管理。
本发明一方面提供数据库备份方法,包括:
备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划;
数据库备份子系统根据所述备份计划对所述数据库进行自动备份,记录每次的备份执行信息并存储到备份信息中心子系统;
备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示。
本发明另一方面提供数据库备份系统,其特征在于,包括:
备份信息中心子系统,用于备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划;
数据库备份子系统,用于数据库备份子系统根据所述备份计划对所述数据库进行自动备份,并将每次的备份执行信息存储到备份信息中心子系统;
备份检测子系统,用于备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示。
上述技术方案的数据库备份方法及其系统,通过备份信息中心子系统接收数据库管理员对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划;数据库备份子系统根据所述备份计划对所述数据库进行自动备份,记录每次的备份执行信息并存储到备份信息中心子系统;备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示,以使数据库管理员及时排查原因。通过本发明的上述方案,能够提高数据库备份的实时性和可靠性,并且便于对大批量分布式数据库的备份进行统一管理。
附图说明
图1为一实施例的数据库备份方法的示意性流程图;
图2为一实施例的数据库备份方法的实现系统的框架图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供的实施例包括数据库备份方法实施例,还包括相应的数据库备份系统实施例。以下分别进行详细说明。
图1为一实施例的数据库备份方法的示意性流程图;如图1所示,本实施例的数据库备份方法包括如下步骤S1至S3,各步骤详述如下:
S1,备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划。
本实施例中,备份信息中心子系统包括备份管理模块,数据库管理员可通过备份管理模块GUI(人机交互界面)设置各数据库的备份部署信息,例如设置数据库的备份模式、备份方式、备份目录、备份时间等。所述备份方式包括本地备份和远程备份,所述备份模式指的是全量备份或增量备份。备份信息中心子系统接收数据库管理员对数据库的备份部署信息,可通过运行预先设定的后台脚本为不同数据库生成对应的备份部署脚本和参数配置文件。
优选的,通过备份信息中心子系统对数据库进行备份部署的实现过程包括:
备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,与所述数据库主机进行双向身份验证;备份信息中心子系统向对应的数据库主机发送远程连接请求,数据库主机收到请求后,验证备份信息中心子系统的主机身份;双方验证身份无误后,数据库主机响应所述请求,执行备份信息中心子系统发送过来的部署命令(包括备份部署脚本和相应的参数配置文件)。若双向身份验证通过,备份信息中心子系统读取所述数据库主机的系统定时任务,根据所述系统定时任务确定所述数据库的备份时间,以避开所述数据库主机的系统负载高峰时段对数据库进行备份;可使数据库所在主机负载更均匀,避免因为数据库备份而使系统整体性能下降。备份信息中心子系统还可根据对所述数据库的备份部署信息,修改所述数据库主机的系统定时任务。
若备份信息中心子系统接收到本地备份的部署信息,所述备份信息中心子系统还获取所述数据库主机的系统分区及分区大小,根据所述系统分区及分区大小部署所述数据库的备份目录。若备份信息中心子系统接收到远程备份的部署信息,所述备份信息中心子系统读取远程备份机器列表,获取各远程备份机器的系统信息(包括操作系统信息、内存大小、CPU核数、磁盘大小及使用量等,以及目前已使用该机器作为远程备份主机的数据库),根据各远程备份机器的系统信息部署所述数据库的远程备份主机;并配置远程备份主机中适当的备份目录及数据传输带宽,以将数据库备份得到的备份文件压缩并传输至所述目标远程备份主机的指定目录上。
优选的,数据库主机根据备份部署信息部署本机数据库的备份计划,部署完毕后,还向备份信息中心子系统发送备份计划部署完毕的确认信息。
此外,通过备份信息中心子系统对所述数据库远程备份部署完成后。还可通过备份信息中心子系统的备份管理模块对已部署的数据库的备份部署信息进行修改或删除,具体包括:接收部署信息查询指令,获取所述数据库的备份部署信息;以及,接收部署信息编辑操作指令,对所述数据库的备份配置信息进行修改或删除。
需要说明的是,一台数据库主机可能会有两个以上数据库,备份信息中心子系统将需要备份的数据库列表信息写入配置文件中,通过读取此配置文件确定需要备份的数据库。
需要说明的是,本发明对备份信息中心子系统与数据库主机之间的身份验证的具体方式不作限定,例如:可通过密码验证、IP地址验证或者其他消息验证等方式实现。
S2,数据库备份子系统根据所述备份计划对所述数据库进行自动备份,记录每次的备份执行信息并存储到备份信息中心子系统;
本实施例中,数据库主机根据所述备份计划启动对应的定时器,数据库的备份时间到来时,对所述数据库进行自动备份,若为本地备份,则将得到的备份文件存储到本地;若为远程备份,则将得到的备份文件存储到对应的远程备份主机。同时,还记录每次的备份执行信息,并写入到数据库备份子系统进行存储。
其中,若为远程备份,当所述数据库的备份时间到来时,数据库备份子系统向所述远程备份主机发送远程备份请求;远程备份主机检查当前要进行备份的数据库是否存在于自己的备份列表中,若是,响应所述远程备份请求;数据库备份子系统收到所述响应后,将生成的备份文件传输至所述远程备份主机。
对应的,备份信息中心子系统接收对数据库的备份部署信息,若所述备份部署信息中包括远程备份的部署信息,所述备份信息中心子系统还向对应的远程备份主机发送请求,以将所述数据库添加到所述远程备份主机的备份列表中。
实际操作时,由于各种原因,数据库主机可能在前一次数据库备份没有执行完毕,新一轮的备份时间又到来。由于多个备份进程同时执行会加大系统负担,因此作为一优选实施方式,所述数据库的备份时间到来时,先检测数据库主机系统当前是否有备份正在进行;若有,暂停执行所述数据库的备份,间隔设定时间后重试;若重试次数达到设定次数,退出所述数据库的备份,并将所述数据库的本次备份执行状态标记为执行失败或者未执行或者跳过,将所述本次备份执行状态写入备份信息中心子系统。
作为一优选实施方式,每次备份进程退出后,数据库备份子系统还通过检查对应的备份日志文件判断当前备份是否成功,若备份日志文件显示本次备份执行失败,此时数据库备份子系统会自动进行重试,重新对所述数据库进行备份。数据库备份子系统会一直重试直到备份执行成功、或重试次数达到设定阈值,退出本轮备份。优选的,备份失败重试次数默认为3次,重试前先删除前一次备份失败的备份文件,而备份日志文件则保留。该重试机制很好地解决因为偶然的原因而导致的备份失败。
无论备份是否执行成功,数据库备份子系统都会将每次备份执行的相关信息(即每次的备份执行信息)写入到备份信息中心,所写入的信息包括:备份开始时间、备份结束时间、主机IP、数据库端口、备份文件信息、备份模式、备份执行状态、备份数据大小等。
需要说明的是,以上两种重试机制可以通过脚本代码实现。并且,确定备份执行失败或者被跳过时,数据库备份子系统会立刻发出相关告警信息,通知数据库管理员及时进行排查。
S3,备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示。
本实施例中,除了每次备份进程退出后,由数据库备份子系统通过检查对应的备份日志文件判断当前备份是否成功之外,备份检测子系统还会定期扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功;若发现设定时间内的某次备份执行失败,则输出相关告警,通知数据库管理员及时对备份失败原因进行排查。
具体的,本实施例中,数据库每天会进行一次或多次备份,因此本实施例中备份检测子系统每天会定时对备份信息中心子系统的备份执行信息进行检测。备份检测子系统通过扫描存储的备份执行信息列表,将24小时内备份执行状态为失败或被跳过的数据库告警,通知相关的数据库管理员进行排查。同时,备份检测子系统还会检测24小时内没有按备份计划进行备份的数据库,并通知相关数据库管理员,即备份检测子系统定期扫描备份信息中心子系统存储的备份执行信息,若没有找到与所述数据库备份计划匹配的备份执行信息,确定为所述数据库未按计划执行备份,输出告警提示。
如上所述,数据库备份文件即便是通过备份进程执行成功得到的,也不等于该份备份文件就是有效备份数据。因此,除上述所述之外,作为另一优选实施方式,本发明还通过自动对备份文件进行恢复检测,通过备份文件还原数据库实例的情况来检验相应备份文件是否有效。实现方式可为:备份检测子系统还定期对得到的备份文件进行恢复检测,若所述备份文件到数据库实例的恢复失败,确定所述备份文件为不可用,输出告警提示。
优选的,备份检测子系统对所述备份文件进行恢复检测的具体实现过程可包括:
定期读取备份信息中心子系统存储的备份执行信息列表,根据备份执行信息获取所述备份文件的存储位置,从该存储位置中读取相应时间段内(例如最近24小时)的备份文件;优选的,本实施例仅获取数据库最后一次备份执行成功所得的备份文件;
备份检测子系统将相应的备份文件远程拷贝到备份恢复检测主机上。若远程拷贝失败,将传输日志写入日志文件,并发出告警,通知相关的管理人员。若果数据文件比较大,远程拷贝过程中会对网络IO、CPU、内存等都会造成影响。因此,备份检测子系统对远程拷贝备份文件的速率进行限制,对不同大小的备份文件,采用不同的传输速率。
远程拷贝成功后,对所述备份文件进行解压;若解压失败,确定为所述备份文件到数据库实例的恢复失败;若解压成功,通过备份软件对解压后的备份数据进行补齐,生成数据库实例的数据目录;用所述数据目录作为数据库的数据目录启动数据库实例,若启动失败,确定为所述备份文件到数据库实例的恢复失败;
数据库实例启动成功,并不意味着备份文件成功恢复。本实施例中,若数据库启动成功,还对所述数据库实例进行数据读操作。判断所述数据库实例的数据读操作是否正常,若否,确定为所述备份文件到数据库实例的恢复失败;若是,确定为所述备份文件到数据库实例的恢复成功。本实施例通过分析与业务相关的主要数据库中的数据表的读操作,来检验恢复是否成功。
通过以上几个步骤将数据库的备份文件恢复并还原成一个数据库实例。若其中任一步骤执行失败,则可以认为备份文件恢复检测失败,并立刻向相关的数据库管理员发出告警,通知其排查原因。需要说明的是,恢复检测过程中,还生成对应的备份恢复日志,并将备份恢复日志存储到备份信息中心子系统。
基于上述实施例的数据库备份方法,当数据库出现故障,比如数据库管理员误删数据。可以通过备份信息中心子系统的备份恢复模块,根据原数据库主机IP及数据库端口向备份信息存储模块获取最近一次备份成功、且不在备份恢复检测失败列表的备份文件,将该备份文件传输至相关的恢复目标主机上。备份恢复模块可通过ssh等协议远程控制恢复目标主机,执行相应的脚本与命令对误删的数据库进行恢复。
本实施例所描述数据库可为MySQL实例,运行于Linux主机上,MySQL数据库的备份模式主要有全量备份与增量备份;备份工具可为xtabackup、mysqldump或者自主研发的相关脚本工具等;备份文件的压缩模式有tar、xb等。备份文件的传输可以通过Linux的scp等命令实现,Linux主机可以用ps命令查看当前系统进程信息。如前所述,若发现数据库主机有备份进程正在进行备份,则可执行sleep命令暂停数据库的备份执行。如果有数据表数据有问题,MySQL会有错误日志输出,数据库实例也很有可能运行异常,因此在对各表数据进行读操作的过程中,通过观察MySQL错误日志及运行情况,可以得出还原的数据库是否正常。
通过本实施例的数据库备份方法,提高了数据库备份的实时性和可靠性,并且便于对大批量分布式数据库的备份进行统一管理。
图2为另一实施例的数据库备份方法的实现系统的框架图。如图2所示,本实施例的数据库备份方法的实现系统框架主要分为3个子系统:数据库备份子系统、备份信息中心子系统以及数据备份检测子系统。其中,数据库备份子系统按备份计划对生产系统各数据库进行自动备份,备份过程中不需要人为干预;备份信息中心子系统通过GUI,高效地管理各数据库的备份,包括对各数据库进行备份计划的部署,查看各数据库的备份执行信息;以及出现故障时,通过备份文件迅速恢复数据库;备份恢复检测子系统用于检测各数据库的备份执行情况以及备份文件的可用情况。
数据库备份子系统分两大模块:本地备份模块与远程备份模块。本地备份模块对数据库数据进行本地备份,将得到的备份文件保存于数据库所在主机的本地磁盘上。远程备份模块通过网络将得到的备份文件保存至远程备份主机上。远程备份与本地备份相比,好处在于,可以避免因为数据库主机存储介质处于不可用(主机物理硬件损毁等)时,造成的数据丢失。
备份信息中心子系统分四大模块:备份管理模块、恢复管理模块、备份信息存储模块、质量管理分析模块。备份管理模块用于对数据库进行备份部署、查看各数据库的备份计划信息、修改或删除备份计划等。数据库管理员可以通过友好GUI对各数据库进行备份部署,也可以查看各数据库实例系统的相关备份信息,包括数据库资产信息、备份计划,及各数据库每次备份执行信息等。恢复管理模块通过友好GUI,在数据库出现故障时,高效、迅速地通过备份文件恢复相应数据库,减少故障时间。所有的备份相关信息都存储于备份信息存储模块。质量管理分析模块统计并分析各数据库的备份情况,通过分析备份信息存储模块中各数据库的备份执行信息和备份文件的恢复检测信息,得出各数据库的备份质量。质量管理分析模块的具体分析任务包括:各数据库一段时间内的备份成功率、各数据库的备份文件的恢复成功率、备份失败的数据库主机系统的平均负载、通过存储于备份信息存储模块的相关的日志文件信息,分析备份失败常见原因等。基于分析得出相关备份质量的具体分数,并通过设立备份质量改进模块,以便对数据库备份质量的提高。
备份检测子系统负责对各数据库的备份执行信息及备份文件进行检测。包括:定期检查每次备份是否成功执行;定期检测各数据库是否都有按备份计划执行备份;以及定期对数据库的备份文件进行恢复检测,检测备份文件是否可用。对备份失败的数据库实例、或者不可用的备份文件进行告警,通知相关数据库管理员进行排查。
本实施例中,上述各模块主机通信前,还包括对对方身份进行确认的步骤,防止不法者伪装成各模块上的某一机器,实施对数据库主机的攻击。各主机之间通过ssh等相关协议进行通信,由备份管理模块远程控制生产数据库的备份部署、修改、查看与删除。
需要说明的是,对于前述的方法实施例,为了简便描述,将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其它顺序或者同时进行。
本发明还提供了一种的数据库备份系统的实施例,该实施例中数据库备份系统包括:备份信息中心子系统、数据库备份子系统以及数据库备份子系统,各部分详述如下:
上述备份信息中心子系统,用于备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划;
本实施例中所述备份部署信息包括:备份方式和备份时间,所述备份方式包括本地备份和远程备份。
上述数据库备份子系统,用于数据库备份子系统根据所述备份计划对所述数据库进行自动备份,记录每次的备份执行信息并存储到备份信息中心子系统;
本实施中,所述备份执行信息包括:备份开始时间、备份结束时间、数据库主机IP、数据库端口、备份文件信息、备份方式以及备份执行状态。
上述备份检测子系统,用于备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示。
作为一优选实施方式,上述备份信息中心子系统还用于,在接收对数据库的备份部署信息之后,若所述备份部署信息中包括远程备份的部署信息,备份信息中心子系统向对应的远程备份主机发送请求,以将所述数据库添加到所述远程备份主机的备份列表中。
对应的,上述数据库备份子系统可具体用于,当所述数据库的备份时间到来时,若为远程备份,数据库备份子系统向对应的远程备份主机发送远程备份请求;远程备份主机检查当前要进行备份的数据库是否存在于自己的备份列表中,若是,响应所述远程备份请求;数据库备份子系统收到所述响应后,将生成的备份文件传输至所述远程备份主机;若为本地备份,将得到的备份文件存储到数据库主机本地。
优选的,上述数据库备份子系统还用于,所述数据库的备份时间到来时,检测数据库主机系统当前是否有备份正在进行;若有,暂停执行所述数据库的备份,间隔设定时间后重试;若重试次数达到设定次数,退出所述数据库的备份。
优选的,上述备份检测子系统还用于,定期对备份得到的备份文件进行恢复检测,若所述备份文件到数据库实例的恢复失败,确定所述备份文件为不可用,输出告警提示。备份检测子系统具体可包括恢复检测单元,用于根据备份执行信息获取备份得到的备份文件的存储位置,从该存储位置中读取对应的备份文件;对所述备份文件进行解压;若解压失败,确定为所述备份文件到数据库实例的恢复失败;若解压成功,通过备份软件对解压后的备份数据进行补齐,生成数据库实例的数据目录;用所述数据目录启动数据库实例,若启动失败,确定为所述备份文件到数据库实例的恢复失败;若启动成功,对所述数据库实例中数据进行读操作;判断所述读操作是否正常,若否,确定为所述备份文件到数据库实例的恢复失败;若是,确定为所述备份文件到数据库实例的恢复成功。
作为一优选实施方式,备份信息中心子系统还用于,接收用户对数据库的备份部署信息,远程连接对应的数据库主机,与所述数据库主机进行双向身份验证;若双向身份验证通过,根据对所述数据库的备份部署信息,修改所述数据库主机的系统定时任务;以及用于,若接收到本地备份的部署信息,获取所述数据库主机的系统分区及分区大小,根据所述系统分区及分区大小确定数据库备份目录;若接收到远程备份的部署信息,读取远程备份机器列表,获取各远程备份机器的系统信息,根据各远程备份机器的系统信息选择所述数据库的远程备份主机。
作为一优选实施方式,所述备份检测子系统还用于,定期扫描存储的备份执行信息,若没有找到与所述数据库备份计划匹配的备份执行信息,确定所述数据库未按计划执行备份,输出告警提示。
作为一优选实施方式,备份信息中心子系统还用于,接收部署信息查询指令,获取所述数据库的备份部署信息;以及,接收部署信息编辑操作指令,对所述数据库的备份配置信息进行修改或删除。
需要说明的是,上述示例的数据库备份系统的实施方式中,各子系统之间的信息交互、执行过程等内容,由于与本发明前述方法实施例基于同一构思,其带来的技术效果与本发明前述方法实施例相同,具体内容可参见本发明方法实施例中的叙述,此处不再赘述。
此外,上述示例的数据库备份系统的实施方式中,各子系统的逻辑划分仅是举例说明,实际应用中可以根据需要,例如出于相应硬件的配置要求或者软件的实现的便利考虑,将上述功能分配由不同的子系统完成,即将所述数据库备份系统的划分成不同的子系统,以完成以上描述的全部或者部分功能。
另外,上述示例的数据库备份系统的实施方式中,各子系统可以集成在一个处理模块中,也可以是分布式存在,也可以两个或两个以上子系统集成在一个子系统中。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其它实施例的相关描述。
以上所述实施例仅表达了本发明的几种实施方式,不能理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.数据库备份方法,其特征在于,包括:
备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划;
数据库备份子系统根据所述备份计划对所述数据库进行自动备份,记录每次的备份执行信息并存储到备份信息中心子系统;
备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示。
2.根据权利要求1所述的数据库备份方法,其特征在于,所述备份部署信息包括:备份方式和备份时间,所述备份方式包括本地备份和远程备份;
所述备份执行信息包括:备份开始时间、备份结束时间、数据库主机IP、数据库端口、备份文件信息、备份方式以及备份执行状态。
3.根据权利要求2所述的数据库备份方法,其特征在于,备份信息中心子系统接收对数据库的备份部署信息,之后还包括:
若所述备份部署信息中包括远程备份的部署信息,备份信息中心子系统向对应的远程备份主机发送请求,以将所述数据库添加到所述远程备份主机的备份列表中;
数据库备份子系统根据所述备份计划对所述数据库进行自动备份,包括:
当所述数据库的备份时间到来时,若为远程备份,数据库备份子系统向对应的远程备份主机发送远程备份请求;远程备份主机检查当前要进行备份的数据库是否存在于自己的备份列表中,若是,响应所述远程备份请求;数据库备份子系统收到所述响应后,将生成的备份文件传输至所述远程备份主机;
若为本地备份,将得到的备份文件存储到数据库主机本地。
4.根据权利要求2所述的数据库备份方法,其特征在于,数据库备份子系统根据所述备份计划对所述数据库进行自动备份,包括:
所述数据库的备份时间到来时,检测数据库主机系统当前是否有备份正在进行;若有,暂停执行所述数据库的备份,间隔设定时间后重试;
若重试次数达到设定次数,退出所述数据库的备份。
5.根据权利要求1所述的数据库备份方法,其特征在于,数据库备份子系统根据所述备份计划对所述数据库进行自动备份,之后还包括:
备份检测子系统定期对备份得到的备份文件进行恢复检测,若所述备份文件到数据库实例的恢复失败,确定所述备份文件为不可用,输出告警提示。
6.根据权利要求5所述的数据库备份方法,其特征在于,备份检测子系统定期对备份得到的备份文件进行恢复检测,包括:
根据备份执行信息获取备份得到的备份文件的存储位置,从该存储位置中读取对应的备份文件;
对所述备份文件进行解压;若解压失败,确定为所述备份文件到数据库实例的恢复失败;若解压成功,通过备份软件对解压后的备份数据进行补齐,生成数据库实例的数据目录;
用所述数据目录启动数据库实例,若启动失败,确定为所述备份文件到数据库实例的恢复失败;若启动成功,对所述数据库实例中数据进行读操作;
判断所述读操作是否正常,若否,确定为所述备份文件到数据库实例的恢复失败;若是,确定为所述备份文件到数据库实例的恢复成功。
7.根据权利要求1所述的数据库备份方法,其特征在于,备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,包括:
备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,与所述数据库主机进行双向身份验证;
若双向身份验证通过,备份信息中心子系统根据对所述数据库的备份部署信息,修改所述数据库主机的系统定时任务;
若接收到本地备份的部署信息,所述备份信息中心子系统还获取所述数据库主机的系统分区及分区大小,根据所述系统分区及分区大小确定数据库备份目录;若接收到远程备份的部署信息,所述备份信息中心子系统读取远程备份机器列表,获取各远程备份机器的系统信息,根据各远程备份机器的系统信息选择所述数据库的远程备份主机。
8.根据权利要求1所述的数据库备份方法,其特征在于,还包括:备份检测子系统定期扫描备份信息中心子系统存储的备份执行信息,若没有找到与所述数据库备份计划匹配的备份执行信息,确定所述数据库未按计划执行备份,输出告警提示。
9.根据权利要求1所述的数据库备份方法,其特征在于,备份信息中心子系统接收对数据库的备份部署信息,之后还包括:
备份信息中心子系统接收部署信息查询指令,获取所述数据库的备份部署信息;以及,接收部署信息编辑操作指令,对所述数据库的备份配置信息进行修改或删除。
10.数据库备份系统,其特征在于,包括:
备份信息中心子系统,用于备份信息中心子系统接收对数据库的备份部署信息,远程连接对应的数据库主机,向所述数据库主机发送远程部署请求,以根据所述备份部署信息部署所述数据库的备份计划;
数据库备份子系统,用于数据库备份子系统根据所述备份计划对所述数据库进行自动备份,并将每次的备份执行信息存储到备份信息中心子系统;
备份检测子系统,用于备份检测子系统扫描备份信息中心子系统存储的备份执行信息,根据所述备份执行信息检测所述数据库每次备份执行是否成功,若否,输出告警提示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610137368.1A CN105550073B (zh) | 2016-03-10 | 2016-03-10 | 数据库备份方法及其系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610137368.1A CN105550073B (zh) | 2016-03-10 | 2016-03-10 | 数据库备份方法及其系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105550073A true CN105550073A (zh) | 2016-05-04 |
CN105550073B CN105550073B (zh) | 2018-12-14 |
Family
ID=55829269
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610137368.1A Active CN105550073B (zh) | 2016-03-10 | 2016-03-10 | 数据库备份方法及其系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105550073B (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106550016A (zh) * | 2016-10-13 | 2017-03-29 | 北京鲸鲨软件科技有限公司 | 一种梯度分配传输速率的远程复制的方法 |
CN106569920A (zh) * | 2016-11-09 | 2017-04-19 | 腾讯科技(深圳)有限公司 | 数据库备份方法及装置 |
CN106649475A (zh) * | 2016-09-29 | 2017-05-10 | 郑州云海信息技术有限公司 | 一种基于Shell的安全删除和恢复文件的方法 |
CN106648964A (zh) * | 2016-10-12 | 2017-05-10 | 上海爱数信息技术股份有限公司 | 数据库备份方法及系统 |
CN107193683A (zh) * | 2017-04-18 | 2017-09-22 | 北京潘达互娱科技有限公司 | 数据库备份的校验方法及装置 |
CN107992326A (zh) * | 2017-12-19 | 2018-05-04 | 上海新炬网络技术有限公司 | 基于Struts2框架的Java自动化代码发布方法 |
CN107992337A (zh) * | 2017-10-19 | 2018-05-04 | 用友网络科技股份有限公司 | 跨系统远程部署业务系统的方法、系统 |
CN108446346A (zh) * | 2018-03-07 | 2018-08-24 | 鞍钢集团矿业有限公司 | 一种数据集中备份系统及方法 |
CN108628705A (zh) * | 2018-04-10 | 2018-10-09 | 京信通信系统(中国)有限公司 | 数据库恢复方法、装置、计算机设备和存储介质 |
CN108958979A (zh) * | 2018-07-19 | 2018-12-07 | 汉能移动能源控股集团有限公司 | MySQL数据库备份方法、装置及电子设备 |
CN110851303A (zh) * | 2019-11-12 | 2020-02-28 | 北京天华星航科技有限公司 | 一种数据备份方法、系统及设备 |
CN110879767A (zh) * | 2019-11-21 | 2020-03-13 | 广州西麦科技股份有限公司 | 一种用于达梦数据库的批量主机备份的方法、系统和存储介质 |
CN111475333A (zh) * | 2020-03-02 | 2020-07-31 | 新浪网技术(中国)有限公司 | 一种基于openstack的数据库备份方法及装置 |
CN112214352A (zh) * | 2020-10-16 | 2021-01-12 | 天津七所高科技有限公司 | 一种基于Ethernet/IP的焊机设备数据自动备份方法及装置 |
CN112286735A (zh) * | 2020-12-24 | 2021-01-29 | 深圳市科力锐科技有限公司 | 备份成功率确定方法、装置、设备及存储介质 |
CN112860491A (zh) * | 2021-03-17 | 2021-05-28 | 深圳市腾讯信息技术有限公司 | 一种数据冷备系统及方法 |
CN113806138A (zh) * | 2021-02-05 | 2021-12-17 | 京东科技控股股份有限公司 | 数据库的备份恢复检测方法、装置及电子设备、存储介质 |
CN115599595A (zh) * | 2022-08-26 | 2023-01-13 | 北京万里开源软件有限公司(Cn) | 一种基于分布式数据库的物理备份方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101216843A (zh) * | 2008-01-17 | 2008-07-09 | 四川大学 | 一种多点多跳的数据实时备份方法 |
US20100293140A1 (en) * | 2009-05-18 | 2010-11-18 | Shuhei Nishiyama | Distributed database system by sharing or replicating the meta information on memory caches |
CN102236588A (zh) * | 2010-04-23 | 2011-11-09 | 阿里巴巴集团控股有限公司 | 数据远程备份方法、设备及系统 |
-
2016
- 2016-03-10 CN CN201610137368.1A patent/CN105550073B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101216843A (zh) * | 2008-01-17 | 2008-07-09 | 四川大学 | 一种多点多跳的数据实时备份方法 |
US20100293140A1 (en) * | 2009-05-18 | 2010-11-18 | Shuhei Nishiyama | Distributed database system by sharing or replicating the meta information on memory caches |
CN102236588A (zh) * | 2010-04-23 | 2011-11-09 | 阿里巴巴集团控股有限公司 | 数据远程备份方法、设备及系统 |
Cited By (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106649475A (zh) * | 2016-09-29 | 2017-05-10 | 郑州云海信息技术有限公司 | 一种基于Shell的安全删除和恢复文件的方法 |
CN106648964A (zh) * | 2016-10-12 | 2017-05-10 | 上海爱数信息技术股份有限公司 | 数据库备份方法及系统 |
CN106550016A (zh) * | 2016-10-13 | 2017-03-29 | 北京鲸鲨软件科技有限公司 | 一种梯度分配传输速率的远程复制的方法 |
CN106569920A (zh) * | 2016-11-09 | 2017-04-19 | 腾讯科技(深圳)有限公司 | 数据库备份方法及装置 |
CN106569920B (zh) * | 2016-11-09 | 2020-12-11 | 腾讯科技(深圳)有限公司 | 数据库备份方法及装置 |
CN107193683A (zh) * | 2017-04-18 | 2017-09-22 | 北京潘达互娱科技有限公司 | 数据库备份的校验方法及装置 |
CN107992337A (zh) * | 2017-10-19 | 2018-05-04 | 用友网络科技股份有限公司 | 跨系统远程部署业务系统的方法、系统 |
CN107992326A (zh) * | 2017-12-19 | 2018-05-04 | 上海新炬网络技术有限公司 | 基于Struts2框架的Java自动化代码发布方法 |
CN107992326B (zh) * | 2017-12-19 | 2021-03-23 | 上海新炬网络技术有限公司 | 基于Struts2框架的Java自动化代码发布方法 |
CN108446346A (zh) * | 2018-03-07 | 2018-08-24 | 鞍钢集团矿业有限公司 | 一种数据集中备份系统及方法 |
CN108446346B (zh) * | 2018-03-07 | 2022-04-15 | 鞍钢集团矿业有限公司 | 一种数据集中备份系统及方法 |
CN108628705A (zh) * | 2018-04-10 | 2018-10-09 | 京信通信系统(中国)有限公司 | 数据库恢复方法、装置、计算机设备和存储介质 |
CN108628705B (zh) * | 2018-04-10 | 2021-01-15 | 京信通信系统(中国)有限公司 | 数据库恢复方法、装置、计算机设备和存储介质 |
CN108958979A (zh) * | 2018-07-19 | 2018-12-07 | 汉能移动能源控股集团有限公司 | MySQL数据库备份方法、装置及电子设备 |
CN110851303A (zh) * | 2019-11-12 | 2020-02-28 | 北京天华星航科技有限公司 | 一种数据备份方法、系统及设备 |
CN110879767A (zh) * | 2019-11-21 | 2020-03-13 | 广州西麦科技股份有限公司 | 一种用于达梦数据库的批量主机备份的方法、系统和存储介质 |
CN111475333A (zh) * | 2020-03-02 | 2020-07-31 | 新浪网技术(中国)有限公司 | 一种基于openstack的数据库备份方法及装置 |
CN111475333B (zh) * | 2020-03-02 | 2023-08-18 | 新浪技术(中国)有限公司 | 一种基于openstack的数据库备份方法及装置 |
CN112214352A (zh) * | 2020-10-16 | 2021-01-12 | 天津七所高科技有限公司 | 一种基于Ethernet/IP的焊机设备数据自动备份方法及装置 |
CN112214352B (zh) * | 2020-10-16 | 2023-02-17 | 天津七所高科技有限公司 | 一种基于Ethernet/IP的焊机设备数据自动备份方法及装置 |
CN112286735A (zh) * | 2020-12-24 | 2021-01-29 | 深圳市科力锐科技有限公司 | 备份成功率确定方法、装置、设备及存储介质 |
CN113806138A (zh) * | 2021-02-05 | 2021-12-17 | 京东科技控股股份有限公司 | 数据库的备份恢复检测方法、装置及电子设备、存储介质 |
CN112860491A (zh) * | 2021-03-17 | 2021-05-28 | 深圳市腾讯信息技术有限公司 | 一种数据冷备系统及方法 |
CN112860491B (zh) * | 2021-03-17 | 2023-05-02 | 深圳市腾讯信息技术有限公司 | 一种数据冷备系统及方法 |
CN115599595A (zh) * | 2022-08-26 | 2023-01-13 | 北京万里开源软件有限公司(Cn) | 一种基于分布式数据库的物理备份方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105550073B (zh) | 2018-12-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105550073A (zh) | 数据库备份方法及其系统 | |
US7581136B2 (en) | Method and apparatus for data recovery | |
US20170161161A1 (en) | Periodic data replication | |
CN104536860A (zh) | 一种实时监测jbod模式下硬盘排列顺序的方法 | |
CN113886143B (zh) | 虚拟机持续数据保护方法、装置及数据恢复方法、装置 | |
JP3830389B2 (ja) | インターネット基盤の遠隔データ及びファイル復旧システム及びその方法 | |
CN106681865B (zh) | 业务恢复方法及装置 | |
CN105446831A (zh) | 一种结合SAN的Server-Free备份方法 | |
US9817834B1 (en) | Techniques for performing an incremental backup | |
CN102025536A (zh) | 一种Unix/Linux系统运维数据收集方法和装置 | |
CN112380067A (zh) | 一种Hadoop环境下基于元数据的大数据备份系统及方法 | |
US8271755B1 (en) | Discovering data storage for backup | |
CN113330426B (zh) | 一种备份数据的方法、装置和系统 | |
CN110972497A (zh) | 虚拟化平台的容灾方法及装置 | |
CN103778024A (zh) | 服务器系统及其讯息处理方法 | |
CN112925676B (zh) | 一种基于wal实现分布式数据库集群任意时间点恢复的方法 | |
CN109471756B (zh) | 数据恢复方法、装置及计算机可读存储介质 | |
CN114518985B (zh) | 存储系统命令的故障指示 | |
CN109933351A (zh) | 一种修复和升级Linux系统的方法与装置 | |
CN111611107A (zh) | 获取数据库日志的方法及装置 | |
CN111198796B (zh) | 磁盘热插拔管理方法以及装置 | |
CN107229535B (zh) | 数据块的多副本存储方法、存储设备、数据读取方法 | |
CN100592299C (zh) | 存储系统中文件信息的管理方法和存储系统 | |
CN101377751A (zh) | 计算机工作文件保护方法 | |
CN117407903A (zh) | 目标集群的数据加密备份方法、装置和服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20220302 Address after: Room 1423, No. 1256 and 1258, Wanrong Road, Jing'an District, Shanghai 200040 Patentee after: Tianyi Digital Life Technology Co.,Ltd. Address before: 1 / F and 2 / F, East Garden, Huatian International Plaza, 211 Longkou Middle Road, Tianhe District, Guangzhou, Guangdong 510630 Patentee before: Century Dragon Information Network Co.,Ltd. |