CN103580906A - 一种数据备份的方法、系统及服务器 - Google Patents

一种数据备份的方法、系统及服务器 Download PDF

Info

Publication number
CN103580906A
CN103580906A CN201210282522.6A CN201210282522A CN103580906A CN 103580906 A CN103580906 A CN 103580906A CN 201210282522 A CN201210282522 A CN 201210282522A CN 103580906 A CN103580906 A CN 103580906A
Authority
CN
China
Prior art keywords
server
information
write operation
standby server
standby
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201210282522.6A
Other languages
English (en)
Other versions
CN103580906B (zh
Inventor
邹永强
李锐
伍海君
朱会灿
邓大付
叶航军
董乘宇
阙太富
王磊
杨绍鹏
张书鑫
赵大勇
刘畅
陈晓东
张银锋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Tencent Cloud Computing Beijing Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201210282522.6A priority Critical patent/CN103580906B/zh
Publication of CN103580906A publication Critical patent/CN103580906A/zh
Application granted granted Critical
Publication of CN103580906B publication Critical patent/CN103580906B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明适用于数据处理技术领域,提供了一种数据备份的方法、系统及服务器,所述方法包括:主服务器接收写操作请求信息,为所述写操作请求信息分配一个序列号,将所述写操作请求信息及序列号存储至日志文件;主服务器将携带有所述序列号的写操作请求信息发送给所述备用服务器;备用服务器将所述携带有序列号的写操作请求信息存储至日志文件,并向所述主服务反馈已准备好信息;所述主服务器判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将写操作标记为提交操作,并将提交操作的序列号更新为写操作的序列号,执行写操作,向用户反馈写操作成功信息。通过本发明可有效解决现有数据备份存在的成本高以及丢失最新数据的问题。

Description

一种数据备份的方法、系统及服务器
技术领域
本发明属于数据处理技术领域,尤其涉及一种数据备份的方法、系统及服务器。
背景技术
随着信息技术的不断发展,人们对数据稳定性和安全性的要求也越来越高。很多领域都通过采用主备服务器方式来保证数据的稳定性和安全性,在主服务器发生故障时,及时的将备用服务器切换为主服务器,以保证信息系统安全、稳定的运作。
现有的数据备份方法主要包括:一、基于共享的持久存储。这种方式在主服务器出错时,备用服务器通过读取持久存储的数据就可以恢复服务。但这种方式需要依赖第三方昂贵的存储设备,成本较高。二、备用服务器周期性的从主服务器获取需要备份的数据。该方式由于备用服务器在获取主服务器内数据的同时,主服务器可能仍然在获取新的数据,导致备用服务器无法获取最新的数据,在主备服务器切换时丢失所述最新的数据。
综上所述,现有技术在进行数据备份时,存在成本高、丢失最新数据等问题。
发明内容
本发明实施例的目的在于提供一种数据备份的方法,以解决现有技术在进行数据备份时,存在的成本高以及丢失最新数据的问题。
本发明实施例是这样实现的,一种数据备份的方法,应用于互联的多个服务器,所述服务器中存储有用于确定各服务器身份的状态信息,所述服务器身份包括主服务器和备用服务器,所述方法包括:
所述主服务器接收写操作请求信息,并在接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号,将所述写操作请求信息及分配给所述写操作请求信息的序列号存储至日志文件;
所述主服务器将携带有所述序列号的写操作请求信息发送给所述备用服务器;
所述备用服务器在接收到所述携带有序列号的写操作请求信息后,将所述携带有序列号的写操作请求信息存储至日志文件,并向所述主服务反馈已准备好信息;
所述主服务器接收所述备用服务器反馈的已准备好信息,并判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息。
本发明实施例的另一目的在于提供一种数据备份系统,所述系统包括:
管理后台,
主服务器和至少一个备用服务器;
所述管理后台,用于获取各服务器的状态信息或者接收各服务器发送的状态信息,并将所获取的或者接收到的所有状态信息都发送给各服务器,以使得各服务器根据所述状态信息确定各服务器的身份,所述服务器身份包括主服务器和备用服务器;
所述主服务器,用于接收写操作请求信息,并在接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号,将所述写操作请求信息及分配给所述写操作请求信息的序列号存储至日志文件,同时将携带有所述序列号的写操作请求信息发送给备用服务器,并接收所述备用服务器反馈的已准备好信息,判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息;
所述备用服务器,用于在接收到所述携带有序列号的写操作请求信息后,将所述携带有序列号的写操作请求信息存储至日志文件,并向所述主服务反馈已准备好信息。
一种主服务器,所述主服务器包括:
信息接收单元,用于接收写操作请求信息;
序列号分配单元,用于在所述信息接收单元接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号;
存储单元,用于将所述信息接收单元接收到的所述写操作请求信息及所述序列号分配单元分配给所述写操作请求信息的序列号存储至日志文件;
信息发送单元,用于将携带有所述序列号的写操作请求信息发送给备用服务器;
处理单元,用于接收所述备用服务器反馈的已准备好信息,并判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息。
本发明实施例与现有技术相比存在的有益效果是:数据备份过程不需要依赖第三方昂贵的存储设备,节约了成本;主服务器在接收到写操作请求信息时,将所述写操作请求信息同步到备用服务器,即备用服务器和主服务器同时接收写操作请求,同时获取最新的数据,从而可有效避免现有周期性备份存在的备份服务器无法获取最新数据,导致主备服务器切换时丢失数据的问题。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明第一实施例提供的数据备份系统的网络架构图;
图2是本发明第二实施例提供的数据备份方法的交互流程图;
图3是本发明第三实施例提供的主服务器的组成结构图;
图4是本发明第四实施例提供的备用服务器的组成结构图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
实施例一:
图1示出了本发明第一实施例提供的数据备份系统的网络架构,本发明实施例所提供的数据备份方法可应用于该数据备份系统系统中,为了便于说明,仅示出了与本实施例相关的部分。
该数据备份系统包括管理后台1以及多个服务器。其中,服务器的形式可以为一个单一的服务器,也可以为由几个功能服务器共同组成的服务器端。
所述服务器又分为主服务器2和至少一个备用服务器3。其中所述主服务器2为存储有最新、最全数据的服务器,所述备用服务器3为所述主服务器的备用服务器。
管理后台1在各服务器启动后,获取各服务器的状态信息或者接收各服务器发送的状态信息,并将所获取的或者接收到的所有状态信息都发送给各服务器,以使得各服务器根据所述状态信息确定各服务器的身份。其中,所述状态信息包括但不限于各服务器的唯一标示符及其对应的身份信息。各服务器的身份信息包括但不限于主服务或者备用服务器等。
需要说明的是,本实施例直接记录服务器的身份信息而不是最新序列号的目的是为了避免每次新的写操作都需要更新管理后台记录的序列号,降低管理后台的处理性能。
所述主服务器2接收写操作请求信息,并在接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号(在原有写操作请求信息序列号的基础上单调递增的一个序列号,例如原有写操作请求信息序列号为6,则新分配的序列号为7),将所述写操作请求信息及分配给所述写操作请求信息的序列号存储至日志文件,同时将携带有所述序列号的写操作请求信息发送给备用服务器3。备用服务器3在接收到所述携带有序列号的写操作请求信息后,将所述携带有序列号的写操作请求信息存储至日志文件,并向所述主服务2反馈已准备好信息。主服务2接收所述备用服务器反馈的已准备好信息,判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值(默认为1),若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息。
优选的是,为了避免操作错误而更改主服务器的数据,所述主服务器2在所述反馈已准备好信息的备用服务器的数量小于预设值时,回滚所述写操作,即主服务器2给下一条写操作请求信息分配的序列号与该写操作请求信息分配的序列号相同,主服务器2在读取所述日志文件的写操作请求信息时,如果发现有相同序列号的写操作请求信息,则读取所述相同序列号中最后一个存入所述日志文件的写操作请求信息,所述相同序列号中之前存入所述日志文件的写操作请求信息将不会被读取,从而有效避免操作错误导致的主服务数据更改的问题。
优选的是,为了防止备用服务器出现故障影响数据备份的完成,所述主服务器2在判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值之前,还用于:在预定时间内未接收到所述备用服务器反馈的已准备好信息时,向所述备用服务器重复发送携带有所述序列号的写操作请求信息,并在重复预定次数后仍未接收到所述备用服务器反馈的已准备好信息时,删除已存储的该备用服务器的状态信息或者修改该备用服务器的身份信息,即将所述状态信息中该备用服务器的身份信息修改为不可服务。本实施例修改备用服务器的身份而不删除备用服务器状态信息的目的是在该备用服务器修复后,主服务器仍可将其同步到最新数据,再次回到“备用服务器”身份。
优选的是,为了实现主备服务器的快速、自动的切换,解决现有技术在主备服务器切换时,需要人工参与,耗时较长(几分钟以上,甚至小时量级),效率较低的问题。
本实施例所述服务器身份还包括准主服务器;所述备用服务器3周期性的请求获取准主服务器身份,并在获取到准主服务器身份后,监测所述主服务器2的运行状态或者监听所述主服务器2的广播通知,在监测到所述主服务器2运行故障或者监听到所述主服务器2广播的切换通知时,进行准主服务器和主服务器2的切换。本实施例所述备用服务器在获取准主服务器身份后,通过主动监测或被动接收通知两种方式获取主服务器的运行状态信息,在主服务运行故障或者需要切换时,及时、主动的进行主备服务器的切换(几百毫秒内完成),极大的缩短了主备服务器切换的时间。
所述管理后台1接收所述备用服务器3发送的获取准主服务器身份的请求信息,在存在多个备用服务器3发送获取准主服务器身份的请求信息时,根据预设的选择条件从所述多个备用服务器3中选择一个作为准主服务器,其中,所述选择条件包括发送获取准主服务器身份请求信息时间最早和/或历史数据备份过程中出错次数最少的备用服务器。需要说明的是,主服务器可以根据预存的历史数据备份记录判断备用服务器历史数据同步过程中出错的次数。
优选的是,为了保证数据备份的效率,避免数据备份过程中备用服务器由于出错长时间无响应,所述主服务器2还用于,在数据备份的时间大于所设定的时间阈值时,结束对当前备份服务器3的备份操作。其中,所述数据备份时间可根据实际情况(例如服务器的性能、待备份数据的多少等)进行修改。
本实施例中的所述数据包括但不限于元数据。
实施例二:
图2示出了本发明第二实施例提供的数据备份方法的交互流程,应用于互联的多个服务器,所述服务器中存储有用于确定各服务器身份的状态信息,所述服务器身份包括主服务器和备用服务器,其过程详述如下:
1、所述主服务器接收写操作请求信息。
在本实施例中,所述写操作包括数据的删除、修改、添加等。
2、所述主服务器为接收到的写操作请求信息分配一个序列号,并将所述写操作请求信息及分配给所述写操作请求信息的序列号存储至日志文件。
在本实施例中,为了方便数据的同步,提高数据备份的效率,每一个写操作请求信息分配一个序列号,以使得主服务器在进行数据备份时,可以根据所述序列号快速的获知备用服务器需要的待备份数据。
在本实施例中,为了提高数据的稳定性和安全性,本实施例将所有写操作请求信息都存储至日志文件,以使得主服务器在出错重启时,可通过读取日志文件,重新执行所述日志文件中记录的操作快速恢复到主服务器出错前的状态。
3、所述主服务器将携带有所述序列号的写操作请求信息发送给所述备用服务器;
4、所述备用服务器在接收到所述携带有序列号的写操作请求信息后,将所述携带有序列号的写操作请求信息存储至日志文件。
在本实施例中,为了避免现有周期性备份存在的备份服务器无法获取最新数据,导致主备服务器切换时丢失数据的问题,主服务器在接收到写操作请求信息时,将所述写操作请求信息同步到备用服务器,即备用服务器和主服务器同时接收写操作请求,同时获取最新的数据。在主服务器出错时,通过备服务器中所述日志文件存储的信息保证数据不丢失。所述日志文件可以存储至普通的存储器中,不必使用昂贵的第三方存储设备。
5、向所述主服务反馈已准备好信息;
6、所述主服务器接收所述备用服务器反馈的已准备好信息,并判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,则执行步骤7;
7、所述主服务器将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息。
在本实施例中,为了确保数据的稳定性和安全性,需要保证具有足够的备用服务器,本实施例中的备用服务器数量的预设值默认为1。在实际应用中,可以根据数据的安全等级等要求增加备用服务器的数量。
主服务器在反馈已准备好信息的备用服务器的数量大于或者等于预设值,将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作以更新主服务器数据,向用户反馈写操作成功信息。
需要说明的是,本实施例的备用服务器在接收到所述主服务器发送的携带有序列号的写操作请求信息后,存储所述携带有序列号的写操作请求信息,但不执行所述写操作,只有在接收到所述主服务器发送的携带有提交操作序列号的提交请求时,备用服务器才执行该提交操作序列号前的写操作来更新备用服务器数据。
优选的是,为了避免操作错误而更改主服务器的数据,所述主服务器在所述反馈已准备好信息的备用服务器的数量小于预设值时,回滚所述写操作,即主服务器给下一条写操作请求信息分配的序列号与该写操作请求信息分配的序列号相同,主服务器在读取所述日志文件的写操作请求信息时,如果发现有相同序列号的写操作请求信息,则读取所述相同序列号中最后一个存入所述日志文件的写操作请求信息,所述相同序列号中之前存入所述日志文件的写操作请求信息将不会被读取,从而有效避免操作错误导致的主服务数据更改的问题。
优选的是,为了防止备用服务器出现故障影响数据备份的完成,所述主服务器在判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值之前,还用于:在预定时间内未接收到所述备用服务器反馈的已准备好信息时,向所述备用服务器重复发送携带有所述序列号的写操作请求信息,并在重复预定次数后仍未接收到所述备用服务器反馈的已准备好信息时,删除已存储的该备用服务器的状态信息或者修改该备用服务器的身份信息,即将所述状态信息中该备用服务器的身份信息修改为不可服务。
优选的是,为了实现主备服务器的快速、自动的切换,解决现有技术在主备服务器切换时,需要人工参与,耗时较长(几分钟以上,甚至小时量级),效率较低的问题。
本实施例所述服务器身份还包括准主服务器;所述备用服务器周期性的请求获取准主服务器身份,并在获取到准主服务器身份后,监测所述主服务器的运行状态或者监听所述主服务器的广播通知,在监测到所述主服务器运行故障或者监听到所述主服务器广播的切换通知时,进行准主服务器和主服务器的切换。本实施例所述备用服务器在获取准主服务器身份后,通过主动监测或被动接收通知两种方式获取主服务器的运行状态信息,在主服务运行故障或者需要切换时,及时、自动的进行主备服务器的切换(几百毫秒内完成),极大的缩短了主备服务器切换的时间。
优选的是,为了保证数据备份的效率,避免数据备份过程中备用服务器由于出错长时间无响应,所述主服务器在数据备份的时间大于所设定的时间阈值时,结束对当前备份服务器的备份操作。其中,所述数据备份时间可根据实际情况(例如服务器的性能、待备份数据的多少等)进行修改。
本实施例中的所述数据包括但不限于元数据。
本发明实施例在数据备份过程不需要依赖第三方昂贵的存储设备,节约了成本,减少了依赖;主服务器在接收到写操作请求信息时,将所述写操作请求信息同步到备用服务器,即备用服务器和主服务器同时接收写操作请求,同时获取最新的数据,从而可有效避免现有周期性备份存在的备份服务器无法获取最新数据,导致主备服务器切换时丢失数据的问题。而且在进行主备服务器切换时,备用服务器预先获取准主服务身份,并通过主动监测或被动接收通知两种方式获取主服务器的运行状态信息,在主服务运行故障或者需要切换时,及时、自动的进行主备服务器的切换(几百毫秒内完成),极大的缩短了主备服务器切换的时间。
实施例三:
图3示出了本发明实施例三的主服务器的组成结构,为了便于说明,仅示出了与本发明实施例相关的部分。
该主服务器2可应用于如图1所示的数据备份系统中,该主服务器2为存储有最新、最全数据的服务器,该主服务器2包括信息接收单元21、序列号分配单元22、存储单元23、信息发送单元24以及处理单元25,各单元的具体功能如下:
信息接收单元21,用于接收写操作请求信息;
序列号分配单元22,用于在所述信息接收单元21接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号;
存储单元23,用于将所述信息接收单元21接收到的所述写操作请求信息及所述序列号分配单元22分配给所述写操作请求信息的序列号存储至日志文件;
信息发送单元24,用于将携带有所述序列号的写操作请求信息发送给备用服务器;
处理单元25,用于接收所述备用服务器反馈的已准备好信息,并判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息。
进一步的,
在判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值之前,
所述处理单元25还用于,在预定时间内未接收到所述备用服务器反馈的已准备好信息时,向所述备用服务器重复发送携带有所述序列号的写操作请求信息,并在重复预定次数后仍未接收到所述备用服务器反馈的已准备好信息时,删除已存储的该备用服务器的状态信息或者修改该备用服务器的身份信息,即将所述状态信息中该备用服务器的身份信息修改为不可服务。
进一步的,所述处理单元25还用于,在所述反馈已准备好信息的备用服务器的数量小于预设值时,回滚所述写操作。
进一步的,所述主服务器2还包括:
控制单元26,用于在数据备份的时间大于所设定的时间阈值时,结束对当前备份服务器的备份操作。
本实施例中的所述数据包括但不限于元数据。
本实施例提供的主服务器可以使用在前述对应的数据备份方法,详情参见上述数据备份方法实施例二的相关描述,在此不再赘述。
实施例四:
图4示出了本发明实施例四的备用服务器的组成结构,为了便于说明,仅示出了与本发明实施例相关的部分。
该备用服务器3可应用于如图1所示的数据备份系统中,该备用服务器3为主服务器的备用服务器,该备用服务器3包括信息接收单元31、存储单元32以及信息反馈单元33,各单元的具体功能如下:
信息接收单元31,用于接收主服务器发送的携带有序列号的写操作请求信息;
存储单元32,用于将所述信息接收单元31接收到的携带有序列号的写操作请求信息存储至日志文件;
信息反馈单元33,用于在所述存储单元32将所述信息接收单元31接收到的携带有序列号的写操作请求信息存储至日志文件后,向所述主服务反馈已准备好信息。
进一步的,
所述备用服务器3还包括:
切换单元34,用于周期性的请求获取准主服务器身份,并在获取到准主服务器身份后,监测所述主服务器的运行状态或者监听所述主服务器的广播通知,在监测到所述主服务器运行故障或者监听到所述主服务器广播的切换通知时,进行准主服务器和主服务器的切换。
在本实施例中,所述数据包括但不限于元数据。
本实施例提供的备用服务器可以使用在前述对应的数据备份方法,详情参见上述数据备份方法实施例二的相关描述,在此不再赘述。
本领域技术人员可以理解为上述实施例三和四所包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
综上所述,本发明实施例在数据备份过程不需要依赖第三方昂贵的存储设备,节约了成本,减少了依赖;主服务器在接收到写操作请求信息时,将所述写操作请求信息同步到备用服务器,即备用服务器和主服务器同时接收写操作请求,同时获取最新的数据,从而可有效避免现有周期性备份存在的备份服务器无法获取最新数据,导致主备服务器切换时丢失数据的问题。而且在进行主备服务器切换时,备用服务器预先获取准主服务身份,并通过主动监测或被动接收通知两种方式获取主服务器的运行状态信息,在主服务运行故障或者需要切换时,及时、自动的进行主备服务器的切换(几百毫秒内完成),极大的缩短了主备服务器切换的时间。
本领域普通技术人员还可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,所述的程序可以在存储于一计算机可读取存储介质中,所述的存储介质,包括ROM/RAM、磁盘、光盘等。
以上内容是结合具体的优选实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下做出若干等同替代或明显变型,而且性能或用途相同,都应当视为属于本发明由所提交的权利要求书确定的专利保护范围。

Claims (18)

1.一种数据备份的方法,应用于互联的多个服务器,其特征在于,所述服务器中存储有用于确定各服务器身份的状态信息,所述服务器身份包括主服务器和备用服务器,所述方法包括:
所述主服务器接收写操作请求信息,并在接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号,将所述写操作请求信息及分配给所述写操作请求信息的序列号存储至日志文件;
所述主服务器将携带有所述序列号的写操作请求信息发送给所述备用服务器;
所述备用服务器在接收到所述携带有序列号的写操作请求信息后,将所述携带有序列号的写操作请求信息存储至日志文件,并向所述主服务反馈已准备好信息;
所述主服务器接收所述备用服务器反馈的已准备好信息,并判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息。
2.如权利要求1所述的方法,其特征在于,所述在判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值的步骤之前,还包括:
所述主服务器在预定时间内未接收到所述备用服务器反馈的已准备好信息时,向所述备用服务器重复发送携带有所述序列号的写操作请求信息,并在重复预定次数后仍未接收到所述备用服务器反馈的已准备好信息时,删除已存储的该备用服务器的状态信息或者修改该备用服务器的身份信息,即将所述状态信息中该备用服务器的身份信息修改为不可服务。
3.如权利要求1所述的方法,其特征在于,所述方法包括:
所述主服务器在所述反馈已准备好信息的备用服务器的数量小于预设值时,回滚所述写操作。
4.如权利要求1所述的方法,其特征在于,所述服务器身份还包括准主服务器;
所述备用服务器周期性的请求获取准主服务器身份,并在获取到准主服务器身份后,监测所述主服务器的运行状态或者监听所述主服务器的广播通知,在监测到所述主服务器运行故障或者监听到所述主服务器广播的切换通知时,进行准主服务器和主服务器的切换。
5.如权利要求1所述的方法,其特征在于,所述方法还包括:
所述主服务器设定有数据备份时间阈值,在数据备份的时间大于所设定的时间阈值时,结束对当前备份服务器的备份操作。
6.如权利要求1-5任一项所述的方法,其特征在于,所述数据为元数据。
7.一种数据备份系统,其特征在于,所述系统包括:
管理后台,
主服务器和至少一个备用服务器;
所述管理后台,用于获取各服务器的状态信息或者接收各服务器发送的状态信息,并将所获取的或者接收到的所有状态信息都发送给各服务器,以使得各服务器根据所述状态信息确定各服务器的身份,所述服务器身份包括主服务器和备用服务器;
所述主服务器,用于接收写操作请求信息,并在接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号,将所述写操作请求信息及分配给所述写操作请求信息的序列号存储至日志文件,同时将携带有所述序列号的写操作请求信息发送给备用服务器,并接收所述备用服务器反馈的已准备好信息,判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息;
所述备用服务器,用于在接收到所述携带有序列号的写操作请求信息后,将所述携带有序列号的写操作请求信息存储至日志文件,并向所述主服务反馈已准备好信息。
8.如权利要求7所述的系统,其特征在于,在判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值之前,
所述主服务器还用于,在预定时间内未接收到所述备用服务器反馈的已准备好信息时,向所述备用服务器重复发送携带有所述序列号的写操作请求信息,并在重复预定次数后仍未接收到所述备用服务器反馈的已准备好信息时,删除已存储的该备用服务器的状态信息。
9.如权利要求7所述的系统,其特征在于,所述主服务器还用于,在所述反馈已准备好信息的备用服务器的数量小于预设值时,回滚所述写操作。
10.如权利要求7所述的系统,其特征在于,所述服务器身份还包括准主服务器;
所述备用服务器还用于,周期性的请求获取准主服务器身份,并在获取到准主服务器身份后,监测所述主服务器的运行状态或者监听所述主服务器的广播通知,在监测到所述主服务器运行故障或者监听到所述主服务器广播的切换通知时,进行准主服务器和主服务器的切换。
11.如权利要求10所述的系统,其特征在于,所述管理后台还用于,接收所述备用服务器发送的获取准主服务器身份的请求信息,在存在多个备用服务器发送获取准主服务器身份的请求信息时,根据预设的选择条件从所述多个备用服务器中选择一个作为准主服务器,其中,所述选择条件包括发送获取准主服务器身份请求信息时间最早和/或历史数据备份过程中出错次数最少的备用服务器。
12.如权利要求7所述的系统,其特征在于,所述主服务器还用于,在数据备份的时间大于所设定的时间阈值时,结束对当前备份服务器的备份操作。
13.如权利要求7-12任一项所述的系统,其特征在于,所述数据为元数据。
14.一种主服务器,其特征在于,所述主服务器包括:
信息接收单元,用于接收写操作请求信息;
序列号分配单元,用于在所述信息接收单元接收到所述写操作请求信息后为所述写操作请求信息分配一个序列号;
存储单元,用于将所述信息接收单元接收到的所述写操作请求信息及所述序列号分配单元分配给所述写操作请求信息的序列号存储至日志文件;
信息发送单元,用于将携带有所述序列号的写操作请求信息发送给备用服务器;
处理单元,用于接收所述备用服务器反馈的已准备好信息,并判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值,若是,将所述写操作标记为提交操作,并将所述提交操作的序列号更新为所述写操作的序列号,执行所述写操作,向用户反馈写操作成功信息。
15.如权利要求14所述的主服务器,其特征在于,在判断反馈已准备好信息的备用服务器的数量是否大于或者等于预设值之前,
所述处理单元还用于,在预定时间内未接收到所述备用服务器反馈的已准备好信息时,向所述备用服务器重复发送携带有所述序列号的写操作请求信息,并在重复预定次数后仍未接收到所述备用服务器反馈的已准备好信息时,删除已存储的该备用服务器的状态信息或者修改该备用服务器的身份信息,即将所述状态信息中该备用服务器的身份信息修改为不可服务。
16.如权利要求14所述的主服务器,其特征在于,所述处理单元还用于,在所述反馈已准备好信息的备用服务器的数量小于预设值时,回滚所述写操作。
17.如权利要求14所述的主服务器,其特征在于,所述服务器还包括:
控制单元,用于在数据备份的时间大于所设定的时间阈值时,结束对当前备份服务器的备份操作。
18.如权利要求14-17任一项所述的主服务器,其特征在于,所述数据为元数据。
CN201210282522.6A 2012-08-09 2012-08-09 一种数据备份的方法、系统及服务器 Active CN103580906B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210282522.6A CN103580906B (zh) 2012-08-09 2012-08-09 一种数据备份的方法、系统及服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210282522.6A CN103580906B (zh) 2012-08-09 2012-08-09 一种数据备份的方法、系统及服务器

Publications (2)

Publication Number Publication Date
CN103580906A true CN103580906A (zh) 2014-02-12
CN103580906B CN103580906B (zh) 2018-02-27

Family

ID=50051891

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210282522.6A Active CN103580906B (zh) 2012-08-09 2012-08-09 一种数据备份的方法、系统及服务器

Country Status (1)

Country Link
CN (1) CN103580906B (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104407934A (zh) * 2014-11-04 2015-03-11 成都博智维讯信息技术有限公司 一种sap数据备份方法
CN104954474A (zh) * 2015-06-19 2015-09-30 北京奇虎科技有限公司 负载均衡中数据更新的方法及装置
CN105159795A (zh) * 2015-08-21 2015-12-16 小米科技有限责任公司 数据同步方法、装置和系统
CN105468718A (zh) * 2015-11-18 2016-04-06 腾讯科技(深圳)有限公司 数据一致性处理方法、装置和系统
CN105468641A (zh) * 2014-09-09 2016-04-06 上海盛大网络发展有限公司 一种搜索云消息实时分发系统及方法
CN105847854A (zh) * 2016-04-12 2016-08-10 乐视控股(北京)有限公司 直播方法和系统
CN106790345A (zh) * 2016-11-10 2017-05-31 腾讯科技(深圳)有限公司 数据序列号分配方法及分配装置
CN106878473A (zh) * 2017-04-20 2017-06-20 腾讯科技(深圳)有限公司 一种消息处理方法、服务器集群及系统
WO2017101731A1 (zh) * 2015-12-18 2017-06-22 阿里巴巴集团控股有限公司 数据库的服务提供方法和系统
CN107766354A (zh) * 2016-08-17 2018-03-06 阿里巴巴集团控股有限公司 一种用于保证数据正确性的方法与设备
CN107819605A (zh) * 2016-09-14 2018-03-20 北京百度网讯科技有限公司 用于在服务器集群中切换服务器的方法和装置
CN108123976A (zh) * 2016-11-30 2018-06-05 阿里巴巴集团控股有限公司 集群间的数据备份方法、装置及系统
CN108509455A (zh) * 2017-02-28 2018-09-07 百度在线网络技术(北京)有限公司 数据表处理方法和装置
CN108572890A (zh) * 2018-04-26 2018-09-25 赵程章 事务数据同步方法及装置
CN109254870A (zh) * 2018-08-01 2019-01-22 华为技术有限公司 数据备份的方法和装置
CN109561120A (zh) * 2017-09-26 2019-04-02 杭州海康威视系统技术有限公司 小文件备份方法、系统和管理服务器
CN110247808A (zh) * 2019-06-27 2019-09-17 深圳前海微众银行股份有限公司 信息发送方法、装置、设备及可读存储介质
CN112835885A (zh) * 2019-11-22 2021-05-25 北京金山云网络技术有限公司 一种分布式表格存储的处理方法、装置及系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7069325B1 (en) * 2001-12-21 2006-06-27 Cisco Technology, Inc. Method and apparatus for handling requests in a network
CN1851657A (zh) * 2005-07-21 2006-10-25 上海华为技术有限公司 一种双机备份实现方法及系统
CN1863050A (zh) * 2005-09-15 2006-11-15 上海华为技术有限公司 服务器间文件同步的方法及其系统
CN101038591A (zh) * 2007-04-11 2007-09-19 华为技术有限公司 数据库同步方法及系统
CN102025756A (zh) * 2009-09-09 2011-04-20 中兴通讯股份有限公司 分布式系统及其数据同步方法
CN102043686A (zh) * 2009-10-20 2011-05-04 华为技术有限公司 一种内存数据库的容灾方法、备用服务器及系统
CN102053982A (zh) * 2009-11-02 2011-05-11 阿里巴巴集团控股有限公司 一种数据库信息管理方法和设备
CN102368267A (zh) * 2011-10-25 2012-03-07 曙光信息产业(北京)有限公司 一种维护分布式系统中副本一致性的方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7069325B1 (en) * 2001-12-21 2006-06-27 Cisco Technology, Inc. Method and apparatus for handling requests in a network
CN1851657A (zh) * 2005-07-21 2006-10-25 上海华为技术有限公司 一种双机备份实现方法及系统
CN1863050A (zh) * 2005-09-15 2006-11-15 上海华为技术有限公司 服务器间文件同步的方法及其系统
CN101038591A (zh) * 2007-04-11 2007-09-19 华为技术有限公司 数据库同步方法及系统
CN102025756A (zh) * 2009-09-09 2011-04-20 中兴通讯股份有限公司 分布式系统及其数据同步方法
CN102043686A (zh) * 2009-10-20 2011-05-04 华为技术有限公司 一种内存数据库的容灾方法、备用服务器及系统
CN102053982A (zh) * 2009-11-02 2011-05-11 阿里巴巴集团控股有限公司 一种数据库信息管理方法和设备
CN102368267A (zh) * 2011-10-25 2012-03-07 曙光信息产业(北京)有限公司 一种维护分布式系统中副本一致性的方法

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105468641A (zh) * 2014-09-09 2016-04-06 上海盛大网络发展有限公司 一种搜索云消息实时分发系统及方法
CN105468641B (zh) * 2014-09-09 2020-08-18 上海盛大网络发展有限公司 一种搜索云消息实时分发系统及方法
CN104407934A (zh) * 2014-11-04 2015-03-11 成都博智维讯信息技术有限公司 一种sap数据备份方法
CN104954474A (zh) * 2015-06-19 2015-09-30 北京奇虎科技有限公司 负载均衡中数据更新的方法及装置
CN104954474B (zh) * 2015-06-19 2019-08-02 北京奇虎科技有限公司 负载均衡中数据更新的方法及装置
CN105159795A (zh) * 2015-08-21 2015-12-16 小米科技有限责任公司 数据同步方法、装置和系统
CN105468718B (zh) * 2015-11-18 2020-09-08 腾讯科技(深圳)有限公司 数据一致性处理方法、装置和系统
CN105468718A (zh) * 2015-11-18 2016-04-06 腾讯科技(深圳)有限公司 数据一致性处理方法、装置和系统
WO2017101731A1 (zh) * 2015-12-18 2017-06-22 阿里巴巴集团控股有限公司 数据库的服务提供方法和系统
CN105847854A (zh) * 2016-04-12 2016-08-10 乐视控股(北京)有限公司 直播方法和系统
CN107766354A (zh) * 2016-08-17 2018-03-06 阿里巴巴集团控股有限公司 一种用于保证数据正确性的方法与设备
CN107819605A (zh) * 2016-09-14 2018-03-20 北京百度网讯科技有限公司 用于在服务器集群中切换服务器的方法和装置
US10491671B2 (en) 2016-09-14 2019-11-26 Beijing Baidu Netcom Science and Technology Co., Ltd Method and apparatus for switching between servers in server cluster
CN106790345A (zh) * 2016-11-10 2017-05-31 腾讯科技(深圳)有限公司 数据序列号分配方法及分配装置
CN106790345B (zh) * 2016-11-10 2020-04-10 腾讯科技(深圳)有限公司 数据序列号分配方法及分配装置
CN108123976A (zh) * 2016-11-30 2018-06-05 阿里巴巴集团控股有限公司 集群间的数据备份方法、装置及系统
CN108123976B (zh) * 2016-11-30 2020-11-20 阿里巴巴集团控股有限公司 集群间的数据备份方法、装置及系统
CN108509455A (zh) * 2017-02-28 2018-09-07 百度在线网络技术(北京)有限公司 数据表处理方法和装置
CN106878473A (zh) * 2017-04-20 2017-06-20 腾讯科技(深圳)有限公司 一种消息处理方法、服务器集群及系统
CN106878473B (zh) * 2017-04-20 2021-03-30 腾讯科技(深圳)有限公司 一种消息处理方法、服务器集群及系统
CN109561120A (zh) * 2017-09-26 2019-04-02 杭州海康威视系统技术有限公司 小文件备份方法、系统和管理服务器
CN108572890A (zh) * 2018-04-26 2018-09-25 赵程章 事务数据同步方法及装置
CN109254870A (zh) * 2018-08-01 2019-01-22 华为技术有限公司 数据备份的方法和装置
CN109254870B (zh) * 2018-08-01 2021-05-18 华为技术有限公司 数据备份的方法和装置
CN110247808A (zh) * 2019-06-27 2019-09-17 深圳前海微众银行股份有限公司 信息发送方法、装置、设备及可读存储介质
CN110247808B (zh) * 2019-06-27 2024-04-09 深圳前海微众银行股份有限公司 信息发送方法、装置、设备及可读存储介质
CN112835885A (zh) * 2019-11-22 2021-05-25 北京金山云网络技术有限公司 一种分布式表格存储的处理方法、装置及系统
WO2021098555A1 (zh) * 2019-11-22 2021-05-27 北京金山云网络技术有限公司 一种分布式表格存储的处理方法、装置及系统
CN112835885B (zh) * 2019-11-22 2023-09-01 北京金山云网络技术有限公司 一种分布式表格存储的处理方法、装置及系统

Also Published As

Publication number Publication date
CN103580906B (zh) 2018-02-27

Similar Documents

Publication Publication Date Title
CN103580906A (zh) 一种数据备份的方法、系统及服务器
ES2703901T3 (es) Sistema de archivo distribuido mediante nodos de consenso
US9753954B2 (en) Data node fencing in a distributed file system
CN102411639B (zh) 元数据的多副本存储管理方法和系统
US7480644B2 (en) Systems methods, and software for distributed loading of databases
CN110795503A (zh) 分布式存储系统的多集群数据同步方法及相关装置
CN111818112A (zh) 一种基于Kafka系统的发送消息的方法和装置
CN111083193A (zh) 长连接消息发送方法、服务器及存储介质
CN103581225A (zh) 分布式系统中的节点处理任务的方法
EP2723017A1 (en) Method, apparatus and system for implementing distributed auto-incrementing counting
CN103024065A (zh) 用于云存储系统的系统配置管理方法
CN105138276A (zh) 数据储存方法及数据储存系统
CN104516795A (zh) 一种数据存取方法及系统
US8392534B2 (en) Device for access to data aboard an aircraft
CN112235405A (zh) 分布式存储系统及数据投放方法
US20060282524A1 (en) Apparatus, system, and method for facilitating communication between an enterprise information system and a client
CN108509296B (zh) 一种处理设备故障的方法和系统
CN112860787A (zh) 分布式主从系统中主节点的切换方法、主节点设备和存储介质
US8650178B2 (en) Systems, methods and software for distributed loading of databases
CN105323271B (zh) 一种云计算系统以及云计算系统的处理方法和装置
CN110620798A (zh) Ftp连接的控制方法、系统、设备和存储介质
CN107404511B (zh) 集群中服务器的替换方法及设备
CN104468674B (zh) 数据迁移方法及装置
CN109992447B (zh) 数据复制方法、装置及存储介质
CN112256202B (zh) 一种分布式存储系统和分布式存储系统中卷的删除方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20190730

Address after: Shenzhen Futian District City, Guangdong province 518044 Zhenxing Road, SEG Science Park 2 East Room 403

Co-patentee after: Tencent cloud computing (Beijing) limited liability company

Patentee after: Tencent Technology (Shenzhen) Co., Ltd.

Address before: Shenzhen Futian District City, Guangdong province 518044 Zhenxing Road, SEG Science Park 2 East Room 403

Patentee before: Tencent Technology (Shenzhen) Co., Ltd.