CN102025525A - 一种多台服务器数据同步方法 - Google Patents

一种多台服务器数据同步方法 Download PDF

Info

Publication number
CN102025525A
CN102025525A CN2009101022897A CN200910102289A CN102025525A CN 102025525 A CN102025525 A CN 102025525A CN 2009101022897 A CN2009101022897 A CN 2009101022897A CN 200910102289 A CN200910102289 A CN 200910102289A CN 102025525 A CN102025525 A CN 102025525A
Authority
CN
China
Prior art keywords
server
opnum
operation pipeline
user
field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009101022897A
Other languages
English (en)
Inventor
周佩雷
陈一鸣
潘军剑
周飞华
张宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Telecom Corp Ltd
Original Assignee
China Telecom Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Telecom Corp Ltd filed Critical China Telecom Corp Ltd
Priority to CN2009101022897A priority Critical patent/CN102025525A/zh
Publication of CN102025525A publication Critical patent/CN102025525A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Computer And Data Communications (AREA)

Abstract

一种多台服务器数据同步方法,所述每个服务器包括操作流水线表,该操作流水线表包括用户字段,该用户字段包括UserInfo用户信息字段以及与UserInfo用户信息字段相对应的OpNum字段,该方法包括步骤:A、服务器定时轮询另一服务器;B、当所述服务器轮询到所述另一服务器上的操作流水线表发生变化时,所述服务器查找自己的操作流水线表,获得该操作流水线表中的最大OpNum,并且将所获得的最大OpNum发送到所述另一服务器;C、所述另一服务器接收所述服务器的操作流水线表中的最大OpNum,查找自己的操作流水线表,并且将自己的操作流水线表中的相应OpNum比所接收到的所述服务器的最大OpNum要大的UserInfo传送到所述服务器;以及D、所述服务器重写UserInfo并且将其相应OpNum设置为所述服务器中的操作流水线表中的最大OpNum加1。

Description

一种多台服务器数据同步方法
技术领域
本发明涉及一种多台服务器数据同步方法。
背景技术
随着网络的普及与发展,在网络上用户可以获取大量的信息,同时也可以把自己所拥有的信息资源共享给其他的网络用户。目前在Internet中大都采用C/S结构,其最重要的特点是非对等相互作用,服务器拥有客户机所不具备的各种软硬件资源和运算处理能力。
然而由于服务器的负载原因,我们常常需要使用多台服务器进行客户端信息进行管理,因而如何实现多台服务器之间的数据同步,成为问题的关键。
客户机登陆的服务器不同,因此一般情况下客户机只能够得到当前服务器上的信息,因此当前服务器如何与其他服务器同步成为问题的关键。
由于同步的实时性要求根据需要有所不同,服务器能够承载的最大负荷也有所不同。一般来说,实时性要求越高,为了数据同步所做的工作就越多,而其能够承载的最大负荷也就越少。
发明内容
为了解决上述传统问题,因此本发明的一个目的就是提出了一种多台服务器数据同步方法。
在一个方面中,提出了一种多台服务器数据同步方法,所述每个服务器包括操作流水线表,该操作流水线表包括用户字段,该用户字段包括UserInfo用户信息字段以及与UserInfo用户信息字段相对应的OpNum字段,该方法包括步骤:A、服务器定时轮询另一服务器;B、当所述服务器轮询到所述另一服务器上的操作流水线表发生变化时,所述服务器查找自己的操作流水线表,获得该操作流水线表中的最大OpNum,并且将所获得的最大OpNum发送到所述另一服务器;C、所述另一服务器接收所述服务器的操作流水线表中的最大OpNum,查找自己的操作流水线表,并且将自己的操作流水线表中的相应OpNum比所接收到的所述服务器的最大OpNum要大的UserInfo传送到所述服务器;以及D、所述服务器重写UserInfo并且将其相应OpNum设置为所述服务器中的操作流水线表中的最大OpNum加1。
在这个方面中,其中其中当所述另一服务器上的登陆用户信息改变时,所述另一服务器将UserInfo改变的相应OpNum设置为该服务器的操作流水线表中的最大OpNum加1。
在这个方面中,其中当有新的用户登陆所述另一服务器上时,所述另一服务器在操作流水线表的未被分配的空间中为新登陆用户创建新的字段,将新登陆用户的信息写入到UserInfo字段中,并且将其相应OpNum设置为该另一服务器的操作流水线表中的最大OpNum加1。
在这个方面中,其中步骤D进一步包括:所述服务器在该操作流水线表的未被分配的空间中为新登陆用户创建新的字段,将新登陆用户的信息写入到UserInfo字段中,并将其相应OpNum设置为该服务器的操作流水线表中的最大OpNum加1。
在这个方面中,其中该操作流水线表还包括OpNo序列号字段,其中每个OpNo索引至相应的用户字段。
在这个方面中,其中用户字段还包括服务器标志位字段,该服务器标志位字段用于标识相应用户是从哪台服务器登陆的。
通过本发明,可在多台服务器上进行数据同步,实时性较高,基本相当于不同步时的承载负荷,最终使每台服务器上都有所有用户的信息。
附图说明
结合随后的附图,从下面的详细说明中可显而易见的得出本发明的上述及其他目的、特征及优点。在附图中:
图1示例性地给出了进行数据同步的多台服务器;
图2示例性地给出了用户信息改变前的服务器操作流水线表;
图3示例性地给出了用户信息改变后的服务器操作流水线表;
图4示例性地给出了同步前的服务器1操作流水线表;
图5示例性地给出了同步前的服务器2操作流水线表;
图6示例性地给出了用户信息改变后的服务器1操作流水线表;
图7示例性地给出了同步后的服务器2操作流水线表;以及
图8示例性地给出了释放存储空间的示例;
具体实施方式
在下文中将详细地论述的,本公开可以采用完全硬件的实施例、完全软件的实施例或包括硬件和软件元件两者的实施例的形式。在优选实施例中,本公开可以用软件来实施,其可以包括但不局限于固件、驻留软件、微码等等。
现在参考附图,对本发明的原理进行详细的说明。
如图1所示,服务器甲、乙、丙进行数据同步,当然对于本领域普通技术人员来说这仅是示例性的,并非局限于此。每个服务器中都有一个存储部分,该存储部分中存储了每个服务器的操作流水表。
下面以服务器甲为例来对操作流水线进行说明。
如图2所示,该操作流水表主要包括OpNo(序列号)字段和用户字段,而用户字段包括UserInfo(用户信息)字段、OpNum(项值)字段、以及服务器标志位字段。
OpNo指UserInfo信息存放的序号并且是由1,2,...,N这样的整数来表示的,每个OpNo与相应的用户字段相对应。OpNo.1索引至OpNum是最小值的用户字段,OpNo.2索引至OpNum是次小值的用户字段,......,依次类推,OpNo.N索引至OpNum是最大值的用户字段。
UerInfo中包含了用户的各种信息。OpNum的初始值为0,当第一次用户信息发生变化时,该OpNum值为1。当然对于本领域普通技术人员来说,OpNum的初始值并不局限于此,也可以为任何整数。
当用户状态或信息改变的时候,OpNum的最大值加1。
在各个服务器中,UserInfo信息是乱序存放的,排序的是UserInfo信息存放的序号即OpNo,然后可以根据此序号作为索引来找到相应的UserInfo信息。
服务器标志位字段用于标识相应UserInfo的用户是从哪台服务器登陆的。如图2所示,服务器标志位字段“甲”表示用户A、B、D是从服务器甲登陆的,服务器标志位字段“乙”表示用户C是从服务器乙登陆的,并且服务器标志位字段“丙”表示用户N是从服务器丙登陆的。
接下来,首先先描述当某个登陆用户的状态或信息改变时,当前服务器中的操作流水线怎样变化。
当某个用户状态或信息改变的时候,使其相应OpNum变为:操作流水线中的OpNum的最大值+1,然后改变OpNo的排序状态。
具体地说,在图2的情况下,OpNum的最大值是25。如果用于D的信息(UserInfoD)发生了变化,那么得到图3的结果。即OpNum的最大值加1(=26),并将其写入到UserInfoD的相应OpNum(=26)。此后,改变OpNo的排序状态,即OpNo.1仍索引至OpNum是最小值10的用户字段,OpNo.2仍索引至OpNum是次小值11的用户字段,OpNo.3仍索引至OpNum是第三小值21的用户字段,但是由于此时OpNum的最大值是26而不是25,因此OpNo.4索引至OpNum是第四小值25的用户字段,依次类推,OpNo.N索引至OpNum是最大值26的用户字段(UserInfoD:用户D)。也就是说,此时OpNo.N始终索引至用户状态或信息发生了变化的用户字段,即指向OpNum是最大值的用户字段。
上面说明了当单个服务器上的登陆用户信息或状态发生变化时,该服务器上的操作流水线表的变化。
应该说明的是,OpNo(序列号)字段和服务器标志位字段并不是必要的,该OpNo(序列号)字段仅是由于OpNo.N始终索引至用户状态或信息发生了变化的用户字段,即指向OpNum是最大值的用户字段,因此可提高效率。因此,在以下描述中,为了重点说明,省去对OpNo的重新排序步骤。
此外,新增用户的机制与用户状态改变操作类似,重要的是将新用户信息存储到未被分配的空间。
例如,此时,如果服务器甲新登陆了用户G,那么服务器在操作流水线表的未被分配的空间中为用户G创建新的字段,将用户G的信息写入到UserInfoG字段中,并且将其相应OpNum设置为OpNum的最大值+1(=27)。
下面以示例的方式对两台服务器之间的数据同步过程进行详细的说明。为了简单期间,假定用户服务器1上的操作流水线如图4所示,假定服务器2上的操作流水线如图5所示。
用户A、B、C是从服务器1登陆的,而用户E、F是从服务器2登陆的。
当服务器1上的用户信息C发生变化时,如前所述,服务器1查找其操作流水表,获得OpNum的最大值为5,使OpNum的最大值加1,并且将其结果OpNum(=6)回写到用户C所对应的OpNum字段。
与此同时,如果服务器1上新登陆了用户G,那么服务器1在操作流水线表的未被分配的空间中为用户G创建新的字段,将用户G的信息写入到UserInfoG字段中,并且将其相应OpNum设置为OpNum的最大值+1(=7),此时服务器1上的操作流水表变为如图6所示。
服务器2定时轮询服务器1,当服务器2发现服务器1上的操作流水线表发生了变化时,服务器2查找自己的操作流水线表,获得该操作流水线表中的最大OpNum,并且将所获得的最大OpNum发送到服务器1。具体地说,例如,服务器2查找该存储区中的操作流水线表,如图4所示,并且获得最大OpNum(=5),并将该最大OpNum(=5)发送到服务器1。
服务器1接收该最大OpNum(=5),查找自己的操作流水线表,并且将自己的操作流水线表中的相应OpNum比所接收到的服务器2的最大OpNum要大的UserInfo传送到服务器2。具体地说,如图6所示,用户C的OpNum(=6)和用户G的UserInfoG(=7)大于所接收到的服务器2的最大OpNum(=5),因此将UserInfoC和UserInfoG的发送到服务器2。
服务器2按照上述操作以重写UserInfoC并且将其相应OpNum设置为OpNum的最大值+1(=6),并且发现G是新登陆到服务器1上的用户,且同样按照上述操作,在操作流水线表的未被分配的空间中为用户G创建新的字段,将用户G的信息写入到UserInfoG字段中,并且将其相应OpNum设置为OpNum的最大值+1(=7)。
至此完成了服务器1与服务器2之间的信息同步。
同样,当服务器2上的信息发生变化时,按照如上相同的方式将服务器2上的信息同步到服务器1。
此外,优选地,为了如随后所述的释放存储空间,在每次同步的过程中,在服务器1上还要记录从服务器1同步到服务器2上的数据在服务器1的操作流水线中的OpNum最大值。具体地说,例如,从图7可知从服务器1同步到服务器2的数据有A、B、C、G,并且从图6可知这四个数据在服务器1的操作流水线中的OpNum的最大值是7,那么在服务器1上记录OpNum1(2)=7,其中1表示服务器1,2表示服务器2,7表示从服务器1同步到服务器2上的数据在服务器1的操作流水线中的最大值。
另外,优选地,同样为了如随后所述的释放存储空间,在服务器1上还要记录从服务器2同步到服务器1上的数据在服务器2的操作流水线中的OpNum最大值。从图4、5中可知,E、F是从服务器2同步到服务器1上的数据,而这两个数据在服务器2上的OpNum最大值为2,因此在服务器1上记录OpNum2(1)=2。
当然,对于存在多台服务器的情况,那么对于这多台服务器的每一个而言,这一个服务器上都要记录从该服务器同步到其它服务器的每一个上的数据在该服务器上的操作流水线中的最大OpNum值,并且还要记录从其它服务器的每一个同步到该服务器上的数据在该其它服务器的操作流水线中的最大OpNum值。
此外,还需说明的是,在初始化时,在两个服务器上仅记录了各自登陆用户的情况下,在这两个服务器之间首次进行相互数据同步时,在一个服务器轮询到另一服务器上的操作流水线表变化时,这个服务器不是发送最大OpNum,而是发送OpNum=0的信号。
例如,在服务器1中仅有登陆用户A,那么其相应OpNum=1。在服务器2中仅有登陆用户B,那么同样其相应OpNum=1。在服务器2轮询到服务器1上的操作流水线表发生变化时,即轮询到服务器1上有新登陆用户A时,服务器2向服务器1发送OpNum=0的信号。此后按照与上述相同的操作,服务器1接收该OpNum,查找自己的操作流水线表,并且将自己的操作流水线表中的相应OpNum比所接收到的OpNum要大的UserInfoA传送到服务器2。按照与上述相同的操作,服务器2在操作流水线表的未被分配的空间中为用户A创建新的字段,将用户A的信息写入到UserInfoA字段中,并且将其相应OpNum设置为OpNum的最大值+1(=2),此后改变OpNo的排序状态。
此时,在服务器2的操作流水线表中,UserInfoA(OpNum=2),UserInfoB(OpNum=1)。如果此时在服务器1轮询到服务器2有新登陆用户B时,服务器1向服务器2发送OpNum=0的信号。此后的操作与上述相同。优选地,在这次同步过程中,还可以使用服务器标志字段以仅将例如在服务器2上登陆的用户信息UerInfoB同步到服务器1中,这避免了将已同步的UerInfoA再次发送回服务器1。
当某用户离线的时候,存储此用户信息的空间需要释放,但由于同步的缘故,也就是说,有可能该用户信息没有同步到其它服务器上,因此不能马上释放此用户的空间,但可以根据正在与本机同步的所有机器的最小OpNum(相对于本机的操作流水表),一旦发现某个UserInfo的OpNum小于这个最小OpNum(并且状态是可释放状态才可以),则即可将此UserInfo的存储空间释放。
如图8所示,假设服务器1的操作流水表中有两个离线用户的OpNum值分别为10,13,由于操作流水表1以及其中对应的OpNum1(2)与OpNum1(3)中的最小值为11,因此OpNum为10的用户是已经在所有机器上同步过的,是可以释放其存储空间的,而OpNum为13的用户,由于OpNum1(2)比13小,说明OpNum为13的用户信息在服务器2上尚未同步,因此不能释放其存储空间。
从以上描述可知,通过本发明,解决由于服务器负载均衡的原因而导致的服务器上的用户信息不完全,客户端以此可以获得完整的在线用户信息,实现服务器组对于客户端的透明性,使得客户端不用连接多台服务器已取得相应的资源信息。同步时效性高。用户资源还可以通过共享的方式(比如p2p技术)使它们可以成为其他用户所能应用的资源。

Claims (6)

1.一种多台服务器数据同步方法,所述每个服务器包括操作流水线表,该操作流水线表包括用户字段,该用户字段包括UserInfo用户信息字段以及与UserInfo用户信息字段相对应的OpNum字段,该方法包括步骤:
A、服务器定时轮询另一服务器;
B、当所述服务器轮询到所述另一服务器上的操作流水线表发生变化时,所述服务器查找自己的操作流水线表,获得该操作流水线表中的最大OpNum,并且将所获得的最大OpNum发送到所述另一服务器;
C、所述另一服务器接收所述服务器的操作流水线表中的最大OpNum,查找自己的操作流水线表,并且将自己的操作流水线表中的相应OpNum比所接收到的所述服务器的最大OpNum要大的UserInfo传送到所述服务器;以及
D、所述服务器重写UserInfo并且将其相应OpNum设置为所述服务器中的操作流水线表中的最大OpNum加1。
2.根据权利要求1的多台服务器数据同步方法,其中当所述另一服务器上的登陆用户信息改变时,所述另一服务器将UserInfo改变的相应OpNum设置为该服务器的操作流水线表中的最大OpNum加1。
3.根据权利要求1的多台服务器数据同步方法,其中当有新的用户登陆所述另一服务器上时,所述另一服务器在操作流水线表的未被分配的空间中为新登陆用户创建新的字段,将新登陆用户的信息写入到UserInfo字段中,并且将其相应OpNum设置为该另一服务器的操作流水线表中的最大OpNum加1。
4.根据权利要求3的多台服务器数据同步方法,其中步骤D进一步包括:所述服务器在该操作流水线表的未被分配的空间中为新登陆用户创建新的字段,将新登陆用户的信息写入到UserInfo字段中,并将其相应OpNum设置为该服务器的操作流水线表中的最大OpNum加1。
5.根据权利要求1的多台服务器数据同步方法,其中该操作流水线表还包括OpNo序列号字段,其中每个OpNo索引至相应的用户字段。
6.根据权利要求1的多台服务器数据同步方法,其中用户字段还包括服务器标志位字段,该服务器标志位字段用于标识相应用户是从哪台服务器登陆的。
CN2009101022897A 2009-09-10 2009-09-10 一种多台服务器数据同步方法 Pending CN102025525A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009101022897A CN102025525A (zh) 2009-09-10 2009-09-10 一种多台服务器数据同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009101022897A CN102025525A (zh) 2009-09-10 2009-09-10 一种多台服务器数据同步方法

Publications (1)

Publication Number Publication Date
CN102025525A true CN102025525A (zh) 2011-04-20

Family

ID=43866419

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009101022897A Pending CN102025525A (zh) 2009-09-10 2009-09-10 一种多台服务器数据同步方法

Country Status (1)

Country Link
CN (1) CN102025525A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106470230A (zh) * 2015-08-19 2017-03-01 互联网域名系统北京市工程研究中心有限公司 分布式dns节点数据一致性同步方法和装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060080555A1 (en) * 2004-10-12 2006-04-13 Mitac Technology Corp. Data synchronization systems and methods for PDAS
CN1859171A (zh) * 2005-12-02 2006-11-08 华为技术有限公司 一种网络设备数据管理方法
CN101106477A (zh) * 2006-07-12 2008-01-16 中兴通讯股份有限公司 基于流水号生成增量数据的方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20060080555A1 (en) * 2004-10-12 2006-04-13 Mitac Technology Corp. Data synchronization systems and methods for PDAS
CN1859171A (zh) * 2005-12-02 2006-11-08 华为技术有限公司 一种网络设备数据管理方法
CN101106477A (zh) * 2006-07-12 2008-01-16 中兴通讯股份有限公司 基于流水号生成增量数据的方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106470230A (zh) * 2015-08-19 2017-03-01 互联网域名系统北京市工程研究中心有限公司 分布式dns节点数据一致性同步方法和装置

Similar Documents

Publication Publication Date Title
CN102769667B (zh) 一种id生成方法、装置和系统
CN103873451B (zh) 一种数据同步的方法、设备和系统
TWI740029B (zh) 分散式搜索及索引更新方法、系統、伺服器及電腦設備
CN101969468B (zh) 查询服务器集群系统及查询方法
CN108173691B (zh) 一种跨设备聚合的方法及装置
CN102075580B (zh) 分布式网络设备中同步数据的存储方法及系统
CN104915353B (zh) 分布式数据库下全局主键生成方法和系统
US20140025723A1 (en) Cloud storage system and data storage and sharing method based on the system
CN102333029A (zh) 一种服务器集群系统中的路由方法
CN105227683B (zh) 一种ldap集群数据同步方法及系统
CN103441932A (zh) 一种主机路由表项生成方法及设备
CN108199967A (zh) 路由处理方法及装置
CN103020092A (zh) 懒加载树中定位节点的方法和系统
US11463376B2 (en) Resource distribution method and apparatus in Internet of Things, device, and storage medium
CN109120445A (zh) 一种网络日志数据同步系统及方法
CN103229480A (zh) 分布式存储系统中的数据处理方法及设备、客户端
JP2006221423A (ja) データ配布方法、装置、及び記憶媒体
CN105872073B (zh) 一种基于etcd集群的分布式定时任务系统的设计方法
CN108153494B (zh) 一种io请求处理方法及装置
US20200004720A1 (en) Data center management system and method
CN105207825A (zh) 一种网元快速同步系统及网元快速同步方法
CN102624764A (zh) 同步同一Web应用程序的多个副本的方法和设备
CN105376147B (zh) 即时通讯消息路由寻址方法、接入服务器及系统
CN102025525A (zh) 一种多台服务器数据同步方法
CN104038518A (zh) 信息处理方法、服务器和终端设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: 310012, building 8, building 99, Huaxing Road, Hangzhou, Zhejiang

Applicant after: China Telecom Corporation Limited

Address before: Hangzhou City, Zhejiang province 310005 Moganshan Road No. 118

Applicant before: China Telecom Corporation Limited

WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20110420