CN100390747C - 全程化实时系统中基于内存数据库的软双机备份方法 - Google Patents

全程化实时系统中基于内存数据库的软双机备份方法 Download PDF

Info

Publication number
CN100390747C
CN100390747C CNB2006100383748A CN200610038374A CN100390747C CN 100390747 C CN100390747 C CN 100390747C CN B2006100383748 A CNB2006100383748 A CN B2006100383748A CN 200610038374 A CN200610038374 A CN 200610038374A CN 100390747 C CN100390747 C CN 100390747C
Authority
CN
China
Prior art keywords
data
memory database
master server
machine
standby
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CNB2006100383748A
Other languages
English (en)
Other versions
CN1808394A (zh
Inventor
唐诚
林锦歆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Asialnfo Technology (Nanjing) Co., Ltd.
Original Assignee
LINKAGE SYSTEM INTEGRATION CO Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LINKAGE SYSTEM INTEGRATION CO Ltd filed Critical LINKAGE SYSTEM INTEGRATION CO Ltd
Priority to CNB2006100383748A priority Critical patent/CN100390747C/zh
Publication of CN1808394A publication Critical patent/CN1808394A/zh
Application granted granted Critical
Publication of CN100390747C publication Critical patent/CN100390747C/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Hardware Redundancy (AREA)

Abstract

基于内存数据库的软双机方法,采用下述方法:1).在主服务器上各应用程序通过调用应用api接口将业务数据存入主服务器内存数据库中,分别写入增量数据区和全量数据区中;2).主服务器上数据同步进程将主服务器内存数据库中的增量数据以数据流的形式通过socket发送给备用机的数据同步进程;3).备用机的数据同步进程将接收到的数据写入备用机内存数据库中的全量数据区中。4).以上1-3步骤完成了一次主备机间数据的热备,当主服务器内存数据库的增量数据为空时表明两台服务器间已经完全同步。该发明的特点是:数据集中:所有需要热备的数据都保存在内存数据库中。热备和冷备效率高。

Description

全程化实时系统中基于内存数据库的软双机备份方法
技术领域
本发明涉及双机热备的方法,尤其是服务器双机基于内存数据库的软双机方法。
背景技术
目前的服务器双机热备有两种典型的方式,一种是比较标准的基于磁盘阵列的方式,两台服务器通过一个共享的存储设备(一般是共享的磁盘阵列或存储区域网SAN),数据存放在共享的存储设备上。当主服务器处理业务时,直接在存储设备上进行读写。当主服务器出现故障切换后,备用服务器也同样读取该存储设备上的数据,实现双机热备。另一种方式是通过纯软件的方式,一般称为纯软件方式或镜像方式(Mirror),通过镜像软件将主服务器磁盘上的变动数据实时复制到另一台服务器的磁盘上,这样同样的数据就在两台服务器的磁盘上各存在一份,如果主服务器出现故障,可以及时切换到备用服务器。
纯软件方式具有以下优点:
1.避免了磁盘阵列的单点故障:对于双机热备,本身即是防范由于单个设备的故障导致服务中断,但磁盘阵列恰恰又形成了一个新的单点。(比如,服务器的可靠系数是99.9%,磁盘阵列的可靠系数是99.95%,则纯软双机的可靠系数是1-99.9%×99.9%=99.99%,而基于磁盘阵列的双机热备系统的可靠系数则会是略低于99.95%。
2.节约投资:不需购买昂贵的磁盘阵列。
3.不受距离的限制:两台服务器不需受SCSI电缆的长度限制(光纤通道的磁盘阵列也不受距离限制,但投资会大得多)。这样,可以更灵活地部署服务器,包括通过物理位置的距离来提高安全性(容灾)。
以上介绍的磁盘方式和纯软件方式的共同缺点就是对于主备服务器内存中的业务数据都无法做到互备,而在一些对处理性能要求高的业务应用系统(如在线计费系统OCS,其对每一笔会话的响应时间要求<200ms),因此大量的业务处理数据被保存在内存中,而主备机因故障切换时必须不影响当前正在进行的业务,这样就必须保证主备机内存数据的同步。
发明内容
本发明目的是,提出一种主备机内存数据的同步方法,尤其是基于内存数据库的软双机方法,就是针对现有双机热备技术无法实现内存中的数据同步问题而提出的。
本发明的技术解决方案是:
一、本发明的系统基于以下几个部件组成:
1.主备服务器上的应用aip接口
2.主备服务器上的内存数据库(数据区分为增量数据区和全量数据区)
3.主备服务器上的数据同步进程
二、本发明的技术解决方案是:
基于内存数据库的软双机方法,1.在主服务器上各应用程序通过调用应用api接口将业务数据存入主服务器内存数据库中,分别写入增量数据区和全量数据区中;
2.主服务器上数据同步进程将主服务器内存数据库中的增量数据以数据流的形式通过socket发送给备用机的数据同步进程;
3.备用机的数据同步进程将接收到的数据写入备用机内存数据库中的全量数据区中。
4.以上1-3步骤完成了一次主备机间数据的热备,当主服务器内存数据库的增量数据为空时表明两台服务器间已经完全同步。
该发明的特点和主要优势在于:
1.数据集中:所有需要热备的数据都保存在内存数据库中。
2.热备效率高:采用增量库方案保证实时性,热备一次时间<=5ms
3.冷备效率高:采用全量库方案,冷备一次时间<=10s,具体参见附图和实施例。(注:采用ORACLE公司的TimesTen作为内存数据库)
实际使用表明,基于内存数据库的软双机技术完成一条业务数据的热备时间<=5ms,完成一次冷备份时间<=10s。
附图说明
图1是本发明内存数据库的双机结构示意图。
图2是本发明热备场景下的处理过程场景时序图
图3是本发明冷备场景下的处理过程场景时序图
具体实施方式
一、热备场景下的处理过程:(如图所示)
1.主服务器上的应用进程通过调用api接口将业务数据写入本机的内存数据库中(分别写至增量数据区和全量数据区中)
2.主服务器上的数据同步进程读取本机内存数据库中的一条增量数据,发送至备用机的数据同步进程,发送成功后删除该条增量数据。该步骤循环处理至增量数据区中无数据。
3.备用机的数据同步进程将接收到的数据写入本机的内存数据库中(只写入全量数据区中)。该步骤循环处理至无数据接收到。
二、冷备场景下的处理过程:
1.主服务器出现故障,备用机启用。
2.备用机上的应用进程通过调用api接口将业务数据写入本机的内存数据库中(分别写至增量数据区和全量数据区中)
3.主服务器重启成功,主服务器上的数据同步进程发送一条冷备请求至备用机的数据同步进程。
4.备用机的数据同步进程收到冷备请求,将备用机内存数据库锁定,清空增量数据,并将内存数据库的数据文件复制一份,然后解锁内存数据库,将复制出的数据文件发送至主服务器的数据同步进程。
5.主服务器的数据同步进程将接收到的数据文件替换本机当前的数据文件。
6.开始热备场景……根据附图的场景时序图。
本发明采用Socket为本发明提供一套丰富的方法和属性。Socket类允许使用协议执行异步和同步数据传输。Socket类遵循异步方法的.NET Framework命名模式;适用于同步操作模式:
·如果当前使用的是面向连接的协议(如TCP),则服务器可以使用Listen方法侦听连接。Accept方法处理任何传入的连接请求,并返回可用于与远程主机进行数据通信的Socket。可以使用此返回的Socket来调用SendReceive方法。如果要指定本地IP地址和端口号,请在调用Listen方法之前先调用Bind方法。如果不调用Bind,基础服务提供程序将为您分配这些值。此后,可以使用LocalEndPoint属性来标识分配给Socket的IP地址和端口号。如果想连接到侦听主机,请调用Connect方法。若要进行数据通信,请调用SendReceive方法。
若要在执行过程中使用单独的线程处理通信,采用适用于异步操作模式的方法。
·如果当前使用的是面向连接的协议(如TCP),则可使用Socket、BeginConnectEndConnect方法来连接侦听主机。通过使用BeginSendEndSend方法,或者使用BeginReceiveEndReceive方法,可以进行异步数据通信。可以使用BeginAcceptEndAccept处理传入的连接请求。如果对一个套接字执行多个异步操作,它们不一定按启动时的顺序完成。当数据发送和数据接收完成之后,可使用Shutdown方法来禁用Socket。在调用Shutdown之后,可调用Close方法来释放与Socket关联的所有资源。Socket类允许使用SetSocketOption方法来配置Socket。可使用GetSocketOption方法来检索这些设置。

Claims (2)

1.基于内存数据库的软双机方法,其特征是采用下述方法:1).在主服务器上各应用程序通过调用应用api接口将业务数据存入主服务器内存数据库中,分别写入增量数据区和全量数据区中;2).主服务器上数据同步进程将主服务器内存数据库中的增量数据以数据流的形式通过socket发送给备用机的数据同步进程;3).备用机的数据同步进程将接收到的数据写入备用机内存数据库中的全量数据区中;4).以上1-3步骤完成了一次主备机间数据的热备,当主服务器内存数据库的增量数据为空时表明两台服务器间已经完全同步;
主服务器上的应用进程通过调用api接口将业务数据写入本机的内存数据库中后,其同步进程读取本机内存数据库中的一条增量数据,发送至备用机的数据同步进程,发送成功后删除该条增量数据;该步骤循环处理至增量数据区中无数据;且备用机的数据同步进程将接收到的数据写入本机的内存数据库的全量数据区中;该步骤循环处理至无数据接收到。
2.由权利要求1所述的基于内存数据库的软双机方法,其特征是主服务器出现故障,备用机启用;备用机上的应用进程通过调用api接口将业务数据写入本机的内存数据库中,且分别写至增量数据区和全量数据区中;主服务器重启成功,主服务器上的数据同步进程发送一条冷备请求至备用机的数据同步进程;备用机的数据同步进程收到冷备请求,将备用机内存数据库锁定,清空增量数据,并将内存数据库的数据文件复制一份,然后解锁内存数据库,将复制出的数据文件发送至主服务器的数据同步进程;主服务器的数据同步进程将接收到的数据文件替换本机当前的数据文件。
CNB2006100383748A 2006-02-20 2006-02-20 全程化实时系统中基于内存数据库的软双机备份方法 Active CN100390747C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB2006100383748A CN100390747C (zh) 2006-02-20 2006-02-20 全程化实时系统中基于内存数据库的软双机备份方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB2006100383748A CN100390747C (zh) 2006-02-20 2006-02-20 全程化实时系统中基于内存数据库的软双机备份方法

Publications (2)

Publication Number Publication Date
CN1808394A CN1808394A (zh) 2006-07-26
CN100390747C true CN100390747C (zh) 2008-05-28

Family

ID=36840303

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2006100383748A Active CN100390747C (zh) 2006-02-20 2006-02-20 全程化实时系统中基于内存数据库的软双机备份方法

Country Status (1)

Country Link
CN (1) CN100390747C (zh)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101192214B (zh) * 2006-11-27 2010-09-29 中兴通讯股份有限公司 用于内存数据库内容变化后实时通知业务的处理方法
CN101299710B (zh) * 2007-04-30 2012-10-10 中兴通讯股份有限公司 内存数据库数据同步的方法
CN101242356B (zh) * 2007-12-06 2010-08-18 中兴通讯股份有限公司 Iptv系统中内存数据库的实现方法及iptv系统
CN101262325B (zh) * 2008-04-21 2011-07-20 深圳南瑞科技有限公司 变电站监控双机的切换设备
CN102137132B (zh) * 2010-01-26 2014-06-04 腾讯科技(深圳)有限公司 数据同步系统及方法
CN102262591B (zh) 2010-05-31 2014-03-19 国际商业机器公司 用于内存复制系统进行垃圾回收的方法和系统
CN102289518B (zh) * 2011-09-13 2013-03-27 盛乐信息技术(上海)有限公司 音频指纹检索库的更新方法及系统
CN102750202B (zh) * 2012-06-06 2015-07-08 宇龙计算机通信科技(深圳)有限公司 数据保护方法和装置
CN102981777B (zh) * 2012-10-29 2016-04-13 中国铁道科学研究院 一种数据存取的控制方法及系统
CN103020242B (zh) * 2012-12-19 2015-11-25 中国人民解放军第二炮兵装备研究院第四研究所 基于oracle数据库的数据同步方法
CN103500130B (zh) * 2013-09-11 2015-07-29 上海爱数软件有限公司 一种对双机热备数据进行实时备份的方法
CN103532753B (zh) * 2013-10-11 2016-08-17 中国电子科技集团公司第二十八研究所 一种基于内存换页同步的双机热备方法
CN103780615B (zh) * 2014-01-20 2017-02-01 五八同城信息技术有限公司 一种在多个服务器间客户端会话数据共享方法
CN105719414A (zh) * 2014-12-05 2016-06-29 航天信息股份有限公司 Pos终端的开票方法及装置、以及开票服务器端
CN107038094A (zh) * 2017-04-27 2017-08-11 紫光华山信息技术有限公司 一种数据备份方法及装置
CN108170768B (zh) * 2017-12-25 2023-03-24 腾讯科技(深圳)有限公司 数据库同步方法、装置及可读介质
CN108614876B (zh) * 2018-04-26 2021-02-02 武汉斗鱼网络科技有限公司 一种基于Redis数据库的系统和数据处理方法
CN108959548B (zh) * 2018-07-02 2023-04-18 创新先进技术有限公司 业务请求的处理方法及装置
CN109542690A (zh) * 2018-11-30 2019-03-29 安徽继远软件有限公司 一种备份数据库数据的方法和装置
CN109936481B (zh) 2019-03-22 2021-06-18 北京达佳互联信息技术有限公司 主从服务器切换方法、装置、电子设备及存储介质
CN110297730A (zh) * 2019-07-04 2019-10-01 北京谷数科技有限公司 一种去仲裁节点的存储双活解决方法及系统
CN110727733B (zh) * 2019-09-25 2023-07-14 许昌许继软件技术有限公司 一种主备服务器系统及数据同步方法
CN112416656B (zh) * 2020-12-08 2022-08-26 卡斯柯信号有限公司 一种用于车站应用服务器的数据离线存储方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5721918A (en) * 1996-02-06 1998-02-24 Telefonaktiebolaget Lm Ericsson Method and system for fast recovery of a primary store database using selective recovery by data type
US5842222A (en) * 1996-10-04 1998-11-24 Taiwan Semiconductor Manufacturing Company, Ltd. Production information system enhanced for availability
CN1659522A (zh) * 2002-04-19 2005-08-24 电脑联合想象公司 灾难恢复方法与系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5721918A (en) * 1996-02-06 1998-02-24 Telefonaktiebolaget Lm Ericsson Method and system for fast recovery of a primary store database using selective recovery by data type
US5842222A (en) * 1996-10-04 1998-11-24 Taiwan Semiconductor Manufacturing Company, Ltd. Production information system enhanced for availability
CN1659522A (zh) * 2002-04-19 2005-08-24 电脑联合想象公司 灾难恢复方法与系统

Also Published As

Publication number Publication date
CN1808394A (zh) 2006-07-26

Similar Documents

Publication Publication Date Title
CN100390747C (zh) 全程化实时系统中基于内存数据库的软双机备份方法
CN110113420B (zh) 基于nvm的分布式消息队列管理系统
CN101519078B (zh) 综合监控系统多区域数据同步方法
CN104361030A (zh) 一种具有任务分发功能的分布式缓存架构及缓存方法
CN104469391B (zh) 一种基于云平台的数字电视内容分发系统及方法
CN103488546A (zh) 一种支持多级别数据和数据库在线并发备份与恢复方法
EP4213038A1 (en) Data processing method and apparatus based on distributed storage, device, and medium
CN102780836B (zh) 高标清兼容、高安全性的新闻非编网络系统
CN103795801A (zh) 一种基于实时应用集群的元数据集群设计方法
CN102609479A (zh) 一种内存数据库节点复制方法
CN106919473A (zh) 一种数据灾备系统及业务处理方法
CN103064761B (zh) 一种数据同步方法、设备和系统
EP1684456B1 (en) A method for data redundancy of HLR
CN100581165C (zh) 一种客户系统与服务系统数据同步的方法及系统
CN105516284A (zh) 一种集群数据库分布式存储的方法和装置
CN105719414A (zh) Pos终端的开票方法及装置、以及开票服务器端
CN102857531A (zh) 一种基于云计算的远程交互式系统
CN103617195A (zh) 一种用于MySQL数据库的数据同步系统和方法
CN105242988A (zh) 分布式文件系统和分布式文件系统的数据备份方法
CN107291387B (zh) 一种双控磁盘阵列的磁盘接入方法
CN101588404B (zh) 针对通用集成电路卡上多应用管理的实现方法及装置
WO2024103598A1 (zh) 一种数据备份方法、装置、设备及非易失性可读存储介质
CN107621994A (zh) 一种数据快照创建的方法及装置
CN112667698B (zh) 一种基于融媒体平台的MongoDB数据同步方法
CN110704520A (zh) 一种业务处理的方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Assignee: LIAN Technology (Nanjing) Co., Ltd.

Assignor: Linkage System Integration Co., Ltd.

Contract fulfillment period: 2008.11.4 to 2026.11.29 contract change

Contract record no.: 2008320001106

Denomination of invention: Soft co-standby method based on memory database

Granted publication date: 20080528

License type: exclusive license

Record date: 20081124

LIC Patent licence contract for exploitation submitted for record

Free format text: EXCLUSIVE LICENSE; TIME LIMIT OF IMPLEMENTING CONTACT: 2008.11.4 TO 2026.11.29; CHANGE OF CONTRACT

Name of requester: LIANCHUANG SCIENCE ( NANJING ) CO., LTD.

Effective date: 20081124

ASS Succession or assignment of patent right

Owner name: LIANCHUANG SCIENCE ( NANJING ) CO., LTD.

Free format text: FORMER OWNER: NANJING LIANCHUANG SCIENCE CO., LTD.

Effective date: 20091127

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20091127

Address after: Building 16, world window software park, No. 12 Huai gate, Jiangsu, Nanjing

Patentee after: LIAN Technology (Nanjing) Co., Ltd.

Address before: 16 floor, No. 12 Huai gate, Nanjing, Jiangsu

Patentee before: Linkage System Integration Co., Ltd.

C56 Change in the name or address of the patentee

Owner name: LINKAGE-ASIAINFO TECHNOLOGY (NANJING) CO., LTD.

Free format text: FORMER NAME: LINKAGE TECHNOLOGY (NANJING) CO., LTD.

CP01 Change in the name or title of a patent holder

Address after: 210013 No. 16 building, world window software park, No. 12 Huai gate, Jiangsu, Nanjing

Patentee after: LINKAGE-ASIAINFO TECHNOLOGIES (NANJING), INC.

Address before: 210013 No. 16 building, world window software park, No. 12 Huai gate, Jiangsu, Nanjing

Patentee before: Linkage System Integration Co., Ltd.

C56 Change in the name or address of the patentee

Owner name: ASIALNFO TECHNOLOGY (NANJING) CO., LTD.

Free format text: FORMER NAME: LINKAGE-ASIAINFO TECHNOLOGY (NANJING) CO., LTD.

CP01 Change in the name or title of a patent holder

Address after: 210013 No. 16 building, world window software park, No. 12 Huai gate, Jiangsu, Nanjing

Patentee after: Asialnfo Technology (Nanjing) Co., Ltd.

Address before: 210013 No. 16 building, world window software park, No. 12 Huai gate, Jiangsu, Nanjing

Patentee before: LINKAGE-ASIAINFO TECHNOLOGIES (NANJING), INC.