CN1426244A - 数据主备内存处理方法 - Google Patents

数据主备内存处理方法 Download PDF

Info

Publication number
CN1426244A
CN1426244A CN 01139144 CN01139144A CN1426244A CN 1426244 A CN1426244 A CN 1426244A CN 01139144 CN01139144 CN 01139144 CN 01139144 A CN01139144 A CN 01139144A CN 1426244 A CN1426244 A CN 1426244A
Authority
CN
China
Prior art keywords
data
standby
district
internal memory
main
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 01139144
Other languages
English (en)
Other versions
CN100426875C (zh
Inventor
王宏伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MEDCONOVA MEDICAL TECHNOLOGY Co.,Ltd.
Original Assignee
Shanghai No 2 Research Institute of ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai No 2 Research Institute of ZTE Corp filed Critical Shanghai No 2 Research Institute of ZTE Corp
Priority to CNB011391448A priority Critical patent/CN100426875C/zh
Publication of CN1426244A publication Critical patent/CN1426244A/zh
Application granted granted Critical
Publication of CN100426875C publication Critical patent/CN100426875C/zh
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Hardware Redundancy (AREA)

Abstract

一种数据主备内存处理方法，主要是关于数据管理的双内存处理，将被加载数据的内存分成主备区，并有相应的主区和备区指针，切换主区和备区指针，实现主备区的转换，运行时，必须先对修改前的备区数据，保证与主区数据完全一致，再将“新”数据同步到备区；之后，如同步完成，则切换主备区指针，同步数据有效，如同步出错，则发出指令，同步失败。本发明的优点时数据处理速度快，数据回流速度极快和可靠性高。

Description

数据主备内存处理方法
技术领域
本发明涉及一种在内存中管理数据的方法，其在通讯或计算机领域都有较强的实用价值。
背景技术
在GSM(移动电话全球通)系统运行过程中，需要通过OMC(Operationand Maintenance Center，操作维护中心)调整BSC(Base Station Controller，基站控制器)上的数据，但又不能影响现有业务的正常进行，并且要求在数据同步出现错误时还能迅速回滚到修改之前的状态。BSC是一个实时控制系统，它的MP(Main Processor，主处理机)采用热备份技术，保证MP上数据的一致性，对提高整个系统的稳定性有着重要的意义。
为此，在现有系统中，普遍采取的方法是：
当系统启动后，数据被加载到内存中。在外部存储器上有一个与之对应的工作目录W；一个临时目录T，用来存储从OMC传来的同步数据；还有一个用于存放回滚数据的目录R。但是，通过OMC发起一次数据同步需要如下步骤：
1)将内存中的数据存放到回滚目录R下，以备在发生修改错误时能够进行数据恢复；
2)将OMC传来的数据存放到临时目录T下；
3)重新加载临时目录T下的数据；
4)如果加载成功，新数据生效，同时将内存中的新数据写到工作目录W下；如果加载失败，把回滚目录R下的数据重新加载到内存中；
5)数据同步结束。
上述处理有明显的不足：
(1)由于在同步过程中需要多次写盘、读盘操作，数据同步速度较慢；
(2)在数据同步过程中的任何告警/恢复消息都会被丢弃，而且由于同步时间较长，这种情况出现的概率也很高。
发明内容
本发明的目的在于克服现有技术的缺陷，提供一种数据主备内存处理方法，以提高数据处理的速度和同时保证数据的一致性。
本发明的技术解决方案是：引入主备内存(即“双内存”)技术，通过牺牲一部分内存空间，换取处理上的高效性和完整性，以解决现有系统中存在的不足。
为了实现上述目的，本发明数据主备内存处理方法是：内存中的每一个表的记录、索引和队列都设定了两个内存区域，且分别有指针指向这两个区域，在任何状态任何时候都有一个内存区域是主用的，另一个区域是备用的；在系统正常运行过程中，业务所需的所有数据的获取和设置以及各种状态的同步都是在主内存中进行；当发起前后台数据同步的时候，一般需要以下几个步骤：
①修改前的数据准备，如进行主备区数据拷贝，保证当前备区数据和主区的数据完全一致，
②将新的数据先同步到备区，
③如果同步完成且没有错误，则将指向两个区域的指针切换，原来的备区成为主区，同步过来的数据生效，同步完成；否则忽略本次同步，修改的数据失效，同步失败。
对于主备MP的数据同步，处理方法类似。
本发明的优势在于以下三点：
①本发明在数据同步时，仅进行内存数据操作，不涉及外部存储器，因此，数据处理速度快；
②在同步数据时，只对备内存进行操作；而且，在失败时，数据回滚速度极快，实际上不需要回滚动作，只要丢弃本次操作即可，对现有业务没有任何影响；
③由于在同步的过程中只进行内存操作，处理时间大大缩短；而且保证了数据同步期间在主区发生的状态修改能够同时在进行数据更新的备区中得到体现，因此，数据同步后的正确性能够保证，提高了整个系统的鲁棒性。
附图说明
图1是本发明的外存器数据在内存中的映象示意图。
图2是本发明中单个数据表在内存的存储形式示意图。
图3是本发明的前后台数据同步流程图。
图4是本发明中前后台数据同步示意图。
图5是本发明主备数据同步过程示意图。
图6是本发明主备数据同步过程中的告警与恢复过程示意图。
图7是应用本发明的一个具体例子的分析示意图。
具体实施方式
下面根据图1～图7给出本发明的实施例，
请参阅图1所示，它表示外存储器数据在内存中的映象，
内存数据块A和B在系统运行的不同时刻互为主备区域：当数据块A是主用时，数据块B为备用；反之亦然。
请参阅图2所示，它表示单个数据表在内存的存储方式，是对图1的细化。
对于每个关系表，都有一个表描述信息块，其中有两个指针，一个为主区指针，另一个为备区指针，分别指向主备两个区域，标志着所指内存块在系统中处于主用或备用状态。当需要主备内存切换时，只要把两个指针指向的地址交换一下即可完成，大大加快了处理速度。
请参阅图3所示，它揭示了一次前后台数据同步的简单流程。
由于OMC与MP上的数据库采用不同的数据模型，我们通过CMIS(Common Management Information Service，公共管理信息服务)命令实现了异构数据库系统的同步。当从OMC发来一条CMIS命令后，在MP上首先进行主备区数据拷贝，将主区的数据、索引和队列全部复制到备区；然后根据CMIS命令对备区的数据进行更新；如果操作失败，则给OMC回一条失败消息，不需要进行任何处理即可实现数据的回滚；如果没有出现错误，切换主备数据区指针即可使“新”数据立即生效，数据同步成功结束。
如果需要参照其它相关数据表，则被参照表也要进行主备区数据拷贝，以保证一致性检查顺利通过。
请参阅图4所示，它是图3成功流程的另一种表示方法，更加清楚地揭示了同步过程中MP主备区数据和指针的变化。
步骤1：进行主备区数据拷贝；
步骤2：接收同步数据，对备区的数据进行更新；
步骤3：切换主备数据区指针。
请参阅图5所示，它是一次主备MP数据同步的简单流程。
步骤1：当备机收到主备同步开始消息后，将所有关系表进行一次主备区数据复制(为了简化处理)；
步骤2’：清空需要同步表的备区数据；
步骤2：将主机主区中的数据同步到备机的备区；
步骤3：同步成功后，切换主备数据区指针使数据生效。
请参阅图6所示，它是同步过程中的告警同步与恢复流程，即对多种同步过程共存的处理。
在一次数据同步过程中，可能会涉及多条记录的修改，只有当所有修改完毕后才进行主备内存的切换；而在此过程中会有告警同步消息上报(其他形式的同步)，需要修改记录的状态。为了防止告警同步与恢复信息的丢失，如果在发生告警同步与恢复的同时也在进行前后台数据同步，则需要同时修改主备区记录的状态。这样当同步完成，主备区指针切换后，状态同步信息也不会丢失。
步骤1：进行主备区数据拷贝；
步骤2：接收同步数据，对备区的数据进行更新；
步骤3’：如果在数据同步过程中有告警同步消息上报，则对主区和备区状态同时进行修改；
步骤3：同步成功后，切换主备数据区指针。
请参阅图7所示，它一个具体案例处理流程，是对图4、图5和图6的综合。
现以修改小区参数为例来说明如何利用主备内存保证数据更新的快速和一致性。
在实际系统中，一次数据同步一般都会包含前后台同步和主备MP同步。同步过程大致可以拆分为如下步骤：
步骤71：当从OMC发来修改小区参数的CMIS命令后，首先对小区数据表C进行主备区数据拷贝，由于需要参照站点表S中的参数进行一致性检查，所以同时对S表进行主备区数据拷贝；
步骤72：根据CMIS命令对主机C表备区数据进行更新；
步骤73：如果这时收到小区告警同步消息，则对C表主备区记录同时进行状态修改；
步骤74：如果操作失败，则给OMC回一条失败消息，本次操作结束；否则，切换C表主备数据区指针，使数据立即生效。由于S表数据只在进行一致性检查时用，并没有进行数据更新，所以不需要进行主备区指针切换；
步骤75：如果主备MP通讯正常，则向备机发起主备同步，收到主备同步开始命令后，备机将所有表(包括C和S表)进行主备区数据复制；
步骤76：备机发现需要同步的表只有C，则清空C表备区数据；
步骤77：将主机传来的数据同步到备机C表的备区；
步骤78：切换备机C表主备数据区指针，使数据立即生效，操作正常结束。
通过以上分析，通过对内存中的数据采用主备内存(双内存)的管理方法，能够大幅度提高数据同步速度，而且保证了在数据同步过程中的告警同步与恢复消息能够得到正常响应，确保了数据同步过程中数据状态的一致性。

Claims (5)

1.一种数据主备内存处理方法，其步骤包括：
a.先把被加载数据的前台的内存分成主区和备区，内存中的每一个表的记录、索引和队列都设定在该两个内存区上，分别有主区指针和备区指针指向这两个区，在任何状态、任何时候都有一个内存区是主用的，另一个区是备用的，在系统正常运行过程中，业务所需的所有数据的获取和设置以及各种状态的同步都是在主内存中进行的；
b.当发起前后台数据同步的时候，前台主要执行以下几步：
①修改前应保证当前备区数据与主区数据完全一致；
②将新的数据先同步到备区；
③如果同步完成且没有错误，则将指向两个区域的指针切换，原来的备区就立刻成为主区，同步过来的数据也就生效，同步完成；否则忽略本次同步，修改的数据也就失效，同步失败。
2.根据权利要求1所述的数据主备内存处理方法，其特征在于：所说的修改前应保证当前备区数据与主区数据完全一致是指进行主备区数据拷贝。
3.根据权利要求1所述的数据主备内存处理方法，其特征在于：发起数据同步的前后台，它们的数据库采用不同的数据模型，则后台应先发一条公共管理信息服务命令，前台接收该公共管理信息服务命令后，首先进行主备区数据拷贝，将主区的数据、索引、和队列全部复制到备区；然后根据该公共管理信息服务命令，接收同步数据，对备区的数据进行更新：如果操作失败，前台向后台回一条失败消息；如果操作成功，则切换主备数据区指针。
4.根据权利要求1所述的数据主备内存处理方法，其特征在于：数据同步发生于前台主备机，其步骤包括：
步骤1：当备机收到主备同步开始消息后，将所有关系表进行一次主备区数据复制，
步骤2’：清空需要同步表的备区数据，
步骤2：将主机主区中的数据同步到备机的备区，
步骤3：同步成功后，切换主备数据区指针使数据生效。
5.根据权利要求1或2或3或4所述的数据主备内存处理方法，其特征在于：在数据同步过程中如果有告警同步消息上报，则对主区和备区状态同时进行修改。
CNB011391448A 2001-12-20 2001-12-20 数据主备内存处理方法 Expired - Lifetime CN100426875C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB011391448A CN100426875C (zh) 2001-12-20 2001-12-20 数据主备内存处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB011391448A CN100426875C (zh) 2001-12-20 2001-12-20 数据主备内存处理方法

Publications (2)

Publication Number Publication Date
CN1426244A true CN1426244A (zh) 2003-06-25
CN100426875C CN100426875C (zh) 2008-10-15

Family

ID=4675070

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB011391448A Expired - Lifetime CN100426875C (zh) 2001-12-20 2001-12-20 数据主备内存处理方法

Country Status (1)

Country Link
CN (1) CN100426875C (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100336025C (zh) * 2004-08-20 2007-09-05 中兴通讯股份有限公司 一种内存数据库同步数据的方法和装置
CN100417266C (zh) * 2005-03-24 2008-09-03 中兴通讯股份有限公司 通信系统中解决单板双向依赖的软件下载方法
CN100428155C (zh) * 2004-07-07 2008-10-22 华为技术有限公司 通信设备的升级方法
CN100463444C (zh) * 2005-07-20 2009-02-18 中兴通讯股份有限公司 一种呼叫数据主备同步的方法
WO2013082759A1 (zh) * 2011-12-06 2013-06-13 华为技术有限公司 一种数据访问方法及系统
CN103164384A (zh) * 2011-12-15 2013-06-19 中国银联股份有限公司 多机系统共享内存的同步实现方法及其系统
CN104077405A (zh) * 2014-07-08 2014-10-01 国家电网公司 时序类型数据存取方法
US8949178B2 (en) 2008-12-10 2015-02-03 Alibaba Group Holding Limited Method and system for efficient data synchronization
CN107436898A (zh) * 2016-05-27 2017-12-05 北京京东尚科信息技术有限公司 定期清除数据库数据的方法和系统
CN109343979A (zh) * 2018-09-28 2019-02-15 珠海沙盒网络科技有限公司 一种配置管理方法及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6304980B1 (en) * 1996-03-13 2001-10-16 International Business Machines Corporation Peer-to-peer backup system with failure-triggered device switching honoring reservation of primary device
CN1109416C (zh) * 2000-04-25 2003-05-21 华为技术有限公司 交换机的主备倒换方法及其实现装置

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100428155C (zh) * 2004-07-07 2008-10-22 华为技术有限公司 通信设备的升级方法
CN100336025C (zh) * 2004-08-20 2007-09-05 中兴通讯股份有限公司 一种内存数据库同步数据的方法和装置
CN100417266C (zh) * 2005-03-24 2008-09-03 中兴通讯股份有限公司 通信系统中解决单板双向依赖的软件下载方法
CN100463444C (zh) * 2005-07-20 2009-02-18 中兴通讯股份有限公司 一种呼叫数据主备同步的方法
US9727576B2 (en) 2008-12-10 2017-08-08 Alibaba Group Holding Limited Method and system for efficient data synchronization
US8949178B2 (en) 2008-12-10 2015-02-03 Alibaba Group Holding Limited Method and system for efficient data synchronization
WO2013082759A1 (zh) * 2011-12-06 2013-06-13 华为技术有限公司 一种数据访问方法及系统
CN103164384A (zh) * 2011-12-15 2013-06-19 中国银联股份有限公司 多机系统共享内存的同步实现方法及其系统
CN103164384B (zh) * 2011-12-15 2016-05-18 中国银联股份有限公司 多机系统共享内存的同步实现方法及其系统
CN104077405A (zh) * 2014-07-08 2014-10-01 国家电网公司 时序类型数据存取方法
CN104077405B (zh) * 2014-07-08 2018-06-08 国家电网公司 时序类型数据存取方法
CN107436898A (zh) * 2016-05-27 2017-12-05 北京京东尚科信息技术有限公司 定期清除数据库数据的方法和系统
CN107436898B (zh) * 2016-05-27 2020-06-05 北京京东尚科信息技术有限公司 定期清除数据库数据的方法和系统和计算机可读存储介质
CN109343979A (zh) * 2018-09-28 2019-02-15 珠海沙盒网络科技有限公司 一种配置管理方法及系统

Also Published As

Publication number Publication date
CN100426875C (zh) 2008-10-15

Similar Documents

Publication Publication Date Title
CN110113420B (zh) 基于nvm的分布式消息队列管理系统
CN101102577B (zh) 无线通信基站系统前后台数据库表数据增量同步方法
CN102955720B (zh) 一种提高ext文件系统稳定性的方法
CN103078927B (zh) 一种key-value数据分布式缓存系统及其方法
US11269902B2 (en) Time series data management method, device, and apparatus
CN1852455A (zh) 一种数据容灾系统及其容灾方法
CN107870954B (zh) 一种分布式数据库的扩展方法及装置
CN1283063C (zh) 通信设备中配置数据的方法及装置
CN1426244A (zh) 数据主备内存处理方法
US20230098190A1 (en) Data processing method, apparatus, device and medium based on distributed storage
CN1286288C (zh) 一种内存数据库主备同步的方法
EP1684456B1 (en) A method for data redundancy of HLR
EP3026574A1 (en) Affair processing method and device
CN1429037A (zh) 移动通信系统中基于实时操作系统的处理器双工装置及方法
CN100512474C (zh) 一种通讯系统主备板存储版本自动同步的方法
CN116400855A (zh) 一种数据处理方法和数据存储系统
CN101252464B (zh) 双机系统和双机在线升级的方法
CN1835444B (zh) 一种无线网络控制器多处理单元静态参数同步系统及方法
CN1275476C (zh) 移动通讯系统中使用共享内存的群集系统及其实现方法
CN102982033B (zh) 小文件的存储方法及系统
CN102385624B (zh) 一种面向分布式文件系统的日志数据组织的方法
CN116303789A (zh) 多分片多副本数据库并行同步方法、装置及可读介质
CN1682215A (zh) 数据库同步
CN112328512B (zh) 一种应用于多控存储系统的缓存同步系统及方法
CN113905054B (zh) 基于RDMA的Kudu集群数据同步方法、装置、系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
ASS Succession or assignment of patent right

Owner name: SHENZHENG CITY ZTE CO., LTD.

Free format text: FORMER OWNER: SHENZHENG CITY ZTE CO., LTD. SHANGHAI SECOND INSTITUTE

Effective date: 20030722

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20030722

Applicant after: Shenzhen ZTE Corp.

Applicant before: Shenzhen ZTE Co.,Ltd. Shanghai Second Research Institute

C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: BEIJING KELIN VISION TECHNOLOGY +TRADE CO., LTD.

Free format text: FORMER OWNER: ZTE CORPORATION

Effective date: 20130809

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: 518057 SHENZHEN, GUANGDONG PROVINCE TO: 100055 XICHENG, BEIJING

TR01 Transfer of patent right

Effective date of registration: 20130809

Address after: 100055 B, block 717-718, Xicheng District International Center, 27 Binhe Road, Beijing, China

Patentee after: BEIJING KELIN VISUAL FIELD SCIENCE & TRADE Co.,Ltd.

Address before: 518057 Nanshan District high tech Industrial Park, Guangdong, South Road, science and technology, ZTE building, legal department

Patentee before: ZTE Corp.

ASS Succession or assignment of patent right

Owner name: HUZHOU MEDCONOVA MEDICAL TECHNOLOGY CO., LTD.

Free format text: FORMER OWNER: BEIJING KELIN VISION TECHNOLOGY +TRADE CO., LTD.

Effective date: 20131104

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: 100055 XICHENG, BEIJING TO: 313000 HUZHOU, ZHEJIANG PROVINCE

TR01 Transfer of patent right

Effective date of registration: 20131104

Address after: Sunny Industrial Park No. 1555 313000 Zhejiang Province, Huzhou City Road No. 5 building two floor East

Patentee after: MEDCONOVA MEDICAL TECHNOLOGY Co.,Ltd.

Address before: 100055 B, block 717-718, Xicheng District International Center, 27 Binhe Road, Beijing, China

Patentee before: BEIJING KELIN VISUAL FIELD SCIENCE & TRADE Co.,Ltd.

DD01 Delivery of document by public notice

Addressee: MEDCONOVA MEDICAL TECHNOLOGY Co.,Ltd.

Document name: Notification to Pay the Fees

CX01 Expiry of patent term
CX01 Expiry of patent term

Granted publication date: 20081015

DD01 Delivery of document by public notice

Addressee: Zuo Yijie

Document name: Notice of expiration and termination of patent right

DD01 Delivery of document by public notice