CN104331425A - 一种电网监控系统实时数据库的数据同步方法 - Google Patents

一种电网监控系统实时数据库的数据同步方法 Download PDF

Info

Publication number
CN104331425A
CN104331425A CN201410557105.7A CN201410557105A CN104331425A CN 104331425 A CN104331425 A CN 104331425A CN 201410557105 A CN201410557105 A CN 201410557105A CN 104331425 A CN104331425 A CN 104331425A
Authority
CN
China
Prior art keywords
real
time
data
main frame
synchronization
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410557105.7A
Other languages
English (en)
Inventor
曾诗杰
张新坡
刘岩
廖福玮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
XJ Electric Co Ltd
Xuchang XJ Software Technology Co Ltd
Original Assignee
XJ Electric Co Ltd
Xuchang XJ Software Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by XJ Electric Co Ltd, Xuchang XJ Software Technology Co Ltd filed Critical XJ Electric Co Ltd
Priority to CN201410557105.7A priority Critical patent/CN104331425A/zh
Publication of CN104331425A publication Critical patent/CN104331425A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Hardware Redundancy (AREA)

Abstract

本发明涉及一种电网监控系统实时数据库的数据同步方法，属于数据库研究技术领域。本发明通过配置需要同步的实时库名称及其所属主机名，在系统初启动时，主机先将自身指定实时库的内容完全恢复给备机，完成第一次的主备机数据同步，当主机有新数据被写入而发生改变后，将检测到的新入库数据实时复制给备机，完成同步。本发明解决了分布在不同设备的数据同步，且本发明中备机不接受直接写入操作，保证了数据完全与主机一致。同时，由于备机不需要写入实时数据，则备机上的业务处理程序也不需要实际运行，降低了备机的资源占用以及主备机业务处理程序同时出现异常的可能性。

Description

一种电网监控系统实时数据库的数据同步方法
技术领域
本发明涉及一种电网监控系统实时数据库的数据同步方法，属于数据库研究技术领域。
背景技术
电力系统企业内部存在的各种监控系统普遍采用多机冗余技术来实施，即主备机同时接收处理远程采集到的数据。多台服务器独立处理业务数据，可能会带来数据不一致问题，对于后续的业务处理造成不良影响。因此，如何使多台服务器上的数据保持一致，成为系统开发人员重要的考虑问题之一。
发明内容
本发明的目的是提供一种电网监控系统实时数据库的数据同步方法，以解决分布在不同地点的数据自动同步更新、不同服务器的用户数据共享及保护数据库数据一致的问题。
本发明为解决上述技术问题而提供一种电网监控系统实时数据库的数据同步方法该数据同步方法包括以下步骤：
1)配置需要同步的实时数据库名称及其所属计算机名称，以其中一台计算机作为主机；
2)配置同步模式，即采用实时同步模式或采用周期同步模式；
3)当系统初启动时，将主机自身指定实时数据库的内容完全恢复给备机，完成第一次的主备机数据同步；
4)如果通过步骤2)配置为实时同步模式，则实时检测是否有新数据被写入主机自身指定的实时数据库，若有，则将新入库的数据复制给备机，以完成主机和备机实时数据库之间的同步。
5)如果通过步骤2)配置为周期同步模式，则周期检测是否有新数据被写入主机自身指定的实时数据库，若有，则将新入库的数据复制给备机，以完成主机和备机实时数据库之间的同步。
所述步骤1)中配置每个实时数据库及其所属每一台计算机的名称不能为空，也不能重复。
所述步骤2)中配置每个实时数据库的同步模式必须为实时同步模式或者周期同步模式两种同步模式中的一种。
所述步骤4)采用的实时同步过程，即一旦检测有新数据被写入主机自身指定的实时数据库时，则将新入库的数据实时复制给备机。
所述步骤5)中采用的是周期性同步过程，即主机实时数据库不是每次修改都会同步，而是按照设定的周期，将每个周期内变化的数据同步过去。
所述在主机和备机实时数据库之间同步的过程中，主机支持读写操作，备机只支持读操作。
所述在主机和备机实时数据库之间同步的过程中，若发生主备调换，将当前主机实时数据库中的数据完全恢复给指定备机中的实时数据库，该指定备机作为主机按照步骤4)或者5)中过程进行同步。
本发明的有益效果是:本发明采用一主一备或一主多备的方法来同步实时数据库的数据，配置需要同步的实时库名称及其所属主机名，在系统初启动时，主机先将自身指定实时库的内容完全恢复给备机，完成第一次的主备机数据同步，当主机有新数据被写入而发生改变后，将检测到的新入库数据实时复制给备机，完成同步。本发明解决了分布在不同设备的数据同步，且本发明中备机不接受直接写入操作，保证了数据完全与主机一致。同时，由于备机不需要写入实时数据，则备机上的业务处理程序也不需要实际运行，降低了备机的资源占用以及主备机业务处理程序同时出现异常的可能性。
附图说明
图1是实时库数据同步的总原理框图；
图2是实时库数据的同步流程图；
图3是实时库数据恢复的流程图。
具体实施方式
下面结合附图对本发明的具体实施方式作进一步的说明。
本发明提供了电网监控实时数据库的数据同步方法，如图1所示，设置两台或多台计算机，采用一主一备或一主多备的方法来同步实时数据库的数据，配置需要同步的实时库名称及其所属主机名，并自主选择设置实时库同步的各项配置(如：同步模式、复制周期等)。当系统启动时，主机现将自身指定实时库的内容完全恢复给备机，完成第一次的主备机数据同步，主机有新数据被写入而发生改变后，将检测到新入库数据实时或者周期性的复制给备机，完成同步。在此期间，一切的写操作都在主机上进行，发生主备切换时，重复上述过程。其中恢复是指将主机上的源实时库完整恢复到备机目标实时库，同步服务重启或者主备切换时进行复制，而复制指的是仅复制变化更新的数据。该电网监控实时数据库的数据同步方法的具体过程如下：
(1)在两台目标机中装入实时库同步配置工具软件，并建立好实时数据库。
(2)利用实时库同步配置软件配置两台需同步实时库的计算机名称和实时库名称(计算机与实时库名称不能重复，不能为空)，按具体需要设置是否周期性复制及是否合并亢余记录，并设定周期时间。所选用的配置软件尽量选择界面简洁明了的工具，方便快速配置。
(3)分好主备机，在主机的实时库中预先导入一些初始数据，然后启动同步服务，此时实时库同步源程序会进行检测并打包主机中的数据，并将主机中的数据完全恢复给备机实时库，备机会得到主机的初始全部数据，如图3所示。
(4)主备机数据一致后，往主机实时库中写入新数据，实时库同步源程序根据之前的设置情况，打包新修改的数据成包，并发送给备机，备机会实时或周期的得到更改的数据，此时可以读取主备机的数据情况，但仅主机允许写入数据，如图2所示。
(5)若在配置时选择了周期性复制，则实时库同步源程序会根据已设置的时间，进行周期性的复制本周期内的新数据给备机实时库。
(6)若在配置时选择了合并亢余数据，则在做周期性复制的时候，如果在一个周期内，一条记录的某个字段被修改了多次，则只同步最后一次的修改结果。
(7)进行主备切换，实时库数据源程序会打包当前主机中的数据，并发送给备机，完成初始化同步。此时先查询当前的主备机数据的一致性(数据应均为当前主机的数据)，然后在当前主机写入数据，实现同步服务。

Claims (7)

1.一种电网监控系统实时数据库的数据同步方法,其特征在于，该数据同步方法包括以下步骤：
1)配置需要同步的实时数据库名称及其所属计算机名称，以其中一台计算机作为主机；
2)配置同步模式，即采用实时同步模式或采用周期同步模式；
3)当系统初启动时，将主机自身指定实时数据库的内容完全恢复给备机，完成第一次的主备机数据同步；
4)如果通过步骤2)配置为实时同步模式，则实时检测是否有新数据被写入主机自身指定的实时数据库，若有，则将新入库的数据复制给备机，以完成主机和备机实时数据库之间的同步；
5)如果通过步骤2)配置为周期同步模式，则周期检测是否有新数据被写入主机自身指定的实时数据库，若有，则将新入库的数据复制给备机，以完成主机和备机实时数据库之间的同步。
2.根据权利要求1所述的电网监控系统实时数据库的数据同步方法，其特征在于，所述步骤1)中配置每个实时数据库及其所属每一台计算机的名称不能为空，也不能重复。
3.根据权利要求1所述的电网监控系统实时数据库的数据同步方法，其特征在于，所述步骤2)中配置每个实时数据库的同步模式必须为实时同步模式或者周期同步模式两种同步模式中的一种。
4.根据权利要求1所述的电网监控系统实时数据库的数据同步方法，其特征在于，所述步骤4)采用的实时同步过程，即一旦检测有新数据被写入主机自身指定的实时数据库时，则将新入库的数据实时复制给备机。
5.根据权利要求1所述的电网监控系统实时数据库的数据同步方法，其特征在于，所述步骤5)中采用的是周期性同步过程，即主机实时数据库不是每次修改都会同步，而是按照设定的周期，将每个周期内变化的数据同步过去。
6.根据权利要求4或5所述的电网监控系统实时数据库的数据同步方法，其特征在于，所述在主机和备机实时数据库之间同步的过程中，主机支持读写操作，备机只支持读操作。
7.根据权利要求6所述的电网监控系统实时数据库的数据同步方法，其特征在于，所述在主机和备机实时数据库之间同步的过程中，若发生主备调换，将当前主机实时数据库中的数据完全恢复给指定备机中的实时数据库，该指定备机作为主机按照步骤4)或者5)中过程进行同步。
CN201410557105.7A 2014-10-20 2014-10-20 一种电网监控系统实时数据库的数据同步方法 Pending CN104331425A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410557105.7A CN104331425A (zh) 2014-10-20 2014-10-20 一种电网监控系统实时数据库的数据同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410557105.7A CN104331425A (zh) 2014-10-20 2014-10-20 一种电网监控系统实时数据库的数据同步方法

Publications (1)

Publication Number Publication Date
CN104331425A true CN104331425A (zh) 2015-02-04

Family

ID=52406152

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410557105.7A Pending CN104331425A (zh) 2014-10-20 2014-10-20 一种电网监控系统实时数据库的数据同步方法

Country Status (1)

Country Link
CN (1) CN104331425A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105610566A (zh) * 2016-01-06 2016-05-25 烽火通信科技股份有限公司 主备节点间数据实时同步的方法及系统
CN109165228A (zh) * 2018-08-06 2019-01-08 国家电网公司华中分部 智能电网调度控制系统实时数据库监视系统和方法
CN110347652A (zh) * 2019-07-12 2019-10-18 天津凯发电气股份有限公司 一种电能质量管理系统多机数据库同步实现方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6671701B1 (en) * 2000-06-05 2003-12-30 Bentley Systems, Incorporated System and method to maintain real-time synchronization of data in different formats
CN101034364A (zh) * 2007-04-02 2007-09-12 华为技术有限公司 一种实现内存数据备份的方法、装置和系统
CN102013997A (zh) * 2010-11-22 2011-04-13 中兴通讯股份有限公司 电信网管系统中的双机数据备份方法和系统
CN102184192A (zh) * 2011-04-19 2011-09-14 中兴通讯股份有限公司 数据定时同步方法及系统
CN103064976A (zh) * 2013-01-14 2013-04-24 浙江水利水电专科学校 基于主动数据库技术的同异构dbms间数据交换方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6671701B1 (en) * 2000-06-05 2003-12-30 Bentley Systems, Incorporated System and method to maintain real-time synchronization of data in different formats
CN101034364A (zh) * 2007-04-02 2007-09-12 华为技术有限公司 一种实现内存数据备份的方法、装置和系统
CN102013997A (zh) * 2010-11-22 2011-04-13 中兴通讯股份有限公司 电信网管系统中的双机数据备份方法和系统
CN102184192A (zh) * 2011-04-19 2011-09-14 中兴通讯股份有限公司 数据定时同步方法及系统
CN103064976A (zh) * 2013-01-14 2013-04-24 浙江水利水电专科学校 基于主动数据库技术的同异构dbms间数据交换方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105610566A (zh) * 2016-01-06 2016-05-25 烽火通信科技股份有限公司 主备节点间数据实时同步的方法及系统
CN109165228A (zh) * 2018-08-06 2019-01-08 国家电网公司华中分部 智能电网调度控制系统实时数据库监视系统和方法
CN110347652A (zh) * 2019-07-12 2019-10-18 天津凯发电气股份有限公司 一种电能质量管理系统多机数据库同步实现方法
CN110347652B (zh) * 2019-07-12 2022-03-18 天津凯发电气股份有限公司 一种电能质量管理系统多机数据库同步实现方法

Similar Documents

Publication Publication Date Title
CN102981931B (zh) 虚拟机备份方法及装置
CN110162471B (zh) 一种基于容器云的压力测试方法及系统
CN102917072B (zh) 用于数据服务器集群之间进行数据迁移的设备、系统及方法
CN107423303B (zh) 数据同步的方法和系统
CN103744906A (zh) 一种数据同步系统、方法及装置
US9965215B1 (en) Disk synchronizing
CN108270726B (zh) 应用实例部署方法及装置
CN103019875B (zh) 一种实现数据库双主改造的方法及装置
US10726042B2 (en) Replication control using eventually consistent meta-data
US10365978B1 (en) Synchronization of snapshots in a distributed consistency group
CN103294787A (zh) 分布式数据库系统的多副本存储方法和系统
CN104239476A (zh) 一种数据库同步的方法、装置及系统
JP2013114684A (ja) バーチャルマシンの管理システム及び管理方法
CN105589887A (zh) 分布式文件系统的数据处理方法及分布式文件系统
CN104935618A (zh) 一种集群部署方法
CN103970834A (zh) 一种异构数据库同步系统中增量数据同步故障的恢复方法
CN104021200A (zh) 一种数据库的数据同步方法和装置
CN106294496B (zh) 一种基于hadoop集群的数据迁移方法和工具
CN110413565A (zh) 一种多台存储设备同步快照的方法、设备及介质
CN104331425A (zh) 一种电网监控系统实时数据库的数据同步方法
WO2017014814A1 (en) Replicating memory volumes
CN107729515A (zh) 一种数据同步的方法、装置及存储介质
CN111158955B (zh) 一种基于卷复制的高可用系统以及多服务器数据同步方法
CN104517067A (zh) 访问数据的方法、装置及系统
CN106682141B (zh) 一种基于业务操作日志的数据同步方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150204