CN107506403A - 一种网格化信息系统及数据同步变动方法 - Google Patents

一种网格化信息系统及数据同步变动方法 Download PDF

Info

Publication number
CN107506403A
CN107506403A CN201710655222.0A CN201710655222A CN107506403A CN 107506403 A CN107506403 A CN 107506403A CN 201710655222 A CN201710655222 A CN 201710655222A CN 107506403 A CN107506403 A CN 107506403A
Authority
CN
China
Prior art keywords
data
gridding
database
node
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710655222.0A
Other languages
English (en)
Other versions
CN107506403B (zh
Inventor
崔恒志
张明明
何金陵
窦昊翔
查易艺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Information and Telecommunication Branch of State Grid Jiangsu Electric Power Co Ltd
Original Assignee
Information and Telecommunication Branch of State Grid Jiangsu Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Information and Telecommunication Branch of State Grid Jiangsu Electric Power Co Ltd filed Critical Information and Telecommunication Branch of State Grid Jiangsu Electric Power Co Ltd
Priority to CN201710655222.0A priority Critical patent/CN107506403B/zh
Publication of CN107506403A publication Critical patent/CN107506403A/zh
Application granted granted Critical
Publication of CN107506403B publication Critical patent/CN107506403B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及一种网格化信息系统及数据同步变动方法，针对各个网格化节点分别引入数据同步模块，再结合内存数据库，针对数据更新操作，以及更新数据，实现及时获取，并分别由各个网格化节点及时获取，实现同步更新，并且各个网格化节点针对数据更新进行结果判断，保证数据同步变动的成功率，提高网格化信息系统的数据同步变动效率。

Description

一种网格化信息系统及数据同步变动方法
技术领域
本发明涉及一种网格化信息系统及数据同步变动方法，属于信息同步技术领域。
背景技术
当前信息系统网格化是一种趋势，借助网格化信息系统可以实现管理扁平化和信息精准化。网格化信息系统中信息同步是必须的，而这始终是个难题。比如当社区A属于网格化信息系统一个节点，当社区A对某个居民的婚姻状况改为已婚时，网格中所有社区的该人员信息都需要即使更新为已婚。但网格中节点的数据库往往是独立的，要将所有的信息确保百分之百同步所有节点的数据库，是个当前网格化信息系统的难题。
发明内容
本发明所要解决的技术问题是提供一种采用全新架构设计，能够有效提高数据同步效率的网格化信息系统。
本发明为了解决上述技术问题采用以下技术方案：本发明设计了一种网格化信息系统，包括各个网格化节点，各个网格化节点分别包括其所对应的数据库，各个网格化节点分别连接到数据总线上；还包括内存数据库，各个网格化节点分别还包括其所对应的数据同步模块；内存数据库与数据总线相连接通信；
内存数据库通过数据总线接收来自发生数据变动的数据库所对应网格化节点的上传数据变动信息，该数据变动信息包括发生数据变动的数据库所对应的数据操作、以及相应变动数据；
各个网格化节点分别通过数据总线获得内存数据库所接收的数据操作、以及相应变动数据，并分别据此判断网格化节点所对应的数据库是否包含该变动数据，是则针对网格化节点所对应的数据库执行相应数据操作；否则不做任何操作；
各个网格化节点上的数据同步模块分别基于其所对应数据库执行相应数据操作，校验该相应数据操作是否成功，是则向内存数据库反馈同步成功信息；否则通知对应网格化节点执行重复相应数据操作。
作为本发明的一种优选技术方案：还包括数据变动校验服务模块，数据变动校验服务模块与所述数据总线相连接通信；数据变动校验服务模块通过数据总线获得所述内存数据库接收到的数据操作、以及相应变动数据，并据此校验所有网格化节点是否均对该相应数据操作进行了判断或响应。
本发明所述一种网格化信息系统采用以上技术方案与现有技术相比，具有以下技术效果：本发明所设计一种网格化信息系统，针对各个网格化节点分别引入数据同步模块，再结合内存数据库，针对数据更新操作，以及更新数据，实现及时获取，并分别由各个网格化节点及时获取，实现同步更新，并且各个网格化节点针对数据更新进行结果判断，保证数据同步变动的成功率，提高网格化信息系统的数据同步变动效率。
与上述设计相对应，本发明还要解决的技术问题是提供一种基于网格化信息系统的数据同步变动方法，采用全新架构设计，能够有效提高数据同步效率。
本发明为了解决上述技术问题采用以下技术方案：本发明设计了一种基于网格化信息系统的数据同步变动方法，所述所有网格化节点分别与通过数据总线与内存数据库相通信，判断内存数据库是否接收到数据操作、以及相应变动数据，据此，当网格化信息系统中所有数据库均没有发生数据变动时，则不做任何处理；当网格化信息系统中出现发生数据变动的数据库时，通过如下步骤，实现网格化信息系统的数据同步变动；
步骤A. 发生数据变动的数据库所对应的网格化节点，通过数据总线向内存数据库上传数据变动信息，该数据变动信息包括发生数据变动的数据库所对应的数据操作、以及相应变动数据；
步骤B. 所有网格化节点分别做如下操作：网格化节点通过数据总线获得内存数据库所接收的数据操作、以及相应变动数据，并据此判断该网格化节点所对应的数据库是否包含该变动数据，是则针对该网格化节点所对应的数据库执行相应数据操作；否则不做任何操作；
步骤C. 步骤B中执行相应数据操作的各个网格化节点分别做如下操作：网格化节点上的数据同步模块校验所执行的相应数据操作是否成功，是则向内存数据库反馈同步成功信息；否则通知该网格化节点重复执行该相应数据操作，并经步骤C由对应的数据同步模块进行校验，直至该网格化节点上的相应数据操作成功。
4. 根据权利要求3所述一种网格化信息系统的数据同步变动方法，其特征在于，步骤C之后还包括步骤D如下：
步骤D. 数据变动校验服务模块通过数据总线获得所述内存数据库接收到的数据操作、以及相应变动数据，并据此校验所有网格化节点是否均执行了步骤B和步骤C，是则所有网格化节点完成针对该相应变动数据的同步变动，并向内存数据库反馈同步成功信息；否则针对未参与步骤B和步骤C的网格化节点，通知其执行步骤B和步骤C。
作为本发明的一种优选技术方案：所有网格化节点按预设间隔周期时长、分别与通过数据总线与内存数据库相通信，判断内存数据库是否接收到数据操作、以及相应变动数据。
作为本发明的一种优选技术方案：所述内存数据库中构建数据库信息变动表和数据库同步信息表；其中，所述内存数据库将所接收来自发生数据变动的数据库所对应网格化节点上传的数据变动信息，记录于数据库信息变动表中，并同时将此数据变动信息，记录在数据库同步信息表中，作为待同步数据；
所述所有网格化节点分别与通过数据总线与内存数据库相通信，扫描内存数据库中的数据库同步信息表，判断是否存在待同步数据，即判断内存数据库是否接收到数据操作、以及相应变动数据；
所述步骤C中，网格化节点上数据同步模块向内存数据库反馈的同步成功信息，记录于数据库同步信息表中，并对应于相应待同步数据；
所述步骤D中，数据变动校验服务模块向内存数据库反馈的同步成功信息，记录于内存数据库的数据库同步信息表中，并对应于相应待同步数据。
本发明所述一种基于网格化信息系统的数据同步变动方法采用以上技术方案与现有技术相比，具有以下技术效果：本发明所设计一种基于网格化信息系统的数据同步变动方法，针对各个网格化节点分别引入数据同步模块，再结合内存数据库，针对数据更新操作，以及更新数据，实现及时获取，并分别由各个网格化节点及时获取，实现同步更新，并且各个网格化节点针对数据更新进行结果判断，保证数据同步变动的成功率，提高网格化信息系统的数据同步变动效率。
附图说明
图1是本发明所设计一种网格化信息系统的模块架构示意图。
具体实施方式
下面结合说明书附图对本发明的具体实施方式作进一步详细的说明。
如图1所示，本发明设计了一种网格化信息系统，包括各个网格化节点，各个网格化节点分别包括其所对应的数据库，各个网格化节点分别连接到数据总线上；还包括内存数据库和数据变动校验服务模块，各个网格化节点分别还包括其所对应的数据同步模块；内存数据库与数据总线相连接通信。
内存数据库通过数据总线接收来自发生数据变动的数据库所对应网格化节点的上传数据变动信息，该数据变动信息包括发生数据变动的数据库所对应的数据操作、以及相应变动数据。
各个网格化节点分别通过数据总线获得内存数据库所接收的数据操作、以及相应变动数据，并分别据此判断网格化节点所对应的数据库是否包含该变动数据，是则针对网格化节点所对应的数据库执行相应数据操作；否则不做任何操作。
各个网格化节点上的数据同步模块分别基于其所对应数据库执行相应数据操作，校验该相应数据操作是否成功，是则向内存数据库反馈同步成功信息；否则通知对应网格化节点执行重复相应数据操作。
数据变动校验服务模块与所述数据总线相连接通信；数据变动校验服务模块通过数据总线获得所述内存数据库接收到的数据操作、以及相应变动数据，并据此校验所有网格化节点是否均对该相应数据操作进行了判断或响应。
基于上述所设计网格化信息系统，本发明进一步设计了基于该网格化信息系统的数据同步变动方法，所述所有网格化节点按预设间隔周期时长、分别与通过数据总线与内存数据库相通信，判断内存数据库是否接收到数据操作、以及相应变动数据，据此，当网格化信息系统中所有数据库均没有发生数据变动时，则不做任何处理；当网格化信息系统中出现发生数据变动的数据库时，具体通过如下步骤，实现网格化信息系统的数据同步变动。
步骤A. 发生数据变动的数据库所对应的网格化节点，通过数据总线向内存数据库上传数据变动信息，该数据变动信息包括发生数据变动的数据库所对应的数据操作、以及相应变动数据。
步骤B. 所有网格化节点分别做如下操作：网格化节点通过数据总线获得内存数据库所接收的数据操作、以及相应变动数据，并据此判断该网格化节点所对应的数据库是否包含该变动数据，是则针对该网格化节点所对应的数据库执行相应数据操作；否则不做任何操作。
步骤C. 步骤B中执行相应数据操作的各个网格化节点分别做如下操作：网格化节点上的数据同步模块校验所执行的相应数据操作是否成功，是则向内存数据库反馈同步成功信息；否则通知该网格化节点重复执行该相应数据操作，并经步骤C由对应的数据同步模块进行校验，直至该网格化节点上的相应数据操作成功。
步骤D. 数据变动校验服务模块通过数据总线获得所述内存数据库接收到的数据操作、以及相应变动数据，并据此校验所有网格化节点是否均执行了步骤B和步骤C，是则所有网格化节点完成针对该相应变动数据的同步变动，并向内存数据库反馈同步成功信息；否则针对未参与步骤B和步骤C的网格化节点，通知其执行步骤B和步骤C。
将本发明所设计网格化信息系统及数据同步变动方法应用到实际工作当中，所述内存数据库中构建数据库信息变动表和数据库同步信息表；其中，数据库信息变动表具体设计如下表1所示：
字段名称 描述
ID 记录变更信息的ID号。
nodeID 记录连接在总线的节点号。
DBName 涉及节点数据变更的数据库信息。
SQL 记录数据变更的具体SQL语句。
TIME 记录数据变更的具体时间。
FLAG 表示数据同步更新是否完成的标志。
表1
数据库同步信息表具体设计如下表2所示：
字段名称 描述
ID 记录节点同步ID。
nodeIDs 获取数据同步更新完成的节点。
sID 变动信息的ID号。和数据库信息变动表关联。
TIME 记录该条信息最后更新的时间。
表2
所述内存数据库将所接收来自发生数据变动的数据库所对应网格化节点上传的数据变动信息，记录于数据库信息变动表中，并同时将此数据变动信息，记录在数据库同步信息表中，作为待同步数据。
所述所有网格化节点分别与通过数据总线与内存数据库相通信，扫描内存数据库中的数据库同步信息表，判断是否存在待同步数据，即判断内存数据库是否接收到数据操作、以及相应变动数据。
所述步骤C中，网格化节点上数据同步模块向内存数据库反馈的同步成功信息，记录于数据库同步信息表中，并对应于相应待同步数据。
所述步骤D中，数据变动校验服务模块向内存数据库反馈的同步成功信息，记录于内存数据库的数据库同步信息表中，并对应于相应待同步数据。
上述技术方案所设计网格化信息系统及数据同步变动方法，针对各个网格化节点分别引入数据同步模块，再结合内存数据库，针对数据更新操作，以及更新数据，实现及时获取，并分别由各个网格化节点及时获取，实现同步更新，并且各个网格化节点针对数据更新进行结果判断，保证数据同步变动的成功率，提高网格化信息系统的数据同步变动效率。
上面结合附图对本发明的实施方式作了详细说明，但是本发明并不限于上述实施方式，在本领域普通技术人员所具备的知识范围内，还可以在不脱离本发明宗旨的前提下做出各种变动。

Claims (6)

1.一种网格化信息系统，包括各个网格化节点，各个网格化节点分别包括其所对应的数据库，各个网格化节点分别连接到数据总线上；其特征在于：还包括内存数据库，各个网格化节点分别还包括其所对应的数据同步模块；内存数据库与数据总线相连接通信；
内存数据库通过数据总线接收来自发生数据变动的数据库所对应网格化节点的上传数据变动信息，该数据变动信息包括发生数据变动的数据库所对应的数据操作、以及相应变动数据；
各个网格化节点分别通过数据总线获得内存数据库所接收的数据操作、以及相应变动数据，并分别据此判断网格化节点所对应的数据库是否包含该变动数据，是则针对网格化节点所对应的数据库执行相应数据操作；否则不做任何操作；
各个网格化节点上的数据同步模块分别基于其所对应数据库执行相应数据操作，校验该相应数据操作是否成功，是则向内存数据库反馈同步成功信息；否则通知对应网格化节点执行重复相应数据操作。
2.根据权利要求1所述一种网格化信息系统，其特征在于：还包括数据变动校验服务模块，数据变动校验服务模块与所述数据总线相连接通信；数据变动校验服务模块通过数据总线获得所述内存数据库接收到的数据操作、以及相应变动数据，并据此校验所有网格化节点是否均对该相应数据操作进行了判断或响应。
3.一种基于权利要求2所述一种网格化信息系统的数据同步变动方法，其特征在于，所述所有网格化节点分别与通过数据总线与内存数据库相通信，判断内存数据库是否接收到数据操作、以及相应变动数据，据此，当网格化信息系统中所有数据库均没有发生数据变动时，则不做任何处理；当网格化信息系统中出现发生数据变动的数据库时，通过如下步骤，实现网格化信息系统的数据同步变动；
步骤A. 发生数据变动的数据库所对应的网格化节点，通过数据总线向内存数据库上传数据变动信息，该数据变动信息包括发生数据变动的数据库所对应的数据操作、以及相应变动数据；
步骤B. 所有网格化节点分别做如下操作：网格化节点通过数据总线获得内存数据库所接收的数据操作、以及相应变动数据，并据此判断该网格化节点所对应的数据库是否包含该变动数据，是则针对该网格化节点所对应的数据库执行相应数据操作；否则不做任何操作；
步骤C. 步骤B中执行相应数据操作的各个网格化节点分别做如下操作：网格化节点上的数据同步模块校验所执行的相应数据操作是否成功，是则向内存数据库反馈同步成功信息；否则通知该网格化节点重复执行该相应数据操作，并经步骤C由对应的数据同步模块进行校验，直至该网格化节点上的相应数据操作成功。
4.根据权利要求3所述一种网格化信息系统的数据同步变动方法，其特征在于，步骤C之后还包括步骤D如下：
步骤D. 数据变动校验服务模块通过数据总线获得所述内存数据库接收到的数据操作、以及相应变动数据，并据此校验所有网格化节点是否均执行了步骤B和步骤C，是则所有网格化节点完成针对该相应变动数据的同步变动，并向内存数据库反馈同步成功信息；否则针对未参与步骤B和步骤C的网格化节点，通知其执行步骤B和步骤C。
5.根据权利要求3或4所述一种网格化信息系统的数据同步变动方法，其特征在于，所有网格化节点按预设间隔周期时长、分别与通过数据总线与内存数据库相通信，判断内存数据库是否接收到数据操作、以及相应变动数据。
6.根据权利要求5所述一种网格化信息系统的数据同步变动方法，其特征在于，所述内存数据库中构建数据库信息变动表和数据库同步信息表；其中，所述内存数据库将所接收来自发生数据变动的数据库所对应网格化节点上传的数据变动信息，记录于数据库信息变动表中，并同时将此数据变动信息，记录在数据库同步信息表中，作为待同步数据；
所述所有网格化节点分别与通过数据总线与内存数据库相通信，扫描内存数据库中的数据库同步信息表，判断是否存在待同步数据，即判断内存数据库是否接收到数据操作、以及相应变动数据；
所述步骤C中，网格化节点上数据同步模块向内存数据库反馈的同步成功信息，记录于数据库同步信息表中，并对应于相应待同步数据；
所述步骤D中，数据变动校验服务模块向内存数据库反馈的同步成功信息，记录于内存数据库的数据库同步信息表中，并对应于相应待同步数据。
CN201710655222.0A 2017-08-03 2017-08-03 一种网格化信息系统及数据同步变动方法 Active CN107506403B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710655222.0A CN107506403B (zh) 2017-08-03 2017-08-03 一种网格化信息系统及数据同步变动方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710655222.0A CN107506403B (zh) 2017-08-03 2017-08-03 一种网格化信息系统及数据同步变动方法

Publications (2)

Publication Number Publication Date
CN107506403A true CN107506403A (zh) 2017-12-22
CN107506403B CN107506403B (zh) 2020-06-23

Family

ID=60690585

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710655222.0A Active CN107506403B (zh) 2017-08-03 2017-08-03 一种网格化信息系统及数据同步变动方法

Country Status (1)

Country Link
CN (1) CN107506403B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112732838A (zh) * 2021-01-21 2021-04-30 上海海事大学 一种基于软件工程用数据库数据同步更新系统及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1791027A (zh) * 2005-12-26 2006-06-21 北京航空航天大学 网格信息模型系统及模型化处理网格信息的方法
CN101902473A (zh) * 2010-07-22 2010-12-01 武汉中地数码科技有限公司 基于网格gis的数据同步更新实现方法
CN102065137A (zh) * 2010-12-21 2011-05-18 山东浪潮齐鲁软件产业股份有限公司 一种网络数据库表数据应用程序同步的方法
US20140109110A1 (en) * 2012-10-15 2014-04-17 Oracle International Corporation System and method for supporting asynchronous message processing in a distributed data grid
CN103916482A (zh) * 2014-04-21 2014-07-09 合肥盈云信息科技有限公司 一种基于sqlite的数据同步传输方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1791027A (zh) * 2005-12-26 2006-06-21 北京航空航天大学 网格信息模型系统及模型化处理网格信息的方法
CN101902473A (zh) * 2010-07-22 2010-12-01 武汉中地数码科技有限公司 基于网格gis的数据同步更新实现方法
CN102065137A (zh) * 2010-12-21 2011-05-18 山东浪潮齐鲁软件产业股份有限公司 一种网络数据库表数据应用程序同步的方法
US20140109110A1 (en) * 2012-10-15 2014-04-17 Oracle International Corporation System and method for supporting asynchronous message processing in a distributed data grid
US20140108760A1 (en) * 2012-10-15 2014-04-17 Oracle International Corporation System and method for supporting smart buffer management in a distributed data grid
CN103916482A (zh) * 2014-04-21 2014-07-09 合肥盈云信息科技有限公司 一种基于sqlite的数据同步传输方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112732838A (zh) * 2021-01-21 2021-04-30 上海海事大学 一种基于软件工程用数据库数据同步更新系统及方法

Also Published As

Publication number Publication date
CN107506403B (zh) 2020-06-23

Similar Documents

Publication Publication Date Title
CN108847925A (zh) 一种基于树状结构的分片区块链生成方法
CN103297529B (zh) 基于时间戳的树型结构数据同步方法
CN109639413A (zh) 一种基于移动自组网的区块链系统
CN107301546A (zh) 随机数生成和应用方法及装置
CN104468163B (zh) 容灾网络组网的方法、装置及容灾网络
CN100531060C (zh) 基于流水号生成增量数据的方法
CN107276765A (zh) 区块链中共识的处理方法及装置
CN109165944A (zh) 基于区块链的多方签名认证方法、装置、设备及存储介质
CN107209746B (zh) 模型参数融合方法及装置
CN103399888B (zh) 电网模型数据的差分同步方法及系统
CN109815344B (zh) 基于参数共享的网络模型训练系统、方法、装置和介质
CN108494828A (zh) 一种节点数据的更新方法、介质、装置和计算设备
CN113194126B (zh) 一种基于区块链的横向联邦学习模型构建方法
CN112118321A (zh) 一种工业区块链的实用拜占庭容错共识机制优化系统
CN107070578A (zh) 一种适用于多同步域时间触发以太网的主从时钟同步方法
CN109634959A (zh) 一种区块索引方法及区块索引装置
CN107784016B (zh) 数据同步控制装置和数据同步系统及方法
CN106203916A (zh) 一种分布式的取件码生成方法
CN107506403A (zh) 一种网格化信息系统及数据同步变动方法
CN110472970A (zh) 一种基于区块链的预先生成区块方法及系统
CN109657000B (zh) 一种轨道交通综合监控系统的实时数据同步方法及装置
CN106230927A (zh) 联系人同步方法、装置及系统
CN106454767A (zh) 一种业务数据同步方法、装置及系统
CN107908776A (zh) 基于事务‑项目关联矩阵的频繁模式网络挖掘算法及系统
CN105634947A (zh) 一种机会移动社会网络中基于热点的消息转发方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant