CN113342845A - 数据同步方法、计算机设备及可读存储介质 - Google Patents
数据同步方法、计算机设备及可读存储介质 Download PDFInfo
- Publication number
- CN113342845A CN113342845A CN202110702134.8A CN202110702134A CN113342845A CN 113342845 A CN113342845 A CN 113342845A CN 202110702134 A CN202110702134 A CN 202110702134A CN 113342845 A CN113342845 A CN 113342845A
- Authority
- CN
- China
- Prior art keywords
- data
- server
- change information
- database
- intranet
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 56
- 230000008859 change Effects 0.000 claims abstract description 122
- 230000010354 integration Effects 0.000 claims abstract description 83
- 230000001360 synchronised effect Effects 0.000 claims description 27
- 238000004891 communication Methods 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims 2
- 230000005540 biological transmission Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 238000011161 development Methods 0.000 description 4
- 230000003993 interaction Effects 0.000 description 3
- 238000002955 isolation Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/604—Tools and structures for managing or administering access control systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2221/00—Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/21—Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/2141—Access rights, e.g. capability lists, access control lists, access tables, access matrices
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Computing Systems (AREA)
- Computational Linguistics (AREA)
- Automation & Control Theory (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据同步方法,数据同步方法的步骤包括:数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息;将所述数据变化信息发送至连接的第一内网服务器,以供所述第一内网服务器将所述数据变化信息写入与所述第一内网服务器连接的第二内网服务器,其中所述第二内网服务器包括第二数据库,所述第二数据库与所述第一内网服务器中的应用对应。本发明还公开了一种计算机设备及可读存储介质。本申请通过在外网服务器与内网服务器之间设置数据集成中心服务器,通过数据集成中心服务器实现了外网服务器与内网服务器的数据同步,避免数据泄露。
Description
技术领域
本发明涉及数据传输技术领域,尤其涉及数据同步方法、计算机设备及可读存储介质。
背景技术
企业多采用内外网隔离的方式部署企业系统,目的是为了保护企业内部敏感数据,防止黑客攻击。但由于企业经营的需要,还是不可避免地需要与外网的外部系统进行信息交互。例如企业与外界的交易数据的传输需要在企业系统和外部系统同时建立数据库进行交易数据的存储和交互,然而现有技术实现跨系统传输数据需要双方系统的开发,开发成本高,并且双方系统的开发实现数据传输容易造成数据泄露。
发明内容
本发明的主要目的在于提供一种数据同步方法、计算机设备及可读存储介质,旨在解决内网系统与外网系统数据同步易造成数据泄露的问题。
为实现上述目的,本发明提供一种数据同步方法,应用于数据集成中心服务器,所述数据同步方法的步骤包括:
数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息;
将所述数据变化信息发送至连接的第一内网服务器,以供所述第一内网服务器将所述数据变化信息写入与所述第一内网服务器连接的第二内网服务器,其中所述第二内网服务器包括第二数据库,所述第二数据库与所述第一内网服务器中的应用对应。
可选地,所述第一数据库为Mysql数据库,所述第二数据库为Sqlserver数据库。
可选地,所述数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息的步骤包括:
获取所述数据集成中心服务器的访问权限;
根据所述访问权限获取所述外网服务器的数据变化信息。
可选地,所述将所述数据变化信息发送至连接的第一内网服务器的步骤包括:
将所述数据变化信息转换为预设格式;
将转换为预设格式的所述数据变化信息发送至所述第一内网服务器。
可选地,所述将所述数据变化信息发送至连接的第一内网服务器的步骤之前,还包括:
获取所述第一内网服务器的内网IP地址映射的外网IP地址以及所述数据集成中心服务器对应的IP地址;
在所述外网IP地址与所述数据集成中心服务器对应的IP地址匹配时,执行将所述数据变化信息发送至连接的第一内网服务器的步骤。
可选地,所述数据对接方法包括:
获取所述第一内网服务器的待同步数据,其中,所述数据集成中心服务器通过http接口建立与第一内网服务器的数据通信链路连接;
将所述待同步数据传输至所述外网服务器中的第一数据库。
可选地,所述数据同步方法应用于第二内网服务器,所述数据对接方法的步骤包括:
接收到第一内网服务器发送的数据变化信息后,根据所述数据变化信息匹配第二数据库,所述数据变化信息由所述数据集成中心服务器连接的外网服务器中的第一数据库得到,所述数据变化信息由所述数据集成中心服务器发送至所述第一内网服务器;
将所述数据变化信息写入所述第二数据库。
可选地,所述根据所述数据变化信息匹配第二数据库的步骤之前,还包括:
判断所述第一内网服务器的内网IP地址是否在预存的白名单列表内;
若所述第一内网服务器的内网IP地址在预存的白名单列表内,则执行根据所述数据变化信息匹配第二数据库的步骤。
此外,为实现上述目的,本发明还提供一种计算机设备,所述计算机设备包括:存储器、处理器,其中,所述存储器上存储有数据同步程序,所述数据同步程序被所述处理器执行时实现如上所述的数据同步方法的步骤。
此外,为实现上述目的,本发明还提供一种可读存储介质,所述可读存储介质存储有数据同步程序,所述数据同步程序被处理器执行时实现如上所述的数据同步方法的步骤。
本发明实施例提出的一种数据同步方法、计算机设备及可读存储介质,在内网服务器与外网服务器之间建立数据集成中心服务器,通过所述数据集成中心服务器定时查询外网服务器的数据变化信息,进而根据所述数据变化信息调用内网服务器的预设端口并将所述数据变化信息传输至内网服务器,所述数据集成中心服务器还可以通过获取内网服务器的待同步数据并将所述待同步数据传输至外网服务器中,从而实现内网服务器与外网服务器之间的数据同步,不需重新开发内网服务器与外网服务器,减少了数据同步成本,同时避免了数据泄露。
附图说明
图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图;
图2为本发明数据同步方法第一实施例的流程示意图;
图3为本发明数据同步方法的计算机设备的结构示意图;
图4为本发明数据同步方法第一实施例的结构示意图;
图5为本发明数据同步方法第二实施例步骤S10的细化流程示意图;
图6为本发明数据同步方法第三实施例的流程示意图;
图7为本发明数据同步方法第四实施例的流程示意图;
图8为本发明数据同步方法第四实施例的结构示意图;
图9为本发明数据同步方法第五实施例的流程示意图。
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例的主要解决方案是:数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息;将所述数据变化信息发送至连接的第一内网服务器,以供所述第一内网服务器将所述数据变化信息写入与所述第一内网服务器连接的第二内网服务器,其中所述第二内网服务器包括第二数据库,所述第二数据库与所述第一内网服务器中的应用对应。
如图1所示,图1是本发明实施例方案涉及的硬件运行环境的终端结构示意图。
本发明实施例终端为服务器(外网服务器或内网服务器),所述服务器可以是指能对网络中其它设备(如用户终端)提供服务的计算机系统。如果一个个人电脑能够对外提供文件传输协议(FileTransfer Protocol,简称FTP)服务,也可以叫服务器。从狭义范围上讲,服务器专指某些高性能计算机,能通过网络,对外提供服务,其相对于普通的个人电脑来说,稳定性、安全性、性能等方面都要求更高,因此在CPU、芯片组、内存、磁盘系统、网络等硬件和普通的个人电脑有所不同。
如图1所示,该终端可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括输入单元比如键盘(Keyboard)等等,可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatilememory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及数据同步程序。
在图1所示的终端中,网络接口1004主要用于连接后台服务器,与后台服务器进行数据通信;用户接口1003主要用于连接客户端(用户端),与客户端进行数据通信;而处理器1001可以用于调用存储器1005中存储的数据同步程序,并执行以下操作:
数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息;
将所述数据变化信息发送至连接的第一内网服务器,以供所述第一内网服务器将所述数据变化信息写入与所述第一内网服务器连接的第二内网服务器,其中所述第二内网服务器包括第二数据库,所述第二数据库与所述第一内网服务器中的应用对应。
进一步地,处理器1001可以调用存储器1005中存储的数据同步程序,还执行以下操作:
所述第一数据库为Mysql数据库,所述第二数据库为Sqlserver数据库。
进一步地,处理器1001可以调用存储器1005中存储的数据同步程序,还执行以下操作:
获取所述数据集成中心服务器的访问权限;
根据所述访问权限获取所述外网服务器的数据变化信息。
进一步地,处理器1001可以调用存储器1005中存储的数据同步程序,还执行以下操作:
将所述数据变化信息转换为预设格式;
将转换为预设格式的所述数据变化信息发送至所述第一内网服务器。
进一步地,处理器1001可以调用存储器1005中存储的数据同步程序,还执行以下操作:
获取所述第一内网服务器的内网IP地址映射的外网IP地址以及所述数据集成中心服务器对应的IP地址;
在所述外网IP地址与所述数据集成中心服务器对应的IP地址匹配时,执行将所述数据变化信息发送至连接的第一内网服务器的步骤。
进一步地,处理器1001可以调用存储器1005中存储的数据同步程序,还执行以下操作:
获取所述第一内网服务器的待同步数据,其中,所述数据集成中心服务器通过http接口建立与第一内网服务器的数据通信链路连接;
将所述待同步数据传输至所述外网服务器中的第一数据库。
进一步地,处理器1001可以调用存储器1005中存储的数据同步程序,还执行以下操作:
接收到第一内网服务器发送的数据变化信息后,根据所述数据变化信息匹配第二数据库,所述数据变化信息由所述数据集成中心服务器连接的外网服务器中的第一数据库得到,所述数据变化信息由所述数据集成中心服务器发送至所述第一内网服务器;
将所述数据变化信息写入所述第二数据库。
进一步地,处理器1001可以调用存储器1005中存储的数据同步程序,还执行以下操作:
判断所述第一内网服务器的内网IP地址是否在预存的白名单列表内;
若所述第一内网服务器的内网IP地址在预存的白名单列表内,则执行根据所述数据变化信息匹配第二数据库的步骤。
现有技术中,企业多采用内外网隔离的方式在内网中部署企业系统,在需要与外网的外部系统进行数据交互的情况下,需要对企业系统与外部系统重新开发,开发成本高,且对企业系统系统与外部系统重新开发后传输数据容易造成数据泄露。
基于此,参照图2,本发明第一实施例提供一种数据同步方法,所述数据同步方法包括:
步骤S10,数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息;
步骤S20,将所述数据变化信息发送至连接的第一内网服务器,以供所述第一内网服务器将所述数据变化信息写入与所述第一内网服务器连接的第二内网服务器,其中所述第二内网服务器包括第二数据库,所述第二数据库与所述第一内网服务器中的应用对应。
在本实施例中,参照图3,图3为本发明实施例的计算机设备的结构示意图。实施例终端为数据集成中心服务器,所述数据集成中心服务器设置于在所述内网服务器与所述外网服务器之间,所述数据集成中心服务器部署在所述外网服务器的外网环境中;所述第一内网服务器与所述第二内网服务器均部署于内网环境中。
可选地,所述外网服务器包括第一数据库,所述数据集成中心服务器与所述外网服务器的第一数据库连接的方式是获取所述外网服务器的源IP地址以及所述第一数据库的端口号与预设目的IP地址,根据所述源IP地址、端口号以及预设目的IP地址在所述外网服务器部署防火墙命令。参照图4,在实际操作时,所述数据集成中心服务器定时向所述外网服务器的第一数据库中发送查询请求,根据所述数据集成中心服务器的目的IP地址判断所述目标IP地址是否匹配所述所述防火墙命令的预设目的IP地址,在所述目的IP地址匹配所述预设目的IP地址时,证明所述数据集成中心服务器允许访问所述外网服务器的第一数据库,进而将所述数据集成中心服务器与所述第一数据库连接,其中所述第一连接库为Mysql数据库。
可选地,所述数据集成中心服务器与所述第一内网服务器的连接方式为通过http接口建立与所述第一内网服务器的数据通信链路连接,其中所述http接口为所述数据集成中心服务器为所述第一内网服务器提供的预设的http接口。可以理解的是,所述数据集成中心服务器需要与所述第一内网服务器建立数据通信链路连接时,需要调用所述调用所述第一内网服务器对应的http接口,不同的内网服务器对应的http接口不同。
可选地,所述内网中还包括与所述第一内网服务器建立数据通信链路链接的第二内网服务器。其中,所述第一内网服务器包括至少一个应用,所述第二内网服务器中包括至少一个第二数据库,所述应用与所述第二内网服务器的第二数据库互相关联,及所述第二数据库与所述第一内网服务器中的应用对应,在实际操作过程中,在所述第一内网服务器的应用向所述第二内网服务器发送数据传输指令,根据所述应用匹配所述第二内网服务器中对应的第二数据库,进而将所述数据传输指令对应的数据传输至所述第二数据库中。
可选地,所述第二数据库为Sqlserver数据库。
基于所述第一数据库为Mysql数据库,所述第二数据库为Sqlserver数据库,由于Mysql数据库以及Sqlserver数据库的数据类型不同,难以进行数据同步。基于此,所述步骤S20包括:
将所述数据变化信息转换为预设格式;
将转换为预设格式的所述数据变化信息发送至所述第一内网服务器。
在本申请实施例中,获取所述数据变化信息后,将所述数据变化信息转换为预设格式,其中,所述预设格式为适用所述第二数据库的格式。
可选地,在所述数据集成中心服务器与所述第一数据库建立数据通信链路连接后,定时查询所述第一数据库的数据变化信息,其中所述数据变化信息为第一数据库的数据库操作日志,在所述获取所述数据库操作日志后,将所述数据库操作日志转化为统一格式的数据变化信息,例如统一转变为JSON格式的数据变化信息,JSON(JavaScript ObjectNotation,JS对象简谱)是一种轻量级的数据交换格式,基于ECMAScript(欧洲计算机协会制定的js规范)的一个子集,采用完全独立于编程语言的文本格式来存储和表示数据。简洁和清晰的层次结构使得JSON成为理想的数据交换语言,易于人阅读和编写,同时也易于机器解析和生成,并有效地提升网络传输效率。在由一些实施例中,所述数据集成中心服务器还可以将查询到的数据库操作日志转变为其它格式的数据,例如可以是XML(ExtensibleMarkup Language,可扩展标记语言)格式的同步数据,此处不做具体限定。
在本申请实施例中,通过在所述外网服务器与所述第一内网服务器之间设置数据集成中心服务器,所述数据集成中心服务器为所述第一内网服务器提供预设的http接口,通过所述数据集成中心服务器定时查询所述外网服务器的第一数据库的数据变化信息,并将所述数据变化信息转换成预设格式的数据变化信息,进而将所述预设格式的数据变化信息调用所述第一内网服务器的预设的http接口,通过所述预设的http接口将所述转换为预设格式的数据变化信息发送至所述第一内网服务器,通过数据集成中心服务器实现外网的数据变化信息发送至内网,避免第一内网服务器与外网服务器直接传输数据导致的数据泄露问题。
可选地,参照图5,基于第一实施例,所述步骤S10包括:
步骤S11,获取所述数据集成中心服务器的访问权限;
步骤S12,根据所述访问权限获取所述外网服务器的数据变化信息。
在本申请实施例中,所述第一数据库中包括多种不同类型的数据变化信息,不同的类型对应着不同的访问权限,在所述数据集成中心服务器查询所述第一数据库的数据变化信息时,根据所述数据集成中心服务器的访问权限从所述数据变化信息筛选出所述访问权限对应的目标数据变化信息,进而将所述目标数据变化信息作为所述数据集成中心服务器待发送的数据变化信息。
例如,所述数据集成中心服务器的访问权限为访问所述第一数据库的用户数据,所述用户数据保存在所述第一数据库专门用于保存用户数据的用户临时表中,在所述用户临时表的用户数据发生变动后,所述数据集成中心服务器可以访问所述用户临时表,进而获取所述发生变动后的用户数据,将所述用户数据确定为数据变化信息,即所述第一数据库中还包括专门用于保存部门数据的部门临时表时,限于所述数据集成中心服务器的访问权限,所述数据集成中心服务器不能访问所述部门临时表。
在本申请实施例中,赋予所述数据集成中心访问权限,所述数据集成中心服务器局限于所述访问权限对应的数据变化信息,避免除访问权限以外的数据变化信息泄露,避免所述外网服务器的第一数据库发生数据泄露。
可选地,基于第一实施例,参照图6,所述数据同步方法还包括:
步骤S30,获取所述第一内网服务器的内网IP地址映射的外网IP地址以及所述数据集成中心服务器对应的IP地址;
步骤S40,在所述外网IP地址与所述数据集成中心服务器对应的IP地址匹配时,将所述数据变化信息发送至连接的第一内网服务器。
在本申请实施例中,所述数据集成中心服务器获取所述数据变化信息后,获取所述数据变化信息对应的IP地址,所述IP地址为所述数据集成中心服务器的目的端口地址,在将所述数据变化信息传输至所述第一服务器之前,需要获取所述第一内网服务器的内网IP地址,并将所述内网IP地址转换为对应外网IP地址,进而判断所述外网IP地址与所述所述数据变化信息对应的IP地址是否匹配。若匹配,则将所述数据变化信息发送至所述第一内网服务器。
可选地,所述数据集成中心服务器存储着所述数据集成中心服务器的目标端口地址与所述外网地址的对应关系,所述目标端口地址为外网IP地址,所述外网地址为内网服务器的内网IP地址通过预设的地址映射关系转换得来的外网地址。在实际操作过程中,获取内网服务器的内网IP地址对应的外网IP地址,根据所述外网IP地址根据所述对应关系匹配对应的目标端口地址,若所述目标端口地址匹配当前所述数据集成中心服务器的目标端口地址,证明所述内网服务器具有访问所述数据集成中心服务器的权限,即所述数据集成中心服务器可将所述数据变化信息发送至所述内网服务器。
在本申请实施例中,通过内网映射外网的方式判断所述第一内网服务器是否具有访问所述数据集成中心服务器的权限,在所述第一内网服务器对应的外网IP地址匹配所述数据集成中心服务器的IP地址时,将所述数据变化信息发送至所述第一内网服务器,避免将数据变化信息泄露到除第一内网服务器以外的服务器。
可选地,在所述第一内网服务器需要将数据传输到外网时,所述数据同步方法的步骤还包括:
步骤S50,获取所述第一内网服务器的待同步数据,其中,所述数据集成中心服务器通过http接口建立与第一内网服务器的数据通信链路连接;
步骤S60,将所述待同步数据传输至所述外网服务器中的第一数据库。在本申请实施例,所述待同步数据为与所述第一内网服务器连接的第二数据库的数据库操作日志,所述数据集成中心服务器通过http接口建立与第一内网服务器的数据通信链路连接,所述数据集成中心服务器通过调用http接口获取所述待同步数据。
可选地,所述待同步数据的来源方式可以是所述第一内网服务器定时查询所述第二内网服务器的第二数据库,在所述第二数据库的数据库操作日志发生变动时,将所述发生变动的数据库操作日志确定为待同步数据。
可选地,所述待同步数据的来源方式还可以是第二数据库的数据库操作日志发生变动时,将所述发生变动的操作日志确定为待同步数据并向所述第一内网服务器主动发送数据同步请求,所述第一内网服务器根据所述数据同步请求获取所述待同步数据。
可选地,在获取所述待同步数据后,通过Sql增删改的方式将所述待同步数据转换成符合Mysql数据库的数据格式的待同步数据。
进一步地,参照图8,获取所述第一内网服务器的待同步数据后,调用所述数据集成中心服务器为所述第一内网服务器分配的http接口,根据所述http接口将所述待同步数据传输至所述数据集成中心服务器,所述数据集成中心服务器进而将所述待同步数据传输至所述外网服务器的第一数据库中。
在本申请实施例中,通过数据集成中心服务器将所述第一内网服务器的待同步数据发送至所述外网服务器的第一数据库中,避免了所述第一内网服务器将待同步数据直接发送至外网服务器中而导致的数据泄露。
可选地,在所述第一数据库的数据变化信息通过所述数据集成中心服务器发送至所述第一内网服务器后,需要将所述数据变化信息存储在与所述数据变化信息对应的第二数据库中。基于此,所述数据同步方法应用于所述第二内网服务器,所述数据同步方法的步骤包括:
步骤S70,接收到第一内网服务器发送的数据变化信息后,根据所述数据变化信息匹配第二数据库,所述数据变化信息由所述数据集成中心服务器连接的外网服务器中的第一数据库得到,所述数据变化信息由所述数据集成中心服务器发送至所述第一内网服务器;
步骤S80,将所述数据变化信息写入所述第二数据库。
在本申请实施例中,所述第一内网服务器获取所述数据变化信息后,根据所述数据变化信息匹配与数据变化信息对应的第二数据库。其中,所述第二内网服务器中包括多个第二数据库,所述各个数据库存储着不同的数据。
其中,内网环境中包括第一内网服务器和第二内网服务器,所述第二内网服务器中包括第二数据库,为了防止第二数据库的数据泄露外网,将所述第二内网服务器以建立防火墙的方式完全隔离外网,仅允许特定的内网服务器访问。基于此,所述根据所述数据变化信息匹配第二数据库之前,还包括:
判断所述第一内网服务器的内网IP地址是否在预存的白名单列表内;
若所述第一内网服务器的内网IP地址在预存的白名单列表内,则执行根据所述数据变化信息匹配第二数据库的步骤。
可选地,所述第二内网服务器中存储有预存的白名单列表,所述白名单列表包括可访问的内网IP地址,所述可访问内网IP地址包括至少一个。在获取所述第一内网服务器对应的内网IP地址,根据所述内网IP地址查询所述白名单列表是否存在对应的可访问的内网IP地址,在所述内网IP地址在所述白名单列表内存在对应的可访问的内网IP地址,证明所述第一内网服务器的内网IP地址在预存的白名单列表内,证明所述第一内网服务器具有访问所述第二内网服务器的权限,进而可将所述数据变化信息发送到第二内网服务器的第二数据库中。
可选地,在所述第一内网服务器中部署数据控制中心,或在所述第二内网服务器中部署数据控制中心,所述数据控制中心存储着数据变化信息与第二数据库的对应关系,在实际操作中,在所述第一内网服务器接收到所述数据变化信息后,将所述数据变化信息传输至所述数据控制中心,所述数据控制中心根据所述对应关系确定所述数据变化信息对应的第二数据库,进而将所述数据变化信息发送至所述对应的第二数据库中。
例如,当所述数据变化信息为员工薪资信息时,所述数据控制中心根据所述员工薪资信息确定对应的第二数据库为员工薪资信息数据库,将所述员工薪资信息发送至所述员工薪资信息数据库。
可选地,所述第一内网服务器的应用与所述第二数据库对应。在获取所述数据变化信息后,根据所述数据变化信息确定所述数据变化信息对应的应用,根据所述应用匹配对应的第二数据库。
例如,当所述数据变化信息为员工薪资信息,所述员工薪资信息对应的应用为员工薪资表,所述员工薪资表对应的第二数据库为员工薪资信息数据库,进而将所述员工薪资信息发生至所述员工薪资信息数据库,以使所述员工薪资信息数据库对所述员工薪资信息进行处理或存储等相应的操作。
可选地,所述第二数据库为Mysql数据库,在发送所述数据变化信息至所述第二数据库之前,判断所述数据变化信息对应的格式是否匹配所述第二数据库,在所述格式不匹配所述第二数据库中,将所述数据变化信息进行处理,以使所述数据变化信息对应的格式匹配所述第二数据库。
在本申请实施例,在所述第一内网服务器或所述第二内网服务器中部署数据控制中心,根据所述数据控制中心根据所述数据变化信息匹配对应的数据库,根据所述数据控制中心快速确定第二数据库,实现对数据库中数据的管理。
此外,本发明实施例还提出一种可读存储介质,所述计算机可读存储介质上存储有数据同步程序,所述数据同步程序被处理器执行时实现如上述所述实施例的数据同步方法的步骤。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。
Claims (10)
1.一种数据同步方法,其特征在于,应用于数据集成中心服务器,所述数据同步方法的步骤包括:
数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息;
将所述数据变化信息发送至连接的第一内网服务器,以供所述第一内网服务器将所述数据变化信息写入与所述第一内网服务器连接的第二内网服务器,其中所述第二内网服务器包括第二数据库,所述第二数据库与所述第一内网服务器中的应用对应。
2.如权利要求1所述的数据同步方法,其特征在于,所述第一数据库为Mysql数据库,所述第二数据库为Sqlserver数据库。
3.如权利要求1所述的数据同步方法,其特征在于,所述数据集成中心服务器定时查询外网服务器中的第一数据库中的数据变化信息的步骤包括:
获取所述数据集成中心服务器的访问权限;
根据所述访问权限获取所述外网服务器的数据变化信息。
4.如权利要求1所述的数据同步方法,其特征在于,所述将所述数据变化信息发送至连接的第一内网服务器的步骤包括:
将所述数据变化信息转换为预设格式;
将转换为预设格式的所述数据变化信息发送至所述第一内网服务器。
5.如权利要求1所述的数据同步方法,其特征在于,所述将所述数据变化信息发送至连接的第一内网服务器的步骤之前,还包括:
获取所述第一内网服务器的内网IP地址映射的外网IP地址以及所述数据集成中心服务器对应的IP地址;
在所述外网IP地址与所述数据集成中心服务器对应的IP地址匹配时,执行将所述数据变化信息发送至连接的第一内网服务器的步骤。
6.如权利要求1所述的数据同步方法,其特征在于,所述数据对接方法包括:
获取所述第一内网服务器的待同步数据,其中,所述数据集成中心服务器通过http接口建立与第一内网服务器的数据通信链路连接;
将所述待同步数据传输至所述外网服务器中的第一数据库。
7.一种数据同步方法,其特征在于,所述数据同步方法应用于第二内网服务器,所述数据同步方法的步骤包括:
接收到第一内网服务器发送的数据变化信息后,根据所述数据变化信息匹配第二数据库,所述数据变化信息由所述数据集成中心服务器连接的外网服务器中的第一数据库得到,所述数据变化信息由所述数据集成中心服务器发送至所述第一内网服务器;
将所述数据变化信息写入所述第二数据库。
8.如权利要求7所述的数据同步方法,其特征在于,所述根据所述数据变化信息匹配第二数据库的步骤之前,还包括:
判断所述第一内网服务器的内网IP地址是否在预存的白名单列表内;
若所述第一内网服务器的内网IP地址在预存的白名单列表内,则执行根据所述数据变化信息匹配第二数据库的步骤。
9.一种计算机设备,其特征在于,所述计算机设备包括:存储器、处理器,其中,所述存储器上存储有计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的数据同步方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至8中任一项所述的数据同步方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110702134.8A CN113342845B (zh) | 2021-06-23 | 2021-06-23 | 数据同步方法、计算机设备及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110702134.8A CN113342845B (zh) | 2021-06-23 | 2021-06-23 | 数据同步方法、计算机设备及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113342845A true CN113342845A (zh) | 2021-09-03 |
CN113342845B CN113342845B (zh) | 2024-02-20 |
Family
ID=77478132
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110702134.8A Active CN113342845B (zh) | 2021-06-23 | 2021-06-23 | 数据同步方法、计算机设备及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113342845B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115277680A (zh) * | 2022-07-29 | 2022-11-01 | 山石网科通信技术股份有限公司 | 用于提高同步安全性的文件同步方法 |
Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6134597A (en) * | 1997-05-28 | 2000-10-17 | International Business Machines Corporation | CRC hash compressed server object identifier |
CN102137132A (zh) * | 2010-01-26 | 2011-07-27 | 腾讯科技(深圳)有限公司 | 数据同步系统及方法 |
CN103139254A (zh) * | 2011-11-30 | 2013-06-05 | 苏州中茵泰格科技有限公司 | Iptv网络与互联网之间数据同步方法及系统 |
CN103227774A (zh) * | 2012-12-27 | 2013-07-31 | 富阳市供电局 | 电力作业现场管控系统的内外网数据同步方法 |
CN203219430U (zh) * | 2013-04-07 | 2013-09-25 | 内蒙古华腾科技发展有限公司 | 在网络物理隔离情况下基于图像识别的数据传输系统 |
CN103780648A (zh) * | 2012-10-22 | 2014-05-07 | 百度在线网络技术(北京)有限公司 | 内网和外网的开发者信息的同步系统和方法 |
CN104573992A (zh) * | 2014-11-27 | 2015-04-29 | 苏州市公安局交通巡逻警察支队 | 非机动车管理系统 |
CN106060065A (zh) * | 2016-06-28 | 2016-10-26 | 山东中磁视讯股份有限公司 | 一种受限网络环境下的通讯系统及方法 |
CN109451006A (zh) * | 2018-10-30 | 2019-03-08 | 北京锐安科技有限公司 | 一种数据传输方法、装置、服务器及计算机存储介质 |
CN109818956A (zh) * | 2019-01-22 | 2019-05-28 | 武汉光谷信息技术股份有限公司 | 一种内外网数据共享系统及方法 |
CN208940010U (zh) * | 2018-11-28 | 2019-06-04 | 北京中电普华信息技术有限公司 | 一种内外网同步系统 |
CN109905397A (zh) * | 2019-03-12 | 2019-06-18 | 深圳市网心科技有限公司 | 一种建立数据连接的方法及内网服务器 |
CN109977170A (zh) * | 2019-03-20 | 2019-07-05 | 南威软件股份有限公司 | 一种政务内外网数据同步的方法及系统 |
CN110413690A (zh) * | 2019-07-03 | 2019-11-05 | 杭州数梦工场科技有限公司 | 数据库的数据同步方法、服务器、电子设备、存储介质 |
CN110941621A (zh) * | 2018-09-25 | 2020-03-31 | 北京国双科技有限公司 | 一种内外网间同步数据库的方法及装置 |
US10715484B1 (en) * | 2019-12-11 | 2020-07-14 | CallFire, Inc. | Domain management and synchronization system |
CN112000741A (zh) * | 2020-08-25 | 2020-11-27 | 中国南方电网有限责任公司 | 内外网数据交换系统、方法、装置、计算机设备和介质 |
CN112468571A (zh) * | 2020-11-24 | 2021-03-09 | 中国联合网络通信集团有限公司 | 内外网数据同步方法、装置、电子设备及存储介质 |
-
2021
- 2021-06-23 CN CN202110702134.8A patent/CN113342845B/zh active Active
Patent Citations (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6134597A (en) * | 1997-05-28 | 2000-10-17 | International Business Machines Corporation | CRC hash compressed server object identifier |
CN102137132A (zh) * | 2010-01-26 | 2011-07-27 | 腾讯科技(深圳)有限公司 | 数据同步系统及方法 |
CN103139254A (zh) * | 2011-11-30 | 2013-06-05 | 苏州中茵泰格科技有限公司 | Iptv网络与互联网之间数据同步方法及系统 |
CN103780648A (zh) * | 2012-10-22 | 2014-05-07 | 百度在线网络技术(北京)有限公司 | 内网和外网的开发者信息的同步系统和方法 |
CN103227774A (zh) * | 2012-12-27 | 2013-07-31 | 富阳市供电局 | 电力作业现场管控系统的内外网数据同步方法 |
CN203219430U (zh) * | 2013-04-07 | 2013-09-25 | 内蒙古华腾科技发展有限公司 | 在网络物理隔离情况下基于图像识别的数据传输系统 |
CN104573992A (zh) * | 2014-11-27 | 2015-04-29 | 苏州市公安局交通巡逻警察支队 | 非机动车管理系统 |
CN106060065A (zh) * | 2016-06-28 | 2016-10-26 | 山东中磁视讯股份有限公司 | 一种受限网络环境下的通讯系统及方法 |
CN110941621A (zh) * | 2018-09-25 | 2020-03-31 | 北京国双科技有限公司 | 一种内外网间同步数据库的方法及装置 |
CN109451006A (zh) * | 2018-10-30 | 2019-03-08 | 北京锐安科技有限公司 | 一种数据传输方法、装置、服务器及计算机存储介质 |
CN208940010U (zh) * | 2018-11-28 | 2019-06-04 | 北京中电普华信息技术有限公司 | 一种内外网同步系统 |
CN109818956A (zh) * | 2019-01-22 | 2019-05-28 | 武汉光谷信息技术股份有限公司 | 一种内外网数据共享系统及方法 |
CN109905397A (zh) * | 2019-03-12 | 2019-06-18 | 深圳市网心科技有限公司 | 一种建立数据连接的方法及内网服务器 |
CN109977170A (zh) * | 2019-03-20 | 2019-07-05 | 南威软件股份有限公司 | 一种政务内外网数据同步的方法及系统 |
CN110413690A (zh) * | 2019-07-03 | 2019-11-05 | 杭州数梦工场科技有限公司 | 数据库的数据同步方法、服务器、电子设备、存储介质 |
US10715484B1 (en) * | 2019-12-11 | 2020-07-14 | CallFire, Inc. | Domain management and synchronization system |
CN112000741A (zh) * | 2020-08-25 | 2020-11-27 | 中国南方电网有限责任公司 | 内外网数据交换系统、方法、装置、计算机设备和介质 |
CN112468571A (zh) * | 2020-11-24 | 2021-03-09 | 中国联合网络通信集团有限公司 | 内外网数据同步方法、装置、电子设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
丁汨;于琳;: "内外网数据交换技术在校区数据同步中的应用", 福建电脑, no. 04, pages 140 - 141 * |
董惠勤;陆魁军;: "跨安全网闸的内外网数据库同步的实现", 科技通报, no. 02, pages 114 - 118 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115277680A (zh) * | 2022-07-29 | 2022-11-01 | 山石网科通信技术股份有限公司 | 用于提高同步安全性的文件同步方法 |
CN115277680B (zh) * | 2022-07-29 | 2024-04-19 | 山石网科通信技术股份有限公司 | 用于提高同步安全性的文件同步方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113342845B (zh) | 2024-02-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8745223B2 (en) | System and method of distributed license management | |
US8725857B2 (en) | Dynamic query services and methods | |
EP1355231A2 (en) | Processing data files using plug-ins | |
CN109413040B (zh) | 消息鉴权方法、设备、系统及计算机可读存储介质 | |
US7783718B2 (en) | Locating services using compiled scopes | |
US11243921B2 (en) | Database expansion system, equipment, and method of expanding database | |
KR102407334B1 (ko) | 게이트웨이 장치 및 그 동작 방법 | |
JP2005251171A (ja) | 情報提供装置、情報提供方法、情報提供プログラム及び記録媒体 | |
US12106253B2 (en) | Container management method, apparatus, and device | |
CN112104640B (zh) | 网关的数据处理方法、装置、设备及可读存储介质 | |
CN113141405B (zh) | 服务访问方法、中间件系统、电子设备和存储介质 | |
WO2019223099A1 (zh) | 应用程序的调用方法及系统 | |
CN112202744B (zh) | 一种多系统数据通信方法和装置 | |
CN113645304A (zh) | 数据服务处理方法及相关设备 | |
CN114244654B (zh) | 一种url的转发方法、装置、设备及计算机存储介质 | |
CN115567521A (zh) | 局域网与公有云之间的通信方法及装置、计算设备 | |
KR20020089450A (ko) | 통합된 통신 서버 및 방법 | |
CN113342845A (zh) | 数据同步方法、计算机设备及可读存储介质 | |
CN107105004B (zh) | 跨平台的服务调用方法及装置 | |
WO2021093671A1 (zh) | 任务处理方法、系统、装置、设备及计算机可读存储介质 | |
CN112395020B (zh) | 内网的安全防护方法、客户端、目标服务器及存储介质 | |
CN111045928A (zh) | 一种接口数据测试方法、装置、终端及存储介质 | |
US20030177214A1 (en) | Dynamic SNMP network device | |
CN113014664B (zh) | 网关适配方法、装置、电子设备和存储介质 | |
CN111131436B (zh) | 快速查找代理方法、装置和可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |