CN115328997A - 数据同步方法、系统、设备及存储介质 - Google Patents
数据同步方法、系统、设备及存储介质 Download PDFInfo
- Publication number
- CN115328997A CN115328997A CN202210854436.1A CN202210854436A CN115328997A CN 115328997 A CN115328997 A CN 115328997A CN 202210854436 A CN202210854436 A CN 202210854436A CN 115328997 A CN115328997 A CN 115328997A
- Authority
- CN
- China
- Prior art keywords
- data
- target
- interface
- metadata
- target system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Computing Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Hardware Redundancy (AREA)
Abstract
本发明公开了数据同步方法、系统、设备及存储介质,该方法包括:所述集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;从所述接口数据库中获取与所述源业务系统关联的接口封装模块;对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据;通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统,通过本申请的技术方案实现不同系统之间数据的交互。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种数据同步方法、系统、设备及存储介质。
背景技术
随着SaaS软件行业的快速发展,企业内使用的业务系统越来越多,例如CRM(Customer Relationship Management,客户关系管理)、OA(Office Automation,办公自动化)、ERP(Enterprise Resource Planning,企业资源计划)等系统管理软件。目前,企业内部的数据被分散在各个系统,而各业务系统之间的数据结构存在差异,不利于不同系统之间数据的同步。
发明内容
本申请提供一种数据同步方法、系统、设备及存储介质,旨在解决不同系统之间数据无法同步的问题。
本申请提供了一种数据同步方法,应用于数据同步系统,所述数据同步系统包括接口数据库、集成平台以及数据引擎;所述数据同步方法,包括:
所述集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;
从所述接口数据库中获取与所述源业务系统关联的接口封装模块;
对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据;
通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
可选地,所述从所述接口数据库中获取与所述源业务系统关联的接口封装模块的步骤,还包括:
获取所述源业务系统关联的系统接口以及目标业务;
从所述接口数据库中获取与所述系统接口关联的所述目标业务的接口封装模块,其中,所述接口封装模块根据所述目标业务的元数据封装得到,并将封装后得到的所述接口封装模块存储于所述接口数据库中。
可选地,所述对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据的步骤包括:
解析所述接口封装模块,得到对应的元数据;
基于所述目标系统的数据结构将所述元数据进行数据合并、数据拆分以及数据增行中的至少一个,使得所述元数据转化为与所述目标系统适配的目标数据。
可选地,所述解析所述接口封装模块,得到对应的元数据的步骤包括:
分析所述接口封装模块的接口特性,得到分析结果,其中,所述接口特性包括系统参数、鉴权、有效期以及元数据结构中的至少一个;
根据所述分析结果得到所述元数据。
可选地,在所述目标业务的数量存在至少两个时,所述对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理包括:
将各个所述目标业务关联的接口封装模块分别基于所述目标系统的数据结构进行数据合并,得到合并后的目标数据;
将合并后的所述目标数据封装得到场景模型;
所述通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统的步骤包括:
通过所述数据引擎读取各个所述目标业务关联的接口封装模块,并将所述场景模型中的目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
可选地,所述通过所述数据引擎读取各个所述目标业务关联的接口封装模块,并将所述场景模型中的目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统的步骤之后,还包括:
所述数据引擎在将所述场景模型中的目标数据写入所述目标系统时,生成数据同步信息,并将所述数据同步信息反馈至所述集成平台;
在所述集成平台上显示所述数据同步信息。
可选地,所述从所述接口数据库中获取与所述源业务系统关联的接口封装模块,包括:
获取所述目标系统的系统版本;
从所述接口数据库中获取与所述系统版本对应的接口封装模块版本,其中,同一所述源业务系统关联不同的接口封装模块版本,不同的目标系统存在对应的接口封装模块版本。
此外,为实现上述目的,本发明还提供了一种数据同步系统,该数据同步系统包括:
配置模块,用于集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;
获取模块,用于从接口数据库中获取与所述源业务系统关联的接口封装模块;
处理模块,用于对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据;
同步模块,用于通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
此外,为实现上述目的,本发明还提供了一种终端设备,该终端设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据同步程序,所述数据同步程序被所述处理器执行时实现上述的数据同步方法的步骤。
此外,为实现上述目的,本发明还提供了一种计算机可读存储介质,其上存储有数据同步程序,所述数据同步程序被处理器执行时实现上述的数据同步方法的步骤。
本申请实施例中提供的一种数据同步方法、系统、设备及存储介质的技术方案,该技术方案应用于数据同步系统,该数据同步系统包括接口数据库、集成平台以及数据引擎。由于集成平台在接收到配置请求时,能基于该配置请求确定源业务系统以及目标系统,从接口数据库中获取与源业务系统关联的接口封装模块,对接口封装模块中的元数据基于目标系统的数据结构进行数据处理,从而将元数据转换为与目标系统适配的目标数据,再通过运行数据引擎,将目标数据写入目标系统,从而实现源业务系统的数据能同步至目标系统的技术方案,由于采用了可视化的配置方式,通过获取源业务系统的接口封装模块,再将接口封装模块中的元数据转化为目标系统可以识别的数据,无需代码就可以实现不同系统之间数据的同步,不仅实现不同系统之间数据的交互,同时提高不同系统之间数据的交互效率。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的结构示意图;
图2为本发明数据同步方法第一实施例的流程示意图;
图3为本发明数据同步系统一实施例的功能模块示意图;
图4为本发明数据同步系统的功能模块图。
本申请目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明,上述附图只是一个实施例图,而不是发明的全部。
具体实施方式
本申请为了解决不同系统之间数据无法同步的问题,为了实现不同系统之间数据的同步和交互,本申请提出了一种数据同步方法,通过集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;从所述接口数据库中获取与所述源业务系统关联的接口封装模块;对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据;通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统,从而实现不同系统之间数据的同步。
为了更好的理解上述技术方案,下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
如图1所示,图1为本发明实施例方案涉及的硬件运行环境的结构示意图。
需要说明的是,图1即可为终端设备的硬件运行环境的结构示意图。
如图1所示,该终端设备可以包括:处理器1001,例如CPU,存储器1005,用户接口1003,网络接口1004,通信总线1002。其中,通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard),可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatile memory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解,图1中示出的终端设备结构并不构成对终端设备限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
如图1所示,作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及数据同步程序。其中,操作系统是管理和控制终端设备硬件和软件资源的程序,数据同步程序以及其它软件或程序的运行。
在图1所示的终端设备中,用户接口1003主要用于连接终端,与终端进行数据通信;网络接口1004主要用于后台服务器,与后台服务器进行数据通信;处理器1001可以用于调用存储器1005中存储的数据同步程序。
在本实施例中,终端设备包括:存储器1005、处理器1001及存储在所述存储器上并可在所述处理器上运行的数据同步程序,其中:
处理器1001调用存储器1005中存储的数据同步程序时,执行以下操作:
所述集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;
从所述接口数据库中获取与所述源业务系统关联的接口封装模块;
对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据;
通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
处理器1001调用存储器1005中存储的数据同步程序时,还执行以下操作:
获取所述源业务系统关联的系统接口以及目标业务;
从所述接口数据库中获取与所述系统接口关联的所述目标业务的接口封装模块,其中,所述接口封装模块根据所述目标业务的元数据封装得到,并将封装后得到的所述接口封装模块存储于所述接口数据库中。
处理器1001调用存储器1005中存储的数据同步程序时,还执行以下操作:
解析所述接口封装模块,得到对应的元数据;
基于所述目标系统的数据结构将所述元数据进行数据合并、数据拆分以及数据增行中的至少一个,使得所述元数据转化为与所述目标系统适配的目标数据。
处理器1001调用存储器1005中存储的数据同步程序时,还执行以下操作:
分析所述接口封装模块的接口特性,得到分析结果,其中,所述接口特性包括系统参数、鉴权、有效期以及元数据结构中的至少一个;
根据所述分析结果得到所述元数据。
处理器1001调用存储器1005中存储的数据同步程序时,还执行以下操作:
将各个所述目标业务关联的接口封装模块分别基于所述目标系统的数据结构进行数据合并,得到合并后的目标数据;
将合并后的所述目标数据封装得到场景模型;
通过所述数据引擎读取各个所述目标业务关联的接口封装模块,并将所述场景模型中的目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
处理器1001调用存储器1005中存储的数据同步程序时,还执行以下操作:
所述数据引擎在将所述场景模型中的目标数据写入所述目标系统时,生成数据同步信息,并将所述数据同步信息反馈至所述集成平台;
在所述集成平台上显示所述数据同步信息。
处理器1001调用存储器1005中存储的数据同步程序时,还执行以下操作:
获取所述目标系统的系统版本;
从所述接口数据库中获取与所述系统版本对应的接口封装模块版本,其中,同一所述源业务系统关联不同的接口封装模块版本,不同的目标系统存在对应的接口封装模块版本。
以下将以实施例的方式具体介绍本申请的技术方案。
如图2所示,在本申请的第一实施例中,本申请的数据同步方法,包括以下步骤:
步骤S110,所述集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统。
在本实施例中,本申请的数据同步方法应用于数据同步系统中,在该数据同步系统中,主要包括接口数据库、集成平台以及数据引擎等模块,具体见图3。其中,该接口数据库也称为知识库,该知识库的主要作用是负责对源业务系统的接口进行分析和封装,转化为集成平台可识别的接口数据结构,最终可让集成平台使用。该集成平台也称为集成配置平台,该集成配置平台的主要作用是进行不同系统的业务配置,包括所要对接的源业务系统以及目标系统、源业务系统的相关业务数据等。可以利用知识库解析出来的元数据,在页面上实现无代码的灵活配置,并且最终将配置完成的场景模型推送到数据引擎中。具体的,在集成平台上,不同的业务系统,需要填充的系统配置参数不同,页面上提供了灵活的配置供使用人员填写。通过接口数据库解析出来的元数据信息,根据企业不同的集成需求,可以完成不同方式的数据处理过程,如数据合并、数据拆分、数据增行等复杂的数据处理过程,得到场景模型。完成后的场景模型,将推送到数据引擎。该数据引擎主要用于在接收到配置完成的场景模型之后,运行该场景模型,实现数据的自动读取、数据处理和写入等操作。
具体的,该源业务系统可以是万里牛、吉客云等第三方系统,在接口数据库中存储着这些第三方系统的接口数据模块,可通过调用这些接口数据模块实现第三方系统与数据同步系统的对接。该目标系统为源业务系统所要对接的系统,该目标系统也对接该数据同步系统。该目标系统可以是集成平台预先设定的系统,该源业务系统可以是与该目标系统之前连接过的业务系统,也可以是与该目标系统之前未连接过的源业务系统。在该源业务系统是与目标系统之前连接过的业务系统时,存在相应的场景模型,可以直接基于该场景模型实现该源业务系统与目标系统之间数据的同步。在该源业务系统不是与目标系统之前连接过的业务系统时,即不存在相应的场景模型,则在接收到配置请求时,基于该配置请求确定源业务系统以及目标系统,进而根据后续的步骤实现场景模型的构建。
步骤S120,从所述接口数据库中获取与所述源业务系统关联的接口封装模块。
在本实施例中,采用了可视化的配置方式,通过获取源业务系统的接口封装模块,再将接口封装模块中的元数据转化为目标系统可以识别的数据,无需代码就可以实现不同系统之间数据的同步。具体的,在集成平台配置完成之后,根据所述配置请求确定源业务系统以及目标系统,基于配置的字段从接口数据库中获取与配置的字段关联的接口封装模块。具体的,在配置的字段为“万里牛”的名称时,从接口数据库中获取“万里牛”对应的接口封装模块。还可以是在配置的字段为“万里牛”下的某个子功能模块时,例如“历史发货订单”,可以从接口数据中获取的“万里牛”对应的接口封装模块中解析并获取该“历史发货订单”对应的数据。
步骤S130,对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据。
在本实施例中,在获取源业务系统关联的接口封装模块之后,对该接口封装模块中的元数据进行数据处理,从而使得该元数据能够与目标系统进行适配。具体的,源业务系统可能存在一个,也可能存在多个,例如,需要从源业务系统1中获取目标业务1下的元数据,从源业务系统2中获取目标业务2下的元数据。在获取目标业务1下的元数据以及目标业务2下的元数据之后,需要将目标业务1下的元数据以及目标业务2下的元数据进行数据处理,合成目标系统所需要的目标数据。或者时,将源业务系统1中获取的目标业务的元数据拆分成元数据1以及元数据2,将元数据1以及元数据2分别发送至不同的目标系统。
步骤S140,通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
在本实施例中,在接收集成平台中已设置好的场景模型,解析该场景模型的内容,实现数据的自动读取、数据处理和写入等操作,从而使得源业务系统的数据能同步至目标系统。通过无代码的数据采集和分析,形成一套综合、智能的数据集成平台,让企业数据能够自动的在各个业务系统中流转。
本申请根据上述实施例方案,由于集成平台在接收到配置请求时,能基于该配置请求确定源业务系统以及目标系统,从接口数据库中获取与源业务系统关联的接口封装模块,对接口封装模块中的元数据基于目标系统的数据结构进行数据处理,从而将元数据转换为与目标系统适配的目标数据,再通过运行数据引擎,将目标数据写入目标系统,从而实现源业务系统的数据能同步至目标系统的技术方案,由于采用了接口封装模块,再将接口封装模块中的元数据转化为目标系统可以识别的数据,无需代码就可以实现不同系统之间数据的同步,不仅实现不同系统之间数据的交互,同时提高不同系统之间数据的交互效率。
在一实施例中,从所述接口数据库中获取与源业务系统关联的接口封装模块的步骤包括:
步骤S121,获取所述源业务系统关联的系统接口以及目标业务;
步骤S122,从所述接口数据库中获取与所述系统接口关联的所述目标业务的接口封装模块,其中,所述接口封装模块根据所述目标业务的元数据封装得到,并将封装后得到的所述接口封装模块存储于所述接口数据库中。
在本实施例中,在根据配置请求确定源业务系统之后,进而确定与该源业务系统预先关联的系统接口。并且除了对源业务系统进行配置之外,还可对源业务系统下的某一目标业务进行配置。在该源业务系统为“万里牛”时,该目标业务可以是“订单实时同步”、“订单自动拆合”等目标业务。
在本实施例中,在确定源业务系统关联的系统接口以及目标业务时,从接口数据库中获取与该系统接口关联的目标业务的接口封装模块。具体可以是在获取与该系统接口关联的源业务系统的接口封装模块之后,从该接口封装模块中获取与该“订单实时同步”关联的接口封装模块。其中,该目标业务的接口封装模块是由目标业务的元数据封装得到的,通过将各个目标业务的元数据进行封装,得到该目标业务模块。由各个目标业务模块合成该源业务系统的接口封装模块。并将该源业务系统的接口封装模块存储于接口数据库中,使得在下次使用时,可以从该接口数据库中获取对应的接口封装模块生成场景模块。
在一实施例中,从所述接口数据库中获取与源业务系统关联的接口封装模块的步骤包括:
步骤S321,获取所述目标系统的系统版本;
步骤S322,从所述接口数据库中获取与所述系统版本对应的接口封装模块版本,其中,同一所述源业务系统关联不同的接口封装模块版本,不同的目标系统存在对应的接口封装模块版本。
在本实施例中,同一套目标系统,支持封装不同的接口版本,如不同的ERP系统版本,对应的接口版本也不同。具体的,可以根据当前的目标系统的系统版本,从接口数据库中获取与该系统版本对应的接口封装模块版本。例如,在当前的目标系统的系统版本为V2时,从接口数据库中获取源业务系统版本为V2对应的接口封装模块。该源业务系统关联着不同的接口封装模块版本,例如,源业务系统可关联着V1.0、V1.1、V2.0等接口封装模块版本。
在一实施例中,对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据具体包括以下步骤:
步骤S131,解析所述接口封装模块,得到对应的元数据。
步骤S132,基于所述目标系统的数据结构将所述元数据进行数据合并、数据拆分以及数据增行中的至少一个,使得所述元数据转化为与所述目标系统适配的目标数据。
在本实施例中,对元数据进行数据处理主要包括对元数据进行数据合并、数据拆分以及数据增行中的至少一个,从而使得元数据可以转化为与目标系统适配的目标数据。具体的,在得到接口封装模块之后,解析该接口封装模块,得到对应的元数据,为了使得该元数据能够与目标系统进行适配,因此,需要基于目标系统的数据结构将元数据进行数据合并、数据拆分以及数据增行中的至少一个,从而将元数据转化为与目标系统适配的目标数据。以数据拆分为例,假设存在一个订单,在该订单里面,又买手机,又买面膜,还买洗面乳,其中,手机是一家公司,手机是小米的,面膜可能是另外一家公司的,然后洗发露,护发素,洗发露又是一家公司的,因此在将这张订单读下来之后,需要将该订单进行拆分,并将拆分后的订单发送至对应的公司。在该过程中,通过AI智能感知将拆分后的订单发送至对应的公司。比如京东上面的商品信息,应该自动放到金蝶系统哪个销售订单的商品代码。
在一实施例中,解析所述接口封装模块,得到对应的元数据的步骤包括:
步骤S1311,分析所述接口封装模块的接口特性,得到分析结果,其中,所述接口特性包括系统参数、鉴权、有效期以及元数据结构中的至少一个;
步骤S1312,根据所述分析结果得到所述元数据。
在本实施例中,分析已有源业务系统的接口特性,如系统参数、鉴权、有效期、元数据结构等,将分析后的结果,经过路径转化和函数处理转化为配置平台可识别的元数据。
在一实施例中,在所述目标业务的数量存在至少两个时,所述对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理具体包括以下步骤:
步骤S231,将各个所述目标业务关联的接口封装模块分别基于所述目标系统的数据结构进行数据合并,得到合并后的目标数据;
步骤S232,将合并后的所述目标数据封装得到场景模型。
在本实施例中,为了满足业务层面的高识别度,将多个接口进行组合包装,转化为业务可识别的接口描述,如发票申请单需要传入到金蝶系统,此时会将金蝶发票申请单保存接口和提交接口合并到一起,转化为一个业务对象,发票申请单的保存并提交,减少业务层面的二次处理。
在得到场景模型之后,通过数据引擎读取各个目标业务关联的接口封装模块,并将场景模型中的目标数据写入目标系统,从而使得源业务系统的数据能同步至目标系统。
在一实施例中,在场景模型中的目标数据写入所述目标系统之后,该数据引擎在运行数据过程中,会将运行结果实时返回给集成中心,该运行结果可以为数据同步信息,包括数据同步成功信息、数据同步失败信息等。集成平台在接收到数据引擎生成的数据同步信息之后,在集成平台上显示该数据同步信息。具体的,解析数据引擎返回的数据同步信息,并将数据同步信息展示在平台中,方便最终终端用户查看。从而通过心跳的机制保障了数据引擎和集成平台的无缝链接以及数据交互。
本发明实施例提供了数据同步方法的实施例,需要说明的是,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
如图4所示,本申请提供的一种数据同步系统,该数据同步系统包括:
配置模块10,用于集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;
获取模块20,用于从接口数据库中获取与所述源业务系统关联的接口封装模块。在一实施例中,获取模块20还用于获取所述源业务系统关联的系统接口以及目标业务;从所述接口数据库中获取与所述系统接口关联的所述目标业务的接口封装模块,其中,所述接口封装模块根据所述目标业务的元数据封装得到,并将封装后得到的所述接口封装模块存储于所述接口数据库中。在一实施例中,获取模块20还用于获取所述目标系统的系统版本;从所述接口数据库中获取与所述系统版本对应的接口封装模块版本,其中,同一所述源业务系统关联不同的接口封装模块版本,不同的目标系统存在对应的接口封装模块版本。
处理模块30,用于对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据。在一实施例中,处理模块30还用于解析所述接口封装模块,得到对应的元数据;基于所述目标系统的数据结构将所述元数据进行数据合并、数据拆分以及数据增行中的至少一个,使得所述元数据转化为与所述目标系统适配的目标数据。在一实施例中,处理模块30还用于分析所述接口封装模块的接口特性,得到分析结果,其中,所述接口特性包括系统参数、鉴权、有效期以及元数据结构中的至少一个;根据所述分析结果得到所述元数据。在一实施例中,处理模块30还用于将各个所述目标业务关联的接口封装模块分别基于所述目标系统的数据结构进行数据合并,得到合并后的目标数据;将合并后的所述目标数据封装得到场景模型。
同步模块40,用于通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。在一实施例中,同步模块40还用于通过所述数据引擎读取各个所述目标业务关联的接口封装模块,并将所述场景模型中的目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
在一实施例中,同步模块40之后还连接有一显示模块,该显示模块用于所述数据引擎在将所述场景模型中的目标数据写入所述目标系统时,生成数据同步信息,并将所述数据同步信息反馈至所述集成平台;在所述集成平台上显示所述数据同步信息。
本发明数据同步系统具体实施方式与上述数据同步方法各实施例基本相同,在此不再赘述。
基于同一发明构思,本申请实施例还提供了一种计算机可读存储介质,所述计算机可读存储介质存储有数据同步程序,所述数据同步程序被处理器执行时实现如上所述的数据同步方法的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
由于本申请实施例提供的存储介质,为实施本申请实施例的方法所采用的存储介质,故而基于本申请实施例所介绍的方法,本领域所属人员能够了解该存储介质的具体结构及变形,故而在此不再赘述。凡是本申请实施例的方法所采用的存储介质都属于本申请所欲保护的范围。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
应当注意的是,在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种数据同步方法,其特征在于,应用于数据同步系统,所述数据同步系统包括接口数据库、集成平台以及数据引擎;所述数据同步方法包括:
所述集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;
从所述接口数据库中获取与所述源业务系统关联的接口封装模块;
对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据;
通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
2.如权利要求1所述的数据同步方法,其特征在于,所述从所述接口数据库中获取与所述源业务系统关联的接口封装模块的步骤,还包括:
获取所述源业务系统关联的系统接口以及目标业务;
从所述接口数据库中获取与所述系统接口关联的所述目标业务的接口封装模块,其中,所述接口封装模块根据所述目标业务的元数据封装得到,并将封装后得到的所述接口封装模块存储于所述接口数据库中。
3.如权利要求2所述的数据同步方法,其特征在于,所述对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据的步骤包括:
解析所述接口封装模块,得到对应的元数据;
基于所述目标系统的数据结构将所述元数据进行数据合并、数据拆分以及数据增行中的至少一个,使得所述元数据转化为与所述目标系统适配的目标数据。
4.如权利要求3所述的数据同步方法,其特征在于,所述解析所述接口封装模块,得到对应的元数据的步骤包括:
分析所述接口封装模块的接口特性,得到分析结果,其中,所述接口特性包括系统参数、鉴权、有效期以及元数据结构中的至少一个;
根据所述分析结果得到所述元数据。
5.如权利要求2所述的数据同步方法,其特征在于,在所述目标业务的数量存在至少两个时,所述对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理包括:
将各个所述目标业务关联的接口封装模块分别基于所述目标系统的数据结构进行数据合并,得到合并后的目标数据;
将合并后的所述目标数据封装得到场景模型;
所述通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统的步骤包括:
通过所述数据引擎读取各个所述目标业务关联的接口封装模块,并将所述场景模型中的目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
6.如权利要求5所述的数据同步方法,其特征在于,所述通过所述数据引擎读取各个所述目标业务关联的接口封装模块,并将所述场景模型中的目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统的步骤之后,还包括:
所述数据引擎在将所述场景模型中的目标数据写入所述目标系统时,生成数据同步信息,并将所述数据同步信息反馈至所述集成平台;
在所述集成平台上显示所述数据同步信息。
7.如权利要求1所述的数据同步方法,其特征在于,所述从所述接口数据库中获取与所述源业务系统关联的接口封装模块,包括:
获取所述目标系统的系统版本;
从所述接口数据库中获取与所述系统版本对应的接口封装模块版本,其中,同一所述源业务系统关联不同的接口封装模块版本,不同的目标系统存在对应的接口封装模块版本。
8.一种数据同步系统,其特征在于,所述数据同步系统包括:
配置模块,用于集成平台在接收到配置请求时,根据所述配置请求确定源业务系统以及目标系统;
获取模块,用于从接口数据库中获取与所述源业务系统关联的接口封装模块;
处理模块,用于对所述接口封装模块中的元数据基于所述目标系统的数据结构进行数据处理,以将所述元数据转化为与所述目标系统适配的目标数据;
同步模块,用于通过所述数据引擎将所述目标数据写入所述目标系统,以使所述源业务系统的数据能同步至所述目标系统。
9.一种终端设备,其特征在于,所述终端设备包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的数据同步程序,所述数据同步程序被所述处理器执行时实现如权利要求1-7中任一项所述的数据同步方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有数据同步程序,所述数据同步程序被处理器执行时实现权利要求1-7中任一项所述的数据同步方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210854436.1A CN115328997B (zh) | 2022-07-15 | 2022-07-15 | 数据同步方法、系统、设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210854436.1A CN115328997B (zh) | 2022-07-15 | 2022-07-15 | 数据同步方法、系统、设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115328997A true CN115328997A (zh) | 2022-11-11 |
CN115328997B CN115328997B (zh) | 2023-04-07 |
Family
ID=83917819
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210854436.1A Active CN115328997B (zh) | 2022-07-15 | 2022-07-15 | 数据同步方法、系统、设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115328997B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117591607A (zh) * | 2024-01-19 | 2024-02-23 | 杭州青橄榄网络技术有限公司 | 数据同步管理方法与系统 |
Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1781096A (zh) * | 2003-08-21 | 2006-05-31 | 微软公司 | 通过中介文件系统或设备同步计算机系统的系统和方法 |
US20100057785A1 (en) * | 2008-08-26 | 2010-03-04 | Microsoft Corporation | Minimal extensions required for multi-master offline and collaboration for devices and web services |
CN102456179A (zh) * | 2010-10-27 | 2012-05-16 | 镇江华扬信息科技有限公司 | 一种财务系统的集成平台 |
CN107103448A (zh) * | 2016-02-23 | 2017-08-29 | 上海御行信息技术有限公司 | 基于工作流的数据集成系统 |
CN108521424A (zh) * | 2018-04-10 | 2018-09-11 | 肖恒念 | 面向异构终端设备的分布式数据处理方法 |
CN109462640A (zh) * | 2018-10-29 | 2019-03-12 | 上海掌门科技有限公司 | 一种元数据同步方法、数据端、交互系统及介质 |
CN111240645A (zh) * | 2020-01-06 | 2020-06-05 | 北京纷扬科技有限责任公司 | 一种基于PaaS的异构软件集成方法和系统 |
CN111460031A (zh) * | 2020-03-23 | 2020-07-28 | 腾讯科技(深圳)有限公司 | 一种数据同步的方法、装置、设备和介质 |
CN111680017A (zh) * | 2020-06-30 | 2020-09-18 | 深圳前海微众银行股份有限公司 | 一种数据同步的方法及装置 |
CN112364101A (zh) * | 2020-11-11 | 2021-02-12 | 深圳前海微众银行股份有限公司 | 数据的同步方法、装置、终端设备及介质 |
US10970255B1 (en) * | 2018-07-27 | 2021-04-06 | Veeva Systems Inc. | System and method for synchronizing data between a customer data management system and a data warehouse |
CN113239119A (zh) * | 2021-06-01 | 2021-08-10 | 深圳市移卡科技有限公司 | 数据同步方法、设备及存储介质 |
US20210271577A1 (en) * | 2020-02-28 | 2021-09-02 | Veritas Technologies Llc | Methods and systems for data resynchronization in a replication environment |
CN114089977A (zh) * | 2021-11-16 | 2022-02-25 | 云镝智慧科技有限公司 | 业务系统的单据对接方法、装置及计算机设备 |
CN114547204A (zh) * | 2022-02-25 | 2022-05-27 | 金蝶软件(中国)有限公司 | 数据同步方法、装置、计算机设备和存储介质 |
-
2022
- 2022-07-15 CN CN202210854436.1A patent/CN115328997B/zh active Active
Patent Citations (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1781096A (zh) * | 2003-08-21 | 2006-05-31 | 微软公司 | 通过中介文件系统或设备同步计算机系统的系统和方法 |
US20100057785A1 (en) * | 2008-08-26 | 2010-03-04 | Microsoft Corporation | Minimal extensions required for multi-master offline and collaboration for devices and web services |
CN102456179A (zh) * | 2010-10-27 | 2012-05-16 | 镇江华扬信息科技有限公司 | 一种财务系统的集成平台 |
CN107103448A (zh) * | 2016-02-23 | 2017-08-29 | 上海御行信息技术有限公司 | 基于工作流的数据集成系统 |
CN108521424A (zh) * | 2018-04-10 | 2018-09-11 | 肖恒念 | 面向异构终端设备的分布式数据处理方法 |
US10970255B1 (en) * | 2018-07-27 | 2021-04-06 | Veeva Systems Inc. | System and method for synchronizing data between a customer data management system and a data warehouse |
CN109462640A (zh) * | 2018-10-29 | 2019-03-12 | 上海掌门科技有限公司 | 一种元数据同步方法、数据端、交互系统及介质 |
CN111240645A (zh) * | 2020-01-06 | 2020-06-05 | 北京纷扬科技有限责任公司 | 一种基于PaaS的异构软件集成方法和系统 |
US20210271577A1 (en) * | 2020-02-28 | 2021-09-02 | Veritas Technologies Llc | Methods and systems for data resynchronization in a replication environment |
CN111460031A (zh) * | 2020-03-23 | 2020-07-28 | 腾讯科技(深圳)有限公司 | 一种数据同步的方法、装置、设备和介质 |
CN111680017A (zh) * | 2020-06-30 | 2020-09-18 | 深圳前海微众银行股份有限公司 | 一种数据同步的方法及装置 |
CN112364101A (zh) * | 2020-11-11 | 2021-02-12 | 深圳前海微众银行股份有限公司 | 数据的同步方法、装置、终端设备及介质 |
CN113239119A (zh) * | 2021-06-01 | 2021-08-10 | 深圳市移卡科技有限公司 | 数据同步方法、设备及存储介质 |
CN114089977A (zh) * | 2021-11-16 | 2022-02-25 | 云镝智慧科技有限公司 | 业务系统的单据对接方法、装置及计算机设备 |
CN114547204A (zh) * | 2022-02-25 | 2022-05-27 | 金蝶软件(中国)有限公司 | 数据同步方法、装置、计算机设备和存储介质 |
Non-Patent Citations (3)
Title |
---|
BO ZHOU: "Data integration as a service for Applications Deployment on the SaaS Platform", 《2013 6TH INTERNATIONAL CONFERENCE ON BIOMEDICAL ENGINEERING AND INFORMATICS》 * |
BYUNG-YUN LEE等: "Data synchronization protocol in mobile computing environment using yncML", 《5TH IEEE INTERNATIONAL CONFERENCE ON HIGH SPEED NETWORKS AND MULTIMEDIA COMMUNICATION (CAT. NO.02EX612)》 * |
崔天慧: "校园数据共享平台的设计与实现", 《中国优秀硕士学位论文全文数据库信息科技辑》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117591607A (zh) * | 2024-01-19 | 2024-02-23 | 杭州青橄榄网络技术有限公司 | 数据同步管理方法与系统 |
CN117591607B (zh) * | 2024-01-19 | 2024-05-07 | 杭州青橄榄网络技术有限公司 | 数据同步管理方法与系统 |
Also Published As
Publication number | Publication date |
---|---|
CN115328997B (zh) | 2023-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9152305B2 (en) | Systems and methods for presentations with live application integration | |
US9383902B2 (en) | Systems and methods for presentations with live application integration | |
CN110119294A (zh) | 菜单页面的生成方法、装置及系统 | |
CN111427576B (zh) | 配置应用程序接口的方法、装置、存储介质及终端 | |
CN108984202B (zh) | 一种电子资源分享方法、装置和存储介质 | |
CN113791765B (zh) | 云服务的资源编排方法、装置、设备及存储介质 | |
CN115328997B (zh) | 数据同步方法、系统、设备及存储介质 | |
CN113239310A (zh) | 一种页面加载方法及相关装置 | |
CN115373673A (zh) | 应用页面构建方法、装置、计算机设备及可读存储介质 | |
CN111046245A (zh) | 多源异构数据源融合计算方法、系统、设备和存储介质 | |
CN113806429A (zh) | 基于大数据流处理框架的画布式日志分析方法 | |
CN111612135B (zh) | 用于信息交互的方法和装置 | |
CN110717992B (zh) | 调度模型的方法、装置、计算机系统和可读存储介质 | |
CN115292418B (zh) | 跨系统业务流程自动化处理方法及系统 | |
CN113296912B (zh) | 任务处理方法及装置、系统、存储介质、电子设备 | |
CN114615521A (zh) | 视频处理方法和装置、计算机可读存储介质、电子设备 | |
CN115185841A (zh) | 系统重构测试方法、装置、设备及存储介质 | |
CN111176624B (zh) | 一种流式计算指标的生成方法及装置 | |
CN112445811A (zh) | 基于sql配置的数据服务方法、装置、存储介质及组件 | |
CN112394809A (zh) | 一种实现增强现实的方法、装置及通信设备 | |
CN114707680B (zh) | 航空器3d模型生成方法、装置、电子设备和可读介质 | |
CN116775276B (zh) | 分布式计算方法、装置、设备及存储介质 | |
CN112989770B (zh) | 一种表单生成方法、装置、系统、电子设备和存储介质 | |
CN108845803B (zh) | 一种列表视图的更新方法、装置、设备及存储介质 | |
CN115983545A (zh) | 针对拆单软件的数据提取方法、系统、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |