CN112650815B - 环境数据的同步方法及装置、存储介质及电子装置 - Google Patents

环境数据的同步方法及装置、存储介质及电子装置 Download PDF

Info

Publication number
CN112650815B
CN112650815B CN202110071540.9A CN202110071540A CN112650815B CN 112650815 B CN112650815 B CN 112650815B CN 202110071540 A CN202110071540 A CN 202110071540A CN 112650815 B CN112650815 B CN 112650815B
Authority
CN
China
Prior art keywords
synchronization
data
target
production environment
environment data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110071540.9A
Other languages
English (en)
Other versions
CN112650815A (zh
Inventor
王珂伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Haier Technology Co Ltd
Haier Smart Home Co Ltd
Original Assignee
Qingdao Haier Technology Co Ltd
Haier Smart Home Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Haier Technology Co Ltd, Haier Smart Home Co Ltd filed Critical Qingdao Haier Technology Co Ltd
Priority to CN202110071540.9A priority Critical patent/CN112650815B/zh
Publication of CN112650815A publication Critical patent/CN112650815A/zh
Application granted granted Critical
Publication of CN112650815B publication Critical patent/CN112650815B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00Arrangements for software engineering
    • G06F8/70Software maintenance or management
    • G06F8/71Version control; Configuration management

Abstract

本发明公开了一种环境数据的同步方法及装置、存储介质及电子装置,上述方法包括:获取目标对象设置的环境数据同步请求,环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;从订阅消息系统平台中保存的多个环境数据中确定环境数据同步请求对应的目标环境数据;在第一生产环境配置管理器获取到目标环境数据的情况下,通过第一生产环境配置管理器将目标环境数据同步至一个或多个第二生产环境配置管理器,以使一个或多个第二生产环境配置管理器配置目标设备在目标环境数据下进行生产,第一生产环境配置管理器已配置目标设备在目标环境数据下进行生产,解决了多平台的环境数据不能及时同步以及需要人工手动同步运维等问题。

Description

环境数据的同步方法及装置、存储介质及电子装置
技术领域
本发明涉及通信领域,具体而言,涉及一种环境数据的同步方法及装置、存储介质及电子装置。
背景技术
软件开发行业,一定会存在多个运行环境,如生产环境、验收环境、联调环境、开发环境等等,但在各个环境都存在一些基础数据,需要保证各个环境的基础数据完全一致,才可进行正式生产环境的模拟开发和测试,保证完整性的模拟生产环境,完整性的测试和联调,最终上到生产环境才可以保障程序的运行稳定和准确。
目前的数据同步,都是以生产环境的数据为准,哪个环境需要(如开发环境需要进行开发、测试环境需要测试等)数据,则需要线下通知相关人员需要同步的数据,相关开发人员需要提交给运维操作工单,由运维执行脚本或者手动同步数据库或者中间件,既耗人力成本,又耗时间成本,还不一定确保数据的准确性,并且由于项目越来越多,多项目并行开发也会越来越多,随之会产生更多的环境,数据同步也会越来越多,如果完全通过人工操作,任务量会越来越大,会导致运维的大部分人力投入到这种事情上,从而产生误操作的可能性也会越大,风险会越高。
针对相关技术中,多平台的环境数据不能及时同步以及需要人工手动同步运维等问题,尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种环境数据的同步方法及装置、存储介质及电子装置,以至少解决相关技术中,以至少解决相关技术中,多平台的环境数据不能及时同步以及需要人工手动同步运维等问题。
根据本发明实施例的一个方面,提供了一种环境数据的同步方法,包括:获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产。
在一个示例性实施例中,从所述订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据之后,所述方法还包括:获取所述第一生产环境配置管理器中设置的所述目标环境数据的同步类型,其中,所述同步类型包含:目标环境数据的增量同步、目标环境数据的全量同步;根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式。
在一个示例性实施例中,根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式,包括:当确定所述同步方式为目标环境数据的增量同步的情况下,调用所述订阅消息系统平台的增量同步接口;通过所述增量同步接口将所有待同步的目标环境数据发送至所述第一生产环境配置管理器。
在一个示例性实施例中,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产之后,所述方法还包括:对所述一个或多个第二生产环境配置管理器的数据同步接口进行数据检测;当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息,其中,所述应答消息用于指示第一生产环境配置管理器与第二生产环境配置管理器中的目标环境数据一致。
在一个示例性实施例中,当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息之后,所述方法还包括:获取一个或多个第二生产环境配置管理器反馈的应答消息;将所述应答消息记录在所述第一生产环境配置管理器的同步列表中,以确定所述第一生产环境配置管理器的历史同步结果,其中,所述历史同步结果用于指示已与第一生产环境配置管理器完成数据同步的第二生产环境配置管理器。
在一个示例性实施例中,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产之后,所述方法还包括:确定所述一个或多个第二生产环境配置管理器对接收到的所述目标环境数据的解析结果;将所述解析结果存储在所述一个或多个第二生产环境配置管理器对应的目标订阅消息系统平台;在所述目标订阅消息系统平台接收到第三生产环境配置管理器发送的同步请求后,根据所述同步请求从所述目标订阅消息系统平台中选择符合所述同步请求的环境数据进行同步。
根据本发明实施例的另一个方面,还提供了一种环境数据的同步装置,包括:第一获取模块,用于获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;第一确定模块,用于从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;同步模块,用于在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产。
在一个示例性实施例中,上述装置还包括:第二获取模块,用于获取所述第一生产环境配置管理器中设置的所述目标环境数据的同步类型,其中,所述同步类型包含:目标环境数据的增量同步、目标环境数据的全量同步;第二确定模块,用于根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式。
在一个示例性实施例中,上述第二确定模块,还用于当确定所述同步方式为目标环境数据的增量同步的情况下,调用所述订阅消息系统平台的增量同步接口;通过所述增量同步接口将所有待同步的目标环境数据发送至所述第一生产环境配置管理器。
在一个示例性实施例中,上述装置还包括:检测模块,用于对所述一个或多个第二生产环境配置管理器的数据同步接口进行数据检测;接收模块,用于当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息,其中,所述应答消息用于指示第一生产环境配置管理器与第二生产环境配置管理器中的目标环境数据一致。
在一个示例性实施例中,上述接收模块还包括:记录单元,用于获取一个或多个第二生产环境配置管理器反馈的应答消息;将所述应答消息记录在所述第一生产环境配置管理器的同步列表中,以确定所述第一生产环境配置管理器的历史同步结果,其中,所述历史同步结果用于指示已与第一生产环境配置管理器完成数据同步的第二生产环境配置管理器。
在一个示例性实施例中,上述装置还包括:第三确定模块,用于确定所述一个或多个第二生产环境配置管理器对接收到的所述目标环境数据的解析结果;存储模块,用于将所述解析结果存储在所述一个或多个第二生产环境配置管理器对应的目标订阅消息系统平台;选择模块,用于在所述目标订阅消息系统平台接收到第三生产环境配置管理器发送的同步请求后,根据所述同步请求从所述目标订阅消息系统平台中选择符合所述同步请求的环境数据进行同步。
根据本发明实施例的又一方面,还提供了一种计算机可读的存储介质,该计算机可读的存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述环境数据的同步方法。
根据本发明实施例的又一方面,还提供了一种电子装置,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其中,上述处理器通过计算机程序执行上述的环境数据的同步方法。
在本发明实施例中,获取目标对象设置的环境数据同步请求,其中,环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;从订阅消息系统平台中保存的多个环境数据中确定环境数据同步请求对应的目标环境数据;在第一生产环境配置管理器获取到目标环境数据的情况下,通过第一生产环境配置管理器将目标环境数据同步至一个或多个第二生产环境配置管理器,以使一个或多个第二生产环境配置管理器配置目标设备在目标环境数据下进行生产,其中,第一生产环境配置管理器已配置目标设备在目标环境数据下进行生产,即根据配置环境数据同步请求,使得环境数据在发生变化后,在订阅消息系统平台确定需同步的目标环境数据进行自动同步,使得不同的生产环境配置管理器中的目标环境数据保持实时的一致性,解决了多平台的环境数据不能及时同步以及需要人工手动同步运维等问题,提高了各个环境数据的实时性同步效率,保证了各个环境数据的一致性,避免了人工手动时易出现的数据错误,减少了运维成本。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是本发明实施例的一种环境数据的同步方法的计算机终端的硬件结构框图;
图2是根据本发明实施例的环境数据的同步方法的流程图;
图3是根据本发明可选实施例的生产环境与其他环境的交互示意图;
图4是根据本发明可选实施例的生产环境同步功能的流程图;
图5是根据本发明可选实施例的其他环境同步功能的流程图;
图6是根据本发明可选实施例的手动增量同步的流程图;
图7是根据本发明可选实施例的手动全量同步的流程图;
图8是根据本发明实施例的环境数据的同步装置的结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明的实施例。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本申请实施例所提供的方法实施例可以在计算机终端、设备终端或者类似的运算装置中执行。以运行在计算机终端上为例,图1是本发明实施例的一种环境数据的同步方法的计算机终端的硬件结构框图。如图1所示,计算机终端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置)和用于存储数据的存储器104,在一个示例性实施例中,上述计算机终端还可以包括用于通信功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理解,图1所示的结构仅为示意,其并不对上述计算机终端的结构造成限定。例如,计算机终端还可包括比图1中所示更多或者更少的组件,或者具有与图1所示等同功能或比图1所示功能更多的不同的配置。
存储器104可用于存储计算机程序,例如,应用软件的软件程序以及模块,如本发明实施例中的环境数据的同步方法对应的计算机程序,处理器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应用以及数据处理,即实现上述的方法。存储器104可包括高速随机存储器,还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于处理器102远程设置的存储器,这些远程存储器可以通过网络连接至计算机终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体实例可包括计算机终端的通信供应商提供的无线网络。在一个实例中,传输装置106包括一个网络适配器(Network Interface Controller,简称为NIC),其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例中,传输装置106可以为射频(Radio Frequency,简称为RF)模块,其用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种环境数据的同步方法,图2是根据本发明实施例的环境数据的同步方法的流程图,该流程包括如下步骤:
步骤S202,获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;
步骤S204,从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;
步骤S206,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产。
通过上述步骤,获取目标对象设置的环境数据同步请求,其中,环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;从订阅消息系统平台中保存的多个环境数据中确定环境数据同步请求对应的目标环境数据;在第一生产环境配置管理器获取到目标环境数据的情况下,通过第一生产环境配置管理器将目标环境数据同步至一个或多个第二生产环境配置管理器,以使一个或多个第二生产环境配置管理器配置目标设备在目标环境数据下进行生产,其中,第一生产环境配置管理器已配置目标设备在目标环境数据下进行生产,即根据配置环境数据同步请求,使得环境数据在发生变化后,在订阅消息系统平台确定需同步的目标环境数据进行自动同步,使得不同的生产环境配置管理器中的目标环境数据保持实时的一致性,解决了多平台的环境数据不能及时同步以及需要人工手动同步运维等问题,提高了各个环境数据的实时性同步效率,保证了各个环境数据的一致性,避免了人工手动时易出现的数据错误,减少了运维成本。
需要说明的是,上述生产不仅仅是指设备的生产,还可以是软件的开发,例如,软件开发行业存在多个运行环境,如生产环境、验收环境、联调环境、开发环境等等,通过环境数据同步请求保证各个环境的基础数据完全一致,更加准确的进行正式生产环境的模拟开发和测试,保证完整性的模拟生产环境,完整性的测试和联调,使得最终上到生产环境的程序运行稳定与准确。
在一个示例性实施例中,从所述订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据之后,所述方法还包括:获取所述第一生产环境配置管理器中设置的所述目标环境数据的同步类型,其中,所述同步类型包含:目标环境数据的增量同步、目标环境数据的全量同步;根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式。
简而言之,由于可能同时存在多组环境数据,部分环境数据可能已进行了的目标环境数据同步,因此,根据实际情况对第一生产环境配置管理器中的同步类型进行设置,进而对于没有同步过的环境数据的组别进行一次性同步所有数据的目标环境数据的全量同步,对于已同步过部分环境数据的组别进行只同步两个数据库的不同部分目标环境数据的增量同步。
在一个示例性实施例中,根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式,包括:当确定所述同步方式为目标环境数据的增量同步的情况下,调用所述订阅消息系统平台的增量同步接口;通过所述增量同步接口将所有待同步的目标环境数据发送至所述第一生产环境配置管理器。可以理解的是,不同的同步方式调用不同的同步接口,以使得在进行环境数据同步时不会出现错误,保证了环境数据同步的稳定性。
在一个示例性实施例中,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产之后,所述方法还包括:对所述一个或多个第二生产环境配置管理器的数据同步接口进行数据检测;当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息,其中,所述应答消息用于指示第一生产环境配置管理器与第二生产环境配置管理器中的目标环境数据一致。
简而言之,为了保证目标环境数据同步的完整性,对第一生产环境配置管理器向一个或多个第二生产环境配置管理器的目标环境数据同步过程进行检测,以保证目标环境数据的连续性,并且在检测到数据同步接口完成目标环境数据同步后,接收第二生产环境配置管理器发送的用于指示第一生产环境配置管理器与第二生产环境配置管理器中的目标环境数据一致的应答消息,确保目标环境数据同步后的一致性。
在一个示例性实施例中,当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息之后,所述方法还包括:获取一个或多个第二生产环境配置管理器反馈的应答消息;将所述应答消息记录在所述第一生产环境配置管理器的同步列表中,以确定所述第一生产环境配置管理器的历史同步结果,其中,所述历史同步结果用于指示已与第一生产环境配置管理器完成数据同步的第二生产环境配置管理器。
也就是说,为了便于对第一生产环境配置管理器向向外同步数据的记录进行管理,在接收到第二生产环境配置管理器反馈的应答消息后,将应答消息记录在第一生产环境配置管理器的同步列表中,使得之后同步时,可通过同步列表确认已同步的目标环境数据,避免相同数据进行多次重复。
在一个示例性实施例中,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产之后,所述方法还包括:确定所述一个或多个第二生产环境配置管理器对接收到的所述目标环境数据的解析结果;将所述解析结果存储在所述一个或多个第二生产环境配置管理器对应的目标订阅消息系统平台;在所述目标订阅消息系统平台接收到第三生产环境配置管理器发送的同步请求后,根据所述同步请求从所述目标订阅消息系统平台中选择符合所述同步请求的环境数据进行同步。
在实际的目标环境数据同步中,常常会出现多种生产环境配置管理器进行数据同步,进而为了保证其他生产环境配置管理器从已完成目标环境数据同步的第二生产环境配置管理器中进行环境数据进行同步,第二生产环境配置管理器还会对接收到的目标环境数据进行解析并存储在第二生产环境配置管理器对应的目标订阅消息系统平台中,继而在目标订阅消息系统平台接收到第三生产环境配置管理器发送的同步请求后,从目标订阅消息系统平台中选择符合同步请求的环境数据向第三生产环境配置管理器进行同步。
为了更好的理解本发明实施例以及可选实施例的技术方案,以下结合示例对上述的环境数据的同步方法的流程进行解释说明,但不用于限定本发明实施例的技术方案。
本发明可选实施例中提供了一种实现多环境数据实时同步的方案和方法,通过配置待同步环境数据的业务服务,从已发布到kafka平台(相当于本发明实施例中的订阅消息系统平台)的数据中获取需要同步的数据,生产环境Config-manager(一种配置管理工具,相当于本发明实施例中的生产环境配置管理器)从kafka平台消费这些同步数据信息,并推送给其它环境的Config-manager服务,进而无需人工干预,完全实现数据的实时和自动化同步。为生产环境的最终发版,提供了稳定准确的数据支撑。
具体的,如图3所示,生产环境Config-manager,用于在业务服务在发生创建、更新、删除等操作后,将需要同步的数据发布到kafka平台,生产环境Config-manager从kafka平台消费这些同步信息,并推送给其它环境的Config-manager服务。其它环境Config-manager,用于收到来自生产环境的同步数据,将同步数据发布到本地kafka平台,本环境的业务服务订阅同步数据,将数据同步到本地。
需要说明的是,Config-manager服务定位为完全的同步通能,不提供任何业务接口和处理能力,Config-manager服务和业务服务通过kafka解耦,同步数据由kafka中流转,减少服务之间依赖,Config-manager可以动态扩展,需要同步的dubbo服务可实时接入Config-manager同步能力,接入配置中心管理系统,并可以集中管理同步数据、结果,并进行容错处理。
作为一种可选的实施方式,源环境(即生产环境)Config-manager同步功能流程图,如图4所示,生产环境Config-manager在通过数据同步接口向其他环境Config-manager推送同步数据后,接收其他环境反馈的同步应答结果并记录。图5为其它环境的Config-manage功能的流程示意图,其他环境收到生产环境Config-manager推送的同步数据后,将已同步的数据发送至kafka平台,并通过Dubbo服务框架对发布的目标环境数据进行解析,并向其他环境Config-manager发送同步结果应答消息。
可选的,图6为Config-manager手动增量同步(即只同步两个数据库的不同部分)流程图。通过生产环境发起手动同步请求并调用Config-manager中的增量同步接口向kafka平台中的Dubbo服务框架对接收到的增量同步请求进行解析查找,确定待发布的同步环境数据后通过生产环境对应的kafka平台向外部的其他环境推动包含同步环境数据的同步消息,其他环境的Config-manager将接收到的生产环境的同步消息发送至其他环境的kafka平台,使得其他环境的kafka平台中的Dubbo服务框架可以对同步数据进行处理的到相应的同步结果,其他环境将自身对生产环境的同步消息的同步结果回传至生产环境进行记录,以实现同步过程的结束。
图7为Config-manager手动全量同步(即一次性同步所有数据)流程图。
需要说明的是,本发明不限于使用kafka平台,其他可以达到同样效果的中间件也可实现本发明的可选实施例中的技术方案,本发明对此不做过多限定。
通过上述可选实施例,多环境的数据同步方案,在后台管理系统配置需要同步的数据类型和环境,借助kafka作为消息传递的中间件,由config-manager负责处理kafka同步到各个环境的消息,进行数据的完整落地。如配置的数据类型在生产环境发生了变化,系统则会实时将变化的数据同步到配置的环境中,不需要人为干涉,可由系统自动化完成,降低了数据错误的风险,减少了人工和时间成本,保障上线生产的代码无bug或者bug率低,提升SLA和用户的体验。解决了各个环境基础数据的实时性同步,解决了各个环境数据的一致性,减少了人工手动同步的人员成本,避免了手动同步因人为因素造成的数据错误,减少了人工手动同步的时间成本,数据实时更新,确保开发和测试可及时的进行开发和验收。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
在本实施例中还提供了一种环境数据的同步装置,该装置用于实现上述实施例及优选实施方式,已经进行过说明的不再赘述。如以下所使用的,术语“模块”可以实现预定功能的软件和/或硬件的组合。尽管以下实施例所描述的装置较佳地以软件来实现,但是硬件,或者软件和硬件的组合的实现也是可能并被构想的。
图8是根据本发明实施例的环境数据的同步装置的结构框图,如图8所示,该装置包括:
第一获取模块42,用于获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;
第一确定模块44,用于从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;
同步模块46,用于在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产。
通过上述技术方案,获取目标对象设置的环境数据同步请求,其中,环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;从订阅消息系统平台中保存的多个环境数据中确定环境数据同步请求对应的目标环境数据;在第一生产环境配置管理器获取到目标环境数据的情况下,通过第一生产环境配置管理器将目标环境数据同步至一个或多个第二生产环境配置管理器,以使一个或多个第二生产环境配置管理器配置目标设备在目标环境数据下进行生产,其中,第一生产环境配置管理器已配置目标设备在目标环境数据下进行生产,即根据配置环境数据同步请求,使得环境数据在发生变化后,在订阅消息系统平台确定需同步的目标环境数据进行自动同步,使得不同的生产环境配置管理器中的目标环境数据保持实时的一致性,解决了多平台的环境数据不能及时同步以及需要人工手动同步运维等问题,提高了各个环境数据的实时性同步效率,保证了各个环境数据的一致性,避免了人工手动时易出现的数据错误,减少了运维成本。
需要说明的是,上述生产不仅仅是指设备的生产,还可以是软件的开发,例如,软件开发行业存在多个运行环境,如生产环境、验收环境、联调环境、开发环境等等,通过环境数据同步请求保证各个环境的基础数据完全一致,更加准确的进行正式生产环境的模拟开发和测试,保证完整性的模拟生产环境,完整性的测试和联调,使得最终上到生产环境的程序运行稳定与准确。
在一个示例性实施例中,上述装置还包括:第二获取模块,用于获取所述第一生产环境配置管理器中设置的所述目标环境数据的同步类型,其中,所述同步类型包含:目标环境数据的增量同步、目标环境数据的全量同步;第二确定模块,用于根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式。
简而言之,由于可能同时存在多组环境数据,部分环境数据可能已进行了的目标环境数据同步,因此,根据实际情况对第一生产环境配置管理器中的同步类型进行设置,进而对于没有同步过的环境数据的组别进行一次性同步所有数据的目标环境数据的全量同步,对于已同步过部分环境数据的组别进行只同步两个数据库的不同部分目标环境数据的增量同步。
在一个示例性实施例中,上述第二确定模块,还用于当确定所述同步方式为目标环境数据的增量同步的情况下,调用所述订阅消息系统平台的增量同步接口;通过所述增量同步接口将所有待同步的目标环境数据发送至所述第一生产环境配置管理器。可以理解的是,不同的同步方式调用不同的同步接口,以使得在进行环境数据同步时不会出现错误,保证了环境数据同步的稳定性。
在一个示例性实施例中,上述装置还包括:检测模块,用于对所述一个或多个第二生产环境配置管理器的数据同步接口进行数据检测;接收模块,用于当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息,其中,所述应答消息用于指示第一生产环境配置管理器与第二生产环境配置管理器中的目标环境数据一致。
简而言之,为了保证目标环境数据同步的完整性,对第一生产环境配置管理器向一个或多个第二生产环境配置管理器的目标环境数据同步过程进行检测,以保证目标环境数据的连续性,并且在检测到数据同步接口完成目标环境数据同步后,接收第二生产环境配置管理器发送的用于指示第一生产环境配置管理器与第二生产环境配置管理器中的目标环境数据一致的应答消息,确保目标环境数据同步后的一致性。
在一个示例性实施例中,上述接收模块还包括:记录单元,用于获取一个或多个第二生产环境配置管理器反馈的应答消息;将所述应答消息记录在所述第一生产环境配置管理器的同步列表中,以确定所述第一生产环境配置管理器的历史同步结果,其中,所述历史同步结果用于指示已与第一生产环境配置管理器完成数据同步的第二生产环境配置管理器。
也就是说,为了便于对第一生产环境配置管理器向向外同步数据的记录进行管理,在接收到第二生产环境配置管理器反馈的应答消息后,将应答消息记录在第一生产环境配置管理器的同步列表中,使得之后同步时,可通过同步列表确认已同步的目标环境数据,避免相同数据进行多次重复。
在一个示例性实施例中,上述装置还包括:第三确定模块,用于确定所述一个或多个第二生产环境配置管理器对接收到的所述目标环境数据的解析结果;存储模块,用于将所述解析结果存储在所述一个或多个第二生产环境配置管理器对应的目标订阅消息系统平台;选择模块,用于在所述目标订阅消息系统平台接收到第三生产环境配置管理器发送的同步请求后,根据所述同步请求从所述目标订阅消息系统平台中选择符合所述同步请求的环境数据进行同步。
在实际的目标环境数据同步中,常常会出现多种生产环境配置管理器进行数据同步,进而为了保证其他生产环境配置管理器从已完成目标环境数据同步的第二生产环境配置管理器中进行环境数据进行同步,第二生产环境配置管理器还会对接收到的目标环境数据进行解析并存储在第二生产环境配置管理器对应的目标订阅消息系统平台中,继而在目标订阅消息系统平台接收到第三生产环境配置管理器发送的同步请求后,从目标订阅消息系统平台中选择符合同步请求的环境数据向第三生产环境配置管理器进行同步。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种存储介质,该存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
可选地,在本实施例中,上述存储介质可以被设置为存储用于执行以下步骤的计算机程序:
S1,获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;
S2,从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;
S3,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产。
本发明的实施例还提供了一种计算机可读存储介质,该计算机可读存储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。
在一个示例性实施例中,上述计算机可读存储介质可以包括但不限于:U盘、只读存储器(Read-Only Memory,简称为ROM)、随机存取存储器(Random Access Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述任一项方法实施例中的步骤。
在一个示例性实施例中,上述电子装置还可以包括传输设备以及输入输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述处理器连接。
在一个示例性实施例中,上述处理器可以被设置为通过计算机程序执行以下步骤:
S1,获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;
S2,从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;
S3,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种环境数据的同步方法,其特征在于,包括:
获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;
从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;
在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产;
确定所述第一生产环境配置管理器与所述一个或多个第二生产环境配置管理器之间进行所述目标环境数据同步的同步应答结果;
其中,所述多个环境数据为在生产不同设备时通过生产环境配置管理器实时监测到的生产环境数据。
2.根据权利要求1所述的方法,其特征在于,从所述订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据之后,所述方法还包括:
获取所述第一生产环境配置管理器中设置的所述目标环境数据的同步类型,其中,所述同步类型包含:目标环境数据的增量同步、目标环境数据的全量同步;
根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式。
3.根据权利要求2所述的方法,其特征在于,根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式,包括:
当确定所述同步方式为目标环境数据的增量同步的情况下,调用所述订阅消息系统平台的增量同步接口;
通过所述增量同步接口将所有待同步的目标环境数据发送至所述第一生产环境配置管理器。
4.根据权利要求1所述的方法,其特征在于,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产之后,所述方法还包括:
对所述一个或多个第二生产环境配置管理器的数据同步接口进行数据检测;
当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息,其中,所述应答消息用于指示第一生产环境配置管理器与第二生产环境配置管理器中的目标环境数据一致。
5.根据权利要求4所述的方法,其特征在于,当数据检测结果显示所述数据同步接口完成所述目标环境数据同步的情况下,接收所述一个或多个第二生产环境配置管理器向所述第一生产环境配置管理器反馈的应答消息之后,所述方法还包括:
获取一个或多个第二生产环境配置管理器反馈的应答消息;
将所述应答消息记录在所述第一生产环境配置管理器的同步列表中,以确定所述第一生产环境配置管理器的历史同步结果,其中,所述历史同步结果用于指示已与第一生产环境配置管理器完成数据同步的第二生产环境配置管理器。
6.根据权利要求1所述的方法,其特征在于,在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产之后,所述方法还包括:
确定所述一个或多个第二生产环境配置管理器对接收到的所述目标环境数据的解析结果;
将所述解析结果存储在所述一个或多个第二生产环境配置管理器对应的目标订阅消息系统平台;
在所述目标订阅消息系统平台接收到第三生产环境配置管理器发送的同步请求后,根据所述同步请求从所述目标订阅消息系统平台中选择符合所述同步请求的环境数据进行同步。
7.一种环境数据的同步装置,其特征在于,包括:
第一获取模块,用于获取目标对象设置的环境数据同步请求,其中,所述环境数据同步请求用于请求在不同的生产环境配置管理器同步目标环境数据;
第一确定模块,用于从订阅消息系统平台中保存的多个环境数据中确定所述环境数据同步请求对应的目标环境数据;
同步模块,用于在第一生产环境配置管理器获取到所述目标环境数据的情况下,通过所述第一生产环境配置管理器将所述目标环境数据同步至一个或多个第二生产环境配置管理器,以使所述一个或多个第二生产环境配置管理器配置目标设备在所述目标环境数据下进行生产,其中,所述第一生产环境配置管理器已配置目标设备在所述目标环境数据下进行生产;
结果模块,用于确定所述第一生产环境配置管理器与所述一个或多个第二生产环境配置管理器之间进行所述目标环境数据同步的同步应答结果;
其中,所述多个环境数据为在生产不同设备时通过生产环境配置管理器实时监测到的生产环境数据。
8.根据权利要求7所述的装置,其特征在于,所述装置还包括:
第二获取模块,用于获取所述第一生产环境配置管理器中设置的所述目标环境数据的同步类型,其中,所述同步类型包含:目标环境数据的增量同步、目标环境数据的全量同步;
第二确定模块,用于根据已设置的所述同步类型确定订阅消息系统平台与所述第一生产环境配置管理器之间同步所述目标环境数据的同步方式。
9.一种计算机可读的存储介质,其特征在于,所述计算机可读的存储介质包括存储的程序,其中,所述程序运行时执行上述权利要求1至6任一项中所述的方法。
10.一种电子装置,包括存储器和处理器,其特征在于,所述存储器中存储有计算机程序,所述处理器被设置为通过所述计算机程序执行所述权利要求1至6任一项中所述的方法。
CN202110071540.9A 2021-01-19 2021-01-19 环境数据的同步方法及装置、存储介质及电子装置 Active CN112650815B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110071540.9A CN112650815B (zh) 2021-01-19 2021-01-19 环境数据的同步方法及装置、存储介质及电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110071540.9A CN112650815B (zh) 2021-01-19 2021-01-19 环境数据的同步方法及装置、存储介质及电子装置

Publications (2)

Publication Number Publication Date
CN112650815A CN112650815A (zh) 2021-04-13
CN112650815B true CN112650815B (zh) 2023-06-16

Family

ID=75370692

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110071540.9A Active CN112650815B (zh) 2021-01-19 2021-01-19 环境数据的同步方法及装置、存储介质及电子装置

Country Status (1)

Country Link
CN (1) CN112650815B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115460077A (zh) * 2022-09-01 2022-12-09 杭州华橙软件技术有限公司 配置信息的更新方法、装置、存储介质及电子装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104317843A (zh) * 2014-10-11 2015-01-28 上海瀚之友信息技术服务有限公司 一种数据同步etl系统
CN106878056A (zh) * 2016-12-30 2017-06-20 阿里巴巴集团控股有限公司 一种多环境下同步接口配置的方法及装置
CN109656569A (zh) * 2018-10-16 2019-04-19 平安普惠企业管理有限公司 多环境应用部署方法、设备、存储介质及装置
CN109684203A (zh) * 2018-11-27 2019-04-26 平安科技(深圳)有限公司 程序运行参数配置方法、装置、计算机设备及存储介质
CN109739539A (zh) * 2018-12-27 2019-05-10 深圳前海微众银行股份有限公司 跨环境的应用发布方法、装置、设备及存储介质
CN111767075A (zh) * 2020-06-23 2020-10-13 北京思特奇信息技术股份有限公司 一种应用程序版本同步的方法和装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104317843A (zh) * 2014-10-11 2015-01-28 上海瀚之友信息技术服务有限公司 一种数据同步etl系统
CN106878056A (zh) * 2016-12-30 2017-06-20 阿里巴巴集团控股有限公司 一种多环境下同步接口配置的方法及装置
CN109656569A (zh) * 2018-10-16 2019-04-19 平安普惠企业管理有限公司 多环境应用部署方法、设备、存储介质及装置
CN109684203A (zh) * 2018-11-27 2019-04-26 平安科技(深圳)有限公司 程序运行参数配置方法、装置、计算机设备及存储介质
CN109739539A (zh) * 2018-12-27 2019-05-10 深圳前海微众银行股份有限公司 跨环境的应用发布方法、装置、设备及存储介质
CN111767075A (zh) * 2020-06-23 2020-10-13 北京思特奇信息技术股份有限公司 一种应用程序版本同步的方法和装置

Also Published As

Publication number Publication date
CN112650815A (zh) 2021-04-13

Similar Documents

Publication Publication Date Title
CN110389900B (zh) 一种分布式数据库集群测试方法、装置及存储介质
CN109634728B (zh) 作业调度方法、装置、终端设备及可读存储介质
CN111338814A (zh) 消息处理方法和装置、存储介质和电子装置
CN114756328A (zh) 容器云平台巡检方法及装置
CN112650815B (zh) 环境数据的同步方法及装置、存储介质及电子装置
CN115705190A (zh) 依赖程度的确定方法及装置
CN110990381B (zh) 服务器的处理方法及装置、存储介质和电子装置
CN111008209B (zh) 数据的对账方法、装置及系统、存储介质、电子装置
CN112328470A (zh) 一种自动化运维测试方法、装置、设备及存储介质
CN114461337A (zh) 一种云仿真系统、方法、电子设备及存储介质
CN113934591A (zh) 数据监听方法及装置、存储介质、电子装置
CN113934552A (zh) 功能代码的确定方法及装置、存储介质、电子装置
CN115543491A (zh) 微服务处理方法和装置
CN113282308A (zh) 一种镜像构建方法、装置、存储介质及电子装置
CN111459795A (zh) 集群的压力测试方法及装置、计算机设备、存储介质
CN116560722B (zh) 运维流程处理方法、装置、电子设备及存储介质
CN110543470A (zh) 消息预警的方法及装置、存储介质和电子装置
CN113434410A (zh) 数据测试方法及装置、存储介质、电子装置
CN117520163A (zh) 应用系统的管理方法、装置、存储介质及电子装置
CN117171178A (zh) 数据维护方法及系统
CN115269333A (zh) 机器人的数据同步方法、装置、设备及存储介质
CN116340105A (zh) 任务的监控方法、监控系统与电子设备
CN115687065A (zh) 测试脚本的生成方法和装置、存储介质及电子装置
CN117520196A (zh) 基于流程引擎的流程配置文件的校验方法、装置及系统
CN115220992A (zh) 接口变更监控方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant