CN117093638A - 一种微服务数据初始化方法、系统、电子设备及存储介质 - Google Patents

Abstract

本发明实施例公开了一种微服务数据初始化方法、系统、电子设备及存储介质。该微服务数据初始化方法，具体可以包括：通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务；通过解释器模块获取目标服务对应的历史数据，并根据目标服务对待初始化数据进行数据格式转换，得到待初始化格式数据；通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据；通过执行器模块将目标初始化数据写入目标服务对应的数据库，以完成待初始化数据的初始化。本发明实施例的技术方案能够降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率，降低维护成本，同时提高了同一服务不同版本的兼容性。

Description

一种微服务数据初始化方法、系统、电子设备及存储介质

技术领域

本发明实施例涉及计算机技术领域，尤其涉及一种微服务数据初始化方法、系统、电子设备及存储介质。

背景技术

目前，在对微服务系统进行初始部署时通常都会有对数据进行初始化的要求。微服务的数据基本上可以分为两种：第一种是本服务中的数据，例如本服务的内存容量配置或本服务的API（Application Programming Interface,应用程序编程接口）接口信息等；第二种是全局配置数据，例如菜单配置、权限配置、组织配置或人员配置等。无论是哪种数据，在微服务架构中，都是由某个单独的服务进行统一管理。例如菜单配置是由专门的菜单管理服务来进行管理的。

针对微服务中的数据初始化，通常是通过执行SQL（Structured Query Language，结构化查询语言）脚本进行注入。也即，各个服务编辑好相应的SQL脚本，在各个微服务系统启动时连接相应的数据库，以通过SQL脚本将数据写入相应的数据库中。或者，在所有微服务启动完成之后，统一的将所有的SQL脚本注入数据库中。

然而，SQL脚本注入的方式对于全局配置数据来说存在较大的耦合性，需要确定管理全局配置数据的服务的数据库的数据模型以及表结构，以根据数据库的数据模型以及表结构编写该服务对应的SQL脚本。但是，一旦数据库的数据模型发生变化或表项字段发生变更，该服务对应的SQL脚本需要跟随一起修改，提高了维护成本，而且修改过程极易出错导致同一服务的不同版本间存在不兼容的情况，从而使得微服务系统无法持续迭代拓展。

发明内容

本发明实施例提供一种微服务数据初始化方法、系统、电子设备及存储介质，能够降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率，降低维护成本，同时提高了同一服务不同版本的兼容性。

根据本发明的一方面，提供了一种微服务数据初始化方法，包括：

通过数据源模块获取待初始化数据，并确定所述待初始化数据对应的目标服务；

通过解释器模块获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据；

通过所述解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据；

通过执行器模块将所述目标初始化数据写入所述目标服务对应的数据库，以完成所述待初始化数据的初始化。

根据本发明的另一方面，提供了一种微服务数据初始化系统，包括：

数据源模块，用于获取待初始化数据，并确定所述待初始化数据对应的目标服务；

解释器模块，用于获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据；

所述解释器模块，还用于根据所述历史数据和所述待初始化格式数据确定目标初始化数据；

执行器模块，用于将所述目标初始化数据写入所述目标服务对应的数据库，以完成所述待初始化数据的初始化。

根据本发明的另一方面，提供了一种电子设备，所述电子设备包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行本发明任一实施例所述的微服务数据初始化方法。

根据本发明的另一方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现本发明任一实施例所述的微服务数据初始化方法。

本发明实施例的技术方案，通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务，通过解释器模块获取目标服务对应的历史数据，并根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据，以通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据，从而通过执行器模块将目标初始化数据写入目标服务对应的数据库，完成待初始化数据的初始化，解决了现有技术中由于微服务数据初始化过程耦合性较高导致的维护成本较高以及版本兼容性较差的问题，能够降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率，降低维护成本，同时提高了同一服务不同版本的兼容性。

应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例一提供的一种微服务数据初始化方法的流程图；

图2是本发明实施例二提供的一种微服务数据初始化方法的流程图；

图3是本发明实施例二提供的一种异或运算的示意图；

图4是本发明实施例三提供的一种微服务数据初始化方法的流程图；

图5是本发明实施例四提供的一种微服务数据初始化系统的示意图；

图6是本发明实施例五提供的一种微服务数据初始化系统的架构示意图；

图7是本发明实施例五提供的一种解释器数据处理过程的示意图；

图8是实现本发明实施例的微服务数据初始化方法的电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例一

图1是本发明实施例一提供的一种微服务数据初始化方法的流程图，本实施例可适用于降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率的情况，该方法可以由微服务数据初始化系统执行，该系统可以通过软件和/或硬件的方式实现，并一般可以直接集成在执行本方法的电子设备中，该电子设备可以是终端设备，也可以是服务器设备，本发明实施例并不对执行微服务数据初始化方法的电子设备的类型进行限定。具体的，如图1所示，该微服务数据初始化方法具体可以包括如下步骤：

S110、通过数据源模块获取待初始化数据，并确定所述待初始化数据对应的目标服务。

其中，数据源模块可以是对数据源提供的数据进行处理的模块。可选的，数据源模块可以设置于客户端的服务中。待初始化数据可以是等待进行初始化的微服务的数据。目标服务可以是微服务系统的多个服务中，与待初始化数据对应的服务。可以理解的是，微服务系统中可以有多个服务，待初始化数据可以由多个服务中的目标服务进管理。

在本发明实施例中，通过数据源模块获取待初始化数据，以确定待初始化数据对应的目标服务。可以理解的是，不同的待初始化数据可以对应不同的目标服务，也可以对应相同的目标服务，本发明实施例对此并不进行限制。

S120、通过解释器模块获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

其中，解释器模块可以是对待初始化数据进行数据处理的模块。历史数据可以是之前存储到服务对应的数据库中的数据，例如可以是最近一次存储到服务对应的数据库中的数据等，本发明实施例对此并不进行限制。可以理解的是，不同的服务可以对应不同的历史数据。数据格式转换可以是对数据的格式进行转换。待初始化格式数据可以是将待初始化数据进行数据格式转换后得到的数据。

在本发明实施例中，在通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务之后，可以进一步通过解释器模块获取目标服务对应的历史数据，并根据目标服务对初始化数据进行数据格式转换，从而得到待初始化格式数据。

S130、通过所述解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据。

其中，目标初始化数据可以是能够写入目标服务对应的数据库中的初始化数据。

在本发明实施例中，在通过解释器模块获取目标服务对应的历史数据，并根据目标服务对初始化数据进行数据格式转换得到待初始化格式数据之后，可以进一步通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据。

S140、通过执行器模块将所述目标初始化数据写入所述目标服务对应的数据库，以完成所述待初始化数据的初始化。

其中，执行器模块可以是执行数据写入的模块。可以理解的是，执行器模块可以将目标初始化数据持久化到目标服务对应的数据库表中，以达到微服务数据初始化的目的。可选的，执行器模块可以设置于服务端的服务中。

在本发明实施例中，在通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据之后，可以进一步通过执行器模块将目标初始化数据写入目标服务对应的数据库中，以完成待初始化数据的初始化。

本实施例的技术方案，通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务，通过解释器模块获取目标服务对应的历史数据，并根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据，以通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据，从而通过执行器模块将目标初始化数据写入目标服务对应的数据库，完成待初始化数据的初始化，解决了现有技术中由于微服务数据初始化过程耦合性较高导致的维护成本较高以及版本兼容性较差的问题，能够降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率，降低维护成本，同时提高了同一服务不同版本的兼容性。

实施例二

图2是本发明实施例二提供的一种微服务数据初始化方法的流程图，本实施例是对上述各技术方案的进一步细化，给出了通过数据源模块获取待初始化数据，通过解释器模块根据目标服务对待初始化数据进行数据格式转换，得到待初始化格式数据，以及通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据的多种具体可选的实现方式。本实施例中的技术方案可以与上述一个或多个实施例中的各个可选方案结合。如图2所示，该方法可以包括如下步骤：

S210、通过数据源模块获取待初始化数据，并确定所述待初始化数据对应的目标服务。

可选的，通过数据源模块获取待初始化数据，可以包括：通过数据源模块获取数据源数据；其中，数据源数据是由数据库数据转换得到的，或根据服务开发需求确定的；通过数据源模块对数据源数据进行数据拆分得到拆分数据；其中，不同的拆分数据对应微服务系统中不同的服务；通过数据源模块根据拆分数据对应的服务，确定拆分数据对应的预设数据规则；通过数据源模块根据拆分数据对应的预设数据规则对拆分数据进行数据处理，得到待初始化数据。

其中，数据源数据可以是需要写入服务对应的数据库中的数据。数据库数据可以是微服务系统在升级时由数据库转化得到的数据。服务开发需求可以是对服务进行开发时的数据需求。可以理解的是，服务开发需求可以是操作人员定制的，而且不同的服务可以对应不同的服务开发需求。可选的，数据源数据可以是JSON（JavaScript Object Notation，JS对象简谱）格式的数据。拆分数据可以是对数据源数据进行拆分得到的数据。可以理解的是，拆分数据的数量为至少一个。预设数据规则可以是预先设定的数据规则，例如可以是预先设定的数据长度、数据类型、数据依赖关系或数据不能为空等规则，本发明实施例对此并不进行限制。可选的，预设数据规则可以是预先设定的schema（即XML Schema Definition，指出如何形式描述XML文档的元素）规则。可以理解的是，不同的服务可以对应不同的预设数据规则。

具体的，通过数据源模块获取数据源数据，并对数据源数据进行数据拆分得到拆分数据，以根据拆分数据对应的服务确定拆分数据对应的预设数据规则，从而根据拆分数据对应的预设数据规则对拆分数据进行数据处理得到待初始化数据。可以理解的是，不同的拆分数据可以对应不同的服务，也即可以根据微服务系统中的不同服务对数据源数据进行拆分。

S220、通过解释器模块获取所述目标服务对应的历史数据。

可选的，历史数据可以存储在与目标服务对应的目标历史数据库中。也即，可以通过解释器模块在目标历史数据库中获取目标服务对应的历史数据。可选的，目标历史数据库中可以只存储最近一次写入目标服务对应的数据库中的数据，也即历史数据可以是最近一次写入目标服务对应的数据库中的数据。

可选的，在通过解释器模块获取目标服务对应的历史数据之后，还可以包括：在确定执行器模块为首次上报注册的情况下，通过执行器模块确定历史数据的消费标识；通过执行器模块在确定消费标识为未消费的情况下，将历史数据写入目标服务对应的数据库。

其中，首次上报注册可以是第一次在微服务系统中上报注册。可选的，执行器模块可以采用注册发现机制，也即当执行器模块上报注册之后才可以执行相应的操作。消费标识可以是历史数据是否被消费的标识。

具体的，在通过解释器模块获取目标服务对应的历史数据之后，可以进一步确定执行器模块是否为首次上报注册，并在执行器模块为首次上报注册时通过执行器模块确定历史数据的消费标识，以在消费标识为未消费时将历史数据写入目标服务对应的数据库。可以理解的是，如果消费标识为未消费，说明历史数据没有被写入目标服务对应的数据库中。

S230、通过所述解释器模块对所述历史数据和所述待初始化数据进行一致性校验。

S240、通过所述解释器模块在确定未通过所述一致性校验的情况下，根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

其中，一致性校验可以是校验历史数据和待初始化数据的一致性。在本发明实施例中，在通过解释器模块获取目标服务对应的历史数据之后，可以进一步对历史数据和待初始化数据进行一致性校验，并在未通过一致性校验时根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据。

可以理解的是，如果未通过一致性校验，说明历史数据和待初始化数据不一致，也即待初始化数据未被写入目标服务对应的数据库中，则可以继续执行根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据的操作。如果通过一致性校验，说明历史数据和待初始化数据一致，也即待初始化数据已经写入目标服务对应的数据库中，而且没有任何修改，则可以返回执行通过数据源模块获取待初始化数据的操作。

可选的，在通过解释器模块根据目标服务对待初始化数据进行数据格式转换，得到待初始化格式数据之前，还可以包括：通过解释器模块确定目标服务对应的目标数据规则，并根据目标数据规则对待初始化数据进行规则解析；通过解释器模块根据目标服务对待初始化数据进行数据格式转换，得到待初始化格式数据，可以包括：通过解释器模块在确定规则解析结果满足目标规则条件的情况下，根据目标服务对待初始化数据进行数据格式转换，得到待初始化格式数据。

其中，目标数据规则可以是目标服务对应的预先设定的数据规则。规则解析结果可以是根据目标数据规则对待初始化数据进行解析得到的结果。目标规则条件可以是规则解析结果需要满足的条件，例如可以是最大长度的条件，数据类型的条件，依赖检查的条件，是否为空的条件或字段匹配的条件等，本发明实施例对此并不仅限制。

具体的，在通过解释器模块根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据之前，可以通过解释器模块确定目标服务对应的目标数据规则，并根据目标数据规则对待初始化数据进行规则解析，以通过解释器模块在规则解析结果满足目标规则条件时，根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据。可以理解的是，如果规则解析结果不满足目标规则条件，则可以返回执行通过数据源模块获取待初始化数据的操作。

可选的，通过解释器模块根据目标服务对待初始化数据进行数据格式转换，得到待初始化格式数据，可以包括：通过解释器模块根据目标服务确定目标服务对应的数据库类型；通过解释器模块根据数据库类型确定待初始化数据对应的目标数据格式；通过解释器模块根据目标数据格式对待初始化数据进行数据格式转换，得到待初始化格式数据。

其中，数据库类型可以是数据库的类型，例如可以是关系型数据库等，本发明实施例对此并不进行限制。目标数据格式可以是多种数据格式中的一个目标格式，例如可以是矩形数据块格式等，本发明实施例对此并不进行限制。可以理解的是，不同数据库类型可以对应不同的数据格式。示例性的，关系型数据库可以对应矩形数据块格式。也即，如果目标服务对应的数据库类型为关系型数据库，则可以确定待初始化数据对应的目标数据格式为矩形数据块格式。

具体的，通过解释器模块根据目标服务确定目标服务对应的数据库类型，以根据数据库类型确定待初始化数据对应的目标数据格式，从而根据目标数据格式对待初始化数据进行数据格式转换得到待初始化格式数据。

S250、通过所述解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据。

可选的，通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据，可以包括：通过解释器模块确定待初始化格式数据中的数据行信息；通过解释器模块根据数据行信息获取历史数据中对应的数据行数据；通过解释器模块根据目标数据格式对数据行数据进行数据格式转换，得到历史格式数据；通过解释器模块对历史格式数据和待初始化格式数据进行异或运算，得到目标初始化数据。

其中，数据行信息可以是数据所属的数据行的信息，例如可以是数据所属的数据行的唯一ID（Identity document，身份标识）值等，本发明实施例对此并不进行限制。数据行数据可以是数据行对应的数据内容。示例性的，假设数据行信息为ID1，数据行数据可以是ID1行中的数据。历史格式数据可以是将历史数据进行数据格式转换后得到的数据。

具体的，在通过解释器模块根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据之后，可以进一步确定待初始化格式数据中的数据行信息，以根据数据行信息获取历史数据中对应的数据行数据，并根据目标数据格式对数据行数据进行数据格式转换得到历史格式数据，从而对历史格式数据和待初始化格式数据进行异或运算得到目标初始化数据。

示例性的，图3是本发明实施例二提供的一种异或运算的示意图，如图3所示，待初始化格式数据（也即数据源解析后的数据）中可以包括每行的ID值以及该ID值所对应的属性值，历史格式数据（也即历史库中获取的数据）中可以包括与待初始化格式数据对应的行以及历史数据库中该行对应的属性值。具体的异或运算规则可以是：属性值相同的为0，属性值不同的以待初始化格式数据中的属性值为结果，再去除矩阵中ID为正值，属性值全部为0的行，即可得到目标初始化数据。其中，ID值为负值时表示删除该行数据。如果ID值为负值则可以不参与异或运算。

上述技术方案，通过对历史格式数据和待初始化格式数据进行异或运算，能够对之前执行过的数据进行重复性过滤，以获取增量修改部分。也即，当数据源进行修改的时候，大量未被修改的数据内容已经执行过了，为了提高初始化效率以及服务性能，避免资源浪费，只要将修改的部分（也即目标初始化数据）分发到执行器模块中即可。

上述技术方案，通过以矩阵数据为单元进行异或运算，能够将相应的数据源从具体的业务逻辑中脱离出来进行独立演化，最大限度的降低了对原有业务的耦合度。同时，当多数据源同时修改相同数据的时候，其相应的执行顺序可以得到一定的保证。示例性的，利用api接口修改的内容，与利用json初始化的内容相同的时候，可以根据时间序列，利用增量修改的方式确认最终的修改结果。

S260、通过执行器模块将所述目标初始化数据写入所述目标服务对应的数据库，以完成所述待初始化数据的初始化。

可选的，在通过执行器模块将目标初始化数据写入目标服务对应的数据库之后，可以进一步将目标初始化数据存入目标服务对应的目标历史数据库中。可以理解的是，目标历史数据库中可以包括历史数据和历史数据对应的数据源的hash（哈希）标识。

可选的，如果执行器模块执行失败或执行器模块未启动，则可以将目标历史数据库中目标初始化数据的消费标识确定为未消费，以在目标服务首次上报注册时首先消费目标历史数据库中存储的数据。

本实施例的技术方案，通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务，再通过解释器模块获取目标服务对应的历史数据，对历史数据和待初始化数据进行一致性校验，并在未通过一致性校验时根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据，以根据历史数据和待初始化格式数据确定目标初始化数据，从而通过执行器模块将目标初始化数据写入目标服务对应的数据库，完成待初始化数据的初始化，解决了现有技术中由于微服务数据初始化过程耦合性较高导致的维护成本较高以及版本兼容性较差的问题，能够降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率，降低维护成本，同时提高了同一服务不同版本的兼容性。

实施例三

图4是本发明实施例三提供的一种微服务数据初始化方法的流程图，本实施例是对上述各技术方案的进一步细化，给出了通过解释器模块获取目标服务对应的历史数据，并根据目标服务对待初始化数据进行数据格式转换，得到待初始化格式数据，通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据，以及通过执行器模块将目标初始化数据写入目标服务对应的数据库的多种具体可选的实现方式。本实施例中的技术方案可以与上述一个或多个实施例中的各个可选方案结合。如图4所示，该方法可以包括如下步骤：

S410、通过数据源模块获取待初始化数据，并确定所述待初始化数据对应的目标服务。

S420、通过所述数据源模块，确定所述解释器模块中与所述待初始化数据对应的目标解释器模块；其中，所述解释器模块的数量为至少一个。

其中，目标解释器模块可以是解释器模块中与待初始化数据对应的一个模块。可以理解的是，可以有多个解释器模块，不同的待初始化数据可以对应不同的解释器模块。

在本发明实施例中，在通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务之后，可以进一步确定解释器模块中与待初始化数据对应的目标解释器模块，以通过目标解释器模块获取目标服务对应的历史数据，并根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据。

S430、通过所述目标解释器模块获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

S440、通过所述目标解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据。

S450、通过调度器模块确定所述目标初始化数据的数据标识。

S460、通过所述调度器模块根据所述数据标识确定所述执行器模块中与所述目标初始化数据对应的目标执行器模块；其中，所述执行器模块的数量为至少一个。

其中，调度器模块可以是对目标初始化数据进行调度的模块。数据标识可以是用于唯一标识目标初始化数据的。可选的，数据标识可以是根据目标服务对应的目标数据规则确定的。目标执行器模块可以是执行器模块中与目标初始化数据对应的一个模块。可以理解的是，可以有多个执行器模块，不同的目标初始化数据可以对应不同的执行器模块。

在本发明实施例中，在通过目标解释器模块根据历史数据和初始化格式数据确定目标初始化数据之后，可以进一步通过调度器模块确定目标初始化数据的数据标识，以根据数据标识确定执行器模块中与目标初始化数据对应的目标执行器模块，从而通过目标执行器模块将目标初始化数据写入目标服务对应的数据库中。

可选的，通过调度器模块根据数据标识确定执行器模块中与目标初始化数据对应的目标执行器模块，可以包括通过调度器模块在调度表中根据数据标识确定执行器模块中与目标初始化数据对应的目标执行器模块。其中，调度表可以包括目标初始化数据该被哪个执行器模块执行。调度表可以存储数据标识与执行器模块的对应关系，也即该调度哪个服务上的执行器模块来进行数据持久化。调度表可以是人为定制的，也可以是通过服务端执行器模块的动态注册进行动态学习形成的。

可以理解的是，数据版本升级不单单是只是获取到修改的增量数据，然后进行执行持久化的过程，还有可能会遇到数据不兼容的情况，此时就可以利用对应的解析器做相应的数据转发算法兼容升级，以及对应的执行器的容错处理来完成。

S470、通过所述目标执行器模块将所述目标初始化数据写入所述目标服务对应的数据库，以完成所述待初始化数据的初始化。

本实施例的技术方案，通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务，再确定解释器模块中与待初始化数据对应的目标解释器模块，以通过目标解释器模块获取目标服务对应的历史数据，并根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据，根据历史数据和待初始化格式数据确定目标初始化数据，再通过调度器模块确定目标初始化数据的数据标识，以根据数据标识确定执行器模块中与目标初始化数据对应的目标执行器模块，从而通过目标执行器模块将目标初始化数据写入目标服务对应的数据库，完成待初始化数据的初始化，解决了现有技术中由于微服务数据初始化过程耦合性较高导致的维护成本较高以及版本兼容性较差的问题，能够降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率，降低维护成本，同时提高了同一服务不同版本的兼容性。

实施例四

图5是本发明实施例四提供的一种微服务数据初始化系统的示意图，如图5所示，所述系统包括：数据源模块510、解释器模块520以及执行器模块530，其中：

数据源模块510，用于获取待初始化数据，并确定所述待初始化数据对应的目标服务；

解释器模块520，用于获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据；

所述解释器模块520，还用于根据所述历史数据和所述待初始化格式数据确定目标初始化数据；

执行器模块530，用于将所述目标初始化数据写入所述目标服务对应的数据库，以完成所述待初始化数据的初始化。

本实施例的技术方案，通过数据源模块获取待初始化数据，并确定待初始化数据对应的目标服务，通过解释器模块获取目标服务对应的历史数据，并根据目标服务对待初始化数据进行数据格式转换得到待初始化格式数据，以通过解释器模块根据历史数据和待初始化格式数据确定目标初始化数据，从而通过执行器模块将目标初始化数据写入目标服务对应的数据库，完成待初始化数据的初始化，解决了现有技术中由于微服务数据初始化过程耦合性较高导致的维护成本较高以及版本兼容性较差的问题，能够降低微服务数据初始化过程的耦合性，提高微服务数据的初始化效率，降低维护成本，同时提高了同一服务不同版本的兼容性。

可选的，数据源模块510，可以具体用于：获取数据源数据；其中，所述数据源数据是由数据库数据转换得到的，或根据服务开发需求确定的；对所述数据源数据进行数据拆分得到拆分数据；其中，不同的拆分数据对应微服务系统中不同的服务；根据所述拆分数据对应的服务，确定所述拆分数据对应的预设数据规则；根据所述拆分数据对应的预设数据规则对所述拆分数据进行数据处理，得到所述待初始化数据。

可选的，解释器模块520，可以具体用于：在根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据之前，对所述历史数据和所述待初始化数据进行一致性校验；在确定未通过所述一致性校验的情况下，根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

可选的，解释器模块520，还可以具体用于：在根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据之前，确定所述目标服务对应的目标数据规则，并根据所述目标数据规则对所述待初始化数据进行规则解析；在确定规则解析结果满足目标规则条件的情况下，根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

可选的，数据源模块510，可以具体用于：在所述通过解释器模块根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据之前，通过所述数据源模块，确定所述解释器模块中与所述待初始化数据对应的目标解释器模块；其中，所述解释器模块的数量为至少一个；相应的，解释器模块520，还可以具体用于：通过所述目标解释器模块获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据；通过所述目标解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据。

可选的，解释器模块520，还可以具体用于：根据所述目标服务确定所述目标服务对应的数据库类型；根据所述数据库类型确定所述待初始化数据对应的目标数据格式；根据所述目标数据格式对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

可选的，解释器模块520，还可以具体用于：确定所述待初始化格式数据中的数据行信息；根据所述数据行信息获取所述历史数据中对应的数据行数据；根据所述目标数据格式对所述数据行数据进行数据格式转换，得到历史格式数据；对所述历史格式数据和所述待初始化格式数据进行异或运算，得到所述目标初始化数据。

可选的，该系统还可以包括调度器模块，可以具体用于：确定所述目标初始化数据的数据标识；根据所述数据标识确定所述执行器模块中与所述目标初始化数据对应的目标执行器模块；其中，所述执行器模块的数量为至少一个；相应的，执行器模块530，可以具体用于：通过所述目标执行器模块将所述目标初始化数据写入所述目标服务对应的数据库。

可选的，执行器模块530，还可以具体用于：在确定所述执行器模块为首次上报注册的情况下，确定所述历史数据的消费标识；在确定所述消费标识为未消费的情况下，将所述历史数据写入所述目标服务对应的数据库。

本发明实施例所提供的微服务数据初始化系统可执行本发明任意实施例所提供的微服务数据初始化方法，具备执行方法相应的功能模块和有益效果。

实施例五

为了使本领域技术人员更好地理解本实施例的微服务数据初始化方法，下面采用一个具体示例进行说明，图6是本发明实施例五提供的一种微服务数据初始化系统的架构示意图，如图6所示，该微服务数据初始化系统具体可以包括部署在客户端的数据源模块、包括解释器模块和调度器模块的调度服务以及部署在服务端的执行器模块。其中，部署在服务端的执行器模块可以采用注册发现机制。调度服务可以作为微服务独立部署，独立演化。具体的，微服务数据初始化方法具体可以包括以下内容：

（一）通过数据源模块获取数据源数据，并根据服务端所发布的schema规则对数据源数据进行数据处理。具体的，数据源数据可以采用标准的JSON文件格式。实际上，JSON是一种非常强大的，简洁的数据表达方式，交互性也相对比较好。数据源数据的内容可以是人为在各个服务开发的时候定制的，也可以是系统升级的时候，从相应的数据库转化过来的。数据源模块可以是客户端的微服务。

（二）通过调度服务中的解释器模块确定数据是否重复执行，并根据执行器模块发布的数据规则（也即预设数据规则）对数据进行检查。再将数据解释成执行器模块所理解的数据块。例如持久化数据库为关系型数据库时，可以将数据解析为矩阵数据块。根据历史库中的数据对该数据进行增量提取，分批调度。其中，历史库中存储的是执行的最近一次的版本快照，包含了执行的数据，以及数据源的hash唯一标识等，可以用于过滤已经执行过的数据内容。

具体的，图7是本发明实施例五提供的一种解释器数据处理过程的示意图，如图7所示，解释器数据处理过程可以包括：（1）根据历史库的记录，判断当前的数据是否是重复执行，如果该数据已经执行过，而且没有任何修改，再次来解析执行时就可以判断是重复执行，如果是重复执行，则可以直接返回。（2）根据相应的shema规则进行解析，如果解析不通过，则可以返回前端，其解析的规则可以包含：数据的最大长度，类型，依赖以及相应的不能为空检查等规则。（3）根据相应的数据库类型形成相应的数据块，如果持久化的是关系型数据库，则可以解析为相应的矩阵数据块，矩阵数据块可以包含两个部分，一部分包含是每个行数据的唯一ID值，另一部分就是行的每个属性值。（4）数据块解析完成之后，与历史库中的数据块进行对比，以便获取修改的增量部分，获取到修改的增量部分也即目标数据块。

（三）通过调度服务中的调度器模块根据数据块的业务属性（也即数据标识）以及调度表，将数据块分发到各个执行器模块中去执行。其中，数据块的业务属性可以由与服务器达成一致的schema来进行标识。调度表可以包括相应的数据库内容该由哪个执行器执行。调度表可以存储业务属性与执行器的对应关系。也即解析之后的数据块该调度哪个服务上的执行器来进行服务端的数据持久化。该调度表可以是人为定制的，也可以通过服务端执行器的动态注册进行动态学习形成。

（四）通过服务端的执行器模块将数据块内容持久化到不同的数据库表中，以达到最终的微服务数据初始化的目的。执行器模块可以分布于各种服务端微服务中。执行器模块执行的是数据块，如果是关系型数据库，则执行的是矩阵数据块。如果执行器模块执行不成功或者执行器服务未启动，则相应的数据在历史库中会打上未被消费的标识，当执行器模块第一次上报注册的时候，可以首先集中消费未被消费的数据。

上述技术方案，通过引入解析器、调度器、执行器、调度表以及相应的检查规则等，使得初始化过程的各个角色耦合度非常低，而且，执行效率，错误检查，兼容处理等也得到来相应的解决；通过采用矩阵数据块逻辑将问题集中起来独立解决，使得该方案与相应数据的业务处理分离开来，使得在微服务系统中，无论是功能数据的裁剪还是添加，都可以做到开闭的效果，能够利用最少的代码最大的复用当前的初始化架构体系，降低了维护的成本。

在本发明实施例中，每个模块的内容都有其各自的职责，只要兼容性的完成各自的职责即可，使得微服务的全局数据初始化过程，可以不受模块耦合的影响，并可以灵活定制相应的数据处理策略，做到了最大程度的低耦合性。通过采用JSON格式的数据源格式，大大的减少了解析逻辑的复杂度，也使得在处理的过程更容易使得各个微服务达成一致的处理规则，使得增加新的配置数据变得异常容易，满足了开闭的原则。通过利用矩阵数据块的运算来获取关系数据的增量修改，不仅能提高持久化性能，也解决到多数据源同时修改相同内容的时序冲突问题；矩阵数据块的引入，可以使得数据持久化问题变成一个与相应的业务逻辑无关的领域问题，进而集中处理与解决，当相关的数据内容发生变化的时候，能够最大限度的减少解释器，调度器，以及执行器的处理逻辑。客户端与服务端的数据规约仅限于schema文件所定义的规则，最大程度的降低了客户端的使用耦合，而且采用tell,do notask（命令,不要去询问）的原则来处理请求的数据。

实施例六

图8示出了可以用来实施本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备（如头盔、眼镜、手表等）和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本发明的实现。

如图8所示，电子设备10包括至少一个处理器11，以及与至少一个处理器11通信连接的存储器，如只读存储器（ROM）12、随机访问存储器（RAM）13等，其中，存储器存储有可被至少一个处理器执行的计算机程序，处理器11可以根据存储在只读存储器（ROM）12中的计算机程序或者从存储单元18加载到随机访问存储器（RAM）13中的计算机程序，来执行各种适当的动作和处理。在RAM 13中，还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出（I/O）接口15也连接至总线14。

电子设备10中的多个部件连接至I/O接口15，包括：输入单元16，例如键盘、鼠标等；输出单元17，例如各种类型的显示器、扬声器等；存储单元18，例如磁盘、光盘等；以及通信单元19，例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元（CPU）、图形处理单元（GPU）、各种专用的人工智能（AI）计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器（DSP）、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理，例如微服务数据初始化方法。

在一些实施例中，微服务数据初始化方法可被实现为计算机程序，其被有形地包含于计算机可读存储介质，例如存储单元18。在一些实施例中，计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时，可以执行上文描述的微服务数据初始化方法的一个或多个步骤。备选地，在其他实施例中，处理器11可以通过其他任何适当的方式（例如，借助于固件）而被配置为执行微服务数据初始化方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列（FPGA）、专用集成电路（ASIC）、专用标准产品（ASSP）、芯片上系统的系统（SOC）、负载可编程逻辑设备（CPLD）、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器，使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本发明的上下文中，计算机可读存储介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。备选地，计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器（RAM）、只读存储器（ROM）、可擦除可编程只读存储器（EPROM或快闪存储器）、光纤、便捷式紧凑盘只读存储器（CD-ROM）、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互，可以在电子设备上实施此处描述的系统和技术，该电子设备具有：用于向用户显示信息的显示装置（例如，CRT（阴极射线管）或者LCD（液晶显示器）监视器）；以及键盘和指向装置（例如，鼠标或者轨迹球），用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈（例如，视觉反馈、听觉反馈、或者触觉反馈）；并且可以用任何形式（包括声输入、语音输入或者、触觉输入）来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统（例如，作为数据服务器）、或者包括中间件部件的计算系统（例如，应用服务器）、或者包括前端部件的计算系统（例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互）、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信（例如，通信网络）来将系统的部件相互连接。通信网络的示例包括：局域网（LAN）、广域网（WAN）、区块链网络和互联网。

计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，又称为云计算服务器或云主机，是云计算服务体系中的一项主机产品，以解决了传统物理主机与VPS服务中，存在的管理难度大，业务扩展性弱的缺陷。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本发明的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (12)

1.一种微服务数据初始化方法，其特征在于，包括：

通过数据源模块获取待初始化数据，并确定所述待初始化数据对应的目标服务；

通过解释器模块获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据；

通过所述解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据；

通过执行器模块将所述目标初始化数据写入所述目标服务对应的数据库表，以完成所述待初始化数据的初始化。

2.根据权利要求1所述的方法，其特征在于，所述通过数据源模块获取待初始化数据，包括：

通过所述数据源模块获取数据源数据；其中，所述数据源数据是由数据库数据转换得到的，或根据服务开发需求确定的；

通过所述数据源模块对所述数据源数据进行数据拆分得到拆分数据；其中，不同的拆分数据对应微服务系统中不同的服务；

通过所述数据源模块根据所述拆分数据对应的服务，确定所述拆分数据对应的预设数据规则；

通过所述数据源模块根据所述拆分数据对应的预设数据规则对所述拆分数据进行数据处理，得到所述待初始化数据。

3.根据权利要求1所述的方法，其特征在于，在所述通过解释器模块根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据之前，还包括：

通过所述解释器模块对所述历史数据和所述待初始化数据进行一致性校验；

所述通过解释器模块根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据，包括：

通过所述解释器模块在确定未通过所述一致性校验的情况下，根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

4.根据权利要求1或3所述的方法，其特征在于，在所述通过解释器模块根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据之前，还包括：

通过所述解释器模块确定所述目标服务对应的目标数据规则，并根据所述目标数据规则对所述待初始化数据进行规则解析；

所述通过解释器模块根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据，包括：

通过所述解释器模块在确定规则解析结果满足目标规则条件的情况下，根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

5.根据权利要求1所述的方法，其特征在于，在所述通过解释器模块根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据之前，还包括：

通过所述数据源模块，确定所述解释器模块中与所述待初始化数据对应的目标解释器模块；其中，所述解释器模块的数量为至少一个；

所述通过解释器模块获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据，包括：

通过所述目标解释器模块获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据；

所述通过所述解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据，包括：

通过所述目标解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据。

6.根据权利要求1所述的方法，其特征在于，所述通过解释器模块根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据，包括：

通过所述解释器模块根据所述目标服务确定所述目标服务对应的数据库类型；

通过所述解释器模块根据所述数据库类型确定所述待初始化数据对应的目标数据格式；

通过所述解释器模块根据所述目标数据格式对所述待初始化数据进行数据格式转换，得到待初始化格式数据。

7.根据权利要求6所述的方法，其特征在于，所述通过所述解释器模块根据所述历史数据和所述待初始化格式数据确定目标初始化数据，包括：

通过所述解释器模块确定所述待初始化格式数据中的数据行信息；

通过所述解释器模块根据所述数据行信息获取所述历史数据中对应的数据行数据；

通过所述解释器模块根据所述目标数据格式对所述数据行数据进行数据格式转换，得到历史格式数据；

通过所述解释器模块对所述历史格式数据和所述待初始化格式数据进行异或运算，得到所述目标初始化数据。

8.根据权利要求1所述的方法，其特征在于，在所述通过执行器模块将所述目标初始化数据写入所述目标服务对应的数据库表之前，包括：

通过调度器模块确定所述目标初始化数据的数据标识；

通过所述调度器模块根据所述数据标识确定所述执行器模块中与所述目标初始化数据对应的目标执行器模块；

其中，所述执行器模块的数量为至少一个；

所述通过执行器模块将所述目标初始化数据写入所述目标服务对应的数据库表，包括：

通过所述目标执行器模块将所述目标初始化数据写入所述目标服务对应的数据库。

9.根据权利要求1所述的方法，其特征在于，在所述通过解释器模块获取所述目标服务对应的历史数据之后，还包括：

在确定所述执行器模块为首次上报注册的情况下，通过所述执行器模块确定所述历史数据的消费标识；

通过所述执行器模块在确定所述消费标识为未消费的情况下，将所述历史数据写入所述目标服务对应的数据库。

10.一种微服务数据初始化系统，其特征在于，包括：

数据源模块，用于获取待初始化数据，并确定所述待初始化数据对应的目标服务；

解释器模块，用于获取所述目标服务对应的历史数据，并根据所述目标服务对所述待初始化数据进行数据格式转换，得到待初始化格式数据；

所述解释器模块，还用于根据所述历史数据和所述待初始化格式数据确定目标初始化数据；

执行器模块，用于将所述目标初始化数据写入所述目标服务对应的数据库，以完成所述待初始化数据的初始化。

11.一种电子设备，其特征在于，所述电子设备包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的计算机程序，所述计算机程序被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-9中任一项所述的微服务数据初始化方法。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机指令，所述计算机指令用于使处理器执行时实现权利要求1-9中任一项所述的微服务数据初始化方法。