CN112000646B - 一种数据库初始化方法、装置及电子设备和存储介质 - Google Patents

Abstract

本申请公开了一种数据库初始化方法、装置及设备和存储介质，该方法包括：获取用于进行数据库初始化的初始化数据；获取预先配置初始化数据与数据源之间映射关系的服务映射文件，数据源为微服务组件对应的数据库链接；根据预设规则解析初始化数据，得到所需的目标数据，并基于服务映射文件确定初始化数据对应的数据源；将目标数据分发至对应的数据源，并将目标数据写入所述数据源对应的数据库中，完成数据库的初始化。本申请可获取初始化数据与数据源之间映射关系的服务映射文件，根据服务映射文件确定初始化数据对应的数据源，将解析后的目标数据分发写入对应的数据源，实现微服务架构系统下数据库的初始化，能够满足跨服务数据库初始化的需求。

Description

一种数据库初始化方法、装置及电子设备和存储介质

技术领域

本申请涉及数据库技术领域，更具体地说，涉及一种数据库初始化方法、装置及一种电子设备和一种计算机可读存储介质。

背景技术

随着技术的发展，微服务架构逐渐兴起。在微服务架构中，臃肿的系统被拆分为功能明确的一个个小的服务。一般来讲，在微服务架构中，每一个服务都有自己独有的数据库，多个微服务公用一个库的场景并不常见，数据库的管理变得更加复杂。因此，如何提供一种在微服务架构系统中进行数据库初始化的方案是本领域技术人员需要解决的问题。

发明内容

本申请的目的在于提供一种数据库初始化方法、装置及一种电子设备和一种计算机可读存储介质，实现微服务架构系统下数据库的初始化。

为实现上述目的，本申请提供了一种数据库初始化方法，包括：

获取用于进行数据库初始化的初始化数据；

获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；

根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；

将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化。

可选的，所述获取用于进行数据库初始化的初始化数据，包括：

预先在微服务工程的预设路径下创建需要同步的数据文件夹；其中，所述数据文件夹的名称与对应的微服务名称相同；

在所述数据文件夹中导入用于进行数据库初始化的初始化数据，所述初始化数据的格式为excel格式；

根据预设路径或数据文件夹的名称获取所述初始化数据。

可选的，所述获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，包括：

在微服务工程的预设路径下查询服务映射文件；其中，所述服务映射文件包括所述初始化数据对应的文件夹名称、微服务名称、微服务对应的数据源以及数据库名称和密码。

可选的，所述预设规则包括：表名识别规则、有效数据识别规则、主键列识别规则以及报错识别规则。

可选的，所述根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源，包括：

利用LiquibaseExcutor工具，获取包括所述初始化数据的excel文件流；

根据预设规则依次读取并解析所述excel文件流中的数据，得到所需的目标数据；其中，所述目标数据包括表数据、行数据、列数据以及列类型；

根据所述初始化数据对应的数据文件夹的名称，在所述服务映射文件中查找对应的数据源，并将解析得到的所述目标数据分发至对应的所述数据源中。

可选的，所述将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化，包括：

通过PreparedStatement命令对所述目标数据执行插入操作，以写入所述数据源对应的数据库中，完成数据库的初始化。

为实现上述目的，本申请提供了一种数据库初始化装置，包括：

数据获取模块，用于获取用于进行数据库初始化的初始化数据；

映射获取模块，用于获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；

数据解析模块，用于根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；

数据插入模块，用于将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化。

可选的，所述数据获取模块，包括：

文件创建单元，用于预先在微服务工程的预设路径下创建需要同步的数据文件夹；其中，所述数据文件夹的名称与对应的微服务名称相同；

数据导入单元，用于在所述数据文件夹中导入用于进行数据库初始化的初始化数据，所述初始化数据的格式为excel格式；

数据获取单元，用于根据预设路径或数据文件夹的名称获取所述初始化数据。

为实现上述目的，本申请提供了一种电子设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现前述公开的任一种数据库初始化方法的步骤。

为实现上述目的，本申请提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现前述公开的任一种数据库初始化方法的步骤。

通过以上方案可知，本申请提供的一种数据库初始化方法，包括：获取用于进行数据库初始化的初始化数据；获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化。由上可知，本申请可获取配置初始化数据与数据源之间映射关系的服务映射文件，在获取并解析用于进行数据库初始化的初始化数据之后，可根据服务映射文件确定初始化数据对应的数据源，将解析后的目标数据分发至对应的数据源进行写入，实现微服务架构系统下数据库的初始化，能够满足跨服务数据库初始化的需求。

本申请还公开了一种数据库初始化装置及一种电子设备和一种计算机可读存储介质，同样能实现上述技术效果。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本申请。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例公开的一种数据库初始化方法的流程图；

图2为本申请实施例公开的一种数据库初始化装置的结构图；

图3为本申请实施例公开的一种电子设备的结构图；

图4为本申请实施例公开的另一种电子设备的结构图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例公开了一种数据库初始化方法，实现微服务架构系统下数据库的初始化。

参见图1所示，本申请实施例公开的一种数据库初始化方法包括：

S101：获取用于进行数据库初始化的初始化数据；

本申请实施例中，首先需要获取初始化数据，所述初始化数据具体为用于进行数据库初始化的数据。具体地，上述获取用于进行数据库初始化的初始化数据的过程可以包括：预先在微服务工程的预设路径下创建需要同步的数据文件夹；其中，数据文件夹的名称与对应的微服务名称相同；在数据文件夹中导入用于进行数据库初始化的初始化数据，初始化数据的格式为excel格式；根据预设路径或数据文件夹的名称获取初始化数据。

S102：获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；

在本步骤中，可获取预先配置的服务映射文件，该映射文件中包括初始化数据与数据源之间的映射关系。具体地，所述服务映射文件可以包括但不限于初始化数据对应的文件夹名称、微服务名称、微服务对应的数据源以及数据库名称和密码。上述数据源具体指微服务组件对应的数据库链接。

作为一种可行的实施方式，获取预先配置的服务映射文件时，可在微服务工程的预设路径下查询服务映射文件。

需要指出的是，本实施例并不限定上述步骤S101和步骤S102的执行先后顺序，即可以先执行步骤S101获取初始化数据，也可先执行步骤S102获取服务映射文件，还可同时获取初始化数据和服务映射文件，以提高处理效率。

S103：根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；

在具体实施中，获取到初始化数据之后，即可根据预设规则对其进行解析，以得到所需的目标数据，目标数据即为具体需要写入数据库中的数据。上述预设规则可以包括但不限于：表名识别规则、有效数据识别规则、主键列识别规则以及报错识别规则等。也即，可根据预设规则识别除表名、识别有效数据行、识别出主键列以及识别报表是否需要进行报错等。

上述根据预设规则解析初始化数据，得到所需的目标数据，并基于服务映射文件确定所述初始化数据对应的数据源可以具体包括：利用LiquibaseExcutor工具，获取包括初始化数据的excel文件流；根据上述预设规则依次读取并解析excel文件流中的数据，得到所需的目标数据；其中，所述目标数据包括表数据、行数据、列数据以及列类型；根据初始化数据对应的数据文件夹的名称，在服务映射文件中查找对应的数据源，并将解析得到的目标数据分发至对应的数据源中。

具体地，上述LiquibaseExcutor工具是一个用于跟踪、管理和应用数据库变化的开源的数据库重构工具，它将所有数据库的变化包括结构和数据都保存在changelog文件中，便于版本控制，目标是提供一种与数据库类型无关的解决方案，可通过执行schema类型的文件来达到迁移。

S104：将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化。

可以理解的是，本申请实施例在解析初始化数据得到目标数据，并确定对应的数据源之后，即可将目标数据分发至对应的数据源，进而将目标数据写入各数据源对应的数据库中，完成数据库的初始化。

具体地，在将目标数据写入数据源对应的数据库中时，可通过PreparedStatement命令对目标数据执行插入操作，以写入数据源对应的数据库中。

通过以上方案可知，本申请提供的一种数据库初始化方法，包括：获取用于进行数据库初始化的初始化数据；获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化。由上可知，本申请可获取配置初始化数据与数据源之间映射关系的服务映射文件，在获取并解析用于进行数据库初始化的初始化数据之后，可根据服务映射文件确定初始化数据对应的数据源，将解析后的目标数据分发至对应的数据源进行写入，实现微服务架构系统下数据库的初始化，能够满足跨服务数据库初始化的需求。

下面对本申请实施例公开的数据库初始化方法进行具体的说明。具体地，采用liquibase+excel的方式对数据进行初始化，不涉及表结构的初始化，进而采用服务分发的方式，选择跨服务对应的数据源，进行对应数据库的初始化。

作为一种具体的示例，本申请实施例在微服务工程下src/main/resoureces/script/db/init_data下创建本模块需要同步的数据文件夹。该文件夹以数据所属服务为名，文件夹下保存数据excel格式文件，如需同步初始化数据到icinder-service模块和ibase-service模块，则新建ibase-service和icinder-service目录，在相应目录下创建数据excel文件。

需要说明的是，excel数据文件的格式可以具体包括：一张表为一个sheet页，sheet页名即为表名；同一张表的数据需要行连续，否则空行以下的数据无法被初始化；若有效数据从D7开始，则A-C列和1-6行的数据会被忽略；excel起始数据第一行第一列写表名；excel第一行数据写列名；利用*标识主键列，表示自动生成，excel值如果可以转换为long类型，则将该值插入，如果不能转为long，对于支持主键自增策略的数据库，如mysql，sqlserver等则主键递增；对于支持序列的数据库，如oracle等则从序列中拿值；利用#标识必填项，没有该标记的表将会报错。在初始化数据时，根据#列查询表中是否存在原始数据，如果存在则执行更新操作，如果不存在则执行插入操作。对于日期类型，可使用括号在列旁标识日期类型格式。

本申请实施例中，还可在微服务工程下src/main/resoureces/script/db/init_data下创建service-mapping.xml，即服务映射文件，其中可利用filename标识初始化数据的文件夹名称，Schema标识数据源，username标识库名称，password标识库密码。

可以理解的是，当获取到初始化数据之后，可解析初始化数据并分配至对应的数据源。具体地，可读取src/main/resoureces/script/db/init_data下配置，根据文件夹名称在服务映射文件中找到对应的数据源配置，然后交由LiquibaseExcutor工具进行处理。LiquibaseExcutor工具的处理逻辑包括：依次读取excel文件，获取文件流，并根据既定规则解析excel数据，例如，分别读取sheet页内容，获取表数据，行数据，列数据等。进而即可借助PreparedStatement执行插入操作，进行数据库的初始化。

在具体实施中，可将上述的解析分发代码逻辑封装成jar包，写入数据库初始化脚本中。通过自动化执行初始化脚本，即可实现跨服务数据库的初始化，同时提高了使用Liquibase工具管理数据库的灵活性，缩短了开发周期。

下面对本申请实施例提供的一种数据库初始化装置进行介绍，下文描述的一种数据库初始化装置与上文描述的一种数据库初始化方法可以相互参照。

参见图2所示，本申请实施例提供的一种数据库初始化装置包括：

数据获取模块201，用于获取用于进行数据库初始化的初始化数据；

映射获取模块202，用于获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；

数据解析模块203，用于根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；

数据插入模块204，用于将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化。

关于上述模块201至204的具体实施过程可参考前述实施例公开的相应内容，在此不再进行赘述。

在上述实施例的基础上，作为一种优选实施方式，所述数据获取模块201可以具体包括：

文件创建单元，用于预先在微服务工程的预设路径下创建需要同步的数据文件夹；其中，所述数据文件夹的名称与对应的微服务名称相同；

数据导入单元，用于在所述数据文件夹中导入用于进行数据库初始化的初始化数据，所述初始化数据的格式为excel格式；

数据获取单元，用于根据预设路径或数据文件夹的名称获取所述初始化数据。

本申请还提供了一种电子设备，参见图3所示，本申请实施例提供的一种电子设备包括：

存储器100，用于存储计算机程序；

处理器200，用于执行所述计算机程序时可以实现上述实施例所提供的步骤。

具体的，存储器100包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机可读指令，该内存储器为非易失性存储介质中的操作系统和计算机可读指令的运行提供环境。处理器200在一些实施例中可以是一中央处理器(CentralProcessing Unit，CPU)、控制器、微控制器、微处理器或其他数据处理芯片，为电子设备提供计算和控制能力，执行所述存储器100中保存的计算机程序时，可以实现前述任一实施例公开的数据库初始化方法。

在上述实施例的基础上，作为优选实施方式，参见图4所示，所述电子设备还包括：

输入接口300，与处理器200相连，用于获取外部导入的计算机程序、参数和指令，经处理器200控制保存至存储器100中。该输入接口300可以与输入装置相连，接收用户手动输入的参数或指令。该输入装置可以是显示屏上覆盖的触摸层，也可以是终端外壳上设置的按键、轨迹球或触控板，也可以是键盘、触控板或鼠标等。

显示单元400，与处理器200相连，用于显示处理器200处理的数据以及用于显示可视化的用户界面。该显示单元400可以为LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode，有机发光二极管)触摸器等。

网络端口500，与处理器200相连，用于与外部各终端设备进行通信连接。该通信连接所采用的通信技术可以为有线通信技术或无线通信技术，如移动高清链接技术(MHL)、通用串行总线(USB)、高清多媒体接口(HDMI)、无线保真技术(WiFi)、蓝牙通信技术、低功耗蓝牙通信技术、基于IEEE802.11s的通信技术等。

图4仅示出了具有组件100-500的电子设备，本领域技术人员可以理解的是，图4示出的结构并不构成对电子设备的限定，可以包括比图示更少或者更多的部件，或者组合某些部件，或者不同的部件布置。

本申请还提供了一种计算机可读存储介质，该存储介质可以包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。该存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现前述任一实施例公开的数据库初始化方法。

本申请可获取配置初始化数据与数据源之间映射关系的服务映射文件，在获取并解析用于进行数据库初始化的初始化数据之后，可根据服务映射文件确定初始化数据对应的数据源，将解析后的目标数据分发至对应的数据源进行写入，实现微服务架构系统下数据库的初始化，能够满足跨服务数据库初始化的需求。

说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的系统而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。

还需要说明的是，在本说明书中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

Claims (9)

1.一种数据库初始化方法，其特征在于，包括：

获取用于进行数据库初始化的初始化数据；

获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；

根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；

将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化；

其中，所述获取用于进行数据库初始化的初始化数据，包括：预先在微服务工程的预设路径下创建需要同步的数据文件夹；其中，所述数据文件夹的名称与对应的微服务名称相同；在所述数据文件夹中导入用于进行数据库初始化的初始化数据，所述初始化数据的格式为excel格式；根据预设路径或数据文件夹的名称获取所述初始化数据。

2.根据权利要求1所述的数据库初始化方法，其特征在于，所述获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，包括：

在微服务工程的预设路径下查询服务映射文件；其中，所述服务映射文件包括所述初始化数据对应的文件夹名称、微服务名称、微服务对应的数据源以及数据库名称和密码。

3.根据权利要求1所述的数据库初始化方法，其特征在于，所述预设规则包括：表名识别规则、有效数据识别规则、主键列识别规则以及报错识别规则。

4.根据权利要求1至3任一项所述的数据库初始化方法，其特征在于，所述根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源，包括：

利用LiquibaseExcutor工具，获取包括所述初始化数据的excel文件流；

根据预设规则依次读取并解析所述excel文件流中的数据，得到所需的目标数据；其中，所述目标数据包括表数据、行数据、列数据以及列类型；

根据所述初始化数据对应的数据文件夹的名称，在所述服务映射文件中查找对应的数据源，并将解析得到的所述目标数据分发至对应的所述数据源中。

5.根据权利要求4所述的数据库初始化方法，其特征在于，所述将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化，包括：

通过PreparedStatement命令对所述目标数据执行插入操作，以写入所述数据源对应的数据库中，完成数据库的初始化。

6.一种数据库初始化装置，其特征在于，包括：

数据获取模块，用于获取用于进行数据库初始化的初始化数据；

映射获取模块，用于获取预先配置所述初始化数据与数据源之间映射关系的服务映射文件，所述数据源为微服务组件对应的数据库链接；

数据解析模块，用于根据预设规则解析所述初始化数据，得到所需的目标数据，并基于所述服务映射文件确定所述初始化数据对应的数据源；

数据插入模块，用于将所述目标数据分发至对应的数据源，并将所述目标数据写入所述数据源对应的数据库中，完成数据库的初始化；

其中，所述数据获取模块，具体用于预先在微服务工程的预设路径下创建需要同步的数据文件夹；其中，所述数据文件夹的名称与对应的微服务名称相同；在所述数据文件夹中导入用于进行数据库初始化的初始化数据，所述初始化数据的格式为excel格式；根据预设路径或数据文件夹的名称获取所述初始化数据。

7.根据权利要求6所述的数据库初始化装置，其特征在于，所述数据获取模块，包括：

文件创建单元，用于预先在微服务工程的预设路径下创建需要同步的数据文件夹；其中，所述数据文件夹的名称与对应的微服务名称相同；

数据导入单元，用于在所述数据文件夹中导入用于进行数据库初始化的初始化数据，所述初始化数据的格式为excel格式；

数据获取单元，用于根据预设路径或数据文件夹的名称获取所述初始化数据。

8.一种电子设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至5任一项所述数据库初始化方法的步骤。

9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述数据库初始化方法的步骤。

Images