CN107861737A

CN107861737A - 一种大型系统的数据库版本迁移方法

Info

Publication number: CN107861737A
Application number: CN201711077111.2A
Authority: CN
Inventors: 熊梦; 季统凯
Original assignee: G Cloud Technology Co Ltd
Current assignee: G Cloud Technology Co Ltd
Priority date: 2017-11-06
Filing date: 2017-11-06
Publication date: 2018-03-30

Abstract

本发明涉及软件版本升级技术领域，特别是一种大型系统的数据库版本迁移方法。本发明的方法是定义各组件数据库版本迁移文件；新增各组件数据库中版本迁移数据表；迁移子程序读取配置文件，根据传入参数执行数据库版本迁移。本发明提出了一种大型系统的数据库版本迁移方法，具有通用性，方便大型系统在进行版本升级时数据库版本变更的管理。

Description

一种大型系统的数据库版本迁移方法

技术领域

本发明涉及软件版本升级技术领域，特别是一种大型系统的数据库版本迁移方法。

背景技术

随着软件系统的功能越来越强大，相应的其复杂度也会越来越大。特别的，软件系统在整个生命周期内需要不断的升级，有时候根据实际需要也需要从高级版本降低到更低版本。系统的每一层升降级都会带来很大的工作量，尤其是当系统是一个异构多组件系统时，其升降级难度和复杂度会非常大。

在一个大型系统的版本升级过程中，最主要的也是最常见的升级就是数据库版本的变更，特别的，当一个大型系统是由多个组件组成，每个组件由不同的开发团队负责时，数据库的版本变更就变得非常的难以控制。

发明内容

本发明解决的技术问题在于提出一种大型系统的数据库版本迁移方法，实现对系统版本升级过程中系统数据库版本的有效管理，简化升降级版本的复杂度和难度。

本发明解决上述技术问题的技术方案是：

所述的方法包括如下步骤：

(1)定义各组件数据库版本迁移文件；包括设置迁移文件的文件名格式和内容格式；

(2)新增各组件数据库中版本迁移数据表；

(3)迁移子程序读取配置文件，获取组件数据库连接属性，包括组件数据库所在服务器IP、端口号，登录组件数据库的用户名和密码；

(4)读取组建数据库gc_db_version版本表，根据组件数据库名字读取当前版本，如果获取不到当前版本号，则返回默认版本0；

(5)根据当前版本和参数传递的目标版本从数据库版本迁移文件目录中获取需要执行的版本迁移文件列表；

(6)依次执行版本迁移文件，记录执行后的响应输出；如果执行成功，则将文件名添加到成功文件数组里，同时向gc_db_migrate_log表写入迁移记录；

(7)如果中途版本执行出现错误，则记录错误，然后根据成功的文件数组获取回滚的数组，并且执行回滚操作，同时向gc_db_migrate_log表写入迁移记录；

(8)当版本迁移文件列表全部成功执行完之后，更新gc_db_version版本号为本次目标版本号。

所述的设置迁移文件的文件名格式和内容格式如下：

(11)数据库版本迁移文件文件名格式设置，包括如下设置：

升级变更记录文件，格式：版本_up_数据库名#备注.sql；

降级变更记录文件，格式：版本_down_数据库名#备注.sql。

(12)数据库版本迁移文件文件内容格式设置，包括如下设置：

以注释的方式记录每一次增加变更记录的变更日期、变更人、变更内容描述；

以SQL语句的形式定义数据库表结构及表数据的变更；

所述每一次增加变更记录都必须同时增加升级变更记录文件和降级变更记录文件，且文件名版本一致，文件内容中数据库SQL变更脚本相对。

所述新增各组件数据库中版本迁移数据表包括：

(21)gc_db_version版本表，用于记录组件数据库当前版本，包括组件数据库名称字段和版本字段；

(22)gc_db_migrate_log数据库版本迁移日志表，用于记录组件数据库版本迁移历史记录，主要包括UUID字段，数据库版本迁移文件文件名字段，版本字段，迁移类型字段，迁移结果字段，迁移错误码字段，迁移时间字段。

所述迁移子程序是一个通用的独立于大型系统的单独程序，可以是用java编写的一个可执行jar包文件程序；

所述迁移子程序的配置文件指定组件数据库版本迁移文件所在地址目录。

所述数据库版本迁移包括数据表的增加、删除和修改，数据表结构字段的增加、删除和修改，数据表内容记录的增加、删除和修改。

本发明方案的有益效果如下：

1、本发明方法提供一个统一的变更方法，可以有效的降低大型软件系统(尤其是多组件多团队开发的大型异构系统)数据库版本变更过程中的难度和复杂度。

2、本发明提供一种大型系统的数据库版本迁移方法，具有通用性且实现简单，独立于大型系统本身，可以被大型系统开发团队集成实现。

附图说明

下面结合附图对本发明进一步说明：

图1为本发明方法的流程图；

图2为本发明方法的另一个子流程图。

具体实施方式

本发明解决的技术在于提出了一种大型系统的数据库版本迁移方法，实现了对大型系统版本变更过程中数据库版本迁移的有效管理，简化升降级版本的复杂度和难度。

请参见图1、2。下面分别对其各个流程具体实现进行描述。

(1)定义各组件数据库版本迁移文件，以国云G-Cloud云操作系统总线适配层组件gcloud-esb-web为例，设置数据库升级变更记录文件和降级变更记录文件，如下：

0001_up_gcloud_esb#initData.sql

0001_down_gcloud_esb#initData.sql

0002_up_gcloud_esb#remark.sql

0002_down_gcloud_esb#remark.sql

其中0001_up_gcloud_esb#initData.sql和

001_down_gcloud_esb#initData.sql为组件数据库的初始SQL文件；

0002_up_gcloud_esb＃remark.sql和0002_down_gcloud_esb＃remark.sql

为组件数据库的一次变更SQL文件，其内容如下所示：

1)0002_up_gcloud_esb＃remark.sql

USE gcloud_esb；

--20161114 add docker module

INSERT INTO`module`VALUES(’81’，’dc’，’COMPUTE’)；

--20170116 yuanjz add schedule module

INSERT INTO`module`(`id`，`uri`，`componentType`)VALUES(’82’，’schedule’，’COMPUTE’)；

……

2)0002_down_gcloud_esb#remark.sql

USE gcloud_esb；

--20161114 add docker module

DELETE FROM`module`WHERE id＝’81’；

--20170116 yuanjz add schedule module

DELETE FROM`module`WHERE id＝’82’；

……

以上版本迁移文件定义中，升级变更记录文件0002_up_gcloud_esb#remark.sql中定义了两条向gcloud_esb数据库的module数据表中插入记录的SQL语句；相应的，降级变更记录文件0002_down_gcloud_esb#remark.sql中定义了两条向gcloud_esb数据库的module数据表中移除记录的SQL语句，并且每一条记录中都以注释的方式记录每一次增加变更记录的变更日期、变更人、变更内容描述。

(2)新增各组件数据库中版本迁移数据表；

1)gc_db_vetsion版本表

2)gc_db_migrate_log数据库版本迁移日志表

(3)迁移子程序读取配置文件，根据传入参数执行数据库版本迁移。

其中依次执行数据库版本变更文件部分实现伪代码如下(DbSqlOperateImpl类subExecute方法)：

以上描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出实质性创造所获得的方案，都属于本发明保护的范围。

Claims

1.一种大型系统的数据库版本迁移方法，其特征在于：所述的方法包括如下步骤：

(2)新增各组件数据库中版本迁移数据表；

2.根据权利要求1所述的方法，其特征在于，所述的设置迁移文件的文件名格式和内容格式如下：

(11)数据库版本迁移文件文件名格式设置，包括如下设置：

升级变更记录文件，格式：版本_up_数据库名#备注.sql；

降级变更记录文件，格式：版本_down_数据库名#备注.sql。

(12)数据库版本迁移文件文件内容格式设置，包括如下设置：

以SQL语句的形式定义数据库表结构及表数据的变更；

3.根据权利要求1所述的方法，其特征在于，所述新增各组件数据库中版本迁移数据表包括：

4.根据权利要求2所述的方法，其特征在于，所述新增各组件数据库中版本迁移数据表包括：

(21)gc_db_vetsion版本表，用于记录组件数据库当前版本，包括组件数据库名称字段和版本字段；

5.根据权利要求1至4任一项所述的方法，其特征在于，所述迁移子程序是一个通用的独立于大型系统的单独程序，可以是用java编写的一个可执行jar包文件程序；

6.根据权利要求1至4任一项所述的方法，其特征在于，所述数据库版本迁移包括数据表的增加、删除和修改，数据表结构字段的增加、删除和修改，数据表内容记录的增加、删除和修改。

7.根据权利要求5所述的方法，其特征在于，所述数据库版本迁移包括数据表的增加、删除和修改，数据表结构字段的增加、删除和修改，数据表内容记录的增加、删除和修改。