CN115470191A

CN115470191A - 数据库更新系统、方法及相应计算机设备和存储介质

Info

Publication number: CN115470191A
Application number: CN202210998857.1A
Authority: CN
Inventors: 张志昌; 李庆超; 张亚平
Original assignee: Wanghai Kangxin Beijing Technology Co ltd
Current assignee: Wanghai Kangxin Beijing Technology Co ltd
Priority date: 2022-08-19
Filing date: 2022-08-19
Publication date: 2022-12-13

Abstract

本申请公开了数据库更新系统、方法及相应计算机设备和存储介质，其中所述系统用于：配置新旧版本数据库的连接信息；读取数据库变更规则文件中的记录；读取新旧版本数据库的所有表及相应字段信息；读取变更规则数据并根据其中的表名获取新旧版本数据库的相应表及字段信息，根据相应变更规则数据以及获取的相应表及字段信息整理表升级脚本；针对不在变更规则数据中的表，确定新版本数据库中多出的表并整理表新增脚本并保存；读取新旧版本数据库的所有对象的名称和创建语句并将新版本数据库中多出的对象的创建语句保存为对象升级脚本；执行整理/保存的脚本中的一个或多个从而实现旧版本数据库的更新。本发明能提高数据库更新的准确性和效率。

Description

数据库更新系统、方法及相应计算机设备和存储介质

技术领域

本申请涉及电数字数据处理领域，尤其涉及数据库更新系统。本申请还涉及数据库更新方法及相应计算机设备和计算机可读存储介质。

背景技术

面向企业的软件产品，尤其是像医疗服务运营管理系统这样业务相关性强的大型软件产品，总是需要频繁开发新功能以应对越来越多且越来越复杂的客户需求的，软件产品也需要频繁发布新的版本。而不同的客户使用的版本不一样，根据需求选择的要升级的新版本也不一样，从而导致客户项目上的升级容易遇到一些问题。

另一方面，面向企业的软件产品的数据库里往往存储着大量的业务数据，业务表的数量也非常多，导致这类软件产品的数据库的升级不能像面向个人的软件产品一样，只提取少量的用户配置和用户数据转储，其他数据全量覆盖即可。面向企业的软件产品的版本升级中往往包含大量的数据库变更，不同版本的数据库内容差异大。而数据库更新的问题也是这类软件产品的升级过程中最常遇到的问题之一。

目前针对数据库更新的主要方式是在开发的过程中按照一定的规范整理升级脚本。但是随着软件产品的功能越来越多，难免遇到以下两个问题：

-参与开发的人员越来越多，升级脚本也越来越多，升级脚本的质量缺乏有效的监督，升级脚本的管理工作也越来越麻烦；

-每次在客户项目上做版本升级时，实施人员都要取大量的升级脚本在客户的数据库上执行，取脚本和执行脚本的过程里也难免会有疏漏。

因此，需要提供一种面向企业的软件产品的版本升级迭代的数据库自动更新工具。

发明内容

本发明提供一种数据库更新系统、方法及相应计算机设备和存储介质，其能自动整理升级脚本从而提高升级脚本的质量以及数据库更新的准确性和效率。

在本发明的第一方面，提供一种数据库更新系统，包括：

连接信息配置模块，用于配置旧版本数据库和新版本数据库的连接信息；

记录读取模块，用于逐行读取数据库变更规则文件中的记录并存入中间数据库，每一记录包括指明表名、是否更新表、是否合并表字段、是否合并表数据的变更规则数据；

表读取模块，用于读取新、旧版本数据库的所有表及相应字段信息；

表升级脚本模块，用于从中间数据库逐条读取变更规则数据，根据相应变更规则数据中的表名获取新、旧版本数据库的相应表及字段信息，根据相应变更规则数据以及获取的相应表及字段信息整理表升级脚本；

表新增脚本模块，用于针对不在变更规则数据中的表，确定新版本数据库中多出的表并整理按照新版本数据库创建表、按照新版本数据库插入数据的表新增脚本并保存；

对象脚本模块，用于读取新、旧版本数据库的所有对象的名称和创建语句并将新版本数据库中多出的对象的创建语句保存为对象升级脚本，其中所述对象包括视图、索引、函数、存储过程、触发器和/或序列；

脚本批量执行模块，用于执行所述表升级脚本、所述表新增脚本和所述对象升级脚本中的一个或多个从而实现旧版本数据库的更新。

在本发明的第二方面，提供一种数据库更新方法，包括：

配置旧版本数据库和新版本数据库的连接信息；

逐行读取数据库变更规则文件中的记录并存入中间数据库，每一记录包括指明表名、是否更新表、是否合并表字段、是否合并表数据的变更规则数据；

读取新、旧版本数据库的所有表及相应字段信息；

从中间数据库逐条读取变更规则数据，根据相应变更规则数据中的表名获取新、旧版本数据库的相应表及字段信息，根据相应变更规则数据以及获取的相应表及字段信息整理表升级脚本；

针对不在变更规则数据中的表，确定新版本数据库中多出的表并整理按照新版本数据库创建表、按照新版本数据库插入数据的表新增脚本并保存；

读取新、旧版本数据库的所有对象的名称和创建语句并将新版本数据库中多出的对象的创建语句保存为对象升级脚本，其中所述对象包括视图、索引、函数、存储过程、触发器和/或序列；

执行所述表升级脚本、所述表新增脚本和所述对象升级脚本中的一个或多个从而实现旧版本数据库的更新。

在本发明的第三方面，提供一种计算机设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中所述处理器执行所述计算机程序时实现根据本发明的第一方面的系统的功能或者实现根据本发明的第二方面的方法的步骤。

根据本发明的第四方面，提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据本发明的第一方面的系统的功能或者实现根据本发明的第二方面的方法的步骤。

按照本发明，通过配置旧版本数据库和新版本数据库的连接信息，逐行读取数据库变更规则文件中的记录并存入中间数据库，每一记录包括指明表名、是否更新表、是否合并表字段、是否合并表数据的变更规则数据，读取新、旧版本数据库的所有表及相应字段信息，从中间数据库逐条读取变更规则数据，根据相应变更规则数据中的表名获取新、旧版本数据库的相应表及字段信息，根据相应变更规则数据以及获取的相应表及字段信息整理表升级脚本，针对不在变更规则数据中的表，确定新版本数据库中多出的表并整理按照新版本数据库创建表、按照新版本数据库插入数据的表新增脚本并保存，读取新、旧版本数据库的所有对象的名称和创建语句并将新版本数据库中多出的对象的创建语句保存为对象升级脚本，然后执行所述表升级脚本、所述表新增脚本和所述对象升级脚本中的一个或多个，能够实现数据库升级脚本的自动整理，提高升级脚本的质量并减少管理升级脚本的工作，进而可提高数据库更新的准确性和效率，同时降低计算机人员的工作负荷并节约人力成本。

结合附图阅读本发明实施方式的详细描述后，本发明的其它特点和优点将变得更加清楚。

附图说明

图1为根据本发明系统的一实施例的框图；

图2为根据本发明方法的一实施例的流程图。

为清晰起见，这些附图均为示意性及简化的图，它们只给出了对于理解本发明所必要的细节，而省略其他细节。

具体实施方式

下面参照附图对本发明的实施方式和实施例进行详细说明。

通过下面给出的详细描述，本发明的适用范围将显而易见。然而，应当理解，在详细描述和具体例子表明本发明优选实施例的同时，它们仅为说明目的给出。

图1示出了根据本发明的数据库更新系统的一优选实施例的框图。

连接信息配置模块102用于配置旧版本数据库和新版本数据库的连接信息，包括但不限于：数据库类型；旧版本数据库的URL、用户名和密码；新版本数据库的URL、用户名和密码等。在配置这些连接信息之后，还可测试相应的数据库连接，以确保配置的连接信息正确。

记录读取模块104用于逐行读取数据库变更规则文件中的记录并存入中间数据库，每一记录包括指明表名、是否更新表、是否合并表字段、是否合并表数据的变更规则数据。在实施例中，数据库变更规则文件为Excel格式。变更规则由开发人员在功能开发时进行记录。如果修改的已有表的表结构，而且升级时需要更新表结构，则需要在变更规则文件中做记录，新增的表不需要在变更规则文件中记录。例如，变更规则Excel文件包括TABLE_NAME、IS_MOVE、IS_MERGE_TABLE、IS_MERGE_DATA、PRIMARY_KEY列。

TABLE_NAME指明需要更新表结构的表名。

IS_MOVE指明表是否要更新，默认值为1。如果值为0，后续整理升级脚本时该表不做更新处理，IS_MERGE_TABLE和IS_MERGE_DATA两列的值也不做判断。

IS_MERGE_TABLE指明是否合并表字段，默认值为1。值为1表示将新版本数据库中多出的列添加到旧版本数据库中，把新版本数据库中长度比旧版本数据库长的字段在旧版本数据库中增加长度，不会删除旧版本数据库的字段或者减小旧版本数据库的字段长度；值为0表示在旧版本数据库中删除原来的表，按照新版本数据库来重新创建表和插入数据。

IS_MERGE_DATA指明是否合并表数据，默认值为1。值为1表示将新版本数据库的数据与旧版本数据库做对比，只把旧版本数据库中不存在的主键数据导入到旧版本数据库中。值为0表示将旧版本数据库的该表先清空再导入新版本数据库的数据。

PRIMARY_KEY指明主键值。

如果一张表在新、旧版本数据库都存在又不想更新它，那么在变更规则文件中记录且IS_MOVE为0与不在变更规则文件中记录的效果是一样的，都是不更新这张表。

新版本数据库中新增的表不需要在变更规则文件中记录，因为新版本数据库中存在而旧版本数据库不存在的表可默认在旧版本数据库中创建并导入新版本数据库中的数据。

只有程序使用的内部配置表才会有场景需要将IS_MERGE_TABLE和IS_MERGE_DATA两列的值设为0。业务数据表必须将IS_MERGE_TABLE和IS_MERGE_DATA两列的值设为1，否则会导致业务数据丢失。

IS_MERGE_TABLE如果为0，IS_MERGE_DATA也必须是0。

在实施例中，本发明系统还包括校验模块，用于在读取变更规则Excel文件中的记录时根据预设规则校验每一记录的变更规则数据，校验不通过则返回失败信息并结束当前更新。校验时例如可校验以下内容：

1)如果IS_MERGE_TABLE为0则IS_MERGE_DATA必须为0，否则校验失败；

2)表名在新版本数据库中是否存在，不存在则校验失败。

表读取模块106用于读取新、旧版本数据库的所有表及相应字段信息，包含表名、表描述、字段名称、字段类型、字段长度、字段默认值、字段是否非空、字段描述，分别放到一个Map中。Map是一种依照键存储元素的容器，此处用于表及字段信息的存储。

表升级脚本模块108用于从中间数据库逐条读取变更规则数据，根据相应变更规则数据中的表名获取新、旧版本数据库的相应表及字段信息，根据相应变更规则数据以及获取的相应表及字段信息整理表升级脚本。换言之，逐条读取变更规则，根据变更规则中的表名获取新、旧数据库中的相应表及字段信息。判断变更规则信息，

-如果IS_MOVE＝0，则该表不做处理；

-如果IS_MOVE＝1，IS_MERGE_TABLE＝0，则整理删除表、按照新版本数据库创建表、按照新版本数据库插入数据的脚本并保存；

-如果IS_MOVE＝1，IS_MERGE_TABLE＝1，IS_MERGE_DATA＝0，则对比新、旧数据库的表的字段信息，找出新版本数据库多出的字段和长度变长的字段，整理插入新字段、修改字段长度、清空表、按照新版本数据库插入数据的脚本并保存；

-如果IS_MOVE＝1，IS_MERGE_TABLE＝1，IS_MERGE_DATA＝1，则对比两个库的表的字段信息和表数据的主键信息，找出新版本数据库多出的字段、长度变长的字段和多出的主键数据，整理插入新字段、修改字段长度、插入新数据的脚本并保存。

按变更规则处理完后，从两个Map中删除该表信息。

具体地，数据库表对比根据变更规则生成脚本。IS_MOVE、IS_MERGE_TABLE、IS_MERGE_DATA只存在三种规则1-0-0、1-1-0、1-1-1。

变更规则1-0-0

将旧版本表的表重命名为_bak，使用新版本表的表结构创建表；插入新版本表的数据。

表重命名为_bak脚本：

sqlserver脚本：【exec sp_rename旧表名,旧表名_bak】

oracle脚本：【alter table旧表名rename to旧表名_bak】

拼接建表语句脚本：【create table表名(字段名字段类型[(字段长度)][NOTNULL]......)】

插入数据脚本：【insert into表名(字段名1，字段名2)values(值a1，值b1)】

表、表字段、表数据都已提取，根据上述对应规则拼接生成脚本即可。

变更规则1-1-0

对比表中的字段，进行添加修改操作(将新版本多余的列迁移到旧版本，相同的列使用新版本的字段类型，长度短的延长)；清空旧版本表的数据，插入新版本表的数据。

新增字段脚本：【alter table表名add字段名字段类型是否为空】

修改字段脚本：【alter table表名modify字段名字段类型是否为空】

清空表数据脚本：

sqlserver脚本：【IF EXISTS(SELECT*FROM sys.all_objects WHERE object_id＝OBJECT_ID(N'表名')AND type IN('U'))TRUNCATE TABLE表名】

oracle脚本：【

declare num number；

begin

select count(1)into num from all_tables where TABLE_NAME＝'表名'andOWNER＝'数据库用户名'；

if num＝1then execute immediate'truncate table表名'；

end if；

end；】

插入数据脚本：【insert into表名(字段名1,字段名2)values(值a1,值b1)】

变更规则1-1-1

对比表中的字段，进行添加修改操作(将新版本多余的列迁移到旧版本，相同的列使用新版本的字段类型，长度短的延长)；新版本表多的数据插入(根据已查询出的数据条件依次判断，有主键时，新版本中的主键不同直接插入；无主键时，新版本中的数据直接插入)。

插入数据脚本：【insert into表名(字段名1,字段名2)values(值a1,值b1)】，如果字段内容先插入null，根据主键采用update方式更新数据。

表新增脚本模块110用于针对不在变更规则数据中的表，确定新版本数据库中多出的表并整理按照新版本数据库创建表、按照新版本数据库插入数据的表新增脚本并保存。在表升级脚本模块的处理之后，两个Map中只剩下不在变更规则中的表，对比两个Map中的表名，即可获取新版本数据库中多出的表，整理按照新版本数据库创建表、按照新版本数据库插入数据的脚本并保存。

对象脚本模块112用于读取新、旧版本数据库的所有对象的名称和创建语句并分别存到Map中，所述对象包括视图、索引、函数、存储过程、触发器和/或序列；然后对比两个Map中的对象名称确定新版本数据库中多出的对象并将其创建语句保存为对象升级脚本。

脚本批量执行模块114用于执行整理/保存的表升级脚本、表新增脚本和对象升级脚本中的一个或多个从而实现旧版本数据库的更新。应注意，在执行表升级脚本中的插入数据脚本之前，需读取数据库所有表的数据信息。

在实施例中，本发明系统还包括记录模块，用于提供用于记录变更规则数据的变更规则模板，使得开发人员能按照模板记录数据库变更规则。

在实施例中，本发明系统还包括现有脚本执行模块，用于读取并执行非所述系统生成的脚本。即，如果有其他特殊脚本需要执行，可以在该模块执行，点击按钮后可弹出页面，输入其他特殊脚本的目录后执行即可。

上述实施例提供面向企业的软件产品升级使用的数据库更新工具，由于可自动整理数据库升级脚本，提高了升级脚本的质量并减少了管理升级脚本的工作，进而提高了数据库更新的准确性和效率，同时降低了计算机人员的工作负荷并节约人力成本。

图2示出了根据本发明的数据库更新方法的一优选实施例的流程图。

在步骤S202，配置旧版本数据库和新版本数据库的连接信息；

在步骤S204，逐行读取数据库变更规则文件中的记录并存入中间数据库，每一记录包括指明表名、是否更新表、是否合并表字段、是否合并表数据的变更规则数据；

在步骤S206，读取新、旧版本数据库的所有表及相应字段信息；

在步骤S208，从中间数据库逐条读取变更规则数据，根据相应变更规则数据中的表名获取新、旧版本数据库的相应表及字段信息，根据相应变更规则数据以及获取的相应表及字段信息整理表升级脚本；

在步骤S210，针对不在变更规则数据中的表，确定新版本数据库中多出的表并整理按照新版本数据库创建表、按照新版本数据库插入数据的表新增脚本并保存；

在步骤S212，读取新、旧版本数据库的所有对象的名称和创建语句并将新版本数据库中多出的对象的创建语句保存为对象升级脚本，其中所述对象包括视图、索引、函数、存储过程、触发器和/或序列；

在步骤S214，执行所述表升级脚本、所述表新增脚本和所述对象升级脚本中的一个或多个从而实现旧版本数据库的更新。

在另一实施例中，本发明提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现结合图1所示所述的系统实施例或其它相应系统实施例的功能或者实现结合图2所示所述的方法实施例或其它相应方法实施例的步骤，在此不再赘述。

在另一实施例中，本发明提供一种计算机设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中所述处理器执行所述计算机程序时实现结合图1所示所述的系统实施例或其它相应系统实施例的功能或者实现结合图2所示所述的方法实施例或其它相应方法实施例的步骤，在此不再赘述。

在此所述的多个不同实施方式或者其特定特征、结构或特性可在本发明的一个或多个实施方式中适当组合。另外，在某些情形下，只要适当，流程图中和/或流水处理描述的步骤顺序可修改，并不必须精确按照所描述的顺序执行。另外，本发明的多个不同方面可使用软件、硬件、固件或者其组合和/或执行所述功能的其它计算机实施的模块或装置进行实施。本发明的软件实施可包括保存在计算机可读介质中并由一个或多个处理器执行的可执行代码。计算机可读介质可包括计算机硬盘驱动器、ROM、RAM、闪存、便携计算机存储介质如CD-ROM、DVD-ROM、闪盘驱动器和/或具有通用串行总线(USB)接口的其它装置，和/或任何其它适当的有形或非短暂计算机可读介质或可执行代码可保存于其上并由处理器执行的计算机存储器。本发明可结合任何适当的操作系统使用。

除非明确指出，在此所用的单数形式“一”、“该”均包括复数含义(即具有“至少一”的意思)。应当进一步理解，说明书中使用的术语“具有”、“包括”和/或“包含”表明存在所述的特征、步骤、操作、元件和/或部件，但不排除存在或增加一个或多个其他特征、步骤、操作、元件、部件和/或其组合。如在此所用的术语“和/或”包括一个或多个列举的相关项目的任何及所有组合。

前面说明了本发明的一些优选实施例，但是应当强调的是，本发明不局限于这些实施例，而是可以本发明主题范围内的其它方式实现。本领域技术人员可以在本发明技术构思的启发和不脱离本发明内容的基础上对本发明做出各种变型和修改，这些变型或修改仍落入本发明的保护范围之内。

Claims

1.一种数据库更新系统，其特征在于，所述系统包括：

2.根据权利要求1所述的系统，其特征在于，所述系统还包括：

校验模块，用于根据预设规则校验每一记录的变更规则数据，响应于校验不通过，返回失败信息。

3.根据权利要求1所述的系统，其特征在于，所述系统还包括：

记录模块，用于提供用于记录变更规则数据的变更规则模板。

4.根据权利要求1所述的系统，其特征在于，所述表升级脚本模块用于：响应于相应变更规则数据指明要更新表但不合并表字段，整理删除表、按照新版本数据库创建表、按照新版本数据库插入数据的脚本并保存。

5.根据权利要求1所述的系统，其特征在于，所述表升级脚本模块用于：响应于相应变更规则数据指明要更新表、要合并表字段但不合并表数据，确定新版本数据库相应表多出的字段和长度变长的字段，整理插入新字段、修改字段长度、清空表、按照新版本数据库插入数据的脚本并保存。

6.根据权利要求1所述的系统，其特征在于，所述表升级脚本模块用于：响应于相应变更规则数据指明要更新表、要合并表字段及要合并表数据，确定新版本数据库相应表多出的字段、长度变长的字段和多出的主键数据，整理插入新字段、修改字段长度、插入新数据的脚本并保存。

7.根据权利要求1所述的系统，其特征在于，所述系统还包括：

现有脚本执行模块，用于读取并执行非所述系统生成的脚本。

8.一种数据库更新方法，其特征在于，所述方法包括：

配置旧版本数据库和新版本数据库的连接信息；

读取新、旧版本数据库的所有表及相应字段信息；

9.一种计算机设备，包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中所述处理器执行所述计算机程序时实现根据权利要求1-7任一所述的系统的功能或者根据权利要求8所述的方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现根据权利要求1-7任一所述的系统的功能或者根据权利要求8所述的方法的步骤。