CN107193688A - 数据表结构修改方法及装置 - Google Patents

Abstract

本申请实施例提供一种数据表结构修改方法及装置。其中，方法包括如下的步骤：根据原数据表的表结构，创建具有目标表结构的备份数据表；按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表；用所述备份数据表替换所述原数据表。本申请实施例的技术方案，解决了现有技术中，修改数据表结构时造成的数据表的并发性能下降的缺陷。

Description

数据表结构修改方法及装置

技术领域

本申请涉及数据库领域，尤其涉及一种数据表结构修改方法及装置。

背景技术

互联网应用会频繁加功能，修改需求。相应地，数据库的表结构也会经常修改，例如，修改字段、主键或索引等。

现有技术中，对数据表进行表结构修改操作时，会对整个表加上只读锁，以保证数据的可靠性，防止数据丢失或产生脏数据。

但是，上述对整个表加锁的方式会导致数据表在使用时存在并发性较差的缺陷。

发明内容

有鉴于此，本申请实施例提供一种数据表结构修改方法及装置，用以解决现有技术中，修改数据表结构时造成的数据表并发性较差的缺陷。

本申请实施例提供一种数据表结构修改方法，包括：

根据原数据表的表结构，创建具有目标表结构的备份数据表；

按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表；

用所述备份数据表替换所述原数据表。

进一步可选地，根据原数据表的表结构，创建具有目标表结构的备份数据表，包括：创建与所述原数据表的表结构相同的数据表；按照所述目标表结构的指示，对所述数据表进行表结构修改，以得到所述备份数据表。

进一步可选地，以预设的备份粒度将所述数据记录导入所述备份数据表，还包括：在所述原数据表中，创建与DML操作的类型对应的触发器；调用所述触发器，以将针对所述原数据表的DML操作同步至所述备份数据表。

进一步可选地，按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表，包括：按照所述原数据表中所述数据记录所保存的顺序，以所述预设的备份粒度对所述数据记录中未备份的数据记录添加行级读锁；将添加所述行级读锁的数据记录备份至所述备份数据表；释放所述行级读锁。

进一步可选地，还包括：以指定条数的数据记录为所述备份粒度。

进一步可选地，所述备份粒度为20～30条数据记录。

本申请实施例还提供一种数据表结构修改装置，包括：

表结构修改模块，根据原数据表的表结构，创建具有目标表结构的备份数据表；

备份模块，用于按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表；

替换模块，用于用所述备份数据表替换所述原数据表。

进一步可选地，所述表结构修改模块具体用于：创建与所述原数据表的表结构相同的数据表；按照所述目标表结构的指示，对所述数据表进行表结构修改，以得到所述备份数据表。

进一步可选地，所述备份模块具体用于：在所述原数据表中，创建与DML操作的类型对应的触发器；调用所述触发器，以将针对所述原数据表的DML操作同步至所述备份数据表。

进一步可选地，所述备份模块具体用于：按照所述原数据表中所述数据记录所保存的顺序，以所述预设的备份粒度对所述数据记录中未备份的数据记录添加行级读锁；将添加所述行级读锁的数据记录备份至所述备份数据表；释放所述行级读锁。

本申请实施例提供的数据表结构修改方法及装置，在将原数据表中的数据记录备份至表结构修改后的备份数据表时，按照原数据表中数据记录所保存的顺序，以预设的备份粒度从原数据表向备份数据表导入数据记录。可根据应用需求适应性设定备份粒度，使得数据表在使用时的灵活性较高。与此同时，不同应用需求设定的备份粒度可以不同，这在一定程度上提高了数据表的并发性能。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的一数据表结构修改方法的流程示意图；

图2是本申请实施例提供的另一数据表结构修改方法的流程示意图；

图3是本申请实施例提供的一数据表结构修改装置的结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

针对现有的在线修改数据表结构时存在的对针对该数据表的其他操作造成阻碍，进而造成业务中断的缺陷，本申请实施例提供一种解决方案，其核心原理是：根据原数据表的表结构，创建具有目标表结构的备份数据表。在将原数据表中的数据记录备份至表结构修改后的备份数据表时，按照原数据表中数据记录所保存的顺序，以设定的数据备份粒度，从原数据表向备份数据表导入数据记录。在数据记录备份完成后，以备份数据表替换原数据表。进而，在线修改表结构的同时，一定程度上提高了数据表的灵活性以及并发性能。

图1是本申请实施例提供的一数据表结构修改方法的流程示意图，结合图1，该方法包括：

步骤101、根据原数据表的表结构，创建具有目标表结构的备份数据表。

步骤102、按照原数据表中数据记录所保存的顺序，以预设的备份粒度将数据记录备份至备份数据表。

步骤103、用备份数据表替换原数据表。

针对步骤101，数据表的表结构，即定义该数据表的字段、类型、主键、外键以及索引等。对数据表进行表结构修改，包括进行上述至少一种表结构的修改。

原数据表，即数据库中当前存有的、且表结构需要被修改的一数据表。该数据表由一组数据记录组成，向多个进程开放使用。

目标表结构，即针对原数据表进行表结构修改后，得到的最终表结构。作为原数据表的替代数据表，该备份数据表具有目标表结构。

针对步骤102，数据表中，每一行称为一个数据记录，每一数据记录由若干个字段组成。对原数据表中的数据记录进行备份时，为保证备份的条理性，按照数据记录在原数据表中所保存的顺序进行备份。例如，按照数据记录在原数据表中所在行的先后顺序进行备份。

预设的备份粒度，可选的为小于表级的粒度，例如页级粒度或行级粒度。从而通过缩小备份时的粒度，降低对相应的数据记录上锁的时间，减少对其他使用原数据表的进程的影响。当然，根据应用需求，该预设的备份粒度也可以是表级别的。

针对步骤103，在数据备份记录完成之后，用备份数据表替换原数据表，此时备份数据表中存有与原数据表相同的数据记录并且具有目标表结构。

本实施例中，在将原数据表中的数据记录备份至表结构修改后的备份数据表时，按照原数据表中数据记录所保存的顺序，以预设的备份粒度从原数据表向备份数据表导入数据记录。可根据应用需求适应性设定备份粒度，使得数据表在使用时的灵活性较高。与此同时，不同应用需求设定的备份粒度可以不同，这在一定程度上提高了数据表的并发性能。

图2是本申请实施例提供的另一数据表结构修改方法的流程示意图，结合图2，该方法包括：

步骤201、创建与原数据表的表结构相同的数据表。

步骤202、按照目标表结构的指示，对数据表进行表结构修改，以得到备份数据表。

步骤203、在原数据表中，创建与DML操作的类型对应的触发器。

步骤204、按照原数据表中数据记录所保存的顺序，以预设的备份粒度对数据记录中未备份的数据记录添加行级读锁。

步骤205、将添加行级读锁的数据记录备份至备份数据表。

步骤206、释放行级读锁。

步骤207、判断原数据表中是否仍存在未备份的数据记录；若有，则执行步骤204；若无，则执行步骤208。

步骤208、用备份数据表替换所述原数据表。

针对步骤201，创建与原数据表的表结构相同的数据表。表结构相同，即备份数据表的字段、类型、主键、外键以及索引均与原数据表相同。

针对步骤202，目标结构，是数据表结构修改操作所需求的结构。由于上一步骤中新创建的数据表与原数据表的表结构相同，因此，按照目标表结构的指示，对新创建的数据表进行表结构修改，可认为是对原数据表进行表结构修改。本步骤得到备份数据表与直接基于原数据表进行结构修改后得到的数据表的表结构完全相同，但是在表结构修改的过程中不需锁定整个数据表，并不阻碍其他进程对数据表的操作。

针对步骤203，DML(Data Manipulation Language，数据操纵语言)操作，包括针对数据表的update(更新)操作，delete(删除)操作、insert(插入)操作以及select(检索)操作等。

在上述几种操作中，update(更新)操作，delete(删除)操作以及insert(插入)操作会造成数据表中数据记录产生变化。为在备份数据表中记录并保留上述变化，本步骤中通过在原数据表中建立触发器将针对原数据表的DML操作同步至备份数据表。

可选的，在原数据表中，创建与DML操作的类型对应的触发器，即针对update操作，delete操作以及insert操作分别建立对应的触发器，用以将针对原数据表的update操作，delete操作、insert操作以及select操作同步至备份数据表，从而备份数据表能够根据其他进程对原数据表的操作实时进行更新，进一步保证数据备份的一致性。

针对步骤204，按照原数据表中数据记录所保存的顺序，可以是按照数据记录所在行的先后顺序依次进行备份。当一次备份完成后，下一次备份是针对原数据表中未备份的数据记录进行的。

可选的，备份粒度可以是行级粒度，即以指定条数的数据记录为备份粒度，例如，指定备份粒度为N条数据记录，在备份时，每次从原数据表取N条数据记录并导入备份数据表。在这N条数据记录上锁期间，数据表中其他的数据记录仍旧可以接受来自其他进程的操作。

优选的，在本申请实施例中，备份粒度为20～30条数据记录时，能够保证较高的备份效率并且极大降低将对其他使用原数据表的进程造成的影响。

在数据记录备份时，需要防止在备份期间其他进程有数据写入操作从而导致原数据表中的数据记录与备份至备份数据表中的数据记录不一致。因此，在数据记录的备份开始之前，可以向待备份的数据记录添加行级读锁。从而，在行级读锁释放之前，被锁定的数据记录不接受其他进程除select操作以外的其他操作。

针对步骤205，将添加行级读锁的数据记录备份至备份数据表，并在备份完成之后执行步骤206所述，释放行级读锁，以恢复其他进程的使用。

针对步骤207，在每一次备份完成之后，判断原数据表中是否仍存在未备份的数据记录，若存在，则还需继续备份直至原数据表中不存在未备份的数据记录。

针对步骤208，在用备份数据表替换原数据表时，可选的，可以先删除原数据表，并以原数据表的表名称命名备份数据表的表名称。也可以向其他使用该原数据表的进程发出通知，以使得其他进程获知当前使用的原数据表将更新为备份数据表，并在后续过程中使用备份数据表。例如，可以在通知中携带备份数据表的名称，以便于使用原数据表的进程将原数据表的名称替换为备份数据表的名称，以便在后续使用过程中直接访问备份数据表。

需要说明的，在本申请实施例的技术方案中，针对已备份至备份数据表的数据记录，使用预先在原数据表中建立的触发器将针对已备份的数据记录的操作同步至备份数据表中。

可选的，当有进程通过原数据表上建立的触发器向原数据表发起DML操作时，触发器响应于针对原数据表的DML操作，在逻辑表中记录DML操作的内容。在此之后，与DML操作的类型相应的触发器从逻辑表中读取MDL操作的内容，并根据该DML操作内容，在备份数据表中执行相应的DML操作。逻辑表，即触发器的插入表(inserted表)和删除表(deleted表)。inserted表中存有插入或是修改后的数据，deleted表中存有更新前的或是删除的数据。

例如，若一进程在定义有insert触发器的原数据表上执行insert语句时，新的数据记录行会被插入到inserted表中。insert触发器检查inserted表，并确定是否在备份数据表执行触发器动作或如何执行触发器动作。

例如，若一进程在定义有update触发器的原数据表上执行update语句时，原始的数据记录被移入到deleted表，更新的数据记录被移入到inserted表。update触发器检查deleted表和inserted表以及原数据表，确定是否更新数据记录以及如何执行触发器动作。

再例如，若一进程在定义有delete触发器的数据表上执行delete语句时，从原数据表中删除的行将被放置到deleted表中。delete触发器检查deleted表，确定如何在备份数据表中执行触发器动作。

本实施例中，通过复制原数据表并基于复制得到的数据表进行表结构的修改，提升了表结构修改的效率。另外，通过细化备份粒度从原数据表向备份数据表导入数据记录，缩小了数据记录上锁的时间，提升了数据表的灵活性以及并发性能，缓解了数据表结构在线修改对其他进程的使用影响。与此同时，通过在原数据表中建立触发器将针对原数据表的DML操作同步至备份数据表，进一步保证了数据备份过程中的一致性。

图3是本申请实施例提供的一数据表结构修改装置的结构示意图，结合图3，该装置包括：

表结构修改模块31，根据原数据表的表结构，创建具有目标表结构的备份数据表；

备份模块32，用于按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表；

替换模块33，用于用所述备份数据表替换所述原数据表。

进一步可选地，所述表结构修改模块31具体用于：创建与所述原数据表的表结构相同的数据表；按照所述目标表结构的指示，对所述数据表进行表结构修改，以得到所述备份数据表。

进一步可选地，所述备份模块32具体用于：在所述原数据表中，创建与DML操作的类型对应的触发器；调用所述触发器，以将针对所述原数据表的DML操作同步至所述备份数据表。

进一步可选地，所述备份模块32具体用于：按照所述原数据表中所述数据记录所保存的顺序，以所述预设的备份粒度对所述数据记录中未备份的数据记录添加行级读锁；将添加所述行级读锁的数据记录备份至所述备份数据表；释放所述行级读锁。

进一步可选地，以指定条数的数据记录为所述备份粒度。

进一步可选地，所述备份粒度为20～30条数据记录。

本实施例提供的数据表结构修改装置，在将原数据表中的数据记录备份至表结构修改后的备份数据表时，按照原数据表中数据记录所保存的顺序，以预设的备份粒度从原数据表向备份数据表导入数据记录。可根据应用需求适应性设定备份粒度，使得数据表在使用时的灵活性较高。与此同时，不同应用需求设定的备份粒度可以不同，这在一定程度上提高了数据表的并发性能。

以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种数据表结构修改方法，其特征在于，包括：

根据原数据表的表结构，创建具有目标表结构的备份数据表；

按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表；

用所述备份数据表替换所述原数据表。

2.根据权利要求1所述的方法，其特征在于，根据原数据表的表结构，创建具有目标表结构的备份数据表，包括：

创建与所述原数据表的表结构相同的数据表；

按照所述目标表结构的指示，对所述数据表进行表结构修改，以得到所述备份数据表。

3.根据权利要求1所述的方法，其特征在于，以预设的备份粒度将所述数据记录导入所述备份数据表，还包括：

在所述原数据表中，创建与DML操作的类型对应的触发器；

调用所述触发器，以将针对所述原数据表的DML操作同步至所述备份数据表。

4.根据权利要求1～3中任一项所述的方法，其特征在于，按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表，包括：

按照所述原数据表中所述数据记录所保存的顺序，以所述预设的备份粒度对所述数据记录中未备份的数据记录添加行级读锁；

将添加所述行级读锁的数据记录备份至所述备份数据表；

释放所述行级读锁。

5.根据权利要求4所述的方法，其特征在于，还包括：

以指定条数的数据记录为所述备份粒度。

6.根据权利要求5所述的方法，其特征在于，所述备份粒度为20～30条数据记录。

7.一种数据表结构修改装置，其特征在于，包括：

表结构修改模块，根据原数据表的表结构，创建具有目标表结构的备份数据表；

备份模块，用于按照所述原数据表中数据记录所保存的顺序，以预设的备份粒度将所述数据记录备份至所述备份数据表；

替换模块，用于用所述备份数据表替换所述原数据表。

8.根据权利要求7所述的装置，其特征在于，所述表结构修改模块具体用于：

创建与所述原数据表的表结构相同的数据表；

按照所述目标表结构的指示，对所述数据表进行表结构修改，以得到所述备份数据表。

9.根据权利要求7所述的装置，其特征在于，所述备份模块具体用于：

在所述原数据表中，创建与DML操作的类型对应的触发器；

调用所述触发器，以将针对所述原数据表的DML操作同步至所述备份数据表。

10.根据权利要求1～9中任一项所述的装置，其特征在于，所述备份模块具体用于：

按照所述原数据表中所述数据记录所保存的顺序，以所述预设的备份粒度对所述数据记录中未备份的数据记录添加行级读锁；

将添加所述行级读锁的数据记录备份至所述备份数据表；

释放所述行级读锁。