CN105718570A - 用于数据库的数据迁移方法和装置 - Google Patents

用于数据库的数据迁移方法和装置 Download PDF

Info

Publication number
CN105718570A
CN105718570A CN201610038982.2A CN201610038982A CN105718570A CN 105718570 A CN105718570 A CN 105718570A CN 201610038982 A CN201610038982 A CN 201610038982A CN 105718570 A CN105718570 A CN 105718570A
Authority
CN
China
Prior art keywords
database
data
target database
data base
source database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610038982.2A
Other languages
English (en)
Other versions
CN105718570B (zh
Inventor
关攀攀
张徐根
张伟
张亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201610038982.2A priority Critical patent/CN105718570B/zh
Publication of CN105718570A publication Critical patent/CN105718570A/zh
Application granted granted Critical
Publication of CN105718570B publication Critical patent/CN105718570B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases
    • G06F16/214Database migration support

Abstract

本申请公开了用于数据库的数据迁移方法和装置。所述方法的一具体实施方式包括:建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据;将检测到的增量数据迁移至所述目标数据库;当所述源数据库中的增量数据都已迁移至目标数据库时,将数据库读写操作从所述源数据库切换至所述目标数据库。该实施方式实现了数据库之间的在线数据迁移。

Description

用于数据库的数据迁移方法和装置
技术领域
本申请涉及计算机技术领域,具体涉及数据库技术领域,尤其涉及用于数据库的数据迁移方法和装置。
背景技术
在信息化建设过程中,随着技术的发展,原有的信息系统不断被功能更强大的新系统所取代。在新旧系统的切换过程中,如何将旧系统的数据迁移至新系统是必然要面临的问题。
现有方案中数据迁移一般由数据管理员(DatabaseAdministrator,简称DBA)来做。DBA通常先停止源数据库的使用,然后书写迁徙脚本把数据导出到一个中间文件,然后再书写导入脚本将中间文件的数据导入目标库。然而,这种数据迁移方式会导致数据库在几个小时甚至几天无法对外提供服务,导致相关的应用程序无法使用。
发明内容
本申请的目的在于提出一种改进的用于数据库的数据迁移方法和装置,来解决以上背景技术部分提到的技术问题。
第一方面,本申请提供了一种用于数据库的数据迁移方法,所述方法包括:建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据;将检测到的增量数据迁移至所述目标数据库;当所述源数据库中的增量数据都已迁移至目标数据库时,将数据库读写操作从所述源数据库切换至所述目标数据库。
在一些实施例中,在所述建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据之前,所述方法还包括:统一接管数据库读写操作。
在一些实施例中,在所述创建所述源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库的同时,所述方法还包括:对已迁移至所述目标数据库中的全量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态。
在一些实施例中,在所述将检测到的增量数据迁移至所述目标数据库的同时,所述方法还包括:对已迁移至所述目标数据库中的增量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至则所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态或者回滚至将检测到的增量数据迁移至所述目标数据库之前的状态。
在一些实施例中,所述将数据库读写操作从所述源数据库切换至所述目标数据库,包括:将数据库读操作按比例逐渐切换至所述目标数据库,并监控切换过程中数据库读操作是否出现异常;若数据库读操作出现异常,则回滚至对所述源数据库进行数据库读操作的状态;若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库。
在一些实施例中,所述将数据库写操作切换至所述目标数据库,包括:若预设时间段内所述源数据库的增量数据的数据量变化值小于预设阈值,则将数据库写操作从源数据库切换至所述目标数据库。
在一些实施例中,在所述若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库之后,所述方法还包括:实时检测所述目标数据库的数据增量以将所检测到的目标数据库的增量数据回写至所述源数据库,并监控数据库读操作和/或写操作是否出现异常;若数据库读操作和/或写操作出现异常,则回滚至对所述源数据库进行数据库写操作的状态。
第二方面,本申请提供了一种用于数据库的数据迁移装置,所述装置包括:全量迁移单元,用于建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据;增量迁移单元,用于将检测到的增量数据迁移至所述目标数据库;操作切换单元,用于当所述源数据库中的增量数据都已迁移至目标数据库时,将数据库读写操作从所述源数据库切换至所述目标数据库。
在一些实施例中,所述装置还包括:接管单元,用于统一接管数据库读写操作。
在一些实施例中,所述装置还包括:全量校验单元,用于对已迁移至所述目标数据库中的全量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态。
在一些实施例中,所述装置还包括:增量校验单元,用于对已迁移至所述目标数据库中的增量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至则所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态或者回滚至将检测到的增量数据迁移至所述目标数据库之前的状态。
在一些实施例中,所述操作切换单元包括:读操作切换子单元,用于将数据库读操作按比例逐渐切换至所述目标数据库,并监控切换过程中数据库读操作是否出现异常;第一回滚子单元,用于若数据库读操作出现异常,则回滚至对所述源数据库进行数据库读操作的状态;写操作切换子单元,用于若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库。
在一些实施例中,所述写操作切换子单元进一步用于:若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库且预设时间段内所述源数据库的增量数据的数据量变化值小于预设阈值,则将数据库写操作从源数据库切换至所述目标数据库。
在一些实施例中,所述装置还包括:回写单元,用于实时检测所述目标数据库的数据增量以将所检测到的目标数据库的增量数据回写至所述源数据库,并监控数据库读操作和/或写操作是否出现异常;第二回滚单元,用于若数据库读操作和/或写操作出现异常,则回滚至对所述源数据库进行数据库写操作的状态。
本申请提供的用于数据库的数据迁移方法和装置,在源数据库和目标数据库进行全量数据迁移操作,并不断检测源数据库中的增量数据以进行增量数据的迁移,同时对源数据库中未迁移至目标数据库的增量数据进行检测,在目标数据库的增量数据均成功迁移至目标数据库时再进行后续的数据库读写操作的切换,从而实现数据库数据的在线迁移,同时也保证了迁移后目标数据库中数据的实时性。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1是本申请可以应用于其中的示例性系统架构图;
图2是根据本申请的用于数据库的数据迁移方法的一个实施例的流程图;
图3是根据本申请的用于数据库的数据迁移方法的又一个实施例的流程图;
图4是根据本申请的用于数据库的数据迁移装置的一个实施例的结构示意图;
图5是适于用来实现本申请实施例的应用服务器或数据库服务器的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1示出了可以应用本申请的用于数据库的数据迁移方法或装置的实施例的示例性系统架构100。
如图1所示,系统架构100可以包括应用服务器101、网络102、源数据库服务器103和目标数据库服务器104。网络102用以在应用服务器101和源数据库服务器103、目标数据库服务器104之间提供通信链路的介质。网络102可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
应用服务器101可以是运行各种应用程序的后台服务器,其可以通过运行的应用程序向接收与之相连的终端设备(未示出)所发送的信息,并可以在对信息进行处理后向终端设备返回处理后的信息。
源数据库服务器103和目标数据库服务器104都是可用于向应用服务器101提供数据支持的数据库服务器。应用服务器101可以通过网络102在源数据库服务器103或目标数据库服务器104中进行读数据操作或写数据操作。其中,源数据库服务器103可以部署源数据库,用于在数据迁移之前对应用服务器101提供数据支持的数据库服务器,目标数据库服务器104可以部署目标数据库,用于在数据迁移之后对应用服务器101提供数据支持的数据库服务器。
需要说明的是,本申请实施例所提供的用于数据库的数据迁移方法一般由应用服务器101执行,相应地,用于数据库的数据迁移装置一般设置于应用服务器101中。在某些情况下,数据迁移方法也可以通过另外的控制服务器(未示出)执行,相应的,数据迁移装置也可以设置于对应的控制服务器中。
应该理解,图1中的应用服务器、网络、源数据库服务器和目标数据库服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的应用服务器、网络、源数据库服务器和目标数据库服务器。
继续参考图2,示出了根据本申请的用于数据库的数据迁移方法的一个实施例的流程200。所述的用于数据库的数据迁移的方法,包括以下步骤:
步骤201,建立源数据库的镜像并将镜像中的全量数据迁移至目标数据库,并实时检测源数据库的增量数据。
在本实施例中,数据迁移方法运行于其上的电子设备(例如图1所示的应用服务器)可以首先对源数据库中的数据建立镜像。其中,建立镜像可以是把整个源数据库复制到另一个存储设备中,形成离线数据库,该离线数据库即为对源数据所建立的镜像。所建立的镜像可以不接受应用服务器中应用程序的读操作或写操作,以保证该镜像中的数据不会在后续迁移中变化,保证数据一致性。之后,电子设备可以将所建立镜像中的全量数据迁移至目标数据库。其中,全量数据就是将该镜像数据库的表中所有的数据复制到目标数据库。通过该方式,可以在源数据库和目标数据库之间实现全量数据迁移。电子设备可以通过有线连接方式或者无线连接方式向上述源数据库所在的服务器和目标数据库所在的服务器发送相应的控制命令,以执行上述操作。需要指出的是,上述无线连接方式可以包括但不限于3G/4G连接、WiFi连接、蓝牙连接、WiMAX连接、Zigbee连接、UWB(ultrawideband)连接、以及其他现在已知或将来开发的无线连接方式。
在开始建立源数据库的镜像并将镜像中的全量数据迁移至目标数据库的同时,电子设备还可以对源数据中的增量数据进行实时检测。电子设备可以通过开启源数据库的数据变更日志记录功能来检测上述建立源数据库的镜像并将镜像中的全量数据迁移至目标数据库过程中以及后续过程中源数据库的新产生的增量数据。增量数据是对源数据库建立镜像后源数据库由于数据库写操作等原因所产生的新数据。
上述源数据库和目标数据库可以是存在数据迁移需求的各种数据库。例如,当用户为了节省数据库使用成本时,用户需要将数据从Oracle、SQLServer等商业数据库迁移至MySQL数据库这一免费数据库。此时,Oracle、SQLServer等商业数据库可以是源数据库,MySQL数据库即为目标数据库。需要说明的是,源数据库和目标数据库不限于以上列出的数据库。
步骤202,将检测到的增量数据迁移至目标数据库。
在本实施例中,基于步骤201中对源数据增量数据的检测,上述电子设备(例如图1所示的应用服务器)可以将检测到的增量数据逐渐迁移到目标数据库中。需要说明的是,在将增量数据迁移至目标数据库的过程中,步骤201中对源数据库中增量数据的检测可以继续执行,使得增量迁移过程中由于数据库读写等原因源数据库产生的新数据也能不断地迁移到目标数据库。
可选的,在增量数据迁移过程中,可通过消息队列的方式将在源数据库中检测到的增量数据异步迁移至目标数据库。该方式中,电子设备可以通过多个生产者线程每次从源数据库中获取部分数据并将部分数据放置于队列中,同时电子设备可以通过多个消费者线程从队列中获取部分数据复制到目标数据库中。通过这种方式,可以通过多线程实现增量数据的异步化迁移,提高了数据迁移速度。同时,电子设备还可以对生产者线程和消费者线程的线程数目以及队列的长度进行调整,以控制迁移的速率以及迁移过程中所占用的系统资源(例如内存),从而达到理想的数据迁移状态。需要说明的是,通过以上方式对数据的迁移同样可适用于步骤201中全量数据的迁移。
步骤203,当源数据库中的增量数据都已迁移至目标数据库时,将数据库读写操作从源数据库切换至目标数据库。
在本实施例中,在步骤202开始执行之后,电子设备可以对增量数据的迁移状态进行监控。当源数据库中的增量数据都已迁移至目标数据库时,可以说明此时目标数据库中从源数据库迁移的增量数据与开始数据迁移后源数据库产生的增量数据一致,即可保证目标数据库中数据的实时性,从而可以将数据库读写操作切换至目标数据库。
可选的,可以通过以下方式确定源数据库中的增量数据都已迁移至目标数据库:在对增量数据进行迁移的过程中,可以对增量数据设置标志位以标记增量数据所处的状态,当各个增量数据的状态都为迁移完成状态时,即可确定源数据库中的增量数据都已迁移至目标数据库。例如,可以使用0来表示该增量数据处于未成功迁移至目标数据库的数据,使用2来标记已迁移且已通过检验的增量数据(即处于迁移完成状态的增量数据)。当源数据库中的增量数据的标志位均为2时,可以认为增量数据都已迁移完成,从而可以执行后续步骤。可选的,电子设备还可以使用其它标志位来表示其他状态的增量数据,例如使用1表示已执行迁移操作但尚未完成迁移的增量数据(如尚未进行检验等过程的增量数据),使用11表示检验不通过达到指定次数的增量数据。其中,可以将11表示检验不通过达到指定次数的增量数据认为是迁移中有问题的增量数据,可以将其列为监控对象,以通过其他方式解决相关的问题。解决相关问题的具体方式可以通过本领域现有技术实现,这里不再赘述。需要说明的是,以上对设置标志位的描述仅为示例,本申请中设置标志位的方法包括但不限于以上方式。
在本实施例的一些可选实现方式中,在上述步骤201之前,电子设备还可以首先统一接管数据库读写操作。源数据库可能会通过各种方式对应用数据库提供数据支持,因此在执行数据迁移后续过程前,电子设备可以通过数据访问中间件统一接管对源数据库的读写操作,从而为后续过程中切换读写操作进行准备。其中,数据访问中间件是连接应用程序和数据库的软件,其可以独立于数据管理与共享平台。需要说明的是,电子设备可以通过数据访问中间件开启源数据库的增量日志记录功能,已检测后续过程中产生的增量数据。
在本实施例的一些可选实现方式中,在执行步骤201的同时,数据迁移方法还包括以下步骤:对已迁移至目标数据库中的全量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至建立源数据库的镜像并将该镜像中的全量数据迁移至目标数据库之前的状态。在该实现方式中,可使用所建立的上述镜像中的全量数据对目标数据库中已迁移的全量数据进行一致性检查,以确定全量迁移过程中是否存在错误。如果未检测出错误,可以执行后续步骤。如果检测出错误,则可以将已迁移的全量数据以及已检测到的增量数据清楚,回滚至步骤201之前的状态。回滚时,可以将通过步骤20所生成的数据清除,例如对源数据库所建立的镜像清除、将源数据库记录的增量数据清除、将目标数据库中从源数据库中迁移的全量数据清除。该实现方式可以通过对全量数据的校验使得在全量数据迁移操作无错误的情况下才进入后续步骤,而在全量迁移出错时及时回滚,从而防止整体的数据迁移过程中出错。同时,及时回滚也可以防止在已出现错误的情况下执行后续步骤而造成系统资源浪费。需要说明的是,对全量数据的校验可以在每完成一个数据迁移时立即对该数据进行校验,也可以在执行一部分全量数据迁移后进行校验,还可以在所有全量数据都已经迁移后进行校验。在对全量数据进行校验时,可以对每一个字段都进行校验。
在本实施例的一些可选实现方式中,在执行步骤202的同时,上述数据迁移方法还包括:对已迁移至目标数据库中的增量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至上述步骤201之前的状态。在该实现方式中,可利用源数据中记录的增量数据对目标数据库中已从源数据迁移的数据进行一致性检查,从而判断增量数据迁移过程是否产生错误。如果未检测出错误,可以执行后续步骤。如果检测出错误,则可以回滚至步骤201之前的状态,或者回滚至步骤202之前的状态。当回滚至步骤201之前的状态时,可以将之前各步骤生成的数据清除,例如将对源数据库所建立的镜像清除、将源数据库记录的增量数据清除、将目标数据库中从源数据库中迁移的全量数据和增量数据清除。当回滚至步骤202之前的状态时,可以将步骤202所形成的数据清除,例如将目标数据库中从源数据库中迁移的增量数据清除,并将在源数据库中所检测到的所有增量数据均设置为未迁移的状态。该实现方式可以通过对增量数据的校验使得在增量数据迁移操作无错误的情况下才进入后续步骤,而在全量迁移出错时及时回滚,从而防止整体的数据迁移过程中出错。同时,及时回滚也可以防止在已出现错误的情况下执行后续步骤而造成系统资源浪费。需要说明的是,对增量数据的校验可以在每完成一个数据迁移时立即对该数据进行校验,也可以在执行一部分增量数据迁移后操作,还可以在所有增量数据都已经迁移后操作。在对全量数据进行校验时,可以对每一个字段都进行校验。
本申请的上述实施例提供的方法在源数据库和目标数据库进行全量数据迁移操作,并不断检测源数据库中的增量数据以进行增量数据的迁移,同时对源数据库中未迁移至目标数据库的增量数据进行检测,在目标数据库的增量数据均成功迁移至目标数据库时再进行后续的数据库读写操作的切换,从而实现数据库数据的在线迁移,同时也保证了迁移后目标数据库中数据的实时性。
进一步参考图3,其示出了用于数据库的数据迁移方法的又一个实施例的流程300。该用于数据库的数据迁移方法的流程300,包括以下步骤:
步骤301,建立源数据库的镜像并将镜像中的全量数据迁移至目标数据库,并实时检测源数据库的增量数据。
在本实施例中,步骤301可参考图2所对应实施例的步骤201,这里不再赘述。
步骤302,将检测到的增量数据迁移至目标数据库。
在本实施例中,步骤302可参考图2所对应实施例的步骤202,这里不再赘述。
步骤303,当源数据库中的增量数据都已迁移至目标数据库时,将数据库读操作按比例逐渐切换至目标数据库,并监控切换过程中数据库读操作是否出现异常。
在本实施例中,对源数据库中的增量数据是否都已迁移至目标数据库的判断可以参考图2对应实施例的步骤203中相应的内容。与图2对应实施例不同的是,在源数据库中的增量数据都已迁移至目标数据库时,上述电子设备(例如图1所示的应用服务器)首先将数据库读操作按比例逐渐切换至目标数据库。在此之前,电子设备对数据库的读写操作是通过对源数据库的访问实现的。在按比例切换时,可以首先将原本对源数据库的读操作部分切换至对目标数据库的读操作,即这些读操作从目标数据库读取数据。并且,所切换的比例可以逐渐增大,直至将所有读操作切换至目标数据库。同时,在每次将读操作部分切换至目标数据库后,电子设备对数据库读操作是否异常进行监控。判断数据库读操作是否异常可以通过现有技术实现,这里不再赘述。电子设备可以根据监控过程中是否出现数据读操作异常来确定执行步骤304或步骤305。
步骤304,若数据库读操作出现异常,则回滚至对源数据库进行数据库读操作的状态。
在本实施例中,当步骤303中对数据库读操作进行监控时出现数据库读操作异常,则说明电子设备可以控制数据迁移过程使之恢复至对源数据库进行读操作的状态。在数据库读操作出现异常时,通常可以认定切换至目标数据库的部分读操作出现异常,即目标数据库中的数据出现异常。如此,可以反推出此前全量数据和增量数据的迁移过程中存在数据迁移错误。此时,为了保证数据读操作正常以及防止在目标数据库异常时将写操作切换至目标数据库,可以将已转移至目标数据库的部分读操作切换回源数据库。可选的,由于可推出全量数据和增量数据的迁移过程中存在数据迁移错误,也可以将步骤301以及步骤302过程中生成的数据清除,相应的数据清除过程可参照图2对应实施例中的描述,这里不再赘述。
步骤305,若数据库读操作未出现异常,则将数据库写操作切换至目标数据库。
在本实施例中,当数据库读操作切换过程中未出现数据库异常时,可以将数据库写操作切换至目标数据库。
在本实施例的一些可选实现方式中,上述将数据库写操作切换至目标数据库,包括:若预设时间段内源数据库的增量数据的数据量变化值小于预设阈值,则将数据库写操作从源数据库切换至目标数据库。在该实现方式中,电子设备可以对源数据库中预设时间段内的增量数据的数据量变化值进行监控。其中,预设时间段可以选择当前时间之前的一段时间,例如最近一分钟、最近十分钟、最近一个小时。数据增量的数据量变化值,可以是该段时间内源数据库新产生数据记录的条数。
在本实施例的一些可选实现方式中,在上述步骤305之后,上述用于数据库的数据迁移方法还包括以下步骤:实时检测目标数据库的数据增量以将所检测到的目标数据库的增量数据回写至源数据库,并监控数据库读操作和/或写操作是否出现异常;若数据库读操作和/或写操作出现异常,则回滚至对源数据库进行数据库写操作的状态。在该实现方式中,在将写操作切换至目标数据库后,首先电子设备会实时检测目标数据的增量数据并将检测到的数据增量数据回写到目标数据库,并同时监控数据库读操作和/或写操作是否出现异常。由于将写操作后目标数据库的增量数据也同步到源数据库中,从而可以保证在写操作切换后源数据库依然可以保持其数据的实时性。可选的,在将目标数据库的增量数据回写到源数据库时,也可以对源数据库和目标数据库中的数据进行校验,以保证回写正确性。校验时,可以对每一个字段进行校验。
然后,在监控到数据库读操作和/或写操作出现异常,则电子设备可以对迁移过程进行控制使之回滚至对源数据库进行数据库写操作的状态。数据迁移过程中的数据迁移错误可能在后续数据库读写操作中才能显现,该实现方式中由于在写操作切换后通过增量数据的回写保持了源数据库中数据的实时性,这样在发现问题后可以将写操作切换回源数据库进行写操作。
与图2对应的实施例相比,在本实施例中在对数据库读写操作进行切换时,先将读操作按比例切换至目标数据库,并通过数据库读操作进一步检验全量数据与增量数据迁移过程是否有问题,在未发现问题时才进行写操作,从而进一步减少了数据迁移出现异常的可能性。
进一步参考图4,作为对上述各图所示方法的实现,本申请提供了一种用于数据库的数据迁移装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图4所示,本实施例所述的用于数据库的数据迁移装置400包括:全量迁移单元401、增量迁移单元402、操作切换单元403。其中,操作切换单元401用于建立源数据库的镜像并将镜像中的全量数据迁移至目标数据库,并实时检测源数据库的增量数据;增量迁移单元402用于将检测到的增量数据迁移至目标数据库;操作切换单元403用于当源数据库中不存在未迁移至目标数据库的增量数据时,将数据库读写操作从源数据库切换至目标数据库。
在本实施例中,全量迁移单元401、增量迁移单元402、操作切换单元403的具体处理可以参考图2对应实施例步骤201、步骤202、步骤203的详细描述,在此不再赘述。
在本实施例的一些可选实现方式中,上述数据迁移装置还包括:接管单元(未示出),用于统一接管数据库读写操作。该实现方式可参考上述图2对应实施例中相应实现方式的详细描述。
在本实施例的一些可选实现方式中,上述数据迁移装置还包括:全量校验单元(未示出),用于对已迁移至目标数据库中的全量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至建立源数据库的镜像并将镜像中的全量数据迁移至目标数据库之前的状态。该实现方式可参考上述图2对应实施例中相应实现方式的详细描述。
在本实施例的一些可选实现方式中,上述数据迁移装置还包括:增量校验单元(未示出),用于对已迁移至目标数据库中的增量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至则全量迁移单元401执行之前的状态或者回滚至增量迁移单元402执行之前的状态。该实现方式可参考上述图2对应实施例中相应实现方式的详细描述。
在本实施例的一些可选实现方式中,上述操作切换单元403包括:读操作切换子单元(未示出),用于将数据库读操作按比例逐渐切换至目标数据库,并监控切换过程中数据库读操作是否出现异常;第一回滚子单元(未示出),用于若数据库读操作出现异常,则回滚至对源数据库进行数据库读操作的状态;写操作切换子单元(未示出),用于若数据库读操作未出现异常,则将数据库写操作切换至目标数据库。该实现方式可参考上述图3对应实施例的详细描述。
在本实施例的一些可选实现方式中,上述写操作切换子单元进一步用于:若数据库读操作未出现异常,则将数据库写操作切换至目标数据库且预设时间段内源数据库的增量数据的数据量变化值小于预设阈值,则将数据库写操作从源数据库切换至目标数据库。该实现方式可参考上述图3对应实施例中相应实现方式的详细描述。
在本实施例的一些可选实现方式中,上述数据迁移装置还包括:回写单元(未示出),用于实时检测目标数据库的数据增量以将所检测到的目标数据库的增量数据回写至源数据库,并监控数据库读操作和/或写操作是否出现异常;第二回滚单元(未示出),用于若数据库读操作和/或写操作出现异常,则回滚至对源数据库进行数据库写操作的状态。该实现方式可参考上述图3对应实施例中相应实现方式的详细描述。
下面参考图5,其示出了适于用来实现本申请实施例的应用服务器或数据库服务器的计算机系统500的结构示意图。
如图5所示,计算机系统500包括中央处理单元(CPU)501,其可以根据存储在只读存储器(ROM)502中的程序或者从存储部分508加载到随机访问存储器(RAM)503中的程序而执行各种适当的动作和处理。在RAM503中,还存储有系统500操作所需的各种程序和数据。CPU501、ROM502以及RAM503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。
以下部件连接至I/O接口505:包括硬盘等的存储部分506;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分507。通信部分507经由诸如因特网的网络执行通信处理。驱动器508也根据需要连接至I/O接口505。可拆卸介质509,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器508上,以便于从其上读出的计算机程序根据需要被安装入存储部分506。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括有形地包含在机器可读介质上的计算机程序,所述计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分507从网络上被下载和安装,和/或从可拆卸介质509被安装。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,所述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括全量迁移单元、增量迁移单元、操作切换单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,增量迁移单元还可以被描述为“将检测到的增量数据迁移至所述目标数据库的单元”。
作为另一方面,本申请还提供了一种非易失性计算机存储介质,该非易失性计算机存储介质可以是上述实施例中所述装置中所包含的非易失性计算机存储介质;也可以是单独存在,未装配入终端中的非易失性计算机存储介质。上述非易失性计算机存储介质存储有一个或者多个程序,当所述一个或者多个程序被一个设备执行时,使得所述设备:建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据;将检测到的增量数据迁移至所述目标数据库;当所述源数据库中的增量数据都已迁移至目标数据库时,将数据库读写操作从所述源数据库切换至所述目标数据库。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (14)

1.一种用于数据库的数据迁移方法,其特征在于,所述方法包括:
建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据;
将检测到的增量数据迁移至所述目标数据库;
当所述源数据库中的增量数据都已迁移至目标数据库时,将数据库读写操作从所述源数据库切换至所述目标数据库。
2.根据权利要求1所述的方法,其特征在于,在所述建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据之前,所述方法还包括:
统一接管数据库读写操作。
3.根据权利要求1所述的方法,其特征在于,在所述创建所述源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库的同时,所述方法还包括:
对已迁移至所述目标数据库中的全量数据进行校验;
若校验通过,则继续执行后续操作;
若校验未通过,则回滚至所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态。
4.根据权利要求1所述的方法,其特征在于,在所述将检测到的增量数据迁移至所述目标数据库的同时,所述方法还包括:
对已迁移至所述目标数据库中的增量数据进行校验;
若校验通过,则继续执行后续操作;
若校验未通过,则回滚至则所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态或者回滚至将检测到的增量数据迁移至所述目标数据库之前的状态。
5.根据权利要求1所述的方法,其特征在于,所述将数据库读写操作从所述源数据库切换至所述目标数据库,包括:
将数据库读操作按比例逐渐切换至所述目标数据库,并监控切换过程中数据库读操作是否出现异常;
若数据库读操作出现异常,则回滚至对所述源数据库进行数据库读操作的状态;
若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库。
6.根据权利要求5所述的方法,其特征在于,所述将数据库写操作切换至所述目标数据库,包括:
若预设时间段内所述源数据库的增量数据的数据量变化值小于预设阈值,则将数据库写操作从源数据库切换至所述目标数据库。
7.根据权利要求5所述的方法,其特征在于,在所述若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库之后,所述方法还包括:
实时检测所述目标数据库的数据增量以将所检测到的目标数据库的增量数据回写至所述源数据库,并监控数据库读操作和/或写操作是否出现异常;
若数据库读操作和/或写操作出现异常,则回滚至对所述源数据库进行数据库写操作的状态。
8.一种用于数据库的数据迁移装置,其特征在于,所述装置包括:
全量迁移单元,用于建立源数据库的镜像并将所述镜像中的全量数据迁移至目标数据库,并实时检测所述源数据库的增量数据;
增量迁移单元,用于将检测到的增量数据迁移至所述目标数据库;
操作切换单元,用于当所述源数据库中的增量数据都已迁移至目标数据库时,将数据库读写操作从所述源数据库切换至所述目标数据库。
9.根据权利要求8所述的装置,其特征在于,所述装置还包括:
接管单元,用于统一接管数据库读写操作。
10.根据权利要求8所述的装置,其特征在于,所述装置还包括:
全量校验单元,用于对已迁移至所述目标数据库中的全量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态。
11.根据权利要求8所述的装置,其特征在于,所述装置还包括:
增量校验单元,用于对已迁移至所述目标数据库中的增量数据进行校验;若校验通过,则继续执行后续操作;若校验未通过,则回滚至则所述建立源数据库的镜像并将所述镜像中的全量数据迁移至所述目标数据库之前的状态或者回滚至将检测到的增量数据迁移至所述目标数据库之前的状态。
12.根据权利要求8所述的装置,其特征在于,所述操作切换单元包括:
读操作切换子单元,用于将数据库读操作按比例逐渐切换至所述目标数据库,并监控切换过程中数据库读操作是否出现异常;
第一回滚子单元,用于若数据库读操作出现异常,则回滚至对所述源数据库进行数据库读操作的状态;
写操作切换子单元,用于若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库。
13.根据权利要求12所述的装置,其特征在于,所述写操作切换子单元进一步用于:若数据库读操作未出现异常,则将数据库写操作切换至所述目标数据库且预设时间段内所述源数据库的增量数据的数据量变化值小于预设阈值,则将数据库写操作从源数据库切换至所述目标数据库。
14.根据权利要求12所述的装置,其特征在于,所述装置还包括:
回写单元,用于实时检测所述目标数据库的数据增量以将所检测到的目标数据库的增量数据回写至所述源数据库,并监控数据库读操作和/或写操作是否出现异常;
第二回滚单元,用于若数据库读操作和/或写操作出现异常,则回滚至对所述源数据库进行数据库写操作的状态。
CN201610038982.2A 2016-01-20 2016-01-20 用于数据库的数据迁移方法和装置 Active CN105718570B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610038982.2A CN105718570B (zh) 2016-01-20 2016-01-20 用于数据库的数据迁移方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610038982.2A CN105718570B (zh) 2016-01-20 2016-01-20 用于数据库的数据迁移方法和装置

Publications (2)

Publication Number Publication Date
CN105718570A true CN105718570A (zh) 2016-06-29
CN105718570B CN105718570B (zh) 2019-12-31

Family

ID=56147445

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610038982.2A Active CN105718570B (zh) 2016-01-20 2016-01-20 用于数据库的数据迁移方法和装置

Country Status (1)

Country Link
CN (1) CN105718570B (zh)

Cited By (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106686070A (zh) * 2016-12-13 2017-05-17 腾讯科技(深圳)有限公司 一种数据库数据迁移方法、装置、终端及系统
CN107391634A (zh) * 2017-06-30 2017-11-24 北京奇虎科技有限公司 数据迁移方法及装置
CN107438110A (zh) * 2017-09-15 2017-12-05 湖南新云网科技有限公司 一种基于透明计算的终端数据迁移方法及系统
CN107748790A (zh) * 2017-11-01 2018-03-02 北京奇艺世纪科技有限公司 一种线上服务系统、数据加载方法、装置及设备
CN108052664A (zh) * 2017-12-29 2018-05-18 北京小度信息科技有限公司 数据库存储集群的数据迁移方法和装置
CN108132949A (zh) * 2016-12-01 2018-06-08 腾讯科技(深圳)有限公司 数据库集群中数据迁移的方法及装置
CN108205560A (zh) * 2016-12-19 2018-06-26 腾讯科技(深圳)有限公司 一种数据同步方法以及装置
CN108205559A (zh) * 2016-12-19 2018-06-26 腾讯科技(深圳)有限公司 一种数据管理方法及其设备
WO2018113580A1 (zh) * 2016-12-19 2018-06-28 腾讯科技(深圳)有限公司 一种数据管理方法及服务器
WO2018130066A1 (zh) * 2017-01-11 2018-07-19 腾讯科技(深圳)有限公司 数据的迁移方法、计算机设备和存储介质
CN108446315A (zh) * 2018-02-07 2018-08-24 中国平安人寿保险股份有限公司 大数据迁移方法、装置、设备及存储介质
CN108628874A (zh) * 2017-03-17 2018-10-09 北京京东尚科信息技术有限公司 迁移数据的方法、装置、电子设备和可读存储介质
CN108874828A (zh) * 2017-05-12 2018-11-23 北京京东尚科信息技术有限公司 数据迁移的方法和装置
CN109067823A (zh) * 2018-06-11 2018-12-21 中国平安人寿保险股份有限公司 一种数据迁移方法、装置、计算机设备及存储介质
CN109254960A (zh) * 2018-08-24 2019-01-22 中国人民银行清算总中心 一种数据库海量数据的迁移方法及装置
CN109388627A (zh) * 2017-08-08 2019-02-26 阿里巴巴集团控股有限公司 一种数据库访问的控制方法、装置及电子设备
CN109635040A (zh) * 2018-11-27 2019-04-16 中国建设银行股份有限公司 实时数据迁移方法、装置及存储介质
CN109656908A (zh) * 2018-11-30 2019-04-19 广州品唯软件有限公司 一种数据库在线迁移方法、电子设备及存储介质
CN109684304A (zh) * 2018-12-13 2019-04-26 中国联合网络通信集团有限公司 数据迁移方法及装置
CN109857528A (zh) * 2019-01-10 2019-06-07 北京三快在线科技有限公司 数据迁移的速度调整方法、装置、存储介质和移动终端
CN110019133A (zh) * 2017-12-21 2019-07-16 北京京东尚科信息技术有限公司 数据在线迁移方法和装置
CN110019460A (zh) * 2017-11-08 2019-07-16 广东亿迅科技有限公司 基于环形高速缓冲区的异构数据交换方法及装置
CN110275717A (zh) * 2019-05-17 2019-09-24 平安科技(深圳)有限公司 私有镜像克隆方法、装置、计算机设备及存储介质
CN110334082A (zh) * 2019-07-11 2019-10-15 珠海格力电器股份有限公司 一种数据库的无损迁移方法及装置
CN110334077A (zh) * 2019-06-11 2019-10-15 无线生活(杭州)信息科技有限公司 数据库跨机房迁移的方法及装置
CN110377580A (zh) * 2019-07-25 2019-10-25 中国工商银行股份有限公司 一种数据迁移方法、装置及设备
CN110442564A (zh) * 2019-07-23 2019-11-12 福建天泉教育科技有限公司 增量数据校验方法、存储介质
CN110532241A (zh) * 2019-07-18 2019-12-03 政采云有限公司 利用MySQL Binlog进行不停机数据迁移方法
CN110568995A (zh) * 2019-08-30 2019-12-13 珠海格力电器股份有限公司 数据迁移方法及系统
CN111046016A (zh) * 2018-10-15 2020-04-21 珠海格力电器股份有限公司 数据处理方法、装置、系统和服务器
CN111221800A (zh) * 2019-12-19 2020-06-02 中国平安人寿保险股份有限公司 数据库迁移方法、装置、电子设备及存储介质
CN111324596A (zh) * 2020-03-06 2020-06-23 腾讯科技(深圳)有限公司 数据库集群的数据迁移方法、装置及电子设备
CN111538719A (zh) * 2020-04-30 2020-08-14 深圳前海微众银行股份有限公司 数据迁移方法、装置、设备及计算机存储介质
CN111737252A (zh) * 2020-05-22 2020-10-02 广东科学技术职业学院 基于数据中心的数据融合方法及系统
CN112925770A (zh) * 2021-03-09 2021-06-08 京东数字科技控股股份有限公司 一种数据库扩容方法、装置、设备和介质
CN113254421A (zh) * 2021-05-31 2021-08-13 重庆富民银行股份有限公司 基于数据库双写的跨库账户迁移方法
CN113360482A (zh) * 2021-08-10 2021-09-07 深圳市中科鼎创科技股份有限公司 基于sql数据库的在线迁移方法
CN113377763A (zh) * 2020-03-10 2021-09-10 阿里巴巴集团控股有限公司 数据库表格切换方法、装置、电子设备及计算机存储介质
CN113438275A (zh) * 2021-05-27 2021-09-24 众安在线财产保险股份有限公司 数据迁移方法、装置、存储介质及数据迁移设备
CN117194390A (zh) * 2023-11-08 2023-12-08 建信金融科技有限责任公司 数据库迁移方法和装置
WO2024021554A1 (zh) * 2022-07-29 2024-02-01 京东科技信息技术有限公司 数据迁移方法和装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102682096A (zh) * 2012-04-27 2012-09-19 北京航空航天大学 一种仿真资源信息与模型源码协同管理装置及其方法
CN103530290A (zh) * 2012-07-03 2014-01-22 深圳市腾讯计算机系统有限公司 数据库间的数据迁移方法和系统
US20140122413A1 (en) * 2012-10-29 2014-05-01 Paris Technologies, Inc. Bulk read and write between multi-dimensional data structures
CN103810174A (zh) * 2012-11-06 2014-05-21 阿里巴巴集团控股有限公司 数据库切换方法和数据库切换系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102682096A (zh) * 2012-04-27 2012-09-19 北京航空航天大学 一种仿真资源信息与模型源码协同管理装置及其方法
CN103530290A (zh) * 2012-07-03 2014-01-22 深圳市腾讯计算机系统有限公司 数据库间的数据迁移方法和系统
US20140122413A1 (en) * 2012-10-29 2014-05-01 Paris Technologies, Inc. Bulk read and write between multi-dimensional data structures
CN103810174A (zh) * 2012-11-06 2014-05-21 阿里巴巴集团控股有限公司 数据库切换方法和数据库切换系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
何子龙: "大型 Oracle 数据库迁移方法的研究及应用", 《数据库技术》 *

Cited By (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11243922B2 (en) 2016-12-01 2022-02-08 Tencent Technology (Shenzhen) Company Limited Method, apparatus, and storage medium for migrating data node in database cluster
CN108132949B (zh) * 2016-12-01 2021-02-12 腾讯科技(深圳)有限公司 数据库集群中数据迁移的方法及装置
CN108132949A (zh) * 2016-12-01 2018-06-08 腾讯科技(深圳)有限公司 数据库集群中数据迁移的方法及装置
CN106686070B (zh) * 2016-12-13 2020-10-16 腾讯科技(深圳)有限公司 一种数据库数据迁移方法、装置、终端及系统
CN106686070A (zh) * 2016-12-13 2017-05-17 腾讯科技(深圳)有限公司 一种数据库数据迁移方法、装置、终端及系统
US11003639B2 (en) 2016-12-13 2021-05-11 Tencent Technology (Shenzhen) Company Limited Database data migration method, apparatus, terminal, system, and storage medium
CN108205560B (zh) * 2016-12-19 2021-12-14 腾讯科技(深圳)有限公司 一种数据同步方法以及装置
US20190197027A1 (en) * 2016-12-19 2019-06-27 Tencent Technology (Shenzhen) Company Limited Data management method and server
CN108205560A (zh) * 2016-12-19 2018-06-26 腾讯科技(深圳)有限公司 一种数据同步方法以及装置
CN108205559A (zh) * 2016-12-19 2018-06-26 腾讯科技(深圳)有限公司 一种数据管理方法及其设备
WO2018113580A1 (zh) * 2016-12-19 2018-06-28 腾讯科技(深圳)有限公司 一种数据管理方法及服务器
CN108205559B (zh) * 2016-12-19 2022-01-07 腾讯科技(深圳)有限公司 一种数据管理方法及其设备
US11500832B2 (en) 2016-12-19 2022-11-15 Tencent Technology (Shenzhen) Company Limited Data management method and server
US11068449B2 (en) 2017-01-11 2021-07-20 Tencent Technology (Shenzhen) Company Limited Data migration method, apparatus, and storage medium
WO2018130066A1 (zh) * 2017-01-11 2018-07-19 腾讯科技(深圳)有限公司 数据的迁移方法、计算机设备和存储介质
CN108628874A (zh) * 2017-03-17 2018-10-09 北京京东尚科信息技术有限公司 迁移数据的方法、装置、电子设备和可读存储介质
CN108628874B (zh) * 2017-03-17 2020-12-22 北京京东尚科信息技术有限公司 迁移数据的方法、装置、电子设备和可读存储介质
CN108874828A (zh) * 2017-05-12 2018-11-23 北京京东尚科信息技术有限公司 数据迁移的方法和装置
CN107391634A (zh) * 2017-06-30 2017-11-24 北京奇虎科技有限公司 数据迁移方法及装置
CN109388627A (zh) * 2017-08-08 2019-02-26 阿里巴巴集团控股有限公司 一种数据库访问的控制方法、装置及电子设备
CN107438110A (zh) * 2017-09-15 2017-12-05 湖南新云网科技有限公司 一种基于透明计算的终端数据迁移方法及系统
CN107748790A (zh) * 2017-11-01 2018-03-02 北京奇艺世纪科技有限公司 一种线上服务系统、数据加载方法、装置及设备
CN107748790B (zh) * 2017-11-01 2021-09-10 北京奇艺世纪科技有限公司 一种线上服务系统、数据加载方法、装置及设备
CN110019460A (zh) * 2017-11-08 2019-07-16 广东亿迅科技有限公司 基于环形高速缓冲区的异构数据交换方法及装置
CN110019133A (zh) * 2017-12-21 2019-07-16 北京京东尚科信息技术有限公司 数据在线迁移方法和装置
CN108052664A (zh) * 2017-12-29 2018-05-18 北京小度信息科技有限公司 数据库存储集群的数据迁移方法和装置
CN108446315A (zh) * 2018-02-07 2018-08-24 中国平安人寿保险股份有限公司 大数据迁移方法、装置、设备及存储介质
CN109067823A (zh) * 2018-06-11 2018-12-21 中国平安人寿保险股份有限公司 一种数据迁移方法、装置、计算机设备及存储介质
CN109254960A (zh) * 2018-08-24 2019-01-22 中国人民银行清算总中心 一种数据库海量数据的迁移方法及装置
CN109254960B (zh) * 2018-08-24 2020-11-13 中国人民银行清算总中心 一种数据库海量数据的迁移方法及装置
CN111046016A (zh) * 2018-10-15 2020-04-21 珠海格力电器股份有限公司 数据处理方法、装置、系统和服务器
CN109635040A (zh) * 2018-11-27 2019-04-16 中国建设银行股份有限公司 实时数据迁移方法、装置及存储介质
CN109635040B (zh) * 2018-11-27 2022-03-11 中国建设银行股份有限公司 实时数据迁移方法、装置及存储介质
CN109656908A (zh) * 2018-11-30 2019-04-19 广州品唯软件有限公司 一种数据库在线迁移方法、电子设备及存储介质
CN109684304A (zh) * 2018-12-13 2019-04-26 中国联合网络通信集团有限公司 数据迁移方法及装置
CN109857528A (zh) * 2019-01-10 2019-06-07 北京三快在线科技有限公司 数据迁移的速度调整方法、装置、存储介质和移动终端
CN109857528B (zh) * 2019-01-10 2021-08-27 北京三快在线科技有限公司 数据迁移的速度调整方法、装置、存储介质和移动终端
CN110275717B (zh) * 2019-05-17 2024-03-22 平安科技(深圳)有限公司 私有镜像克隆方法、装置、计算机设备及存储介质
CN110275717A (zh) * 2019-05-17 2019-09-24 平安科技(深圳)有限公司 私有镜像克隆方法、装置、计算机设备及存储介质
CN110334077A (zh) * 2019-06-11 2019-10-15 无线生活(杭州)信息科技有限公司 数据库跨机房迁移的方法及装置
CN110334082A (zh) * 2019-07-11 2019-10-15 珠海格力电器股份有限公司 一种数据库的无损迁移方法及装置
CN110532241A (zh) * 2019-07-18 2019-12-03 政采云有限公司 利用MySQL Binlog进行不停机数据迁移方法
CN110442564A (zh) * 2019-07-23 2019-11-12 福建天泉教育科技有限公司 增量数据校验方法、存储介质
CN110377580B (zh) * 2019-07-25 2022-02-01 中国工商银行股份有限公司 一种数据迁移方法、装置及设备
CN110377580A (zh) * 2019-07-25 2019-10-25 中国工商银行股份有限公司 一种数据迁移方法、装置及设备
CN110568995A (zh) * 2019-08-30 2019-12-13 珠海格力电器股份有限公司 数据迁移方法及系统
CN111221800A (zh) * 2019-12-19 2020-06-02 中国平安人寿保险股份有限公司 数据库迁移方法、装置、电子设备及存储介质
CN111324596B (zh) * 2020-03-06 2021-06-11 腾讯科技(深圳)有限公司 数据库集群的数据迁移方法、装置及电子设备
CN111324596A (zh) * 2020-03-06 2020-06-23 腾讯科技(深圳)有限公司 数据库集群的数据迁移方法、装置及电子设备
CN113377763A (zh) * 2020-03-10 2021-09-10 阿里巴巴集团控股有限公司 数据库表格切换方法、装置、电子设备及计算机存储介质
CN111538719A (zh) * 2020-04-30 2020-08-14 深圳前海微众银行股份有限公司 数据迁移方法、装置、设备及计算机存储介质
CN111538719B (zh) * 2020-04-30 2024-04-19 深圳前海微众银行股份有限公司 数据迁移方法、装置、设备及计算机存储介质
CN111737252B (zh) * 2020-05-22 2023-10-03 广东科学技术职业学院 基于数据中心的数据融合方法及系统
CN111737252A (zh) * 2020-05-22 2020-10-02 广东科学技术职业学院 基于数据中心的数据融合方法及系统
CN112925770A (zh) * 2021-03-09 2021-06-08 京东数字科技控股股份有限公司 一种数据库扩容方法、装置、设备和介质
CN113438275A (zh) * 2021-05-27 2021-09-24 众安在线财产保险股份有限公司 数据迁移方法、装置、存储介质及数据迁移设备
CN113254421A (zh) * 2021-05-31 2021-08-13 重庆富民银行股份有限公司 基于数据库双写的跨库账户迁移方法
CN113360482A (zh) * 2021-08-10 2021-09-07 深圳市中科鼎创科技股份有限公司 基于sql数据库的在线迁移方法
WO2024021554A1 (zh) * 2022-07-29 2024-02-01 京东科技信息技术有限公司 数据迁移方法和装置
CN117194390A (zh) * 2023-11-08 2023-12-08 建信金融科技有限责任公司 数据库迁移方法和装置
CN117194390B (zh) * 2023-11-08 2024-02-09 建信金融科技有限责任公司 数据库迁移方法和装置

Also Published As

Publication number Publication date
CN105718570B (zh) 2019-12-31

Similar Documents

Publication Publication Date Title
CN105718570A (zh) 用于数据库的数据迁移方法和装置
US9396094B2 (en) Software test automation systems and methods
CN103109276B (zh) 系统测试方法
CN103391222A (zh) 网络服务监控系统及方法
CN105824846B (zh) 数据迁移方法及装置
CN102200944B (zh) Erp系统的测试环境克隆方法及系统
CN105786405A (zh) 一种在线升级方法、装置及系统
CN110768872A (zh) 巡检方法、系统、装置、计算机设备和存储介质
US20200341752A1 (en) Electronic apparatus and method for controlling thereof
CN111522703A (zh) 监控访问请求的方法、设备和计算机程序产品
CN106294387A (zh) 数据迁移方法和装置
CN110291505A (zh) 减少应用的恢复时间
US8762781B2 (en) Method and apparatus useful in manufacturing test case operations
CN105022663B (zh) 电力系统监测和控制系统
US8661293B2 (en) Test architecture based on intelligent test sequence
CN113885899A (zh) 一种固态硬盘固件烧录方法、装置、设备和存储介质
CN106529281A (zh) 一种可执行文件处理方法及装置
US10528257B2 (en) Method and apparatus for reproducing an I/O operation of a storage system
CN105653445A (zh) 一种满足do-178c测试结果的实现方法
CN109766235A (zh) 基于软件监控的配置文件检测方法、系统、设备及介质
CN105760283A (zh) 一种日志输出方法和装置
CN106066820B (zh) 验证挂载恢复卷的自动化测试方法及系统
CN114978923A (zh) 故障演练方法、装置和系统
CN109144788B (zh) 一种重建osd的方法、装置及系统
CN107368338A (zh) 一种软件自动部署方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant