CN109254960B - 一种数据库海量数据的迁移方法及装置 - Google Patents

一种数据库海量数据的迁移方法及装置 Download PDF

Info

Publication number
CN109254960B
CN109254960B CN201810971917.4A CN201810971917A CN109254960B CN 109254960 B CN109254960 B CN 109254960B CN 201810971917 A CN201810971917 A CN 201810971917A CN 109254960 B CN109254960 B CN 109254960B
Authority
CN
China
Prior art keywords
end database
disk
database
target
target end
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810971917.4A
Other languages
English (en)
Other versions
CN109254960A (zh
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Clearing Center People's Bank Of China
Original Assignee
National Clearing Center People's Bank Of China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Clearing Center People's Bank Of China filed Critical National Clearing Center People's Bank Of China
Priority to CN201810971917.4A priority Critical patent/CN109254960B/zh
Publication of CN109254960A publication Critical patent/CN109254960A/zh
Application granted granted Critical
Publication of CN109254960B publication Critical patent/CN109254960B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种数据库海量数据的迁移方法及装置,涉及数据库技术领域。方法包括:根据源端数据库,搭建目标端数据库环境;对源端数据库和目标端数据库进行适应调整;在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。本发明可快速便捷的迁移数据库数据,并保障数据安全和一致性,并且将迁移过程对业务的影响降到最低。

Description

一种数据库海量数据的迁移方法及装置
技术领域
本发明涉及数据库技术领域,尤其涉及一种数据库海量数据的迁移方法及装置。
背景技术
随着信息技术的不断发展,信息的数据量持续增长,各种企业的生产数据也迎来了爆发式增长。在数据库中,海量数据一旦需要迁移,按照传统的数据迁移方式,数据迁移时间需要数天甚至数月,且在数据迁移期间经常会暂停或中断服务。显然,传统数据迁移方式满足不了企业越来越苛刻的对信息系统服务的需求,如何快速的迁移数据显然已经迫在眉睫。
目前,传统的数据迁移方案有如下四种:第一种是数据泵导出导入,此种方式会占用大量的存储空间,且导出时间也随导出内容的增长而增加,导出和导入均需要大量时间。第二种是用备份恢复的方式,从源端备份数据,在目标端恢复。与第一种存在的问题类似,备份需要存储空间,且备份恢复时间与数据量成正比,在海量数据的情况下,备份恢复时间漫长;第三种是通过dblink(Database link,数据库的链接,通过dblink本地数据库可以像访问本地数据库一样访问远程数据库表中的数据)方式,通过目标端数据库访问源端数据,插入目标端数据库。这种方式数据逻辑上迁移数据,虽然数据不落地,但是需要走网络,速度难以保障,且逻辑迁移不能保证与源端数据库完全一致;第四种为搭建ADG(ActiveDataguard,实现数据异地复制,是Oracle提供的一种数据保护和容灾方案)作为数据迁移的工具,此种方式需要具备ADG的相关知识,且跨网络数据同步,时间上也难以保证。
因此,如何快速便捷的迁移数据库数据,并保障数据安全、数据的一致性,以及将迁移过程对业务的影响降到最低,是数据迁移过程中不得不考虑的问题。
发明内容
本发明的实施例提供一种数据库海量数据迁移方法及装置,以满足快速便捷的迁移数据库数据,并保障数据安全和一致性,以及将迁移过程对业务的影响降到最低。
为达到上述目的,本发明采用如下技术方案:
一种数据库海量数据的迁移方法,包括:
根据源端数据库,搭建目标端数据库环境;
对源端数据库和目标端数据库进行适应调整;
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
具体的,所述根据源端数据库,搭建目标端数据库环境,包括:
在目标端数据库中安装与源端数据库相同版本的GI软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源;
在目标端数据库中新建一ASM的磁盘组,存放所述GI软件的相关信息;
在目标端数据库中新建OCR和表决盘,并将OCR和表决盘存放在新建的ASM的磁盘组中;所述ASM的磁盘组中存放的内容被配置为不能够迁移,能够新建。
具体的,对源端数据库和目标端数据库进行适应调整,包括:
将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;所述快速复制磁盘组包括待进行数据迁移的源端数据库磁盘;
将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在所述快速复制磁盘组中;
停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS,使源端数据库和目标端数据库保持静止。
具体的,所述建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝,包括:
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系;
启动并采用快速拷贝功能的复制技术,根据所述对应关系进行数据的快速拷贝。
具体的,所述将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问,包括:
将目标端数据库中的集群件CRS启动,挂起目标端数据库磁盘;
在目标端数据库中的集群件CRS中注册已经迁移的目标端数据库磁盘的数据库信息,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
一种数据库海量数据的迁移装置,包括:
环境搭建单元,用于根据源端数据库,搭建目标端数据库环境;
数据库调整单元,用于对源端数据库和目标端数据库进行适应调整;
磁盘确定单元,用于在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
快速拷贝单元,用于建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
磁盘挂起单元,用于将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
具体的,所述环境搭建单元,包括:
软件安装与资源设置模块,用于在目标端数据库中安装与源端数据库相同版本的GI软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源;
磁盘组新建模块,用于在目标端数据库中新建一ASM的磁盘组,存放所述GI软件的相关信息;
内容存储模块,用于在目标端数据库中新建OCR和表决盘,并将OCR和表决盘存放在新建的ASM的磁盘组中;所述ASM的磁盘组中存放的内容被配置为不能够迁移,能够新建。
具体的,所述数据库调整单元,包括:
日志及文件调整模块,用于将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;所述快速复制磁盘组包括待进行数据迁移的源端数据库磁盘;
OCR和表决盘调整模块,用于将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在所述快速复制磁盘组中;
数据库静止模块,用于停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS,使源端数据库和目标端数据库保持静止。
具体的,所述快速拷贝单元,包括:
对应关系建立模块,用于建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系;
快速拷贝模块,用于启动并采用快速拷贝功能的复制技术,根据所述对应关系进行数据的快速拷贝。
具体的,所述磁盘挂起单元,包括:
磁盘挂起模块,用于将目标端数据库中的集群件CRS启动,挂起目标端数据库磁盘;
信息注册模块,用于在目标端数据库中的集群件CRS中注册已经迁移的目标端数据库磁盘的数据库信息,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现以下步骤:
根据源端数据库,搭建目标端数据库环境;
对源端数据库和目标端数据库进行适应调整;
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
一种计算机设备,包括存储器、处理器及存储在存储上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现以下步骤:
根据源端数据库,搭建目标端数据库环境;
对源端数据库和目标端数据库进行适应调整;
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
本发明实施例提供的一种数据库海量数据的迁移方法及装置,首先根据源端数据库,搭建目标端数据库环境;对源端数据库和目标端数据库进行适应调整;然后,在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;之后,建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;这样,将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。可见,本发明实施例的磁盘级数据迁移不与上层业务发生关联,可迁移数据量巨大,迁移过程中无需占用额外存储空间,并且由于采用快速拷贝技术,在目标端数据库磁盘挂起,数据迁移完毕目标端数据库磁盘就能够被进行读写访问,对外提供服务,耗时非常短。本发明能够为备份站点建立实时数据同步提供前提保障。本发明可快速便捷的迁移数据库数据,并保障数据安全和一致性,并且将迁移过程对业务的影响降到最低。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种数据库海量数据的迁移方法的流程图一;
图2为本发明实施例提供的一种数据库海量数据的迁移方法的流程图二;
图3为本发明实施例中的磁盘序号对应关系示意图;
图4为本发明实施例提供的一种数据库海量数据的迁移装置的结构示意图一;
图5为本发明实施例提供的一种数据库海量数据的迁移装置的结构示意图二。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本发明实施例提供一种数据库海量数据的迁移方法,包括:
步骤101、根据源端数据库,搭建目标端数据库环境。
步骤102、对源端数据库和目标端数据库进行适应调整。
步骤103、在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同。
步骤104、建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝。
步骤105、将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
本发明实施例提供的一种数据库海量数据的迁移方法,采用磁盘级数据迁移不与上层业务发生关联,可迁移数据量巨大,迁移过程中无需占用额外存储空间,并且由于采用快速拷贝技术,在目标端数据库磁盘挂起,数据迁移完毕目标端数据库磁盘就能够被进行读写访问,对外提供服务,耗时非常短。本发明能够为备份站点建立实时数据同步提供前提保障。本发明可快速便捷的迁移数据库数据,并保障数据安全和一致性,并且将迁移过程对业务的影响降到最低。本发明可以应用于业界的主流存储设备,且支持Oracle数据库(Oracle Database,甲骨文公司的关系数据库)单实例或者多实例架构。
为了使本领域的技术人员更好的了解本发明,下面列举一个更为详细的实施例,如图2所示,本发明实施例提供一种数据库海量数据的迁移方法包括:
步骤201、在目标端数据库中安装与源端数据库相同版本的GI(GRID,Oracle数据库集群软件)软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源。
另外,如果为了进行操作系统或数据库版本升级,在目标端数据库中也可以安装比源端数据库更高版本的操作系统,和更高版本的GI软件,以及相同版本的数据库软件,这样后续只针对数据库软件升级即可。如果要在不同版本间进行数据迁移,则需要先迁移到相同版本,然后再数据库升级。
步骤202、在目标端数据库中新建一ASM(Automatic Storage Management,是Oracle主推的一种面向Oracle的存储解决方案)的磁盘组,存放GI软件的相关信息。
此处的ASM的磁盘组是指DISK GROUP,由多个磁盘组成。
步骤203、在目标端数据库中新建OCR(Oracle Cluster Registry,即Oracle集群注册表,存储着Oracle集群所有组件的配置信息)和表决盘(即Voting Disk,用于仲裁哪个节点在Oracle集群中),并将OCR和表决盘存放在新建的ASM的磁盘组中;ASM的磁盘组中存放的内容被配置为不能够迁移,仅能够新建。
步骤204、将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;快速复制磁盘组包括待进行数据迁移的源端数据库磁盘。
步骤205、将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在快速复制磁盘组中。
步骤206、停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS(Cluster Ready Service,Oracle集群),使源端数据库和目标端数据库保持静止。
步骤207、在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同。
例如如图3所示,在源端数据库中的磁盘hdisk10至hdisknn分别对应目标端数据库中的磁盘hdisk10至hdisknn。
步骤208、建立源端数据库磁盘和目标端数据库磁盘之间的对应关系。
步骤209、启动并采用快速拷贝功能的复制技术,根据对应关系进行数据的快速拷贝。
快速拷贝功能的复制技术,或者快速拷贝技术是指通过快照方式实现,拷贝的数据可以立即使用(例如IBM快速拷贝技术)。此处,快速拷贝技术启动完成后就可以实现对目标端数据库磁盘的使用,一般几秒钟就可以建立几百块盘之间的快速拷贝技术关系,盘对关系建立完成后就可以对目标端数据库磁盘进行读写访问。
步骤210、将目标端数据库中的集群件CRS启动,挂起目标端数据库磁盘。
步骤211、在目标端数据库中的集群件CRS中注册已经迁移的目标端数据库磁盘的数据库信息,数据迁移完毕,使得目标端数据库磁盘能够被进行读写访问。
本发明实施例提供的一种数据库海量数据的迁移方法,采用磁盘级数据迁移不与上层业务发生关联,可迁移数据量巨大(可达TB(太字节,Terabyte)或PB(拍字节,Petabyte)级别),迁移过程中无需占用额外存储空间,并且由于采用快速拷贝技术,在目标端数据库磁盘挂起,数据迁移完毕目标端数据库磁盘就能够被进行读写访问,对外提供服务,耗时非常短(可达到分钟级,例如20T的数据,若采用传统备份恢复方法,则需要近13小时)。本发明能够为备份站点建立实时数据同步提供前提保障。本发明可快速便捷的迁移数据库数据,并保障数据安全和一致性,并且将迁移过程对业务的影响降到最低。本发明可以应用于业界的主流存储设备,且支持Oracle数据库(Oracle Database,甲骨文公司的关系数据库)单实例或者多实例架构。
对应于上述图1和图2所示的方法实施例,如图4所示,本发明实施例还提供一种数据库海量数据的迁移装置,包括:
环境搭建单元31,用于根据源端数据库,搭建目标端数据库环境。
数据库调整单元32,用于对源端数据库和目标端数据库进行适应调整。
磁盘确定单元33,用于在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同。
快速拷贝单元34,用于建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝。
磁盘挂起单元35,用于将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
具体的,如图5所示,所述环境搭建单元31,包括:
软件安装与资源设置模块311,用于在目标端数据库中安装与源端数据库相同版本的GI软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源。
磁盘组新建模块312,用于在目标端数据库中新建一ASM的磁盘组,存放所述GI软件的相关信息。
内容存储模块313,用于在目标端数据库中新建OCR和表决盘,并将OCR和表决盘存放在新建的ASM的磁盘组中;所述ASM的磁盘组中存放的内容被配置为不能够迁移,能够新建。
具体的,如图5所示,所述数据库调整单元32,包括:
日志及文件调整模块321,用于将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;所述快速复制磁盘组包括待进行数据迁移的源端数据库磁盘。
OCR和表决盘调整模块322,用于将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在所述快速复制磁盘组中。
数据库静止模块323,用于停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS,使源端数据库和目标端数据库保持静止。
具体的,如图5所示,所述快速拷贝单元34,包括:
对应关系建立模块341,用于建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系。
快速拷贝模块342,用于启动并采用快速拷贝功能的复制技术,根据所述对应关系进行数据的快速拷贝。
具体的,如图5所示,所述磁盘挂起单元35,包括:
磁盘挂起模块351,用于将目标端数据库中的集群件CRS启动,挂起目标端数据库磁盘。
信息注册模块352,用于在目标端数据库中的集群件CRS中注册已经迁移的目标端数据库磁盘的数据库信息,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
本发明实施例提供的一种数据库海量数据的迁移装置,采用磁盘级数据迁移不与上层业务发生关联,可迁移数据量巨大(可达TB(太字节,Terabyte)或PB(拍字节,Petabyte)级别),迁移过程中无需占用额外存储空间,并且由于采用快速拷贝技术,在目标端数据库磁盘挂起,数据迁移完毕目标端数据库磁盘就能够被进行读写访问,对外提供服务,耗时非常短(可达到分钟级,例如20T的数据,若采用传统备份恢复方法,则需要近13小时)。本发明能够为备份站点建立实时数据同步提供前提保障。本发明可快速便捷的迁移数据库数据,并保障数据安全和一致性,并且将迁移过程对业务的影响降到最低。本发明可以应用于业界的主流存储设备,且支持Oracle数据库(Oracle Database,甲骨文公司的关系数据库)单实例或者多实例架构。
另外,本发明实施例还提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现以下步骤:
根据源端数据库,搭建目标端数据库环境。
对源端数据库和目标端数据库进行适应调整。
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同。
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝。
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
另外,本发明实施例还提供一种计算机设备,包括存储器、处理器及存储在存储上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现以下步骤:
根据源端数据库,搭建目标端数据库环境。
对源端数据库和目标端数据库进行适应调整。
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同。
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝。
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
本发明中应用了具体实施例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种数据库海量数据的迁移方法,其特征在于,包括:
在目标端数据库中安装与源端数据库相同版本的GI软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源;
在目标端数据库中新建一ASM的磁盘组,存放所述GI软件的相关信息;
在目标端数据库中新建OCR和表决盘,并将OCR和表决盘存放在新建的ASM的磁盘组中;所述ASM的磁盘组中存放的内容被配置为不能够迁移,能够新建;
将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;所述快速复制磁盘组包括待进行数据迁移的源端数据库磁盘;
将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在所述快速复制磁盘组中;
停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS,使源端数据库和目标端数据库保持静止;
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
2.根据权利要求1所述的数据库海量数据的迁移方法,其特征在于,所述建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝,包括:
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系;
启动并采用快速拷贝功能的复制技术,根据所述对应关系进行数据的快速拷贝。
3.根据权利要求2所述的数据库海量数据的迁移方法,其特征在于,所述将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问,包括:
将目标端数据库中的集群件CRS启动,挂起目标端数据库磁盘;
在目标端数据库中的集群件CRS中注册已经迁移的目标端数据库磁盘的数据库信息,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
4.一种数据库海量数据的迁移装置,其特征在于,包括:
软件安装与资源设置模块,用于在目标端数据库中安装与源端数据库相同版本的GI软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源;
磁盘组新建模块,用于在目标端数据库中新建一ASM的磁盘组,存放所述GI软件的相关信息;
内容存储模块,用于在目标端数据库中新建OCR和表决盘,并将OCR和表决盘存放在新建的ASM的磁盘组中;所述ASM的磁盘组中存放的内容被配置为不能够迁移,能够新建;
日志及文件调整模块,用于将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;所述快速复制磁盘组包括待进行数据迁移的源端数据库磁盘;
OCR和表决盘调整模块,用于将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在所述快速复制磁盘组中;
数据库静止模块,用于停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS,使源端数据库和目标端数据库保持静止;
磁盘确定单元,用于在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
快速拷贝单元,用于建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
磁盘挂起单元,用于将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
5.根据权利要求4所述的数据库海量数据的迁移装置,其特征在于,所述快速拷贝单元,包括:
对应关系建立模块,用于建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系;
快速拷贝模块,用于启动并采用快速拷贝功能的复制技术,根据所述对应关系进行数据的快速拷贝。
6.根据权利要求5所述的数据库海量数据的迁移装置,其特征在于,所述磁盘挂起单元,包括:
磁盘挂起模块,用于将目标端数据库中的集群件CRS启动,挂起目标端数据库磁盘;
信息注册模块,用于在目标端数据库中的集群件CRS中注册已经迁移的目标端数据库磁盘的数据库信息,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
7.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现以下步骤:
在目标端数据库中安装与源端数据库相同版本的GI软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源;
在目标端数据库中新建一ASM的磁盘组,存放所述GI软件的相关信息;
在目标端数据库中新建OCR和表决盘,并将OCR和表决盘存放在新建的ASM的磁盘组中;所述ASM的磁盘组中存放的内容被配置为不能够迁移,能够新建;
将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;所述快速复制磁盘组包括待进行数据迁移的源端数据库磁盘;
将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在所述快速复制磁盘组中;
停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS,使源端数据库和目标端数据库保持静止;
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
8.一种计算机设备,包括存储器、处理器及存储在存储上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现以下步骤:
在目标端数据库中安装与源端数据库相同版本的GI软件和数据库软件,且设置目标端数据库和源端数据库具有相同的网络资源;
在目标端数据库中新建一ASM的磁盘组,存放所述GI软件的相关信息;
在目标端数据库中新建OCR和表决盘,并将OCR和表决盘存放在新建的ASM的磁盘组中;所述ASM的磁盘组中存放的内容被配置为不能够迁移,能够新建;
将源端数据库中的归档日志、在线日志、控制文件、参数文件及数据文件的存放目录统一调整至快速复制磁盘组;所述快速复制磁盘组包括待进行数据迁移的源端数据库磁盘;
将源端数据库中的OCR和表决盘统一进行调整,使源端数据库中的OCR和表决盘不在所述快速复制磁盘组中;
停止源端数据库的相关应用,以及停止源端数据库和目标端数据库,并停止集群件CRS,使源端数据库和目标端数据库保持静止;
在源端数据库确定待进行数据迁移的源端数据库磁盘,在目标端数据库确定目标端数据库磁盘;所述源端数据库磁盘和目标端数据库磁盘的磁盘序号和磁盘大小相同;
建立所述源端数据库磁盘和所述目标端数据库磁盘之间的对应关系,并启动快速拷贝技术,采用所述对应关系进行数据的快速拷贝;
将目标端数据库磁盘挂起,数据迁移完毕,使得所述目标端数据库磁盘能够被进行读写访问。
CN201810971917.4A 2018-08-24 2018-08-24 一种数据库海量数据的迁移方法及装置 Active CN109254960B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810971917.4A CN109254960B (zh) 2018-08-24 2018-08-24 一种数据库海量数据的迁移方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810971917.4A CN109254960B (zh) 2018-08-24 2018-08-24 一种数据库海量数据的迁移方法及装置

Publications (2)

Publication Number Publication Date
CN109254960A CN109254960A (zh) 2019-01-22
CN109254960B true CN109254960B (zh) 2020-11-13

Family

ID=65049546

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810971917.4A Active CN109254960B (zh) 2018-08-24 2018-08-24 一种数据库海量数据的迁移方法及装置

Country Status (1)

Country Link
CN (1) CN109254960B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111522798B (zh) * 2020-06-18 2020-10-23 腾讯科技(深圳)有限公司 数据同步方法、装置、设备及可读存储介质
CN112256670A (zh) * 2020-10-10 2021-01-22 中国农业银行股份有限公司河北省分行 数据迁移方法、终端设备及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104281704A (zh) * 2014-10-22 2015-01-14 新华瑞德(北京)网络科技有限公司 数据库数据拷贝方法和装置
CN105359146A (zh) * 2013-07-09 2016-02-24 甲骨文国际公司 自动数据库迁移架构
CN105718570A (zh) * 2016-01-20 2016-06-29 北京京东尚科信息技术有限公司 用于数据库的数据迁移方法和装置

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102955845B (zh) * 2012-10-23 2015-11-25 北京亿赞普网络技术有限公司 数据访问方法、装置与分布式数据库系统
US10055300B2 (en) * 2015-01-12 2018-08-21 Actifio, Inc. Disk group based backup
CN106959950B (zh) * 2016-01-08 2021-02-26 北京京东尚科信息技术有限公司 应用集群之间迁移数据的方法和装置
CN107133244B (zh) * 2016-02-29 2020-04-28 阿里巴巴集团控股有限公司 一种数据库迁移的测试方法和装置
CN108132949B (zh) * 2016-12-01 2021-02-12 腾讯科技(深圳)有限公司 数据库集群中数据迁移的方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105359146A (zh) * 2013-07-09 2016-02-24 甲骨文国际公司 自动数据库迁移架构
CN104281704A (zh) * 2014-10-22 2015-01-14 新华瑞德(北京)网络科技有限公司 数据库数据拷贝方法和装置
CN105718570A (zh) * 2016-01-20 2016-06-29 北京京东尚科信息技术有限公司 用于数据库的数据迁移方法和装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
企业级核心应用跨平台无缝迁移;王启明,王健,杨小林;《铁路计算机应用》;20170131;第26卷(第1期);第43-46页 *

Also Published As

Publication number Publication date
CN109254960A (zh) 2019-01-22

Similar Documents

Publication Publication Date Title
US9417976B2 (en) Preventing migration of a virtual machine from affecting disaster recovery of replica
US9400611B1 (en) Data migration in cluster environment using host copy and changed block tracking
US9092500B2 (en) Utilizing snapshots for access to databases and other applications
AU2012273366B2 (en) Managing replicated virtual storage at recovery sites
CN103970585B (zh) 创建虚拟机的方法及装置
US7606842B2 (en) Method of merging a clone file system with an original file system
US9529807B2 (en) Creating host-level application-consistent backups of virtual machines
US8738883B2 (en) Snapshot creation from block lists
US8060703B1 (en) Techniques for allocating/reducing storage required for one or more virtual machines
JP2009506399A (ja) バックアップイメージを仮想化するシステム及び方法
CN104133690B (zh) 从一个操作系统级到已更新操作系统级的动态应用迁移
US10809922B2 (en) Providing data protection to destination storage objects on remote arrays in response to assignment of data protection to corresponding source storage objects on local arrays
US20190114231A1 (en) Image restore from incremental backup
US11886902B2 (en) Physical-to-virtual migration method and apparatus, and storage medium
US11704335B2 (en) Data synchronization in a data analysis system
EP3796174A1 (en) Restoring a database using a fully hydrated backup
US20200341659A1 (en) Write-once read-many compliant data storage cluster
CN109254960B (zh) 一种数据库海量数据的迁移方法及装置
US11307934B1 (en) Virtual backup and restore of virtual machines
CN111338751B (zh) 同ceph集群中数据跨pool迁移方法及装置
CN115658391A (zh) 基于QianBase MPP数据库的WAL机制的备份恢复方法
CN114443356A (zh) 一种容器集群的处理方法及系统
CN111400098A (zh) 一种副本管理方法、装置、电子设备及存储介质
US20140136480A1 (en) Fast replication of an enterprise system to a remote computing environment
NZ714756B2 (en) Managing replicated virtual storage at recovery sites

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant