CN115454928A - 系统在线迁移方法、系统在线迁移装置、设备及介质 - Google Patents
系统在线迁移方法、系统在线迁移装置、设备及介质 Download PDFInfo
- Publication number
- CN115454928A CN115454928A CN202210911261.3A CN202210911261A CN115454928A CN 115454928 A CN115454928 A CN 115454928A CN 202210911261 A CN202210911261 A CN 202210911261A CN 115454928 A CN115454928 A CN 115454928A
- Authority
- CN
- China
- Prior art keywords
- target
- destination
- file
- service
- source
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/119—Details of migration of file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/178—Techniques for file synchronisation in file systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/214—Database migration support
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0673—Single storage device
- G06F3/0674—Disk device
- G06F3/0676—Magnetic disk device
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Human Computer Interaction (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种系统在线迁移方法、系统在线迁移装置、设备及介质。系统在线迁移方法包括:响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端。对源端数据库在迁移过程中增量产生的脏数据文件生成快照,并将快照同步迁移至目的端,以更新目的端接收到的目标数据文件。定时检测目的端接收到的目标文件与源端的目标文件是否一致,若目的端接收到的目标文件与源端的目标文件一致,则将目标服务切换至目的端提供。通过本发明,能够保障在迁移过程,目的端接收到的目标数据文件能够与源端的目标数据文件保持一致。
Description
技术领域
本发明涉及计算机技术领域,具体涉及一种系统在线迁移方法、系统在线迁移装置、设备及介质。
背景技术
相关技术中,将源端系统在线迁移至目的端时,需要预先对源端执行停服处理,进而采用线下转移的方式进行系统在线迁移。但采用该种方式进行迁移,容易导致业务中断时间过长,损失成本高。
发明内容
因此,本发明要解决的技术问题在于克服现有技术中系统在线迁移成本高的缺陷,从而提供一种系统在线迁移方法、系统在线迁移装置、设备及介质。
根据本发明的第一方面,提供一种系统在线迁移方法,所述方法包括:
响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端,其中,所述目标文件包括目标系统的系统文件和目标数据文件,所述目标系统为提供目标服务的系统,所述目标数据文件为所述源端提供所述目标服务产生的数据文件;
定时检测所述目的端接收到的目标文件与所述源端的目标文件是否一致,若所述目的端接收到的目标文件与所述源端的目标文件一致,则对所述源端的数据库执行锁表处理,以将所述数据库在迁移过程中产生的脏数据刷新至所述源端的磁盘内,得到脏数据文件;
生成所述脏数据文件的快照,并将所述快照迁移至所述目的端,以更新所述数据文件;
将所述目标服务切换至所述目的端提供。
在该方式中,能够在源端将目标文件在线迁移的过程中,将源端数据库的脏数据文件通过生产快照的方式一并迁移至目的端,以保障在迁移过程,目的端接收到的目标数据文件能够与源端的目标数据文件保持一致,进而当目标文件迁移结束后,便可以由目的端提供目标服务,从而有助于保障在迁移过程中不中断目标服务的业务,有利于减低系统在线迁移的损失成本,提高迁移效率。
结合第一方面,在第一方面的第一实施例中,所述方法还包括:
将所述源端在迁移过程中产生的增量数据同步迁移至所述目的端。
结合第一方面或第一方面的第一实施例,在第一方面的第二实施例中,所述方法还包括:
若在指定时长内未检测到所述目的端接收到的目标文件与所述源端的目标文件一致,且所述目的端接收到的目标文件与所述源端的目标文件之间的类比差异值小于指定阈值,则基于所述目标服务的应用服务状态,将所述目标服务切换至所述目的端提供。
在该方式中,使确定将目标服务切换至目的端提供的判断条件更灵活,进而有助于避免系统在线迁移时间过长,导致过度占用迁移资源的情况发生。
结合第一方面的第二实施例,在第一方面的第三实施例中,所述基于所述目标服务的应用服务状态,将所述目标服务切换至所述目的端提供,包括:
缓存所述源端在目标时间内的业务流量的副本;
验证所述目标系统在所述目标时间内的应用服务状态;
若所述应用服务状态正常,则将所述业务流量的副本重放至所述目的端,以使所述目的端处理所述业务请求;
停止所述源端提供所述目标服务,并由所述目的端提供所述目标服务。
在该方式中,通过引入业务流量的副本缓存技术来弥补弥补目的端在验证/测试业务运行状态过程中缺失的数据,能够在保证系统数据一致性的前提下,迁移期间业务不中断,目标服务始终可用。
结合第一方面的第三实施例,在第一方面的第四实施例中,所述缓存所述源端在目标时间内的业务流量的副本,包括:
通过预置的消息列队缓存所述源端在目标时间内的业务流量的副本。
结合第一方面,在第一方面的第五实施例中,所述方法还包括:
若在同步传输的过程中接收到异常告警,则识别所述异常告警中是否包括指定异常关键字;
若所述异常告警中包括所述指定异常关键字,则基于预置的多个异常关键字与修复操作之间的对应关系,确定并执行所述指定异常关键字对应的指定修复操作,以修复异常。
在该方式中,能够在迁移过程中,支持异常修复等功能,进而提高系统在线迁移的自动化程度,从而有助于降低人工成本。
结合第一方面,在第一方面的第六实施例中,在将目标文件从处于运行状态的源端内迁移至目的端之前,所述方法还包括:
检测所述目的端的配置信息,以确定所述源端能够将所述目标文件迁移至所述目的端。
在该方式中,预先在目标文件迁移之前检测目的端的配置信息,有助于减低因目的端自身的问题而导致迁移失败的情况发生,进而有助于避免无效迁移的情况发生,从而提高迁移效率和迁移有效性。
根据本发明的第二方面,提供一种系统在线迁移装置,所述装置包括:
第一传输单元,用于响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端,其中,所述目标文件包括目标系统的系统文件和目标数据文件,所述目标系统为提供目标服务的系统,所述目标数据文件为所述源端提供所述目标服务产生的数据文件;
数据处理单元,用于定时检测所述目的端接收到的目标文件与所述源端的目标文件是否一致,若所述目的端接收到的目标文件与所述源端的目标文件一致,则对所述源端的数据库执行锁表处理,以将所述数据库在迁移过程中产生的脏数据刷新至所述源端的磁盘内,得到脏数据文件;
生成单元,用于生成所述脏数据文件的快照,并将所述快照迁移至所述目的端,以更新所述数据文件;
第一切换单元,用于将所述目标服务切换至所述目的端提供。
根据第三方面,本发明实施方式还提供一种计算机设备,包括存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行第一方面及其可选实施方式中任一项的系统在线迁移方法。
根据第四方面,本发明实施方式还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使所述计算机执行第一方面及其可选实施方式中任一项的系统在线迁移方法。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据一示例性实施例提出的一种系统在线迁移方法的流程图。
图2是根据一示例性实施例提出的另一种系统在线迁移方法的流程图。
图3是根据一示例性实施例提出的一种重放业务流量的副本的控制流程示意图。
图4是根据一示例性实施例提出的另一种系统在线迁移方法的流程图。
图5是根据一示例性实施例提出的又一种系统在线迁移方法的流程图。
图6是根据一示例性实施例提出的又一种系统在线迁移方法的流程图。
图7是根据一示例性实施例提出的一种系统在线迁移的系统结构示意图。
图8是根据一示例性实施例提出的一种系统在线迁移装置的结构框图。
图9是根据一示例性实施例提出的一种计算机设备的硬件结构示意图。
具体实施方式
下面将结合附图对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
相关技术中,将源端系统在线迁移至目的端时,需要预先对源端执行停服处理,进而采用线下转移的方式进行系统在线迁移。但采用该种方式进行迁移,容易导致业务中断时间过长,损失成本高。
为解决上述问题,本发明实施例中提供一种系统在线迁移方法,用于计算机设备中,需要说明的是,其执行主体可以是系统在线迁移装置,该装置可以通过软件、硬件或者软硬件结合的方式实现成为计算机设备的部分或者全部,其中,该计算机设备可以是终端或客户端或服务器,服务器可以是一台服务器,也可以为由多台服务器组成的服务器集群,本申请实施例中的终端可以是智能手机、个人电脑、平板电脑、可穿戴设备以及智能机器人等其他智能硬件设备。下述方法实施例中,均以执行主体是计算机设备为例来进行说明。
本实施例中的计算机设备可以理解为是管控平台,用于将目标文件从处于运行状态的源端内迁移至目的端,以实现系统在线迁移、割接或者升级等应用场景。例如:企业应用上云、硬件设备更新换代等应用场景。
根据本发明提供的系统在线迁移方法,能够在源端将目标文件在线迁移的过程中,将源端增量产生的脏数据文件通过生产快照的方式一并迁移至目的端,以保障在迁移过程,目的端接收到的目标数据文件能够与源端的目标数据文件保持一致,进而当目标文件迁移结束后,目的端可以根据接收到的目标文件提供目标服务,从而有助于保障在迁移过程中目标服务不中断业务,减低系统在线迁移的损失成本。
图1是根据一示例性实施例提出的一种系统在线迁移方法的流程图。如图1所示,系统在线迁移方法包括如下步骤S101至步骤S103。
在步骤S101中,响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端。
在本发明实施例中,系统在线迁移指令可以理解为是用于将目标系统从源端迁移至目的端的远程调用指令。目标系统为待迁移的系统,用于提供目标服务。目标文件中包括目标系统的系统文件和目标数据文件。目标数据文件为源端基于目标系统提供目标服务所产生的数据文件。
在一例中,目标系统的系统文件存储在源端的系统盘中。在迁移目标系统的系统文件时,可以采用将该系统盘同步至目的端的方式实现系统文件的迁移。为使目的端能够根据接收到的系统文件运行目标系统,则由管理平台将目的端重启以激活目标系统。在另一例中,目标数据文件存储在源端的数据盘中。在迁移目标数据文件时,可以采用将该数据盘同步至目的端的方式实现目标数据文件的迁移。
在步骤S102中,定时检测目的端接收到的目标文件与源端的目标文件是否一致,若目的端接收到的目标文件与源端的目标文件一致,则对源端的数据库执行锁表处理,以将数据库在迁移过程中产生的脏数据刷新至源端的磁盘内,得到脏数据文件。
在本发明实施例中,定时检测目的端接收到的目标文件与源端的目标文件是否一致,以便能够及时确定目标文件是否迁移完成。其中,源端的目标文件包括系统文件、目标数据文件。若目的端接收到的目标文件与源端的目标文件一致,则表征完成系统在线迁移,目的端可以根据接收到的目标文件运行目标系统并提供目标服务。
由于目标系统在迁移过程中一直处于运行状态,在源端上持续为用户提供目标服务。因此,在迁移过程中,随着源端不断提供的目标服务,源端的数据库也会相应增量在该时段产生脏数据。为避免在迁移的过程中目标系统的部分系统数据变量发生改变,则对源端的数据库执行锁表处理,以将数据库在迁移过程中产生的脏数据刷新至源端的磁盘内,得到脏数据文件。
在一例中,可以采用读锁执行锁表处理。在另一例中,为避免影响目标服务在远端上的正常运行,锁表时间不易过长,具体时间长度可以根据实际需求进行设定,在本申请中不进行限定。
在步骤S103中,生成脏数据文件的快照,并将快照迁移至目的端,以更新数据文件。
在本发明实施例中,生成脏数据文件的快照,并将快照同步迁移至目的端,以更新目的端接收到的目标数据文件,进而保障目的端接收到的数据文件能够与源端的数据文件一致,从而有利于保障目标服务在目的端上的运行与源端上一致。
在步骤S104中,将目标服务切换至目的端提供。
通过上述实施例,能够在源端将目标文件在线迁移的过程中,将源端增量产生的脏数据文件通过生产快照的方式一并迁移至目的端,以保障在迁移过程,目的端接收到的目标数据文件能够与源端的目标数据文件保持一致,进而当目标文件迁移结束后,便可以由目的端提供目标服务,从而有助于保障在迁移过程中不中断目标服务的业务,有利于减低系统在线迁移的损失成本,提高迁移效率。
在一实施例中,由于源端在迁移过程中一直处于运行状态,持续为用户提供目标服务。因此,在迁移过程中,随着源端不断提供的目标服务,会产生增量数据。为保障目的端接收到的目标文件能够与源端的目标文件一致,则将源端在迁移过程中产生的增量数据同步迁移至目的端。
图2是根据一示例性实施例提出的另一种系统在线迁移方法的流程图。如图2所示,系统在线迁移方法包括如下步骤。
在步骤S201中,响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端。
在步骤S202中,定时检测目的端接收到的目标文件与源端的目标文件是否一致。
在步骤S203中,若目的端接收到的目标文件与源端的目标文件一致,则对源端的数据库执行锁表处理,以将数据库在迁移过程中产生的脏数据刷新至源端的磁盘内,得到脏数据文件。
在步骤S204中,生成脏数据文件的快照,并将快照迁移至目的端,以更新数据文件。
在步骤S205中,将目标服务切换至目的端提供。
在步骤S206中,若在指定时长内未检测到目的端接收到的目标文件与源端的目标文件一致,且目的端接收到的目标文件与源端的目标文件之间的类比差异值小于指定阈值,则基于目标服务的应用服务状态,将目标服务切换至目的端提供。
在本发明实施例中,指定时长可以理解为是完成系统在线迁移的最大时长。指定阈值可以理解为是允许目的端接收到的目标文件与源端的目标文件之间存在差异的最大类比差异值。若在指定时长内未检测到目的端接收到的目标文件与源端的目标文件一致,且目的端接收到的目标文件与源端的目标文件之间的类比差异值小于指定阈值(例如:0.1%),则表征在迁移过程中,快照可能由于网络延时等原因未能实时同步至目的端内,进而导致目的端的目标文件与源端的目标文件不一致。但在该情况下,目的端接收到的目标文件与源端的目标文件之间的差异是可允许的。因此,可以基于目标服务的应用服务状态,将目标服务切换至目的端提供,进而避免系统在线迁移时间过长,导致过度占用迁移资源的情况发生。
通过上述实施例,使确定将目标服务切换至目的端提供的判断条件更灵活,进而有助于避免系统在线迁移时间过长,导致过度占用迁移资源的情况发生。
在一实施例中,基于目标服务的应用服务状态,将目标服务切换至目的端提供的具体过程如下:缓存源端在目标时间内的业务流量的副本。其中,业务请求的执行依赖目标服务。该业务请求可以理解为由于网络延迟等原因可能丢失的请求。为确定目的端的目标文件与源端的目标文件不一致的原因,是否与目标服务的应用服务状态有关,则验证目标系统在目标时间内的应用服务状态。若应用服务状态正常,则表征目的端的目标文件与源端的目标文件不一致的原因与目标服务的应用服务状态无关,进而将业务流量的副本重放至目的端,以使目的端能够处理该业务请求,从而使目标系统在目的端上的运行和在源端上的运行完全同步。由于目标服务在源端处于运行状态,增量处理存在一定的延迟和误差,进而通过引入业务流量的副本缓存技术来弥补弥补目的端在验证/测试业务运行状态过程中缺失的数据,能够在保证系统数据一致性的前提下,迁移期间业务不中断,目标服务始终可用。
在一实施场景中,如图3所示,可以将源端在目标时间内处理业务请求的业务流量的副本缓存至管控平台的预置的消息列队中,进而当目的端从该消息列队中进行消费时,便可以将缓存的业务流量的副本转换成正常的流量请求。其中,源端的设备可以是源端服务器,目的端的设备可以目的端服务器。在另一例中,可以基于开源的tcpcopy组件(一种流量复制工具)将源端在目标时间内处理业务请求的业务流量的副本缓存至管控平台的预置的消息列队中。
在另一实施场景中,若用户发送业务请求需要目的端服务器和第三方的辅助服务器共同执行,则可以由目的端服务器将待执行的业务流量的副本发送至辅助服务器。
图4是根据一示例性实施例提出的另一种系统在线迁移方法的流程图。如图4所示,系统在线迁移方法包括如下步骤。
在步骤S401中,响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端。
在步骤S402中,若在同步传输的过程中接收到异常告警,则识别异常告警中是否包括指定异常关键字。
在本发明实施例中,为提高系统在线迁移的有效性,则预先建立异常关键字与修复操作之间的对应关系,以便当检测到包含异常关键字的异常告警时,能够根据对应的修复操作修复异常。
若在同步传输的过程中接收到异常告警,则识别异常告警中是否包括指定异常关键字,以确定是否可以自动修复。
在步骤S403中,若异常告警中包括指定异常关键字,则基于预置的多个异常关键字与修复操作之间的对应关系,确定并执行指定异常关键字对应的指定修复操作,以修复异常。
在本发明实施例中,通过识别,若确定异常告警中包括指定异常关键字,基于预置的多个异常关键字与修复操作之间的对应关系,确定并执行指定异常关键字对应的指定修复操作,以修复异常。
在一示例中,在基于预置的多个异常关键字与修复操作之间的对应关系,确定指定异常关键字对应的指定修复操作之后,可以通过界面提示或者提示音等方式告知在迁移过程中存在异常,且可以根据指定修复操作对其进行一键处理,进而实现异常的自动修复。
在一实施例中,若异常告警中不包括指定异常关键字,则对该异常进行自动检测,给出修复意见,并通过模拟终端进行人工修复。在一例中,模拟终端可以基于预置的白名单列表对检测到的异常进行问题定位并处理,以防止误操作的情况出现。
在步骤S404中,定时检测目的端接收到的目标文件与源端的目标文件是否一致,若目的端接收到的目标文件与源端的目标文件一致,则对源端的数据库执行锁表处理,以将数据库在迁移过程中产生的脏数据刷新至源端的磁盘内,得到脏数据文件。
在步骤S405中,生成脏数据文件的快照,并将快照迁移至目的端,以更新数据文件。
在步骤S406中,将目标服务切换至目的端提供。
通过上述实施例,能够在迁移过程中,支持异常修复等功能,进而提高系统在线迁移的自动化程度,从而有助于降低人工成本。
在一实施例中,若该异常需要人工修复,则管控平台可以在检测到该异常修复完成后,重新将目标文件迁移至目的端,进而有助于提高系统在线迁移的自动化程度。
在另一实施例中,可以根据异常类型判断是否需要重新迁移目标文件。例如:若异常类型为因网络不稳定而导致的传输失败,则当网络恢复正常之后重新迁移。若异常类型为目的端磁盘空间不足而导致的传输失败,则采用告警的方式,通过人工干预解决异常,进而当异常修复完成后重新迁移。
图5是根据一示例性实施例提出的又一种系统在线迁移方法的流程图。如图5所示,系统在线迁移方法包括如下步骤。
在步骤S501中,响应于接收到的系统在线迁移指令,检测目的端的配置信息,以确定源端能够将目标文件迁移至目的端。
在本发明实施例中,为避免无效迁移的情况发生,则在进行系统在线迁移之前,先对目的端的配置信息进行检测,以判断目的端是否可以接收源端传输的目标文件。其中,配置信息可以至少包括网络连通状态、磁盘空间等信息。例如:通过检测目的端的网络连通状态,可以判断源端与目的端之间的网络连接状态是否稳定。通过检测目的端的磁盘空间信息,可以预先确定目的端磁盘剩余空间是否可以将目标文件完整存储。
若目的端的配置信息通过检测,则可以确定源端能够将目标文件迁移至目的端。
在步骤S502中,将目标文件从处于运行状态的源端内迁移至目的端。
在步骤S503中,定时检测目的端接收到的目标文件与源端的目标文件是否一致,若目的端接收到的目标文件与源端的目标文件一致,则对源端的数据库执行锁表处理,以将数据库在迁移过程中产生的脏数据刷新至源端的磁盘内,得到脏数据文件。
在步骤S504中,生成脏数据文件的快照,并将快照迁移至目的端,以更新数据文件。
在步骤S505中,将目标服务切换至目的端提供。
通过上述实施例,预先在目标文件迁移之前检测目的端的配置信息,有助于减低因目的端自身的问题而导致迁移失败的情况发生,进而有助于避免无效迁移的情况发生,从而提高迁移效率和迁移有效性。
在一实施场景中,迁移过程可以如图6所示。图6是根据一示例性实施例提出的又一种系统在线迁移方法的流程图。
在步骤S601中,接收系统在线迁移指令。
在步骤S602中,检测目的端的配置信息,以确定源端能够将目标文件迁移至目的端。
在步骤S603中,将存储在源端系统盘中的目标系统的系统文件迁移到目的端,并重启目的端,以在目的端上激活目标系统。
在步骤S604中,将存储在源端数据盘中的目标数据文件迁移到目的端。
在步骤S605中,将源端在迁移过程中产生的增量数据同步迁移至目的端。
在步骤S606中,定时检测目的端接收到的目标文件与源端的目标文件之间的类比差异值是否小于指定阈值。
在步骤S607中,若目的端接收到的目标文件与源端的目标文件一致,则对源端的数据库执行锁表处理,以将数据库在迁移过程中产生的脏数据刷新至源端的磁盘内,得到脏数据文件。
在步骤S608中,生成脏数据文件的快照,并将快照迁移至目的端,以更新数据文件。
在步骤S609中,将目标服务切换至目的端提供。
在步骤S610中,若目的端接收到的目标文件与源端的目标文件之间的类比差异值小于指定阈值,则缓存源端在目标时间内的业务流量的副本。
在步骤S611中,验证目标系统在目标时间内的应用服务状态是否正常。
在步骤S612中,若应用服务状态正常,停止源端提供目标服务,并由目的端提供目标服务。
在另一实施场景中,基于相同发明构思,本发明还提供一种系统在线迁移的系统。图7是根据一示例性实施例提出的一种系统在线迁移的系统结构示意图。如图7所示,在该系统中包括管控平台、源端和目的端。其中,管控平台用于控制源端将目标文件迁移至目的端中,以实现目的系统的切换,进而完成系统在线迁移,以使在不中断目标服务的情况下,能够实现目标文件的热备份。其中,管控平台可以通过代理(Agent)程序监控和管理系统在线迁移的全过程。
Agent程序包括迁移Agent程序和流控Agent程序。其中,迁移Agent程序用于在源端制作目标系统的目标文件,并将其迁移至目的端。还用于对源端在迁移过程中数据库增量产生的脏数据文件生成快照,并将快照同步迁移至目的端中,以更新目的端接收到的目标数据文件。以及在目的端接收目标文件、在目的端激活目标系统以及接收快照,以保障源端和目的端的数据一致性。
流控Agent程序用于控制业务流量的副本,包括执行缓存和重放等操作。
通过上述实施例,通过采用磁盘快照技术能够解决物理热备份下数据库的一致性问题,并将可能丢失的用户操作以流量方式缓存起来,等到源系统所有业务正式切换到目的系统时,再将缓存的流量释放到目的系统,使新老系统可以完全同步。另外,通过管控平台统一系统在线迁移流程,并支持失败重传、异常修复等功能,自动化程度高,且有助于大大降低人力成本。
基于相同发明构思,本发明还提供一种系统在线迁移装置。
图8是根据一示例性实施例提出的一种系统在线迁移装置的结构框图。如图8所示,系统在线迁移装置包括第一传输单元801、数据处理单元802生成单元803和第一切换单元804。
第一传输单元801,用于响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端,其中,目标文件为用于支持提供目标服务的系统文件。
数据处理单元802,用于定时检测目的端接收到的目标文件与源端的目标文件是否一致,若目的端接收到的目标文件与源端的目标文件一致,则对源端的数据库执行锁表处理,以将数据库在迁移过程中产生的脏数据刷新至源端的磁盘内,得到脏数据文件。
生成单元803,用于生成脏数据文件的快照,并将快照迁移至目的端,以更新数据文件。
第一切换单元804,用于将目标服务切换至目的端提供。
在一实施例中,装置还包括:第二传输单元,用于将源端在迁移过程中产生的增量数据同步迁移至目的端。
在另一实施例中,装置还包括:第二切换单元,用于若在指定时长内未检测到目的端接收到的目标文件与源端的目标文件一致,且目的端接收到的目标文件与源端的目标文件之间的类比差异值小于指定阈值,则基于目标服务的应用服务状态,将目标服务切换至目的端提供。
在又一实施例中,第二切换单元包括:缓存单元,用于缓存源端在目标时间内的业务流量的副本。状态验证单元,用于验证目标系统在目标时间内的应用服务状态。重放单元,用于若应用服务状态正常,则将业务流量的副本重放至目的端,以使目的端处理业务请求。第二切换子单元,用于停止源端提供目标服务,并由目的端提供目标服务。
在又一实施例中,缓存单元包括:缓存子单元,用于通过预置的消息列队缓存源端在目标时间内的业务流量的副本。
在又一实施例中,装置还包括:识别单元,用于若在同步传输的过程中接收到异常告警,则识别异常告警中是否包括指定异常关键字。修复单元,用于若异常告警中包括指定异常关键字,则基于预置的多个异常关键字与修复操作之间的对应关系,确定并执行指定异常关键字对应的指定修复操作,以修复异常。
在又一实施例中,在将目标文件从处于运行状态的源端内迁移至目的端中之前,装置还包括:信息检测单元,用于检测目的端的配置信息,以确定源端能够将目标文件迁移至目的端。
上述系统在线迁移装置的具体限定以及有益效果可以参见上文中对于系统在线迁移方法的限定,在此不再赘述。上述各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
图9是根据一示例性实施例提出的一种计算机设备的硬件结构示意图。如图9所示,该设备包括一个或多个处理器910以及存储器920,存储器920包括持久内存、易失内存和硬盘,图9中以一个处理器910为例。该设备还可以包括:输入装置930和输出装置940。
处理器910、存储器920、输入装置930和输出装置940可以通过总线或者其他方式连接,图9中以通过总线连接为例。
处理器910可以为中央处理器(Central Processing Unit,CPU)。处理器910还可以为其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片,或者上述各类芯片的组合。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器920作为一种非暂态计算机可读存储介质,包括持久内存、易失内存和硬盘,可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块,如本申请实施例中的业务管理方法对应的程序指令/模块。处理器910通过运行存储在存储器920中的非暂态软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述任意一种系统在线迁移方法。
存储器920可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据、需要使用的数据等。此外,存储器920可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中,存储器920可选包括相对于处理器910远程设置的存储器,这些远程存储器可以通过网络连接至数据处理装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置930可接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键信号输入。输出装置940可包括显示屏等显示设备。
一个或者多个模块存储在存储器920中,当被一个或者多个处理器910执行时,执行如图1-图7所示的方法。
上述产品可执行本发明实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,具体可参见如图1-图7所示的实施例中的相关描述。
本发明实施例还提供了一种非暂态计算机存储介质,计算机存储介质存储有计算机可执行指令,该计算机可执行指令可执行上述任意方法实施例中的认证方法。其中,存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)、随机存储记忆体(RandomAccess Memory,RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive,缩写:HDD)或固态硬盘(Solid-State Drive,SSD)等;存储介质还可以包括上述种类的存储器的组合。
显然,上述实施例仅仅是为清楚地说明所作的举例,而并非对实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引伸出的显而易见的变化或变动仍处于本发明创造的保护范围之中。
Claims (10)
1.一种系统在线迁移方法,其特征在于,所述方法包括:
响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端,其中,所述目标文件包括目标系统的系统文件和目标数据文件,所述目标系统为提供目标服务的系统,所述目标数据文件为所述源端提供所述目标服务产生的数据文件;
定时检测所述目的端接收到的目标文件与所述源端的目标文件是否一致,若所述目的端接收到的目标文件与所述源端的目标文件一致,则对所述源端的数据库执行锁表处理,以将所述数据库在迁移过程中产生的脏数据刷新至所述源端的磁盘内,得到脏数据文件;
生成所述脏数据文件的快照,并将所述快照迁移至所述目的端,以更新所述数据文件;
将所述目标服务切换至所述目的端提供。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
将所述源端在迁移过程中产生的增量数据同步迁移至所述目的端。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:
若在指定时长内未检测到所述目的端接收到的目标文件与所述源端的目标文件一致,且所述目的端接收到的目标文件与所述源端的目标文件之间的类比差异值小于指定阈值,则基于所述目标服务的应用服务状态,将所述目标服务切换至所述目的端提供。
4.根据权利要求3所述的方法,其特征在于,所述基于所述目标服务的应用服务状态,将所述目标服务切换至所述目的端提供,包括:
缓存所述源端在目标时间内的业务流量的副本;
验证所述目标系统在所述目标时间内的应用服务状态;
若所述应用服务状态正常,则将所述业务流量的副本重放至所述目的端,以使所述目的端处理所述业务请求;
停止所述源端提供所述目标服务,并由所述目的端提供所述目标服务。
5.根据权利要求4所述的方法,其特征在于,所述缓存所述源端在目标时间内的业务流量的副本,包括:
通过预置的消息列队缓存所述源端在目标时间内的业务流量的副本。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
若在同步传输的过程中接收到异常告警,则识别所述异常告警中是否包括指定异常关键字;
若所述异常告警中包括所述指定异常关键字,则基于预置的多个异常关键字与修复操作之间的对应关系,确定并执行所述指定异常关键字对应的指定修复操作,以修复异常。
7.根据权利要求1所述的方法,其特征在于,在将目标文件从处于运行状态的源端内迁移至目的端之前,所述方法还包括:
检测所述目的端的配置信息,以确定所述源端能够将所述目标文件迁移至所述目的端。
8.一种系统在线迁移装置,其特征在于,所述装置包括:
第一传输单元,用于响应于接收到的系统在线迁移指令,将目标文件从处于运行状态的源端内迁移至目的端,其中,所述目标文件包括目标系统的系统文件和目标数据文件,所述目标系统为提供目标服务的系统,所述目标数据文件为所述源端提供所述目标服务产生的数据文件;
数据处理单元,用于定时检测所述目的端接收到的目标文件与所述源端的目标文件是否一致,若所述目的端接收到的目标文件与所述源端的目标文件一致,则对所述源端的数据库执行锁表处理,以将所述数据库在迁移过程中产生的脏数据刷新至所述源端的磁盘内,得到脏数据文件;
生成单元,用于生成所述脏数据文件的快照,并将所述快照迁移至所述目的端,以更新所述数据文件;
第一切换单元,用于将所述目标服务切换至所述目的端提供。
9.一种计算机设备,其特征在于,包括存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行权利要求1-7中任一项所述的系统在线迁移方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使所述计算机执行权利要求1-7中任一项所述的系统在线迁移方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210911261.3A CN115454928A (zh) | 2022-07-29 | 2022-07-29 | 系统在线迁移方法、系统在线迁移装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210911261.3A CN115454928A (zh) | 2022-07-29 | 2022-07-29 | 系统在线迁移方法、系统在线迁移装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115454928A true CN115454928A (zh) | 2022-12-09 |
Family
ID=84297051
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210911261.3A Pending CN115454928A (zh) | 2022-07-29 | 2022-07-29 | 系统在线迁移方法、系统在线迁移装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115454928A (zh) |
-
2022
- 2022-07-29 CN CN202210911261.3A patent/CN115454928A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5713056B2 (ja) | プロセス制御装置及びシステム並びにその更新方法 | |
US8856583B1 (en) | Failover operation on a replicated distributed database system while maintaining access invariance | |
CN106909411B (zh) | 一种文件更新方法及装置 | |
EP3285168A1 (en) | Disaster tolerance method and apparatus in active-active cluster system | |
KR20010072379A (ko) | 내고장성 컴퓨터 시스템 | |
WO2016045439A1 (zh) | 一种vnfm容灾保护的方法、装置和nfvo、存储介质 | |
CN111309524A (zh) | 分布式存储系统故障恢复方法、装置、终端及存储介质 | |
US20210089379A1 (en) | Computer system | |
CN112671613A (zh) | 联邦学习集群监控方法、装置、设备及介质 | |
JP4560074B2 (ja) | 仮想計算機システム及び同システムにおける仮想計算機復元方法 | |
CN105740049A (zh) | 一种控制方法及装置 | |
CN108733808B (zh) | 大数据软件系统切换方法、系统、终端设备及存储介质 | |
CN113612814B (zh) | 一种会话信息的筛选方法、装置、终端及存储介质 | |
CN113900863A (zh) | 一种对PostgreSQL服务故障自动转移的方法 | |
US20240054054A1 (en) | Data Backup Method and System, and Related Device | |
CN112069152A (zh) | 一种数据库集群升级方法、装置、设备以及存储介质 | |
CN110351122B (zh) | 容灾方法、装置、系统与电子设备 | |
CN108984602B (zh) | 一种数据库控制方法和数据库系统 | |
CN115454928A (zh) | 系统在线迁移方法、系统在线迁移装置、设备及介质 | |
CN103780433B (zh) | 自愈式虚拟资源配置管理数据架构 | |
CN112559248B (zh) | 预处理服务恢复方法、装置、设备及存储介质 | |
CN114691304A (zh) | 实现集群虚拟机高可用的方法和装置、设备和介质 | |
US9110850B2 (en) | Method for accelerating start up of a computerized system | |
JP5670935B2 (ja) | 分散データ管理システムおよびその動作方法 | |
CN114840054B (zh) | 时间同步方法、装置、系统、设备及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |