CN103914474A - 一种数据迁移方法及系统 - Google Patents

一种数据迁移方法及系统 Download PDF

Info

Publication number
CN103914474A
CN103914474A CN201310002047.7A CN201310002047A CN103914474A CN 103914474 A CN103914474 A CN 103914474A CN 201310002047 A CN201310002047 A CN 201310002047A CN 103914474 A CN103914474 A CN 103914474A
Authority
CN
China
Prior art keywords
data
write request
new system
old
new
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310002047.7A
Other languages
English (en)
Other versions
CN103914474B (zh
Inventor
周智昊
田明
刘里
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Tencent Cloud Computing Beijing Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201310002047.7A priority Critical patent/CN103914474B/zh
Priority to PCT/CN2013/089953 priority patent/WO2014106431A1/en
Priority to US14/296,877 priority patent/US9535793B2/en
Publication of CN103914474A publication Critical patent/CN103914474A/zh
Application granted granted Critical
Publication of CN103914474B publication Critical patent/CN103914474B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1415—Saving, restoring, recovering or retrying at system level
    • G06F11/1435—Saving, restoring, recovering or retrying at system level using file system or storage system metadata
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/214—Database migration support
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
    • G06F11/2064—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring while ensuring consistency
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2056—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant by mirroring
    • G06F11/2082—Data synchronisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/16—Error detection or correction of the data by redundancy in hardware
    • G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
    • G06F11/2053—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where persistent mass storage functionality or persistent mass storage control functionality is redundant
    • G06F11/2089—Redundant storage control functionality

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Library & Information Science (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明实施例涉及计算机技术领域，公开了一种数据迁移方法及系统，该数据源迁移方法包括：对旧系统数据进行切片，获得数据切片；将数据切片批量导入新系统；按照预先记录的写请求的序列号顺序，依次对新系统中的每一个写请求对应的数据进行重做；其中，上述预先记录的写请求是同时写入旧系统和新系统的。本发明实施例在无需对旧系统禁写的情况下，可以无缝的将旧系统数据导入新系统，而且通过重做技术可以将新系统的数据恢复到最新，可以实现用户完全无感知的后台数据迁移，并减小新旧系统数据导入的风险，简化运维操作。

Description

一种数据迁移方法及系统
技术领域
本发明涉及计算机技术领域，具体涉及一种数据迁移方法及系统。
背景技术
在用户生成内容（User Generated Content，UGC）业务（如微博）的新旧系统交替过程中，不可避免的会遇到数据迁移的问题，而如何将旧系统数据，在尽可能在不影响用户的情况下完整迁移到新系统，是一直以来亟需解决的难题。
现有技术中，常见的数据迁移方法是对旧系统禁写（即禁止用户写请求）之后，将旧系统数据依次导入新系统，再将用户写请求路由到新系统继续服务。然而，这种数据迁移方法最为粗暴，必须对旧系统禁写，并且禁写时长决于数据迁移时长，当数据迁移时长越大，对旧系统禁写时长也就越大，从而给用户写请求造成影响。
发明内容
本发明实施例所要解决的技术问题是提供一种数据迁移方法及系统，能够在无需对旧系统禁写的情况下，无缝的将旧系统数据导入新系统。
本发明实施例第一方面提供一种数据迁移方法，包括：
对旧系统数据进行切片，获得数据切片；
将所述数据切片批量导入新系统；
按照预先记录的同时写入所述旧系统和所述新系统的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做。
本发明实施例第二方面提供一种数据迁移系统，包括：
切片单元，用于对旧系统数据进行切片，获得数据切片；
导入单元，将所述数据切片批量导入新系统；
重做单元，用于按照预先记录的同时写入所述旧系统和所述新系统的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做。
本发明实施例中，对旧系统数据进行切片获得数据切片，并将数据切片批量导入完毕新系统后，可以按照预先记录的同时写入旧系统和新系统的写请求的序列号顺序，依次对新系统中的每一个写请求对应的数据进行重做。通过这种方式，本发明实施例在无需对旧系统禁写的情况下，可以无缝的将旧系统数据导入新系统，而且通过重做技术可以将新系统的数据恢复到最新。本发明实施例可以实现用户完全无感知的后台数据迁移，并减小新旧系统数据导入的风险，简化运维操作。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种数据迁移方法的流程图；
图2是本发明实施例提供的另一种数据迁移方法的流程图；
图3是本发明实施例提供的一种数据迁移系统的结构图；
图4是本发明实施例提供的另一种数据迁移系统的结构图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供了一种数据迁移方法及系统，能够在无需对旧系统禁写的情况下，无缝的将旧系统数据导入新系统。以下分别进行详细说明。
请参阅图1，图1是本发明实施例提供的一种数据迁移方法的流程图。其中，图1所描述的数据迁移方法不仅适用于UGC业务（如微博）的新旧系统之间的数据迁移，而且还适用于其它类型业务的新旧系统之间的数据迁移，本发明实施例不作具体限定。如图1所示，该数据迁移方法可以包括以下步骤。
101、对旧系统数据进行切片，获得数据切片。
本发明实施例中，数据切片可以简称“切片”，是指对旧系统某一时间点的数据，完整的制作一份文件镜像，用于新系统的数据导入和恢复。
102、将数据切片批量导入新系统。
本发明实施例中，可以通过数据迁移进程将数据切片批量导致新系统。
其中，数据迁移进程是指通过加载旧系统的数据切片，将旧系统的数据切片导入到新系统中的程序。
103、按照预先记录的写请求的序列号顺序，依次对新系统中的每一个写请求对应的数据进行重做；其中，预先记录的写请求是同时写入旧系统和新系统的。
本发明实施例中，写请求的序列号（sequence）是指为每个写请求分配的序列号，用于按照顺序对新系统的数据进行重做。
本发明实施例中，预先记录的写请求是指在新旧系统的数据迁移过程中记录的写请求，其中，在新旧系统的数据迁移过程中记录写请求可以有效减少后续重做数据量。当然，在不考虑减少后续重做数据量的情况下，也可以再在新旧系统的数据迁移过程之前就记录写请求，本发明实施例不作限定。
本发明实施例中，上述步骤103中按照预先记录的写请求的序列号顺序，依次对新系统中的每一个写请求对应的数据进行重做的方式具体可以包括以下步骤：
1）、按照预先记录的写请求的序列号顺序，依次分析每个写请求，获得该写请求包含的密钥key。
2）、确定新系统中匹配命中该写请求包含的密钥key的数据。
3）、根据写请求对新系统中匹配命中该写请求包含的密钥key的数据进行重做。
本发明实施例中，重做（又称redo）是一种对新系统重做“写请求”的流水，可以将新系统的数据恢复到最新。
图1所描述的数据迁移方法在无需对旧系统禁写的情况下，可以无缝的将旧系统数据导入新系统，而且通过重做技术可以将新系统的数据恢复到最新，以及可以实现用户完全无感知的后台数据迁移，并减小新旧系统数据导入的风险，简化运维操作。
请参阅图2，图2是本发明实施例提供的另一种数据迁移方法的流程图。同样，图2所描述的数据迁移方法不仅适用于UGC业务（如微博）的新旧系统之间的数据迁移，而且还适用于其它类型业务的新旧系统之间的数据迁移，本发明实施例不作具体限定。如图2所示，该数据迁移方法可以包括以下步骤。
201、搭建与旧系统、新系统链接的数据迁移层。
本发明实施例中，数据迁移层又称为“双写层”，用于在数据切片导入过程中，将用户输出的写请求按一定时序同时写入到新旧系统，便于进行新旧系统的数据迁移。
202、通过数据迁移层将用户输入的写请求同时写入旧系统和新系统，以及接收旧系统针对写请求返回的旧系统响应包以及新系统针对写请求返回的新系统响应包，并将旧系统响应包返回给用户。
203、控制新系统切换到数据迁移状态。
其中，数据迁移状态即是记录用户所有修改请求，并可以不按照顺序重做（redo）写流水的一种特殊运维状态。
204、对旧系统数据进行切片，获得数据切片，并通过数据迁移进程将数据切片批量导入新系统（直接覆盖）。
205、控制新系统切换至实时重做（redo）状态。
206、按照预先记录的同时写入旧系统和新系统的写请求的序列号顺序，依次对新系统中的每一个写请求对应的数据进行重做，直到所有数据重做到最新。
207、如果在新系统的数据重做过程中有对重做数据的再次写请求，则按照再次请求的序列号顺序依次对新系统中的每一个再次写请求对应的重做数据进行再次重做。
本发明实施例中，在新系统数据的redo过程中，如果有对redo数据的再次修改请求，可能会导致最终数据的错误。简单的处理方法是按照再次修改请求的序列号顺序依次对新系统中的每一个再次修改写请求对应的重做数据进行再次重做（一般再次重做的数据量很少）。不过从实际情况来看，发生这种再次修改请求并且引起数据不一致的情况低于0.01%，不对重做数据进行再次重做也能达到较好的数据一致性。
208、控制新系统退出重做状态，撤出数据迁移层，完成数据迁移。
在图2所描述的数据迁移方法中，为了保证用于导入旧系统数据切片的数据迁移进程和接收外部写请求的写进程不会产生冲突，新系统的写进程需要在数据迁移状态下不对导入的旧系统数据进行修改，但同时需要记录外部写请求的序列号，以便后面redo时可以补齐数据迁移过程中导入的数据。
图2所描述的数据迁移方法在无需对旧系统禁写的情况下，可以无缝的将旧系统数据导入新系统，而且通过重做技术可以将新系统的数据恢复到最新，以及可以实现用户完全无感知的后台数据迁移，并减小新旧系统数据导入的风险，简化运维操作。
请参阅图3，图3是本发明实施例提供的一种数据迁移系统的结构图。图3所描述的数据迁移系统不仅适用于UGC业务（如微博）的新旧系统之间的数据迁移，而且还适用于其它类型业务的新旧系统之间的数据迁移，本发明实施例不作具体限定。如图3所示，该数据迁移系统可以包括：
切片单元301，用于对旧系统数据进行切片，获得数据切片；
导入单元302，将所述数据切片批量导入新系统；
重做单元303，用于按照预先记录的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做；其中，所述预先记录的写请求是同时写入所述旧系统和所述新系统的。
本发明实施例中，导入单元302具体用于通过数据迁移进程将数据切片批量导致新系统。
本发明实施例中，重做单元303具体用于按照预先记录的写请求的序列号顺序，依次分析每个写请求，获得写请求包含的密钥key，确定新系统中匹配命中写请求包含的密钥key的数据；以及，根据写请求对新系统中匹配命中写请求包含的密钥key的数据进行重做。
请一并参阅图4，图4是本发明实施例提供的另一种数据迁移系统的结构图。其中，图4所描述的数据迁移系统是由图3所示的数据迁移系统进行优化得到的。与图3所示的数据迁移系统相比，图4所示的数据迁移系统还可以包括：
处理单元304，用于在切片单元301对旧系统数据进行切片，获得数据切片之前，搭建与旧系统、新系统链接的数据迁移层；通过数据迁移层将用户输入的写请求同时写入旧系统和新系统；以及，接收旧系统针对写请求返回的旧系统响应包以及新系统针对写请求返回的新系统响应包；将旧系统响应包返回给所述用户。
控制单元305，用于在导入单元302将数据切片批量导入新系统之后，以及在重做单元303按照预先记录的写请求的序列号顺序，依次对新系统中的每一个写请求对应的数据进行重做之前，控制新系统切换至实时重做状态。
本发明实施例中，重做单元303还用于在新系统的数据重做过程中有对重做数据的再次修改请求时，按照再次修改请求的序列号顺序依次对所述新系统中的每一个再次修改请求对应的重做数据进行再次重做。
图3、图4所描述的数据迁移系统在无需对旧系统禁写的情况下，可以无缝的将旧系统数据导入新系统，而且通过重做技术可以将新系统的数据恢复到最新，以及可以实现用户完全无感知的后台数据迁移，并减小新旧系统数据导入的风险，简化运维操作。
通过上述分析可知，本发明实施例提供的数据迁移方法及系统还具备以下优点：
1、后台的数据迁移动作，对用户完全无感知（全程不用对用户禁写，不影响旧系统服务）；
2、大幅降低用户对后台数据迁移的感知程度，出现异常时可以随时停止并重新迁移；
3、降低运维代价，不用在凌晨进行数据迁移，数据迁移可以在任意时间进行；
4、降低带宽成本和迁移后校验成本，数据迁移过程只用复制一次数据切片，恢复并对齐数据完全不依赖于旧系统的数据内容。
本发明实施例中，新系统也不一定需要实现实时redo状态，可以通过从旧系统拉取新增部分数据，并合并到新系统的方式来实现。不过，从旧系统拉取新增部分数据，会对线上服务的系统造成压力，并且合并数据的过程既漫长，实现又复杂。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器（Read-OnlyMemory，ROM）、随机存取器（Random Access Memory，RAM）、磁盘或光盘等。
以上对本发明实施例所提供的数据迁移方法及系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (12)

1.一种数据迁移方法，其特征在于，包括：
对旧系统数据进行切片，获得数据切片；
将所述数据切片批量导入新系统；
按照预先记录的同时写入所述旧系统和所述新系统的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做。
2.根据权利要求1所述的数据迁移方法，其特征在于，所述将所述数据切片批量导入新系统包括：
通过数据迁移进程将所述数据切片批量导入新系统。
3.根据权利要求1所述的数据迁移方法，其特征在于，所述按照预先记录的同时写入所述旧系统和所述新系统的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做包括：
按照预先记录的同时写入所述旧系统和所述新系统的写请求的序列号顺序，依次分析每个写请求，获得所述写请求包含的密钥key;
确定所述新系统中匹配命中所述写请求包含的密钥key的数据；
根据所述写请求对所述新系统中匹配命中所述写请求包含的密钥key的数据进行重做。
4.根据权利要求1、2或3所述的数据迁移方法，其特征在于，所述对旧系统数据进行切片，获得数据切片之前，所述方法还包括：
搭建与旧系统、新系统链接的数据迁移层；
通过所述数据迁移层将用户输入的写请求同时写入所述旧系统和所述新系统；
接收所述旧系统针对所述写请求返回的旧系统响应包以及所述新系统针对所述写请求返回的新系统响应包；
将所述旧系统响应包返回给所述用户。
5.根据权利要求4所述的数据迁移方法，其特征在于，在将所述数据切片批量导入新系统之后，以及在按照预先记录的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做之前，所述方法还包括：
控制所述新系统切换至实时重做状态。
6.根据权利要求5所述的数据迁移方法，其特征在于，所述按照预先记录的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做之后，所述方法还包括：
如果在新系统的数据重做过程中有对重做数据的再次修改请求，则按照再次修改请求的序列号顺序依次对所述新系统中的每一个再次修改请求对应的重做数据进行再次重做。
7.一种数据迁移系统，其特征在于，包括：
切片单元，用于对旧系统数据进行切片，获得数据切片；
导入单元，将所述数据切片批量导入新系统；
重做单元，用于按照预先记录的同时写入所述旧系统和所述新系统的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做。
8.根据权利要求7所述的数据迁移系统，其特征在于，所述导入单元具体用于通过数据迁移进程将所述数据切片批量导入新系统。
9.根据权利要求7所述的数据迁移系统，其特征在于，所述重做单元具体用于按照预先记录的同时写入所述旧系统和所述新系统的写请求的序列号顺序，依次分析每个写请求，获得所述写请求包含的密钥key;确定所述新系统中匹配命中所述写请求包含的密钥key的数据；以及，根据所述写请求对所述新系统中匹配命中所述写请求包含的密钥key的数据进行重做。
10.根据权利要求7、8或9所述的数据迁移系统，其特征在于，还包括：
处理单元，用于在所述切片单元对旧系统数据进行切片，获得数据切片之前，搭建与旧系统、新系统链接的数据迁移层；通过所述数据迁移层将用户输入的写请求同时写入所述旧系统和所述新系统；以及，接收所述旧系统针对所述写请求返回的旧系统响应包以及所述新系统针对所述写请求返回的新系统响应包；将所述旧系统响应包返回给所述用户。
11.根据权利要求10所述的数据迁移系统，其特征在于，还包括：
控制单元，用于在所述导入单元将所述数据切片批量导入新系统之后，以及在所述重做单元按照预先记录的写请求的序列号顺序，依次对所述新系统中的每一个写请求对应的数据进行重做之前，控制新系统切换至实时重做状态。
12.根据权利要求11所述的数据迁移系统，其特征在于，所述重做单元还用于在新系统的数据重做过程中有对重做数据的再次修改请求时，按照再次修改请求的序列号顺序依次对所述新系统中的每一个再次修改请求对应的重做数据进行再次重做。
CN201310002047.7A 2013-01-05 2013-01-05 一种数据迁移方法及系统 Active CN103914474B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201310002047.7A CN103914474B (zh) 2013-01-05 2013-01-05 一种数据迁移方法及系统
PCT/CN2013/089953 WO2014106431A1 (en) 2013-01-05 2013-12-19 Method and system for data migration
US14/296,877 US9535793B2 (en) 2013-01-05 2014-06-05 Method and system for data migration

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310002047.7A CN103914474B (zh) 2013-01-05 2013-01-05 一种数据迁移方法及系统

Publications (2)

Publication Number Publication Date
CN103914474A true CN103914474A (zh) 2014-07-09
CN103914474B CN103914474B (zh) 2018-12-28

Family

ID=51040166

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310002047.7A Active CN103914474B (zh) 2013-01-05 2013-01-05 一种数据迁移方法及系统

Country Status (3)

Country Link
US (1) US9535793B2 (zh)
CN (1) CN103914474B (zh)
WO (1) WO2014106431A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104731888A (zh) * 2015-03-12 2015-06-24 北京奇虎科技有限公司 一种数据迁移的方法、装置和系统
CN107016029A (zh) * 2016-12-13 2017-08-04 阿里巴巴集团控股有限公司 一种业务数据的处理方法、装置及系统
CN108595488A (zh) * 2018-03-15 2018-09-28 北京雷石天地电子技术有限公司 数据迁移方法和装置
CN109274809A (zh) * 2018-12-11 2019-01-25 上海帜讯信息技术股份有限公司 通讯录创建方法、装置、终端及存储介质
CN109660576A (zh) * 2017-10-10 2019-04-19 武汉斗鱼网络科技有限公司 用户数据实时迁移方法、存储介质、电子设备及系统
CN110019133A (zh) * 2017-12-21 2019-07-16 北京京东尚科信息技术有限公司 数据在线迁移方法和装置
CN110321339A (zh) * 2019-07-04 2019-10-11 深圳乐信软件技术有限公司 一种数据迁移方法、装置、设备和存储介质
CN112631991A (zh) * 2020-12-26 2021-04-09 中国农业银行股份有限公司 一种文件迁移方法及装置

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110874354A (zh) * 2019-10-23 2020-03-10 支付宝(杭州)信息技术有限公司 数据库迁移方法及装置、电子设备、存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5875457A (en) * 1996-10-08 1999-02-23 Mylex Corporation Fault-tolerant preservation of data integrity during dynamic raid set expansion
EP0902370A2 (en) * 1997-09-12 1999-03-17 Hitachi, Ltd. Dual storage controllers
CN101727504A (zh) * 2010-01-29 2010-06-09 成都市华为赛门铁克科技有限公司 一种文件系统数据迁移方法和装置
CN102073462A (zh) * 2010-11-29 2011-05-25 华为技术有限公司 虚拟存储迁移方法、系统和虚拟机监控器
CN102081552A (zh) * 2009-12-01 2011-06-01 华为技术有限公司 一种物理机到虚拟机的在线迁移方法、装置和系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8010764B2 (en) * 2005-07-07 2011-08-30 International Business Machines Corporation Method and system for decreasing power consumption in memory arrays having usage-driven power management
JP5244332B2 (ja) * 2006-10-30 2013-07-24 株式会社日立製作所 情報システム、データ転送方法及びデータ保護方法
US7822933B1 (en) * 2007-01-04 2010-10-26 Symantec Operating Corporation Enabling off-host data migration using volume translation mappings, snappoint maps and linked volume technologies

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5875457A (en) * 1996-10-08 1999-02-23 Mylex Corporation Fault-tolerant preservation of data integrity during dynamic raid set expansion
EP0902370A2 (en) * 1997-09-12 1999-03-17 Hitachi, Ltd. Dual storage controllers
CN102081552A (zh) * 2009-12-01 2011-06-01 华为技术有限公司 一种物理机到虚拟机的在线迁移方法、装置和系统
CN101727504A (zh) * 2010-01-29 2010-06-09 成都市华为赛门铁克科技有限公司 一种文件系统数据迁移方法和装置
CN102073462A (zh) * 2010-11-29 2011-05-25 华为技术有限公司 虚拟存储迁移方法、系统和虚拟机监控器

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104731888A (zh) * 2015-03-12 2015-06-24 北京奇虎科技有限公司 一种数据迁移的方法、装置和系统
CN104731888B (zh) * 2015-03-12 2018-09-04 北京奇虎科技有限公司 一种数据迁移的方法、装置和系统
CN107016029A (zh) * 2016-12-13 2017-08-04 阿里巴巴集团控股有限公司 一种业务数据的处理方法、装置及系统
CN109660576A (zh) * 2017-10-10 2019-04-19 武汉斗鱼网络科技有限公司 用户数据实时迁移方法、存储介质、电子设备及系统
CN109660576B (zh) * 2017-10-10 2021-09-07 武汉斗鱼网络科技有限公司 用户数据实时迁移方法、存储介质、电子设备及系统
CN110019133A (zh) * 2017-12-21 2019-07-16 北京京东尚科信息技术有限公司 数据在线迁移方法和装置
CN110019133B (zh) * 2017-12-21 2021-07-13 北京京东尚科信息技术有限公司 数据在线迁移方法和装置
CN108595488A (zh) * 2018-03-15 2018-09-28 北京雷石天地电子技术有限公司 数据迁移方法和装置
CN109274809A (zh) * 2018-12-11 2019-01-25 上海帜讯信息技术股份有限公司 通讯录创建方法、装置、终端及存储介质
CN110321339A (zh) * 2019-07-04 2019-10-11 深圳乐信软件技术有限公司 一种数据迁移方法、装置、设备和存储介质
CN112631991A (zh) * 2020-12-26 2021-04-09 中国农业银行股份有限公司 一种文件迁移方法及装置

Also Published As

Publication number Publication date
WO2014106431A1 (en) 2014-07-10
US9535793B2 (en) 2017-01-03
US20140289557A1 (en) 2014-09-25
CN103914474B (zh) 2018-12-28

Similar Documents

Publication Publication Date Title
CN103914474A (zh) 一种数据迁移方法及系统
CN108268501B (zh) 一种在线数据迁移过程中的业务处理方法及装置
CN107844268B (zh) 一种数据分发方法、数据存储方法、相关装置以及系统
US20190129817A1 (en) Method, device and computer program product for managing a storage system
CN102929748B (zh) 数据备份方法及装置
CN108153849B (zh) 一种数据库表切分方法、装置、系统和介质
CN106899648A (zh) 一种数据处理方法和设备
CN105718570A (zh) 用于数据库的数据迁移方法和装置
US20140059308A1 (en) Automated migration to a new target volume via merged bitmaps to maintain consistency
CN102682012A (zh) 一种文件系统内读写数据的方法及装置
CN108667917B (zh) 一种实现数据存储的方法、装置、计算机存储介质及终端
CA1231462A (fr) Dispositif et procede pour le stockage rapide et stable d'informations
CN105989059A (zh) 数据记录核对方法及装置
CN110807064A (zh) Rac分布式数据库集群系统中的数据恢复装置
CN113064859B (zh) 一种元数据处理方法、装置及电子设备和存储介质
CN106899654A (zh) 一种序列值生成方法、装置及系统
CN108733311A (zh) 用于管理存储系统的方法和设备
US10042570B2 (en) Tape backup and restore in a disk storage environment with intelligent data placement
CN106294387A (zh) 数据迁移方法和装置
EP1431876A2 (en) A method for maintaining coherency between mirrored storage devices
CN101763318B (zh) 一种实现数据转储的方法和装置
CN111090399A (zh) 一种磁盘数据的在线迁移方法、装置、设备及介质
US20160259582A1 (en) Method, apparatus or software for transferring a storage replication system between storage systems
CN105892954A (zh) 基于多副本的数据存储方法和装置
CN107967118A (zh) 一种实现硬盘数据快速转储和查看的方法及设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20190805

Address after: Shenzhen Futian District City, Guangdong province 518057 Zhenxing Road, SEG Science Park 2 East Room 403

Co-patentee after: Tencent cloud computing (Beijing) limited liability company

Patentee after: Tencent Technology (Shenzhen) Co., Ltd.

Address before: Shenzhen Futian District City, Guangdong province 518057 Zhenxing Road, SEG Science Park 2 East Room 403

Patentee before: Tencent Technology (Shenzhen) Co., Ltd.

TR01 Transfer of patent right