CN109189324B - 一种数据迁移方法及装置 - Google Patents

一种数据迁移方法及装置 Download PDF

Info

Publication number
CN109189324B
CN109189324B CN201810748632.4A CN201810748632A CN109189324B CN 109189324 B CN109189324 B CN 109189324B CN 201810748632 A CN201810748632 A CN 201810748632A CN 109189324 B CN109189324 B CN 109189324B
Authority
CN
China
Prior art keywords
storage system
data
bucket
request
access request
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810748632.4A
Other languages
English (en)
Other versions
CN109189324A (zh
Inventor
徐丰
张宇
林灵
凌晨
黄磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Cloud Computing Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN201810748632.4A priority Critical patent/CN109189324B/zh
Publication of CN109189324A publication Critical patent/CN109189324A/zh
Priority to PCT/CN2019/094110 priority patent/WO2020011038A1/zh
Priority to EP19833427.8A priority patent/EP3800538B1/en
Application granted granted Critical
Priority to US17/144,999 priority patent/US11914881B2/en
Publication of CN109189324B publication Critical patent/CN109189324B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0608—Saving storage space on storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0647—Migration mechanisms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604—Improving or facilitating administration, e.g. storage management
    • G06F3/0607—Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G06F3/0635—Configuration or reconfiguration of storage systems by changing the path, e.g. traffic rerouting, path reconfiguration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

提供了一种数据迁移方法及装置，涉及存储技术领域，能够解决在数据迁移时影响客户正常业务的问题。其方法为：第一存储系统向位置服务器发送位置更新请求，位置更新请求用于指示位置服务器将第一桶的位置信息由位于第二存储系统更新为第一存储系统；第一存储系统从第二存储系统迁移第一桶中的数据；第一存储系统接收数据访问请求，数据访问请求用于访问第一桶中的数据；第一存储系统根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求。本申请实施例用于存储系统间桶内数据的迁移。

Description

一种数据迁移方法及装置
技术领域
本申请涉及存储技术领域，尤其涉及一种数据迁移方法及装置。
背景技术
随着对象存储业务更新换代，从客户的角度希望使用性能更快，价格更合理的新存储系统，从企业管理的角度也希望新存储系统能够收编老存储系统，老存储系统下线，以减少维护系统的管理成本。因此，新老系统间的数据迁移是对象存储业务发展的必然诉求。
目前，一种方案为跨区域(region)复制技术，是针对客户新增业务的跨区域备份。其原理为：用户在目标区域创建一个目标桶，然后通过配置将源区域的源桶中的存量数据或增量数据同步到目标桶，这种跨区域复制技术是一种桶之间的复制技术，要求两个桶分布于不同区域，需要花费额外的存储成本，对客户来说，这两个桶之间的数据同步，是一种数据复制技术，并非数据迁移，客户需要在数据复制完成后才能在目标桶访问数据，且需要客户决定访问源桶还是目标桶。另一种方案为通过迁移第三方数据的解决方案，这种方案包括两种技术，存量数据的导入和增量数据的回源，需要组合使用才能完成迁移。例如OssImport+镜像回源迁移方案中，如图1所示，步骤1：首先需要全量迁移T1之前的历史数据，步骤2：打开对象存储系统(Object Storage Service，OSS)镜像回源，并将读写切换到OSS，迁移源不再新增数据，步骤3：快速迁移T1至T2间的新增数据。这种方案中，操作步骤相对复杂，需要很强的技术背景才能实现，对客户来说，也是两个桶之间的数据迁移，客户需要修改应用程序编程接口(Application Programming Interface，API)来访问目标桶，需要花费额外的存储成本，且需要客户手动保证迁移桶之间的属性一致，迁移历史数据时新增数据还是会上传至源桶，需要再次迁移。因此，如何在迁移数据的同时不影响客户的正常业务，当前业界并没有相应的技术。
发明内容
本申请提供一种数据迁移方法及装置，能够解决在数据迁移时影响客户正常业务的问题。
第一方面，提供一种数据迁移方法，包括：第一存储系统向位置服务器发送位置更新请求，位置更新请求用于指示位置服务器将第一桶的位置信息由位于第二存储系统更新为位于第一存储系统；从第二存储系统迁移第一桶的数据，并将数据存储于第一存储系统的第二桶中，第二桶的标识与第一桶的标识相同；接收数据访问请求，数据访问请求用于访问第一桶中的数据；第一存储系统根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求。这样一来，由于被迁移的第二存储系统中桶的标识与迁移至的第一存储系统中桶的标识相同，位置服务器中更新了被迁移的桶的位置信息，那么数据访问请求就会被定位给第一存储系统进行处理，第一存储系统如果根据已经迁移的数据可以处理该请求则直接进行处理，如果数据访问请求访问的数据还未迁移至第一存储系统，第一存储系统可以从第二存储系统获取反馈给客户，对于客户来说，桶的标识不变，API不变，迁移过程中客户的业务不受损，客户不感知数据的迁移，不增加客户的存储成本，能够解决在数据迁移时影响客户正常业务的问题。
在一种可能的设计中，第一存储系统从第二存储系统迁移第一桶中的数据，包括：第一存储系统先迁移第一桶中对象的元数据，再迁移第一桶中除元数据以外的其余数据。这样一来，由于桶内对象的元数据和对象大小无关，基本是固定大小，迁移对象的元数据的迁移速度快。对象的元数据迁移完成后，一些数据访问请求就可以直接在第一存储系统的第二桶中直接处理，不需要将数据访问请求转发给第二存储系统，例如数据访问请求用于列举桶内对象、计算对象数或对象的生命周期管理等。
在一种可能的设计中，第一存储系统接收数据访问请求，包括：第一存储系统从第二存储系统接收数据访问请求，或第一存储系统接收虚拟主机发送的数据访问请求，数据访问请求包括第一桶的标识。如果第一存储系统从第二存储系统接收数据访问请求，可以理解为客户端先将数据访问请求发送给被迁移的第二存储系统，为固定IP访问方式，发送给第二存储系统的数据访问请求携带第二存储系统的IP地址以及第一桶的标识，第二存储系统从位置服务器获知第一桶的位置信息指向第一存储系统，第二存储系统再向第一存储系统发送数据访问请求。若客户以虚拟主机发送数据访问请求，则该数据访问请求直接发送给第一存储系统。这样，无论两种方式中哪种访问方式，数据访问请求都先发送给第一存储系统进行处理，以便于第一存储系统根据已迁移的数据可以直接处理或者保存上传的数据至本地。
在一种可能的设计中，第一存储系统根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求，包括：当数据访问请求的类型为下载类请求，第一存储系统确定下载类请求所请求的数据是否已迁移至第二桶；当下载类请求所请求的数据已迁移至第二桶，第一存储系统从第二桶获取下载类请求所请求的数据；当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据不为元数据，第一存储系统从第一桶获取下载类请求所请求的数据发送给客户端。当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据为元数据，第一存储系统从第一桶迁移元数据并保存至第二桶，将元数据发送给客户端。这样一来，数据迁移过程中，被迁移的第二存储系统和迁移至的第一存储系统同时在线对外提供服务，期间的数据访问请求会先发送给第一存储系统进行处理，对于客户来说，桶的标识和API不变，数据迁移对客户不感知，不增加客户存储成本。
在一种可能的设计中，第一存储系统根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求，包括：当数据访问请求的类型为上传类请求，第一存储系统将上传类请求所上传的数据保存至第二桶。
第二方面，提供一种存储系统，该存储系统作为第一存储系统，包括：通信模块，用于向位置服务器发送位置更新请求，位置更新请求用于指示位置服务器将第一桶的位置信息由第二存储系统更新为位于第一存储系统；通信模块，还用于从第二存储系统迁移第一桶中的数据，并将数据存储于第一存储系统的第二桶中，第二桶的标识与第一桶的标识相同；通信模块，还用于接收数据访问请求，数据访问请求用于访问第一桶中的数据；处理模块，用于根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求。
在一种可能的设计中，通信模块用于：先迁移第一桶中对象的元数据，再迁移第一桶中除元数据以外的其余数据。
在一种可能的设计中，通信模块用于：从第二存储系统接收数据访问请求，或第一存储系统接收虚拟主机发送的数据访问请求，数据访问请求包括第一桶的标识。
在一种可能的设计中，处理模块用于：当数据访问请求的类型为下载类请求，确定下载类请求所请求的数据是否已迁移至第二桶；当下载类请求所请求的数据已迁移至第二桶，从第二桶获取下载类请求所请求的数据；当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据不为元数据，从第一桶获取下载类请求所请求的数据发送给客户端；当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据为元数据，第一存储系统从第一桶迁移元数据并保存至第二桶，将元数据发送给客户端。
在一种可能的设计中，处理模块用于：当数据访问请求的类型为上传类请求，将上传类请求所上传的数据保存至第二桶。
又一方面，本申请实施例提供了一种计算机存储介质，用于储存为上述第一存储系统所用的计算机软件指令，其包含用于执行上述第一方面所设计的程序。
又一方面，本申请实施例提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述第一方面所述的方法。
本申请实施例提供一种数据迁移方法及装置，可以应用于第一存储系统，第一存储系统向位置服务器发送位置更新请求，位置更新请求用于指示位置服务器将第一桶的位置信息由位于第二存储系统更新为位于第一存储系统；从第二存储系统迁移第一桶中的数据，并将数据存储于第一存储系统的第二桶中，第二桶的标识与第一桶的标识相同；接收数据访问请求，数据访问请求用于访问第一桶中的数据；第一存储系统根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求。这样一来，由于被迁移的第二存储系统中桶的标识与迁移至的第一存储系统中桶的标识相同，位置服务器中更新了被迁移的桶的位置信息，那么数据访问请求就会被定位给第一存储系统进行处理，第一存储系统如果根据已经迁移的数据可以处理该请求则直接进行处理，如果数据访问请求访问的数据还未迁移至第一存储系统，第一存储系统可以从第二存储系统获取反馈给客户，对于客户来说，桶的标识不变，API不变，迁移过程中客户的业务部受损，客户不感知数据的迁移，不增加客户的存储成本，能够解决在数据迁移时影响客户正常业务的问题。
附图说明
图1为一种OssImport+镜像回源的迁移方案的示意图；
图2为本申请实施例提供的一种网络架构的示意图；
图3为本申请实施例提供的一种第一存储系统的结构示意图；
图4为本申请实施例提供的一种数据迁移方法的流程示意图；
图5为本申请实施例提供的一种数据迁移过程中数据访问请求处理示意图；
图6为本申请实施例提供的一种数据迁移过程中数据访问请求处理示意图；
图7为本申请实施例提供的一种第一存储系统的结构示意图；
图8为本申请实施例提供的一种第一存储系统的结构示意图；
图9为本申请实施例提供的一种第一存储系统的结构示意图。
具体实施方式
本申请实施例提供的数据迁移方法可以应用于同一云服务商桶内数据在不同位置或系统间迁移的场景，迁移前后，客户端不需要任何改变，开始迁移后，可以立即在新的位置或存储系统访问桶内数据，新增数据也直接存储到新的位置或新的存储系统。
如图2所示，本申请的网络架构可以包括第一存储系统20、第二存储系统21、域名系统(Domain Name System，DNS)22以及位置服务器(location server)23。第一存储系统为数据迁移后的存储系统，第二存储系统为数据迁移前的存储系统，域名系统用于域名解析，位置服务器用于查询数据存储的位置，例如用于查询存放数据的桶的位置在第一存储系统或第二存储系统。
如图3所示，在存储系统中，包括前台请求处理模块以及多个存储区域，每个存储区域可以称为桶。在一种存储模型中，每个桶中存储有至少一个对象以及每个对象对应的元数据。该存储系统可以为上述第一存储系统20或第二存储系统21。
本申请用于解决对象存储领域桶内数据迁移问题，包括存量数据和新增数据的迁移。迁移完成只是桶和桶内数据的位置信息发生变化，对于客户来说桶的标识(或称为桶名)不变，API不变。迁移过程中客户的业务不受损，客户不感知数据的迁移，不增加客户的存储成本，不需要客户有很强的技术背景，也可以同时指定多桶并发迁移。
本申请的基本原理可以为：按照桶的级别进行数据迁移，在确定需进行数据迁移时，先将被迁移桶的新业务进行隔离，让新业务接入迁移至的桶，这样被迁移桶的数据保持稳定，而后再逐步将被迁移桶的数据迁移到迁移至的桶，迁移完成后被迁移桶的数据自动回收，不额外计费。桶迁移前后和迁移过程中，客户不需要进行任何适配。
下面对本申请实施例进行阐述。
本申请实施例提供一种数据迁移方法，如图4所示，包括：
401、第一存储系统确定要进行桶迁移时，根据被迁移的第二存储系统的第一桶的元数据在第一存储系统中创建第二桶，第二桶的标识与第一桶的标识相同。
当客户确定需要进行桶迁移，例如要将第二存储系统下线，需要将第二存储系统中的数据迁移至第一存储系统时，可以在第一存储系统中进行人工操作，以便第一存储系统开始进行桶的迁移。第一存储系统确定开始桶迁移时，可以先从第二存储系统获取第二存储系统的桶的元数据，以根据第二存储系统的桶的元数据在第一存储系统新的区域创建对应的新桶，第二存储系统也获知到将要从本系统迁移数据至第一存储系统。这里第二存储系统中被迁移的桶可以为至少一个，也就是可以同时多桶迁移，本申请以至少一个桶中的第一桶为例进行说明。
例如第二存储系统被迁移的桶包括第一桶时，第一存储系统在第二存储系统获取到第一桶的元数据时，在第一存储系统中根据第一桶的元数据创建第二桶，该第一桶的元数据可以包括第一桶的创建时间、第一桶的标识以及用户等，第二桶的元数据与第一桶的元数据相同，当然第二桶的标识与第一桶的标识也相同。
402、第一存储系统向位置服务器发送位置更新请求，位置更新请求用于指示位置服务器将第一桶的位置信息由位于第二存储系统更新为位于第一存储系统。
在第一存储系统新创桶完成后，第一存储系统可以指示位置服务器对第二存储系统中桶的位置信息进行修改。该位置更新请求可以包括被迁移的第二存储系统的标识以及将要迁移至的第一存储系统的标识，以指示位置服务器将第二存储系统的桶的位置信息由第二存储系统更新为第一存储系统。
403、位置服务器将第一桶的位置信息由第二存储系统更新为第一存储系统。
在一种可能的实现中，位置服务器可以按照位置更新请求中被迁移的第二存储系统的标识以及将要迁移至的第一存储系统的标识，在位置服务器中将第二存储系统的桶的位置信息字段的值由第二存储系统的标识修改为第一存储系统的标识。例如第二存储系统中第一桶的位置信息字段以bkt2表示时，修改前该字段的值为第二存储系统的标识cluster1，表示第一桶的位置信息为第二存储系统，如果修改后该字段的值为第一存储系统的标识cluster2，那么第一桶的位置信息就由第二存储系统更新为了第一存储系统。
404、位置服务器向第一存储系统发送响应信息，以通知第一存储系统位置信息修改完成。
405、第一存储系统从第二存储系统迁移第一桶中的数据。
第一存储系统在获知位置服务器修改第一桶的位置信息完成后，可以开始从第二存储系统获取第二存储系统中桶的数据。例如第一存储系统通过对象存储的REST接口从第二存储系统获取第一桶的数据。这里利用REST接口进行数据迁移，可以不感知系统内部的架构和存储模型。
需要说明的是，第二存储系统开始向第一存储系统迁移数据的时机可以是第二存储系统在接收到第一存储系统获取桶的元数据的指令时，若第二存储系统有正在处理但还未处理完的数据访问请求时，第二存储系统先不开始向第一存储系统迁移数据，等到第二存储系统将该正在处理的数据访问请求处理完成后，第二存储系统开始向第一存储系统迁移数据，例如第一存储系统开始接收从第二存储系统的第一桶迁移的数据，写入第一存储系统与第一桶对应的第二桶中。如果数据合并时有冲突，第一存储系统以自身系统为准。第二存储系统在接收到获取桶的元数据的指令之后接收到的数据访问请求会被首先发送给第一存储系统进行处理，下面在步骤406中进行具体说明。
其中，第一存储系统在从第二存储系统迁移数据时，可以先从第二存储系统迁移各个桶中对象的元数据，再迁移各个桶中除对象的元数据以外的其余数据。例如第一存储系统先迁移第一桶中对象的元数据，将该对象的元数据存储到第二桶中，再迁移第一桶中除对象的元数据以外的其余数据，并将该其余数据存储到第二桶中。这样一来，由于桶中对象的元数据和对象大小无关，对象的元数据基本是固定大小，迁移速度快，这样对象的元数据在迁移完成后，一些访问对象的元数据的数据访问请求就可以直接在第一存储系统中处理，不需要将数据访问请求转发给第二存储系统。例如该数据访问请求用于列举桶内对象、计算对象数或对象的生命周期管理等。
406、第一存储系统接收数据访问请求，数据访问请求用于访问第一桶中的数据。
这里分两种情况进行说明，一种情况下，该数据访问请求是以固定网际协议(Internet Protocol，IP)方式访问数据的，另一种情况下，该数据访问请求是通过虚拟主机发送的。
如果以固定IP方式访问数据，该数据访问请求中携带被迁移的第二存储系统的IP地址、要访问的桶的标识以及对象的标识，即客户还是以原先的IP地址访问数据，对客户来说桶名不变，API不变，数据迁移对客户不感知，这样一来，数据访问请求先发送到第二存储系统，第二存储系统向位置服务器请求获知要访问的桶的位置信息，由于位置服务器中已经将桶的位置信息更新为第一存储系统，第二存储系统在得知桶的位置信息为第一存储系统并获取到第一存储系统的IP地址时，第二存储系统根据第一存储系统的IP地址向第一存储系统发送数据访问请求，此时的数据访问请求中包括第一存储系统的IP地址、要访问的桶的标识以及对象的标识。这里需要说明的是，如果对桶更新位置信息后，该桶不是第一次被访问，第二存储系统中也可以在第一次访问该桶时缓存该桶更新后的位置信息，并在缓存未过期时，直接向第一存储系统发送数据访问请求，以从第一存储系统获取要访问的数据。
举例来说，第二存储系统cluster1接收到客户发送的第一数据访问请求是以固定IP方式访问，该第一数据访问请求对应的统一资源定位符(Uniform Resource Locator，URL)为http://ipaddr1/bkt2/obj1,其中ipaddr1为第二存储系统的固定IP地址，bkt2为要第一桶的标识，obj1为对象的标识，第二存储系统接收到第一数据访问请求时，向位置服务器询问第一桶的位置信息，如果位置服务器中存在字段bkt1：cluster1,bkt2：cluster2,第二存储系统得知第一桶bkt2的位置信息指向第一存储系统cluster2,并获取第一存储系统cluster2的固定IP地址ipaddr2，那么第二存储系统向第一存储系统发送第二数据访问请求，该第二数据访问请求即为步骤405中的数据访问请求，并携带第一存储系统的固定IP地址、第一桶的标识bkt2以及对象的标识obj1。
如果以虚拟主机访问数据，数据访问请求发送至DNS，该数据访问请求对应的URL中携带有要访问的桶的标识以及对象的标识，DNS中保存有每个存储系统的标识以及对应的IP地址，DNS解析URL得到桶的标识后，向位置服务器请求获取该桶的位置信息，位置服务器根据桶的标识得到桶对应的第一存储系统的标识后，向DNS反馈该第一存储系统的标识，DNS便根据第一存储系统的标识获取第一存储系统对应的IP地址并反馈给客户，客户根据第一存储系统对应的IP地址向第一存储系统发送数据访问请求，此时的数据访问请求中包括有要访问的桶的标识以及对象的标识。
举例来说，第二存储系统为被迁移系统，第一存储系统为数据迁移后的系统，如果通过虚拟主机要访问第一桶bkt2中的对象obj1，其对应的URL为http://bkt2.hwsclouds.com/obj1,该URL首先发送至DNS，DNS中保存有第二存储系统的标识cluster1及其对应的IP地址ipaddr1，和第一存储系统的标识cluster2及其对应的IP地址ipaddr2，DNS解析该URL得到要访问的第一桶的标识bkt2，并根据第一桶的标识bkt2向位置服务器请求获取该第一桶的位置信息，如果位置更新后第一桶的位置信息指向第一存储系统，那么DNS从本地获取第一存储系统cluster2的标识对应的IP地址并反馈给客户，客户根据第一存储系统cluster2的固定IP地址ipaddr2向第一存储系统发送数据访问请求，数据访问请求中包括要访问的第一桶的标识bkt2以及对象的标识obj1。
这样看来，桶迁移前后和迁移过程中，客户不需要进行任何适配。在开启迁移后，如果客户以虚拟主机方式访问桶，访问请求会直接定位到数据迁移后的桶，如果客户以固定IP访问被迁移的桶，被迁移的桶也会将访问请求转发给数据迁移后的桶进行处理。
407、第一存储系统根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求。
由步骤406可知，无论客户以哪种方式访问，数据访问请求会最终先发送给第一存储系统进行处理。由于还处于数据迁移过程中，即数据还未迁移完时，第一存储系统还不能处理对未迁移的数据的访问请求，因此，第一存储系统需要第二存储系统协助处理，这样，在数据迁移过程中，第一存储系统处理数据访问请求需要根据数据访问请求的类型和数据迁移状况决定由第一存储系统处理还是由第二存储系统协助处理数据访问请求。
具体来说，以客户访问第一桶中的数据为例，当数据访问请求的类型为下载类请求，第一存储系统确定下载类请求所请求的数据是否已迁移至第一存储系统的第二桶；当下载类请求所请求的数据已迁移至第二桶，第一存储系统从第二桶获取下载类请求所请求的数据；当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据不为元数据，第一存储系统从第一桶获取下载类请求所请求的数据发送给客户端，再将下载类请求所请求的数据保存至第二桶。具体的，若下载类请求所请求的数据不为元数据且还未迁移至第二桶中，第一存储系统可以从第二存储系统的第二桶获取所请求的数据存入第一存储系统内存，将所请求的数据反馈给客户端，后台再将内存中存储的数据迁移至第一桶中，这样对于客户端来说，其请求数据得到反馈的时延较小；当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据为元数据，第一存储系统从第一桶迁移元数据并保存至第二桶，将元数据发送给客户端，后台再从第一桶迁移元数据以外的数据至第二桶。由于桶中对象的元数据和对象大小无关，基本为固定大小，迁移速度快，因此客户端请求元数据时，可以将元数据先迁移至第二桶中，再将元数据反馈给客户端。
当数据访问请求的类型为上传类请求，则第一存储系统将上传类请求所上传的数据保存至第二桶。
当第二存储系统中第一桶中的数据全部迁移至第二桶中时，所有后续接收到的用于访问第一桶的数据访问请求就只在第一存储系统中进行处理，第一桶就可以下线。当第二存储系统各桶的数据都迁移至第一存储系统时，第二存储系统就可以下线。
结合步骤406中访问方式的不同以及步骤407中数据访问请求的类型，如果客户端以固定IP方式访问时，数据访问请求在两个存储系统间的传递可以如图5所示，如果客户端以虚拟主机访问时，数据访问请求在两个存储系统间的传递可以如图6所示。
通过图5和图6所示，在数据迁移未完成时，第二存储系统中的第一桶和第一存储系统中的第二桶同时在线对外提供服务，当迁移完成后，第一桶下线不再提供业务。因此，本申请数据迁移方法中，即使数据还在迁移过程中，数据访问请求会先被传送给新的存储系统进行处理，如果新的存储系统可以处理时则直接进行处理，例如访问已迁移的数据或上传新数据，如果新的存储系统不能处理则从老的存储系统获取数据反馈给客户端，数据迁移前后，客户端不需要任何改变，不增加客户存储成本，不需要客户有很强的技术背景，能够解决在数据迁移时影响客户正常业务的问题。
上述主要从各个网元之间交互的角度对本申请实施例提供的方案进行了介绍。可以理解的是，各个网元，例如第一存储系统为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对第一存储系统进行功能模块的划分，例如，可以对应各个功能划分各个功能模块，也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。需要说明的是，本申请实施例中对模块的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下，图7示出了上述实施例中所涉及的存储系统的一种可能的结构示意图，该存储系统作为上述第一存储系统，该存储系统70包括：发送单元7001，接收单元7002以及处理单元7003。处理单元7003用于支持第一存储系统70执行图4中的过程401，发送单元7001用于支持第一存储系统执行图4中的过程402；接收单元7002用于执行图4中的过程405以及406。其中，上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述，在此不再赘述。
在采用集成的单元的情况下，图8示出了上述实施例中所涉及的存储系统的一种可能的结构示意图，该存储系统作为上述第一存储系统。该存储系统80包括：处理模块8002和通信模块8003。处理模块8002用于对第一存储系统的动作进行控制管理。其中，通信模块8003用于向位置服务器发送位置更新请求，位置更新请求用于指示位置服务器将第一桶的位置信息由位于第二存储系统更新为位于第一存储系统；通信模块8003，还用于从第二存储系统迁移第一桶中的数据，并将数据存储于第一存储系统的第二桶中，第二桶的标识与第一桶的标识相同；通信模块8003，还用于接收数据访问请求，数据访问请求用于访问第一桶中的数据；处理模块8002，用于根据数据访问请求的类型以及数据的迁移状况确定由第一存储系统或第二存储系统处理数据访问请求。
在本申请实施例中，可选的，通信模块8003可以用于：先迁移第一桶中对象的元数据，再迁移第一桶中除元数据以外的其余数据。
在本申请实施例中，可选的，通信模块8003可以用于：从第二存储系统接收数据访问请求，或第一存储系统接收虚拟主机发送的数据访问请求，数据访问请求包括第一桶的标识。
在本申请实施例中，可选的，处理模块8002可以用于：当数据访问请求的类型为下载类请求，确定下载类请求所请求的数据是否已迁移至第二桶；当下载类请求所请求的数据已迁移至第二桶，从第二桶获取下载类请求所请求的数据；当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据不为元数据，第一存储系统从第一桶获取下载类请求所请求的数据发送给客户端；当下载类请求所请求的数据没有迁移至第二桶，且下载类请求所请求的数据为元数据，第一存储系统从第一桶迁移元数据并保存至第二桶，将元数据发送给客户端。
在本申请实施例中，可选的，处理模块8002可以用于：当数据访问请求的类型为上传类请求，将上传类请求所上传的数据保存至第二桶。
结合图4所示的方法实施例，例如，处理模块8002用于支持第一存储系统执行图4中的过程401以及407，和/或用于本文所描述的技术的其它过程。通信模块8003用于支持第一存储系统与其他网络实体的通信，例如与图2中示出的功能模块或网络实体之间的通信，通信模块8003可以用于支持第一存储系统执行图4中的过程402，405以及406。第一存储系统还可以包括存储模块8001，用于存储第一存储系统的程序代码和数据。
其中，处理模块8002可以是处理器或控制器，例如可以是中央处理器(CentralProcessing Unit，CPU)，通用处理器，数字信号处理器(Digital Signal Processor，DSP)，专用集成电路(Application-Specific Integrated Circuit，ASIC)，现场可编程门阵列(Field Programmable Gate Array，FPGA)或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。所述处理器也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等等。通信模块8003可以是收发器、收发电路或通信接口等。存储模块8001可以是存储器。
当处理模块8002为处理器，通信模块8003为通信接口，存储模块8001为存储器时，本申请实施例所涉及的第一存储系统可以为图9所示的存储系统。
参阅图9所示，该存储系统9010包括：处理器9012、通信接口9013、存储器9011以及总线9014。其中，通信接口9013、处理器9012以及存储器9011通过总线9014相互连接；总线9014可以是外设部件互连标准(Peripheral Component Interconnect，PCI)总线或扩展工业标准结构(Extended Industry Standard Architecture，EISA)总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图9中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
结合本申请公开内容所描述的方法或者算法的步骤可以硬件的方式来实现，也可以是由处理器执行软件指令的方式来实现。软件指令可以由相应的软件模块组成，软件模块可以被存放于随机存取存储器(Random Access Memory，RAM)、闪存、只读存储器(ReadOnly Memory，ROM)、可擦除可编程只读存储器(Erasable Programmable ROM，EPROM)、电可擦可编程只读存储器(Electrically EPROM，EEPROM)、寄存器、硬盘、移动硬盘、只读光盘(CD-ROM)或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。另外，该ASIC可以位于核心网接口设备中。当然，处理器和存储介质也可以作为分立组件存在于核心网接口设备中。
本领域技术人员应该可以意识到，在上述一个或多个示例中，本申请所描述的功能可以用硬件、软件、固件或它们的任意组合来实现。当使用软件实现时，可以将这些功能存储在计算机可读介质中或者作为计算机可读介质上的一个或多个指令或代码进行传输。计算机可读介质包括计算机存储介质和通信介质，其中通信介质包括便于从一个地方向另一个地方传送计算机程序的任何介质。存储介质可以是通用或专用计算机能够存取的任何可用介质。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何在本申请揭露的技术范围内的变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。

Claims (11)

1.一种数据迁移方法，其特征在于，包括：
第一存储系统向位置服务器发送位置更新请求，所述位置更新请求用于指示所述位置服务器将第一桶的位置信息由位于第二存储系统更新为位于所述第一存储系统；
所述第一存储系统从所述第二存储系统迁移所述第一桶的数据，并将所述数据存储于所述第一存储系统的第二桶中，所述第二桶的标识与所述第一桶的标识相同；其中，所述第一存储系统先迁移所述第一桶中对象的元数据，再迁移所述第一桶中除所述元数据以外的其余数据；
所述第一存储系统接收数据访问请求，所述数据访问请求用于访问所述第一桶中的数据；
所述第一存储系统根据所述数据访问请求的类型以及所述数据的迁移状况确定由所述第一存储系统或所述第二存储系统处理所述数据访问请求。
2.根据权利要求1所述的数据迁移方法，其特征在于，所述第一存储系统接收数据访问请求，包括：
所述第一存储系统从所述第二存储系统接收所述数据访问请求，或所述第一存储系统接收虚拟主机发送的所述数据访问请求，所述数据访问请求包括所述第一桶的标识。
3.根据权利要求1-2任一项所述的数据迁移方法，其特征在于，所述第一存储系统根据所述数据访问请求的类型以及所述数据的迁移状况确定由所述第一存储系统或所述第二存储系统处理所述数据访问请求，包括：
当所述数据访问请求的类型为下载类请求，所述第一存储系统确定所述下载类请求所请求的数据是否已迁移至所述第二桶；
当所述下载类请求所请求的数据已迁移至所述第二桶，所述第一存储系统从所述第二桶获取所述下载类请求所请求的数据；
当所述下载类请求所请求的数据没有迁移至所述第二桶，且所述下载类请求所请求的数据不为元数据，所述第一存储系统从所述第一桶获取所述下载类请求所请求的数据发送给客户端；
当所述下载类请求所请求的数据没有迁移至所述第二桶，且所述下载类请求所请求的数据为元数据，所述第一存储系统从所述第一桶迁移所述元数据并保存至所述第二桶，将所述元数据发送给客户端。
4.根据权利要求1-2任一项所述的数据迁移方法，其特征在于，所述第一存储系统根据所述数据访问请求的类型以及所述数据的迁移状况确定由所述第一存储系统或所述第二存储系统处理所述数据访问请求，包括：
当所述数据访问请求的类型为上传类请求，所述第一存储系统将所述上传类请求所上传的数据保存至所述第二桶。
5.一种存储系统，其特征在于，所述存储系统作为第一存储系统，包括：
通信模块，用于向位置服务器发送位置更新请求，所述位置更新请求用于指示所述位置服务器将第一桶的位置信息由位于第二存储系统更新为位于所述第一存储系统；
所述通信模块，还用于从所述第二存储系统迁移所述第一桶的数据，并将所述数据存储于所述第一存储系统的第二桶中，所述第二桶的标识与所述第一桶的标识相同；
所述通信模块，还用于接收数据访问请求，所述数据访问请求用于访问所述第一桶中的数据；
处理模块，用于根据所述数据访问请求的类型以及所述数据的迁移状况确定由所述第一存储系统或所述第二存储系统处理所述数据访问请求；
所述通信模块用于：
先迁移所述第一桶中对象的元数据，再迁移所述第一桶中除所述元数据以外的其余数据。
6.根据权利要求5所述的存储系统，其特征在于，所述通信模块用于：从所述第二存储系统接收所述数据访问请求，或所述第一存储系统接收虚拟主机发送的所述数据访问请求，所述数据访问请求包括所述第一桶的标识。
7.根据权利要求5-6任一项所述的存储系统，其特征在于，所述处理模块用于：
当所述数据访问请求的类型为下载类请求，确定所述下载类请求所请求的数据是否已迁移至所述第二桶；
当所述下载类请求所请求的数据已迁移至所述第二桶，从所述第二桶获取所述下载类请求所请求的数据；
当所述下载类请求所请求的数据没有迁移至所述第二桶，且所述下载类请求所请求的数据不为元数据，从所述第一桶获取所述下载类请求所请求的数据发送给客户端；
当所述下载类请求所请求的数据没有迁移至所述第二桶，且所述下载类请求所请求的数据为元数据，从所述第一桶迁移所述元数据并保存至所述第二桶，将所述元数据发送给客户端。
8.根据权利要求5-6任一项所述的存储系统，其特征在于，所述处理模块用于：
当所述数据访问请求的类型为上传类请求，将所述上传类请求所上传的数据保存至所述第二桶。
9.一种通信装置，包括存储器，所述存储器存储有计算机指令，当所述计算机指令被执行时，使得所述通信装置执行如权利要求1-4中任一项的数据迁移方法。
10.一种计算机存储介质，所述计算机存储介质存储有计算机指令，当所述计算机指令被计算机执行时，使得所述计算机执行如权利要求1-4中任一项的数据迁移方法。
11.一种存储系统，其特征在于，所述存储系统作为第一存储系统，包括处理器和接口，所述处理器和所述接口通信，所述处理器用于执行如权利要求1-4中任一项的数据迁移方法。
CN201810748632.4A 2018-07-09 2018-07-09 一种数据迁移方法及装置 Active CN109189324B (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201810748632.4A CN109189324B (zh) 2018-07-09 2018-07-09 一种数据迁移方法及装置
PCT/CN2019/094110 WO2020011038A1 (zh) 2018-07-09 2019-07-01 一种数据迁移方法及装置
EP19833427.8A EP3800538B1 (en) 2018-07-09 2019-07-01 Method and apparatus for data migration
US17/144,999 US11914881B2 (en) 2018-07-09 2021-01-08 Data migration method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810748632.4A CN109189324B (zh) 2018-07-09 2018-07-09 一种数据迁移方法及装置

Publications (2)

Publication Number Publication Date
CN109189324A CN109189324A (zh) 2019-01-11
CN109189324B true CN109189324B (zh) 2021-01-08

Family

ID=64936332

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810748632.4A Active CN109189324B (zh) 2018-07-09 2018-07-09 一种数据迁移方法及装置

Country Status (4)

Country Link
US (1) US11914881B2 (zh)
EP (1) EP3800538B1 (zh)
CN (1) CN109189324B (zh)
WO (1) WO2020011038A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109189324B (zh) * 2018-07-09 2021-01-08 华为技术有限公司 一种数据迁移方法及装置
US11567840B2 (en) * 2020-03-09 2023-01-31 Rubrik, Inc. Node level recovery for clustered databases
CN111800497A (zh) * 2020-06-30 2020-10-20 北京金山云网络技术有限公司 请求响应方法、热迁移系统及装置
CN112131128B (zh) * 2020-09-29 2023-08-22 网易（杭州）网络有限公司 数据测试方法、装置、存储介质和电子装置
CN112511634A (zh) * 2020-12-02 2021-03-16 北京邮电大学 一种数据获取方法、装置、电子设备及存储介质
CN114629921B (zh) * 2020-12-14 2023-11-17 华为云计算技术有限公司 云平台及其提供的对象存储服务的桶管理方法
CN113312147B (zh) * 2021-06-11 2022-12-30 中国科学技术大学 一种对象存储跨集群海量数据迁移方法及系统
CN116266839A (zh) * 2021-12-16 2023-06-20 华为云计算技术有限公司 一种对象存储桶的数据访问方法以及云管理平台
CN115473815B (zh) * 2022-08-23 2024-01-19 浪潮通信信息系统有限公司 基于设备变更的业务迁移系统及方法
CN117749813A (zh) * 2022-09-13 2024-03-22 华为云计算技术有限公司 基于云计算技术的数据迁移方法及云管理平台
CN118118728A (zh) * 2024-04-30 2024-05-31 四川天邑康和通信股份有限公司 Iptv机顶盒的数据处理方法和装置、机顶盒及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101105737A (zh) * 2006-07-11 2008-01-16 任永坚 存储介质处理方法、系统及数据读写操作方法、系统
CN105549904A (zh) * 2015-12-08 2016-05-04 华为技术有限公司 一种应用于存储系统中的数据迁移方法及存储设备
CN107577425A (zh) * 2017-08-23 2018-01-12 杭州宏杉科技股份有限公司 一种数据迁移方法及装置

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3410010B2 (ja) * 1997-12-24 2003-05-26 株式会社日立製作所 サブシステムの移行方法および情報処理システム
KR100662290B1 (ko) * 2000-12-27 2007-01-02 엘지전자 주식회사 광 기록매체 상의 데이터 복사 및 이동 방법
US7707186B2 (en) * 2004-06-18 2010-04-27 Emc Corporation Method and apparatus for data set migration
JP4387261B2 (ja) * 2004-07-15 2009-12-16 株式会社日立製作所 計算機システム、および、記憶装置システムの移行方法
JP2006146476A (ja) * 2004-11-18 2006-06-08 Hitachi Ltd ストレージシステム及びストレージシステムのデータ移行方法
US8504521B2 (en) * 2005-07-28 2013-08-06 Gopivotal, Inc. Distributed data management system
JP4900784B2 (ja) * 2006-04-13 2012-03-21 株式会社日立製作所 ストレージシステム及びストレージシステムのデータ移行方法
US8407436B2 (en) * 2009-02-11 2013-03-26 Hitachi, Ltd. Methods and apparatus for migrating thin provisioning volumes between storage systems
US8122213B2 (en) * 2009-05-05 2012-02-21 Dell Products L.P. System and method for migration of data
CN103067433B (zh) * 2011-10-24 2016-04-20 阿里巴巴集团控股有限公司 一种分布式存储系统的数据迁移方法、设备和系统
US8965847B1 (en) * 2011-10-28 2015-02-24 Oxygen Cloud, Inc. Independent synchronization of file data and file metadata
JP5895099B2 (ja) * 2012-10-11 2016-03-30 株式会社日立製作所 移行先ファイルサーバ及びファイルシステム移行方法
US8904133B1 (en) * 2012-12-03 2014-12-02 Hitachi, Ltd. Storage apparatus and storage apparatus migration method
US10860529B2 (en) * 2014-08-11 2020-12-08 Netapp Inc. System and method for planning and configuring a file system migration
CN104778179B (zh) * 2014-01-14 2019-05-28 阿里巴巴集团控股有限公司 一种数据迁移测试方法和系统
US20150355862A1 (en) * 2014-06-04 2015-12-10 Pure Storage, Inc. Transparent array migration
CN106294387B (zh) * 2015-05-19 2020-06-02 深圳市腾讯计算机系统有限公司 数据迁移方法和装置
CN107704206B (zh) * 2017-10-09 2020-09-18 苏州浪潮智能科技有限公司 在线迁移异构系统数据的方法、装置、设备和存储介质
CN107656705B (zh) * 2017-10-25 2020-10-23 苏州浪潮智能科技有限公司 一种计算机存储介质和一种数据迁移方法、装置及系统
CN109189324B (zh) * 2018-07-09 2021-01-08 华为技术有限公司 一种数据迁移方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101105737A (zh) * 2006-07-11 2008-01-16 任永坚 存储介质处理方法、系统及数据读写操作方法、系统
CN105549904A (zh) * 2015-12-08 2016-05-04 华为技术有限公司 一种应用于存储系统中的数据迁移方法及存储设备
CN107577425A (zh) * 2017-08-23 2018-01-12 杭州宏杉科技股份有限公司 一种数据迁移方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
FY-2存储系统升级中的数据迁移方法研究;赵磊等;《气象水文海洋仪器》;20141215(第4期);第7-11页 *

Also Published As

Publication number Publication date
CN109189324A (zh) 2019-01-11
WO2020011038A1 (zh) 2020-01-16
EP3800538B1 (en) 2024-06-12
EP3800538A1 (en) 2021-04-07
US20210132849A1 (en) 2021-05-06
US11914881B2 (en) 2024-02-27
EP3800538A4 (en) 2021-08-04

Similar Documents

Publication Publication Date Title
CN109189324B (zh) 一种数据迁移方法及装置
CN107967140B (zh) 软件修改的发起方法、发布元数据的方法及装置
US8375383B2 (en) Rolling upgrades in distributed applications
CN109558212B (zh) 一种物理设备的虚拟化管理方法、系统、物理设备及介质
CN108234630A (zh) 基于分布式一致性协议实现的数据读取方法及装置
CN111221537A (zh) 云桌面升级方法、装置、云端服务器及存储介质
CN110262872B (zh) 负载均衡应用管理方法、装置、计算机设备及存储介质
CN103873290A (zh) 一种用于评估应用的性能的方法和系统
CN106775498B (zh) 一种缓存数据同步方法及系统
WO2018113571A1 (zh) 一种虚拟化网元的管理方法和装置及计算机存储介质
CN110138577B (zh) 集群创建方法、第一服务器以及可读存储介质
CN111274252A (zh) 一种区块链的数据上链方法、装置、存储介质和服务器
CN111782339A (zh) 一种容器创建方法、装置、电子设备及存储介质
CN112015595B (zh) 主从数据库的切换方法、计算设备及存储介质
CN114443058A (zh) 一种在公有云创建私有镜像的方法及相关设备
CN102769625A (zh) 客户端Cookie信息获取方法和装置
US8291406B2 (en) Data imaging system and methods
CN107547593B (zh) 一种实现日志同步的方法、装置及分布式系统
CN112069152A (zh) 一种数据库集群升级方法、装置、设备以及存储介质
CN111126604A (zh) 模型训练方法、装置、服务器及存储介质
CN114827177B (zh) 一种分布式文件系统的部署方法、装置及电子设备
CN114615263A (zh) 集群在线迁移方法、装置、设备及存储介质
CN110399157B (zh) 一种用于Ambari工具页面开发的方法和开发机
CN113656100A (zh) 接口切换方法、装置、电子装置及计算机程序产品
US10713121B1 (en) Dynamic migration of a cloud based distributed file system metadata server

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20220210

Address after: 550025 Huawei cloud data center, jiaoxinggong Road, Qianzhong Avenue, Gui'an New District, Guiyang City, Guizhou Province

Patentee after: Huawei Cloud Computing Technology Co.,Ltd.

Address before: 518129 Bantian HUAWEI headquarters office building, Longgang District, Guangdong, Shenzhen

Patentee before: HUAWEI TECHNOLOGIES Co.,Ltd.

TR01 Transfer of patent right