CN112860188A - 一种数据迁移方法、系统、设备以及介质 - Google Patents
一种数据迁移方法、系统、设备以及介质 Download PDFInfo
- Publication number
- CN112860188A CN112860188A CN202110176463.3A CN202110176463A CN112860188A CN 112860188 A CN112860188 A CN 112860188A CN 202110176463 A CN202110176463 A CN 202110176463A CN 112860188 A CN112860188 A CN 112860188A
- Authority
- CN
- China
- Prior art keywords
- data
- access heat
- data objects
- migration
- heat table
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000005012 migration Effects 0.000 title claims abstract description 85
- 238000013508 migration Methods 0.000 title claims abstract description 85
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000004044 response Effects 0.000 claims abstract description 19
- 238000004590 computer program Methods 0.000 claims description 8
- 230000008569 process Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 3
- 238000006467 substitution reaction Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/0604—Improving or facilitating administration, e.g. storage management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据迁移方法，包括以下步骤：在源卷中创建访问热度表；将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中；响应于接收到数据迁移的指令，获取所述访问热度表中数据对象的ID；根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。本发明还公开了一种系统、计算机设备以及可读存储介质。本发明提出的方案优先选择频繁访问的数据进行迁移，这样可以实现数据的分级迁移，缩短数据迁移的时间，减轻数据迁移对分布式存储中其他数据卷读写的影响，保证数据中心数据访问业务的高效正常运行。
Description
技术领域
本发明涉及数据迁移领域，具体涉及一种数据迁移方法、系统、设备以及存储介质。
背景技术
数据卷的迁移过程中会影响数据卷的正常读写，导致数据卷的读写IOPS和带宽下降。如果数据卷的数据量大，也会导致数据迁移的时间加长，从而导致数据卷的读写受到严重影响。目前，现有的研究主要集中在数据卷的迁移算法的实现，没有考虑数据迁移过程中对其它数据卷读写的影响，虽然可以实现数据卷的迁移，但对其他数据卷的读写影响较大。
发明内容
有鉴于此，为了克服上述问题的至少一个方面，本发明实施例提出一种数据迁移方法，包括以下步骤：
在源卷中创建访问热度表；
将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中；
响应于接收到数据迁移的指令，获取所述访问热度表中数据对象的ID；
根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中，根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中，进一步包括：
判断所述访问热度表中数据对象的ID的数量是否大于预设值；
响应于大于所述预设值，根据所述访问热度表中数据对象的ID进行迁移；
响应于不大于所述预设值，等待预设时间段，若访问热度表中数据对象的ID的数量在期间大于预设值或者所述预设时间段结束，根据所述访问热度表中数据对象的ID进行迁移。
在一些实施例中，还包括：
删除所述源卷中已经迁移到所述目标卷中的数据对象以及访问热度表中对应的ID；
响应于进行数据对象迁移后，所述访问热度表中数据对象的ID的数量再次大于预设值，再次根据所述访问热度表中当前的数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中，还包括：
响应于当前系统的资源利用率小于预设利用率，将所述源卷中剩余的数据对象迁移到所述目标卷中。
基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种数据迁移系统，包括：
创建模块，所述创建模块配置为在源卷中创建访问热度表；
记录模块，所述记录模块配置为将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中；
获取模块，所述获取模块配置为响应于接收到数据迁移的指令，获取所述访问热度表中数据对象的ID；
迁移模块，所述迁移模块配置为根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中，所述迁移模块还配置为：
判断所述访问热度表中数据对象的ID的数量是否大于预设值；
响应于大于所述预设值，根据所述访问热度表中数据对象的ID进行迁移；
响应于不大于所述预设值，等待预设时间段，若访问热度表中数据对象的ID的数量在期间大于预设值或者所述预设时间段结束，根据所述访问热度表中数据对象的ID进行迁移。
在一些实施例中，所述迁移模块还配置为：
删除所述源卷中已经迁移到所述目标卷中的数据对象以及访问热度表中对应的ID；
响应于进行数据对象迁移后，所述访问热度表中数据对象的ID的数量再次大于预设值，再次根据所述访问热度表中当前的数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中，还包括第二迁移模块，所述第二迁移模块配置为：
响应于当前系统的资源利用率小于预设利用率，将所述源卷中剩余的数据对象迁移到所述目标卷中。
基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种计算机设备，包括：
至少一个处理器；以及
存储器，所述存储器存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时执行如上所述的任一种数据迁移方法的步骤。
基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时执行如上所述的任一种数据迁移方法的步骤。
本发明具有以下有益技术效果之一：本发明提出的方案优先选择频繁访问的数据进行迁移，这样可以实现数据的分级迁移，缩短数据迁移的时间，减轻数据迁移对分布式存储中其他数据卷读写的影响，保证数据中心数据访问业务的高效正常运行。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的实施例。
图1为本发明的实施例提供的数据迁移方法的流程示意图；
图2为本发明的实施例提供的数据迁移系统的结构示意图；
图3为本发明的实施例提供的计算机设备的结构示意图；
图4为本发明的实施例提供的计算机可读存储介质的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白，以下结合具体实施例，并参照附图，对本发明实施例进一步详细说明。
需要说明的是，本发明实施例中所有使用“第一”和“第二”的表述均是为了区分两个相同名称非相同的实体或者非相同的参量，可见“第一”“第二”仅为了表述的方便，不应理解为对本发明实施例的限定，后续实施例对此不再一一说明。
根据本发明的一个方面，本发明的实施例提出一种数据迁移方法，如图1所示，其可以包括步骤：
S1，在源卷中创建访问热度表；
S2，将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中；
S3，响应于接收到数据迁移的指令，获取所述访问热度表中数据对象的ID；
S4，根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
本发明提出的方案优先选择频繁访问的数据进行迁移，这样可以实现数据的分级迁移，缩短数据迁移的时间，减轻数据迁移对分布式存储中其他数据卷读写的影响，保证数据中心数据访问业务的高效正常运行。
在一些实施例中，在步骤S1，在源卷中创建访问热度表中，具体的，访问热度表可以在创建卷初始化的时候创建，例如，可以在数据卷的元数据中添加新的数据结构——数据对象访问热度表，然后根据数据对象被访问的频率进行记录。
在一些实施例中，可以通过LRU算法对访问热度访问表进行添加和删除，以记录数据卷中频繁访问的数据对象。例如，当源卷中数据对象被访问时，记录数据对象ID，然后遍历数据对象访问热度表，数据对象ID是否存在，存在置换至表尾，不存在，则添加。如果数据对象访问热度表未满，直接添加；如果数据对象访问热度表已满，添加同时移除表中表头保存的数据对象ID。
在一些实施例中，可以设置数据优先迁移占比，表示优先迁移数据量占卷大小的比例，也即访问热度表的长度等于源卷中的数据对象个数乘以预先设置的优先迁移占比。这样，在后续进行迁移时，优先迁移设定占比的数据，使得在系统比较繁忙(即利用率大于阈值时)时，缩短数据迁移的时间，减轻数据迁移对分布式存储中其他数据卷读写的影响，保证数据中心数据访问业务的高效正常运行。
在一些实施例中，根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中，进一步包括：
判断所述访问热度表中数据对象的ID的数量是否大于预设值；
响应于大于所述预设值，根据所述访问热度表中数据对象的ID进行迁移；
响应于不大于所述预设值，等待预设时间段，若访问热度表中数据对象的ID的数量在期间大于预设值或者所述预设时间段结束，根据所述访问热度表中数据对象的ID进行迁移。
具体的，为了进一步减少数据迁移过程中对其他数据卷的影响，在迁移前可以判断访问热度表中数据对象的ID的数量是否大于预设值，如果大于预设值则在进行迁移，如果不大于，则可以启动计时器，若持续不大于预设值的时间达到时间阈值，则直接进行数据迁移，以避免长时间无法进行数据迁移。
在一些实施例中，还包括：
删除所述源卷中已经迁移到所述目标卷中的数据对象以及访问热度表中对应的ID；
响应于进行数据对象迁移后，所述访问热度表中数据对象的ID的数量再次大于预设值，再次根据所述访问热度表中当前的数据对象的ID将对应的数据对象迁移到目标卷中。
具体的，可以预先设置迁移参数，例如迁移次数或者时间段，只要当前迁移次数小于设置的迁移次数，或者迁移持续时间小于设置的时间段，则在进行一次数据对象迁移后，当访问热度表中的数据对象ID的数量再次大于预设值后，在再次根据所述访问热度表中当前的数据对象的ID对应的数据对象迁移到目标卷中。这样，可以保证源卷中被频繁访问的数据对象及时迁移到目标卷中。
在一些实施例中，当接收到迁移指令后，可以将源卷和目标卷的状态更新为MIGRATION_STATE_EXECUTING，当达到预设的迁移次数或达到设置的时间段后，利用利用CopyUP机制将源卷的数据迁移至目标卷。在迁移过程中，当对目标卷的数据对象进行读时，如果目标卷的数据对象不存在，读取源卷的数据对象，反之，读取目标卷的数据对象；当对目标卷的数据对象进行写时，如果目标卷的数据对象不存在，读取源卷数据对象保存至目标卷，然后对目标卷的数据对象进行写操作，反之，直接对目标卷的数据对象进行写操作。
在一些实施例中，还包括：
响应于当前系统的资源利用率小于预设利用率，将所述源卷中剩余的数据对象迁移到所述目标卷中。
具体的，当系统处于非繁忙时段，可以再次下发迁移指令，将源卷中剩余的数据对象迁移到目标卷中。
本发明提出的方案优先选择频繁访问的数据进行迁移，这样可以实现数据的分级迁移，缩短数据迁移的时间，减轻数据迁移对分布式存储中其他数据卷读写的影响，保证数据中心数据访问业务的高效正常运行。最后在系统处于空闲状态下时，对非频繁访问的数据进行后续迁移。
基于同一发明构思，根据本发明的另一个方面，本发明的实施例还提供了一种数据迁移系统400，如图2所示，包括：
创建模块401，所述创建模块401配置为在源卷中创建访问热度表；
记录模块402，所述记录模块402配置为将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中；
获取模块403，所述获取模块403配置为响应于接收到数据迁移的指令，获取所述访问热度表中数据对象的ID；
迁移模块404，所述迁移模块404配置为根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中，所述迁移模块404还配置为：
判断所述访问热度表中数据对象的ID的数量是否大于预设值；
响应于大于所述预设值，根据所述访问热度表中数据对象的ID进行迁移；
响应于不大于所述预设值，等待预设时间段，若访问热度表中数据对象的ID的数量在期间大于预设值或者所述预设时间段结束，根据所述访问热度表中数据对象的ID进行迁移。
在一些实施例中，所述迁移模块还配置为：
删除所述源卷中已经迁移到所述目标卷中的数据对象以及访问热度表中对应的ID；
响应于进行数据对象迁移后，所述访问热度表中数据对象的ID的数量再次大于预设值，再次根据所述访问热度表中当前的数据对象的ID将对应的数据对象迁移到目标卷中。
在一些实施例中，还包括第二迁移模块，所述第二迁移模块配置为：
响应于当前系统的资源利用率小于预设利用率，将所述源卷中剩余的数据对象迁移到所述目标卷中。
基于同一发明构思，根据本发明的另一个方面，如图3所示，本发明的实施例还提供了一种计算机设备501，包括：
至少一个处理器520；以及
存储器510，存储器510存储有可在处理器上运行的计算机程序511，处理器520执行程序时执行如上的任一种数据迁移方法的步骤。
基于同一发明构思，根据本发明的另一个方面，如图4所示，本发明的实施例还提供了一种计算机可读存储介质601，计算机可读存储介质601存储有计算机程序指令610，计算机程序指令610被处理器执行时执行如上的任一种数据迁移方法的步骤。
最后需要说明的是，本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关硬件来完成，程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。
此外，应该明白的是，本文的计算机可读存储介质(例如，存储器)可以是易失性存储器或非易失性存储器，或者可以包括易失性存储器和非易失性存储器两者。
本领域技术人员还将明白的是，结合这里的公开所描述的各种示例性逻辑块、模块、电路和算法步骤可以被实现为电子硬件、计算机软件或两者的组合。为了清楚地说明硬件和软件的这种可互换性，已经就各种示意性组件、方块、模块、电路和步骤的功能对其进行了一般性的描述。这种功能是被实现为软件还是被实现为硬件取决于具体应用以及施加给整个系统的设计约束。本领域技术人员可以针对每种具体应用以各种方式来实现的功能，但是这种实现决定不应被解释为导致脱离本发明实施例公开的范围。
以上是本发明公开的示例性实施例，但是应当注意，在不背离权利要求限定的本发明实施例公开的范围的前提下，可以进行多种改变和修改。根据这里描述的公开实施例的方法权利要求的功能、步骤和/或动作不需以任何特定顺序执行。此外，尽管本发明实施例公开的元素可以以个体形式描述或要求，但除非明确限制为单数，也可以理解为多个。
应当理解的是，在本文中使用的，除非上下文清楚地支持例外情况，单数形式“一个”旨在也包括复数形式。还应当理解的是，在本文中使用的“和/或”是指包括一个或者一个以上相关联地列出的项目的任意和所有可能组合。
上述本发明实施例公开实施例序号仅仅为了描述，不代表实施例的优劣。
本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。
所属领域的普通技术人员应当理解：以上任何实施例的讨论仅为示例性的，并非旨在暗示本发明实施例公开的范围(包括权利要求)被限于这些例子；在本发明实施例的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，并存在如上的本发明实施例的不同方面的许多其它变化，为了简明它们没有在细节中提供。因此，凡在本发明实施例的精神和原则之内，所做的任何省略、修改、等同替换、改进等，均应包含在本发明实施例的保护范围之内。
Claims (10)
1.一种数据迁移方法，其特征在于，包括以下步骤：
在源卷中创建访问热度表；
将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中；
响应于接收到数据迁移的指令，获取所述访问热度表中数据对象的ID；
根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
2.如权利要求1所述的方法，其特征在于，根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中，进一步包括：
判断所述访问热度表中数据对象的ID的数量是否大于预设值；
响应于大于所述预设值，根据所述访问热度表中数据对象的ID进行迁移；
响应于不大于所述预设值，等待预设时间段，若访问热度表中数据对象的ID的数量在期间大于预设值或者所述预设时间段结束，根据所述访问热度表中数据对象的ID进行迁移。
3.如权利要求2所述的方法，其特征在于，还包括：
删除所述源卷中已经迁移到所述目标卷中的数据对象以及访问热度表中对应的ID；
响应于进行数据对象迁移后，所述访问热度表中数据对象的ID的数量再次大于预设值，再次根据所述访问热度表中当前的数据对象的ID将对应的数据对象迁移到目标卷中。
4.如权利要求3所述的方法，其特征在于，还包括：
响应于当前系统的资源利用率小于预设利用率，将所述源卷中剩余的数据对象迁移到所述目标卷中。
5.一种数据迁移系统，其特征在于，包括：
创建模块，所述创建模块配置为在源卷中创建访问热度表；
记录模块，所述记录模块配置为将所述源卷中被访问频率大于阈值的数据对象对应的ID记录到所述访问热度表中；
获取模块，所述获取模块配置为响应于接收到数据迁移的指令，获取所述访问热度表中数据对象的ID；
迁移模块，所述迁移模块配置为根据所述访问热度表中数据对象的ID将对应的数据对象迁移到目标卷中。
6.如权利要求5所述的系统，其特征在于，所述迁移模块还配置为：
判断所述访问热度表中数据对象的ID的数量是否大于预设值；
响应于大于所述预设值，根据所述访问热度表中数据对象的ID进行迁移；
响应于不大于所述预设值，等待预设时间段，若访问热度表中数据对象的ID的数量在期间大于预设值或者所述预设时间段结束，根据所述访问热度表中数据对象的ID进行迁移。
7.如权利要求6所述的系统，其特征在于，所述迁移模块还配置为：
删除所述源卷中已经迁移到所述目标卷中的数据对象以及访问热度表中对应的ID；
响应于进行数据对象迁移后，所述访问热度表中数据对象的ID的数量再次大于预设值，再次根据所述访问热度表中当前的数据对象的ID将对应的数据对象迁移到目标卷中。
8.如权利要求7所述的系统，其特征在于，还包括第二迁移模块，所述第二迁移模块配置为：
响应于当前系统的资源利用率小于预设利用率，将所述源卷中剩余的数据对象迁移到所述目标卷中。
9.一种计算机设备，包括：
至少一个处理器；以及
存储器，所述存储器存储有可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时执行如权利要求1-4任意一项所述的方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时执行如权利要求1-4任意一项所述的方法的步骤。
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110176463.3A CN112860188A (zh) | 2021-02-09 | 2021-02-09 | 一种数据迁移方法、系统、设备以及介质 |
| PCT/CN2022/074431 WO2022171000A1 (zh) | 2021-02-09 | 2022-01-27 | 一种数据迁移方法、系统、设备以及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110176463.3A CN112860188A (zh) | 2021-02-09 | 2021-02-09 | 一种数据迁移方法、系统、设备以及介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112860188A true CN112860188A (zh) | 2021-05-28 |
Family
ID=75989449
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110176463.3A Pending CN112860188A (zh) | 2021-02-09 | 2021-02-09 | 一种数据迁移方法、系统、设备以及介质 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN112860188A (zh) |
| WO (1) | WO2022171000A1 (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114153817A (zh) * | 2021-11-29 | 2022-03-08 | 平安壹账通云科技(深圳)有限公司 | 业务数据自动化迁移方法、装置、设备及存储介质 |
| WO2022171000A1 (zh) * | 2021-02-09 | 2022-08-18 | 山东英信计算机技术有限公司 | 一种数据迁移方法、系统、设备以及介质 |
| CN117591039A (zh) * | 2024-01-18 | 2024-02-23 | 济南浪潮数据技术有限公司 | 分布式存储方法、系统、设备及介质 |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101079902A (zh) * | 2007-06-29 | 2007-11-28 | 清华大学 | 海量数据分级存储方法 |
| CN102510390A (zh) * | 2011-09-28 | 2012-06-20 | 北京飞杰信息技术有限公司 | 利用硬盘温度自检测指导数据迁移的方法和装置 |
| CN103078933A (zh) * | 2012-12-29 | 2013-05-01 | 深圳先进技术研究院 | 一种确定数据迁移时机的方法和装置 |
| CN103106047A (zh) * | 2013-01-29 | 2013-05-15 | 浪潮(北京)电子信息产业有限公司 | 一种基于对象的存储系统及其存储方法 |
| CN105653591A (zh) * | 2015-12-22 | 2016-06-08 | 浙江中控研究院有限公司 | 一种工业实时数据分级存储及迁移方法 |
| CN109471836A (zh) * | 2018-11-01 | 2019-03-15 | 浪潮电子信息产业股份有限公司 | 一种数据迁移方法、装置和系统 |
| CN110175163A (zh) * | 2019-05-24 | 2019-08-27 | 江西尚通科技发展股份有限公司 | 基于业务功能智能解析的多库分离方法、系统及介质 |
| CN110399100A (zh) * | 2019-07-05 | 2019-11-01 | 苏州浪潮智能科技有限公司 | 一种迁移处理的方法、装置、计算机存储介质及终端 |
| CN111124304A (zh) * | 2019-12-19 | 2020-05-08 | 北京浪潮数据技术有限公司 | 一种数据迁移方法、装置及电子设备和存储介质 |
| CN112015347A (zh) * | 2020-08-28 | 2020-12-01 | 北京浪潮数据技术有限公司 | 一种数据迁移方法、装置及相关设备 |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2010257094A (ja) * | 2009-04-23 | 2010-11-11 | Hitachi Ltd | 階層ストレージ管理システムにおける移動候補ファイルの抽出方法 |
| JP6028415B2 (ja) * | 2012-06-28 | 2016-11-16 | 日本電気株式会社 | 仮想サーバ環境のデータ移行制御装置、方法、システム |
| CN102882928A (zh) * | 2012-08-31 | 2013-01-16 | 浪潮电子信息产业股份有限公司 | 一种云存储系统的分级存储管理方法 |
| CN104462240A (zh) * | 2014-11-18 | 2015-03-25 | 浪潮(北京)电子信息产业有限公司 | 云存储中实现分级存储管理的方法和系统 |
| CN105892952A (zh) * | 2016-04-22 | 2016-08-24 | 深圳市深信服电子科技有限公司 | 超融合系统及其纵向扩展方法 |
| US10042578B2 (en) * | 2016-11-08 | 2018-08-07 | International Business Machines Corporation | Extent migration in multi-tier storage systems |
| CN112860188A (zh) * | 2021-02-09 | 2021-05-28 | 山东英信计算机技术有限公司 | 一种数据迁移方法、系统、设备以及介质 |
-
2021
- 2021-02-09 CN CN202110176463.3A patent/CN112860188A/zh active Pending
-
2022
- 2022-01-27 WO PCT/CN2022/074431 patent/WO2022171000A1/zh active Application Filing
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101079902A (zh) * | 2007-06-29 | 2007-11-28 | 清华大学 | 海量数据分级存储方法 |
| CN102510390A (zh) * | 2011-09-28 | 2012-06-20 | 北京飞杰信息技术有限公司 | 利用硬盘温度自检测指导数据迁移的方法和装置 |
| CN103078933A (zh) * | 2012-12-29 | 2013-05-01 | 深圳先进技术研究院 | 一种确定数据迁移时机的方法和装置 |
| CN103106047A (zh) * | 2013-01-29 | 2013-05-15 | 浪潮(北京)电子信息产业有限公司 | 一种基于对象的存储系统及其存储方法 |
| CN105653591A (zh) * | 2015-12-22 | 2016-06-08 | 浙江中控研究院有限公司 | 一种工业实时数据分级存储及迁移方法 |
| CN109471836A (zh) * | 2018-11-01 | 2019-03-15 | 浪潮电子信息产业股份有限公司 | 一种数据迁移方法、装置和系统 |
| CN110175163A (zh) * | 2019-05-24 | 2019-08-27 | 江西尚通科技发展股份有限公司 | 基于业务功能智能解析的多库分离方法、系统及介质 |
| CN110399100A (zh) * | 2019-07-05 | 2019-11-01 | 苏州浪潮智能科技有限公司 | 一种迁移处理的方法、装置、计算机存储介质及终端 |
| CN111124304A (zh) * | 2019-12-19 | 2020-05-08 | 北京浪潮数据技术有限公司 | 一种数据迁移方法、装置及电子设备和存储介质 |
| CN112015347A (zh) * | 2020-08-28 | 2020-12-01 | 北京浪潮数据技术有限公司 | 一种数据迁移方法、装置及相关设备 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2022171000A1 (zh) * | 2021-02-09 | 2022-08-18 | 山东英信计算机技术有限公司 | 一种数据迁移方法、系统、设备以及介质 |
| CN114153817A (zh) * | 2021-11-29 | 2022-03-08 | 平安壹账通云科技(深圳)有限公司 | 业务数据自动化迁移方法、装置、设备及存储介质 |
| CN117591039A (zh) * | 2024-01-18 | 2024-02-23 | 济南浪潮数据技术有限公司 | 分布式存储方法、系统、设备及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2022171000A1 (zh) | 2022-08-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112860188A (zh) | 一种数据迁移方法、系统、设备以及介质 | |
| RU2671049C2 (ru) | Выгрузка в файловой системе | |
| CN108647151A (zh) | 一种全闪系统元数据落盘方法、装置、设备及存储介质 | |
| TW201520889A (zh) | 混合儲存的控制方法及混合儲存系統 | |
| CN107704203B (zh) | 聚合大文件的删除方法、装置、设备及计算机存储介质 | |
| CN107807797B (zh) | 数据写入的方法、装置及服务器 | |
| CN111881135A (zh) | 一种数据聚合方法、装置、设备及计算机可读存储介质 | |
| CN111208934B (zh) | 一种数据存储方法及装置 | |
| CN101763433B (zh) | 一种数据存储系统及方法 | |
| US11289115B1 (en) | Copying a storage tape | |
| CN113282249B (zh) | 一种数据处理方法、系统、设备以及介质 | |
| CN113608695A (zh) | 一种数据处理方法、系统、设备以及介质 | |
| CN109558456A (zh) | 一种文件迁移方法、装置、设备及可读存储介质 | |
| US9395930B2 (en) | Information processing system, control method of information processing system, and recording medium | |
| CN112463073A (zh) | 一种对象存储分布式配额方法、系统、设备和存储介质 | |
| CN106844491B (zh) | 一种临时数据的写入、读取方法及写入、读取装置 | |
| CN111625203A (zh) | 一种分级存储的方法、系统、设备及介质 | |
| CN115114232A (zh) | 一种历史版本对象列举方法、装置及其介质 | |
| CN105808451B (zh) | 一种数据缓存方法以及相关装置 | |
| CN110955639A (zh) | 一种数据处理方法及装置 | |
| KR20150103886A (ko) | 파이프라인 실행 가속을 위한 데이터 처리 장치 및 그 방법 | |
| CN112000971B (zh) | 一种文件权限记录方法、系统及相关装置 | |
| CN115904263B (zh) | 一种数据迁移方法、系统、设备及计算机可读存储介质 | |
| CN112486831A (zh) | 一种测试系统、方法、电子设备及存储介质 | |
| CN115794446B (zh) | 一种消息处理方法、装置、电子设备和存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210528 |
|
| RJ01 | Rejection of invention patent application after publication |