CN106598501B - 用于存储自动分层的数据迁移设备及方法 - Google Patents
用于存储自动分层的数据迁移设备及方法 Download PDFInfo
- Publication number
- CN106598501B CN106598501B CN201611169228.9A CN201611169228A CN106598501B CN 106598501 B CN106598501 B CN 106598501B CN 201611169228 A CN201611169228 A CN 201611169228A CN 106598501 B CN106598501 B CN 106598501B
- Authority
- CN
- China
- Prior art keywords
- data
- layer
- migration
- sas
- data block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000013508 migration Methods 0.000 title claims abstract description 96
- 230000005012 migration Effects 0.000 title claims abstract description 96
- 238000013316 zoning Methods 0.000 title claims abstract description 22
- 238000000034 method Methods 0.000 title claims abstract description 20
- 238000003860 storage Methods 0.000 claims abstract description 36
- 238000004458 analytical method Methods 0.000 claims abstract description 21
- 238000009825 accumulation Methods 0.000 claims description 22
- 238000012545 processing Methods 0.000 claims description 12
- 238000011156 evaluation Methods 0.000 claims description 5
- 238000000151 deposition Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 4
- 238000005096 rolling process Methods 0.000 abstract description 3
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 4
- 238000004590 computer program Methods 0.000 description 2
- 238000007405 data analysis Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 238000013439 planning Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000004064 recycling Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
- G06F3/061—Improving I/O performance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
- G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
- G06F3/0647—Migration mechanisms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
- G06F3/0601—Interfaces specially adapted for storage systems
- G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
- G06F3/0671—In-line storage system
- G06F3/0683—Plurality of storage devices
- G06F3/0685—Hybrid storage combining heterogeneous device types, e.g. hierarchical storage, hybrid arrays
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供一种用于存储自动分层的数据迁移设备及方法，以固定的时间为一个周期，对卷内数据I/O的活动性和延迟程度进行监控和分析，这个日志分析可以把卷中的所有数据进行I/O分析，并按照这个卷的存储层数有效的分配数据是否需要迁移、并且需要迁移到哪个数据层，一次性分析到位，并按照分析结果执行有效的数据迁移。
Description
技术领域
本发明涉及数据存储领域，具体涉及存储自动分层的数据迁移。
背景技术
随着企业环境规模庞大，存储系统必须服务数量众多的主机与应用程序，面对数量众多、且会随时间变化的前端主机应用程序，为了让储存资源维持在最佳配置，将必须持续追踪各主机应用程序的I/O负载变化，并针对I/O负载变化，频繁地调整储存配置，这将带来非常庞大的管理作业负担。
自动分层可以看作一种对性能优化的功能，这项功能可以自动将卷中的数据块在不同的存储层之间进行迁移。现有的方案中，以指定时间为一个周期，自动分层会对使用这项功能的卷进行I/O操作的活动性和延迟程度进行监控，基于这份性能日志，分层算法会生产一个迁移计划，动态地将活跃度高的热点数据块迁移到高性能的NL-SAS＞SAS＞SSD的存储层，这个过程是在一个存储资源池中进行的。反过来，将冷数据下移也是同样的逆向过程。
但在实现存储分层的数据块迁移时，只能实现相邻速率硬盘之间的数据迁移，如NL-SAS硬盘层数据与SAS硬盘层之间的数据迁移，但是不能实现跨存储层的数据迁移，如NL-SAS硬盘层数据与SSD硬盘层之间不可以实现数据迁移。在设备规划过程中，如需使用此功能，就必须要考虑可以实现此功能的硬盘层，并且根据支持的硬盘类型来选择购买硬盘，这样在前期的设备规划时需要全面考虑，增加成本，也对后期的硬盘重复利用造成一定的影响。
发明内容
为解决上述技术问题，本发明的技术方案如下：
本发明提供一种用于存储自动分层的数据迁移设备，其用于实施存储自动分层的数据迁移的存储系统中，存储系统包括LUN以及存储管理器，LUN是由3个存储层组成：SSD数据层、SAS数据层、NL-SAS数据层，存储管理器从LUN的3个存储层中采集数据，并产生迁移策略控制SSD数据层、SAS数据层、NL-SAS数据层之间的数据块的迁移，其特征在于：存储管理器包括数据采集模块、数据处理模块、决策产生模块，数据采集模块可收集LUN的3个存储层的信息，数据处理模块基于从所收集的信息进行分析，并生成第一个最终的性能日志分析表，决策产生模块按照性能日志分析表为在LUN中的数据块做出迁移策略，由决策产生模块做出的迁移策略可引导SSD数据层、SAS数据层、NL-SAS数据层中的一个或多个层将一个或多个数据块存储、移动或复制到指定存储层。
进一步的，其中数据采集模块在不影响前端业务正常使用的前提下，定期地收集存储在一个或多个存储层中的数据块的信息，收集的信息包括访问量和延迟。
进一步的，其中数据处理模块根据收集的信息，在后端自动分析该些信息，在周期内，对数据块的访问量和延迟进行分析，并保存日志；数据处理模块还对所有的数据块性能分析按照从高到低的顺序进行排序，周期时间截止并且分析完毕以后，就会生成第一个最终的性能日志分析表。
进一步的，其中决策产生模块按照现有不同存储层数据块数量进行分类，性能日志分析表中的前Ma个数据块放至SSD数据层，第Ma+1至第Ma+Mb个数据块放至SAS数据层，第Ma+Mb+1至Ma+Mb+Mc个数据块放至NL-SAS数据层，其中Ma为当前SSD数据层的数据块数量、Mb当前SAS数据层的数据块数量，Mc当前NL-SAS数据层的数据块数量。
进一步的，其中LUN中各数据层中的数据块按照迁移策略进行数据块的迁移，数据块迁移包括相邻层的数据迁移以及跨层数据迁移，迁移策略包括：热数据上升-相邻层、热数据上升-跨层、冷数据下降-相邻层、冷数据下降-跨层。
本发明还提供一种用于部署大规模集群文件系统的方法，步骤如下：一种用于存储自动分层的数据迁移方法，步骤如下：
SS1：采集数据；
SS2：分析数据，并保存日志；
SS3：生成第一个最终的性能日志分析表；
SS4：按照性能日志分析表产生迁移策略；
SS5：按照迁移策略进行数据块的迁移。
进一步的，步骤SS1具体为：在不影响前端业务正常使用的前提下，定期地收集存储在一个或多个存储层中的数据块的信息，收集的信息包括但不限于访问量和延迟；步骤SS2具体为：根据收集的信息，在后端自动分析该些信息，在周期内，对数据块的访问量和延迟进行分析，并保存日志。
进一步的，步骤SS3具体为：对所有的数据块性能分析按照从高到低的顺序进行排序，周期时间截止并且分析完毕以后，就会生成第一个最终的性能日志分析表。
进一步的，步骤SS4具体为：按照现有不同存储层数据块数量进行分类，性能日志分析表中的前Ma个数据块放至SSD数据层，第Ma+1至第Ma+Mb个数据块放至SAS数据层，第Ma+Mb+1至Ma+Mb+Mc个数据块放至NL-SAS数据层，其中Ma为当前SSD数据层的数据块数量、Mb当前SAS数据层的数据块数量，Mc当前NL-SAS数据层的数据块数量。
进一步的，步骤SS5具体为：按照步骤SS4得到的迁移策略进行数据块的迁移，数据块迁移包括相邻层的数据迁移以及跨层数据迁移，迁移策略包括：热数据上升-相邻层、热数据上升-跨层、冷数据下降-相邻层、冷数据下降-跨层。
通过本发明的方案可以实现跨存储层的数据块迁移，即NL-SAS硬盘层与SSD硬盘层之间可以实现数据块的迁移。自动分层功能是以固定的时间为一个周期，对卷内数据I/O的活动性和延迟程度进行监控和分析，这个日志分析可以把卷中的所有数据进行I/O分析，并按照这个卷的存储层数有效的分配数据是否需要迁移、并且需要迁移到哪个数据层，一次性分析到位，并按照分析结果执行有效的数据迁移。实现这个功能需要提高数据分析和计算的能力，并且能够实现数据迁移一步到位。
附图说明
图1示出实现存储自动分层的数据迁移实施方案的示例性存储系统框图。
图2示出本发明的存储管理器结构框图。
图3示出本发明的自动分层数据迁移示意图。
图4示出本发明的自动分层数据迁移方法流程图。
具体实施方式
以下结合说明书附图及具体实施例进一步说明本发明的技术方案。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
如图1所示，实现存储自动分层的数据迁移实施方案的示例性存储系统包括LUN以及存储管理器，LUN是由3个存储层组：SSD数据层、SAS数据层、NL-SAS数据层，存储管理器从LUN的3个存储层中采集数据，并产生迁移策略控制SSD数据层、SAS数据层、NL-SAS数据层之间的数据块的迁移。
如图2所示，存储管理器包括数据采集模块、数据处理模块、决策产生模块，数据采集模块可收集LUN的3个存储层的信息，包括但不限于各存储层数据块的访问量和延迟，数据处理模块基于从所收集的信息进行分析，并生成第一个最终的性能日志分析表，决策产生模块按照性能日志分析表为在LUN中的数据块做出迁移策略。由决策产生模块做出的迁移策略可引导SSD数据层、SAS数据层、NL-SAS数据层中的一个或多个层将一个或多个数据块存储、移动或复制到指定存储层。
数据采集模块可在不影响前端业务正常使用的前提下，定期地收集存储在一个或多个存储层中的数据块的信息，数据块分析的周期可进行设置，如每24小时，收集的信息包括但不限于访问量和延迟。
数据处理模块根据采集模块收集的信息，在后端自动分析该些信息，在这个24小时周期内，对数据块的访问量和延迟进行分析，并保存日志，对所有的数据块性能分析按照从高到低的顺序进行排序，周期时间截止并且分析完毕以后，就会生成第一个最终的性能日志分析表。
决策产生模块按照现有不同存储层数据块数量进行分类，性能日志分析表中的前Ma个数据块放至SSD数据层，第Ma+1至第Ma+Mb个数据块放至SAS数据层，第Ma+Mb+1至Ma+Mb+Mc个数据块放至NL-SAS数据层，其中Ma为当前SSD数据层的数据块数量、Mb当前SAS数据层的数据块数量，Mc当前NL-SAS数据层的数据块数量。
如SSD层数据块数量为10W个、SAS层数据块数量为100W个、NL-SAS层数据块数量为200W个，那么决策产生模块从高到低的排序数据块性能时需要按照这个数量分开数据层，并最终产生数据块迁移策略，性能日志分析表中的前10W个数据块放至SSD数据层，性能日志分析表中的第(10W+1)-第(10W+100W)个数据块放至SAS数据层，性能日志分析表中的第(10W+100W+1)-第(10W+100W+200W)个数据块放至NL-SAS数据层，。
假设当前数据块A位于SSD数据层，在此阶段中，如果数据块A在性能日志分析表中的位置位于前10W个，那么决策产生模块则将数据块A留在SSD数据层上；如果在此阶段中，数据块A在性能日志分析表中的位置位于第(10W+1)至第(10W+100W)个之间，那么决策产生模块则将数据块A迁移至SAS数据层；如果在此阶段中，数据块A在性能日志分析表中的位置位于第(10W+100W+1)至第(10W+100W+200W)个之间，那么决策产生模块则将数据块A迁移至NL-SAS数据层。
如图3示出自动分层数据迁移示意图，其中的数据块迁移包括相邻层的数据迁移以及跨层数据迁移。
例如当前数据块B位于NL-SAS数据层，如果在一周期后，基于性能日志分析表中的位置应留在NL-SAS数据层，则该数据块B则不进行迁移；如果在一周期后，基于性能日志分析表中的位置应迁移至SAS数据层，则该数据块B则按照″热数据上升-相邻层″的策略迁移至SAS数据层；如果在一周期后，基于性能日志分析表中的位置应迁移至SSD数据层，则该数据块B则按照″热数据上升-跨层″的策略迁移至SSD数据层。
例如当前数据块C位于SAS数据层，如果在一周期后，基于性能日志分析表中的位置应留在SAS数据层，则该数据块C则不进行迁移；如果在一周期后，基于性能日志分析表中的位置应迁移至NL-SAS数据层，则该数据块C则按照″冷数据下降-相邻层″的策略迁移至NL-SAS数据层；如果在一周期后，基于性能日志分析表中的位置应迁移至SSD数据层，则该数据块B则按照″热数据上升-相邻层″的策略迁移至SSD数据层。
例如当前数据块D位于SSD数据层，如果在一周期后，基于性能日志分析表中的位置应留在SSD数据层，则该数据块D则不进行迁移；如果在一周期后，基于性能日志分析表中的位置应迁移至NL-SAS数据层，则该数据块D则按照″冷数据下降-跨层″的策略迁移至NL-SAS数据层；如果在一周期后，基于性能日志分析表中的位置应迁移至SAS数据层，则该数据块D则按照″冷数据下降-相邻层″的策略迁移至SAS数据层。
此外本发明还提供一种用于存储自动分层的数据迁移方法。
如图4所示，用于存储自动分层的数据迁移方法步骤如下：
SS1：采集数据；
SS2：分析数据，并保存日志；
SS3：生成第一个最终的性能日志分析表；
SS4：按照性能日志分析表产生迁移策略；
SS5：按照迁移策略进行数据块的迁移。
步骤SS1具体为：在不影响前端业务正常使用的前提下，定期地收集存储在一个或多个存储层中的数据块的信息，收集的信息包括但不限于访问量和延迟。
步骤SS2具体为：根据收集的信息，在后端自动分析该些信息，在周期内，对数据块的访问量和延迟进行分析，并保存日志。
步骤SS3具体为：对所有的数据块性能分析按照从高到低的顺序进行排序，周期时间截止并且分析完毕以后，就会生成第一个最终的性能日志分析表。
步骤SS4具体为：按照现有不同存储层数据块数量进行分类，性能日志分析表中的前Ma个数据块放至SSD数据层，第Ma+1至第Ma+Mb个数据块放至SAS数据层，第Ma+Mb+1至Ma+Mb+Mc个数据块放至NL-SAS数据层，其中Ma为当前SSD数据层的数据块数量、Mb当前SAS数据层的数据块数量，Mc当前NL-SAS数据层的数据块数量。
步骤SS5具体为：按照步骤SS4得到的迁移策略进行数据块的迁移，数据块迁移包括相邻层的数据迁移以及跨层数据迁移，迁移策略包括：热数据上升-相邻层、热数据上升-跨层、冷数据下降-相邻层、冷数据下降-跨层。具体的迁移策略如图3所示。
通过本发明的方案可以实现跨存储层的数据块迁移，即NL-SAS硬盘层与SSD硬盘层之间可以实现数据块的迁移。自动分层功能是以固定的时间为一个周期，对卷内数据I/O的活动性和延迟程度进行监控和分析，这个日志分析可以把卷中的所有数据进行I/O分析，并按照这个卷的存储层数有效的分配数据是否需要迁移、并且需要迁移到哪个数据层，一次性分析到位，并按照分析结果执行有效的数据迁移。实现这个功能需要提高数据分析和计算的能力，并且能够实现数据迁移一步到位。
此外本发明对业务的性能优化以及存储系统的处理能力方面有很大的优势：
(1)根据对数据IO的性能要求，对数据块进行调整，提高了前端业务的性能，并且可以根据业务不同时间的需求，进行数据块的调整；
(2)合理调整对不同性能磁盘的使用，在购买硬盘前不用再考虑硬盘之间是否可以支持自动分层功能；
(3)在指定的周期内，对整个LUN的所有数据块进行分析并一次性调整，避免了相邻层之间调整不合适，需要在下个周期内继续调整并迁移的压力。
尽管在装置的上下文中已描述了一些方面，但明显的是这些方面也表示对应方法的描述，其中块或设备与方法步骤或方法步骤的特征相对应。类似地，在方法步骤的上下文中所描述的各方面也表示对应的块或项目或者对应装置的特征的描述。可以通过(或使用)如微处理器、可编程计算机、或电子电路之类的硬件装置来执行方法步骤中的一些或所有。可以通过此类装置来执行最重要的方法步骤中的某一个或多个。
所述实现可以采用硬件或采用软件或可以使用例如软盘、DVD、蓝光、CD、ROM、PROM、EPROM、EEPROM、或闪存之类的具有被存储在其上的电子可读控制信号的数字存储介质来执行，所述电子可读控制信号与可编程计算机系统配合(或能够与其配合)以使得执行相应的方法。可以提供具有电子可读控制信号的数据载体，所述电子可读控制信号能够与可编程计算机系统配合以使得执行本文所描述的方法。
所述实现还可以采用具有程序代码的计算机程序产品的形式，当计算机程序产品在计算机上运行时，程序代码进行操作以执行该方法。可以在机器可读载体上存储程序代码。
以上所描述的仅是说明性，并且要理解的是，本文所描述的布置和细节的修改和变化对于本领域技术人员而言将是明显的。因此，意在仅由所附权利要求的范围而不是由通过以上描述和解释的方式所呈现的特定细节来限制。
Claims (4)
1.一种用于存储自动分层的数据迁移设备，其用于实施存储自动分层的数据迁移的存储系统中，存储系统包括LUN以及存储管理器，LUN是由3个存储层 组成：SSD数据层、SAS数据层、NL-SAS数据层，存储管理器从LUN的3个存储层中采集数据，并产生迁移策略控制SSD数据层、SAS数据层、NL-SAS 数据层之间的数据块的迁移，其特征在于：存储管理器包括数据采集模块、数据处理模块、决策产生模块，数据采集模块可收集LUN的3个存储层的信息，数据处理模块基于从所收集的信息进行分析，并生成第一个最终的性能日志分析表，决策产生模块按照性能日志分析表为在lun中的数据块做出迁移策略，由决策产生模块做出的迁移策略可引导SSD数据层SAS数据层、NL-SAS数据层中的一个或多个层将一个或多个数据块存储、移动或复制到指定存储层；
其中数据采集模块在不影响前端业务正常使用的前提下，定期地收集存储在一个或多个存储层中的数据块的信息，收集的信息包括访问量和延迟；数据处理模块根据收集的信息，在后端自动分析该些信息，在周期内，对数据块的访问量和延迟进行分析，并保存日志；
其中数据处理模块还对所有的数据块性能分析按照从高到低的顺序进行排序，周期时间截止并且分析完毕以后, 就会生成第一个最终的性能日志分析表；
其中决策产生模块按照现有不同存储层数据块数量进行分类，性能日志分析表中的前Ma个数据块放至SSD数 据层，第Ma+1至第 Ma+Mb个数据块放至SAS数据层，第Ma+Mb+1至 Ma+Mb+Mc个数据块放至NL-SAS数据层，其中Ma为当前SSD数据层的数据 块数量、Mb当前SAS数据层的数据块数量，Mc当前NL-SAS数据层的数据块数量。
2.根据权利要求1所述的数据迁移设备，其特征在于， LUN中各数据层中的数据块按照迁移策略进行数据块的迁移，数据块迁移包括相邻层的数据迁移以及跨层 数据迁移，迁移策略包括：热数据上升-相邻层、热数据上升-跨层、冷数据下降 -相邻层、冷数据下降-跨层。
3.一种用于存储自动分层的数据迁移方法，步骤如下：
SS1:采集数据；
SS2:分析数据，并保存日志；
SS3:生成第一个最终的性能日志分析表；
SS4:按照性能日志分析表产生迁移策略；
SS5:按照迁移策略进行数据块的迁移；
其中步骤SS1具体为：在不影响前端业务正常使用的前提下，定期地收集存储在一个或多个存储层中的数据块的信息，收集的信息包括但不限于访问量和延迟；
步骤SS2具体为：根据收集的信息，在后端自动分析该些信息，在周期内，对数据块的访问量和延迟进行分析，并保存日志；
其中步骤SS3具体为：对所有的数据块性能分析按照从高到低的顺序进行排序，周期时间截止并且分析完毕以后，就会生成第一个最终的性能日志分析表；
其中步骤SS4具体为：按照现有不同存储层数据块数量进行分类胜能日志分析表中的前Ma个数据块放至SSD 数据层，第Ma+1至第Ma+Mb个数据块放至SAS数据层，第Ma+Mb+1至Ma+Mb+Mc个数据块放至NL-SAS数据层，其中Ma为当前SSD数据层的数据块数量、Mb当前SAS数据层的数据块数量，Mc当前NL-SAS数据层的数据块数量。
4.根据权利要求3所述的数据迁移方法，其中步骤SS5具体为：按照步骤 SS4得到的迁移策略进行数据块的迁移，数据块迁移包括相邻层的数据迁移以及跨层数据迁移，迁移策略包括：热数据上升-相邻层、热数据上升-跨层、冷数据下降-相邻层、冷数据下降-跨层。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611169228.9A CN106598501B (zh) | 2016-12-16 | 2016-12-16 | 用于存储自动分层的数据迁移设备及方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611169228.9A CN106598501B (zh) | 2016-12-16 | 2016-12-16 | 用于存储自动分层的数据迁移设备及方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106598501A CN106598501A (zh) | 2017-04-26 |
| CN106598501B true CN106598501B (zh) | 2019-06-28 |
Family
ID=58600820
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201611169228.9A Active CN106598501B (zh) | 2016-12-16 | 2016-12-16 | 用于存储自动分层的数据迁移设备及方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106598501B (zh) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107704213B (zh) * | 2017-11-02 | 2021-08-31 | 郑州云海信息技术有限公司 | 一种存储阵列的自动化服务质量管理方法及装置 |
| CN108874311B (zh) * | 2018-05-29 | 2022-02-08 | 北京盛和大地数据科技有限公司 | 融合存储系统中的数据迁移方法和装置 |
| CN110531938A (zh) * | 2019-09-02 | 2019-12-03 | 广东紫晶信息存储技术股份有限公司 | 一种基于多维度的冷热数据迁移方法及系统 |
| WO2019228575A2 (en) * | 2019-09-12 | 2019-12-05 | Alibaba Group Holding Limited | Log-structured storage systems |
| CN113886353B (zh) * | 2021-09-30 | 2024-01-23 | 苏州浪潮智能科技有限公司 | 分层存储管理软件的数据配置推荐方法、装置及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7930265B2 (en) * | 2007-01-08 | 2011-04-19 | International Business Machines Corporation | Method for threshold migration based on fuzzy logic triggers |
| CN103605483A (zh) * | 2013-11-21 | 2014-02-26 | 浪潮电子信息产业股份有限公司 | 一种分级存储系统中块级数据特征处理方法 |
| CN103631729A (zh) * | 2013-12-06 | 2014-03-12 | 浪潮(北京)电子信息产业有限公司 | 一种基于块级的分级存储方法及系统 |
| CN106227466A (zh) * | 2016-07-15 | 2016-12-14 | 浪潮(北京)电子信息产业有限公司 | 一种数据段迁移方法及系统 |
-
2016
- 2016-12-16 CN CN201611169228.9A patent/CN106598501B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7930265B2 (en) * | 2007-01-08 | 2011-04-19 | International Business Machines Corporation | Method for threshold migration based on fuzzy logic triggers |
| CN103605483A (zh) * | 2013-11-21 | 2014-02-26 | 浪潮电子信息产业股份有限公司 | 一种分级存储系统中块级数据特征处理方法 |
| CN103631729A (zh) * | 2013-12-06 | 2014-03-12 | 浪潮(北京)电子信息产业有限公司 | 一种基于块级的分级存储方法及系统 |
| CN106227466A (zh) * | 2016-07-15 | 2016-12-14 | 浪潮(北京)电子信息产业有限公司 | 一种数据段迁移方法及系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN106598501A (zh) | 2017-04-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106598501B (zh) | 用于存储自动分层的数据迁移设备及方法 | |
| US9331943B2 (en) | Asynchronous scheduling informed by job characteristics and anticipatory provisioning of data for real-time, parallel processing | |
| Wu et al. | Energy-efficient hadoop for big data analytics and computing: A systematic review and research insights | |
| CN106201355B (zh) | 数据处理方法和装置以及存储系统 | |
| CN105653524B (zh) | 一种数据存储方法、装置和系统 | |
| US20180314422A1 (en) | Automatic tiering of storage using dynamic grouping | |
| US8375180B2 (en) | Storage application performance matching | |
| US8572330B2 (en) | Systems and methods for granular resource management in a storage network | |
| US11137926B1 (en) | Systems and methods for automatic storage tiering | |
| US20100235597A1 (en) | Method and apparatus for conversion between conventional volumes and thin provisioning with automated tier management | |
| CN102200936A (zh) | 适用于云存储的智能配置存储备份方法 | |
| US20140358977A1 (en) | Management of Intermediate Data Spills during the Shuffle Phase of a Map-Reduce Job | |
| US20130132967A1 (en) | Optimizing distributed data analytics for shared storage | |
| US9892121B2 (en) | Methods and systems to identify and use event patterns of application workflows for data management | |
| CN102541470B (zh) | 数据对象的处理方法及装置 | |
| CN105069134A (zh) | 一种Oracle统计信息自动收集方法 | |
| AU2011312029A1 (en) | Automatic replication of virtual machines | |
| CN103530388A (zh) | 一种云存储系统中提升性能的数据处理方法 | |
| KR20150089538A (ko) | 인-메모리 데이터 관리 장치 및 인-메모리 데이터 관리 방법 | |
| CN107526544A (zh) | 一种分布式存储Ceph集群硬件选型设计方法 | |
| Chen et al. | Cost-effective resource provisioning for spark workloads | |
| CN104714753A (zh) | 一种数据访问存储方法及装置 | |
| US10481800B1 (en) | Network data management protocol redirector | |
| Yang et al. | Automatic and Scalable Data Replication Manager in Distributed Computation and Storage Infrastructure of Cyber-Physical Systems. | |
| CN102609508B (zh) | 一种面向网络存储的文件高速访问方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |