CN109062508A - 一种数据处理的方法及装置 - Google Patents

一种数据处理的方法及装置 Download PDF

Info

Publication number
CN109062508A
CN109062508A CN201810798612.8A CN201810798612A CN109062508A CN 109062508 A CN109062508 A CN 109062508A CN 201810798612 A CN201810798612 A CN 201810798612A CN 109062508 A CN109062508 A CN 109062508A
Authority
CN
China
Prior art keywords
data
storage region
pending data
memory block
split
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810798612.8A
Other languages
English (en)
Inventor
甄凤远
徐洪志
郭平加
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201810798612.8A priority Critical patent/CN109062508A/zh
Publication of CN109062508A publication Critical patent/CN109062508A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629—Configuration or reconfiguration of storage systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0646—Horizontal data movement in storage systems, i.e. moving data in between storage devices or systems
    • G06F3/0652—Erasing, e.g. deleting, data cleaning, moving of data to a wastebasket
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请实施例公开了一种数据处理的方法及装置，通过获取待处理数据及待处理数据所在的存储区域，若存储区域的占用率大于或等于第一预设值，则将存储区域进行拆分，形成多个存储块，并行对多个存储块中的存储数据进行处理。由于存储区域的占用率较大时，可以说明待处理数据较多，若对待处理数据进行串行处理，需要花费较长的时间，此时可以对存储区域进行拆分，形成存储块，并行对拆分后的存储块中的存储数据进行处理，可以提高多核处理器的利用率，减少数据处理时间，提高数据处理效率。

Description

一种数据处理的方法及装置
技术领域
本申请涉及计算机领域，尤其涉及一种数据处理的方法及装置。
背景技术
随着信息技术的发展，信息存储方式逐渐多样化，数据存储介质或数据存储结构也具有多种形式，基于不同的数据存储介质或不同数据存储结构，对数据的处理也可能不同。
现有的数据处理方式，通常采用串行的方式进行。举例来说，对于数据的删除，可以为采用串行删除的方式，即按照一定的顺序逐个进行删除，以数据的树形存储结构为例，通常从树形结构的根节点开始，顺序的进行每一个节点的数据的删除。然而，这种串行的数据处理方式效率较低。
发明内容
为了解决现有技术中数据处理方式效率较低的问题，本申请实施例提供了一种数据处理的方法及装置。
本申请实施例提供了一种数据处理的方法，所述方法包括：
获取待处理数据及所述待处理数据所在的存储区域；
若所述存储区域的占用率大于或等于第一预设值，则将所述存储区域进行拆分，形成多个存储块；
并行对所述多个存储块中的存储数据进行处理，所述存储数据包括所述待处理数据。
可选的，所述并行对所述多个存储块中的存储数据进行处理，包括：
通过多个处理器，分别对所述多个存储块中的存储数据进行处理。
可选的，所述将所述存储区域进行拆分，形成多个存储块，包括：
根据所述处理器的数量，对所述存储区域进行拆分，形成多个存储块，其中每个存储块均有对应的处理器。
可选的，所述方法还包括：
若所述存储区域的占用率小于或等于第二预设值，则根据所述待处理数据的数据结构，对所述待处理数据进行处理。
可选的，所述存储区域包括存储区域网络设备中的逻辑卷；所述待处理数据包括所述逻辑卷中的元数据。
本申请实施例提供了一种数据处理的装置，所述装置包括：
获取单元，用于获取待处理数据及所述待处理数据所在的存储区域；
拆分单元，用于若所述存储区域的占用率大于或等于第一预设值，则将所述存储区域进行拆分，形成多个存储块；
第一处理单元，用于并行对所述多个存储块中的存储数据进行处理，所述存储数据包括所述待处理数据。
可选的，所述处理单元包括：
处理子单元，用于通过多个处理器，分别对所述多个存储块中的存储数据进行处理。
可选的，所述拆分单元包括：
拆分子单元，用于根据所述处理器的数量，对所述存储区域进行拆分，形成多个存储块，其中每个存储块均有对应的处理器。
可选的，所述装置还包括：
第二处理单元，用于若所述存储区域的占用率小于或等于第二预设值，则根据所述待处理数据的数据结构，对所述待处理数据进行处理。
可选的，所述存储区域包括存储区域网络设备中的逻辑卷；所述待处理数据包括所述逻辑卷中的元数据。
本申请实施例提供了一种数据处理的方法及装置，通过获取待处理数据及待处理数据所在的存储区域，若存储区域的占用率大于或等于第一预设值，则将存储区域进行拆分，形成多个存储块，并行对多个存储块中的存储数据进行处理。由于存储区域的占用率较大时，可以说明待处理数据较多，若对待处理数据进行串行处理，需要花费较长的时间，此时可以对存储区域进行拆分，形成存储块，并行对拆分后的存储块中的存储数据进行处理，可以提高多核处理器的利用率，减少数据处理时间，提高数据处理效率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请中记载的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它的附图。
图1为本申请实施例提供的一种数据处理的方法的流程图；
图2为本申请实施例提供的一种对存储区域进行拆分的示意图；
图3为本申请实施例提供的一种数据处理的装置的结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
现有技术中，通常采用串行的方式进行数据的处理。例如，采用串行的方式进行数据的删除，利用串行的方式进行数据的写入等。以数据的树形存储结构为例，若想实现该数据的删除，可以从树形结构的根节点开始，顺序的进行每一个节点的数据的删除。然而这种串行的数据处理方式通常具有较低的效率。
为了解决现有技术中数据处理方法效率较低的问题，本申请实施例提供了一种数据处理的方法及装置，通过获取待处理数据及待处理数据所在的存储区域，若存储区域的占用率大于或等于第一预设值，则将存储区域进行拆分，形成多个存储块，并行对多个存储块中的存储数据进行处理。由于存储区域的占用率较大时，可以说明待处理数据较多，若对待处理数据进行串行处理，需要花费较长的时间，此时可以对存储区域进行拆分，形成存储块，并行对拆分后的存储块中的存储数据进行处理，可以提高多核处理器的利用率，减少数据处理时间，提高数据处理效率。
参见图1，该图为本申请实施例提供的一种数据处理的方法的流程图，该方法可以包括以下步骤。
S101，获取待处理数据及待处理数据所在的存储区域。
在本申请实施例中，待处理数据可以是待删除的数据，也可以是待修改的数据，还可以是待读取的数据等。待处理数据的数据结构可以是树状结构，也可以是链表结构，还可以是其他数据结构，这里不做一一举例。
待处理数据存储在存储区域中。该存储区域可以是存储区域网络(Storage AreaNetwork，SAN)设备中的存储区域，具体的，在SAN设备中，可以有多个资源池(Pool)，在每个资源池中，可以通过添加硬盘来创建磁盘阵列(Redundant Arrays of IndependentDisks，RAID)，在磁盘阵列中，可以有供用户使用的存储空间，用逻辑单元号(Logical UnitNumber，LUN)表示，LUN又可以称为逻辑卷，在LUN中可以存储有数据。
在本申请实施例中，待处理数据可以是存储在LUN中的数据。例如可以是LUN中的元数据，元数据是用于记录数据的数据，在用户需要对LUN进行释放时，可以执行卷删除操作，即对LUN中的数据和数据的数据(即元数据)执行删除操作。元数据通常以平衡树(B+tree)的数据结构存放在磁盘中，传统的对元数据的删除操作，通常通过找到元数据的根节点，顺序的进行每一个节点的数据的删除。
S102，若存储区域的占用率大于或等于第一预设值，则将存储区域进行拆分，形成多个存储块。
在存储区域中存储的是待处理数据，若存储区域的占用率大于或等于第一预设值，则说明存储区域中的待处理数据较多，通过传统的方式进行数据的处理，需要花费较长的时间。
其中存储区域的占用率可以通过待处理数据的内存大小与存储区域的容量的比值来确定，例如存储区域的容量为10GB，其中存储的待处理数据的大小为8GB，则可认为存储区域的占用率达到80％。第一预设值是衡量存储区域的占用率的是否较高的标准，例如可以是40％，或者50％，当然也可以是其他占用率的值。
在存储区域的占用率大于或等于第一预设值时，可以将存储区域进行拆分，形成多个存储块。参考图2所示，将存储区域拆分成为n个存储块，分别为第一存储块、第二存储块、……、第n存储块。对存储区域的拆分方式可以是均匀拆分，例如，可以将容量为10GB的存储区域均匀拆分，形成10个容量为1GB的存储块，也可以是非均匀拆分，例如可以将容量为10GB的存储区域进行拆分，形成3个2GB的存储块和4个1GB的存储块。
在存储区域中存储有待处理数据，可以理解的是，待处理数据可以不占用全部存储区域，即其中一部分存储区域中存储的是待处理数据，即有效的数据，另一部分区域中存储的是无效的数据，例如可以是全零数据，这些数据本身没有实际意义，在对存储区域进行写入时，会对这些数据进行修改，形成有效的数据。因此，在对存储区域进行拆分时，存储在存储区域中的待处理数据和无效数据均被拆分，拆分后的待处理数据和无效数据可以存储至相应的存储块中。
S103，并行对多个存储块中的存储数据进行处理。
存储块中可以存储有待处理数据，也可以存储有无效的数据，对存储块中的存储数据进行处理，包括对待处理数据和无效的数据进行处理。
并行对多个存储块中的存储数据进行处理，具体的，可以通过多个处理器，分别对多个存储块中的存储数据处理，例如可以是数据的删除、修改等。在对数据进行删除操作时，可以将数据的特征清除，在对数据进行修改时，可以向存储块写入数据，实现存储数据的修改。
结合具体场景来说，待处理数据所在的存储区域的容量为10GB，其中待处理数据的大小为8GB，若通过一个处理器采用串行的方式进行删除，假设对待处理数据的删除速度为每秒8MB，则删除全部的待处理数据所需要的时间为1024秒。本申请实施例提供的数据处理方法中，可以将存储区域拆分为10的存储块，每个存储块的容量为1GB，通过十个处理器并行对存储块中的存储数据进行删除，假设对存储数据的删除速度为每秒8MB，则十个处理器对存储数据进行删除则需要128秒，相比于现有技术中需要的1024秒，删除时间大大减少了，因此删除效率有了显著提高。
在本申请实施例中，拆分得到的存储块的数量，可以根据处理器确定，其中，每个存储块均有对应的处理器，该处理器实现对存储块中的存储数据的处理。可以理解的是，一个处理器可以对应一个存储块，也可以对应多个存储块。以一个处理器对应一个存储块为例，多个处理器可以针对其对应的数据块建立相应的线程，对数据块中的存储数据进行处理，从而提高处理器的利用率，节省数据处理的时间，提高数据处理效率。
在本申请实施例中，还可以在存储区域的占用率小于或等于第二预设值时，根据待处理数据的数据结构，对待处理数据进行处理。具体的，在待处理数据为平衡树状的数据结构时，可以根据待处理数据的数据结构，确定待处理数据的各个节点，按照节点的位置，对各个节点对应的数据进行处理，例如对各个节点对应的数据进行删除。具体的，在待处理数据为链表结构时，可以根据待处理数据的存储位置，分别对各个存储位置的数据进行处理，例如可以对各个存储位置的数据进行修改，即对各个存储执行写入操作。
本申请实施例提供了一种数据处理的方法，通过获取待处理数据及待处理数据所在的存储区域，若存储区域的占用率大于或等于第一预设值，则将存储区域进行拆分，形成多个存储块，并行对多个存储块中的存储数据进行处理。由于存储区域的占用率较大时，可以说明待处理数据较多，若对待处理数据进行串行处理，需要花费较长的时间，此时可以对存储区域进行拆分，形成存储块，并行对拆分后的存储块中的存储数据进行处理，可以提高多核处理器的利用率，减少数据处理时间，提高数据处理效率。
基于以上实施例提供的一种数据处理的方法，本申请实施例还提供了一种数据处理的装置，下面结合附图来详细说明其工作原理。
参见图3，该图为本申请实施例提供的一种数据处理的装置的结构框图，该装置包括：
获取单元110，用于获取待处理数据及所述待处理数据所在的存储区域；
拆分单元120，用于若所述存储区域的占用率大于或等于第一预设值，则将所述存储区域进行拆分，形成多个存储块；
第一处理单元130，用于并行对所述多个存储块中的存储数据进行处理，所述存储数据包括所述待处理数据。
可选的，所述处理单元包括：
处理子单元，用于通过多个处理器，分别对所述多个存储块中的存储数据进行处理。
可选的，所述拆分单元包括：
拆分子单元，用于根据所述处理器的数量，对所述存储区域进行拆分，形成多个存储块，其中每个存储块均有对应的处理器。
可选的，所述装置还包括：
第二处理单元，用于若所述存储区域的占用率小于或等于第二预设值，则根据所述待处理数据的数据结构，对所述待处理数据进行处理。
可选的，所述存储区域包括存储区域网络设备中的逻辑卷；所述待处理数据包括所述逻辑卷中的元数据。
本申请实施例提供了一种数据处理的装置，通过获取待处理数据及待处理数据所在的存储区域，若存储区域的占用率大于或等于第一预设值，则将存储区域进行拆分，形成多个存储块，并行对多个存储块中的存储数据进行处理。由于存储区域的占用率较大时，可以说明待处理数据较多，若对待处理数据进行串行处理，需要花费较长的时间，此时可以对存储区域进行拆分，形成存储块，并行对拆分后的存储块中的存储数据进行处理，可以提高多核处理器的利用率，减少数据处理时间，提高数据处理效率。
当介绍本申请的各种实施例的元件时，冠词“一”、“一个”、“这个”和“所述”都意图表示有一个或多个元件。词语“包括”、“包含”和“具有”都是包括性的并意味着除了列出的元件之外，还可以有其它元件。
需要说明的是，本领域普通技术人员可以理解实现上述方法实施例中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(RandomAccess Memory,RAM)等。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于装置实施例而言，由于其基本相似于方法实施例，所以描述得比较简单，相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元及模块可以是或者也可以不是物理上分开的。另外，还可以根据实际的需要选择其中的部分或者全部单元和模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
以上所述仅是本申请的具体实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本申请的保护范围。

Claims (10)

1.一种数据处理的方法，其特征在于，所述方法包括：
获取待处理数据及所述待处理数据所在的存储区域；
若所述存储区域的占用率大于或等于第一预设值，则将所述存储区域进行拆分，形成多个存储块；
并行对所述多个存储块中的存储数据进行处理，所述存储数据包括所述待处理数据。
2.根据权利要求1所述的方法，其特征在于，所述并行对所述多个存储块中的存储数据进行处理，包括：
通过多个处理器，分别对所述多个存储块中的存储数据进行处理。
3.根据权利要求2所述的方法，其特征在于，所述将所述存储区域进行拆分，形成多个存储块，包括：
根据所述处理器的数量，对所述存储区域进行拆分，形成多个存储块，其中每个存储块均有对应的处理器。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
若所述存储区域的占用率小于或等于第二预设值，则根据所述待处理数据的数据结构，对所述待处理数据进行处理。
5.根据权利要求1至4任意一项所述的方法，其特征在于，所述存储区域包括存储区域网络设备中的逻辑卷；所述待处理数据包括所述逻辑卷中的元数据。
6.一种数据处理的装置，其特征在于，所述装置包括：
获取单元，用于获取待处理数据及所述待处理数据所在的存储区域；
拆分单元，用于若所述存储区域的占用率大于或等于第一预设值，则将所述存储区域进行拆分，形成多个存储块；
第一处理单元，用于并行对所述多个存储块中的存储数据进行处理，所述存储数据包括所述待处理数据。
7.根据权利要求6所述的装置，其特征在于，所述处理单元包括：
处理子单元，用于通过多个处理器，分别对所述多个存储块中的存储数据进行处理。
8.根据权利要求7所述的装置，其特征在于，所述拆分单元包括：
拆分子单元，用于根据所述处理器的数量，对所述存储区域进行拆分，形成多个存储块，其中每个存储块均有对应的处理器。
9.根据权利要求6所述的装置，其特征在于，所述装置还包括：
第二处理单元，用于若所述存储区域的占用率小于或等于第二预设值，则根据所述待处理数据的数据结构，对所述待处理数据进行处理。
10.根据权利要求6至9任意一项所述的装置，其特征在于，所述存储区域包括存储区域网络设备中的逻辑卷；所述待处理数据包括所述逻辑卷中的元数据。
CN201810798612.8A 2018-07-19 2018-07-19 一种数据处理的方法及装置 Pending CN109062508A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810798612.8A CN109062508A (zh) 2018-07-19 2018-07-19 一种数据处理的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810798612.8A CN109062508A (zh) 2018-07-19 2018-07-19 一种数据处理的方法及装置

Publications (1)

Publication Number Publication Date
CN109062508A true CN109062508A (zh) 2018-12-21

Family

ID=64817503

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810798612.8A Pending CN109062508A (zh) 2018-07-19 2018-07-19 一种数据处理的方法及装置

Country Status (1)

Country Link
CN (1) CN109062508A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111858630A (zh) * 2020-07-10 2020-10-30 山东云海国创云计算装备产业创新中心有限公司 一种数据处理方法、装置、设备及可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101127578A (zh) * 2007-09-14 2008-02-20 广东威创日新电子有限公司 一种处理海量数据的方法及系统
CN102823214A (zh) * 2010-03-29 2012-12-12 英特尔公司 知晓性能和话务的异类性互联网络
US8688660B1 (en) * 2010-09-28 2014-04-01 Amazon Technologies, Inc. System and method for providing enhancements of block-level storage
CN105653402A (zh) * 2016-01-12 2016-06-08 浪潮(北京)电子信息产业有限公司 一种ssd以及用于ssd的数据恢复方法
CN106155805A (zh) * 2015-04-14 2016-11-23 中兴通讯股份有限公司 系统内节点数的调整方法和装置
CN107870727A (zh) * 2016-09-23 2018-04-03 伊姆西Ip控股有限责任公司 用于存储数据的方法和设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101127578A (zh) * 2007-09-14 2008-02-20 广东威创日新电子有限公司 一种处理海量数据的方法及系统
CN102823214A (zh) * 2010-03-29 2012-12-12 英特尔公司 知晓性能和话务的异类性互联网络
US8688660B1 (en) * 2010-09-28 2014-04-01 Amazon Technologies, Inc. System and method for providing enhancements of block-level storage
CN106155805A (zh) * 2015-04-14 2016-11-23 中兴通讯股份有限公司 系统内节点数的调整方法和装置
CN105653402A (zh) * 2016-01-12 2016-06-08 浪潮(北京)电子信息产业有限公司 一种ssd以及用于ssd的数据恢复方法
CN107870727A (zh) * 2016-09-23 2018-04-03 伊姆西Ip控股有限责任公司 用于存储数据的方法和设备

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111858630A (zh) * 2020-07-10 2020-10-30 山东云海国创云计算装备产业创新中心有限公司 一种数据处理方法、装置、设备及可读存储介质
CN111858630B (zh) * 2020-07-10 2022-06-17 山东云海国创云计算装备产业创新中心有限公司 一种数据处理方法、装置、设备及可读存储介质

Similar Documents

Publication Publication Date Title
CN103761053B (zh) 一种数据处理方法和装置
CN103999058B (zh) 带驱动器系统服务器
CN105589812B (zh) 磁盘碎片整理方法、装置及主机
KR100951107B1 (ko) 최적의 성능을 위한 파일 관리 방법
US8464003B2 (en) Method and apparatus to manage object based tier
CN103714096B (zh) 基于Lucene的倒排索引系统构建、数据处理方法及装置
CN108647151A (zh) 一种全闪系统元数据落盘方法、装置、设备及存储介质
CN103514249B (zh) 一种数据自精简方法和系统及存储装置
US9612758B1 (en) Performing a pre-warm-up procedure via intelligently forecasting as to when a host computer will access certain host data
CN109445713A (zh) 一种元数据卷的存储状态记录方法、系统及相关组件
CN104272242B (zh) 创建加密存储体
US11042324B2 (en) Managing a raid group that uses storage devices of different types that provide different data storage characteristics
US9135262B2 (en) Systems and methods for parallel batch processing of write transactions
CN102982182B (zh) 一种数据存储规划方法及装置
CN109189772A (zh) 用于无文件系统存储介质的文件管理方法及系统
CN106961569A (zh) 一种录像覆盖方法、装置及网络硬盘录像机
CN106951375A (zh) 在存储系统中删除快照卷的方法及装置
US11461287B2 (en) Managing a file system within multiple LUNS while different LUN level policies are applied to the LUNS
CN108334284A (zh) 尾延迟感知前台垃圾收集算法
CN109471843A (zh) 一种元数据缓存方法、系统及相关装置
CN107315540A (zh) 一种自动分层存储方法及系统
CN104461384B (zh) 一种数据写入方法及存储设备
CN107092443B (zh) 数据迁移方法及装置
US10496278B1 (en) Inline compression support using discrete sized containers for backing store
CN109062508A (zh) 一种数据处理的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20181221

RJ01 Rejection of invention patent application after publication