CN111625192B - 一种元数据对象访问方法、装置、设备以及介质 - Google Patents

一种元数据对象访问方法、装置、设备以及介质 Download PDF

Info

Publication number
CN111625192B
CN111625192B CN202010442525.6A CN202010442525A CN111625192B CN 111625192 B CN111625192 B CN 111625192B CN 202010442525 A CN202010442525 A CN 202010442525A CN 111625192 B CN111625192 B CN 111625192B
Authority
CN
China
Prior art keywords
metadata
target
metadata object
access request
volume
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010442525.6A
Other languages
English (en)
Other versions
CN111625192A (zh
Inventor
曹立霞
张端
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Electronic Information Industry Co Ltd
Original Assignee
Inspur Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Electronic Information Industry Co Ltd filed Critical Inspur Electronic Information Industry Co Ltd
Priority to CN202010442525.6A priority Critical patent/CN111625192B/zh
Publication of CN111625192A publication Critical patent/CN111625192A/zh
Application granted granted Critical
Publication of CN111625192B publication Critical patent/CN111625192B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/064—Management of blocks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种元数据对象访问方法、装置、设备、介质，该方法包括：根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID；利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID；对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。这样在接收到多条元数据对象访问请求且对应的对象ID在同一个卷时，也可以根据对象ID确定出对应的目标元数据对象，以便将同一个卷的元数据操作分散到不同的元数据对象上，提高元数据访问的并发性，避免出现热点元数据对象，减小各个元数据对象的压力，从而提高卷的性能，以及提高整体的数据IO性能。

Description

一种元数据对象访问方法、装置、设备以及介质
技术领域
本申请涉及分布式存储技术领域，特别涉及一种元数据对象访问方法、装置、设备、介质。
背景技术
分布式块存储通过分布式存储系统中相应的块存储库接口对应用提供块存储服务，主要面向云平台的虚拟机提供虚拟磁盘。分布式块存储类似于传统的SAN(StorageArea Network and SAN Protocol，存储区域网络)存储，都提供数据块级别的访问。在分布式块存储中每创建一个卷都会对应的创建一个元数据对象(object-map对象),通过该元数据对象记录该卷的“对象”的bitmap(位图信息)，以此可以比较快速的处理块的一些管理功能，如：卷所占用容量的大小快速计算等。但元数据对象在提供块的快速IO功能的同时，也由于其自身原因导致IO的性能瓶颈。对于新创建的卷，在创建写对象时，为了保证分布式块存储记录的数据一致性，在IO操作时，必须首先保证对卷的元数据对象更新完成后才能进行数据IO操作，此时对于单个卷上的写IO都在等待对元数据对象的写操作，产生了热点元数据对象的情况，造成元数据对象负担太重，造成数据IO性能降低，且创建的卷越大，在对新卷写操作时造成的影响越大。
发明内容
有鉴于此，本申请的目的在于提供一种元数据对象方法、装置、设备、介质，能够减低元数据对象的压力，从而提高数据IO性能。其具体方案如下：
第一方面，本申请公开了一种元数据对象访问方法，包括：
根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID；
利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID；
对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。
可选地，所述利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID，包括：
利用哈希算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID。
可选地，所述利用预设算法对所述目标元数据对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID之后，还包括：
根据目标对象从所述目标元数据对象ID对应的目标元数据对象中确定出目标元数据子对象；
相应的，所述对所述目标元数据对象ID对应的目标元数据对象进行访问，包括：
对所述目标元数据子对象进行访问。
可选地，所述根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID之前，还包括：
在创建目标卷时，创建所述目标卷对应的所述元数据对象集合，其中，所述元数据对象集合中的各个元数据对象用于存储所述目标卷中各个对象的元数据和位图信息；
相应的，所述对所述目标元数据对象ID对应的目标元数据对象进行访问，包括：
利用所述目标元数据对象ID从所述元数据对象集合中确定出所述目标元数据对象；
对所述目标元数据对象进行访问。
可选地，所述在创建目标卷时，创建所述目标卷对应的元数据对象集合，包括：
在创建目标卷时，获取所述目标卷的卷大小信息，其中，所述目标卷包括对象，所述对象带有对应的对象ID；
根据所述卷大小信息和所述对象ID确定所述元数据对象集合中元数据对象的数量和各个所述元数据对象的大小；
创建所述元数据对象集合。
可选地，所述创建所述元数据对象集合之后，还包括：
根据所述对象ID确定所述元数据对象集合中各个元数据对象的元数据对象ID，以便利用所述对象ID确定出对应的元数据对象。
可选地，所述根据所述对象ID确定所述元数据对象集合中各个元数据对象的元数据对象ID，包括：
根据所述目标卷中各个所述对象ID和哈希算法，确定所述元数据对象集合中各个元数据对象的元数据对象ID。
第二方面，本申请公开了一种元数据对象访问装置，包括：
第一信息确定模块，用于根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID；
第二信息确定模块，用于利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID；
访问模块，用于对所述目标元数据对象ID对应的目标元数据对象进行访问。
第三方面，本申请公开了一种元数据对象访问设备，包括：
存储器和处理器；
其中，所述存储器，用于存储计算机程序；
所述处理器，用于执行所述计算机程序，以实现前述公开的元数据对象访问方法。
第四方面，本申请公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述公开的元数据对象访问方法。
可见，本申请先根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID，然后利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID，接着对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。由此可见，本申请先根据元数据对象访问请求确定出对应的目标对象ID，再根据目标对象ID，确定需要对应的目标元数据对象ID，最后根据所述目标元数据对象ID便可以确定出对应的目标元数据对象，这样在接收到多条元数据对象访问请求且对应的对象ID在同一个卷时，也可以根据对象ID确定出对应的目标元数据对象ID，以便将同一个卷的元数据操作分散到不同的元数据对象上，提高元数据访问的并发性，避免出现热点元数据对象，减小各个元数据对象的压力，从而提高卷的性能，以及提高整体的数据IO性能。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请公开的一种元数据对象访问方法流程图；
图2为本申请公开的一种具体的元数据对象访问方法流程图；
图3为本申请公开的一种具体的元数据对象示意图；
图4为本申请公开的一种元数据对象访问装置结构示意图；
图5为本申请公开的一种元数据对象访问设备结构图；
图6为本申请公开的一种电子设备结构图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
目前，由于一个卷只对应一个元数据对象object-map，导致元数据对象在提供块的快速IO功能的同时，也由于其自身原因导致IO的性能瓶颈。具体说就是在创建写对象时，为了保证分布式块存储记录的数据一致性，在IO操作时，必须首先保证对卷的元数据对象更新完成后才能进行数据IO操作，此时对于同一个卷上的写IO都在等待对元数据对象的写操作，产生了热点元数据对象的情况，造成元数据对象压力太大，造成数据IO性能降低，且创建的卷越大，在对新卷写操作时造成的影响越大。有鉴于此，本申请提出了一种元数据对象方法，能够减低元数据对象的压力，从而提高数据IO性能。
参见图1所示，本申请实施例公开了一种元数据对象访问方法，该方法包括：
步骤S11：根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID。
在具体的实施过程中，在对分布式块存储中的卷上创建对象时，为了保证数据一致性，需要先在对应的元数据对象中对待创建对象对应的元数据或位图信息等进行更新，所以会触发相应的元数据对象访问请求，在获取到所述元数据对象访问请求之后，便可以先确定所述元数据对象访问请求对应的目标对象ID，也即，所述确定元数据访问请求对应的数据IO操作的对象ID，以便根据所述目标对象ID确定相应的元数据对象等。
步骤S12：利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID。
可以理解的是，在确定出所述目标对象ID之后，便可以利用预设算法对所述目标对象进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID，以便根据所述目标元数据对象ID确定出需要访问的目标元数据对象。
步骤S13：对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。
在确定出所述目标元数据对象ID之后，便可以根据所述目标元数据对象ID从元数据对象集合中确定出与所述目标元数据对象ID对象的目标元数据对象，并对所述目标元数据对象进行访问，其中，所述元数据对象集合为所述元数据访问进行对象的目标对象所在的卷对应的元数据对象的集合。
可见，本申请先根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID，然后利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID，接着对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。由此可见，本申请先根据元数据对象访问请求确定出对应的目标对象ID，再根据目标对象ID，确定需要对应的目标元数据对象ID，最后根据所述目标元数据对象ID便可以确定出对应的目标元数据对象，这样在接收到多条元数据对象访问请求且对应的对象ID在同一个卷时，也可以根据对象ID确定出对应的目标元数据对象，以便将同一个卷的元数据操作分散到不同的元数据对象上，提高元数据访问的并发性，避免出现热点元数据对象，减小各个元数据对象的压力，从而提高卷的性能，以及提高整体的数据IO性能。
参见图2所示，本申请实施例公开了一种具体的元数据对象访问方法，该方法包括：
步骤S21：在创建目标卷时，创建所述目标卷对应的元数据对象集合，其中，所述元数据对象集合中的各个元数据对象用于存储所述目标卷中各个对象的元数据和位图信息。
在实际应用过程中，需要在创建目标卷时，需要先创建所述目标卷对应的元数据对象集合，其中，所述元数据对象集合中的各个元数据对象用于存储所述目标卷中各个对象的元数据和位图信息。
具体的，所述在创建目标卷时，创建所述目标卷对应的元数据对象集合，包括：在创建目标卷时，获取所述目标卷的卷大小信息，其中，所述目标卷包括对象，所述对象带有对应的对象ID；根据所述卷大小信息和所述对象ID确定所述元数据对象集合中元数据对象的数量和各个所述元数据对象的大小；创建所述元数据对象集合。也即，在创建目标卷时，获取所述目标卷的卷大小信息，其中，所述目标卷包括多个对象，且每个所述对象带有对应的对象ID，然后将所述卷大小信息中的卷大小作为所述元数据对象集合中各个元数据对象的大小，在利用哈希算法对所述对象ID进行处理，得到运算结果，再确定运算结果中包括多少个不同的值，则所述元数据对象集合包括的元数据对象的数量就是多少个，根据以上信息创建所述元数据对象集合。例如，利用哈希算法对对象ID进行处理之后，得到的运算结果为1、2、3、4、5、6、7、8、9、0、1、2，则运算结果中包括10个不相同的值，则所述元数据对象集合中包括10个元数据对象。
在创建所述元数据对象集合之后，还包括：根据所述对象ID确定所述元数据对象集合中各个元数据对象的元数据对象ID，以便利用所述对象ID确定出对应的元数据对象。具体的，可先根据所述目标卷中各个所述对象ID和哈希算法，确定所述元数据对象集合中各个元数据对象的元数据对象ID。且所述元数据子对象在元数据对象内部的结构与对象在所述目标卷中相同。
参见图3所示，为一种元数据对象集合示意图。图中包括一个RBD卷，其中又包括多个对象(object)。在现有技术中是一个RBD卷对应一个元数据对象(object-map)，这个元数据对象中元数据子对象与RBD卷中的对应，用于存储RBD卷中的对象中的元数据和位图信息，而本申请是根据哈希算法和RBD卷中各个对象的对象ID确定出需要创建的元数据对象的数量，组成一个元数据对象集合，其中，元数据对象集合中包括n个元数据对象，包括object-map.split.0到object-map.split.n，每个元数据对象的大小和RBD卷的大小一致。
步骤S22：根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID。
在获取到元数据对象访问请求之后，需要根据所述元数据对象访问请求确定所述元数据访问请求对应的目标对象ID，其中，所述目标对象ID为所述元数据访问请求对应的数据IO操作对应的所述目标卷中的目标对象的ID。
步骤S23：利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID。
确定出所述目标对象ID之后，便可以根据预设算法对所述目标对象ID进行处理，得到所述元数据对象请求对应的目标元数据对象ID。具体的，可以利用哈希算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID。此外，由于所述元数据子对象在元数据对象内部的结构与对象在所述目标卷中相同，还可以根据目标对象在所述目标卷中的位置从所述目标元数据对象ID对应的目标元数据对象中确定出目标元数据子对象。
步骤S24：对所述元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。
在确定出所述目标元数据对象之后，便可以对所述元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。具体的，就是利用所述目标元数据对象ID从所述元数据对象集合中确定出所述目标元数据对象；对所述目标元数据对象进行访问。或者，先利用所述目标元数据对象ID从所述元数据对象集合中确定出所述目标元数据对象，再根据目标对象在所述目标卷中的位置从所述目标元数据对象ID对应的目标元数据对象中确定出目标元数据子对象，然后对所述目标元数据子对象进行访问。对所述目标元数据对象中的相关信息进行处理之后，便可以对所述目标卷中的相关数据进行相应的IO操作。
参见图4所示，本申请实施例公开了一种元数据对象访问装置，包括：
第一信息确定模块11，用于根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID；
第二信息确定模块12，用于利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID；
访问模块13，用于对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。
可见，本申请先根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID，然后利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID，接着对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问。由此可见，本申请先根据元数据对象访问请求确定出对应的目标对象ID，再根据目标对象ID，确定需要对应的目标元数据对象ID，最后根据所述目标元数据对象ID便可以确定出对应的目标元数据对象，这样在接收到多条元数据对象访问请求且对应的对象ID在同一个卷时，也可以根据对象ID确定出对应的目标元数据对象，以便将同一个卷的元数据操作分散到不同的元数据对象上，提高元数据访问的并发性，避免出现热点元数据对象，减小各个元数据对象的压力，从而提高卷的性能，以及提高整体的数据IO性能。
进一步的，所述第二信息确定模块12，具体用于利用哈希算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID。
进一步的，所述第二信息确定模块12，还可以用于根据目标对象从所述目标元数据对象ID对应的目标元数据对象中确定出目标元数据子对象；相应地，所述访问模块13，具体用于对所述目标元数据子对象进行访问。
进一步的，所述元数据对象访问装置，还包括：
元数据对象集合创建模块，用于在创建目标卷时，创建所述目标卷对应的所述元数据对象集合，其中，所述元数据对象集合中的各个元数据对象用于存储所述目标卷中各个对象的元数据和位图信息；
相应的，所述访问模块13，具体用于：利用所述目标元数据对象ID从所述元数据对象集合中确定出所述目标元数据对象；对所述目标元数据对象进行访问。
具体的，元数据对象集合创建模块，包括：
信息获取单元，用于在创建目标卷时，获取所述目标卷的卷大小信息，其中，所述目标卷包括对象，所述对象带有对应的对象ID；
元数据对象集合确定单元，用于根据所述卷大小信息和所述对象ID确定所述元数据对象集合中元数据对象的数量和各个所述元数据对象的大小；
元数据对象集合创建单元，用于创建所述元数据对象集合。
具体的，元数据对象集合创建模块，包括：
ID确定单元，用于根据所述对象ID确定所述元数据对象集合中各个元数据对象的元数据对象ID，以便利用所述对象ID确定出对应的元数据对象。
其中，所述ID确定单元，具体用于：根据所述目标卷中各个所述对象ID和哈希算法，确定所述元数据对象集合中各个元数据对象的元数据对象ID。
进一步的，参见图5所示，本申请实施例还公开了一种元数据对象访问设备，包括：处理器21和存储器22。
其中，所述存储器22，用于存储计算机程序；所述处理器21，用于执行所述计算机程序，以实现前述实施例中公开的元数据对象访问方法。
其中，关于上述元数据对象访问方法的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
参见图6所示，为本申请实施例提供的一种电子设备20的结构示意图，该电子设备20能够实现前述实施例中公开的元数据对象访问方法步骤。
通常，本实施例中的电子设备20包括前述实施例中公开的处理器21和存储器22。
其中，处理器21可以包括一个或多个处理核心，比如四核心处理器、八核心处理器等。处理器21可以采用DSP(digital signal processing,数字信号处理)、FPGA(field-programmable gate array,现场可编程们阵列)、PLA(programmable logic array,可编程逻辑阵列)中的至少一种硬件来实现。处理器21也可以包括主处理器和协处理器，主处理器是用于对在唤醒状态下的数据进行处理的处理器，也称CPU(central processing unit,中应处理器)；协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中，处理器21可以集成有GPU(graphics processing unit,图像处理器)，GPU用于负责显示屏所需要显示的图像的渲染和绘制。一些实施例中，处理器21可以包括AI(artificialintelligence，人工智能)处理器，该AI处理器用于处理有关机器学习的计算操作。
存储器22可以包括一个或多个计算机可读存储介质，计算机可读存储介质可以是非暂态的。存储器22还可以包括高速随机存取存储器，以及非易失性存储器，比如一个或多个磁盘存储设备、闪存存储设备。本实施例中，存储器22至少用于存储以下计算机程序221，其中，该计算机程序被处理器21加载并执行之后，能够实现前述任一实施例中公开的元数据对象访问方法步骤。另外，存储器22所存储的资源还可以包括操作系统222和数据223等，存储方式可以是短暂存储也可以是永久存储。其中，操作系统222可以是Windows、Unix、Linux等。数据223可以包括各种各样的数据。
在一些实施例中，电子设备20还可包括有显示屏23、输入输出接口24、通信接口25、传感器26、电源27以及通信总线28。
本技术领域人员可以理解，图6中示出的结构并不构成对电子设备20的限定，可以包括比图示更多或更少的组件。
进一步的，本申请实施例还公开了一种计算机可读存储介质，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现前述任一实施例中公开的元数据对象访问方法。
其中，关于上述元数据对象访问方法的具体过程可以参考前述实施例中公开的相应内容，在此不再进行赘述。
本说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其它实施例的不同之处，各个实施例之间相同或相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
最后，还需要说明的是，在本文中，诸如第一和第二之类的关系术语仅仅用来将一个实体或者操作与另一个实体或者操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得一系列包含其他要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本申请所提供的一种元数据对象访问方法、装置、设备、介质进行了详细介绍，本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的一般技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (9)

1.一种元数据对象访问方法，其特征在于，包括：
根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID；
利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID；
对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问；
其中，所述根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID之前，还包括：
在创建目标卷时，创建所述目标卷对应的所述元数据对象集合，其中，所述元数据对象集合中的各个元数据对象用于存储所述目标卷中各个对象的元数据和位图信息;
相应的，所述对所述目标元数据对象ID对应的目标元数据对象进行访问，包括：
利用所述目标元数据对象ID从所述元数据对象集合中确定出所述目标元数据对象；对所述目标元数据对象进行访问。
2.根据权利要求1所述的元数据对象访问方法，其特征在于，所述利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID，包括：
利用哈希算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID。
3.根据权利要求1所述的元数据对象访问方法，其特征在于，所述利用预设算法对所述目标元数据对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID之后，还包括：
根据目标对象从所述目标元数据对象ID对应的目标元数据对象中确定出目标元数据子对象；
相应的，所述对所述目标元数据对象ID对应的目标元数据对象进行访问，包括：
对所述目标元数据子对象进行访问。
4.根据权利要求1所述的元数据对象访问方法，其特征在于，所述在创建目标卷时，创建所述目标卷对应的元数据对象集合，包括：
在创建目标卷时，获取所述目标卷的卷大小信息，其中，所述目标卷包括对象，所述对象带有对应的对象ID；
根据所述卷大小信息和所述对象ID确定所述元数据对象集合中元数据对象的数量和各个所述元数据对象的大小；
创建所述元数据对象集合。
5.根据权利要求4所述的元数据对象访问方法，其特征在于，所述创建所述元数据对象集合之后，还包括：
根据所述对象ID确定所述元数据对象集合中各个元数据对象的元数据对象ID，以便利用所述对象ID确定出对应的元数据对象。
6.根据权利要求5所述的元数据对象访问方法，其特征在于，所述根据所述对象ID确定所述元数据对象集合中各个元数据对象的元数据对象ID和元数据子对象ID，包括：
根据所述目标卷中各个所述对象ID和哈希算法，确定所述元数据对象集合中各个元数据对象的元数据对象ID。
7.一种元数据对象访问装置，其特征在于，包括：
第一信息确定模块，用于根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID；
第二信息确定模块，用于利用预设算法对所述目标对象ID进行处理，得到所述元数据对象访问请求对应的目标元数据对象ID；
访问模块，用于对元数据对象集合中与所述目标元数据对象ID对应的目标元数据对象进行访问；
其中，所述装置，还用于根据获取到的元数据对象访问请求确定所述元数据对象访问请求对应的目标对象ID之前，在创建目标卷时，创建所述目标卷对应的所述元数据对象集合，其中，所述元数据对象集合中的各个元数据对象用于存储所述目标卷中各个对象的元数据和位图信息；
相应的，所述访问模块，具体用于利用所述目标元数据对象ID从所述元数据对象集合中确定出所述目标元数据对象；对所述目标元数据对象进行访问。
8.一种元数据对象访问设备，其特征在于，包括：
存储器和处理器；
其中，所述存储器，用于存储计算机程序；
所述处理器，用于执行所述计算机程序，以实现权利要求1至6任一项所述的元数据对象访问方法。
9.一种计算机可读存储介质，其特征在于，用于保存计算机程序，其中，所述计算机程序被处理器执行时实现如权利要求1至6任一项所述的元数据对象访问方法。
CN202010442525.6A 2020-05-22 2020-05-22 一种元数据对象访问方法、装置、设备以及介质 Active CN111625192B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010442525.6A CN111625192B (zh) 2020-05-22 2020-05-22 一种元数据对象访问方法、装置、设备以及介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010442525.6A CN111625192B (zh) 2020-05-22 2020-05-22 一种元数据对象访问方法、装置、设备以及介质

Publications (2)

Publication Number Publication Date
CN111625192A CN111625192A (zh) 2020-09-04
CN111625192B true CN111625192B (zh) 2022-07-05

Family

ID=72271078

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010442525.6A Active CN111625192B (zh) 2020-05-22 2020-05-22 一种元数据对象访问方法、装置、设备以及介质

Country Status (1)

Country Link
CN (1) CN111625192B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6393424B1 (en) * 1999-12-29 2002-05-21 Networks Associates, Inc. Method and apparatus for using a static metadata object to reduce database accesses
US6493720B1 (en) * 1998-01-26 2002-12-10 International Business Machines Corporation Method and system for synchronization of metadata in an information catalog
CN103279568A (zh) * 2013-06-18 2013-09-04 无锡紫光存储系统有限公司 一种元数据管理系统及方法
CN104268097A (zh) * 2014-10-13 2015-01-07 浪潮(北京)电子信息产业有限公司 一种元数据处理方法及系统
CN111078593A (zh) * 2019-12-29 2020-04-28 浪潮电子信息产业股份有限公司 一种对象元数据的访问方法、系统及相关装置
CN111125447A (zh) * 2019-12-22 2020-05-08 北京浪潮数据技术有限公司 一种元数据访问方法、装置、设备及可读存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6493720B1 (en) * 1998-01-26 2002-12-10 International Business Machines Corporation Method and system for synchronization of metadata in an information catalog
US6393424B1 (en) * 1999-12-29 2002-05-21 Networks Associates, Inc. Method and apparatus for using a static metadata object to reduce database accesses
CN103279568A (zh) * 2013-06-18 2013-09-04 无锡紫光存储系统有限公司 一种元数据管理系统及方法
CN104268097A (zh) * 2014-10-13 2015-01-07 浪潮(北京)电子信息产业有限公司 一种元数据处理方法及系统
CN111125447A (zh) * 2019-12-22 2020-05-08 北京浪潮数据技术有限公司 一种元数据访问方法、装置、设备及可读存储介质
CN111078593A (zh) * 2019-12-29 2020-04-28 浪潮电子信息产业股份有限公司 一种对象元数据的访问方法、系统及相关装置

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Scalable Metadata Management Techniques for Ultra-Large Distributed Storage Systems - A Systematic Review;Mayernik, Matthew S.;《ACM COMPUTING SURVEYS》;20180928;第51卷(第4期);全文 *
基于超元数据缓存的高速数据访问系统;张震伟等;《广东通信技术》;20160915(第09期);全文 *
空间数据存储对象的元数据可伸缩性管理;李锐等;《计算机应用研究》;20111215(第12期);全文 *

Also Published As

Publication number Publication date
CN111625192A (zh) 2020-09-04

Similar Documents

Publication Publication Date Title
CN110865888A (zh) 一种资源加载方法、装置、服务器及存储介质
CN110908609B (zh) 一种磁盘处理的方法、系统、设备及可读存储介质
CN111625546B (zh) 一种数据写入方法、装置、设备、介质
KR20220125198A (ko) 데이터의 추가 기록 방법, 장치, 전자 기기, 저장 매체 및 컴퓨터 프로그램매체
CN109416621B (zh) 利用支持共享对象的计算机存储系统来恢复非易失性存储中的空闲空间
CN113806300A (zh) 数据存储方法、系统、装置、设备及存储介质
CN111177079A (zh) 网络文件系统数据读取方法、装置、设备、介质
CN115114232A (zh) 一种历史版本对象列举方法、装置及其介质
CN111444117B (zh) 存储空间碎片化实现方法、装置、存储介质及电子设备
CN111061429B (zh) 一种数据访问方法、装置、设备、介质
US9535713B2 (en) Manipulating rules for adding new devices
CN111159124B (zh) Linux内核文件系统异步写缓存方法、装置及介质
CN111625192B (zh) 一种元数据对象访问方法、装置、设备以及介质
CN107832097A (zh) 数据加载方法及装置
CN114936010B (zh) 数据处理方法、装置、设备及介质
US10664952B2 (en) Image processing method, and device, for performing coordinate conversion
CN115774701A (zh) 数据共享方法、装置、电子设备及存储介质
CN114860166A (zh) 一种卷的本地化方法、装置以及介质
CN113051105A (zh) 数据处理方法、装置、设备及存储介质
CN107291628B (zh) 访问数据存储设备的方法和装置
CN111090633A (zh) 一种分布式文件系统的小文件聚合方法、装置及设备
CN112506592A (zh) 页面加载时长的确定方法、装置、设备和存储介质
CN113535660B (zh) 安卓日志存储方法和装置
CN113986134B (zh) 存储数据的方法、读取数据的方法和装置
CN112269538B (zh) 一种数据读取方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant