CN114490514A - 文件系统的元数据管理方法、装置、设备 - Google Patents

文件系统的元数据管理方法、装置、设备 Download PDF

Info

Publication number
CN114490514A
CN114490514A CN202210092660.1A CN202210092660A CN114490514A CN 114490514 A CN114490514 A CN 114490514A CN 202210092660 A CN202210092660 A CN 202210092660A CN 114490514 A CN114490514 A CN 114490514A
Authority
CN
China
Prior art keywords
directory
metadata
identifier
storage
key
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210092660.1A
Other languages
English (en)
Inventor
陆游游
舒继武
吕文豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Tsinghua University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University filed Critical Tsinghua University
Priority to CN202210092660.1A priority Critical patent/CN114490514A/zh
Publication of CN114490514A publication Critical patent/CN114490514A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/11File system administration, e.g. details of archiving or snapshots
    • G06F16/113Details of archiving
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/1734Details of monitoring file system events, e.g. by the use of hooks, filter drivers, logs

Abstract

本公开提供的一种文件系统的元数据管理方法、装置、设备,涉及元数据管理技术,包括:获取待读取数据的存储目录,并根据存储目录确定与存储目录中除了根目录以外的每一级目录所对应的键;存储目录中包括多级目录;根据键获取与每一级目录对应的目录元数据;其中,预先存储有键与目录元数据之间的对应关系;根据目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据。本方案可以根据构建的待读取数据的存储目录中除了根目录以外的每一级目录所对应的键,并行访问存储目录中的每一个目录,可以使得路径解析的延迟降低,进而提高文件系统性能。

Description

文件系统的元数据管理方法、装置、设备
技术领域
本公开涉及元数据管理技术,尤其涉及一种文件系统的元数据管理方法、装置、设备。
背景技术
目前,由于文件系统目录树语义,文件系统需要对待读取数据的存储目录进行路径解析,来查找文件并检查权限。路径解析过程会从根目录开始一层层地查询下一级目录,最终找到目标文件,并同时对每一层目录来检查用户是否有访问权限。
现有技术中,为了提高文件系统元数据的可扩展性,现有不少做法采用分布式元数据管理机制。例如,将文件和目录的元数据组织成键值对的形式,存储在多台元数据服务器上,从而支持海量文件数。
但是,目前的这些系统在进行路径解析时,需要依次发送网络请求来访问待读取数据的存储目录中的每一个目录,导致了路径解析延迟高,严重影响文件系统性能。
发明内容
本公开提供了一种文件系统的元数据管理方法、装置、设备,以解决现有技术中在进行路径解析时,需要依次发送网络请求来访问待读取数据的存储目录中的每一个目录,导致了路径解析延迟高,严重影响文件系统性能的问题。
根据本公开第一方面,提供了一种文件系统的元数据管理方法,包括:
获取待读取数据的存储目录,并根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键;所述存储目录中包括多级目录;
根据所述键获取与所述每一级目录对应的目录元数据;其中,预先存储有键与所述目录元数据之间的对应关系;
根据所述目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与所述待读取数据对应的元数据,所述元数据用于读取所述待读取数据。
在一种可实现方式中,所述根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键,包括:
针对所述存储目录中除了根目录以外的每一级目录,获取所述目录的第一父目录的标识;
组合所述第一父目录的标识与所述目录的名称,得到所述目录的键;其中,所述根目录的标识是预设的。
在一种可实现方式中,还包括:根据所述第一父目录的标识、所述目录的名称以及所述目录的预设版本号,生成所述目录的预测标识;
所述根据所述键获取与所述每一级目录对应的目录元数据之后,还包括:
从所述目录元数据中获取所述目录的真实标识;
若所述真实标识与所述预测标识不同,则所述根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键,包括:
利用所述目录的真实标识,生成所述目录的子目录所对应的键。
在一种可实现方式中,还包括:
获取用于创建新目录的创建请求;
响应所述创建请求,并根据所述新目录的第一父目录的标识、所述新目录的名称以及所述新目录的预设版本号,生成所述新目录的第一标识;
根据所述第一标识以及已有目录的标识,确定所述新目录的目标标识。
在一种可实现方式中,所述根据所述第一标识以及已有目录的标识,确定所述新目录的目标标识,包括:
比对所述第一标识与任一个所述已有目录的标识是否相同;
若不相同,则确定所述第一标识为所述新目录的目标标识。
在一种可实现方式中,若所述第一标识与任一个所述已有目录的标识相同,则:
更新所述新目录的预设版本号;
根据更新后的所述预设版本号、所述新目录的第一父目录的标识以及所述新目录的名称再次生成所述新目录的第一标识;
根据再次生成的所述新目录的第一标识执行所述比对所述第一标识与任一个所述已有目录的标识是否相同的步骤。
根据本公开第二方面,提供了一种文件系统的元数据管理装置,包括:
键确定单元,用于获取待读取数据的存储目录,并根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键;所述存储目录中包括多级目录;
目录元数据获取单元,用于根据所述键获取与所述每一级目录对应的目录元数据;其中,预先存储有键与所述目录元数据之间的对应关系;
权限确定单元,用于根据所述目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与所述待读取数据对应的元数据,所述元数据用于读取所述待读取数据。
根据本公开第三方面,提供了一种电子设备,包括存储器和处理器;其中,
所述存储器,用于存储计算机程序;
所述处理器,用于读取所述存储器存储的计算机程序,并根据所述存储器中的计算机程序执行如第一方面所述的文件系统的元数据管理方法。
根据本公开第四方面,提供了一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如第一方面所述的文件系统的元数据管理方法。
根据本公开第五方面,提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时,实现如第一方面所述的文件系统的元数据管理方法。
本公开提供的文件系统的元数据管理方法、装置、设备,包括:获取待读取数据的存储目录,并根据存储目录确定与存储目录中除了根目录以外的每一级目录所对应的键;存储目录中包括多级目录;根据键获取与每一级目录对应的目录元数据;其中,预先存储有键与目录元数据之间的对应关系;根据目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据。本方案提供的元数据管理方法、装置、设备中,可以根据构建的待读取数据的存储目录中除了根目录以外的每一级目录所对应的键,并行访问存储目录中的每一个目录,可以使得路径解析的延迟降低,进而提高文件系统性能。
附图说明
图1为本公开一示例性实施例示出的文件系统的元数据管理方法的流程示意图;
图2为本公开另一示例性实施例示出的文件系统的元数据管理方法的流程示意图;
图3为本公开一示例性实施例示出的确定新目录的目录标识的过程示意图;
图4为本公开一示例性实施例示出的不同元数据的键的表示方式示意图;
图5为本公开一示例性实施例示出的文件系统的元数据管理方法的过程示意图;
图6为本公开一示例性实施例示出的文件系统的元数据管理装置的结构图;
图7为本公开一示例性实施例示出的电子设备的结构图。
具体实施方式
分布式文件系统(Distributed File System,DFS)通过高速网络将多个物理节点连接在一起,实现多节点资源的统一管理,并向用户提供了文件系统访问接口和统一的文件系统命名空间。分布式文件系统一般基于客户端/服务器(Client/Server)的模式而设计客户端为应用程序提供标准的文件系统访问接口,服务器存储了文件系统中所有的数据与元数据。分布式文件系统一般采用数据与元数据分离的设计架构,文件数据存储在多台数据服务器上,文件元数据存储在单台或者是多台元数据服务器上。分布式文件系统具有节约成本、方便管理、扩展性好、可靠性强和可用性强等优势,如今已得到广泛应用。随着大数据时代的到来,全球数据量呈现出爆炸式的增长。快速扩张的现代化数据中心中往往包含着海量文件,文件数目很容易超过目前分布式文件系统单一实例的支持,如GFS、HDFS、QFS、Panasas和LocoFS。由于现代数据中心通常包含几百甚至几千亿个文件,对于大型分布式文件系统,元数据管理服务成为可扩展性的瓶颈。分布式系统元数据访问的可扩展性可高效性是分布式文件系统面临的最为关键的问题。目前,由于文件系统目录树语义,文件系统需要对待读取数据的存储目录进行路径解析,来查找文件并检查权限。路径解析过程会从根目录开始一层层地查询下一级目录,最终找到目标文件,并同时对每一层目录来检查用户是否有访问权限。现有技术中,为了提高文件系统元数据的可扩展性,现有不少做法采用分布式元数据管理机制。例如,将文件和目录的元数据组织成键值对的形式,存储在多台元数据服务器上,从而支持海量文件数。
但是,目前的这些系统在进行路径解析时,需要依次发送网络请求来访问待读取数据的存储目录中的每一个目录,导致了路径解析延迟高,严重影响文件系统性能。
为了解决上述技术问题,本公开提供的方案中,可以根据构建的待读取数据的存储目录中除了根目录以外的每一级目录所对应的键,并行访问存储目录中的每一个目录,可以使得路径解析的延迟降低,进而提高文件系统性能。
图1为本公开一示例性实施例示出的文件系统的元数据管理方法的流程示意图。
如图1所示,本实施例提供的文件系统的元数据管理方法包括:
步骤101,获取待读取数据的存储目录,并根据存储目录确定与存储目录中除了根目录以外的每一级目录所对应的键;存储目录中包括多级目录。
其中,本公开提供的方法可以由具备计算能力的电子设备来执行,比如可以是计算机等设备。该电子设备能够获取待读取数据的存储目录,并可以根据存储目录确定与存储目录中除了根目录以外的每一级目录所对应的键。
具体的,存储目录中包括多级目录。比如可以包括根目录、文件目录,以及除了根目录和文件目录以外的中间目录。
具体的,文件系统的目录可以被组织成一个单根倒置树结构,文件系统从根目录开始,用/来表示。文件名称区分大小写(大小写敏感还需要看具体的文件系统格式),以.开头的为隐藏文件,路径用/来进行分割(windows中使用\来分割)。
例如,若获取的待读取数据的存储目录为:/A/B/File,则最前面的/表示根目录;File为文件目录;A和B为中间目录。
文件系统可以采用数据与元数据分离的设计架构,文件数据存储在多台数据服务器上的数据库中,文件元数据存储在单台或者是多台元数据服务器上的元数据数据库中。具体的,元数据数据库可以为键-值(Key-value)数据库。键-值数据库是一种以键值对存储数据的一种数据库,每个键都会对应一个唯一的值。其中,文件元数据包括目录元数据以及目录项元数据;目录元数据包括文件索引节点元数据、目录索引节点元数据。具体的,文件目录对应的元数据为文件索引节点元数据;中间目录对应的元数据为目录索引节点元数据。
具体的,文件索引节点元数据中可以包括文件的权限信息:所有者的标识(即目录的标识),组标识和访问权限(如:只读,读写,可执行等);文件的时间戳信息:创建时间,最后访问时间及属性修改时间;文件的数据信息:文件的大小和文件到数据块的映射。
目录索引节点元数据中可以包括目录的标识;目录的权限信息:所有者的标识(即目录的标识),组标识和访问权限(如:只读,读写,可执行等);目录的时间戳信息:创建时间,最后访问时间及属性修改时间。
目录项元数据中可以记录在这个目录下的所有直接子目录和文件的命名,还可以记录子目录的命名到子目录的标识之间的映射。
具体的,可以根据预设的根目录的标识,以及各目录的名称、目录的预设版本号,利用加密哈希函数,确定存储目录中除了根目录外的各目录的标识,进而确定存储目录中除根目录外各目录的键。
例如,若获取的待读取数据的存储目录为:/A/B/File,则目录B的第一父目录为A,若A的标识为1,则目录B的键可以表示为1:B。
步骤102,根据键获取与每一级目录对应的目录元数据;其中,预先存储有键与目录元数据之间的对应关系。
具体的,键-值数据库中预先存储有键与目录元数据之间的对应关系。可以根据与每一级目录对应的键,查询键-值数据库获取与每一级目录对应的目录元数据。
具体的,目录元数据可以包括文件索引节点元数据、目录索引节点元数据。其中,文件目录对应的元数据为文件索引节点元数据;中间目录对应的元数据为目录索引节点元数据。
步骤103,根据目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据。
具体的,可以根据与存储目录对应的各目录元数据中包括的各访问权限,确定是否具有每一级目录对应的访问权限。
若有,则表示有访问待读取数据的权限,并反馈与待读取数据对应的文件索引节点元数据,文件索引节点元数据中包括的文件的数据信息用于在数据库中读取待读取数据。
若无,则表示无访问待读取数据的权限。
具体的,文件的数据信息中包括文件的大小和文件到数据块的映射。文件系统可以根据反馈的与待读取数据对应的文件索引节点元数据中的文件的数据信息,访问数据库,并获取待读取数据;并将待读取数据发送给用户终端。
本公开提供的文件系统的元数据管理方法,包括:获取待读取数据的存储目录,并根据存储目录确定与存储目录中除了根目录以外的每一级目录所对应的键;存储目录中包括多级目录;根据键获取与每一级目录对应的目录元数据;其中,预先存储有键与目录元数据之间的对应关系;根据目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据。本公开中采用的方法中,可以根据构建的待读取数据的存储目录中除了根目录以外的每一级目录所对应的键,并行访问存储目录中的每一个目录,可以使得路径解析的延迟降低,进而提高文件系统性能。
图2为本公开另一示例性实施例示出的文件系统的元数据管理方法的流程示意图。
如图2所示,本实施例提供的文件系统的元数据管理方法包括:
步骤201,获取用于创建新目录的创建请求;响应创建请求,并根据新目录的第一父目录的标识、新目录的名称以及新目录的预设版本号,生成新目录的第一标识。
具体的,电子设备可以获取用于创建新目录的创建请求,并响应该创建请求。
其中,新目录的预设版本号比如可以设置为1。
例如,可以在根目录下创建新目录A,即/A。新目录A的第一父目录为根目录,可以预设根目录的标识为0。可以根据根目录的标识0、新目录的名称A以及新目录的预设版本号1,利用加密哈希函数,生成新目录A的第一标识。
其中,加密哈希函数是一种单向数学算法,用于将任何大小的数据映射到固定大小的位字符串。加密哈希函数广泛用于信息安全实践中,例如数字签名,消息身份验证代码和其他形式的身份验证。
步骤202,根据第一标识以及已有目录的标识,确定新目录的目标标识。
具体的,可以在键-值数据库中的目录项元数据中查询已有目录的标识。
可以通过计算找到一个与已有目录的标识不同的第一标识,确定为新目录的目标标识,并保存在键-值数据库中。
在一种可实现方式中,比对第一标识与任一个已有目录的标识是否相同;
若不相同,则确定第一标识为新目录的目标标识。
其中,任一个已有目录的标识可以在键-值数据库中的目录项元数据中获取。
若第一标识与任一个已有目录的标识相同,则:
更新新目录的预设版本号;
比如,可以在当前新目录的预设版本号的基础上加1。
根据更新后的预设版本号、新目录的第一父目录的标识以及新目录的名称再次生成新目录的第一标识;
具体的,可以利用加密哈希函数,再次生成新目录的第一标识。
根据再次生成的新目录的第一标识执行比对第一标识与任一个已有目录的标识是否相同的步骤。
如图3所示,为创建的新目录生成目录标识的过程图。
步骤203,获取待读取数据的存储目录;存储目录中包括多级目录。
具体的,存储目录中包括多级目录。比如可以包括根目录、文件目录,以及除了根目录和文件目录以外的中间目录。
例如,若获取的待读取数据的存储目录为:/A/B/File,则最前面的/表示根目录;File为文件目录;A和B为中间目录。
步骤204,针对存储目录中除了根目录以外的每一级目录,获取该目录的第一父目录的标识。
具体的,可以根据待读取数据的存储目录,获取各目录的标识。
例如,若获取的待读取数据的存储目录为:/A/B/File,则目录B的第一父目录为A,若A的标识为1,则表征目录B的第一父目录的标识为1。
步骤205,组合第一父目录的标识与该目录的名称,得到目录的键;其中,根目录的标识是预设的。
其中,根据的标识可以为预先设置的,比如可以设置为0。
例如,若获取的待读取数据的存储目录为:/A/B/File,则目录B的第一父目录为A,若A的标识为1,则表征目录B的第一父目录的标识为1。则目录B的键可以表示为1:B。
如图4所示,为键-值数据库中包括的三种元数据对应的键的表示方式。
步骤206,根据键获取与每一级目录对应的目录元数据;其中,预先存储有键与目录元数据之间的对应关系。
具体的,键-值数据库中预先存储有键与目录元数据之间的对应关系。可以根据与每一级目录对应的键,查询键-值数据库获取与每一级目录对应的目录元数据。
具体的,目录元数据可以包括文件索引节点元数据、目录索引节点元数据。其中,文件目录对应的元数据为文件索引节点元数据;中间目录对应的元数据为目录索引节点元数据。
在一种可实现方式中,还包括:根据第一父目录的标识、目录的名称以及目录的预设版本号,生成目录的预测标识;
具体的,根目录的标识可以预先设置,比如可以设置为0。目录的预设版本号可以预先设置为0。例如,若获取的待读取数据的存储目录为:/A/B/File,则可以根据根目录的标识0,目录名称A,以及目录的预设版本号0,利用加密哈希函数,得到目录A的预测标识;同理,得到存储目录中其他各级目录的预测标识。
具体的,本实施例提供的方法中,可以根据上述方法得到存储目录中除根目录外各级目录的预测标识。
接着,利用各级目录的预测标识,生成各级目录的键;之后利用得到的键,查询键-值数据库,得到各级目录对应的各目录元数据。
从目录元数据中获取目录的真实标识;
具体的,目录元数据中包括的目录的标识可以称为目录的真实标识,可以从目录元数据中获取该目录的真实标识。
若真实标识与预测标识不同,则利用目录的真实标识,生成目录的子目录所对应的键。
具体的,比对各级目录的真实标识与预测标识,若不同,则利用该目录的真实标识生成该目录的子目录所对应的键。可以利用再次生成的键,继续查询键-值数据库的步骤,直至查询到的各级目录的真实标识与预测标识都相同。
通过计算预测标识的方式,利用预测标识得到各目录的键,进而可以实现并行访问存储目录中的每一个目录,可以使得路径解析的延迟降低,进而提高文件系统性能。
步骤207,根据目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据。
具体的,步骤207与步骤103的原理、实现方式类似,不再赘述。
图5为本公开一示例性实施例示出的文件系统的元数据管理方法的过程示意图。
如图5所示,若获取的待读取数据的存储目录为:/A/B/File。可以预设根目录的标识为0;目录的预设版本号为0。则根目录的子目录为A/B/File。可以利用加密哈希函数得到该子目录中各中间目录的预测标识。假设目录A的预测标识为1,目录B的预测标识为2。则目录A的键可以表示为0:A;目录B的键可以表示为1:B;目录File的键可以表示为2:File。根据键,查询键-值数据库,得到各目录对应的元数据,并从各元数据中获取真实标识,以及权限信息。比对各目录的真实标识与预测标识,若相同,则查看各目录的权限信息,确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据;若任一级目录没有访问权限,则表示该电子设备无权访问该待读取数据。
如图5所示,若目录A的真实标识与预测标识不同。则根据目录A的真实标识,利用加密哈希函数,生成子目录B/File中各目录的预测标识。接着根据子目录B/File中各目录的预测标识,确定子目录B/File中各目录的键。可以利用再次生成的键,继续查询键-值数据库的步骤,直至查询到的各级目录的真实标识与预测标识都相同。则查看各目录的权限信息,确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据;若任一级目录没有访问权限,则表示该电子设备无权访问该待读取数据。
图6为本公开一示例性实施例示出的文件系统的元数据管理装置的结构图。
如图6所示,本公开提供的文件系统的元数据管理装置600,包括:
键确定单元610,用于获取待读取数据的存储目录,并根据存储目录确定与存储目录中除了根目录以外的每一级目录所对应的键;存储目录中包括多级目录;
目录元数据获取单元620,用于根据键获取与每一级目录对应的目录元数据;其中,预先存储有键与目录元数据之间的对应关系;
权限确定单元630,用于根据目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与待读取数据对应的元数据,元数据用于读取待读取数据。
键确定单元610,具体用于针对存储目录中除了根目录以外的每一级目录,获取目录的第一父目录的标识;
组合第一父目录的标识与目录的名称,得到目录的键;其中,根目录的标识是预设的。
键确定单元610,还用于根据第一父目录的标识、目录的名称以及目录的预设版本号,生成目录的预测标识;
键确定单元610,还用于从目录元数据中获取目录的真实标识;
键确定单元610,还用于若真实标识与预测标识不同,则利用目录的真实标识,生成目录的子目录所对应的键。
本公开提供的文件系统的元数据管理装置600,还包括:
标识确定单元640,用于获取用于创建新目录的创建请求;
响应创建请求,并根据新目录的第一父目录的标识、新目录的名称以及新目录的预设版本号,生成新目录的第一标识;
根据第一标识以及已有目录的标识,确定新目录的目标标识。
标识确定单元640,具体用于比对第一标识与任一个已有目录的标识是否相同;
若不相同,则确定第一标识为新目录的目标标识。
标识确定单元640,具体用于若第一标识与任一个已有目录的标识相同,则:
更新新目录的预设版本号;
根据更新后的预设版本号、新目录的第一父目录的标识以及新目录的名称再次生成新目录的第一标识;
根据再次生成的新目录的第一标识执行比对第一标识与任一个已有目录的标识是否相同的步骤。
图7为本公开一示例性实施例示出的电子设备的结构图。
如图7所示,本实施例提供的电子设备包括:
存储器701;
处理器702;以及
计算机程序;
其中,计算机程序存储在存储器701中,并配置为由处理器702执行以实现如上的任一种文件系统的元数据管理方法。
本实施例还提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行以实现如上的任一种文件系统的元数据管理方法。
本实施例还提供一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时,实现上述任一种文件系统的元数据管理方法。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种文件系统的元数据管理方法,其特征在于,所述方法包括:
获取待读取数据的存储目录,并根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键;所述存储目录中包括多级目录;
根据所述键获取与所述每一级目录对应的目录元数据;其中,预先存储有键与所述目录元数据之间的对应关系;
根据所述目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与所述待读取数据对应的元数据,所述元数据用于读取所述待读取数据。
2.根据权利要求1所述的方法,其特征在于,所述根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键,包括:
针对所述存储目录中除了根目录以外的每一级目录,获取所述目录的第一父目录的标识;
组合所述第一父目录的标识与所述目录的名称,得到所述目录的键;其中,所述根目录的标识是预设的。
3.根据权利要求2所述的方法,其特征在于,还包括:
根据所述第一父目录的标识、所述目录的名称以及所述目录的预设版本号,生成所述目录的预测标识;
所述根据所述键获取与所述每一级目录对应的目录元数据之后,还包括:
从所述目录元数据中获取所述目录的真实标识;
若所述真实标识与所述预测标识不同,则所述根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键,包括:
利用所述目录的真实标识,生成所述目录的子目录所对应的键。
4.根据权利要求1所述的方法,其特征在于,还包括:
获取用于创建新目录的创建请求;
响应所述创建请求,并根据所述新目录的第一父目录的标识、所述新目录的名称以及所述新目录的预设版本号,生成所述新目录的第一标识;
根据所述第一标识以及已有目录的标识,确定所述新目录的目标标识。
5.根据权利要求4所述的方法,其特征在于,所述根据所述第一标识以及已有目录的标识,确定所述新目录的目标标识,包括:
比对所述第一标识与任一个所述已有目录的标识是否相同;
若不相同,则确定所述第一标识为所述新目录的目标标识。
6.根据权利要求5所述的方法,其特征在于,若所述第一标识与任一个所述已有目录的标识相同,则:
更新所述新目录的预设版本号;
根据更新后的所述预设版本号、所述新目录的第一父目录的标识以及所述新目录的名称再次生成所述新目录的第一标识;
根据再次生成的所述新目录的第一标识执行所述比对所述第一标识与任一个所述已有目录的标识是否相同的步骤。
7.一种文件系统的元数据管理装置,其特征在于,包括:
键确定单元,用于获取待读取数据的存储目录,并根据所述存储目录确定与所述存储目录中除了根目录以外的每一级目录所对应的键;所述存储目录中包括多级目录;
目录元数据获取单元,用于根据所述键获取与所述每一级目录对应的目录元数据;其中,预先存储有键与所述目录元数据之间的对应关系;
权限确定单元,用于根据所述目录元数据确定是否具有每一级目录对应的访问权限,若有,则反馈与所述待读取数据对应的元数据,所述元数据用于读取所述待读取数据。
8.一种电子设备,其特征在于,包括存储器和处理器;其中,
所述存储器,用于存储计算机程序;
所述处理器,用于读取所述存储器存储的计算机程序,并根据所述存储器中的计算机程序执行上述权利要求1-6任一项所述的方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现上述权利要求1-6任一项所述的方法。
10.一种计算机程序产品,包括计算机程序,其特征在于,该计算机程序被处理器执行时,实现上述权利要求1-6任一项所述的方法。
CN202210092660.1A 2022-01-26 2022-01-26 文件系统的元数据管理方法、装置、设备 Pending CN114490514A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210092660.1A CN114490514A (zh) 2022-01-26 2022-01-26 文件系统的元数据管理方法、装置、设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210092660.1A CN114490514A (zh) 2022-01-26 2022-01-26 文件系统的元数据管理方法、装置、设备

Publications (1)

Publication Number Publication Date
CN114490514A true CN114490514A (zh) 2022-05-13

Family

ID=81473970

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210092660.1A Pending CN114490514A (zh) 2022-01-26 2022-01-26 文件系统的元数据管理方法、装置、设备

Country Status (1)

Country Link
CN (1) CN114490514A (zh)

Similar Documents

Publication Publication Date Title
US7228299B1 (en) System and method for performing file lookups based on tags
US7503076B2 (en) Access to content addressable data over a network
EP1049989B1 (en) Access to content addressable data over a network
US8650164B2 (en) Efficient storage and retrieval for large number of data objects
CN102725755B (zh) 文件访问方法及系统
CN113986873B (zh) 一种海量物联网数据模型化的处理、存储与共享方法
US20180145983A1 (en) Distributed data storage system using a common manifest for storing and accessing versions of an object
CN106484820B (zh) 一种重命名方法、访问方法及装置
US20130311520A1 (en) Storage-service-provision apparatus,system, service-provision method, and service-provision program
CN111045857B (zh) 数据备份和恢复的方法、电子设备和计算机可读存储介质
US20180181584A1 (en) Method and system for maintaining and searching index records
WO2021237467A1 (zh) 文件上传方法、文件下载方法和文件管理装置
CN109284273B (zh) 一种采用后缀数组索引的海量小文件查询方法及系统
CN109766318B (zh) 文件读取方法及装置
US20200301944A1 (en) Method and apparatus for storing off-chain data
CN104182418B (zh) 节点元数据获取方法与装置
CN112306957A (zh) 获取索引节点号的方法、装置、计算设备和存储介质
US20050108237A1 (en) File system
KR102253841B1 (ko) 대용량 분산 파일 시스템에서 데이터의 수정을 포함하는 트랜잭션 처리 장치 및 컴퓨터로 읽을 수 있는 기록매체
CN105843809B (zh) 数据处理方法和装置
CN100357943C (zh) 一种检查机群文件系统中垃圾文件的方法
US11269930B1 (en) Tracking granularity levels for accessing a spatial index
CN116070294B (zh) 一种权限管理方法、系统、装置、服务器及存储介质
CN114490514A (zh) 文件系统的元数据管理方法、装置、设备
EP4002143A1 (en) Storage of file system items related to a versioned snapshot of a directory-based file system onto a key-object storage system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination