CN110399353A - 一种目录数据池信息及数据池选择策略的设置方法及系统 - Google Patents

一种目录数据池信息及数据池选择策略的设置方法及系统 Download PDF

Info

Publication number
CN110399353A
CN110399353A CN201910582414.2A CN201910582414A CN110399353A CN 110399353 A CN110399353 A CN 110399353A CN 201910582414 A CN201910582414 A CN 201910582414A CN 110399353 A CN110399353 A CN 110399353A
Authority
CN
China
Prior art keywords
data
information
catalogue
selection strategy
data pool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910582414.2A
Other languages
English (en)
Other versions
CN110399353B (zh
Inventor
李伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Suzhou Wave Intelligent Technology Co Ltd
Original Assignee
Suzhou Wave Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Suzhou Wave Intelligent Technology Co Ltd filed Critical Suzhou Wave Intelligent Technology Co Ltd
Priority to CN201910582414.2A priority Critical patent/CN110399353B/zh
Publication of CN110399353A publication Critical patent/CN110399353A/zh
Application granted granted Critical
Publication of CN110399353B publication Critical patent/CN110399353B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/13File access structures, e.g. distributed indices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/16File or folder operations, e.g. details of user interfaces specifically adapted to file systems
    • G06F16/162Delete operations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/182Distributed file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供一种目录数据池信息及数据池选择策略的设置方法及系统,均包括目录数据池信息及数据池选择策略的存储,目录数据池信息及数据池选择策略的存储步骤包括:在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构;设置并使上述multilayout数据结构只有在其内存有目录元数据且该目录被设置过数据池信息或数据池选择策略时才分配空间;将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构。本发明用于增加文件创建时数据池的选择范围,继而提高对文件系统中数据池资源的利用率。

Description

一种目录数据池信息及数据池选择策略的设置方法及系统
技术领域
本发明涉及分布式文件系统领域,具体涉及一种目录数据池信息及数据池选择策略的设置方法及系统。
背景技术
分布式文件系统可扩展性强、维护简单又成本较低,适合存储大量的且增长快的数据。
但在目前的分布式文件系统中,目录下的文件的创建的过程中,创建文件需根据文件当前的文件布局信息选择数据文件存储的数据池,这些可以选择的数据池一般为目录已设置或者文件系统默认的某一个数据池,这种目录数据池的设置方法只能为目录设置一个指定的数据池,灵活性欠佳,限制了文件创建时数据池的选择范围。另外,基于上述情况,因可供选择的数据池单一,无选择策略可言,不利于对文件系统中的数据池资源的充分利用。
为此,本发明提供一种目录数据池信息及数据池选择策略的设置方法及系统,用于解决上述问题。
发明内容
针对现有技术的上述不足,本发明提供一种目录数据池信息及数据池选择策略的设置方法及系统,用于增加文件创建时数据池的选择范围,以提高对文件系统中数据池资源的利用率。
第一方面,本发明提供一种目录数据池信息及数据池选择策略的设置方法,所述目录数据池信息的数量至少为一个,该目录数据池信息及数据池选择策略的设置方法包括:目录数据池信息及数据池选择策略的存储步骤;
该所述的目录数据池信息及数据池选择策略的存储步骤包括:
在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构;
设置并使上述multilayout数据结构只有在其内存有目录元数据且被设置过数据池信息或数据池选择策略时才被分配空间;
将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构。
进一步地,该目录数据池信息及数据池选择策略的设置方法还包括:目录数据池信息及数据池选择策略的更新步骤;
该目录数据池信息及数据池选择策略的更新步骤,包括:
获取当前传入文件系统的数据信息的唯一性标识,所述的唯一性标识用于区分所述的数据信息,所述的数据信息为目录数据池信息或为数据池选择策略;
在当前传入文件系统的数据信息为数据池选择策略时,用当前传入文件系统的数据信息覆盖multilaout数据结构中的数据池选择策略;
在当前传入文件系统的数据信息为数据池信息时,根据当前传入文件系统的数据池信息的唯一性标识,确定当前传入文件系统的数据池信息是否已存储在目录元数据结构CInode中:
是,则更新目录元数据结构CInode中对应的数据池信息;
否,则设置当前传入文件系统的数据池信息。
进一步地,设置当前传入文件系统的数据池信息,包括:判定layout数据结构中是否存有数据池信息:
是,则判定multilaout数据结构中已存有的数据池信息的数量是否达到所允许的上限,并在判定为未达到所允许的上限时,将当前传入文件系统的数据池信息存入所述的multilaout数据结构中;
否,则将当前传入文件系统的数据池信息存入所述的layout数据结构中。
进一步地,更新目录元数据结构CInode中对应的数据池信息,包括:
依据当前传入文件系统的数据池信息的唯一性标识,更新所述目录元数据结构CInode中已设置的该当前传入文件系统的数据池信息所对应的数据池信息。
进一步地,该目录数据池信息及数据池选择策略的设置方法还包括:目录数据池信息及数据池选择策略的删除步骤;
所述的目录数据池信息及数据池选择策略的删除步骤,包括:
获取当前的删除操作的唯一性操作标识,所述的唯一性操作标识用于区分当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
基于获取的唯一性操作标识,判定当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
在判定当前的删除操作为目录数据池信息删除操作时,判定当前的删除操作所要删除的数据池信息所在的数据结构:若在所述的multilayout数据结构中,则直接删除;若在所述的layout数据结构中,则在从所述的layout数据结构中删除所要删除的数据池信息后,从所述的multilayout数据结构中任选一数据池信息补入layout数据结构、并在multilayut数据结构中删除补入layout数据结构的该数据池信息;
进一步地,在判定当前的删除操作为目录数据池信息清空操作时,则清空layout数据结构中的数据池信息,并清空multilayout数据结构中的数据池信息及数据池选择策略,并将multilayout数据结构与layout数据结构的存储状态均设置为未设置。
第二方面,本发明提供一种目录数据池信息及数据池选择策略的设置系统,所要设置的目录数据池信息的数量至少为一个,该目录数据池信息及数据池选择策略的设置系统包括:目录数据池信息及数据池选择策略的存储单元;
该所述的目录数据池信息及数据池选择策略的存储单元包括:
新增数据结构创建模块,用于在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构;
空间分配模块,与所述的新增数据结构创建模块相连,用于设置并使上述multilayout数据结构只有在其内存有目录元数据时才分配空间;
存储设置模块,与所述的新增数据结构创建模块及空间分配模块相连,用于将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,并用于将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构。
进一步地,所述的目录数据池信息及数据池选择策略的设置系统还包括:该目录数据池信息及数据池选择策略的设置系统还包括:目录数据池信息及数据池选择策略的更新单元;
该目录数据池信息及数据池选择策略的更新单元,包括:
第一获取模块,用于获取当前传入文件系统的数据信息的唯一性标识,所述的唯一性标识用于区分所述的数据信息,所述的数据信息为目录数据池信息或为数据池选择策略;
第一更新模块,与所述的第一获取模块相连,在当前传入文件系统的数据信息为数据池选择策略时,用当前传入文件系统的数据信息覆盖multilaout数据结构中的数据池选择策略;
第二更新模块,与所述的第一获取模块相连,用于在当前传入文件系统的数据信息为数据池信息时,根据当前传入文件系统的数据池信息的唯一性标识,确定当前传入文件系统的数据池信息是否已存储在目录元数据结构CInode中:
是,则更新目录元数据结构CInode中对应的数据池信息;
否,则设置当前传入文件系统的数据池信息。
其中,设置当前传入文件系统的数据池信息,包括:判定layout数据结构中是否存有数据池信息:
是,则判定multilaout数据结构中已存有的数据池信息的数量是否达到所允许的上限,并在判定为未达到所允许的上限时,将当前传入文件系统的数据池信息存入所述的multilaout数据结构中;
否,则将当前传入文件系统的数据池信息存入所述的layout数据结构中。
其中,更新目录元数据结构CInode中对应的数据池信息,包括:
依据当前传入文件系统的数据池信息的唯一性标识,更新所述目录元数据结构CInode中已设置的该当前传入文件系统的数据池信息所对应的数据池信息。
进一步地,所述的目录数据池信息及数据池选择策略的设置系统还包括:该目录数据池信息及数据池选择策略的设置系统还包括:目录数据池信息及数据池选择策略的删除单元。
所述的目录数据池信息及数据池选择策略的删除单元,包括:
第二获取模块,用于获取当前的删除操作的唯一性操作标识,所述的唯一性操作标识用于区分当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
判断模块,用于基于第二获取模块获取的唯一性操作标识,判定当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
第一删除单元,用于在判断模块判定当前的删除操作为目录数据池信息删除操作时,判定当前的删除操作所要删除的数据池信息所在的数据结构:若在所述的multilayout数据结构中,则直接删除;若在所述的layout数据结构中,则在从所述的layout数据结构中删除所要删除的数据池信息后,从所述的multilayout数据结构中任选一数据池信息补入layout数据结构、并在multilayut数据结构中删除补入layout数据结构的该数据池信息。
进一步地,所述的目录数据池信息及数据池选择策略的删除单元,还包括:
第二删除模块,用于在判定当前的删除操作为目录数据池信息清空操作时,清空layout数据结构中的数据池信息,并清空multilayout数据结构中的数据池信息及数据池选择策略,并将multilayout数据结构与layout数据结构的存储状态均设置为未设置。
本发明的有益效果在于:
本发明提供的目录数据池信息及数据池选择策略的设置方法及系统,均在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构,且设置并使上述multilayout数据结构只有在其内存有目录元数据且被设置过数据池信息或数据池选择策略时才被分配空间,使用时,可将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,并将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构,可见本发明能够将所要设置的目录数据池信息分开存储在原有的数据结构layout中和新增的数据结构multilayout中,可见一定程度上可增加文件创建时数据池的选择范围,从而提高对文件系统中数据池资源的利用率。另外,在实际应用中,multilayout数据结构设置多数据池信息的目录数量有限,可见本发明的内存开销可控。
此外,本发明设计原理可靠,结构简单,具有非常广泛的应用前景。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一个实施例的方法的示意性流程图。
图2是本发明一个实施例的系统的示意性功能结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
下面对本发明中出现的关键术语进行解释。
图1是本发明一个实施例的方法的示意性流程图。
本实施例中所述的目录数据池信息及数据池选择策略的设置方法,其中所涉及的目录数据池信息的数量至少为一个。
参见1,所述的目录数据池信息及数据池选择策略的设置方法包括:
步骤110:目录数据池信息及数据池选择策略的存储步骤;
步骤120:目录数据池信息及数据池选择策略的更新步骤;
步骤130:目录数据池信息及数据池选择策略的删除步骤。
可优选地,作为本发明的一个实施例,在步骤110中,所述的目录数据池信息及数据池选择策略的存储步骤包括:
在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构;
设置并使上述multilayout数据结构只有在其内存有目录元数据时才分配空间;
将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构。
可优选地,作为本发明的一个实施例,在步骤120中,所述的目录数据池信息及数据池选择策略的更新步骤,包括:
获取当前传入文件系统的数据信息的唯一性标识,所述的唯一性标识用于区分所述的数据信息,所述的数据信息为目录数据池信息或为数据池选择策略;
在当前传入文件系统的数据信息为数据池选择策略时,用当前传入文件系统的数据信息覆盖multilaout数据结构中的数据池选择策略;
在当前传入文件系统的数据信息为数据池信息时,根据当前传入文件系统的数据池信息的唯一性标识,确定当前传入文件系统的数据池信息是否已存储在目录元数据结构CInode中:
是,则更新目录元数据结构CInode中对应的数据池信息;
否,则设置当前传入文件系统的数据池信息。
进一步地,设置当前传入文件系统的数据池信息,包括:判定layout数据结构中是否存有数据池信息:
是,则判定multilaout数据结构中已存有的数据池信息的数量是否达到所允许的上限,并在判定为未达到所允许的上限时,将当前传入文件系统的数据池信息存入所述的multilaout数据结构中;
否,则将当前传入文件系统的数据池信息存入所述的layout数据结构中。
进一步地,更新目录元数据结构CInode中对应的数据池信息,包括:
依据当前传入文件系统的数据池信息的唯一性标识,更新所述目录元数据结构CInode中已设置的该当前传入文件系统的数据池信息所对应的数据池信息。
在步骤130中,所述的目录数据池信息及数据池选择策略的删除步骤包括:
获取当前的删除操作的唯一性操作标识,所述的唯一性操作标识用于区分当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
基于获取的唯一性操作标识,判定当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
在判定当前的删除操作为目录数据池信息删除操作时,判定当前的删除操作所要删除的数据池信息所在的数据结构:若在所述的multilayout数据结构中,则直接删除;若在所述的layout数据结构中,则在从所述的layout数据结构中删除所要删除的数据池信息后,从所述的multilayout数据结构中任选一数据池信息补入layout数据结构、并在multilayut数据结构中删除补入layout数据结构的该数据池信息。
进一步地,在判定当前的删除操作为目录数据池信息清空操作时,则清空layout数据结构中的数据池信息,并清空multilayout数据结构中的数据池信息及数据池选择策略,并将multilayout数据结构与layout数据结构的存储状态均设置为未设置(即对应为:未被设置过数据池信息或数据池选择策略)。
综上可见,本发明在分布式文件系统的目录元数据结构(CInode)中新增了一个指针类型的数据结构multilayout,该multilayout数据结构与目录元数据结构(CInode)中原有的数据结构layout共同存储所要设置的目录多数据池信息及数据池选择策略信息,可见利用文件系统中元数据的已存在的数据结构及指针存储目录的多数据池信息及选择策略,一定程度上节省了元数据占用文件系统的内存。
另外本发明中新增的multilayout数据结构在目录元数据结构CInode中以指针形式存在,只有在设置过目录数据池信息或数据池选择策略的目录的元数据中才分配空间,可见一定程度上可节省目录元数据结构CInode在分布式文件系统中内存的占用。
另外,在实际应用中,multilayout数据结构设置数据池信息的目录数量有限,可见新增的内存开销可控,且可以降低文件系统中数据池的应用的耦合性,进而在一定程度上降低目录数据池信息存储、更新、删除步骤实现的复杂度。
需要说明的是,本发明中所涉及的数据池选择策略,用于实现对本发明中所涉及数据池信息对应数据池的调用策略,具体实现时,可参照现有数据池调用领域的数据池资源调度策略进行实现。
图2为本发明实施例提供的目录数据池信息及数据池选择策略的设置系统的一个实施例。本发明实施例提供的目录数据池信息及数据池选择策略的设置系统与上述目录数据池信息及数据池选择策略的设置方法相对应,所要设置的目录数据池信息的数量至少为一个。
具体地,该目录数据池信息及数据池选择策略的设置系统包括:
目录数据池信息及数据池选择策略的存储单元200;
目录数据池信息及数据池选择策略的更新单元300;和
目录数据池信息及数据池选择策略的删除单元400。
使用时,首先通过目录数据池信息及数据池选择策略的存储单元200对目录数据池信息及数据池选择策略进行存储设置,之后可通过目录数据池信息及数据池选择策略的更新单元300对存储设置的目录数据池信息及数据池选择策略进行更新设置,也可通过目录数据池信息及数据池选择策略的删除单元400对存储设置的目录数据池信息及数据池选择策略进行删除设置。
其中,所述的目录数据池信息及数据池选择策略的存储单元200包括:
新增数据结构创建模块,用于在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构;
空间分配模块,与所述的新增数据结构创建模块相连,用于设置并使上述创建的multilayout数据结构只有在其内存有目录元数据且被设置过数据池信息或数据池选择策略时才被分配空间;
存储设置模块,与所述的新增数据结构创建模块及空间分配模块相连,用于将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,并用于将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构。
所述的目录数据池信息及数据池选择策略的更新单元300,包括:
第一获取模块,用于获取当前传入文件系统的数据信息的唯一性标识,所述的唯一性标识用于区分所述的数据信息,所述的数据信息为目录数据池信息或为数据池选择策略;
第一更新模块,与所述的第一获取模块相连,用于在第一获取模块获取的当前传入文件系统的数据信息为数据池选择策略时,用当前传入文件系统的数据信息覆盖multilaout数据结构中的数据池选择策略;
第二更新模块,与所述的第一获取模块相连,用于在第一获取模块获取的当前传入文件系统的数据信息为数据池信息时,根据当前传入文件系统的数据池信息的唯一性标识,确定当前传入文件系统的数据池信息是否已存储在目录元数据结构CInode中:
是,则更新目录元数据结构CInode中对应的数据池信息;
否,则设置当前传入文件系统的数据池信息。
其中,所述的目录数据池信息及数据池选择策略的删除单元400,包括:
第二获取模块,用于获取当前的删除操作的唯一性操作标识,所述的唯一性操作标识用于区分当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
判断模块,用于基于第二获取模块获取的唯一性操作标识,判定当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
第一删除单元,用于在判断模块判定当前的删除操作为目录数据池信息删除操作时,判定当前的删除操作所要删除的数据池信息所在的数据结构:若在所述的multilayout数据结构中,则直接删除;若在所述的layout数据结构中,则在从所述的layout数据结构中删除所要删除的数据池信息后,从所述的multilayout数据结构中任选一数据池信息补入layout数据结构、并在multilayut数据结构中删除补入layout数据结构的该数据池信息。
所述的目录数据池信息及数据池选择策略的删除单元400,还包括:
第二删除模块,用于在所述的判断模块判定当前的删除操作为目录数据池信息清空操作时,清空layout数据结构中的数据池信息,并清空multilayout数据结构中的数据池信息及数据池选择策略,并将multilayout数据结构与layout数据结构的存储状态均设置为未设置(即对应为:未被设置过数据池信息或数据池选择策略)。
本实施例中的系统所能达到的技术效果可以参见上文中的描述,此处不再赘述。
本说明书中各个实施例之间相同相似的部分互相参见即可。其中,对于系统实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
尽管通过参考附图并结合优选实施例的方式对本发明进行了详细描述,但本发明并不限于此。在不脱离本发明的精神和实质的前提下,本领域普通技术人员可以对本发明的实施例进行各种等效的修改或替换,而这些修改或替换都应在本发明的涵盖范围内/任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种目录数据池信息及数据池选择策略的设置方法,其特征在于,所述目录数据池信息的数量至少一个,该目录数据池信息及数据池选择策略的设置方法包括:目录数据池信息及数据池选择策略的存储步骤;
该所述的目录数据池信息及数据池选择策略的存储步骤包括:
在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构;
设置并使上述multilayout数据结构只有在其内存有目录元数据且被设置过数据池信息或数据池选择策略时才被分配空间;
将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构。
2.根据权利要求1所述的目录数据池信息及数据池选择策略的设置方法,其特征在于,该目录数据池信息及数据池选择策略的设置方法还包括:目录数据池信息及数据池选择策略的更新步骤;
该目录数据池信息及数据池选择策略的更新步骤,包括:
获取当前传入文件系统的数据信息的唯一性标识,所述的唯一性标识用于区分所述的数据信息,所述的数据信息为目录数据池信息或为数据池选择策略;
在当前传入文件系统的数据信息为数据池选择策略时,用当前传入文件系统的数据信息覆盖multilaout数据结构中的数据池选择策略;
在当前传入文件系统的数据信息为数据池信息时,根据当前传入文件系统的数据池信息的唯一性标识,确定当前传入文件系统的数据池信息是否已存储在目录元数据结构CInode中:
是,则更新目录元数据结构CInode中对应的数据池信息;
否,则设置当前传入文件系统的数据池信息。
3.根据权利要求2所述的目录数据池信息及数据池选择策略的设置方法,其特征在于,进一步地,设置当前传入文件系统的数据池信息,包括:判定layout数据结构中是否存有数据池信息:
是,则判定multilaout数据结构中已存有的数据池信息的数量是否达到所允许的上限,并在判定为未达到所允许的上限时,将当前传入文件系统的数据池信息存入所述的multilaout数据结构中;
否,则将当前传入文件系统的数据池信息存入所述的layout数据结构中。
4.根据权利要求2所述的目录数据池信息及数据池选择策略的设置方法,其特征在于,进一步地,更新目录元数据结构CInode中对应的数据池信息,包括:
依据当前传入文件系统的数据池信息的唯一性标识,更新所述目录元数据结构CInode中已设置的该当前传入文件系统的数据池信息所对应的数据池信息。
5.根据权利要求1所述的目录数据池信息及数据池选择策略的设置方法,其特征在于,该目录数据池信息及数据池选择策略的设置方法还包括:目录数据池信息及数据池选择策略的删除步骤;
所述的目录数据池信息及数据池选择策略的删除步骤,包括:
获取当前的删除操作的唯一性操作标识,所述的唯一性操作标识用于区分当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
基于获取的唯一性操作标识,判定当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
在判定当前的删除操作为目录数据池信息删除操作时,判定当前的删除操作所要删除的数据池信息所在的数据结构:若在所述的multilayout数据结构中,则直接删除;若在所述的layout数据结构中,则在从所述的layout数据结构中删除所要删除的数据池信息后,从所述的multilayout数据结构中任选一数据池信息补入layout数据结构、并在multilayut数据结构中删除补入layout数据结构的该数据池信息。
6.根据权利要求5所述的目录数据池信息及数据池选择策略的设置方法,其特征在于,在判定当前的删除操作为目录数据池信息清空操作时,则清空layout数据结构中的数据池信息,并清空multilayout数据结构中的数据池信息及数据池选择策略,并将multilayout数据结构与layout数据结构的存储状态均设置为未设置。
7.一种目录数据池信息及数据池选择策略的设置系统,其特征在于,所要设置的目录数据池信息的数量至少为一个,该目录数据池信息及数据池选择策略的设置系统包括:目录数据池信息及数据池选择策略的存储单元;
该所述的目录数据池信息及数据池选择策略的存储单元包括:
新增数据结构创建模块,用于在分布式文件系统的目录元数据结构CInode中创建一指针类型的multilayout数据结构;
空间分配模块,与所述的新增数据结构创建模块相连,用于设置并使上述multilayout数据结构只有在其内存有目录元数据时才分配空间;
存储设置模块,与所述的新增数据结构创建模块及空间分配模块相连,用于将所要设置的目录数据池信息中的任意一个存入目录元数据结构CInode的layout数据结构中,并用于将所要设置的其他的目录数据池信息及所要设置的数据池选择策略存入所述的multilayout数据结构。
8.根据权利要求7所述的目录数据池信息及数据池选择策略的设置系统,其特征在于,所述的目录数据池信息及数据池选择策略的设置系统还包括:该目录数据池信息及数据池选择策略的设置系统还包括:目录数据池信息及数据池选择策略的更新单元;
该目录数据池信息及数据池选择策略的更新单元,包括:
第一获取模块,用于获取当前传入文件系统的数据信息的唯一性标识,所述的唯一性标识用于区分所述的数据信息,所述的数据信息为目录数据池信息或为数据池选择策略;
第一更新模块,与所述的第一获取模块相连,在当前传入文件系统的数据信息为数据池选择策略时,用当前传入文件系统的数据信息覆盖multilaout数据结构中的数据池选择策略;
第二更新模块,与所述的第一获取模块相连,用于在当前传入文件系统的数据信息为数据池信息时,根据当前传入文件系统的数据池信息的唯一性标识,确定当前传入文件系统的数据池信息是否已存储在目录元数据结构CInode中:
是,则更新目录元数据结构CInode中对应的数据池信息;
否,则设置当前传入文件系统的数据池信息。
9.根据权利要求7所述的目录数据池信息及数据池选择策略的设置系统,其特征在于,所述的目录数据池信息及数据池选择策略的设置系统还包括:该目录数据池信息及数据池选择策略的设置系统还包括:目录数据池信息及数据池选择策略的删除单元;
所述的目录数据池信息及数据池选择策略的删除单元,包括:
第二获取模块,用于获取当前的删除操作的唯一性操作标识,所述的唯一性操作标识用于区分当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
判断模块,用于基于第二获取模块获取的唯一性操作标识,判定当前的删除操作为目录数据池信息删除操作或为目录数据池信息清空操作;
第一删除单元,用于在判断模块判定当前的删除操作为目录数据池信息删除操作时,判定当前的删除操作所要删除的数据池信息所在的数据结构:若在所述的multilayout数据结构中,则直接删除;若在所述的layout数据结构中,则在从所述的layout数据结构中删除所要删除的数据池信息后,从所述的multilayout数据结构中任选一数据池信息补入layout数据结构、并在multilayut数据结构中删除补入layout数据结构的该数据池信息。
10.根据权利要求7所述的目录数据池信息及数据池选择策略的设置系统,其特征在于,所述的目录数据池信息及数据池选择策略的删除单元,还包括:
第二删除模块,用于在判定当前的删除操作为目录数据池信息清空操作时,清空layout数据结构中的数据池信息,并清空multilayout数据结构中的数据池信息及数据池选择策略,并将multilayout数据结构与layout数据结构的存储状态均设置为未设置。
CN201910582414.2A 2019-06-29 2019-06-29 一种目录数据池信息及数据池选择策略的设置方法及系统 Active CN110399353B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910582414.2A CN110399353B (zh) 2019-06-29 2019-06-29 一种目录数据池信息及数据池选择策略的设置方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910582414.2A CN110399353B (zh) 2019-06-29 2019-06-29 一种目录数据池信息及数据池选择策略的设置方法及系统

Publications (2)

Publication Number Publication Date
CN110399353A true CN110399353A (zh) 2019-11-01
CN110399353B CN110399353B (zh) 2021-10-22

Family

ID=68323899

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910582414.2A Active CN110399353B (zh) 2019-06-29 2019-06-29 一种目录数据池信息及数据池选择策略的设置方法及系统

Country Status (1)

Country Link
CN (1) CN110399353B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080077633A1 (en) * 2006-09-25 2008-03-27 International Business Machines Corporation Method for policy-based data placement when restoring files from off-line storage
CN102385677A (zh) * 2010-09-01 2012-03-21 北京启明星辰信息技术股份有限公司 一种统一威胁管理系统及其数据处理方法
CN102546782A (zh) * 2011-12-28 2012-07-04 北京奇虎科技有限公司 一种分布式系统及其数据操作方法
US20150205818A1 (en) * 2014-01-21 2015-07-23 Red Hat, Inc. Tiered distributed storage policies
CN109298840A (zh) * 2018-11-19 2019-02-01 平安科技(深圳)有限公司 基于数据湖的数据集成方法、服务器及存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080077633A1 (en) * 2006-09-25 2008-03-27 International Business Machines Corporation Method for policy-based data placement when restoring files from off-line storage
CN102385677A (zh) * 2010-09-01 2012-03-21 北京启明星辰信息技术股份有限公司 一种统一威胁管理系统及其数据处理方法
CN102546782A (zh) * 2011-12-28 2012-07-04 北京奇虎科技有限公司 一种分布式系统及其数据操作方法
US20150205818A1 (en) * 2014-01-21 2015-07-23 Red Hat, Inc. Tiered distributed storage policies
CN109298840A (zh) * 2018-11-19 2019-02-01 平安科技(深圳)有限公司 基于数据湖的数据集成方法、服务器及存储介质

Also Published As

Publication number Publication date
CN110399353B (zh) 2021-10-22

Similar Documents

Publication Publication Date Title
CN107506447A (zh) 一种基于本地文件系统的小文件读写方法及系统
US20080133830A1 (en) Efficient utilization of cache servers in mobile communication system
CN103186391B (zh) 浏览器升级方法和系统以及一种升级服务器
CN104778222B (zh) 基于usb存储设备的媒体库建立及更新方法
CN102780574B (zh) 面向业务的局数据的配置方法、装置以及核查方法、装置
CN106095589A (zh) 一种分配分区的方法、装置及系统
CN109828721A (zh) 数据删除方法、装置、计算机设备及存储介质
CN105183768B (zh) 一种文件管理方法、装置和终端设备
CN103544316B (zh) Url过滤的系统及其实现方法
CN103488685B (zh) 一种基于分布式存储系统的碎片文件存储方法
CN107493329A (zh) 一种分布式内存文件系统的远程文件访问方法
CN108959463A (zh) 信息共享方法和家电设备及信息共享系统和存储介质
CN109299157A (zh) 一种分布式大单表的数据导出方法及装置
CN107105050A (zh) 一种业务对象的存储、下载方法及系统
CN106294299A (zh) 一种报表生成方法及装置
CN106802955A (zh) 一种图片数据缓存方法
CN105187556B (zh) 一种数据回源的方法、装置及边缘服务器
CN109271113A (zh) 一种基于云存储的数据管理系统及方法
CN110399353A (zh) 一种目录数据池信息及数据池选择策略的设置方法及系统
CN102298527B (zh) 一种cpe并行升级版本的方法及实现系统
CN109858278A (zh) 文件权限设置方法、装置、计算机设备和存储介质
CN108874264A (zh) 应用程序图标的排列方法、装置、可读存储介质及终端
CN108733440A (zh) 界面图标配置方法、装置及终端设备
CN107480242A (zh) 一种创建文件系统快照树的方法及系统
CN101729929A (zh) 一种智能网业务库存取海量数据的系统、装置及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant