CN108874319B - 一种元数据更新方法、装置、设备及可读存储介质 - Google Patents

一种元数据更新方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN108874319B
CN108874319B CN201810677118.6A CN201810677118A CN108874319B CN 108874319 B CN108874319 B CN 108874319B CN 201810677118 A CN201810677118 A CN 201810677118A CN 108874319 B CN108874319 B CN 108874319B
Authority
CN
China
Prior art keywords
updating
metadata
identifier
target
update
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810677118.6A
Other languages
English (en)
Other versions
CN108874319A (zh
Inventor
牛勇刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhengzhou Yunhai Information Technology Co Ltd
Original Assignee
Zhengzhou Yunhai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhengzhou Yunhai Information Technology Co Ltd filed Critical Zhengzhou Yunhai Information Technology Co Ltd
Priority to CN201810677118.6A priority Critical patent/CN108874319B/zh
Publication of CN108874319A publication Critical patent/CN108874319A/zh
Application granted granted Critical
Publication of CN108874319B publication Critical patent/CN108874319B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0614Improving the reliability of storage systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种元数据更新方法,该方法应用于元数据集群中的任意一台元数据服务器,元数据服务器在接收到元数据更新请求时,首先对比自身缓存中的第一更新标识和目标磁盘中的目标更新标识,当二者一致时,才根据更新请求更新自身缓存中的第一元数据字段和目标磁盘中目标元数据,并使二者的更新标识保持一致,从而可使每台元数据服务器和目标磁盘中的数据保持同步更新,不同元数据服务器也可保持同步更新;且由于每台元数据服务器均执行上述操作,元数据服务器之间无需进行通信,从而提高了元数据服务器的系统性能和元数据集群的稳定性。相应地,本发明公开的一种元数据更新装置、设备及可读存储介质,也同样具有上述技术效果。

Description

一种元数据更新方法、装置、设备及可读存储介质
技术领域
本发明涉及元数据集群技术领域,更具体地说,涉及一种元数据更新方法、装置、设备及可读存储介质。
背景技术
目前,为了降低元数据的存储成本,一般采用分布式元数据集群来存储元数据。在分布式元数据集群中,一个文件的元数据存储于元数据集群中的公共磁盘,同时其缓存于不同元数据服务器上,每台元数据服务器的缓存中均存储有该元数据的部分元数据字段,这些元数据字段共同组成该文件的元数据。例如:文件A的元数据由元数据字段1、元数据字段2和元数据字段3构成,那么元数据字段1、元数据字段2和元数据字段3可能分别缓存于元数据服务器1、元数据服务器2和元数据服务器3。
同时,在分布式元数据集群中,为了在更新过程中不出差错,且保证元数据集群中的元数据的同步更新,元数据服务器在接收到元数据的更新请求时,首先根据该更新请求更新自身缓存中的元数据字段,进而将更新后的元数据字段存入磁盘,而后将接收到的更新请求携带的更新信息发送至其他元数据服务器,以使其他元数据服务器根据该更新信息更新各自缓存中的元数据字段并存入磁盘。
在上述更新方法中,需要不同元数据服务器之间互相通信来保证各自缓存中的元数据字段的同步更新;而由于元数据服务器主要用于为客户端提供元数据的增删改查操作,其本身需要与客户端频繁通信,因此,在元数据更新过程中,不同元数据服务器之间的通信可能会加剧元数据服务器的数据处理量,从而可能导致元数据服务器系统崩溃;而正是由于数据处理量的增加,也降低了元数据服务器主要的业务处理能力和系统性能。
因此,如何在不影响元数据服务器的系统性能的前提下,实现元数据集群中的元数据的同步更新,是本领域技术人员需要解决的问题。
发明内容
本发明的目的在于提供一种元数据更新方法、装置、设备及可读存储介质,以在不影响元数据服务器的系统性能的前提下,实现元数据集群中的元数据的同步更新。
为实现上述目的,本发明实施例提供了如下技术方案:
一种元数据更新方法,应用于元数据集群中的任意一台元数据服务器,包括:
当接收到元数据的更新请求时,判断自身缓存中的第一元数据字段的第一更新标识与目标磁盘中的所述更新请求对应的目标元数据的目标更新标识是否一致;所述目标磁盘为所述元数据集群中的存储设备;
若是,则根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第二元数据字段和第二更新标识;根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第二更新标识。
其中,当所述第一更新标识早于所述目标更新标识时,还包括:
根据所述目标元数据更新所述第一元数据字段,得到第三元数据字段,并将所述第一更新标识更新为所述目标更新标识,得到第三更新标识;
根据所述更新请求更新所述第三元数据字段和所述第三更新标识,得到第四元数据字段和第四更新标识;
根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第四更新标识。
其中,当所述第一更新标识晚于所述目标更新标识时,还包括:
根据所述第一元数据字段更新所述目标元数据,得到对象元数据,并将所述目标更新标识更新为所述第一更新标识,得到对象更新标识;
根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第五元数据字段和第五更新标识;
根据所述更新请求更新所述对象元数据,将所述对象更新标识更新为所述第五更新标识。
其中,还包括:
将每台元数据服务器的更新记录存入所述元数据集群的日志系统,其中,所述更新记录包括:不同数据更新时的不同更新标识,所述更新标识为更新时间戳。
一种元数据更新装置,应用于元数据集群中的任意一台元数据服务器,包括:
判断模块,用于当接收到元数据的更新请求时,判断自身缓存中的第一元数据字段的第一更新标识与目标磁盘中的所述更新请求对应的目标元数据的目标更新标识是否一致;所述目标磁盘为所述元数据集群中的存储设备;
更新模块,用于当所述第一更新标识与所述目标更新标识一致时,根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第二元数据字段和第二更新标识;根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第二更新标识。
其中,还包括:
第一执行模块,用于当所述第一更新标识早于所述目标更新标识时,根据所述目标元数据更新所述第一元数据字段,得到第三元数据字段,并将所述第一更新标识更新为所述目标更新标识,得到第三更新标识;
第二执行模块,用于根据所述更新请求更新所述第三元数据字段和所述第三更新标识,得到第四元数据字段和第四更新标识;
第三执行模块,用于根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第四更新标识。
其中,还包括:
第四执行模块,用于当所述第一更新标识晚于所述目标更新标识时,根据所述第一元数据字段更新所述目标元数据,得到对象元数据,并将所述目标更新标识更新为所述第一更新标识,得到对象更新标识;
第五执行模块,用于根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第五元数据字段和第五更新标识;
第六执行模块,用于根据所述更新请求更新所述对象元数据,将所述对象更新标识更新为所述第五更新标识。
其中,还包括:
日志记录模块,用于将每台元数据服务器的更新记录存入所述元数据集群的日志系统,其中,所述更新记录包括:不同数据更新时的不同更新标识,所述更新标识为更新时间戳。
一种元数据更新设备,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现上述任意一项所述的元数据更新方法的步骤。
一种可读存储介质,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述任意一项所述的元数据更新方法的步骤。
通过以上方案可知,本发明实施例提供的一种元数据更新方法,应用于元数据集群中的任意一台元数据服务器,包括:当接收到元数据的更新请求时,判断自身缓存中的第一元数据字段的第一更新标识与目标磁盘中的所述更新请求对应的目标元数据的目标更新标识是否一致;所述目标磁盘为所述元数据集群中的存储设备;若是,则根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第二元数据字段和第二更新标识;根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第二更新标识。
将所述元数据更新方法应用于元数据集群中的任意一台元数据服务器时,元数据服务器在接收到元数据的更新请求时,首先对比自身缓存中的第一更新标识和目标磁盘中的目标更新标识,若二者一致,则表明该元数据服务器缓存中第一元数据字段和目标磁盘中的目标元数据处于同步状态,此时该元数据服务器再根据接收到的更新请求更新第一元数据字段和目标元数据数据,并使二者的更新标识保持一致。
可见,若元数据集群中的任意一台元数据服务器在接收到元数据的更新请求时,均执行上述操作,那么便就可保证每台元数据服务器自身缓存中的第一元数据字段和目标磁盘中的目标元数据保持同步更新,如此更新操作可有条不紊地执行;且每台元数据服务器均与目标磁盘保持同步更新,从而可使不同元数据服务器之间也保持同步更新;同时该更新方法避免了元数据服务器之间的通信,不会影响元数据服务器的主要业务处理,从而提高了元数据服务器的系统性能和整个元数据集群的稳定性。
相应地,本发明实施例提供的一种元数据更新装置、设备及可读存储介质,也同样具有上述技术效果。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种元数据更新方法流程图;
图2为本发明实施例公开的一种元数据更新装置示意图;
图3为本发明实施例公开的一种元数据更新设备示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例公开了一种元数据更新方法、装置、设备及可读存储介质,以在不影响元数据服务器的系统性能的前提下,实现元数据集群中的元数据的同步更新。
参见图1,本发明实施例提供的一种元数据更新方法,应用于元数据集群中的任意一台元数据服务器,包括:
S101、接收元数据的更新请求;
S102、判断自身缓存中的第一元数据字段的第一更新标识与目标磁盘中的更新请求对应的目标元数据的目标更新标识是否一致;若是,则执行S103;若否,则执行S105;
在本实施例中,目标磁盘为元数据集群中的存储设备。将元数据集群中的每台元数据服务器的缓存中的元数据字段均看作第一元数据字段,将不同第一元数据字段构成的元数据看作目标元数据,该目标元数据存储于元数据集群中的存储设备,即目标磁盘中;同时每个第一元数据字段对应有第一更新标识,目标元数据对应有目标更新标识,第一更新标识和目标更新标识用于判断各个第一元数据字段是否与目标元数据同步更新;当第一更新标识和目标更新标识一致时,则表明第一元数据字段和目标元数据处于同步状态;当第一更新标识和目标更新标识不一致时,则表明第一元数据字段和目标元数据处于非同步状态,那么需要通过更新使第一元数据字段和目标元数据处于同步状态后,方可执行新的更新操作。
S103、根据更新请求更新第一元数据字段和第一更新标识,得到第二元数据字段和第二更新标识,并执行S104;
S104、根据更新请求更新目标元数据,将目标更新标识更新为第二更新标识;
当第一更新标识和目标更新标识一致,即第一元数据字段和目标元数据处于同步状态时,根据更新请求直接更新第一元数据字段和第一更新标识,得到第二元数据字段和第二更新标识。而后根据更新请求更新目标元数据,并使目标更新标识与第二更新标识保持一致。
S105、判断第一更新标识是否早于目标更新标识;若是,则执行S106;若否,则执行S109;
S106、根据目标元数据更新第一元数据字段,得到第三元数据字段,并将第一更新标识更新为目标更新标识,得到第三更新标识,并执行S107;
S107、根据更新请求更新第三元数据字段和第三更新标识,得到第四元数据字段和第四更新标识,并执行S108;
S108、根据更新请求更新目标元数据,将目标更新标识更新为第四更新标识;
当第一更新标识和目标更新标识不一致,即第一元数据字段和目标元数据处于非同步状态时,判断第一更新标识是否早于目标更新标识;当第一更新标识早于目标更新标识时,则表明当前情况下,目标元数据具有最近更新的元数据信息,而第一元数据字段中缺少最近更新的元数据信息。例如:若以更新时间为更新标识,当第一更新标识为“2018年6月24日,10:10”,目标更新标识为“2018年6月24日,12:10”时,即表明第一更新标识早于目标更新标识,第一元数据字段需要与目标元数据进行同步。
此种情况下,首先需要根据当前目标元数据更新第一元数据字段,并使第一更新标识与当前目标更新标识保持同步;而后再根据接收到的更新请求继续更新当前第三元数据字段和第三更新标识,并根据更新请求更新目标元数据,使缓存中的更新标识与目标磁盘中的更新标识保持同步。
S109、根据第一元数据字段更新目标元数据,得到对象元数据,并将目标更新标识更新为第一更新标识,得到对象更新标识,并执行S110;
S110、根据更新请求更新第一元数据字段和第一更新标识,得到第五元数据字段和第五更新标识,并执行S111;
S111、根据更新请求更新对象元数据,将对象更新标识更新为第五更新标识。
当第一更新标识和目标更新标识不一致,即第一元数据字段和目标元数据处于非同步状态时,判断第一更新标识是否早于目标更新标识;当第一更新标识晚于目标更新标识时,则表明当前情况下,第一元数据字段具有最近更新的元数据信息,而目标元数据中缺少最近更新的元数据信息。例如:若以更新时间为更新标识,当第一更新标识为“2018年6月24日,10:10”,目标更新标识为“2018年6月24日,10:01”时,即表明第一更新标识晚于目标更新标识,目标元数据需要与第一元数据字段进行同步。
此种情况下,首先需要根据当前第一元数据字段更新目标元数据,并使目标更新标识与当前第一更新标识保持同步;而后再根据接收到的更新请求继续更新当前第一元数据字段和第一更新标识,并根据更新请求继续目标磁盘中的元数据,同时使缓存中的更新标识与目标磁盘中的更新标识保持同步。
可见,本发明实施例提供了一种元数据更新方法,将所述元数据更新方法应用于元数据集群中的任意一台元数据服务器时,元数据服务器在接收到元数据的更新请求时,首先对比自身缓存中的第一更新标识和目标磁盘中的目标更新标识,若二者一致,则表明该元数据服务器缓存中第一元数据字段和目标磁盘中的目标元数据处于同步状态,此时该元数据服务器再根据接收到的更新请求更新第一元数据字段和目标元数据数据,并使二者的更新标识保持一致。
若元数据集群中的任意一台元数据服务器在接收到元数据的更新请求时,均执行上述操作,那么便就可保证每台元数据服务器自身缓存中的第一元数据字段和目标磁盘中的目标元数据保持同步更新,如此更新操作可有条不紊地执行;且每台元数据服务器均与目标磁盘保持同步更新,从而可使不同元数据服务器之间也保持同步更新;同时该更新方法避免了元数据服务器之间的通信,不会影响元数据服务器的主要业务处理,从而提高了元数据服务器的系统性能和整个元数据集群的稳定性。
基于上述实施例,需要说明的是,将每台元数据服务器的更新记录存入所述元数据集群的日志系统,其中,所述更新记录包括:不同数据更新时的不同更新标识,所述更新标识为更新时间戳。
具体的,将每台元数据服务器的更新记录存入所述元数据集群的日志系统,可方便技术人员查看每台元数据服务器的更新记录,以便在出现系统崩溃时,更具该更新记录恢复或同步数据。并且,以更新时间戳为更新标识,既便于日志进程的记录,也便于技术人员分辨数据的新旧。
下面对本发明实施例提供的一种元数据更新装置进行介绍,下文描述的一种元数据更新装置与上文描述的一种元数据更新方法可以相互参照。
参见图2,本发明实施例提供的一种元数据更新装置,应用于元数据集群中的任意一台元数据服务器,包括:
判断模块201,用于当接收到元数据的更新请求时,判断自身缓存中的第一元数据字段的第一更新标识与目标磁盘中的所述更新请求对应的目标元数据的目标更新标识是否一致;所述目标磁盘为所述元数据集群中的存储设备;
更新模块202,用于当所述第一更新标识与所述目标更新标识一致时,根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第二元数据字段和第二更新标识;根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第二更新标识。
其中,还包括:
第一执行模块,用于当所述第一更新标识早于所述目标更新标识时,根据所述目标元数据更新所述第一元数据字段,得到第三元数据字段,并将所述第一更新标识更新为所述目标更新标识,得到第三更新标识;
第二执行模块,用于根据所述更新请求更新所述第三元数据字段和所述第三更新标识,得到第四元数据字段和第四更新标识;
第三执行模块,用于根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第四更新标识。
其中,还包括:
第四执行模块,用于当所述第一更新标识晚于所述目标更新标识时,根据所述第一元数据字段更新所述目标元数据,得到对象元数据,并将所述目标更新标识更新为所述第一更新标识,得到对象更新标识;
第五执行模块,用于根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第五元数据字段和第五更新标识;
第六执行模块,用于根据所述更新请求更新所述对象元数据,将所述对象更新标识更新为所述第五更新标识。
其中,还包括:
日志记录模块,用于将每台元数据服务器的更新记录存入所述元数据集群的日志系统,其中,所述更新记录包括:不同数据更新时的不同更新标识,所述更新标识为更新时间戳。
下面对本发明实施例提供的一种元数据更新设备进行介绍,下文描述的一种元数据更新设备与上文描述的一种元数据更新方法及装置可以相互参照。
参见图3,本发明实施例提供的一种元数据更新设备,包括:
存储器301,用于存储计算机程序;
处理器302,用于执行所述计算机程序时实现上述任意实施例所述的元数据更新方法的步骤。
下面对本发明实施例提供的一种可读存储介质进行介绍,下文描述的一种可读存储介质与上文描述的一种元数据更新方法、装置及设备可以相互参照。
一种可读存储介质,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述任意实施例所述的元数据更新方法的步骤。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种元数据更新方法,其特征在于,应用于元数据集群中的任意一台元数据服务器,包括:
当接收到元数据的更新请求时,判断自身缓存中的第一元数据字段的第一更新标识与目标磁盘中的所述更新请求对应的目标元数据的目标更新标识是否一致;所述目标磁盘为所述元数据集群中的存储设备;
若是,则根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第二元数据字段和第二更新标识;根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第二更新标识。
2.根据权利要求1所述的元数据更新方法,其特征在于,当所述第一更新标识早于所述目标更新标识时,还包括:
根据所述目标元数据更新所述第一元数据字段,得到第三元数据字段,并将所述第一更新标识更新为所述目标更新标识,得到第三更新标识;
根据所述更新请求更新所述第三元数据字段和所述第三更新标识,得到第四元数据字段和第四更新标识;
根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第四更新标识。
3.根据权利要求1所述的元数据更新方法,其特征在于,当所述第一更新标识晚于所述目标更新标识时,还包括:
根据所述第一元数据字段更新所述目标元数据,得到对象元数据,并将所述目标更新标识更新为所述第一更新标识,得到对象更新标识;
根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第五元数据字段和第五更新标识;
根据所述更新请求更新所述对象元数据,将所述对象更新标识更新为所述第五更新标识。
4.根据权利要求1-3任意一项所述的元数据更新方法,其特征在于,还包括:
将每台元数据服务器的更新记录存入所述元数据集群的日志系统,其中,所述更新记录包括:不同数据更新时的不同更新标识,所述更新标识为更新时间戳。
5.一种元数据更新装置,其特征在于,应用于元数据集群中的任意一台元数据服务器,包括:
判断模块,用于当接收到元数据的更新请求时,判断自身缓存中的第一元数据字段的第一更新标识与目标磁盘中的所述更新请求对应的目标元数据的目标更新标识是否一致;所述目标磁盘为所述元数据集群中的存储设备;
更新模块,用于当所述第一更新标识与所述目标更新标识一致时,根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第二元数据字段和第二更新标识;根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第二更新标识。
6.根据权利要求5所述的元数据更新装置,其特征在于,还包括:
第一执行模块,用于当所述第一更新标识早于所述目标更新标识时,根据所述目标元数据更新所述第一元数据字段,得到第三元数据字段,并将所述第一更新标识更新为所述目标更新标识,得到第三更新标识;
第二执行模块,用于根据所述更新请求更新所述第三元数据字段和所述第三更新标识,得到第四元数据字段和第四更新标识;
第三执行模块,用于根据所述更新请求更新所述目标元数据,将所述目标更新标识更新为所述第四更新标识。
7.根据权利要求5所述的元数据更新装置,其特征在于,还包括:
第四执行模块,用于当所述第一更新标识晚于所述目标更新标识时,根据所述第一元数据字段更新所述目标元数据,得到对象元数据,并将所述目标更新标识更新为所述第一更新标识,得到对象更新标识;
第五执行模块,用于根据所述更新请求更新所述第一元数据字段和所述第一更新标识,得到第五元数据字段和第五更新标识;
第六执行模块,用于根据所述更新请求更新所述对象元数据,将所述对象更新标识更新为所述第五更新标识。
8.根据权利要求5-7任意一项所述的元数据更新装置,其特征在于,还包括:
日志记录模块,用于将每台元数据服务器的更新记录存入所述元数据集群的日志系统,其中,所述更新记录包括:不同数据更新时的不同更新标识,所述更新标识为更新时间戳。
9.一种元数据更新设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1-4任意一项所述的元数据更新方法的步骤。
10.一种可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1-4任意一项所述的元数据更新方法的步骤。
CN201810677118.6A 2018-06-27 2018-06-27 一种元数据更新方法、装置、设备及可读存储介质 Active CN108874319B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810677118.6A CN108874319B (zh) 2018-06-27 2018-06-27 一种元数据更新方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810677118.6A CN108874319B (zh) 2018-06-27 2018-06-27 一种元数据更新方法、装置、设备及可读存储介质

Publications (2)

Publication Number Publication Date
CN108874319A CN108874319A (zh) 2018-11-23
CN108874319B true CN108874319B (zh) 2021-06-29

Family

ID=64295254

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810677118.6A Active CN108874319B (zh) 2018-06-27 2018-06-27 一种元数据更新方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN108874319B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110928497B (zh) * 2019-11-15 2021-06-15 浪潮电子信息产业股份有限公司 一种元数据处理方法、装置、设备及可读存储介质
CN111104692A (zh) * 2019-12-12 2020-05-05 中国平安人寿保险股份有限公司 数据请求处理方法及相关设备、计算机可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002108673A (ja) * 2000-09-29 2002-04-12 Toshiba Corp 共有ファイルシステム及び同システムに適用されるメタデータサーバコンピュータ
CN102117287A (zh) * 2009-12-30 2011-07-06 成都市华为赛门铁克科技有限公司 分布式文件系统访问方法、元数据服务器及客户端
CN104320401A (zh) * 2014-10-31 2015-01-28 北京思特奇信息技术股份有限公司 一种基于分布式文件系统的大数据存储访问系统及方法
CN106528866A (zh) * 2016-12-02 2017-03-22 郑州云海信息技术有限公司 一种更新元数据的方法、装置和系统
CN106940699A (zh) * 2016-01-05 2017-07-11 阿里巴巴集团控股有限公司 一种内存数据的同步处理方法、装置、服务器及系统

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7478381B2 (en) * 2003-12-15 2009-01-13 Microsoft Corporation Managing software updates and a software distribution service
US9886443B1 (en) * 2014-12-15 2018-02-06 Nutanix, Inc. Distributed NFS metadata server

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002108673A (ja) * 2000-09-29 2002-04-12 Toshiba Corp 共有ファイルシステム及び同システムに適用されるメタデータサーバコンピュータ
CN102117287A (zh) * 2009-12-30 2011-07-06 成都市华为赛门铁克科技有限公司 分布式文件系统访问方法、元数据服务器及客户端
CN104320401A (zh) * 2014-10-31 2015-01-28 北京思特奇信息技术股份有限公司 一种基于分布式文件系统的大数据存储访问系统及方法
CN106940699A (zh) * 2016-01-05 2017-07-11 阿里巴巴集团控股有限公司 一种内存数据的同步处理方法、装置、服务器及系统
CN106528866A (zh) * 2016-12-02 2017-03-22 郑州云海信息技术有限公司 一种更新元数据的方法、装置和系统

Also Published As

Publication number Publication date
CN108874319A (zh) 2018-11-23

Similar Documents

Publication Publication Date Title
US10706036B2 (en) Systems and methods to optimize multi-version support in indexes
US9779128B2 (en) System and method for massively parallel processing database
US9697253B2 (en) Consistent client-side cache
CN109766349B (zh) 任务防重方法、装置、计算机设备及存储介质
US20210158310A1 (en) Blockchain-based transaction processing methods and apparatuses and electronic devices
CN109977129A (zh) 多级数据缓存方法及设备
CN111049928B (zh) 数据同步方法、系统、电子设备及计算机可读存储介质
CN108874319B (zh) 一种元数据更新方法、装置、设备及可读存储介质
CN111475519B (zh) 数据缓存方法及装置
EP2713555B1 (en) Data configuration method and device, and rollback method and device for data configuration
US20150142749A1 (en) Method and system for a safe archiving of data
CN105677789A (zh) 一种分布式文件系统的目录容量管理方法及系统
CN114676444A (zh) 一种基于区块链的存储系统
EP3522040A1 (en) Method and device for file storage
CN114185991A (zh) 基于分布式数据库实现数据同步的方法及相关装置
EP2416526A1 (en) Task switching method, server node and cluster system
CN111061654B (zh) 缓存刷新处理方法及装置和电子设备
CN111708734A (zh) 一种分布式系统的元数据访问方法、系统、设备以及介质
CN116881270A (zh) 一种保证消息数据一致性的方法及装置
US20150100545A1 (en) Distributed database system and a non-transitory computer readable medium
CN110764697B (zh) 一种数据管理方法及装置
CN115309336A (zh) 数据写入方法、缓存信息更新方法及相关装置
CN110162534B (zh) 数据管理方法及数据存储系统
US11940976B2 (en) Technique for concurrency control
CN113779052A (zh) 数据更新方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant