CN105389399A - 数据库集群的元信息的管理的方法及装置 - Google Patents

数据库集群的元信息的管理的方法及装置 Download PDF

Info

Publication number
CN105389399A
CN105389399A CN201510993821.4A CN201510993821A CN105389399A CN 105389399 A CN105389399 A CN 105389399A CN 201510993821 A CN201510993821 A CN 201510993821A CN 105389399 A CN105389399 A CN 105389399A
Authority
CN
China
Prior art keywords
metamessage
storage space
back end
shared storage
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510993821.4A
Other languages
English (en)
Inventor
陈宗志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Qihoo Technology Co Ltd
Qizhi Software Beijing Co Ltd
Original Assignee
Beijing Qihoo Technology Co Ltd
Qizhi Software Beijing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Qihoo Technology Co Ltd, Qizhi Software Beijing Co Ltd filed Critical Beijing Qihoo Technology Co Ltd
Priority to CN201510993821.4A priority Critical patent/CN105389399A/zh
Publication of CN105389399A publication Critical patent/CN105389399A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23Updating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21Design, administration or maintenance of databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种数据库集群的元信息的管理方法及装置,所述方法包括:检测到元信息获取请求时,创建元信息管理线程,通过元信息管理线程访问数据库集群的共享存储空间,共享存储空间中存储有数据库集群中各数据节点的元信息,获取与元信息获取请求相匹配的元信息。上述方案通过线程管理元信息的方式可以节约系统的大量资源,且当数据节点中的元信息发生更新时,可及时对共享存储空间相匹配的元信息进行相应更新,保证了元信息的一致性。

Description

数据库集群的元信息的管理的方法及装置
技术领域
本发明涉及数据库技术领域,具体而言,本发明涉及一种的数据库集群的元信息的管理方法,及一种数据库集群的元信息的管理装置。
背景技术
随着时代的发展,科技发达,信息流通,人们之间的交流越来越密切,生活也越来越方便,然而,通过高科技的产物进行信息的沟通与交流离不开数据。数据,已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,必然涉及到对海量数据的存储,可以采用以元数据(Metadata)的方式存储海量数据。元数据,又称元信息、中介数据、中继数据,主要是描述数据属性(property)的信息,用来支持如指示存储位置、历史数据、资源查找、文件记录等功能。在软件构造领域中,元数据被定义为在程序中不是被加工的对象,而是通过其值的改变来改变程序的行为的数据。它在程序运行过程中起着以解释方式控制程序行为的作用。在程序的不同位置配置不同值的元数据,就可以得到与原来等价的程序行为。在现有的数据库集群中,通过创建相应的独立进程对集群中存储的元数据进行管理,该进程将执行对元数据的获取、接收、更新等一系列的操作,由于系统维护独立进程的资源消耗成本较高,在需要长期管理海量元数据的情况下,该进程将耗费大量的系统内存资源和物理资源,从而不仅影响数据的处理效率,还提高了维护该进程的运行成本,降低了用户体验。因此,需要一种高效管理元数据的方案,在保证低运行成本的前提下实现高效管理元数据的目的。
发明内容
为克服上述技术问题或者至少部分地解决上述技术问题,特提出以下技术方案:
本发明的实施例提出了一种数据库集群的元信息的管理方法,所述数据库集群具有多个数据节点,所述方法包括:
检测到元信息获取请求时,创建元信息管理线程;
通过所述元信息管理线程访问所述数据库集群的共享存储空间,所述共享存储空间中存储有所述数据库集群中各数据节点的元信息;
获取与所述元信息获取请求相匹配的元信息。
优选地,所述元信息获取请求包括欲获取的元信息的标识信息,则所述获取与所述元信息获取请求相匹配的元信息的步骤,进一步包括:
依据所述欲获取的元信息的标识信息,在所述共享存储空间中查找并获取与所述标识信息匹配的元信息。
可选地,该方法还包括:
获取所述数据库集群中数据节点的元信息,并将获取的所述元信息存储至所述共享存储空间。
可选地,该方法还包括:
将获取到的所述元数据存储至对应的数据节点,所述元信息获取请求由所述数据节点发出。
可选地,该方法还包括:
检测到元信息更新请求时,利用元信息管理线程访问所述共享存储空间;
更新所述共享存储空间中与元信息更新请求对应的元信息。
优选地,所述元信息更新请求包括欲更新的元信息的标识信息以及更新的元信息,则所述更新所述共享存储空间中与元信息更新请求对应的元信息的步骤,进一步包括:
依据所述欲更新的元信息的标识信息,在所述共享存储空间中查找与元信息更新请求对应的元信息;
以所述更新的元信息替换与元信息更新请求对应的元信息。
本发明的另一实施例提出了一种数据库集群的元信息的管理装置,所述数据库集群具有多个数据节点,所述装置包括:
创建模块,用于检测到元信息获取请求时,创建元信息管理线程;
第一访问模块,用于通过所述元信息管理线程访问所述数据库集群的共享存储空间,所述共享存储空间中存储有所述数据库集群中各数据节点的元信息;
获取模块,用于获取与所述元信息获取请求相匹配的元信息。
优选地,所述元信息获取请求包括欲获取的元信息的标识信息,则所述获取模块包括:
查找获取单元,用于依据所述欲获取的元信息的标识信息,在所述共享存储空间中查找并获取与所述标识信息匹配的元信息。
可选地,该装置还包括:
第一存储模块,用于获取所述数据库集群中数据节点的元信息,并将获取的所述元信息存储至所述共享存储空间。
可选地,该装置还包括:
第二存储模块,用于将获取到的所述元数据存储至对应的数据节点,所述元信息获取请求由所述数据节点发出。
可选地,该装置还包括:
第二访问模块,用于检测到元信息更新请求时,利用元信息管理线程访问所述共享存储空间;
更新模块,用于更新所述共享存储空间中与元信息更新请求对应的元信息。
优选地,所述元信息更新请求包括欲更新的元信息的标识信息以及更新的元信息,则所述更新模块包括:
查找单元,用于依据所述欲更新的元信息的标识信息,在所述共享存储空间中查找与元信息更新请求对应的元信息;
替换单元,用于以所述更新的元信息替换与元信息更新请求对应的元信息。
本发明的实施例中,根据检测到的元数据获取请求,创建元信息管理线程获取与元信息获取请求相匹配的元信息,通过线程管理元信息的方式,一方面,由于创建线程的资源消耗成本很低,且运行线程无需占用独立的内存空间,可以节约系统的大量资源,从而提高了获取元数据的效率;另一方面,通过线程访问数据库集群的共享存储空间可以高效的获取到与元信息获取请求相匹配的元信息,且当数据节点中的元信息发生更新时,可及时对共享存储空间相匹配的元信息进行相应的更新,保证了元信息的一致性;进一步地,在共享存储空间中,预存储元数据或以预定频率获取各数据节点的元数据的方式存储元数据,可及时为数据库集群中的各个数据节点的元信息更新及获取提供可靠的保障;更进一步地,元信息管理线程在系统运行过程中,不需要耗费大量的系统内存资源和物理资源,从而降低了元信息的管理成本。
本发明附加的方面和优点将在下面的描述中部分给出,这些将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明中一个实施例的数据库集群的元信息的管理方法的流程示意图;
图2为本发明中一个优选实施例的数据库集群的元信息的管理方法的流程示意图;
图3为本发明中数据库集群的用于元信息管理的系统拓扑示意图;
图4为本发明中另一实施例的数据库集群的元信息的管理装置的结构示意图;
图5为本发明中另一优选实施例的数据库集群的元信息的管理装置的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能解释为对本发明的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
本技术领域技术人员可以理解,除非另外定义,这里使用的所有术语(包括技术术语和科学术语),具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是,诸如通用字典中定义的那些术语,应该被理解为具有与现有技术的上下文中的意义一致的意义,并且除非像这里一样被特定定义,否则不会用理想化或过于正式的含义来解释。
本发明的实施例中,在数据库集群中,数据库节点可为节点服务器,节点服务器为一种服务器装置,是针对数据库服务器集群来说的,节点服务器并不是单指某一种服务器,它由多个节点和管理装置整体的管理单元构成了数据库集群。因此,本发明的实施例中数据库集群可具有多个数据节点即节点服务器。
图1为本发明中一个实施例的数据库集群的元信息的管理方法的流程示意图。
步骤S110:检测到元信息获取请求时,创建元信息管理线程;步骤S120:通过元信息管理线程访问数据库集群的共享存储空间,共享存储空间中存储有数据库集群中各数据节点的元信息;步骤S130:获取与元信息获取请求相匹配的元信息。
本发明的实施例中,根据检测到的元数据获取请求,创建元信息管理线程获取与元信息获取请求相匹配的元信息,通过线程管理元信息的方式,一方面,由于创建线程的资源消耗成本很低,且运行线程无需占用独立的内存空间,可以节约系统的大量资源,从而提高了获取元数据的效率;另一方面,通过线程访问数据库集群的共享存储空间可以高效的获取到与元信息获取请求相匹配的元信息,且当数据节点中的元信息发生更新时,可及时对共享存储空间相匹配的元信息进行相应的更新,保证了元信息的一致性;进一步地,在共享存储空间中,预存储元数据或以预定频率获取各数据节点的元数据的方式存储元数据,可及时为数据库集群中的各个数据节点的元信息更新及获取提供可靠的保障;更进一步地,元信息管理线程在系统运行过程中,不需要耗费大量的系统内存资源和物理资源,从而降低了元信息的管理成本。
如图3所示,图3示出了数据库集群的用于元信息管理的系统拓扑示意图;在数据库集群中,包括N个数据节点,即数据节点A-N,共享存储空间为独立于数据节点的、且各个数据节点通过元信息管理线程均可访问共享存储空间,并从共享存储空间中获取相应的元信息。
步骤S110:检测到元信息获取请求时,创建元信息管理线程。
具体地,在数据库集群中,当检测到某一数据节点发出的元信息获取请求时,创建元信息的管理线程。
步骤S120:通过元信息管理线程访问数据库集群的共享存储空间,共享存储空间中存储有数据库集群中各数据节点的元信息。
本发明的实施例中,共享存储空间可预存元信息,元信息在共享存储空间中的数据存储形式包括单不限于:链表结构、哈希结构、集合结构和键值对结构。
本发明的实施例中,共享存储空间通过预定的共享地址来标识。
具体地,在数据库集群中,响应于某一数据节点发出的元信息获取请求,基于预定的共享地址通过元信息管理线程访问数据库集群的共享存储空间,共享存储空间中可预先存储有数据库集群中各数据节点的元信息。
步骤S130:获取与元信息获取请求相匹配的元信息。
具体地,通过元信息管理线程,根据某一数据节点发出的元信息获取请求来获取与元信息获取请求相匹配的元信息。
例如,根据某一数据节点发出的元信息获取请求来获取共享存储空间中存储的全部元信息;又例如,根据某一数据节点发出的元信息获取请求来获取共享存储空间中与元信息获取请求相对应的元信息片段。
在一优选实施例中,元信息获取请求包括欲获取的元信息的标识信息,则获取与元信息获取请求相匹配的元信息的步骤,进一步包括:
依据欲获取的元信息的标识信息,在共享存储空间中查找并获取与标识信息匹配的元信息。
例如,在数据库集群Cluster1中,数据节点Node1发出获取元信息的请求,该元信息获取请求包括欲获取的元信息的标识信息如“ID-01:”,当检测到该元信息获取请求时,创建元信息的管理线程ThreadA,随后通过ThreadA访问数据库集群Cluster1的共享存储空间,依据欲获取的元信息的标识信息“ID-01:”,在共享存储空间中查找并获取标识信息为“ID-01:”的元信息。
在一优选实施例中,该方法还包括步骤S140(图中未示出)。步骤S140:获取数据库集群中数据节点的元信息,并将获取的元信息存储至共享存储空间。
具体地,以预定的频率,通过元信息管理线程可从数据库集群中各个数据节点处获取到数据节点的元信息,并将获取到的元信息存储至共享存储空间。
例如,当检测到数据节点Node1发出的元信息获取请求时,该欲获取的元信息的标识信息为“ID-01:”;通过元信息管理线程ThreadA在共享存储空间中未获取到标识信息为“ID-01:”的元信息时,基于该元信息获取请求通过元信息管理线程ThreadA在数据库集群Cluster1中的其他数据节点处请求获取标识信息为“ID-01:”的元信息,并将从某一数据节点处获取的元信息存储至共享存储空间,随后数据节点Node1可通过元信息管理线程ThreadA从共享存储空间中获取到标识信息为“ID-01:”的元信息。
又例如,元信息管理线程ThreadA以预定频率,获取数据库集群Cluster1中各数据节点的元信息,并将获取的元信息存储至共享存储空间。
在一优选实施例中,该方法还包括步骤S150(图中未示出)。步骤S150:将获取到的元数据存储至对应的数据节点,元信息获取请求由数据节点发出。
例如,基于元信息获取请求,通过元信息管理线程ThreadA获取到标识信息为“ID-01:”的元信息,将该元信息存储至发送获取该元信息获取请求的数据节点Node1。
在一优选实施例中,如图2所示,该方法还包括步骤S210和步骤S220。步骤S210:检测到元信息更新请求时,利用元信息管理线程访问共享存储空间;步骤S220:更新共享存储空间中与元信息更新请求对应的元信息。
例如,在数据库集群Cluster1中,属于数据节点Node1的元信息发生了更新操作,则数据节点Node1基于该更新操作生成用于更新共享存储空间中相应元信息的元信息更新请求,当检测到数据节点Node1发出元信息更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,更新共享存储空间中与元信息更新请求对应的元信息。
又例如,在数据库集群Cluster1中,当新增了数据节点Node4时,数据节点Node4发出用于在共享存储空间中添加其相应元信息的元信息更新请求,当检测到数据节点Node2发出添加其相应元信息的元信息更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,在共享存储空间中添加与添加元信息更新请求对应的元信息。
在一优选实施例中(参照图2),元信息更新请求包括欲更新的元信息的标识信息以及更新的元信息,则更新共享存储空间中与元信息更新请求对应的元信息的步骤,进一步包括步骤S221和步骤S222。步骤S221:依据欲更新的元信息的标识信息,在共享存储空间中查找与元信息更新请求对应的元信息;步骤S222:以更新的元信息替换与元信息更新请求对应的元信息。
例如,在数据库集群Cluster1中,属于数据节点Node1的元信息发生了更新操作,则数据节点Node1基于该更新操作生成用于更新共享存储空间中相应元信息的元信息更新请求,其中,元信息的更新请求包括欲更新的元信息的标识信息“ID-01:”以及更新的元信息“000x1”;检测到数据节点Node1发出元信息的更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,查找共享存储空间中标识信息为“ID-01:”的元信息,得到待更新的元信息为“000z1”,随后将共享存储空间中标识信息为“ID-01:”的元信息“000z1”更新为“000x1”。
又例如,在数据库集群Cluster1中,当新增了数据节点Node4时,数据节点Node4发出用于在共享存储空间中添加其相应元信息的元信息更新请求,包括添加标识信息为“ID-05:”的元信息“000x5”和标识信息为“ID-06:”的元信息“000x6”,当检测到数据节点Node2发出添加元信息的更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,在共享存储空间中写入标识信息为“ID-05:”的元信息“000x5”和标识信息为“ID-06:”的元信息“000x6”。
图4为本发明中另一实施例的数据库集群的元信息的管理装置的结构示意图。
创建模块410检测到元信息获取请求时,创建元信息管理线程;第一访问模块420通过元信息管理线程访问数据库集群的共享存储空间,共享存储空间中存储有数据库集群中各数据节点的元信息;获取模块430获取与元信息获取请求相匹配的元信息。
本发明的实施例中,根据检测到的元数据获取请求,创建元信息管理线程获取与元信息获取请求相匹配的元信息,通过线程管理元信息的方式,一方面,由于创建线程的资源消耗成本很低,且运行线程无需占用独立的内存空间,可以节约系统的大量资源,从而提高了获取元数据的效率;另一方面,通过线程访问数据库集群的共享存储空间可以高效的获取到与元信息获取请求相匹配的元信息,且当数据节点中的元信息发生更新时,可及时对共享存储空间相匹配的元信息进行相应的更新,保证了元信息的一致性;进一步地,在共享存储空间中,预存储元数据或以预定频率获取各数据节点的元数据的方式存储元数据,可及时为数据库集群中的各个数据节点的元信息更新及获取提供可靠的保障;更进一步地,元信息管理线程在系统运行过程中,不需要耗费大量的系统内存资源和物理资源,从而降低了元信息的管理成本。
如图3所示,图3示出了数据库集群的用于元信息管理的系统拓扑示意图;在数据库集群中,包括N个数据节点,即数据节点A-N,共享存储空间为独立于数据节点的、且各个数据节点通过元信息管理线程均可访问共享存储空间,并从共享存储空间中获取相应的元信息。
创建模块410检测到元信息获取请求时,创建元信息管理线程。
具体地,在数据库集群中,当检测到某一数据节点发出的元信息获取请求时,创建元信息的管理线程。
第一访问模块420通过元信息管理线程访问数据库集群的共享存储空间,共享存储空间中存储有数据库集群中各数据节点的元信息。
本发明的实施例中,共享存储空间可预存元信息,元信息在共享存储空间中的数据存储形式包括单不限于:链表结构、哈希结构、集合结构和键值对结构。
本发明的实施例中,共享存储空间通过预定的共享地址来标识。
具体地,在数据库集群中,响应于某一数据节点发出的元信息获取请求,基于预定的共享地址通过元信息管理线程访问数据库集群的共享存储空间,共享存储空间中可预先存储有数据库集群中各数据节点的元信息。
获取模块430获取与元信息获取请求相匹配的元信息。
具体地,通过元信息管理线程,根据某一数据节点发出的元信息获取请求来获取与元信息获取请求相匹配的元信息。
例如,根据某一数据节点发出的元信息获取请求来获取共享存储空间中存储的全部元信息;又例如,根据某一数据节点发出的元信息获取请求来获取共享存储空间中与元信息获取请求相对应的元信息片段。
在一优选实施例中,元信息获取请求包括欲获取的元信息的标识信息,则获取模块包括查找获取单元(图中未示出)。查找获取单元依据欲获取的元信息的标识信息,在共享存储空间中查找并获取与标识信息匹配的元信息。
例如,在数据库集群Cluster1中,数据节点Node1发出获取元信息的请求,该元信息获取请求包括欲获取的元信息的标识信息如“ID-01:”,当检测到该元信息获取请求时,创建元信息的管理线程ThreadA,随后通过ThreadA访问数据库集群Cluster1的共享存储空间,依据欲获取的元信息的标识信息“ID-01:”,在共享存储空间中查找并获取标识信息为“ID-01:”的元信息。
在一优选实施例中,该装置还包括第一存储模块(图中未示出)。第一存储模块获取数据库集群中数据节点的元信息,并将获取的元信息存储至共享存储空间。
具体地,以预定的频率,通过元信息管理线程可从数据库集群中各个数据节点处获取到数据节点的元信息,并将获取到的元信息存储至共享存储空间。
例如,当检测到数据节点Node1发出的元信息获取请求时,该欲获取的元信息的标识信息为“ID-01:”;通过元信息管理线程ThreadA在共享存储空间中未获取到标识信息为“ID-01:”的元信息时,基于该元信息获取请求通过元信息管理线程ThreadA在数据库集群Cluster1中的其他数据节点处请求获取标识信息为“ID-01:”的元信息,并将从某一数据节点处获取的元信息存储至共享存储空间,随后数据节点Node1可通过元信息管理线程ThreadA从共享存储空间中获取到标识信息为“ID-01:”的元信息。
又例如,元信息管理线程ThreadA以预定频率,获取数据库集群Cluster1中各数据节点的元信息,并将获取的元信息存储至共享存储空间。
在一优选实施例中,该装置还包括第二存储模块(图中未示出)。第二存储模块将获取到的元数据存储至对应的数据节点,元信息获取请求由数据节点发出。
例如,基于元信息获取请求,通过元信息管理线程ThreadA获取到标识信息为“ID-01:”的元信息,将该元信息存储至发送获取该元信息获取请求的数据节点Node1。
在一优选实施例中,如图5所示,该装置还包括第二访问模块510和更新模块520。检测到元信息更新请求时,第二访问模块510利用元信息管理线程访问共享存储空间;更新模块520更新共享存储空间中与元信息更新请求对应的元信息。
例如,在数据库集群Cluster1中,属于数据节点Node1的元信息发生了更新操作,则数据节点Node1基于该更新操作生成用于更新共享存储空间中相应元信息的元信息更新请求,当检测到数据节点Node1发出元信息更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,更新共享存储空间中与元信息更新请求对应的元信息。
又例如,在数据库集群Cluster1中,当新增了数据节点Node4时,数据节点Node4发出用于在共享存储空间中添加其相应元信息的元信息更新请求,当检测到数据节点Node2发出添加其相应元信息的元信息更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,在共享存储空间中添加与添加元信息更新请求对应的元信息。
在一优选实施例中(参照图5),元信息更新请求包括欲更新的元信息的标识信息以及更新的元信息,则更新模块包括查找单元(图中未示出)和替换单元(图中未示出)。依据欲更新的元信息的标识信息,查找单元在共享存储空间中查找与元信息更新请求对应的元信息;替换单元以更新的元信息替换与元信息更新请求对应的元信息。
例如,在数据库集群Cluster1中,属于数据节点Node1的元信息发生了更新操作,则数据节点Node1基于该更新操作生成用于更新共享存储空间中相应元信息的元信息更新请求,其中,元信息的更新请求包括欲更新的元信息的标识信息“ID-01:”以及更新的元信息“000x1”;检测到数据节点Node1发出元信息的更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,查找共享存储空间中标识信息为“ID-01:”的元信息,得到待更新的元信息为“000z1”,随后将共享存储空间中标识信息为“ID-01:”的元信息“000z1”更新为“000x1”。
又例如,在数据库集群Cluster1中,当新增了数据节点Node4时,数据节点Node4发出用于在共享存储空间中添加其相应元信息的元信息更新请求,包括添加标识信息为“ID-05:”的元信息“000x5”和标识信息为“ID-06:”的元信息“000x6”,当检测到数据节点Node2发出添加元信息的更新请求时,元信息管理线程ThreadA根据预定的共享地址访问数据库集群Cluster1的共享存储空间,随后,在共享存储空间中写入标识信息为“ID-05:”的元信息“000x5”和标识信息为“ID-06:”的元信息“000x6”。
本技术领域技术人员可以理解,本发明包括涉及用于执行本申请中所述操作中的一项或多项的设备。这些设备可以为所需的目的而专门设计和制造,或者也可以包括通用计算机中的已知设备。这些设备具有存储在其内的计算机程序,这些计算机程序选择性地激活或重构。这样的计算机程序可以被存储在设备(例如,计算机)可读介质中或者存储在适于存储电子指令并分别耦联到总线的任何类型的介质中,所述计算机可读介质包括但不限于任何类型的盘(包括软盘、硬盘、光盘、CD-ROM、和磁光盘)、ROM(Read-OnlyMemory,只读存储器)、RAM(RandomAccessMemory,随即存储器)、EPROM(ErasableProgrammableRead-OnlyMemory,可擦写可编程只读存储器)、EEPROM(ElectricallyErasableProgrammableRead-OnlyMemory,电可擦可编程只读存储器)、闪存、磁性卡片或光线卡片。也就是,可读介质包括由设备(例如,计算机)以能够读的形式存储或传输信息的任何介质。
本技术领域技术人员可以理解,可以用计算机程序指令来实现这些结构图和/或框图和/或流图中的每个框以及这些结构图和/或框图和/或流图中的框的组合。本技术领域技术人员可以理解,可以将这些计算机程序指令提供给通用计算机、专业计算机或其他可编程数据处理方法的处理器来实现,从而通过计算机或其他可编程数据处理方法的处理器来执行本发明公开的结构图和/或框图和/或流图的框或多个框中指定的方案。
本技术领域技术人员可以理解,本发明中已经讨论过的各种操作、方法、流程中的步骤、措施、方案可以被交替、更改、组合或删除。进一步地,具有本发明中已经讨论过的各种操作、方法、流程中的其他步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。进一步地,现有技术中的具有与本发明中公开的各种操作、方法、流程中的步骤、措施、方案也可以被交替、更改、重排、分解、组合或删除。
以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种数据库集群的元信息的管理方法,所述数据库集群具有多个数据节点,所述方法包括:
检测到元信息获取请求时,创建元信息管理线程;
通过所述元信息管理线程访问所述数据库集群的共享存储空间,所述共享存储空间中存储有所述数据库集群中各数据节点的元信息;
获取与所述元信息获取请求相匹配的元信息。
2.根据权利要求1所述的方法,其中,所述元信息获取请求包括欲获取的元信息的标识信息,则所述获取与所述元信息获取请求相匹配的元信息的步骤,进一步包括:
依据所述欲获取的元信息的标识信息,在所述共享存储空间中查找并获取与所述标识信息匹配的元信息。
3.根据权利要求1或2所述的方法,还包括:
获取所述数据库集群中数据节点的元信息,并将获取的所述元信息存储至所述共享存储空间。
4.根据权利要求1-3中任一项所述的方法,还包括:
将获取到的所述元数据存储至对应的数据节点,所述元信息获取请求由所述数据节点发出。
5.根据权利要求1-4中任一项所述的方法,还包括:
检测到元信息更新请求时,利用元信息管理线程访问所述共享存储空间;
更新所述共享存储空间中与元信息更新请求对应的元信息。
6.根据权利要求5所述的方法,其中,所述元信息更新请求包括欲更新的元信息的标识信息以及更新的元信息,则所述更新所述共享存储空间中与元信息更新请求对应的元信息的步骤,进一步包括:
依据所述欲更新的元信息的标识信息,在所述共享存储空间中查找与元信息更新请求对应的元信息;
以所述更新的元信息替换与元信息更新请求对应的元信息。
7.一种数据库集群的元信息的管理装置,所述数据库集群具有多个数据节点,所述装置包括:
创建模块,用于检测到元信息获取请求时,创建元信息管理线程;
第一访问模块,用于通过所述元信息管理线程访问所述数据库集群的共享存储空间,所述共享存储空间中存储有所述数据库集群中各数据节点的元信息;
获取模块,用于获取与所述元信息获取请求相匹配的元信息。
8.根据权利要求7所述的装置,其中,所述元信息获取请求包括欲获取的元信息的标识信息,则所述获取模块包括:
查找获取单元,用于依据所述欲获取的元信息的标识信息,在所述共享存储空间中查找并获取与所述标识信息匹配的元信息。
9.根据权利要求7或8所述的装置,还包括:
第一存储模块,用于获取所述数据库集群中数据节点的元信息,并将获取的所述元信息存储至所述共享存储空间。
10.根据权利要求7-9中任一项所述的装置,还包括:
第二存储模块,用于将获取到的所述元数据存储至对应的数据节点,所述元信息获取请求由所述数据节点发出。
CN201510993821.4A 2015-12-25 2015-12-25 数据库集群的元信息的管理的方法及装置 Pending CN105389399A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510993821.4A CN105389399A (zh) 2015-12-25 2015-12-25 数据库集群的元信息的管理的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510993821.4A CN105389399A (zh) 2015-12-25 2015-12-25 数据库集群的元信息的管理的方法及装置

Publications (1)

Publication Number Publication Date
CN105389399A true CN105389399A (zh) 2016-03-09

Family

ID=55421689

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510993821.4A Pending CN105389399A (zh) 2015-12-25 2015-12-25 数据库集群的元信息的管理的方法及装置

Country Status (1)

Country Link
CN (1) CN105389399A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110019024A (zh) * 2019-04-11 2019-07-16 苏州浪潮智能科技有限公司 一种目录查询方法、系统及电子设备和存储介质
CN110457307A (zh) * 2018-05-03 2019-11-15 阿里巴巴集团控股有限公司 元数据管理系统、用户集群创建方法、装置、设备和介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1834956A (zh) * 2005-03-18 2006-09-20 联想(北京)有限公司 多线程元数据的处理方法
CN102609463A (zh) * 2012-01-13 2012-07-25 广东电网公司电力科学研究院 一种基于准实时平台的数据集群管理系统
CN102725739A (zh) * 2009-05-18 2012-10-10 西山修平 虚拟单一存储装置上的元信息共享型分布式数据库系统
CN105159691A (zh) * 2015-10-30 2015-12-16 北京奇虎科技有限公司 更新元数据的方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1834956A (zh) * 2005-03-18 2006-09-20 联想(北京)有限公司 多线程元数据的处理方法
CN102725739A (zh) * 2009-05-18 2012-10-10 西山修平 虚拟单一存储装置上的元信息共享型分布式数据库系统
CN102609463A (zh) * 2012-01-13 2012-07-25 广东电网公司电力科学研究院 一种基于准实时平台的数据集群管理系统
CN105159691A (zh) * 2015-10-30 2015-12-16 北京奇虎科技有限公司 更新元数据的方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110457307A (zh) * 2018-05-03 2019-11-15 阿里巴巴集团控股有限公司 元数据管理系统、用户集群创建方法、装置、设备和介质
CN110457307B (zh) * 2018-05-03 2023-10-24 阿里巴巴集团控股有限公司 元数据管理系统、用户集群创建方法、装置、设备和介质
CN110019024A (zh) * 2019-04-11 2019-07-16 苏州浪潮智能科技有限公司 一种目录查询方法、系统及电子设备和存储介质
CN110019024B (zh) * 2019-04-11 2021-09-17 苏州浪潮智能科技有限公司 一种目录查询方法、系统及电子设备和存储介质

Similar Documents

Publication Publication Date Title
CN102291416B (zh) 一种客户端与服务器端双向同步的方法及系统
CN102163210B (zh) 索引元数据的快速更新
CN102667772B (zh) 文件级分级存储管理系统、方法和设备
CN104298760B (zh) 一种应用于数据仓库的数据处理方法和数据处理装置
US9477735B2 (en) Cloud computing-based data sharing system and method
CN110427368A (zh) 数据处理方法、装置、电子设备及存储介质
CN102202087B (zh) 一种标识存储设备的方法及系统
CN105359099A (zh) 索引更新管线
CN106202416B (zh) 列表数据写方法和装置、列表数据读取方法和装置
CN102289382B (zh) 电视软件更新方法、装置及系统
CN105303456A (zh) 电力传输设备监控数据处理方法
CN102646041B (zh) 一种软件安装方法和系统
CN109710586B (zh) 一种集群节点配置文件同步方法及装置
CN103488590A (zh) 可编程显示器
CN103475721A (zh) 一种数字资产的更新系统及其方法
CN104951308A (zh) Docker Registry的管理优化方式及装置
CN112764874B (zh) 一种基于cmdb配置管理系统的虚拟机服务器信息采集方法
CN112947856A (zh) 一种内存数据的管理方法、装置、计算机设备及存储介质
CN112306993A (zh) 基于Redis的数据读取方法、装置、设备及可读存储介质
US9646016B2 (en) Methods circuits apparatuses systems and associated computer executable code for data deduplication
CN102385614B (zh) 一种终端文件更新管理方法及系统
CN115048188A (zh) 容器的网络隔离控制系统、方法、电子设备及存储介质
CN104598652A (zh) 一种数据库查询方法及装置
CN105389399A (zh) 数据库集群的元信息的管理的方法及装置
CN102929943A (zh) 数据输出方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160309