CN115203488B - 一种图数据库管理方法、装置及电子设备 - Google Patents

一种图数据库管理方法、装置及电子设备 Download PDF

Info

Publication number
CN115203488B
CN115203488B CN202211118584.3A CN202211118584A CN115203488B CN 115203488 B CN115203488 B CN 115203488B CN 202211118584 A CN202211118584 A CN 202211118584A CN 115203488 B CN115203488 B CN 115203488B
Authority
CN
China
Prior art keywords
graph
storage
interface
target
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211118584.3A
Other languages
English (en)
Other versions
CN115203488A (zh
Inventor
高昆仑
乔贵邠
赵保华
陈国宝
张亮
周飞
林剑超
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fangtu Data Beijing Software Co ltd
State Grid Smart Grid Research Institute Co ltd
Original Assignee
Fangtu Data Beijing Software Co ltd
State Grid Smart Grid Research Institute Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fangtu Data Beijing Software Co ltd, State Grid Smart Grid Research Institute Co ltd filed Critical Fangtu Data Beijing Software Co ltd
Priority to CN202211118584.3A priority Critical patent/CN115203488B/zh
Publication of CN115203488A publication Critical patent/CN115203488A/zh
Application granted granted Critical
Publication of CN115203488B publication Critical patent/CN115203488B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/901Indexing; Data structures therefor; Storage structures
    • G06F16/9024Graphs; Linked lists
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9032Query formulation

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请提供一种图数据库管理方法、装置及电子设备,该方法包括:获取图数据库的当前图存储场景信息;其中,图数据库的存储层包括公开存储接口;根据当前图存储场景信息,确定对应的目标图存储;基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理。上述方案提供的方法,通过为图数据库的存储层设置公开存储接口,使图数据库的图处理和图存储两部分解耦,使图数据库可以同时兼容多种类型的图存储,提高了图数据库对图存储的兼容性。

Description

一种图数据库管理方法、装置及电子设备
技术领域
本申请涉及图数据库技术领域,尤其涉及一种图数据库管理方法、装置及电子设备。
背景技术
随着互联网、移动互联网、社交网络、物联网及工业领域关联型网络如电力网络的爆炸式发展,关系图的存储以及基于关系图的网络拓扑结构分析与功能分析等应用有着极大的需求,同时也促成了图数据库的研发热潮。
目前的图数据库通常是将图处理和图存储两部分高度整合,一个图数据库的图处理往往只会连接或使用相对应特定的一种图存储,而无法同时兼容其他类型的图存储,降低了图数据库对图存储的兼容性。
发明内容
本申请提供一种图数据库管理方法、装置及电子设备,以解决现有技术中的图数据库无法同时兼容多种类型的图存储等缺陷。
本申请第一个方面提供一种图数据库管理方法,应用于图数据库的存储层,包括:
获取所述图数据库的当前图存储场景信息;其中,所述图数据库的存储层包括公开存储接口;
根据所述当前图存储场景信息,确定对应的目标图存储;
基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理。
可选的,所述公开存储接口包括图数据操作接口,当所述目标图存储为单机版存储,所述图数据处理为图数据创建时,所述基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理,包括:
基于所述图数据操作接口,在所述单机版存储对应的文件系统中定位目标图数据存储空间;
将所述图数据库中的图数据转换为二进制文件,将所述二进制文件写入至所述目标图数据存储空间。
可选的,所述公开存储接口包括图数据查询接口,当所述目标图存储为单机版存储,所述图数据处理为图数据查询时,所述基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理,包括:
基于所述图数据查询接口,根据待查询图数据ID,确定待查询图数据的物理存储位置;
在所述物理存储位置,读取所述待查询图数据;或者,
基于所述图数据查询接口,根据图数据查询条件,在文件系统中筛选并读取所述待查询图数据。
可选的,所述公开存储接口包括元数据操作接口,当所述目标图存储为单机版存储,所述元数据处理为元数据存储时,所述基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理,包括:
基于所述元数据操作接口,在所述单机版存储对应的文件系统中定位目标元数据存储空间;
将所述图数据库中的元数据转换为二进制文件,将所述二进制文件写入至所述目标元数据存储空间。
可选的,当所述目标图存储为分布式存储时,在基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理之前,所述方法还包括:
基于预设的分布式一致性算法,根据所述图数据库当前的分布式存储需求,将所述公开存储接口配置到若干个分布式服务器;以基于所述若干个分布式服务器对所述图数据库的图数据和元数据进行分区管理。
可选的,所述公开存储接口包括事务操作接口,所述方法还包括:
基于所述事务操作接口,按照用户侧的需求,执行相应的图数据库事务操作;其中,所述图数据库的图数据处理操作和元数据处理操作均属于图数据库事务。
可选的,还包括:
基于所述公开存储接口,为所述图数据库增设新的图存储。
可选的,还包括:
对所述公开存储接口进行数据监控,以得到图数据库数据操作信息;
分析所述数据操作信息,以得到所述图数据库的数据分析结果。
本申请第二个方面提供一种图数据库管理装置,应用于图数据库的存储层,包括:
获取模块,用于获取所述图数据库的当前图存储场景信息;其中,所述图数据库的存储层包括公开存储接口;
确定模块,用于根据所述当前图存储场景信息,确定对应的目标图存储;
管理模块,用于基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理。
可选的,所述公开存储接口包括图数据操作接口,当所述目标图存储为单机版存储,所述图数据处理为图数据创建时,所述管理模块,具体用于:
基于所述图数据操作接口,在所述单机版存储对应的文件系统中定位目标图数据存储空间;
将所述图数据库中的图数据转换为二进制文件,将所述二进制文件写入至所述目标图数据存储空间。
可选的,所述公开存储接口包括图数据查询接口,当所述目标图存储为单机版存储,所述图数据处理为图数据查询时,所述管理模块,具体用于:
基于所述图数据查询接口,根据待查询图数据ID,确定待查询图数据的物理存储位置;
在所述物理存储位置,读取所述待查询图数据;或者,
基于所述图数据查询接口,根据图数据查询条件,在文件系统中筛选并读取所述待查询图数据。
可选的,所述公开存储接口包括元数据操作接口,当所述目标图存储为单机版存储,所述元数据处理为元数据存储时,所述管理模块,具体用于:
基于所述元数据操作接口,在所述单机版存储对应的文件系统中定位目标元数据存储空间;
将所述图数据库中的元数据转换为二进制文件,将所述二进制文件写入至所述目标元数据存储空间。
可选的,当所述目标图存储为分布式存储时,在基于所述公开存储接口,所述装置还包括:
配置模块,用于基于预设的分布式一致性算法,根据所述图数据库当前的分布式存储需求,将所述公开存储接口配置到若干个分布式服务器;以基于所述若干个分布式服务器对所述图数据库的图数据和元数据进行分区管理。
可选的,所述公开存储接口包括事务操作接口,所述管理模块,还用于:
基于所述事务操作接口,按照用户侧的需求,执行相应的图数据库事务操作;其中,所述图数据库的图数据处理操作和元数据处理操作均属于图数据库事务。
可选的,所述管理模块,还用于:
基于所述公开存储接口,为所述图数据库增设新的图存储。
可选的,所述管理模块,还用于:
对所述公开存储接口进行数据监控,以得到图数据库数据操作信息;
分析所述数据操作信息,以得到所述图数据库的数据分析结果。
本申请第三个方面提供一种电子设备,包括:至少一个处理器和存储器;
所述存储器存储计算机执行指令;
所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述至少一个处理器执行如上第一个方面以及第一个方面各种可能的设计所述的方法。
本申请第四个方面提供一种计算机可读存储介质,所述计算机可读存储介质中存储有计算机执行指令,当处理器执行所述计算机执行指令时,实现如上第一个方面以及第一个方面各种可能的设计所述的方法。
本申请技术方案,具有如下优点:
本申请提供的一种图数据库管理方法、装置及电子设备,该方法包括:获取图数据库的当前图存储场景信息;其中,图数据库的存储层包括公开存储接口;根据当前图存储场景信息,确定对应的目标图存储;基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理。上述方案提供的方法,通过为图数据库的存储层设置公开存储接口,使图数据库的图处理和图存储两部分解耦,使图数据库可以同时兼容多种类型的图存储,提高了图数据库对图存储的兼容性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
图1为本申请实施例基于的图数据库管理系统的结构示意图;
图2为本申请实施例提供的图数据库管理方法的流程示意图;
图3为本申请实施例提供的图数据库管理装置的结构示意图;
图4为本申请实施例提供的电子设备的结构示意图。
通过上述附图,已示出本申请明确的实施例,后文中将有更详细的描述。这些附图和文字描述并不是为了通过任何方式限制本公开构思的范围,而是通过参考特定实施例为本领域技术人员说明本申请的概念。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
此外,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。在以下各实施例的描述中,“多个”的含义是两个以上,除非另有明确具体的限定。
传统的关系型数据库在面对OLTP需求能够实时稳定应对,例如在线商城的用户购买行为记录,系统会在购买行为发生后,记录是谁在什么时候、在哪家店铺买了什么,这样的行为数据会以增删改的方式在关系型数据库中进行数据的更新处理操作。而当在线商城主体想基于有相同或者类似购买习惯的用户的历史购买数据给别的用户进行商品推荐,或者预测某类用户是否会购买某类商品,诸如此类的基于关系图的OLAP数据分析需求时,传统关系型数据库则面临着Schema复杂、计算时间与空间不经济、响应时延较长等困境。在传统关系型数据库中,表征实体之间的关系需要创建关联表。当连边关系巨量、查询的实体关系较深时,在建模阶段通过关键字构建关联表所耗费的时间并不能加快实体之间的关系查询,而这恰好是图数据库的优势所在。
图数据库的顶点、边存在属性,即以键值对(Key-valuepair)形式存在的,关联到某一个顶点或边的数据。在表征图数据库的属性时,顶点或边的属性值可以以某一种数据类型(如整形、字符串、双精度数)等形成存在。
图数据库从其整体结构来看,其内部一般会有图处理(或)和存储层(面向图数据、元数据、管理数据等需要持久化到物理存储的数据年存储管理)的划分。其中图处理面向数据的逻辑结构分析、算法运行及优化,如遍历、管理、计算、分析等;图存储面向图数据、元数据、管理数据等需要持久化到物理存储的数据存储管理,这种物理存储可能是面向本机的(即单机版系统)或是面向网络的(如面向分布式系统),但支持持久化的数据库系统最终的物理存储都会落到基于文件系统的非易失存储介质(如磁盘系统)。单机版的图存储层往往也会以图存储引擎的形式存在。
目前的图数据库通常是将图处理和图存储两部分高度整合,一个图数据库的图处理往往只会连接或使用相对应特定的一种图存储,而无法同时兼容其他类型的图存储,降低了图数据库对图存储的兼容性。
针对上述问题,本申请实施例提供的图数据库管理方法、装置及电子设备,通过获取图数据库的当前图存储场景信息;其中,图数据库的存储层包括公开存储接口;根据当前图存储场景信息,确定对应的目标图存储;基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理。上述方案提供的方法,通过为图数据库的存储层设置公开存储接口,使图数据库的图处理和图存储两部分解耦,使图数据库可以同时兼容多种类型的图存储,提高了图数据库对图存储的兼容性。
下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本发明实施例进行描述。
首先,对本申请所基于的图数据库管理系统的结构进行说明:
本申请实施例提供的图数据库管理方法、装置及电子设备,适用于在图数据库的存储层实现图数据库的数据管理,如图1所示,为本申请实施例基于的图数据库管理系统的结构示意图,主要包括图数据库、多种图存储和图数据库管理装置,具体地,图数据库管理装置用于按照该图数据库的当前图存储场景信息在多种图存储中定位目标图存储,进而基于该图数据库的公开存储接口,在目标图存储进行相应的数据管理操作。
本申请实施例提供了一种图数据库管理方法,用于在图数据库的存储层实现图数据库的数据管理。本申请实施例的执行主体为电子设备,比如服务器、台式电脑、笔记本电脑、平板电脑及其他可用于在图数据库的存储层实现图数据库的数据管理的电子设备。
如图2所示,为本申请实施例提供的图数据库管理方法的流程示意图,该方法包括:
步骤201,获取图数据库的当前图存储场景信息。
其中,图数据库的存储层包括公开存储接口。
具体地,可以在图数据库的配置文件中获取当前图存储场景信息。
步骤202,根据当前图存储场景信息,确定对应的目标图存储。
需要说明的是,图存储具体指该图数据库的物理存储器,如磁盘和内存等。
具体地,可以根据当前图存储场景信息表征的存储层所需的配置,如文件目录位置、存储分区服务器地址、端口及每个分区服务器下的存储目录位置等,在若干个图存储中,定位目标图存储。
步骤203,基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理。
需要说明的是,公开存储接口为适合于编程语言的接口,支持不同类型的图存储,在实际的工程实践中是基于Java的编程接口,对于元素级别的操作进行了支持。
具体地,在一实施例中,公开存储接口包括图数据操作接口,当目标图存储为单机版存储,图数据处理为图数据创建时,基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理,包括:
步骤2031,基于图数据操作接口,在单机版存储对应的文件系统中定位目标图数据存储空间;
步骤2032,将图数据库中的图数据转换为二进制文件,将二进制文件写入至目标图数据存储空间。
其中,图数据具体指图数据库的点、边数据,图数据操作主要包括创建、更新、删除单个的点、边元素,以及添加、更新、删除指定点或边的某一个或者多个属性。
具体地,对于点、边数据的创建操作,可以在单机版存储的文件系统中,以点、边元素为存储单位,定位足够可用的点、边存储空间,即目标图数据存储空间。然后按照该文件系统的二进制文件指定的编码要求,将图数据转换为二进制文件,并将其存储至目标图数据存储空间,即通过二进制文件的存储操作,实现点、边数据的创建操作,并相应引入修改、删除等操作。
具体地,在一实施例中,公开存储接口包括图数据查询接口,当目标图存储为单机版存储,图数据处理为图数据查询时,可以基于图数据查询接口,根据待查询图数据ID,确定待查询图数据的物理存储位置;在物理存储位置,读取待查询图数据。或者,基于图数据查询接口,根据图数据查询条件,在文件系统中筛选并读取待查询图数据。
需要说明的是,图数据查询操作包括根据点、边元素的ID来获取指定的单个点、边元素,其中点、边元素主要包括点、边元素本身数据及/或其属性数据,图数据查询操作还包括指定待查询图数据ID列表来获取多个点或者边、指定label标签,即schema的名称,来获取指定类型的点或边;指定谓词predicate的情况下来查询点、边元素并返回一个可进行遍历的引用,以通过此返回的结果引用来挨个获取结果集中的点、边元素;指定查询条件的情况下来返回符合条件的待查询图数据。
具体地,在进行图数据查询时,可以基于待查询图数据ID,即点、边ID,获取待查询图数据对应的二进制文件的物理存储位置,进而在该物理存储位置获取待查询图数据;也可以根据图数据查询条件,对在文件系统中存储的图数据进行过滤,以此获取符合条件的点、边元素,即筛选并读取符合图数据查询条件的待查询图数据。
具体地,在一实施例中,公开存储接口包括元数据操作接口,当目标图存储为单机版存储,元数据处理为元数据存储时,可以基于元数据操作接口,在单机版存储对应的文件系统中定位目标元数据存储空间;将图数据库中的元数据转换为二进制文件,将二进制文件写入至目标元数据存储空间。
需要说明的是,元数据操作包创建、更新、删除、读取schema定义;为特定的schema创建、更新、删除、读取property定义;为某一个schema的某一个或者多个property创建单属性索引或者多属性的组合索引。
具体地,可以基于元数据操作接口,在文件系统存储具体的schema定义信息、schema的属性的定义及约束定义等元数据,并对这些元数据进行序列化,以转换为二进制文件,然后存储到相应的目标元数据存储空间上。相应的,其创建、修改、删除、查询操作也都在文件系统进行操作。
在上述实施例的基础上,作为一种可实施的方式,在一实施例中,当目标图存储为分布式存储时,在基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理之前,方法还包括:
步骤301,基于预设的分布式一致性算法,根据图数据库当前的分布式存储需求,将公开存储接口配置到若干个分布式服务器;以基于若干个分布式服务器对图数据库的图数据和元数据进行分区管理。
需要说明的是,在分布式存储环境下,储层分布在不同的服务器上,即点、边进行了分区存储,每一个分区存储部分点、边的数据,所有分区存储了完整的点、边的数据。每个单独的分区存储的点、边的数据复用了上述单机版的数据管理方式,即基于文件系统进行当前分区的点、边的存储。
具体地,可以基于RAFT等分布式一致性算法,将上述实施例提供的公开存储接口配置到相应的若干个分布式服务器,同时引入了数据复制、分区扩展的能力。
具体地,可以当图数据库的公开存储接口有进行点、边操作调用这一分布式存储需求时,可以通过分布式一致性算法将此公开存储接口分发部署到所涉及到的分区,即将公开存储接口配置到若干个分布式服务器。
其中,RAFT可以实现分布式下跨网络环境中的公开存储接口的实现,保证公开存储接口的调用准确分发到每个分区;每个分区对应的分布式服务器将接收到的基于RAFT的接口调用请求转化为单机版存储环境下对于点、边的接口调用,再对接到此分区环境下基于文件的具体存储接口实现。即分布式存储环境下基于RAFT的分布式协议实现了公开存储接口的部署,在每个分区上具体到文件系统的存储时,可以通过复用单机版存储的基于单服务器环境下的实施方式,实现了基于此公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理。
需要进一步说明的是,单机版存储是代码层面基于公开存储接口进行图数据处理或元数据处理,但其运行环境在一个完全的单机、单进程环境下,对于存储层数据的存取更为高效。分布式存储基于RAFT等一致性算法,公开存储接口调用跨网络协议,因而带来了更多的调用成本,但引入了多机环境下更多的存储容量及扩展能力。
在上述实施例的基础上,作为一种可实施的方式,在一实施例中,公开存储接口包括事务操作接口,该方法还包括:
步骤401,基于事务操作接口,按照用户侧的需求,执行相应的图数据库事务操作。
其中,图数据库的图数据处理操作和元数据处理操作均属于图数据库事务。
需要说明的是,该事务操作接口支持事务开始操作、事务回滚操作和事务提交操作三种图数据库业务操作。其中,事务开始操作用于用户侧调用来开始一个事务传递的参数包括事务的上下文,如事务ID、事务状态、用户信息等。事务回滚操作用于用户侧调用来回滚一个事务,传递的参数包括事务ID。事务提交操作用于用户侧调用来提交一个事务,传递的参数包括事务ID。
需要进一步说明的是,图数据库的图数据处理操作和元数据处理操作都基于事务隔离性实现,即通过多版本的图数据、元数据来进行物理存储,并根据事务的开始、提交、回滚等操作时间,进行多版本数据的维护,在图数据修改、查询时,根据当前事务ID综合考虑事务隔离级别,以进行数据版本更新或对应数据的获取。上述实施例提供的图数据处理操作和元数据处理操作在调用时都会传入事务ID,以便于存储层在进行相应的操作时可以获取到事务的上下文。
在上述实施例的基础上,作为一种可实施的方式,在一实施例中,该方法还包括:
步骤501,基于公开存储接口,为图数据库增设新的图存储。
具体地,基于图数据库的公开存储接口,开发团队、用户或第三方团队可实现新的图存储的引入,比如:可基于存储层的公开存储接口,引入基于内存等易失介质、无持久化特性的内存图数据库存储;基于公开或开源的key-value(即键-值)数据库实现的图数据存储等。
需要说明的是,本申请实施例通过为图数据库增设公开存储接口,使图存储的扩展成为可能,图存储的具体扩展方式可以根据实际应用场景选择,本申请实施例对此不做限定。
具体地,在一实施例中,还可以对公开存储接口进行数据监控,以得到图数据库数据操作信息;分析数据操作信息,以得到图数据库的数据分析结果。
其中,图数据库数据操作信息可以包括数据读写记录等。
具体地,可以通过监控公开存储接口,按照当前的数据分析需求,根据该图数据库的数据操作信息,进行相应的数据分析,进而得到需要的数据分析结果。其中,数据分析类型可以根据实际的数据分析需求设定,本申请实施例不做限定。
本申请实施例提供的图数据库管理方法,通过获取图数据库的当前图存储场景信息;其中,图数据库的存储层包括公开存储接口;根据当前图存储场景信息,确定对应的目标图存储;基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理。上述方案提供的方法,通过为图数据库的存储层设置公开存储接口,使图数据库的图处理和图存储两部分解耦,使图数据库可以同时兼容多种类型的图存储,提高了图数据库对图存储的兼容性,并且,基于该公开存储接口能够实现图存储的扩展和数据分析,为用户和图数据库产品开发团队带来了便利。
本申请实施例提供了一种图数据库管理装置,用于执行上述实施例提供的图数据库管理方法。
如图3所示,为本申请实施例提供的图数据库管理装置的结构示意图。该图数据库管理装置30包括:获取模块301、确定模块302和管理模块303。
其中,获取模块,用于获取图数据库的当前图存储场景信息;其中,图数据库的存储层包括公开存储接口;确定模块,用于根据当前图存储场景信息,确定对应的目标图存储;管理模块,用于基于公开存储接口,按照与目标图存储相应的图处理逻辑,在目标图存储进行图数据处理或元数据处理。
具体地,在一实施例中,公开存储接口包括图数据操作接口,当目标图存储为单机版存储,图数据处理为图数据创建时,管理模块,具体用于:
基于图数据操作接口,在单机版存储对应的文件系统中定位目标图数据存储空间;
将图数据库中的图数据转换为二进制文件,将二进制文件写入至目标图数据存储空间。
具体地,在一实施例中,公开存储接口包括图数据查询接口,当目标图存储为单机版存储,图数据处理为图数据查询时,管理模块,具体用于:
基于图数据查询接口,根据待查询图数据ID,确定待查询图数据的物理存储位置;
在物理存储位置,读取待查询图数据;或者,
基于图数据查询接口,根据图数据查询条件,在文件系统中筛选并读取待查询图数据。
具体地,在一实施例中,公开存储接口包括元数据操作接口,当目标图存储为单机版存储,元数据处理为元数据存储时,管理模块,具体用于:
基于元数据操作接口,在单机版存储对应的文件系统中定位目标元数据存储空间;
将图数据库中的元数据转换为二进制文件,将二进制文件写入至目标元数据存储空间。
具体地,在一实施例中,当目标图存储为分布式存储时,在基于公开存储接口,该装置还包括:
配置模块,用于基于预设的分布式一致性算法,根据图数据库当前的分布式存储需求,将公开存储接口配置到若干个分布式服务器;以基于若干个分布式服务器对图数据库的图数据和元数据进行分区管理。
具体地,在一实施例中,公开存储接口包括事务操作接口,管理模块,还用于:
基于事务操作接口,按照用户侧的需求,执行相应的图数据库事务操作;其中,图数据库的图数据处理操作和元数据处理操作均属于图数据库事务。
具体地,在一实施例中,管理模块,还用于:
基于公开存储接口,为图数据库增设新的图存储。
具体地,在一实施例中,管理模块,还用于:
对公开存储接口进行数据监控,以得到图数据库数据操作信息;
分析数据操作信息,以得到图数据库的数据分析结果。
关于本实施例中的图数据库管理装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本申请实施例提供的图数据库管理装置,用于执行上述实施例提供的图数据库管理方法,其实现方式与原理相同,不再赘述。
本申请实施例提供了一种电子设备,用于执行上述实施例提供的图数据库管理方法。
如图4所示,为本申请实施例提供的电子设备的结构示意图。该电子设备40包括:至少一个处理器41和存储器42。
存储器存储计算机执行指令;至少一个处理器执行存储器存储的计算机执行指令,使得至少一个处理器执行如上实施例提供的图数据库管理方法。
本申请实施例提供的一种电子设备,用于执行上述实施例提供的图数据库管理方法,其实现方式与原理相同,不再赘述。
本申请实施例提供了一种计算机可读存储介质,计算机可读存储介质中存储有计算机执行指令,当处理器执行计算机执行指令时,实现如上任一实施例提供的图数据库管理方法。
本申请实施例的包含计算机可执行指令的存储介质,可用于存储前述实施例中提供的图数据库管理方法的计算机执行指令,其实现方式与原理相同,不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
本领域技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的装置的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (7)

1.一种图数据库管理方法,应用于图数据库的存储层,其特征在于,包括:
获取所述图数据库的当前图存储场景信息;其中,所述图数据库的存储层包括公开存储接口;
根据所述当前图存储场景信息,确定对应的目标图存储;
基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理;
其中,所述公开存储接口包括图数据操作接口,当所述目标图存储为单机版存储,所述图数据处理为图数据创建时,所述基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理,包括:
基于所述图数据操作接口,在所述单机版存储对应的文件系统中定位目标图数据存储空间;
将所述图数据库中的图数据转换为二进制文件,将所述二进制文件写入至所述目标图数据存储空间;
所述公开存储接口包括图数据查询接口,当所述目标图存储为单机版存储,所述图数据处理为图数据查询时,所述基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理,包括:
基于所述图数据查询接口,根据待查询图数据ID,确定待查询图数据的物理存储位置;
在所述物理存储位置,读取所述待查询图数据;或者,
基于所述图数据查询接口,根据图数据查询条件,在文件系统中筛选并读取所述待查询图数据;
所述公开存储接口包括元数据操作接口,当所述目标图存储为单机版存储,所述元数据处理为元数据存储时,所述基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理,包括:
基于所述元数据操作接口,在所述单机版存储对应的文件系统中定位目标元数据存储空间;
将所述图数据库中的元数据转换为二进制文件,将所述二进制文件写入至所述目标元数据存储空间。
2.根据权利要求1所述的方法,其特征在于,当所述目标图存储为分布式存储时,在基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理之前,所述方法还包括:
基于预设的分布式一致性算法,根据所述图数据库当前的分布式存储需求,将所述公开存储接口配置到若干个分布式服务器;以基于所述若干个分布式服务器对所述图数据库的图数据和元数据进行分区管理。
3.根据权利要求1所述的方法,其特征在于,所述公开存储接口包括事务操作接口,所述方法还包括:
基于所述事务操作接口,按照用户侧的需求,执行相应的图数据库事务操作;其中,所述图数据库的图数据处理操作和元数据处理操作均属于图数据库事务。
4.根据权利要求1所述的方法,其特征在于,还包括:
基于所述公开存储接口,为所述图数据库增设新的图存储。
5.根据权利要求1所述的方法,其特征在于,还包括:
对所述公开存储接口进行数据监控,以得到图数据库数据操作信息;
分析所述数据操作信息,以得到所述图数据库的数据分析结果。
6.一种图数据库管理装置,应用于图数据库的存储层,其特征在于,包括:
获取模块,用于获取所述图数据库的当前图存储场景信息;其中,所述图数据库的存储层包括公开存储接口;
确定模块,用于根据所述当前图存储场景信息,确定对应的目标图存储;
管理模块,用于基于所述公开存储接口,按照与所述目标图存储相应的图处理逻辑,在所述目标图存储进行图数据处理或元数据处理;
其中,所述公开存储接口包括图数据操作接口,当所述目标图存储为单机版存储,所述图数据处理为图数据创建时,所述管理模块,具体用于:
基于所述图数据操作接口,在所述单机版存储对应的文件系统中定位目标图数据存储空间;
将所述图数据库中的图数据转换为二进制文件,将所述二进制文件写入至所述目标图数据存储空间;
所述公开存储接口包括图数据查询接口,当所述目标图存储为单机版存储,所述图数据处理为图数据查询时,所述管理模块,具体用于:
基于所述图数据查询接口,根据待查询图数据ID,确定待查询图数据的物理存储位置;
在所述物理存储位置,读取所述待查询图数据;或者,
基于所述图数据查询接口,根据图数据查询条件,在文件系统中筛选并读取所述待查询图数据;
所述公开存储接口包括元数据操作接口,当所述目标图存储为单机版存储,所述元数据处理为元数据存储时,所述管理模块,具体用于:
基于所述元数据操作接口,在所述单机版存储对应的文件系统中定位目标元数据存储空间;
将所述图数据库中的元数据转换为二进制文件,将所述二进制文件写入至所述目标元数据存储空间。
7.一种电子设备,其特征在于,包括:至少一个处理器和存储器;
所述存储器存储计算机执行指令;
所述至少一个处理器执行所述存储器存储的计算机执行指令,使得所述至少一个处理器执行如权利要求1至5任一项所述的方法。
CN202211118584.3A 2022-09-15 2022-09-15 一种图数据库管理方法、装置及电子设备 Active CN115203488B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211118584.3A CN115203488B (zh) 2022-09-15 2022-09-15 一种图数据库管理方法、装置及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211118584.3A CN115203488B (zh) 2022-09-15 2022-09-15 一种图数据库管理方法、装置及电子设备

Publications (2)

Publication Number Publication Date
CN115203488A CN115203488A (zh) 2022-10-18
CN115203488B true CN115203488B (zh) 2022-12-06

Family

ID=83573389

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211118584.3A Active CN115203488B (zh) 2022-09-15 2022-09-15 一种图数据库管理方法、装置及电子设备

Country Status (1)

Country Link
CN (1) CN115203488B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109670089A (zh) * 2018-12-29 2019-04-23 颖投信息科技(上海)有限公司 知识图谱系统及其图服务器
CN110309334A (zh) * 2018-04-20 2019-10-08 腾讯科技(深圳)有限公司 图数据库的查询方法、系统、计算机设备和可读存储介质
CN112148680A (zh) * 2020-09-27 2020-12-29 极道科技(北京)有限公司 一种基于分布式图数据库的文件系统元数据管理方法
CN112528067A (zh) * 2020-12-24 2021-03-19 北京百度网讯科技有限公司 图数据库的存储方法、读取方法、装置及设备
CN114969441A (zh) * 2022-03-24 2022-08-30 朗新数据科技有限公司 基于图数据库的知识挖掘引擎系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11526516B2 (en) * 2020-08-31 2022-12-13 Vesoft. Inc Method, apparatus, device and storage medium for generating and processing a distributed graph database

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110309334A (zh) * 2018-04-20 2019-10-08 腾讯科技(深圳)有限公司 图数据库的查询方法、系统、计算机设备和可读存储介质
CN109670089A (zh) * 2018-12-29 2019-04-23 颖投信息科技(上海)有限公司 知识图谱系统及其图服务器
CN112148680A (zh) * 2020-09-27 2020-12-29 极道科技(北京)有限公司 一种基于分布式图数据库的文件系统元数据管理方法
CN112528067A (zh) * 2020-12-24 2021-03-19 北京百度网讯科技有限公司 图数据库的存储方法、读取方法、装置及设备
CN114969441A (zh) * 2022-03-24 2022-08-30 朗新数据科技有限公司 基于图数据库的知识挖掘引擎系统

Also Published As

Publication number Publication date
CN115203488A (zh) 2022-10-18

Similar Documents

Publication Publication Date Title
US11704294B2 (en) System and method for slowly changing dimension and metadata versioning in a multidimensional database environment
KR102579190B1 (ko) 일관된 데이터베이스 스냅샷들을 이용한 분산 데이터베이스에서의 백업 및 복원
US9361320B1 (en) Modeling big data
US9507807B1 (en) Meta file system for big data
US9031992B1 (en) Analyzing big data
JP4676199B2 (ja) カスタマのアクティビティを統合、管理、および調整するためのシステムおよび方法
US8396894B2 (en) Integrated repository of structured and unstructured data
US8606752B1 (en) Method and system of restoring items to a database while maintaining referential integrity
US20130246437A1 (en) Extended database search
US10970300B2 (en) Supporting multi-tenancy in a federated data management system
US9342573B2 (en) Universal delta data load
US7624117B2 (en) Complex data assembly identifier thesaurus
US8805777B2 (en) Data record collapse and split functionality
US11354269B2 (en) Snapshot load framework
GB2513329A (en) Method and system for scoring data in a database
US11372569B2 (en) De-duplication in master data management
CN112785248B (zh) 人力资源数据跨组织交互方法、装置、设备和存储介质
CN113934713A (zh) 一种订单数据索引方法、系统、计算机设备以及存储介质
CN115329011A (zh) 数据模型的构建方法、数据查询的方法、装置及存储介质
US9275059B1 (en) Genome big data indexing
US20110087709A1 (en) Methods and system for dynamic database content persistence and information management
CN115203488B (zh) 一种图数据库管理方法、装置及电子设备
CN116414935A (zh) 一种基于Elastic Search的分布式搜索空间矢量数据的方法
CN113886505B (zh) 一种基于搜索引擎和关系型数据库实现动态建模的管理系统
CN111753141A (zh) 一种数据管理方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant