CN117609570A - 基于图数据库的数据查询方法、装置、设备和介质 - Google Patents
基于图数据库的数据查询方法、装置、设备和介质 Download PDFInfo
- Publication number
- CN117609570A CN117609570A CN202311629712.5A CN202311629712A CN117609570A CN 117609570 A CN117609570 A CN 117609570A CN 202311629712 A CN202311629712 A CN 202311629712A CN 117609570 A CN117609570 A CN 117609570A
- Authority
- CN
- China
- Prior art keywords
- data
- relation
- query
- association
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 64
- 230000003993 interaction Effects 0.000 claims description 104
- 238000004590 computer program Methods 0.000 claims description 18
- 238000013506 data mapping Methods 0.000 claims description 16
- 238000004140 cleaning Methods 0.000 claims description 14
- 238000013507 mapping Methods 0.000 claims description 13
- 230000004048 modification Effects 0.000 claims description 13
- 238000012986 modification Methods 0.000 claims description 13
- 238000012545 processing Methods 0.000 claims description 13
- 238000013075 data extraction Methods 0.000 claims description 5
- 238000010606 normalization Methods 0.000 claims description 3
- 238000004458 analytical method Methods 0.000 abstract description 9
- 230000000007 visual effect Effects 0.000 description 11
- 238000007405 data analysis Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 230000002452 interceptive effect Effects 0.000 description 4
- 230000014509 gene expression Effects 0.000 description 3
- 238000001914 filtration Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/90335—Query processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
- G06F16/9024—Graphs; Linked lists
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9038—Presentation of query results
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于图数据库的数据查询方法、装置、设备和介质。其特征包括:获取与目标查询对象对应的关联关系查询条件;根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据;根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。通过图数据库和关系图片能够展示关联关系,提高数据关联关系的查询效率,并且能够在面对复杂的对象关系时,能够直接展示各个对象直接的关系信息,提高用户分析的效率。
Description
技术领域
本发明涉及数据查询分析领域,尤其涉及一种基于图数据库的数据查询方法、装置、设备和介质。
背景技术
在原有传统工作环境下,对象之间存在复杂关联关系,关系之间相互连接,对象和其他对象之间还存在多种关联关系,而多种关联关系之间又存在复杂的关联,导致在梳理一个目标对象关联的关系和其他对象时,需要面对大量的数据,需要大量的工作时间和人力资源的投入,而由于复杂的关联关系过于庞大且存在错误和重复,导致梳理的效率和效果很低。现有技术中,虽然能够通过关系型数据库存储每个对象存在的关系,能够提高梳理数据的效率,但是关系型数据库的数据表存储时为单一数据表,多个数据表之间的关联度很低,数据表关联的效果一般,数据的查询性能低,且无法直观的展示各个对象之间的关联情况。
发明内容
本发明提供了一种基于图数据库的数据查询方法、装置、设备和介质,以实现对象和对象关联关系的查询和可视化展示。
根据本发明的一方面,提供了一种基于图数据库的数据查询方法,包括:
获取与目标查询对象对应的关联关系查询条件;
根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据;
根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。
根据本发明的另一方面,提供了一种基于图数据库的数据查询装置、包括:
查询接口模块,用于获取与目标查询对象对应的关联关系查询条件;
数据查询模块,用于根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据;
数据展示模块,用于根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。
根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的基于图数据库的数据查询方法。
根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的基于图数据库的数据查询方法。
本发明实施例的技术方案通过获取与目标查询对象对应的关联关系查询条件,通过支持对目标查询对象的关联关系直接查询,能够直接反馈目标查询对象的关联关系,显著提高查询的效率和准确率;根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据,在关联关系数据库中依据查询条件进行查询,支持针对关联关系的查询条件,无需人工分析各个对象之间的关联,进一步提高数据分析效率,降低人工成本;根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱,通过目标关系图谱能够可视化展示,通过图谱的形式能够清楚的确定各个对象之间的关联,进一步降低数据分析难度,提高数据分析的效率和效果。解决了现有技术对象之间关联关系查询困难的技术问题,通过图数据库和关系图片能够展示关联关系,提高数据关联关系的查询效率,并且能够在面对复杂的对象关系时,能够直接展示各个对象直接的关系信息,提高用户分析的效率。
应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的一种基于图数据库的数据查询方法的流程图;
图2是本发明实施例二提供的另一种基于图数据库的数据查询方法的流程图;
图3为本发明实施例提供的另一种基于图数据库的数据查询方法的流程图;
图4为本发明实施例提供的一种数据处理的方法流程图;
图5为本发明实施例公开的一种目标关系图谱的结构示意图;
图6是本发明实施例三提供的一种基于图数据库的数据查询装置的结构示意图;
图7是实现本发明实施例的基于图数据库的数据查询方法的电子设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
实施例一
图1是本发明实施例一提供了一种基于图数据库的数据查询方法的流程图,本实施例可适用于银行对业务对象之间关联关系的查询和分析,该方法可以由基于图数据库的数据查询装置来执行,该基于图数据库的数据查询装置可以采用硬件和/或软件的形式实现,该基于图数据库的数据查询装置可配置于电子设备中。如图1所示,该方法包括:
S110、获取与目标查询对象对应的关联关系查询条件。
可选的,在银行系统中,业务对象的数据通常包括业务对象的属性信息和业务对象之间的关联关系,通常情况下,业务对象的属性信息指业务对象的基本身份信息,业务对象的关联关系基本身份信息与其他业务对象的基本信息关联关系,以及业务对象在银行业务中与其他业务对象的交互信息生成的交互关系,交互关系和基本信息关联关系构成业务对象之间的复杂的关联关系。
其中,目标查询对象可以是需要待查询的对象。需要说明的是,目标查询对象可以是在数据查询时被查询的对象。示例性的,在银行业务中,在业务对象办理相关业务时,将业务对象作为目标查询对象;在关联关系分析时,选择一个对象作为目标查询对象,查询该对象的关联关系。
其中,关联关系查询条件可以用于过滤检索关联关系数据,关联关系查询条件可以是针对目标关系对象待查询的数据结果构成的查询条件。需要说明的是,在对目标查询对象进行数据查询时,通过关联关系查询条件在数据中进行检索和过滤,确定符合关联关系查询条件的数据。示例性的,关联关系查询条件根据构成结构不相同,查询的数据结果也不相同。在查询目标查询对象的所有关联关系的关系图谱时,则能够输出目标查询对象对应的关系图谱;在查询目标查询对象的关联其他对象的关联关系时,能够对目标查询对象关联的其他对象进行数据分析,得到目标查询对象和其他对象的关联关系的连接;在根据对目标查询对象的特定关联关系进行筛选时,能够保留目标查询对象的特定关联关系。
具体的,在进行关联关系查询时,确定待查询的目标查询对象,获取目标查询对象相关的关联关系查询条件。
S120、根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据。
其中,关联关系数据库可以是预先建立的存储目标查询对象和目标查询对象之间关联关系的图数据库。
可选的,关联关系数据库可以是依据对象、对象的对象属性信息、关联关系和关联关系的属性信息构建得到图数据库,在关联关系数据库中,对象和对象之间通过关联关系相连接,每个对象设置相应的对象属性信息,每个关联关系设置相应的关联关系的属性信息。
其中,目标关系查询数据可以是关联关系数据库中记录关于目标查询对象的关联关系的数据。需要说明的是,目标关系查询数据与目标查询对象和关联关系查询条件相关联,针对目标查询对象与不同的关联关系查询条件,通常得到不同的目标关系查询数据。
具体的,请求访问预先创建的关联关系数据库,在预先创建的关联关系数据库中依据关联关系查询条件进行数据查询,得到关联关系数据库返回的目标查询对象的目标关系查询数据。
S130、根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。
其中,目标关系图谱可以是展示目标查询对象的关联关系的数据图谱;需要说明的是,数据图谱是一种以图形化的方式呈现数据的方法,通过目标关系图谱能够通过视觉角度直接展示目标查询对象与其他对象之间的关联关系。
可选的,在本发明可选实施例中,识别查询数据的对象的设备,在检测到查询数据的设备存在可视化图形界面后,依据目标关系查询数据构建目标关系图谱,在可视化图形界面中展示目标关系图谱;在检测到数据的设备不存在可视化图形界面,则向设备发生目标关系查询数据。其中,目标关系图谱还可以通过打印设备进行自动打印,形成目标关系图谱对应的相片。
具体的,在得到目标关系查询数据后,依据目标关系查询数据构建目标查询对象的目标关系图谱,进而在可视化图形界面中展示目标关系图像。
可选的,在本发明另一可选实施例中,在所述展示所述目标关系图谱之后,还包括:
响应针对所述目标关系图谱的数据查看操作,确定与所述数据查看操作对应的查看对象;在所述查看对象为实体对象的情况下,展示所述实体对象的所述实体属性信息;在所述查看对象为关系对象的情况下,展示所述关系对象的所述关系属性信息。
其中,数据查看操作可以是通过信息输入操作查看目标关系图谱的操作。示例性的,可以通过鼠标点击可视化图形界面进行数据查看操作。
其中,查看对象可以是目标关系图谱中的实体对象和关系对象。
其中,实体属性信息可以是实体对象的属性信息;关系属性信息可以是关系对象的属性信息。
具体的,在查看目标关系图谱时,可以选择查看目标关系图谱中实体对象和关系对象的属性信息,在接收到针对目标关系图谱的数据查看操作后,响应针对目标关系图谱的数据查看操作,并确定数据查看操作对应的查看对象,在查看对象为实体对象的情况下,展示实体对象的所述实体属性信息;在查看对象为关系对象的情况下,展示所述关系对象的所述关系属性信息。
可选的,在展示关系数据信息和实体属性信息时,可以在可视化图形界面中以信息框的方式,在实体对象或关系对象上展示关系数据信息或实体属性信息;也可以在可视化图形界面中的任意一侧弹窗出信息框,通过信息框展示关系数据信息或实体属性信息;还可以在可视化图像界面中以链接弹窗的方式展示信息展示页面,在展示信息展示页面中展示关系数据信息或实体属性信息。
本发明实施例的技术方案通过获取与目标查询对象对应的关联关系查询条件,通过支持对目标查询对象的关联关系直接查询,能够直接反馈目标查询对象的关联关系,显著提高查询的效率和准确率;根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据,在关联关系数据库中依据查询条件进行查询,支持针对关联关系的查询条件,无需人工分析各个对象之间的关联,进一步提高数据分析效率,降低人工成本;根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱,通过目标关系图谱能够可视化展示,通过图谱的形式能够清楚的确定各个对象之间的关联,进一步降低数据分析难度,提高数据分析的效率和效果。解决了现有技术对象之间关联关系查询困难的技术问题,通过图数据库和关系图片能够展示关联关系,提高数据关联关系的查询效率,并且能够在面对复杂的对象关系时,能够直接展示各个对象直接的关系信息,提高用户分析的效率。
实施例二
图2是本发明实施例二提供的另一种基于图数据库的数据查询方法的流程图,本实施例与上述实施例之间的关系为在进行数据查询前,构建关联关系数据库的具体方法。如图2所示,该基于图数据库的数据查询方法包括:
S210、获取关联关系数据。
其中,关联关系数据可以是包括对象和其他对象之间的关联关系、每个对象的属性信息和每个关联关系的属性信息。
具体的,在构建关联关系数据库时,关联关系数据可以是构建数据库的基础,获取用于构建关联关系数据库的关联关系数据。
S220、基于关联关系数据进行图数据提取,确定实体对象以及与所述实体对象对应的关系对象。
其中,所述实体对象包括实体属性信息,所述关系对象包括关系属性信息。
可选的,关联关系数据库为图数据库,在关联关系数据库中,对象作为图数据库的顶点,关联关系作为各个顶点之间的边,进而基于关联关系数据进行图数据提取,将对象作为顶点的实体对象,将关联关系作为边的关系对象,并将对象的属性信息确定为实体对象的实体属性信息和关联关系的属性确定为关系对象的关系属性信息。
可选的,在本发明另一可选实施例中,,在所述基于关联关系数据进行图数据提取,确定实体对象和实体对象对应的关系对象之前,还包括:
对所述关联关系数据进行数据清洗,基于数据清洗结果更新所述关联关系数据;获取与所述关联关系数据对应的交互数据,对所述交互数据进行数据映射,确定实体交互关系。
其中,交互数据可以是对象之间进行交互生成的数据。交互数据可以用于确定对象之间的潜在关联。交互数据在记录过程会存在一定的误差,进而导致交互数据存在不清楚数据或残缺数据,通过不同交互数据之间的数据映射,能够有效的减少不清楚数据或残缺数据。
其中,实体交互关系可以是交互关系完整清楚的交互数据,实体交互关系可以用于表示对象之间的交互过程。
其中,数据清洗结果可以用于提高关联关系数据的有效性。
可选的,在获取关联关系数据时,由于数据采集存在一定误差,关联关系数据中存在不完整数据和重复数据,需要对关联关系数据进行数据清洗,基于数据清洗结果对关联关系数据进行数据更新,并且针对对象之间交互生成的交互数据,对交互数据进行数据映射,确定实体交互关系。
可选的,在本发明另一可选实施例中,所述对所述关联关系数据进行数据清洗,包括:
确定关联关系数据中的待清洗数据,其中,所述待清洗数据包括重复关系数据、同一关系数据和不完整数据中的至少一种;针对所述重复关系数据,获取每个所述重复关系数据的修改时间戳,依据所述修改时间戳对重复关系数据进行数据去重;针对所述同一关系数据,对所述同一关系数据进行数据规范化处理;针对所述不完整数据,对所述不完整数据进行数据扩充,以得到完整数据。
其中,待清洗数据可以是关联关系中存在数据问题的数据,其中,所述待清洗数据包括重复关系数据、同一关系数据和不完整数据中的至少一种;重复关系数据可以是多次记录了两个对象之间的关系,在记录过程中,由于记录数据进行数据同步时存在一定的时间延迟,进而造成两个对象之间的一个关联关系存在重复记录的情况;同一关系数据可以是由于记录数据过程中,关联关系的记录不规范,造成同一关系数据记录为不同记录形式;不完整数据可以是在两个对象之间的关联关系是具备相互性,在关联关系记录时,只记录了第一个对象与第二个对象之间的关系,而没有记录第二个对象与第一个对象之间的关系。示例性的,对象A->对象B可以记录为对象A是对象B的甲方,而没有记录对象B->对象A,对象B是对象A的乙方。
其中,修改时间戳可以用于表示修改数据的时间信息。
可选的,针对重复关系数据,由于重复关系数据存在多个不同的属性信息和关联关系,进而需要获取重复关系数据的修改时间戳,选择修改时间戳中最接近当前时刻的修改时间对应的关联关系数据作为正确的关联关系数据,将其他的重复的关联关系进行删除,只保留一个关联关系数据。
可选的,针对同一关系数据时,由于同一关系数据时对一个关联关系的多种不同表达的方式,在通过数据去重后,对关联关系进行规范,对同一关联关系的表达合并为同一种规范,实现同一关系数据统一描述。
可选的,在针对不完整数据时,由于不完整数据是具备关联关系的对象,则只需要对不完整数据进行数据扩充,将关联关系补充完整,得到完整数据。
可选的,在本发明另一可选实施例中,所述对所述交互数据进行数据映射,包括:
识别所述交互数据中的无效交互记录和有效交互记录;根据所述有效交互记录构建交互映射表;在所述交互映射表对所述无效交互记录进行数据映射。
其中,无效交互记录可以是缺少交互信息的交互记录。需要说明的是,无效交互记录是记录完整的交互过程,在记录或存储过程中记录的信息发生存储和传输的意外导致完整的交互信息存在缺少,进而导致交互记录不完整。
其中,有效交互记录可以是交互记录中信息完整的记录信息。
其中,交互映射表可以用于记录对象之间的交互过程。交互映射表中可以记录每个交互记录的两个交互对象、交互对象的属性信息和交互信息。
可选的,针对数据缺失的无效交互记录,通过交互映射表对无需交互记录进行匹配,确定无效交互记录和交互映射表相同的交互对象或交互对象属性信息,进而根据交互对象补充缺少交互对象属性信息的无效交互记录,并根据交互对象属性信息补充缺少交互对象的无效交互记录,以实现数据映射。
具体的,识别交互数据中的无效交互记录和有效交互记录,根据有效交互记录构建交互映射表,通过交互映射表对无效交互记录进行数据映射。
可选的,在本发明另一可选实施例中,所述基于关联关系数据进行图数据提取,确定实体对象和与所述实体对象对应的关系对象,包括:
根据更新后的所述关联关系数据确定实体节点集和第一节点关系集;根据所述实体交互关系确定第二节点关系集;将所述实体节点集确定为所述实体对象,将所述第一节点关系集和所述第二节点关系集确定为与所述实体对象对应的所述关系对象。
其中,实体节点集可以是关联关系数据中对象和对象的数据信息;第一节点关联集可以是对象和对象之间对象关联关系;第二节点关联集可以是对象和对象之间的交互关联关系。需要说明的是,第一节点关联集和第二节点关联集都是对象的关联关系,对象关联关系是根据现实生活中对象之间属性信息得到的关联关系,交互关联关系可以是两个不同对象之间存在交互数据得到的关联关系。
具体的,在对关联关系数据进行数据更新后,针对对象和关联关系构成实体节点集和第一节点关系集,针对实体交互关系生成第二节点关系集,实体节点集中的对象作为实体对象,第一节点关联集和第二节点关联集作为实体对象之间的关联的关系对象,进而将实体对象作为关联关系数据库中顶点,将关系对象作为顶点之间相互连接的边。
S230、基于所述实体对象和所述实体对象对应的关系对象创建关联关系数据库。
具体的,在确定关联关系数据库的实体对象和关系对象,基于实体对象和每个实体对象对应的关系对象创建关联关系数据库。
本发明实施例通过获取关联关系数据;基于关联关系数据进行图数据提取,确定实体对象以及与所述实体对象对应的关系对象,通过对关联关系数据进行图数据提取,将对象作为图数据库的顶点,关联关系作为图数据库的边,能够高效的记录对象和关联关系之间,通过对各个对象的关联关系的分析,能够有效的发现对象之间的隐藏的关系,提高数据查询的性能;基于所述实体对象和所述实体对象对应的关系对象创建关联关系数据库,通过图像数据库能够对对象和关联关系之间的表达更清楚,并且适用关联关系查找算法,提高数据查询性能和效率,解决了现有技术对象之间关联关系查询困难的技术问题,通过图数据库和关系图片能够展示关联关系,提高数据关联关系的查询效率,并且能够在面对复杂的对象关系时,能够直接展示各个对象直接的关系信息,提高用户分析的效率。
可选的,图3为本发明实施例提供的另一种基于图数据库的数据查询方法的流程图。如图3所示,所示方法包括:
获取对象的行业关系数据、外部关系数据和交互数据。通过对象在行业内的持久化存储数据库中的Oracle数据库中获取行业关系数据,并设置数据导入接口,通过数据导入接口导入对象的外部关系数据和交互数据。
对行业关系数据、外部关系数据和交互数据数据处理。图4为本发明实施例提供的一种数据处理的方法流程图,如图4所示:首先,对行业关系数据和外部关系数据进行数据清洗,将存在多条的同一行业关系数据保留日期最新的行业关系数据,将行业关系数据不规范且存在缺少的,进行去重和规范,再进行数据扩充,补充不完整的行业关系数据,并设置添加对象的属性标签。而针对交互数据,识别所述交互数据中的无效交互记录和有效交互记录,根据所述有效交互记录构建交互映射表,在所述交互映射表对所述无效交互记录进行数据映射。
实体对象和关系对象提取。对数据处理后的行业关系数据、外部关系数据和交互数据数据进行实体对象和关系对象的提取,得到实体节点集和关系对象集。关系对象集包括第一节点关系集和第二节点关系集。
导入图数据库。将实体对象和关系对象对应的实体节点集和关系对象集导入图数据库中,生成关联关系数据库。
数据查询和关系图谱展示。图5为本发明实施例公开的一种目标关系图谱的结构示意图,如图5所示,在根据关联关系查询条件查找到目标关系查询数据后,生成并展示目标关系图谱。其中,目标关系图谱分别包括实体对象A、实体对象B、实体对象C、实体对象D、实体对象E和实体对象F;关系对象分别包括:关系对象A、关系对象B、关系对象C、关系对象D、关系对象E和关系对象F;由对象A角度出发,对象B和对象A存在关系B和关系D,由对比B的角度出发,对象A和对象B存在关系A和关系C;同样的,对象A角度出发,对象A和对象D分别存在关系B和关系E,并且能够确定对象E和对象F之间存在一定的关联关系,对象E和对象F与对象A也存在一定的关联关系。
本发明实施例通过图数据库和关系图片能够展示关联关系,提高数据关联关系的查询效率,并且能够在面对复杂的对象关系时,能够直接展示各个对象直接的关系信息,提高对象分析的效率。
实施例三
图6是本发明实施例三提供的一种基于图数据库的数据查询装置的结构示意图。如图6所示,该装置包括:查询接口模块610、数据查询模块620、数据展示模块630,其中,
查询接口模块610,用于获取与目标查询对象对应的关联关系查询条件;
数据查询模块620,用于根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据;
数据展示模块630,用于根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。
本发明实施例的技术方案通过获取与目标查询对象对应的关联关系查询条件,通过支持对目标查询对象的关联关系直接查询,能够直接反馈目标查询对象的关联关系,显著提高查询的效率和准确率;根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据,在关联关系数据库中依据查询条件进行查询,支持针对关联关系的查询条件,无需人工分析各个对象之间的关联,进一步提高数据分析效率,降低人工成本;根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱,通过目标关系图谱能够可视化展示,通过图谱的形式能够清楚的确定各个对象之间的关联,进一步降低数据分析难度,提高数据分析的效率和效果。解决了现有技术对象之间关联关系查询困难的技术问题,通过图数据库和关系图片能够展示关联关系,提高数据关联关系的查询效率,并且能够在面对复杂的对象关系时,能够直接展示各个对象直接的关系信息,提高用户分析的效率。
可选的,所述装置还包括数据获取模块、数据提取模块和数据库创建模块;其中:
所述数据获取模块,用于获取关联关系数据;
所述数据提取模块,用于基于关联关系数据进行图数据提取,确定实体对象以及与所述实体对象对应的关系对象,其中,所述实体对象包括实体属性信息,所述关系对象包括关系属性信息;
所述数据库创建模块,用于基于所述实体对象和所述实体对象对应的关系对象创建关联关系数据库。
可选的,所述装置还包括数据清洗模块和数据映射模块;其中:
所述数据清洗模块,用于对所述关联关系数据进行数据清洗,基于数据清洗结果更新所述关联关系数据;
所述数据映射模块,用于获取与所述关联关系数据对应的交互数据,对所述交互数据进行数据映射,确定实体交互关系。
可选的,所述数据清洗模块具体用于:
确定关联关系数据中的待清洗数据,其中,所述待清洗数据包括重复关系数据、同一关系数据和不完整数据中的至少一种;
针对所述重复关系数据,获取每个所述重复关系数据的修改时间戳,依据所述修改时间戳对重复关系数据进行数据去重;
针对所述同一关系数据,对所述同一关系数据进行数据规范化处理;
针对所述不完整数据,对所述不完整数据进行数据扩充,以得到完整数据。
可选的,所述数据映射模块具体用于:
识别所述交互数据中的无效交互记录和有效交互记录;
根据所述有效交互记录构建交互映射表;
在所述交互映射表对所述无效交互记录进行数据映射。
可选的,所述数据提取模块具体用于:
根据更新后的所述关联关系数据确定实体节点集和第一节点关系集;
根据所述实体交互关系确定第二节点关系集;
将所述实体节点集确定为所述实体对象,将所述第一节点关系集和所述第二节点关系集确定为与所述实体对象对应的所述关系对象。
可选的,所述装置还包括操作相应模块、实体对象展示模块和关系对象展示模块;其中:
所述操作相应模块,用于响应针对所述目标关系图谱的数据查看操作,确定与所述数据查看操作对应的查看对象;
所述实体对象展示模块,用于在所述查看对象为实体对象的情况下,展示所述实体对象的所述实体属性信息;
所述关系对象展示模块,用于在所述查看对象为关系对象的情况下,展示所述关系对象的所述关系属性信息。
本发明实施例所提供的基于图数据库的数据查询装置可执行本发明任意实施例所提供的基于图数据库的数据查询方法,具备执行方法相应的功能模块和有益效果。
实施例四
图7示出了可以用来实施本发明的实施例的电子设备10的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。
如图7所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机访问存储器(RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。
电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。
处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如基于图数据库的数据查询方法。
在一些实施例中,基于图数据库的数据查询方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时,可以执行上文描述的基于图数据库的数据查询方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行基于图数据库的数据查询方法。
本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。
用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。
计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
实施例五
本实施例提供一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如本发明任意实施例所提供的基于图数据库的数据查询方法步骤,该方法包括:
获取与目标查询对象对应的关联关系查询条件;
根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据;
根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于:电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言,诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
本领域普通技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个计算装置上,或者分布在多个计算装置所组成的网络上,可选地,他们可以用计算机装置可执行的程序代码来实现,从而可以将它们存储在存储装置中由计算装置来执行,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件的结合。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。
Claims (10)
1.一种基于图数据库的数据查询方法,其特征在于,包括:
获取与目标查询对象对应的关联关系查询条件;
根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据;
根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。
2.根据权利要求1所述的方法,其特征在于,在所述获取与目标查询对象对应的关联关系查询条件之前,还包括;
获取关联关系数据;
基于关联关系数据进行图数据提取,确定实体对象以及与所述实体对象对应的关系对象,其中,所述实体对象包括实体属性信息,所述关系对象包括关系属性信息;
基于所述实体对象和所述实体对象对应的关系对象创建关联关系数据库。
3.根据权利要求2所述的方法,其特征在于,在所述基于关联关系数据进行图数据提取,确定实体对象和实体对象对应的关系对象之前,还包括:
对所述关联关系数据进行数据清洗,基于数据清洗结果更新所述关联关系数据;
获取与所述关联关系数据对应的交互数据,对所述交互数据进行数据映射,确定实体交互关系。
4.根据权利要求3所述的方法,其特征在于,所述对所述关联关系数据进行数据清洗,包括:
确定关联关系数据中的待清洗数据,其中,所述待清洗数据包括重复关系数据、同一关系数据和不完整数据中的至少一种;
针对所述重复关系数据,获取每个所述重复关系数据的修改时间戳,依据所述修改时间戳对重复关系数据进行数据去重;
针对所述同一关系数据,对所述同一关系数据进行数据规范化处理;
针对所述不完整数据,对所述不完整数据进行数据扩充,以得到完整数据。
5.根据权利要求3所述的方法,其特征在于,所述对所述交互数据进行数据映射,包括:
识别所述交互数据中的无效交互记录和有效交互记录;
根据所述有效交互记录构建交互映射表;
在所述交互映射表对所述无效交互记录进行数据映射。
6.根据权利要求3所述的方法,其特征在于,所述基于关联关系数据进行图数据提取,确定实体对象和与所述实体对象对应的关系对象,包括:
根据更新后的所述关联关系数据确定实体节点集和第一节点关系集;
根据所述实体交互关系确定第二节点关系集;
将所述实体节点集确定为所述实体对象,将所述第一节点关系集和所述第二节点关系集确定为与所述实体对象对应的所述关系对象。
7.根据权利要求1所述的方法,其特征在于,在所述展示所述目标关系图谱之后,还包括:
响应针对所述目标关系图谱的数据查看操作,确定与所述数据查看操作对应的查看对象;
在所述查看对象为实体对象的情况下,展示所述实体对象的所述实体属性信息;
在所述查看对象为关系对象的情况下,展示所述关系对象的所述关系属性信息。
8.一种基于图数据库的银行数据查询装置,其特征在于,包括:
查询接口模块,用于获取与目标查询对象对应的关联关系查询条件;
数据查询模块,用于根据所述关联关系查询条件在预先创建的关联关系数据库中进行数据查询,确定所述目标查询对象的目标关系查询数据;
数据展示模块,用于根据所述目标关系查询数据生成所述目标查询对象的目标关系图谱,并展示所述目标关系图谱。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-7任一所述的基于图数据库的银行数据查询方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现权利要求1-7任一所述的基于图数据库的银行数据查询方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311629712.5A CN117609570A (zh) | 2023-11-30 | 2023-11-30 | 基于图数据库的数据查询方法、装置、设备和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311629712.5A CN117609570A (zh) | 2023-11-30 | 2023-11-30 | 基于图数据库的数据查询方法、装置、设备和介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117609570A true CN117609570A (zh) | 2024-02-27 |
Family
ID=89949539
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311629712.5A Pending CN117609570A (zh) | 2023-11-30 | 2023-11-30 | 基于图数据库的数据查询方法、装置、设备和介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117609570A (zh) |
-
2023
- 2023-11-30 CN CN202311629712.5A patent/CN117609570A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111709527A (zh) | 运维知识图谱库的建立方法、装置、设备及存储介质 | |
CN113434527B (zh) | 数据处理的方法、装置、电子设备和存储介质 | |
CN111125266A (zh) | 数据处理方法、装置、设备及存储介质 | |
US11442930B2 (en) | Method, apparatus, device and storage medium for data aggregation | |
CN114461644A (zh) | 一种数据采集方法、装置、电子设备及存储介质 | |
CN110784377A (zh) | 一种多云环境下的云监控数据统一管理的方法 | |
EP3564833B1 (en) | Method and device for identifying main picture in web page | |
CN107291923B (zh) | 信息处理方法和装置 | |
CN113722600A (zh) | 应用于大数据的数据查询方法、装置、设备及产品 | |
CN112433757A (zh) | 一种确定接口调用关系的方法和装置 | |
CN112148705A (zh) | 数据迁移的方法和装置 | |
CN117609570A (zh) | 基于图数据库的数据查询方法、装置、设备和介质 | |
CN115905322A (zh) | 业务处理方法、装置、电子设备及存储介质 | |
CN113360672A (zh) | 用于生成知识图谱的方法、装置、设备、介质和产品 | |
CN113127574A (zh) | 基于知识图谱的业务数据展示方法、系统、设备及介质 | |
CN109710673B (zh) | 作品处理方法、装置、设备和介质 | |
CN111275466A (zh) | 一种超期单量预警的方法和装置 | |
CN117150215B (zh) | 一种考核结果确定方法、装置、电子设备及存储介质 | |
CN111832304B (zh) | 楼盘名称的查重方法、装置、电子设备及存储介质 | |
CN116069785A (zh) | 训练信息抽取模型的方法、信息抽取方法和装置 | |
CN117076577A (zh) | 数据血缘的确定方法、装置、设备、存储介质及程序产品 | |
CN117251433A (zh) | 电网交易账户管理方法、装置、电子设备及存储介质 | |
CN117709902A (zh) | 基于bom文件的物料录入方法、装置、设备及介质 | |
CN117271840A (zh) | 图数据库的数据查询方法、装置及电子设备 | |
CN116521866A (zh) | 一种训练样本构建方法、装置、电子设备及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |