CN112925856B - 实体关系分析方法、装置、分析设备及计算机存储介质 - Google Patents
实体关系分析方法、装置、分析设备及计算机存储介质 Download PDFInfo
- Publication number
- CN112925856B CN112925856B CN201911240823.0A CN201911240823A CN112925856B CN 112925856 B CN112925856 B CN 112925856B CN 201911240823 A CN201911240823 A CN 201911240823A CN 112925856 B CN112925856 B CN 112925856B
- Authority
- CN
- China
- Prior art keywords
- entity
- temporary
- entity set
- intersection
- existing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
- G06F16/288—Entity relationship models
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例涉及数据库分析技术领域,公开了一种实体关系分析方法、装置、分析设备及计算机存储介质,该方法包括:根据数据库信息的解析结果,获取临时实体集合;所述临时实体集合包含若干个实体;计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合;在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中。通过上述方式,本发明实施例实现了全面的识别和精确的解析数据存储系统中所有实体之间的关联,为解耦和拆分提供切入点。
Description
技术领域
本发明实施例涉及数据库分析技术领域,具体涉及一种数据库的实体关系分析方法、装置、分析设备及计算机存储介质。
背景技术
随着使用时间的不断推移,对于一个庞大复杂的历史系统来说,其底层的业务数据模型以及各个数据实体间的关系通常难以识别。
如果因业务变更等原因而需要对该历史系统进行全面改造时,对其数据库进行解耦分库是其中不可缺少的步骤。现有的解耦分库过程通常依赖于手工模式,通过对原有的软件开发时留存的文档进行分析以及与曾经的开发人员或者维护者核实等方式来了解整个历史系统各个数据实体之间的关系,并得出相应的结论,确定可以对哪些数据对象进行解耦等。
在实现本发明实施例的过程中,发明人发现:由于实际软件开发过程中,历史系统经历多次的迭代变更,参杂了统一版本、本地化版本等多个版本分支的修改,需求分析和设计人员人数众多。
因此,通过手动模式进行核实和分析各个数据实体之间的关系,存在低效率,梳理分析不够全面,无法全面和正确的识别各个对象或者数据实体之间的关系,进而容易出现解耦拆分不彻底或者关联紧密的数据实体被错误解耦拆分的问题。
发明内容
鉴于上述问题,本发明实施例提供了一种数据库的实体关系分析方法、装置、分析设备及计算机存储介质,克服了上述问题或者至少部分地解决了上述问题。
根据本发明实施例的一个方面,提供了一种数据库的实体分析方法,所述方法包括:
根据数据库信息的解析结果,获取临时实体集合;所述临时实体集合包含若干个实体;
计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合;
在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;
在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中。
在一种可选的方式中,所述方法还包括:
根据所述临时实体集合包含的实体,更新实体表,所述实体表用于存储已有的实体;根据所述临时实体集合与所述已有实体集合之间的交集计算结果,统计所述实体的连接点次数,所述连接点次数为所述实体在所述临时实体集合与所述已有实体集合的交集中出现的次数。
在一种可选的方式中,所述根据数据库信息的解析结果,获取临时实体集合,具体包括:
在设定的时间内,采集在所述数据库中执行的多条结构化查询语言语句;逐条解析所述结构化查询语言语句的信息内容;获取每一条所述结构化查询语言语句的信息内容中的临时实体集合;将所述临时实体集合存储到待处理中间表中。
在一种可选的方式中,所述计算所述临时实体集合与实体关系表之间的交集,具体包括:
分别在所述待处理中间表和所述实体关系表中选取一个临时实体集合和一个已有实体集合;对所述临时实体集合和所述已有实体集合执行取交集的操作;在所述交集为非空时,将所述临时实体集合的并入标识设置为所述已有实体集合的标识编号;在所述交集为空时,保持所述临时实体集合的并入标识为初始值。
在一种可选的方式中,所述方法还包括:
在遍历所述实体关系表中所有的已有实体集合后,获取所述临时实体集合的并入集合标识;
在所述并入标识为初始值时,确定所述临时实体集合与所述实体关系表的交集为空;
在所述并入标识不为初始值时,确定所述临时实体集合与所述实体关系表的交集为非空。
在一种可选的方式中,所述根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中,具体包括:
获取所述临时实体集合的并入标识的标识编号;
根据所述并入集合标识的标识编号,将所述临时实体集合合并到与所述标识编号对应的已有实体集合中。
在一种可选的方式中,在所述临时实体集合合并到与所述标识编号对应的已有实体集合后,所述方法还包括:
在所述待处理中间表中删除已经与所述已有实体集合合并的临时实体集合。
根据本发明实施例的另一方面,提供了一种实体关系分析装置,包括:
采集装置,用于根据数据库信息的解析结果,获取临时实体集合;所述临时实体集合包含若干个实体;计算装置,用于计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合;临时实体集合处理装置,用于在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;并且在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中。
根据本发明实施例的另一方面,提供了一种电子设备,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行上述的实体关系分析方法。
根据本发明实施例的又一方面,提供了一种计算机存储介质,所述存储介质中存储有至少一可执行指令,所述可执行指令使所述处理器执行上述的实体关系分析方法。
本发明实施例通过自动采集实际运行中的系统数据,并通过临时实体集合以及与实体关系表之间的取交集和合并操作,能够全面的识别和精确的解析数据存储系统中所有实体之间的关系或者关联,为解耦和拆分提供切入点。
上述说明仅是本发明实施例技术方案的概述,为了能够更清楚了解本发明实施例的技术手段,而可依照说明书的内容予以实施,并且为了让本发明实施例的上述和其它目的、特征和优点能够更明显易懂,以下特举本发明的具体实施方式。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1示出了本发明实施例提供的实体关系处理方法流程图;
图2示出了本发明实施例提供的步骤120的流程图;
图3示出了本发明实施例提供的实体关系处理方法在数据库中实际应用的示意图。
图4示出了本发明实施例提供的实体关系处理装置的结构示意图;
图5示出了本发明实施例提供的电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例,然而应当理解,可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本发明,并且能够将本发明的范围完整的传达给本领域的技术人员。
图1示出了本发明实体关系分析方法实施例的流程图,该方法应用于服务器等电子计算设备中,分析这些电子计算设备所支持的数据库和大型系统中所涉及到的实体关系。该电子计算设备具体可以是任何合适类型的,能够具有一定逻辑运算能力并提供相关服务(如数据查询,编辑或者管理)的硬件设备。基于这些硬件设备与计算机软件程序的配合,可以实现相应的数据库系统或者其他的大型业务系统。
如图1所示,该方法包括以下步骤:
步骤110:根据数据库信息的解析结果,获取临时实体集合。所述临时实体集合包含若干个实体。
其中,“实体”是指客观存在并且可以相互区分的事物,例如人、物体或者是抽象概念。实体与实体之间可以存在有关联或者关系,用以表示两者之间的对应关系。一个“实体”可以通过一种或者多种不同的属性进行描述和定义,用以区分不同的实体,那些具有相同属性的实体可以组成一个实体集合。
“临时实体集合”是指在实际运行过程中采集获得数据库信息分析获得的,尚未进行分析处理的实体数据信息。
在一些实施例中,可以通过如下采集和解析的步骤来获取临时实体集合:
首先,在设定的时间内,采集在所述数据库中执行的多条结构化查询语言语句。
其中,结构化查询语言语句(以下均简称为Sql语句)是指由Sql编程语言编写的语句。Sql是一种数据库查询和程序设计语言,可以用于存取数据以及查询、更新和管理关系数据库系统。
该设定的时间可以是根据实际应用情况或者需求而设置的经验性数值。例如,可以设置每间隔一定的周期,连续采集一段时间内的结构化查询语言语句。
具体的,可以通过数据库提供的接口来完成该Sql语句的采集过程。例如,在oracle数据库汇总,可以通过视图dba_hist_sqltext的查询功能,连续采集一段时间内的Sql语句。
然后,逐条解析所述Sql语句的信息内容。对采集到的多条Sql语句可以逐条进行解析,获取和确定其语句内容。具体解析的方法为本技术领域的常用技术手段,在此不作赘述。
最后,获取每一条所述Sql语句的信息内容中的临时实体集合并将所述临时实体集合存储到待处理中间表中。
其中,基于解析的信息内容,可以得到相应的实体对象用于进一步的分析处理。这些待分析的临时实体集合可以被存储到待处理中间表中,以便于进行数据的调用和维护。
该待处理中间表是一个用于记录和存储待分析的临时实体集合的数据集。其可以跟随分析和处理的过程而持续进行更新。具体的,可以在待处理中间表中设置相应的标签,用于标记和区分待处理中间表中已经进行处理和等待进行处理的临时实体集合。
步骤120:计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合。
其中,“实体关系表”是用于记录或者存储已经分析确认,在当前系统或者数据库运行过程中已经确定存在的实体集合的数据集。在本实施例中,以“已有实体集合”这样的术语用以表示这些经过分析和确认的实体集合,与“临时实体集合”相区分。
可以理解的是,该实体关系表实际上一个跟随数据库或者系统运行而不断更新的数据集。其内部存储或者维护的已有实体集合可以随对实体关系的分析而不断增加或者适应性的编辑。
计算交集是指通过合适的操作方式,以当前的实体关系表作为衡量的标准,确定临时实体集合是否有与其相同或者重叠的部分。
步骤130:判断所述交集是否为空;若是,执行步骤140,若否,执行步骤150。
“交集”为空时,表明了临时实体集合与当前的实体关系表之间没有相同的部分。而“交集”为非空时,表明了两者之间存在重叠的部分。
步骤140:将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中。
其中,在交集为空的情况下,表明了在实际的运行过程中,出现了一个新的实体集合。由此,可以将其加入到实体关系表中,实现对实体关系表的更新,自动化的反映和分析实体关系。
步骤150:根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中。
其中,在交集为非空时,可以将待处理的临时实体集合合并到所述实体关系表与其重叠的已有实体集合中。
在一些实施例中,除了不断更新数据库的已有实体集合以外,所述方法还可以包括如下步骤:
在获取到一个新的临时实体集合时,根据所述临时实体集合包含的实体,更新实体表。
其中,所述实体表用于存储已有的实体。该实体表与上述的待处理中间表以及实体关系表相类似,其用于存储和维护已有的实体对象,并跟随数据库和系统的运行而不断更新。
具体更新的方法可以是,在临时实体集合中出现了实体表中没有记录的实体对象时,可以将该实体加入或者存储到实体表中。
然后,根据所述临时实体集合与所述已有实体集合之间的交集计算结果,统计所述实体的连接点次数。
其中,所述连接点次数为所述实体在所述临时实体集合与所述已有实体集合的交集中出现的次数。亦即,在每一次交集计算过程中,可以根据交集的计算结果为实体累加相应的次数,实体在交集中每出现一次即为连接点次数增加1。
通过本发明实施例揭露的实体关系分析方法,可以精确的得到系统中各个数据实体间的关系(由已有实体集合体现)及每个实体作为连接点的频率(由连接点次数体现),从而可以高效支持软件开发、数据模型改造、系统解耦、数据生命周期管理等工作,解决了复杂历史系统中的数据库实体关系识别依靠人力识别而造成的低效率、不全面和不精准的问题。
图2示出了本发明实体分析方法的步骤120的流程图。在本实施例中,通过遍历已有的实体关系表的方式来计算某个临时实体集合与实体关系表之间的相关关系。其可以应用于任何类型的数据存储系统中,用以完成对实体集合的分析。如图2所示,该方法包括以下步骤:
步骤121:在所述待处理中间表选取一个临时实体集合。
具体可以根据任何合适的方式,选取一个尚未被处理和分析的临时实体集合。例如,可以根据临时实体集合加入待处理中间表的时间先后次序进行选取。
在一些实施例中,已经被分析处理完毕的临时实体集合(如被合并到已有实体集合以后)可以从所述待处理中间表中删除,以便于管理和维护待处理的数据信息。
步骤122:在所述实体关系表中选取一个已有实体集合。
选取已有实体集合的方式则可以是随机的方式,只需要不会选择到相同的已有实体集合即可。为了避免重复选择,可以为每个已有实体集合配置一个唯一的标识编号,作为已有实体集合的身份信息。
该标识编号可以采用任何合适类型的数据信息,只需要能够区分不同的已有实体集合即可。
步骤123:对所述临时实体集合和所述已有实体集合执行取交集的操作。
“取交集”是指计算两个集合的交集的操作。其具体可以采用任何合适类型的算法或者运算方式来获得两个集合的交集。
步骤124:判断所述交集是否为空;若否,执行步骤125,若是,则执行步骤126。
在两个集合之间的交集为空时,表明这两个集合之间没有重叠的部分。而当两个集合之间的交集为非空时,则表示两个集合之间存在联系,具有重叠的部分。
步骤125:将所述临时实体集合的并入标识设置为所述已有实体集合的标识编号。
“并入标识”是一个临时实体集合的字段。其用于表示临时实体集合可以并入的已有实体集合。在两个集合存在交集的情况下,可以将具有交集的标识编号赋值给临时实体集合的并入标识字段,从而表明临时实体集合可以被合并到的已有实体集合。
步骤126:保持所述临时实体集合的并入标识为初始值。
该初始值可以根据实际情况的需要而进行设置。例如,可以简单的设置为空值。
步骤127:判断所述实体关系表中所有的已有实体集合是否已经被遍历。若是,执行步骤128,若否,返回步骤122。
“遍历”是指选中的临时实体集合已经与实体关系表中所有的已有实体集合均进行了取交集的操作,并确定与这些已有实体集合之间是否存在交集。
因此,在没有遍历完成时,需要重新返回步骤122,选取另一个已有实体集合进行取交集的操作。
步骤128:根据所述并入标识的值,确定所述临时实体集合与实体关系表之间的交集情况。
其中,在所述并入标识为初始值时,确定所述临时实体集合与所述实体关系表的交集为空,并且在所述并入标识不为初始值时,确定所述临时实体集合与所述实体关系表的交集为非空。
在遍历完成以后,可以根据并入标识快速的确定述临时实体集合与所述实体关系表之间的关联关系。
临时实体集合与所述实体关系表中每一个已有实体集合之间的交集情况可以很好的用于表示这些实体之间的联系或者关系。
在一些实施例中,基于交集为“空”和“非空”两种不同的情况,可以对临时实体集合执行如下对应的操作以实现对实体关系表的更新:
一方面,在所述临时实体集合与所述实体关系表的交集为非空时,可以获取所述临时实体集合的并入标识的标识编号。然后,根据所述并入集合标识的标识编号,将所述临时实体集合合并到与所述标识编号对应的已有实体集合中。
另一方面,在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中。应当说明的是,在临时实体集合转换为已有实体集合时,可以为其配置一个唯一的标识编号用以与其他已有实体集合区分。
例如,可以在获取到临时实体集合时,为临时实体集合设置一个唯一的临时标识编号。在需要转换为已有实体集合时,直接使用该临时标识编号。
图3示出了本发明实体关系分析方法在数据库中应用的示意图。如图3所示,该具体的应用过程可以包括如下步骤:
步骤301:通过数据库接口,周期性的采集在一段时间内所有在数据库中运行的Sql语句,并存储到Sql信息采集表中。
该Sql信息采集表是具有特定格式的,包含了多个字段的表。Sql信息采集表中的多个字段分别记录了Sql语句的多个属性。在本实施例中,该Sql信息采集表的结构如下表格1所示:
表格1
步骤302:选取TAG标记为0的Sql语句(亦即未解析的Sql语句)进行解析,获得对应的临时实体集合并将其存储到待处理中间表中。在本实施例中,该待处理中间表的结构如下表格2所示:
表格2
步骤303:将临时实体集合与实体表进行比对,将实体表中没有的实体加入到实体表中,实现实体表的更新。
在本实施例中,该实体表的结构如下表格3所示:
表格3
步骤304:在实体关系表中随机选取一个已有实体集合与待处理的临时实体集合进行取交集的操作,计算获得两者的交集。
在本实施例中,该实体关系表的结构如下表格4所示:
表格4
步骤305:判断两者的交集是否为空。若是,执行步骤306,若否,执行步骤307。
步骤306:将临时实体集合在实体关系表中的字段“INSET”保持为空值。
步骤307:将交集中出现的实体在实体表中的字段“JOIN_NUM”的值加1,并且将临时实体集合在实体关系表中的字段“INSET”设置为该已有实体集合的ID(即标识编号)。
步骤308:判断所述实体关系表中已有实体集合是否已经被遍历。若是,执行步骤309;若否,返回步骤304。
步骤309:扫描所述实体关系表,判断临时实体集合在所述实体关系表中的字段“INSET”的值是否为空值。若是,执行步骤310,若否,执行步骤311。
步骤310:将临时实体集合作为一个新的已有实体集合,加入到实体关系表中进行存储。其中,临时实体集合的ID直接作为转换后的已有实体集合的ID。
步骤311:根据字段“INSET”进行集合合并操作,将“INSET”值相同的实体集合进行合并,从而将临时实体集合与对应的已有实体集合合并。
步骤312:在待处理中间表中删除已经被合并的临时实体集合的数据信息。
在待处理中间表中不存在临时实体集合以后,便可以结束本次实体关系的自动分析过程,等待进入下一个周期进行Sql语句的采集。
图4示出了本发明实体关系分析装置实施例的结构示意图。如图4所示,该实体关系分析装置400包括:采集装置410,计算装置420以及临时实体集合处理装置430。
其中,采集装置410用于根据数据库信息的解析结果,获取临时实体集合,所述临时实体集合包含若干个实体。计算装置420用于计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合。临时实体集合处理装置430用于在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;并且在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中。
在一种可选的方式中,请继续参阅图4,所述实体关系分析装置还包括:连接点统计模块440。该连接点统计模块440用于根据所述临时实体集合包含的实体,更新实体表,所述实体表用于存储已有的实体;根据所述临时实体集合与所述已有实体集合之间的交集计算结果,统计所述实体的连接点次数,所述连接点次数为所述实体在所述临时实体集合与所述已有实体集合的交集中出现的次数。
在一种可选的方式中,所述采集装置410具体用于在设定的时间内,采集在所述数据库中执行的多条结构化查询语言语句;逐条解析所述结构化查询语言语句的信息内容;获取每一条所述结构化查询语言语句的信息内容中的临时实体集合;将所述临时实体集合存储到待处理中间表中。
在一种可选的方式中,所述计算装置420具体用于:分别在所述待处理中间表和所述实体关系表中选取一个临时实体集合和一个已有实体集合;对所述临时实体集合和所述已有实体集合执行取交集的操作;在所述交集为非空时,将所述临时实体集合的并入标识设置为所述已有实体集合的标识编号;在所述交集为空时,保持所述临时实体集合的并入标识为初始值。
在一种可选的方式中,所述计算装置420还用于在遍历所述实体关系表中所有的已有实体集合后,获取所述临时实体集合的并入集合标识;在所述并入标识为初始值时,确定所述临时实体集合与所述实体关系表的交集为空;在所述并入标识不为初始值时,确定所述临时实体集合与所述实体关系表的交集为非空。
在一种可选的方式中,所述临时实体集合处理装置430具体用于:获取所述临时实体集合的并入标识的标识编号;根据所述并入集合标识的标识编号,将所述临时实体集合合并到与所述标识编号对应的已有实体集合中。
在一种可选的方式中,所述临时实体集合处理装置430还用于:在所述待处理中间表中删除已经与所述已有实体集合合并的临时实体集合。
本发明实施例提供的实体关系分析装置可以自动化和智能化的快速完成全量数据实体关系的生成和展示,并通过连接点次数来体现实体作为连接点的频率,可以为后续的软件开发、数据模型改造、系统解耦、数据生命周期管理等提供决策支撑,能够极大的降低相关工作的难度,提高效率和准确性,具备良好的应用价值。
本发明实施例提供了一种非易失性计算机存储介质,所述计算机存储介质存储有至少一可执行指令,该计算机可执行指令可执行上述任意方法实施例中的实体关系分析方法。
可执行指令具体可以用于使得处理器执行以下操作:根据数据库信息的解析结果,获取临时实体集合;所述临时实体集合包含若干个实体;计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合;在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中。
在一种可选的方式中,所述可执行指令使所述处理器执行以下操作:
根据所述临时实体集合包含的实体,更新实体表,所述实体表用于存储已有的实体;根据所述临时实体集合与所述已有实体集合之间的交集计算结果,统计所述实体的连接点次数,所述连接点次数为所述实体在所述临时实体集合与所述已有实体集合的交集中出现的次数。
在一种可选的方式中,所述根据数据库信息的解析结果,获取临时实体集合,具体包括:
在设定的时间内,采集在所述数据库中执行的多条结构化查询语言语句;逐条解析所述结构化查询语言语句的信息内容;获取每一条所述结构化查询语言语句的信息内容中的临时实体集合;将所述临时实体集合存储到待处理中间表中。
在一种可选的方式中,所述计算所述临时实体集合与实体关系表之间的交集,具体包括:
分别在所述待处理中间表和所述实体关系表中选取一个临时实体集合和一个已有实体集合;对所述临时实体集合和所述已有实体集合执行取交集的操作;在所述交集为非空时,将所述临时实体集合的并入标识设置为所述已有实体集合的标识编号;在所述交集为空时,保持所述临时实体集合的并入标识为初始值。
在一种可选的方式中,所述可执行指令使所述处理器执行以下操作:
在遍历所述实体关系表中所有的已有实体集合后,获取所述临时实体集合的并入集合标识;在所述并入标识为初始值时,确定所述临时实体集合与所述实体关系表的交集为空;在所述并入标识不为初始值时,确定所述临时实体集合与所述实体关系表的交集为非空。
在一种可选的方式中,所述根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中,具体包括:
获取所述临时实体集合的并入标识的标识编号;根据所述并入集合标识的标识编号,将所述临时实体集合合并到与所述标识编号对应的已有实体集合中。
在一种可选的方式中,在所述临时实体集合合并到与所述标识编号对应的已有实体集合后,所述可执行指令使所述处理器执行以下操作:在所述待处理中间表中删除已经与所述已有实体集合合并的临时实体集合。
在上述计算机存储介质中的程序指令被执行时,可以通过SQL的采集与解析获取局部数据实体关系,再通过交集和合并的算法将离散的数据实体关系合并连接成一个全局的数据实体关系,并通过记录实体连接频率获取解耦关系点,可以高效支持软件开发、数据模型改造、系统解耦、数据生命周期管理等工作,解决了原有手工模式存在的问题。
图5示出了本发明电子设备实施例的结构示意图,本发明具体实施例并不对电子设备的具体实现做限定。
如图5所示,该电子设备可以包括:处理器(processor)502、通信接口(Communications Interface)504、存储器(memory)506、以及通信总线508。
其中:处理器502、通信接口504、以及存储器506通过通信总线508完成相互间的通信。通信接口504,用于与其它设备比如客户端或其它服务器等的网元通信。处理器502,用于执行程序510,具体可以执行上述用于电子设备的实体关系分析方法实施例中的相关步骤。
具体地,程序510可以包括程序代码,该程序代码包括计算机操作指令。
处理器502可能是中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本发明实施例的一个或多个集成电路。电子设备包括的一个或多个处理器,可以是同一类型的处理器,如一个或多个CPU;也可以是不同类型的处理器,如一个或多个CPU以及一个或多个ASIC。
存储器506,用于存放程序510。存储器506可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。
程序510具体可以用于使得处理器502执行以下操作:根据数据库信息的解析结果,获取临时实体集合;所述临时实体集合包含若干个实体;计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合;在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中。
在一种可选的方式中,所述根据数据库信息的解析结果,获取临时实体集合,具体包括:
在设定的时间内,采集在所述数据库中执行的多条结构化查询语言语句;逐条解析所述结构化查询语言语句的信息内容;获取每一条所述结构化查询语言语句的信息内容中的临时实体集合;将所述临时实体集合存储到待处理中间表中。
在一种可选的方式中,所述计算所述临时实体集合与实体关系表之间的交集,具体包括:
分别在所述待处理中间表和所述实体关系表中选取一个临时实体集合和一个已有实体集合;对所述临时实体集合和所述已有实体集合执行取交集的操作;在所述交集为非空时,将所述临时实体集合的并入标识设置为所述已有实体集合的标识编号;在所述交集为空时,保持所述临时实体集合的并入标识为初始值。
在一种可选的方式中,所述程序510使所述处理器执行以下操作:
在遍历所述实体关系表中所有的已有实体集合后,获取所述临时实体集合的并入集合标识;在所述并入标识为初始值时,确定所述临时实体集合与所述实体关系表的交集为空;在所述并入标识不为初始值时,确定所述临时实体集合与所述实体关系表的交集为非空。
在一种可选的方式中,所述根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中,具体包括:
获取所述临时实体集合的并入标识的标识编号;根据所述并入集合标识的标识编号,将所述临时实体集合合并到与所述标识编号对应的已有实体集合中。
在一种可选的方式中,在所述临时实体集合合并到与所述标识编号对应的已有实体集合后,所述程序510使所述处理器执行以下操作:在所述待处理中间表中删除已经与所述已有实体集合合并的临时实体集合。
在一种可选的方式中,所述程序510使所述处理器执行以下操作:
根据所述临时实体集合包含的实体,更新实体表,所述实体表用于存储已有的实体;
根据所述临时实体集合与所述已有实体集合之间的交集计算结果,统计所述实体的连接点次数,所述连接点次数为所述实体在所述临时实体集合与所述已有实体集合的交集中出现的次数。
本发明实施例提供的电子设备可以从实际存储系统中获取Sql语句数据并进行解析,利用本发明实时揭露的实体关系分析方法,自动化、智能化的快速完成全量数据实体关系的生成和展示。该电子设备可以应用在支持Sql的数据存储系统或者数据库,进行数据实体关系的识别和解耦点定位,具有非常广阔的应用面。
在此提供的算法或显示不与任何特定计算机、虚拟系统或者其它设备固有相关。各种通用系统也可以与基于在此的示教一起使用。根据上面的描述,构造这类系统所要求的结构是显而易见的。此外,本发明实施例也不针对任何特定编程语言。应当明白,可以利用各种编程语言实现在此描述的本发明的内容,并且上面对特定语言所做的描述是为了披露本发明的最佳实施方式。
在此处所提供的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
类似地,应当理解,为了精简本发明并帮助理解各个发明方面中的一个或多个,在上面对本发明的示例性实施例的描述中,本发明实施例的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而,并不应将该公开的方法解释成反映如下意图:即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说,如下面的权利要求书所反映的那样,发明方面在于少于前面公开的单个实施例的所有特征。因此,遵循具体实施方式的权利要求书由此明确地并入该具体实施方式,其中每个权利要求本身都作为本发明的单独实施例。
本领域那些技术人员可以理解,可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件,以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外,可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述,本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外,本领域的技术人员能够理解,尽管在此的一些实施例包括其它实施例中所包括的某些特征而不是其它特征,但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如,在下面的权利要求书中,所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制,并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中,不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中,这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。上述实施例中的步骤,除有特殊说明外,不应理解为对执行顺序的限定。
Claims (9)
1.一种数据库的实体关系分析方法,其特征在于,所述方法包括:
根据数据库信息的解析结果,获取临时实体集合;所述临时实体集合包含若干个实体;所述临时实体集合包括实际运行过程中采集获得数据库信息分析获得的,尚未进行分析处理的实体数据信息;
计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合;所述已有实体集合用于表征系统中各个数据实体间的关系;
在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;
在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中;
所述方法还包括:根据所述临时实体集合包含的实体,更新实体表,所述实体表用于存储已有的实体;
根据所述临时实体集合与所述已有实体集合之间的交集计算结果,统计所述实体的连接点次数,所述连接点次数为所述实体在所述临时实体集合与所述已有实体集合的交集中出现的次数;所述连接点次数用于表征每个实体作为连接点的频率。
2.根据权利要求1所述的方法,其特征在于,根据数据库信息的解析结果,获取临时实体集合,具体包括:
在设定的时间内,采集在所述数据库中执行的多条结构化查询语言语句;
逐条解析所述结构化查询语言语句的信息内容;
获取每一条所述结构化查询语言语句的信息内容中的临时实体集合;
将所述临时实体集合存储到待处理中间表中。
3.根据权利要求2所述的方法,其特征在于,计算所述临时实体集合与实体关系表之间的交集,具体包括:
分别在所述待处理中间表和所述实体关系表中选取一个临时实体集合和一个已有实体集合;
对所述临时实体集合和所述已有实体集合执行取交集的操作;
在所述交集为非空时,将所述临时实体集合的并入标识设置为所述已有实体集合的标识编号;
在所述交集为空时,保持所述临时实体集合的并入标识为初始值。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
在选取的一个所述临时实体集合遍历所述实体关系表中所有的已有实体集合后,获取所述并入集合标识;
在所述并入标识为初始值时,确定所述临时实体集合与所述实体关系表的交集为空;
在所述并入标识不为初始值时,确定所述临时实体集合与所述实体关系表的交集为非空。
5.根据权利要求4所述的方法,其特征在于,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中,具体包括:
获取所述临时实体集合的并入标识的标识编号;
根据所述并入集合标识的标识编号,将所述临时实体集合合并到与所述标识编号对应的已有实体集合中。
6.根据权利要求5所述的方法,其特征在于,在所述临时实体集合合并到与所述标识编号对应的已有实体集合后,所述方法还包括:
在所述待处理中间表中删除已经与所述已有实体集合合并的临时实体集合。
7.一种数据库的实体关系分析装置,其特征在于,所述装置包括:
临时实体集合采集装置,用于根据数据库信息的解析结果,获取临时实体集合;所述临时实体集合包含若干个实体;所述临时实体集合包括实际运行过程中采集获得数据库信息分析获得的,尚未进行分析处理的实体数据信息;
交集计算装置,用于计算所述临时实体集合与实体关系表之间的交集,所述实体关系表用于存储已有实体集合;所述已有实体集合用于表征系统中各个数据实体间的关系;
临时实体集合处理装置,用于在所述交集为空时,将所述临时实体集合作为一个新的已有实体集合,存储到所述实体关系表中;并且,在所述交集为非空时,根据所述临时实体集合与所述实体关系表之间的交集计算结果,将所述临时实体集合合并到对应的已有实体集合中;
连接点统计模块,用于根据所述临时实体集合包含的实体,更新实体表,所述实体表用于存储已有的实体;
根据所述临时实体集合与所述已有实体集合之间的交集计算结果,统计所述实体的连接点次数,所述连接点次数为所述实体在所述临时实体集合与所述已有实体集合的交集中出现的次数;所述连接点次数用于表征每个实体作为连接点的频率。
8.一种实体关系的分析设备,其特征在于,包括:处理器、存储器、通信接口和通信总线,所述处理器、所述存储器和所述通信接口通过所述通信总线完成相互间的通信;
所述存储器用于存放至少一可执行指令,所述可执行指令使所述处理器执行如权利要求1-6任意一项所述的实体关系分析方法。
9.一种计算机存储介质,其特征在于,所述存储介质中存储有至少一可执行指令,所述可执行指令使处理器执行如权利要求1-6任意一项所述的实体关系分析方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911240823.0A CN112925856B (zh) | 2019-12-06 | 2019-12-06 | 实体关系分析方法、装置、分析设备及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911240823.0A CN112925856B (zh) | 2019-12-06 | 2019-12-06 | 实体关系分析方法、装置、分析设备及计算机存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112925856A CN112925856A (zh) | 2021-06-08 |
CN112925856B true CN112925856B (zh) | 2023-09-19 |
Family
ID=76161505
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911240823.0A Active CN112925856B (zh) | 2019-12-06 | 2019-12-06 | 实体关系分析方法、装置、分析设备及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112925856B (zh) |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001325278A (ja) * | 2000-05-15 | 2001-11-22 | Sumisho Computer Systems Corp | 図表処理装置、記憶媒体および図表処理方法 |
CN101158958A (zh) * | 2007-10-23 | 2008-04-09 | 浙江大学 | 基于MySQL存储引擎的融合查询方法 |
CN106446000A (zh) * | 2016-07-27 | 2017-02-22 | 中国地质大学(武汉) | 基于边界交互的区组合拓扑相似性度量方法 |
CN106547811A (zh) * | 2015-09-22 | 2017-03-29 | 国际商业机器公司 | 数据集的分布式合并 |
CN108052601A (zh) * | 2017-12-12 | 2018-05-18 | 福建中金在线信息科技有限公司 | 数据库建立方法、装置及终端 |
CN108536764A (zh) * | 2018-03-21 | 2018-09-14 | 山东昭元信息科技有限公司 | 一种基于临时拓扑分析表的拓扑及孤岛分析方法和装置 |
CN108664635A (zh) * | 2018-05-15 | 2018-10-16 | 上海达梦数据库有限公司 | 数据库统计信息的获取方法、装置、设备和存储介质 |
CN109325201A (zh) * | 2018-08-15 | 2019-02-12 | 北京百度网讯科技有限公司 | 实体关系数据的生成方法、装置、设备及存储介质 |
CN109408535A (zh) * | 2018-09-28 | 2019-03-01 | 中国平安财产保险股份有限公司 | 大数据量匹配方法、装置、计算机设备及存储介质 |
CN110168515A (zh) * | 2016-09-15 | 2019-08-23 | 英国天然气控股有限公司 | 用于分析数据关系以支持查询执行的系统 |
CN110300963A (zh) * | 2016-09-15 | 2019-10-01 | 英国天然气控股有限公司 | 大规模数据储存库中的数据管理系统 |
CN110442725A (zh) * | 2019-08-14 | 2019-11-12 | 科大讯飞股份有限公司 | 实体关系抽取方法及装置 |
CN110516011A (zh) * | 2019-08-28 | 2019-11-29 | 北京思维造物信息科技股份有限公司 | 一种多源实体数据融合方法、装置及设备 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7831632B2 (en) * | 2004-07-29 | 2010-11-09 | International Business Machines Corporation | Method and system for reconstruction of object model data in a relational database |
-
2019
- 2019-12-06 CN CN201911240823.0A patent/CN112925856B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001325278A (ja) * | 2000-05-15 | 2001-11-22 | Sumisho Computer Systems Corp | 図表処理装置、記憶媒体および図表処理方法 |
CN101158958A (zh) * | 2007-10-23 | 2008-04-09 | 浙江大学 | 基于MySQL存储引擎的融合查询方法 |
CN106547811A (zh) * | 2015-09-22 | 2017-03-29 | 国际商业机器公司 | 数据集的分布式合并 |
CN106446000A (zh) * | 2016-07-27 | 2017-02-22 | 中国地质大学(武汉) | 基于边界交互的区组合拓扑相似性度量方法 |
CN110168515A (zh) * | 2016-09-15 | 2019-08-23 | 英国天然气控股有限公司 | 用于分析数据关系以支持查询执行的系统 |
CN110300963A (zh) * | 2016-09-15 | 2019-10-01 | 英国天然气控股有限公司 | 大规模数据储存库中的数据管理系统 |
CN108052601A (zh) * | 2017-12-12 | 2018-05-18 | 福建中金在线信息科技有限公司 | 数据库建立方法、装置及终端 |
CN108536764A (zh) * | 2018-03-21 | 2018-09-14 | 山东昭元信息科技有限公司 | 一种基于临时拓扑分析表的拓扑及孤岛分析方法和装置 |
CN108664635A (zh) * | 2018-05-15 | 2018-10-16 | 上海达梦数据库有限公司 | 数据库统计信息的获取方法、装置、设备和存储介质 |
CN109325201A (zh) * | 2018-08-15 | 2019-02-12 | 北京百度网讯科技有限公司 | 实体关系数据的生成方法、装置、设备及存储介质 |
CN109408535A (zh) * | 2018-09-28 | 2019-03-01 | 中国平安财产保险股份有限公司 | 大数据量匹配方法、装置、计算机设备及存储介质 |
CN110442725A (zh) * | 2019-08-14 | 2019-11-12 | 科大讯飞股份有限公司 | 实体关系抽取方法及装置 |
CN110516011A (zh) * | 2019-08-28 | 2019-11-29 | 北京思维造物信息科技股份有限公司 | 一种多源实体数据融合方法、装置及设备 |
Also Published As
Publication number | Publication date |
---|---|
CN112925856A (zh) | 2021-06-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107622014B (zh) | 测试报告生成方法、装置、可读存储介质和计算机设备 | |
Lenz et al. | Summarizability in OLAP and statistical data bases | |
US9354867B2 (en) | System and method for identifying, analyzing and integrating risks associated with source code | |
US20080091742A1 (en) | System and method for detecting and updating geographical information dataset versions | |
CN111400288A (zh) | 数据质量检查方法及系统 | |
CN111553137B (zh) | 报告生成方法、装置、存储介质及计算机设备 | |
CN111627552A (zh) | 一种医疗流式数据血缘关系分析、存储方法及装置 | |
CN115346686A (zh) | 关系图谱生成方法及装置、存储介质及电子设备 | |
CN116383193A (zh) | 一种数据管理方法、装置、电子设备和存储介质 | |
CN113157978B (zh) | 数据的标签建立方法和装置 | |
JP4973738B2 (ja) | 業務フロー処理プログラム、方法及び装置 | |
CN112631889A (zh) | 针对应用系统的画像方法、装置、设备及可读存储介质 | |
CN112786124A (zh) | 一种问题排查方法、装置、存储介质及设备 | |
CN112925856B (zh) | 实体关系分析方法、装置、分析设备及计算机存储介质 | |
CN111061733A (zh) | 数据处理方法、装置、电子设备和计算机可读存储介质 | |
CN115114297A (zh) | 数据轻量存储及查找方法、装置、电子设备及存储介质 | |
CN112131215B (zh) | 自底向上的数据库信息获取方法及装置 | |
CN113138906A (zh) | 一种调用链数据采集方法、装置、设备及存储介质 | |
CN112148459B (zh) | 节点关联数据的处理方法、装置、可读介质以及设备 | |
CN117290355B (zh) | 一种元数据地图构建系统 | |
CN114692595B (zh) | 一种基于文本匹配的重复冲突方案检测方法 | |
CN117150097B (zh) | 一种执法检查清单自动匹配方法 | |
CN117648339B (zh) | 一种数据探查方法、装置、服务器及存储介质 | |
CN115952160B (zh) | 一种数据盘点方法 | |
CN113674115B (zh) | 一种基于数据治理技术的高校数据管理辅助系统及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |