CN113626482A - 基于系统融合id表的查询方法和装置 - Google Patents
基于系统融合id表的查询方法和装置 Download PDFInfo
- Publication number
- CN113626482A CN113626482A CN202110944264.2A CN202110944264A CN113626482A CN 113626482 A CN113626482 A CN 113626482A CN 202110944264 A CN202110944264 A CN 202110944264A CN 113626482 A CN113626482 A CN 113626482A
- Authority
- CN
- China
- Prior art keywords
- data
- node
- record
- node table
- updating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24553—Query execution of query operations
- G06F16/24558—Binary matching operations
- G06F16/2456—Join operations
Abstract
本发明公开了一种基于系统融合ID表的查询方法和装置。其中,该方法包括:确定不同系统的原始表对应的节点表与记录表;依据不同类型的数据源,更新节点表与记录表;依据更新后的节点表与记录表,生成系统融合ID表;依据系统融合ID表对目标ID以及目标ID对应的属性进行查询。本发明解决了相关技术中在对不同系统的ID和属性进行查询时,需要关联系统的原始表,导致查询过程复杂且极易出错的技术问题。
Description
技术领域
本发明涉及数据查询技术领域,具体而言,涉及一种基于系统融合ID表的查询方法和装置。
背景技术
现阶段一个公司内部越来越多的系统和用户本身越来越多的终端造就了同一个用户下在不同系统中收到的唯一识别号和其属性并不一致。现有技术只是对不同系统下的不同ID进行融合,在ID融合之后再去查询属性需要在不同系统下的原始表进行“连接查询”操作才能实现。在查询属性时,还需要去匹配原始表的ID类型,并且如果原始表的属性字段为空则需要继续去其他系统中继续匹配,这样查询属性是极其不方便且容易出错的。
针对上述相关技术中在对不同系统的ID和属性进行查询时,需要关联系统的原始表,导致查询过程复杂且极易出错的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种基于系统融合ID表的查询方法和装置,以至少解决相关技术中在对不同系统的ID和属性进行查询时,需要关联系统的原始表,导致查询过程复杂且极易出错的技术问题。
根据本发明实施例的一个方面,提供了一种基于系统融合ID表的查询方法,包括:确定不同系统的原始表对应的节点表与记录表;依据不同类型的数据源,更新所述节点表与所述记录表;依据更新后的所述节点表与所述记录表,生成系统融合ID表;依据所述系统融合ID表对目标ID以及所述目标ID对应的属性进行查询。
可选地,确定不同系统的原始表对应的节点表与记录表,包括:根据字段信息获取不同系统的所述原始表;依据所述原始表,生成所述节点表与所述记录表,其中,所述原始表的ID作为所述节点表的主键,所述原始表的主键作为所述记录表的主键。
可选地,在根据字段信息获取不同系统的所述原始表之前,还包括:配置不同系统的字段信息,其中,使用主键、ID、属性标注所述字段信息,并设置所述属性的优先级。
可选地,依据不同类型的数据源,更新所述节点表与所述记录表,包括:利用同一数据源的数据更新所述节点表与所述记录表;或者,利用非同一数据源的数据更新所述节点表与所述记录表。
可选地,利用同一数据源的数据更新所述节点表与所述记录表,包括:在所述同一数据源的数据中所有ID都不存在于所述节点表的情况下,则将所述同一数据源的数据存入到所述节点表与所述记录表;在所述同一数据源的数据中存在任一ID与所述节点表记录的ID重复的情况下,则依据数据的发生时间对所述节点表和所述记录表进行更新操作。
可选地,依据数据的发生时间对所述节点表和所述记录表进行更新操作,包括:将所述同一数据源的数据的发生时间与所述节点表记录的数据的发生时间进行比对;在所述同一数据源的数据的发生时间大于所述节点表记录的数据的发生时间时,则使用所述同一数据源的数据更新所述节点表与所述记录表;在所述同一数据源的数据的发生时间小于或者等于所述节点表记录的数据的发生时间时,则保持所述节点表与所述记录表的数据不变。
可选地,利用非同一数据源的数据更新所述节点表与所述记录表,包括:在所述非同一数据源的数据中所有ID都不存在于所述节点表的情况下,则将所述非同一数据源的数据存入到所述节点表与所述记录表;在所述非同一数据源的数据中存在任一ID与所述节点表记录的ID重复的情况下,则依据数据的发生时间以及属性的优先级对所述节点表与所述记录表进行更新操作。
根据本发明实施例的另一方面,还提供了一种基于系统融合ID表的查询装置,包括:确定模块,用于确定不同系统的原始表对应的节点表与记录表;更新模块,用于依据不同类型的数据源,更新所述节点表与所述记录表;生成模块,用于依据更新后的所述节点表与所述记录表,生成系统融合ID表;查询模块,用于依据所述系统融合ID表对目标ID以及所述目标ID对应的属性进行查询。
根据本发明实施例的另一方面,还提供了一种计算机可读存储介质,所述计算机可读存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机可读存储介质所在设备执行上述中任意一项所述的基于系统融合ID表的查询方法。
根据本发明实施例的另一方面,还提供了一种处理器,所述处理器用于运行程序,其中,所述程序运行时执行上述中任意一项所述的基于系统融合ID表的查询方法。
在本发明实施例中,采用确定不同系统的原始表对应的节点表与记录表;依据不同类型的数据源,更新节点表与记录表;依据更新后的节点表与记录表,生成系统融合ID表;依据系统融合ID表对目标ID以及目标ID对应的属性进行查询,通过系统融合ID表对不同系统下的不同ID及属性进行联合查询,从而实现了简化查询过程,提高查询效果与效率的技术效果,进而解决了相关技术中在对不同系统的ID和属性进行查询时,需要关联系统的原始表,导致查询过程复杂且极易出错的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的基于系统融合ID表的查询方法的流程图;
图2是根据本发明可选实施例的系统融合ID表的示意图;
图3是根据本发明实施例的基于系统融合ID表的查询装置的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
为了便于描述,下面对本发明中出现的部分名词或术语进行详细说明。
ID:终端设备的设备号或用户系统的唯一识别码,比如手机号就可以当作一个ID。
属性:描述某个ID中具有哪些现象,比如年龄,性别就是属性。
IDGraph:ID图,一个图代表一个人,图内部存放了同一个人的不同ID和属性。
Node(节点):在一个连通子图中,一个点标识某个IDNamespace在一个Graph中唯一ID Value。
Record(记录):一条包括了一个或者多个ID的事实数据,可以是来自其它系统的Record,也可以是从Event中抽取出来的Record。Record用来标识该ID以及关联关系。
实施例1
根据本发明实施例,提供了一种基于系统融合ID表的查询方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的基于系统融合ID表的查询方法的流程图,如图1所示,该方法包括如下步骤:
步骤S102,确定不同系统的原始表对应的节点表与记录表;
上述确定不同系统的原始表对应的节点表与记录表,也就可以建立不同系统的原始表与节点表以及记录表之间的关联关系。
步骤S104,依据不同类型的数据源,更新节点表与记录表;
上述不同类型的数据源包括同一数据源与非同一数据源两种类型。
步骤S106,依据更新后的节点表与记录表,生成系统融合ID表;
上述系统融合ID表的内容包括但不限于ID、属性等。
在一种可选的实施方式中,上述系统融合ID表还可以基于预设的规则,自动识别原始记录是否属于某一融合ID,如果是,则将其更新至融合ID表并记录原始记录的数据。
需要说明的是,生成的融合ID表具有稳定、可重现的特性,即重新走一遍流程,再次生成的融合ID表与原先生成的融合ID表也是一样的,表中记录的数据是稳定的。
步骤S108,依据系统融合ID表对目标ID以及目标ID对应的属性进行查询。
在一种可选的实施方式中,依据系统融合ID表对目标ID以及目标ID对应的属性进行查询,包括:根据目标ID查询同一目标对象下的不同ID;根据目标ID查询同一目标对象下的属性信息;根据属性查询出其对应的ID。
通过上述步骤,可以实现通过系统融合ID表对不同系统下的不同ID及属性进行联合查询,从而实现了简化查询过程,提高查询效果与效率的技术效果,进而解决了相关技术中在对不同系统的ID和属性进行查询时,需要关联系统的原始表,导致查询过程复杂且极易出错的技术问题。
可选地,确定不同系统的原始表对应的节点表与记录表,包括:根据字段信息获取不同系统的原始表;依据原始表,生成节点表与记录表,其中,原始表的ID作为节点表的主键,原始表的主键作为记录表的主键。
在一种可选的实施方式中,首先需要配置不同系统的字段信息,然后再根据不同系统的字段信息获取不同系统的原始表,进而再基于这些原始表生成节点表与记录表。需要说明的是,在依据原始表生成节点表与记录表的过程中,可以将原始表的ID作为节点表的主键,原始表的主键作为记录表的主键,从而快速建立原始表与节点表以及记录表之间的关联关系。
可选地,在根据字段信息获取不同系统的原始表之前,还包括:配置不同系统的字段信息,其中,使用主键、ID、属性标注字段信息,并设置属性的优先级。
在一种可选的实施方式中,可以配置不同系统的字段信息,例如,不同的系统包括系统A、系统B、系统C、系统D、系统E、系统F,具体地,可以分别配置系统A、系统B、系统C、系统D、系统E、系统F的字段信息。
另外,还可以对这些系统的字段信息的进行标注,例如,标注系统中的哪些字段信息属于主键、ID、属性等。需要说明的是,在对字段信息进行标注时,采用的标注类型包括但不限于主键、ID、属性,标注类型可以根据具体应用场景的需要而设定。
此外,还可以对属性设置优先级,在具体实施过程中,可以将属性设置成预定数量的级别,其中,每个相邻的级别之间在重要程度上存在差异;例如,将属性的优先级划分为三个级别,依据重要程度的排序为:第一级别>第二级别>第三级别。
可选地,依据不同类型的数据源,更新节点表与记录表,包括:利用同一数据源的数据更新节点表与记录表;或者,利用非同一数据源的数据更新节点表与记录表。
在一种可选的实施方式中,不仅可以利用同一数据源的数据更新节点表与记录表;或者,还可以利用非同一数据源的数据更新节点表与记录表。需要说明的是,上述同一数据源的数据来自同一区域的系统或者同一类型的系统,上述非同一数据源的数据来自其他系统,例如,不同区域的系统或者不同类型的系统。
此外,同一数据源的数据与非同一数据源在更新节点表与记录表的过程中,采用的数据融合方式是不同的。
可选地,利用同一数据源的数据更新节点表与记录表,包括:在同一数据源的数据中所有ID都不存在于节点表的情况下,则将同一数据源的数据存入到节点表与记录表;在同一数据源的数据中存在任一ID与节点表记录的ID重复的情况下,则依据数据的发生时间对节点表和记录表进行更新操作。
在一种可选的实施方式中,在利用同一数据源的数据更新节点表与记录表的过程中,首先需要判断同一数据源的数据中ID与节点表的ID之间是否重复,如果同一数据源的数据中所有ID都不存在于节点表,就会将同一数据源的数据存入到节点表与记录表;如果同一数据源的数据中存在任一ID与节点表记录的ID重复,就会依据数据的发生时间对节点表和记录表进行更新操作。通过上述实施方式可以将同一数据源的数据存入或者融合到节点表与记录表。
可选地,依据数据的发生时间对节点表和记录表进行更新操作,包括:将同一数据源的数据的发生时间与节点表记录的数据的发生时间进行比对;在同一数据源的数据的发生时间大于节点表记录的数据的发生时间时,则使用同一数据源的数据更新节点表与记录表;在同一数据源的数据的发生时间小于或者等于节点表记录的数据的发生时间时,则保持节点表与记录表的数据不变。
在一种可选的实施方式中,在依据数据的发生时间对节点表和记录表进行更新操作的过程中,可以将同一数据源的数据的发生时间与节点表记录的数据的发生时间进行比对,如果同一数据源的数据的发生时间大于节点表记录的数据的发生时间,就使用同一数据源的数据更新节点表与记录表;如果同一数据源的数据的发生时间小于或者等于节点表记录的数据的发生时间,就保持节点表与记录表的数据不变。通过上述实施方式可以基于数据的发生时间实现对节点表和记录表的更新操作。
上述发生时间采用可以具体到年月日时分秒,例如,同一数据源的数据的发生时间为2021年8月12日12时01分56秒,节点表记录的数据的发生时间为2020年12月25日12时45分18秒,则同一数据源的数据的发生时间大于节点表记录的数据的发生时间,也即是同一数据源的数据的发生时间晚于节点表记录的数据的发生时间,其他应用场景的发生时间同理可知,在此不再一一赘述。
需要说明的是,保持节点表与记录表的数据不变就是不会使用同一数据源的数据更新节点表与记录表。
可选地,利用非同一数据源的数据更新节点表与记录表,包括:在非同一数据源的数据中所有ID都不存在于节点表的情况下,则将非同一数据源的数据存入到节点表与记录表;在非同一数据源的数据中存在任一ID与节点表记录的ID重复的情况下,则依据数据的发生时间以及属性的优先级对节点表与记录表进行更新操作。
在一种可选的实施方式中,首先需要判断非同一数据源的数据中ID与节点表的ID之间是否重复,如果非同一数据源的数据中所有ID都不存在于节点表,可以将非同一数据源的数据存入到节点表与记录表;如果非同一数据源的数据中存在任一ID与节点表记录的ID重复,可以依据数据的发生时间以及属性的优先级对节点表与记录表进行更新操作。通过上述实施方式可以将非同一数据源的数据存入或者融合到节点表与记录表。
在一种可选的实施方式中,依据数据的发生时间以及属性的优先级对节点表与记录表进行更新操作,包括:将非同一数据源的数据的发生时间与节点表记录的数据的发生时间进行比对;在非同一数据源的数据的发生时间大于节点表记录的数据的发生时间时,则使用非同一数据源的数据更新节点表与记录表;在非同一数据源的数据的发生时间小于节点表记录的数据的发生时间时,则保持节点表与记录表的数据不变;在非同一数据源的数据的发生时间等于节点表记录的数据的发生时间时,可以判断非同一数据源的数据与节点表记录的数据中的属性的优先级,将非同一数据源的数据与节点表记录的数据中优先级高的属性保留,删除掉优先级低的属性。
通过上述实施方式可以基于数据的发生时间以及属性的优先级实现对节点表和记录表的更新操作。
下面对本发明一种可选的实施方式进行详细说明。
图2是根据本发明可选实施例的系统融合ID表的示意图,如图2所示,系统融合ID表的生成包括以下步骤:
步骤201:需要配置不同系统的表字段信息,标注哪些字段属于主键、ID、属性,同时可将属性设定不同的优先级。
步骤202:根据配置的字段信息读取不同系统下的原始表,将表的主键当作ID_Record表(对应于上述记录表)的key,ID当作ID_Node表(对应于上述节点表)的key。
步骤203:在读取同一数据源的一条新数据时,如果此条数据中的所有ID都不存在与ID_Node表,则代表此数据为新数据,存入到ID_Node表和ID_Record表。如果此条数据中存在任一ID与ID_Node表某一记录重复,则代表此条数据需要融合,根据此条数据的发生时间与前一条数据发生的时间进行比对,如果此条数据发生时间较晚则进行更新操作。
步骤204:在读取其他数据源的一条新数据时,如果此条数据中的所有ID都不存在与ID_Node表,则代表此数据为新数据,存入到ID_Node表和ID_Record表。如果此条数据中存在任一ID与ID_Node表某一记录重复,则代表此条数据需要融合,判断数据发生时间的同时判断属性的优先级,将优先级高的属性保留,删除掉优先级低的属性。
步骤205:计算完成后,根据ID_Node与ID_Record的数据生成一张所有ID及属性的宽表(对应于上述系统融合ID表),其中,在融合完毕后,可以根据一张表实现对不同系统的ID和属性进行查询,并不需要再去关联系统的原始表,并且属性也可以根据设定的优先级进行计算实现对某系统的侧重。
实施例2
根据本发明实施例的另一方面,还提供了一种基于系统融合ID表的查询装置,图3是根据本发明实施例的基于系统融合ID表的查询装置的示意图,如图3所示,该基于系统融合ID表的查询装置包括:确定模块32、更新模块34、生成模块36和查询模块38。下面对该基于系统融合ID表的查询装置进行详细说明。
确定模块32,用于确定不同系统的原始表对应的节点表与记录表;更新模块34,连接至上述确定模块32,用于依据不同类型的数据源,更新节点表与记录表;生成模块36,连接至上述更新模块34,用于依据更新后的节点表与记录表,生成系统融合ID表;查询模块38,连接至上述生成模块36,用于依据系统融合ID表对目标ID以及目标ID对应的属性进行查询。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,例如,对于后者,可以通过以下方式实现:上述各个模块可以位于同一处理器中;和/或,上述各个模块以任意组合的方式位于不同的处理器中。
在上述实施例中,该基于系统融合ID表的查询装置可以通过系统融合ID表对不同系统下的不同ID及属性进行联合查询,从而实现了简化查询过程,提高查询效果与效率的技术效果,进而解决了相关技术中在对不同系统的ID和属性进行查询时,需要关联系统的原始表,导致查询过程复杂且极易出错的技术问题。
此处需要说明的是,上述确定模块32、更新模块34、生成模块36和查询模块38对应于实施例1中的步骤S102至S108,上述模块与对应的步骤所实现的示例和应用场景相同,但不限于上述实施例1所公开的内容。
可选地,上述确定模块32包括:获取单元,用于根据字段信息获取不同系统的原始表;生成单元,用于依据原始表,生成节点表与记录表,其中,原始表的ID作为节点表的主键,原始表的主键作为记录表的主键。
可选地,上述装置还包括:配置模块,用于在根据字段信息获取不同系统的原始表之前,配置不同系统的字段信息,其中,使用主键、ID、属性标注字段信息,并设置属性的优先级。
可选地,上述更新模块34包括:第一更新单元,用于利用同一数据源的数据更新节点表与记录表;或者,第二更新单元,用于利用非同一数据源的数据更新节点表与记录表。
可选地,上述第一更新单元包括:第一处理子单元,用于在同一数据源的数据中所有ID都不存在于节点表的情况下,则将同一数据源的数据存入到节点表与记录表;第二处理子单元,用于在同一数据源的数据中存在任一ID与节点表记录的ID重复的情况下,则依据数据的发生时间对节点表和记录表进行更新操作。
可选地,上述第二处理子单元包括:对比子单元,用于将同一数据源的数据的发生时间与节点表记录的数据的发生时间进行比对;更新子单元,用于在同一数据源的数据的发生时间大于节点表记录的数据的发生时间时,则使用同一数据源的数据更新节点表与记录表;保持子单元,用于在同一数据源的数据的发生时间小于或者等于节点表记录的数据的发生时间时,则保持节点表与记录表的数据不变。
可选地,上述第二更新单元包括:第三处理子单元,用于在非同一数据源的数据中所有ID都不存在于节点表的情况下,则将非同一数据源的数据存入到节点表与记录表;第四处理子单元,用于在非同一数据源的数据中存在任一ID与节点表记录的ID重复的情况下,则依据数据的发生时间以及属性的优先级对节点表与记录表进行更新操作。
实施例3
根据本发明实施例的另一方面,还提供了一种计算机可读存储介质,该计算机可读存储介质包括存储的程序,其中,在程序运行时控制计算机可读存储介质所在设备执行上述中任意一项的基于系统融合ID表的查询方法。
可选地,在本实施例中,上述计算机可读存储介质可以位于计算机网络中计算机终端群中的任意一个计算机终端中,和/或位于移动终端群中的任意一个移动终端中,上述计算机可读存储介质包括存储的程序。
可选地,在程序运行时控制计算机可读存储介质所在设备执行以下功能:确定不同系统的原始表对应的节点表与记录表;依据不同类型的数据源,更新节点表与记录表;依据更新后的节点表与记录表,生成系统融合ID表;依据系统融合ID表对目标ID以及目标ID对应的属性进行查询。
实施例4
根据本发明实施例的另一方面,还提供了一种处理器,该处理器用于运行程序,其中,程序运行时执行上述中任意一项的基于系统融合ID表的查询方法。
本发明实施例提供了一种设备,该设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序,处理器执行程序时实现以下步骤:确定不同系统的原始表对应的节点表与记录表;依据不同类型的数据源,更新节点表与记录表;依据更新后的节点表与记录表,生成系统融合ID表;依据系统融合ID表对目标ID以及目标ID对应的属性进行查询。
本发明还提供了一种计算机程序产品,当在数据处理设备上执行时,适于执行初始化有如下方法步骤的程序:确定不同系统的原始表对应的节点表与记录表;依据不同类型的数据源,更新节点表与记录表;依据更新后的节点表与记录表,生成系统融合ID表;依据系统融合ID表对目标ID以及目标ID对应的属性进行查询。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (10)
1.一种基于系统融合ID表的查询方法,其特征在于,包括:
确定不同系统的原始表对应的节点表与记录表;
依据不同类型的数据源,更新所述节点表与所述记录表;
依据更新后的所述节点表与所述记录表,生成系统融合ID表;
依据所述系统融合ID表对目标ID以及所述目标ID对应的属性进行查询。
2.根据权利要求1所述的方法,其特征在于,确定不同系统的原始表对应的节点表与记录表,包括:
根据字段信息获取不同系统的所述原始表;
依据所述原始表,生成所述节点表与所述记录表,其中,所述原始表的ID作为所述节点表的主键,所述原始表的主键作为所述记录表的主键。
3.根据权利要求2所述的方法,其特征在于,在根据字段信息获取不同系统的所述原始表之前,还包括:
配置不同系统的字段信息,其中,使用主键、ID、属性标注所述字段信息,并设置所述属性的优先级。
4.根据权利要求1所述的方法,其特征在于,依据不同类型的数据源,更新所述节点表与所述记录表,包括:
利用同一数据源的数据更新所述节点表与所述记录表;或者,利用非同一数据源的数据更新所述节点表与所述记录表。
5.根据权利要求4所述的方法,其特征在于,利用同一数据源的数据更新所述节点表与所述记录表,包括:
在所述同一数据源的数据中所有ID都不存在于所述节点表的情况下,则将所述同一数据源的数据存入到所述节点表与所述记录表;
在所述同一数据源的数据中存在任一ID与所述节点表记录的ID重复的情况下,则依据数据的发生时间对所述节点表和所述记录表进行更新操作。
6.根据权利要求5所述的方法,其特征在于,依据数据的发生时间对所述节点表和所述记录表进行更新操作,包括:
将所述同一数据源的数据的发生时间与所述节点表记录的数据的发生时间进行比对;
在所述同一数据源的数据的发生时间大于所述节点表记录的数据的发生时间时,则使用所述同一数据源的数据更新所述节点表与所述记录表;
在所述同一数据源的数据的发生时间小于或者等于所述节点表记录的数据的发生时间时,则保持所述节点表与所述记录表的数据不变。
7.根据权利要求4所述的方法,其特征在于,利用非同一数据源的数据更新所述节点表与所述记录表,包括:
在所述非同一数据源的数据中所有ID都不存在于所述节点表的情况下,则将所述非同一数据源的数据存入到所述节点表与所述记录表;
在所述非同一数据源的数据中存在任一ID与所述节点表记录的ID重复的情况下,则依据数据的发生时间以及属性的优先级对所述节点表与所述记录表进行更新操作。
8.一种基于系统融合ID表的查询装置,其特征在于,包括:
确定模块,用于确定不同系统的原始表对应的节点表与记录表;
更新模块,用于依据不同类型的数据源,更新所述节点表与所述记录表;
生成模块,用于依据更新后的所述节点表与所述记录表,生成系统融合ID表;
查询模块,用于依据所述系统融合ID表对目标ID以及所述目标ID对应的属性进行查询。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质包括存储的程序,其中,在所述程序运行时控制所述计算机可读存储介质所在设备执行权利要求1至7中任意一项所述的基于系统融合ID表的查询方法。
10.一种处理器,其特征在于,所述处理器用于运行程序,其中,所述程序运行时执行权利要求1至7中任意一项所述的基于系统融合ID表的查询方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110944264.2A CN113626482A (zh) | 2021-08-17 | 2021-08-17 | 基于系统融合id表的查询方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110944264.2A CN113626482A (zh) | 2021-08-17 | 2021-08-17 | 基于系统融合id表的查询方法和装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113626482A true CN113626482A (zh) | 2021-11-09 |
Family
ID=78386129
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110944264.2A Pending CN113626482A (zh) | 2021-08-17 | 2021-08-17 | 基于系统融合id表的查询方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113626482A (zh) |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102436475A (zh) * | 2011-09-29 | 2012-05-02 | 用友软件股份有限公司 | 数据表汇总装置和数据表汇总方法 |
CN106909689A (zh) * | 2017-03-07 | 2017-06-30 | 山东浪潮云服务信息科技有限公司 | 一种数据融合方法及装置 |
US20170262506A1 (en) * | 2016-03-10 | 2017-09-14 | Tata Consultancy Services Limited | System and method for visual bayesian data fusion |
CN109446197A (zh) * | 2018-09-26 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 用户信息处理方法、装置、计算机设备及存储介质 |
CN110674231A (zh) * | 2019-10-09 | 2020-01-10 | 上海智子信息科技股份有限公司 | 一种面向数据湖的用户id集成方法和系统 |
CN111680030A (zh) * | 2019-03-11 | 2020-09-18 | 阿里巴巴集团控股有限公司 | 数据融合方法及装置,基于元信息的数据处理方法和装置 |
CN112765183A (zh) * | 2021-02-02 | 2021-05-07 | 浙江公共安全技术研究院有限公司 | 多源数据融合方法、装置、存储介质及电子设备 |
CN113094370A (zh) * | 2021-04-13 | 2021-07-09 | 北京精鸿软件科技有限公司 | 数据索引构建方法、装置、存储介质及电子设备 |
-
2021
- 2021-08-17 CN CN202110944264.2A patent/CN113626482A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102436475A (zh) * | 2011-09-29 | 2012-05-02 | 用友软件股份有限公司 | 数据表汇总装置和数据表汇总方法 |
US20170262506A1 (en) * | 2016-03-10 | 2017-09-14 | Tata Consultancy Services Limited | System and method for visual bayesian data fusion |
CN106909689A (zh) * | 2017-03-07 | 2017-06-30 | 山东浪潮云服务信息科技有限公司 | 一种数据融合方法及装置 |
CN109446197A (zh) * | 2018-09-26 | 2019-03-08 | 深圳壹账通智能科技有限公司 | 用户信息处理方法、装置、计算机设备及存储介质 |
CN111680030A (zh) * | 2019-03-11 | 2020-09-18 | 阿里巴巴集团控股有限公司 | 数据融合方法及装置,基于元信息的数据处理方法和装置 |
CN110674231A (zh) * | 2019-10-09 | 2020-01-10 | 上海智子信息科技股份有限公司 | 一种面向数据湖的用户id集成方法和系统 |
CN112765183A (zh) * | 2021-02-02 | 2021-05-07 | 浙江公共安全技术研究院有限公司 | 多源数据融合方法、装置、存储介质及电子设备 |
CN113094370A (zh) * | 2021-04-13 | 2021-07-09 | 北京精鸿软件科技有限公司 | 数据索引构建方法、装置、存储介质及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102750629B (zh) | 日程关联方法及装置 | |
CN110020086B (zh) | 一种用户画像查询方法及装置 | |
CN107423070B (zh) | 一种页面生成方法及装置 | |
CN106792653B (zh) | 一种通信号码信息处理方法、装置及系统 | |
CN109213758B (zh) | 数据存取方法、装置、设备及计算机可读存储介质 | |
JP6276279B2 (ja) | 図形コードデータベースの更新および検索のための方法および装置 | |
CN104866985A (zh) | 快递单号识别方法、装置及系统 | |
CN114610951A (zh) | 数据处理方法、装置、电子设备及可读存储介质 | |
CN110806866A (zh) | 一种前端管理系统的生成方法及装置 | |
CN109241075A (zh) | 指标基础数据的处理方法、设备及计算机可读存储介质 | |
CN110442583B (zh) | 数据处理的方法及装置、电子设备、存储介质 | |
CN117235285A (zh) | 融合知识图谱数据的方法及装置 | |
CN105843809B (zh) | 数据处理方法和装置 | |
CN112988780A (zh) | 数据校核方法和装置、存储介质及电子设备 | |
CN104636471A (zh) | 一种程序代码的查找方法及装置 | |
CN112307297A (zh) | 一种基于优先级规则的用户标识统一方法及系统 | |
CN109842482B (zh) | 一种信息同步方法、系统及终端设备 | |
CN113626482A (zh) | 基于系统融合id表的查询方法和装置 | |
CN102662995B (zh) | 一种快速定位手机应用数据更新的方法 | |
CN113301203B (zh) | 基于通讯录对历史信息数据进行更新的方法及装置 | |
CN110968615A (zh) | 数据查询方法及装置 | |
CN108268545A (zh) | 一种分级的用户标签库的创建的方法和装置 | |
CN106372121B (zh) | 服务器及数据处理方法 | |
CN113761102A (zh) | 数据处理方法、装置、服务器、系统和存储介质 | |
US20200192938A1 (en) | Graph creation from multiple databases |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |