CN112559493A - 数据血缘关系解析方法、计算机装置和存储介质 - Google Patents
数据血缘关系解析方法、计算机装置和存储介质 Download PDFInfo
- Publication number
- CN112559493A CN112559493A CN202011536174.1A CN202011536174A CN112559493A CN 112559493 A CN112559493 A CN 112559493A CN 202011536174 A CN202011536174 A CN 202011536174A CN 112559493 A CN112559493 A CN 112559493A
- Authority
- CN
- China
- Prior art keywords
- data
- relationship
- version
- blood relationship
- blood
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 239000008280 blood Substances 0.000 title claims abstract description 82
- 210000004369 blood Anatomy 0.000 title claims abstract description 82
- 238000004458 analytical method Methods 0.000 title claims abstract description 39
- 230000005540 biological transmission Effects 0.000 claims abstract description 31
- 238000001914 filtration Methods 0.000 claims abstract description 4
- 238000000034 method Methods 0.000 claims description 19
- 230000008859 change Effects 0.000 claims description 9
- 238000013506 data mapping Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 claims description 5
- 238000011161 development Methods 0.000 claims description 3
- 210000004204 blood vessel Anatomy 0.000 claims 2
- 230000000875 corresponding effect Effects 0.000 description 8
- 238000004590 computer program Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/219—Managing data history or versioning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2457—Query processing with adaptation to user needs
- G06F16/24573—Query processing with adaptation to user needs using data annotations, e.g. user-defined metadata
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/28—Databases characterised by their database models, e.g. relational or object models
- G06F16/284—Relational databases
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Library & Information Science (AREA)
- Mathematical Physics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种数据血缘关系解析方法、计算机装置和存储介质,数据血缘关系解析方法包括获取第一数据血缘关系,根据第一数据血缘关系查询图数据库,从查询到的数据血缘关系中过滤出第二血缘关系,以及将第一数据血缘和第二血缘关系合并为全链路血缘关系的第一版本等步骤。本发明通过将来自相同数据传输任务的第一数据血缘和第二血缘关系合并为全链路血缘关系,可以支持对不同类型的数据传输任务中的不同作业、不同数据源相关联,从而在对数据的传输进行全局把控和全链路分析的基础上,实现数据血缘关系解析。本发明广泛应用于计算机技术领域。
Description
技术领域
本发明涉及计算机技术领域,尤其是一种数据血缘关系解析方法、计算机装置和存储介质。
背景技术
数据血缘关系解析可以应用于对数据处理过程的追踪,例如找到以某个数据对象为起点的所有相关元数据对象以及这些元数据对象之间的数据流输入输出关系。
现有的数据血缘关系解析技术局限于对单一作业、单一数据源或者单一类型的数据进行分析,难以对数据的传输进行全局把控。
发明内容
针对上述至少一个技术问题,本发明的目的在于提供一种数据血缘关系解析方法、计算机装置和存储介质。
一方面,本发明实施例包括一种数据血缘关系解析方法,包括:
获取待处理数据相应的第一数据血缘关系;所述待处理数据来自数据传输任务;
根据所述第一数据血缘关系查询图数据库;
当从所述图数据库查询到与所述第一数据血缘关系相关的数据血缘关系,从查询到的数据血缘关系中过滤出第二血缘关系;所述第二血缘关系与所述第一数据血缘关系来自不同的数据传输任务;
将所述第一数据血缘和所述第二血缘关系合并为全链路血缘关系的第一版本。
进一步地,所述数据血缘关系解析方法还包括:
在所述数据传输任务的数据采集、作业开发和/或数据交换环节进行埋点;
以作业为单位从所述埋点获取所述待处理数据。
进一步地,所述数据血缘关系解析方法还包括:
当从所述图数据库未查询到与所述第一数据血缘关系相关的数据血缘关系,将所述第一数据血缘关系保存到所述图数据库。
进一步地,所述数据血缘关系解析方法还包括:
获取所述全链路血缘关系的第二版本;所述全链路血缘关系的第二版本是所述全链路血缘关系在所述第一版本之前的版本;
当确定所述第一版本相对所述第二版本存在变化,将所述第一版本保存到所述图数据库。
进一步地,所述确定第一版本相对所述第二版本存在变化,包括:
将所述第一版本与所述第二版本进行字段血缘和表血缘至少之一的对比;
当所述第一版本与所述第二版本的字段血缘和表血缘至少之一发生变化,确定所述第一版本相对所述第二版本存在变化。
进一步地,所述获取待处理数据相应的第一数据血缘关系,包括:
当所述待处理数据为数据映射关系,将所述数据映射关系本身确定为所述第一数据血缘关系。
进一步地,所述获取待处理数据相应的第一数据血缘关系,包括:
当所述待处理数据为SQL脚本,对所述SQL脚本进行规则化处理;
通过词法分析将所述SQL脚本划分获得至少一个关键词;
对各所述关键词进行标签标识;
根据所述词法分析的结果生成与所述SQL脚本对应的抽象语法树;
根据深度优先遍历所述抽象语法树,获得所述第一数据血缘关系。
进一步地,所述数据传输任务包括离线数据传输任务和实时数据传输任务;所述图数据库为Neo4j数据库。
另一方面,本发明实施例还包括一种计算机装置,包括存储器和处理器,所述存储器用于存储至少一个程序,所述处理器用于加载所述至少一个程序以执行实施例所述方法。
另一方面,本发明实施例还包括一种存储介质,其中存储有处理器可执行的程序,所述处理器可执行的程序在由处理器执行时用于执行实施例所述方法。
本发明的有益效果是:实施例中的数据血缘关系解析方法,通过将来自不同数据传输任务的第一数据血缘和第二血缘关系合并为全链路血缘关系,可以支持对不同类型的数据传输任务中的不同作业、不同数据源相关联,从而在对数据的传输进行全局把控和全链路分析的基础上,实现数据血缘关系解析。
附图说明
图1为实施例中数据血缘关系解析方法的原理图;
图2为实施例中数据血缘关系解析方法的流程图。
具体实施方式
本实施例中,数据血缘关系解析方法的原理如图1所示。
参照图2,数据血缘关系解析方法的主要步骤包括:
S1.获取待处理数据相应的第一数据血缘关系;
S2.根据第一数据血缘关系查询图数据库;
S3.当从图数据库查询到与第一数据血缘关系相关的数据血缘关系,从查询到的数据血缘关系中过滤出第二血缘关系;第二血缘关系与第一数据血缘关系来自不同的数据传输任务;
S4.将第一数据血缘和第二血缘关系合并为全链路血缘关系的第一版本。
本实施例中,待处理数据来自数据传输任务。通过在数据传输任务的数据采集、作业开发和/或数据交换环节进行埋点,可以以作业为单位从埋点获取待处理数据。本实施例中,可以从离线数据传输任务或者实时数据传输任务中获取待处理数据,所获取的待处理数据可以是数据映射关系或者SQL脚本。
本实施例中,在执行步骤S1,也就是获取待处理数据相应的第一数据血缘关系这一步骤时,如果待处理数据是数据映射关系,那么可以将数据映射关系本身确定为第一数据血缘关系。
本实施例中,在执行步骤S1,也就是获取待处理数据相应的第一数据血缘关系这一步骤时,如果待处理数据是SQL脚本,那么可以执行以下步骤:
S101.对SQL脚本进行规则化处理;
S102.通过词法分析将SQL脚本划分获得至少一个关键词;
S103.对各关键词进行标签标识;
S104.根据词法分析的结果生成与SQL脚本对应的抽象语法树;
S105.根据深度优先遍历抽象语法树,获得第一数据血缘关系。
本实施例中,在执行步骤S2时,对图数据库的查询结果可以是从图数据库查询到与第一数据血缘关系相关的数据血缘关系,或者从图数据库未查询到与第一数据血缘关系相关的数据血缘关系。如果查询结果是第一种情况,也就是从图数据库查询到与第一数据血缘关系相关的数据血缘关系,那么就从查询到的一个或多个数据血缘关系中,过滤筛选出与第一数据血缘关系来自不同的数据传输任务的第二数据血缘关系,并转到执行步骤S4。如果查询结果是第二种情况,也就是从图数据库未查询到与第一数据血缘关系相关的数据血缘关系,那么就将第一数据血缘关系保存到图数据库,可以不再执行后续的步骤S4等。
本实施例中,图数据库为Neo4j数据库。通过使用图数据库,可以保存各种类型的数据血缘关系中间处理结果或者最终结果。
步骤S4中,将第一数据血缘和第二血缘关系合并为全链路血缘关系。本实施例中,将执行步骤S4将第一数据血缘和第二血缘关系合并所得的全链路血缘关系,称为全链路血缘关系的第一版本或者新版本。
通过执行步骤S4所得的全链路血缘关系的第一版本可以保存在图数据库,当以后需要查询数据血缘关系时可以从图数据库读取全链路血缘关系的第一版本。
本实施例中,在执行数据血缘关系解析方法时,通过将来自不同数据传输任务的第一数据血缘和第二血缘关系合并为全链路血缘关系,可以支持对不同类型的数据传输任务中的不同作业、不同数据源相关联,从而在对数据的传输进行全局把控和全链路分析的基础上,实现数据血缘关系解析。
本实施例中,在执行数据血缘关系解析方法时,通过使用图数据库存储数据血缘关系解析所得的全链路血缘关系的第一版本,可以记录血缘版本,从而为后续数据发生异常需要查询数据血缘版本时提供数据支持,有助于后续追踪到异常发生的原因。
本实施例中,在执行数据血缘关系解析方法时,通过从离线数据传输任务和实时数据传输任务等数据传输任务中获取待处理数据,可以实现全业务流程的覆盖,同时可以关联不同作业之间的血缘关系,得到完整的数据流转关系,增加了数据血缘的覆盖率,丰富了数据的血缘关系,进而提升了数据血缘的质量。
本实施例中,在执行步骤S1-S4的基础上,还可以执行以下步骤:
S5.获取全链路血缘关系的第二版本;
S6.当确定第一版本相对第二版本存在变化,将第一版本保存到图数据库。
步骤S5中,将执行步骤S1-S4之前已存储在图数据库或者其他存储介质中的全链路血缘关系,称为全链路血缘关系的第二版本或者旧版本,即全链路血缘关系的第二版本是指全链路血缘关系在第一版本之前的版本。
步骤S6中,将全链路血缘关系的第一版本和第二版本进行对比,也就是将全链路血缘关系的新版本和旧版本进行对比,如果第一版本和第二版本的任何部分内容或者主要部分内容不相同,那么确定第一版本相对第二版本存在变化,通过将第一版本保存到图数据库,以第一版本替换掉之前存储在图数据库中的第二版本,实现全链路血缘关系的版本更新。
本实施例中,在确定第一版本相对第二版本是否存在变化时,可以执行以下步骤:
S601.将第一版本与第二版本进行字段血缘和表血缘至少之一的对比;
S602.当第一版本与第二版本的字段血缘和表血缘至少之一发生变化,确定第一版本相对第二版本存在变化。
通过执行步骤S601-S602,第一版本相对第二版本的字段血缘的变化或者表血缘的变化,都会确定为第一版本相对第二版本存在变化,从而触发对全链路血缘关系的版本更新。通过执行步骤S601-S602,能够得到字段级别的数据血缘关系和表血缘关系,能够降低分析数据血缘关系的复杂度,提高数据血缘分析的扩展性,能够摆脱异构数据源的限制,提供更准确的数据质量问题回溯,通过使用图数据库记录全链路血缘关系的版本更新,能够对比血缘差异,记录血缘版本,为血缘变化的对比提供支持。
本实施例中,一种计算机装置,包括存储器和处理器,所述存储器用于存储至少一个程序,所述处理器用于加载所述至少一个程序以执行实施例中的数据血缘关系解析方法,实现与实施例所述的相同的技术效果。
本实施例中,一种存储介质,其中存储有处理器可执行的程序,所述处理器可执行的程序在由处理器执行时用于执行实施例中的数据血缘关系解析方法,实现与实施例所述的相同的技术效果。
需要说明的是,如无特殊说明,当某一特征被称为“固定”、“连接”在另一个特征,它可以直接固定、连接在另一个特征上,也可以间接地固定、连接在另一个特征上。此外,本公开中所使用的上、下、左、右等描述仅仅是相对于附图中本公开各组成部分的相互位置关系来说的。在本公开中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。此外,除非另有定义,本实施例所使用的所有的技术和科学术语与本技术领域的技术人员通常理解的含义相同。本实施例说明书中所使用的术语只是为了描述具体的实施例,而不是为了限制本发明。本实施例所使用的术语“和/或”包括一个或多个相关的所列项目的任意的组合。
应当理解,尽管在本公开可能采用术语第一、第二、第三等来描述各种元件,但这些元件不应限于这些术语。这些术语仅用来将同一类型的元件彼此区分开。例如,在不脱离本公开范围的情况下,第一元件也可以被称为第二元件,类似地,第二元件也可以被称为第一元件。本实施例所提供的任何以及所有实例或示例性语言(“例如”、“如”等)的使用仅意图更好地说明本发明的实施例,并且除非另外要求,否则不会对本发明的范围施加限制。
应当认识到,本发明的实施例可以由计算机硬件、硬件和软件的组合、或者通过存储在非暂时性计算机可读存储器中的计算机指令来实现或实施。所述方法可以使用标准编程技术-包括配置有计算机程序的非暂时性计算机可读存储介质在计算机程序中实现,其中如此配置的存储介质使得计算机以特定和预定义的方式操作——根据在具体实施例中描述的方法和附图。每个程序可以以高级过程或面向对象的编程语言来实现以与计算机系统通信。然而,若需要,该程序可以以汇编或机器语言实现。在任何情况下,该语言可以是编译或解释的语言。此外,为此目的该程序能够在编程的专用集成电路上运行。
此外,可按任何合适的顺序来执行本实施例描述的过程的操作,除非本实施例另外指示或以其他方式明显地与上下文矛盾。本实施例描述的过程(或变型和/或其组合)可在配置有可执行指令的一个或多个计算机系统的控制下执行,并且可作为共同地在一个或多个处理器上执行的代码(例如,可执行指令、一个或多个计算机程序或一个或多个应用)、由硬件或其组合来实现。所述计算机程序包括可由一个或多个处理器执行的多个指令。
进一步,所述方法可以在可操作地连接至合适的任何类型的计算平台中实现,包括但不限于个人电脑、迷你计算机、主框架、工作站、网络或分布式计算环境、单独的或集成的计算机平台、或者与带电粒子工具或其它成像装置通信等等。本发明的各方面可以以存储在非暂时性存储介质或设备上的机器可读代码来实现,无论是可移动的还是集成至计算平台,如硬盘、光学读取和/或写入存储介质、RAM、ROM等,使得其可由可编程计算机读取,当存储介质或设备由计算机读取时可用于配置和操作计算机以执行在此所描述的过程。此外,机器可读代码,或其部分可以通过有线或无线网络传输。当此类媒体包括结合微处理器或其他数据处理器实现上文所述步骤的指令或程序时,本实施例所述的发明包括这些和其他不同类型的非暂时性计算机可读存储介质。当根据本发明所述的方法和技术编程时,本发明还包括计算机本身。
计算机程序能够应用于输入数据以执行本实施例所述的功能,从而转换输入数据以生成存储至非易失性存储器的输出数据。输出信息还可以应用于一个或多个输出设备如显示器。在本发明优选的实施例中,转换的数据表示物理和有形的对象,包括显示器上产生的物理和有形对象的特定视觉描绘。
以上所述,只是本发明的较佳实施例而已,本发明并不局限于上述实施方式,只要其以相同的手段达到本发明的技术效果,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。在本发明的保护范围内其技术方案和/或实施方式可以有各种不同的修改和变化。
Claims (10)
1.一种数据血缘关系解析方法,其特征在于,包括:
获取待处理数据相应的第一数据血缘关系;所述待处理数据来自数据传输任务;
根据所述第一数据血缘关系查询图数据库;
当从所述图数据库查询到与所述第一数据血缘关系相关的数据血缘关系,从查询到的数据血缘关系中过滤出第二血缘关系;所述第二血缘关系与所述第一数据血缘关系来自不同的数据传输任务;
将所述第一数据血缘和所述第二血缘关系合并为全链路血缘关系的第一版本。
2.根据权利要求1所述的数据血缘关系解析方法,其特征在于,所述数据血缘关系解析方法还包括:
在所述数据传输任务的数据采集、作业开发和/或数据交换环节进行埋点;
以作业为单位从所述埋点获取所述待处理数据。
3.根据权利要求1所述的数据血缘关系解析方法,其特征在于,所述数据血缘关系解析方法还包括:
当从所述图数据库未查询到与所述第一数据血缘关系相关的数据血缘关系,将所述第一数据血缘关系保存到所述图数据库。
4.根据权利要求1所述的数据血缘关系解析方法,其特征在于,所述数据血缘关系解析方法还包括:
获取所述全链路血缘关系的第二版本;所述全链路血缘关系的第二版本是所述全链路血缘关系在所述第一版本之前的版本;
当确定所述第一版本相对所述第二版本存在变化,将所述第一版本保存到所述图数据库。
5.根据权利要求4所述的数据血缘关系解析方法,其特征在于,所述确定第一版本相对所述第二版本存在变化,包括:
将所述第一版本与所述第二版本进行字段血缘和表血缘至少之一的对比;
当所述第一版本与所述第二版本的字段血缘和表血缘至少之一发生变化,确定所述第一版本相对所述第二版本存在变化。
6.根据权利要求1所述的数据血缘关系解析方法,其特征在于,所述获取待处理数据相应的第一数据血缘关系,包括:
当所述待处理数据为数据映射关系,将所述数据映射关系本身确定为所述第一数据血缘关系。
7.根据权利要求1-6任一项所述的数据血缘关系解析方法,其特征在于,所述获取待处理数据相应的第一数据血缘关系,包括:
当所述待处理数据为SQL脚本,对所述SQL脚本进行规则化处理;
通过词法分析将所述SQL脚本划分获得至少一个关键词;
对各所述关键词进行标签标识;
根据所述词法分析的结果生成与所述SQL脚本对应的抽象语法树;
根据深度优先遍历所述抽象语法树,获得所述第一数据血缘关系。
8.根据权利要求1-6任一项所述的数据血缘关系解析方法,其特征在于,所述数据传输任务包括离线数据传输任务和实时数据传输任务;所述图数据库为Neo4j数据库。
9.一种计算机装置,其特征在于,包括存储器和处理器,所述存储器用于存储至少一个程序,所述处理器用于加载所述至少一个程序以执行权利要求1-8任一项所述的数据血缘关系解析方法。
10.一种存储介质,其中存储有处理器可执行的程序,其特征在于,所述处理器可执行的程序在由处理器执行时用于执行权利要求1-8任一项所述的数据血缘关系解析方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011536174.1A CN112559493A (zh) | 2020-12-23 | 2020-12-23 | 数据血缘关系解析方法、计算机装置和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011536174.1A CN112559493A (zh) | 2020-12-23 | 2020-12-23 | 数据血缘关系解析方法、计算机装置和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN112559493A true CN112559493A (zh) | 2021-03-26 |
Family
ID=75032242
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011536174.1A Pending CN112559493A (zh) | 2020-12-23 | 2020-12-23 | 数据血缘关系解析方法、计算机装置和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112559493A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114116856A (zh) * | 2022-01-25 | 2022-03-01 | 中电云数智科技有限公司 | 基于数据治理全链路的字段级血缘关系分析方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106529827A (zh) * | 2016-11-30 | 2017-03-22 | 中国南方电网有限责任公司 | 基于元数据的指标血统的分析方法和分析系统 |
CN109446279A (zh) * | 2018-10-15 | 2019-03-08 | 顺丰科技有限公司 | 基于neo4j大数据血缘关系管理方法、系统、设备及存储介质 |
CN111324781A (zh) * | 2020-03-03 | 2020-06-23 | 南京领行科技股份有限公司 | 一种数据分析方法、装置及设备 |
CN111639143A (zh) * | 2020-06-05 | 2020-09-08 | 广州市玄武无线科技股份有限公司 | 数据仓库的数据血缘关系展示方法及装置、电子设备 |
-
2020
- 2020-12-23 CN CN202011536174.1A patent/CN112559493A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106529827A (zh) * | 2016-11-30 | 2017-03-22 | 中国南方电网有限责任公司 | 基于元数据的指标血统的分析方法和分析系统 |
CN109446279A (zh) * | 2018-10-15 | 2019-03-08 | 顺丰科技有限公司 | 基于neo4j大数据血缘关系管理方法、系统、设备及存储介质 |
CN111324781A (zh) * | 2020-03-03 | 2020-06-23 | 南京领行科技股份有限公司 | 一种数据分析方法、装置及设备 |
CN111639143A (zh) * | 2020-06-05 | 2020-09-08 | 广州市玄武无线科技股份有限公司 | 数据仓库的数据血缘关系展示方法及装置、电子设备 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114116856A (zh) * | 2022-01-25 | 2022-03-01 | 中电云数智科技有限公司 | 基于数据治理全链路的字段级血缘关系分析方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2017107853A1 (zh) | 一种数据监控管理方法、数据监控方法及系统 | |
US20120331010A1 (en) | Systems And Methods For Performing A Query On A Distributed Database | |
CN107798030B (zh) | 数据表的拆分方法和装置 | |
US20150248421A1 (en) | System and method for recovering system status consistently to designed recovering time point in distributed database | |
CN103559300A (zh) | 数据的查询方法和查询装置 | |
US9305067B2 (en) | Creation of change-based data integration jobs | |
CN105574334A (zh) | 医疗信息处理方法和系统 | |
CN113179489A (zh) | 卫星终端接入管理方法、核心网、计算机装置和存储介质 | |
US8694525B2 (en) | Systems and methods for performing index joins using auto generative queries | |
US10430802B2 (en) | Screen-image based classification | |
CN112559493A (zh) | 数据血缘关系解析方法、计算机装置和存储介质 | |
US7624124B2 (en) | System and method for assisting generation of business specification | |
US20180101571A1 (en) | Data flow modeling and execution | |
CN113190576A (zh) | 数据处理方法、装置、计算机设备和可读存储介质 | |
CN107256167B (zh) | 应用于应用系统迁移的升级控制方法及升级控制设备 | |
CN112948504A (zh) | 数据采集方法、装置、计算机设备和存储介质 | |
US20150033213A1 (en) | Compiling method, storage medium and compiling apparatus | |
CN113239921A (zh) | 一种ocr识别服务的任务分级与分发方法及系统 | |
CN114020796A (zh) | 一种基于工业互联网标识解析体系的电子说明书实现方法 | |
CN112597162A (zh) | 数据集采集方法、系统、设备及存储介质 | |
CN112667463A (zh) | 一种应用系统基线状态监控方法及装置 | |
CN110727457A (zh) | 组件管理方法、装置、存储介质及电子设备 | |
CN103297479A (zh) | 一种插件升级的分布式检测方法及装置 | |
CN109902067A (zh) | 文件处理方法、装置、存储介质及计算机设备 | |
CN112506944B (zh) | 业务系统间的数据标准转换取数方法、装置、设备和介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210326 |