CN109241142A - 基于流程引擎的数据血缘关系计算方法 - Google Patents
基于流程引擎的数据血缘关系计算方法 Download PDFInfo
- Publication number
- CN109241142A CN109241142A CN201811041758.4A CN201811041758A CN109241142A CN 109241142 A CN109241142 A CN 109241142A CN 201811041758 A CN201811041758 A CN 201811041758A CN 109241142 A CN109241142 A CN 109241142A
- Authority
- CN
- China
- Prior art keywords
- data
- genetic connection
- variation
- flow engine
- calculation method
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了基于流程引擎的数据血缘关系计算方法，包括以下步骤：S1：在流程引擎中对起始数据结构进行收集；S2：在流程运行过程中，对每一步的数据变化和转换进行记录，通过分析数据的变化生成数据的血缘关系。本发明能对数据的变化、流向进行记录、分析，能计算数据之间的血缘关系，为可能存在的数据模型修改及数据流向变化提供了最直接的分析、修改依据，并可以在第一时间查看并分析出数据的变化对整体数据结构产生的影响，大大降低了数据模型修改对于当前数据结构影响的分析成本。
Description
技术领域
本发明涉及基于流程引擎的数据血缘关系计算方法。
背景技术
通过使用mxgraph控件及activiti流程引擎实现了复杂数据分析挖掘过程中算子的任务调度，该技术可以设计并实现复杂数据的分析、挖掘，但无法对于数据的变化、流向进行记录、分析，无法计算数据之间的血缘关系。
发明内容
发明目的：本发明的目的是提供一种能对数据的变化、流向进行记录、分析，能计算数据之间的血缘关系的基于流程引擎的数据血缘关系计算方法。
技术方案：本发明所述的基于流程引擎的数据血缘关系计算方法，包括以下步骤：
S1：在流程引擎中对起始数据结构进行收集；
S2：在流程运行过程中，对每一步的数据变化和转换进行记录，通过分析数据的变化生成数据的血缘关系。
进一步，所述步骤S2中，还针对数据的多次变化，对于数据的血缘关系进行传递和记录，直到流程结束，并将记录的数据血缘关系进行持久化。
进一步，还包括步骤S3：使用mxGraph根据步骤S2生成的数据血缘关系绘制出各种数据源及数据模型之间的关联关系拓扑图。
进一步，还包括步骤S4：使用mxGraph根据步骤S2生成的数据血缘关系绘制出不同数据源及数据模型之间联姻融合、转换变换、流转流通的过程的拓扑图。
进一步，所述步骤S1中，采用JAVA技术在流程引擎中对起始数据结构进行收集。
进一步，所述步骤S2中，采用JAVA技术在流程运行过程中，对每一步的数据变化和转换进行记录，通过分析数据的变化生成数据的血缘关系。
有益效果：本发明公开了一种基于流程引擎的数据血缘关系计算方法，能对数据的变化、流向进行记录、分析，能计算数据之间的血缘关系，为可能存在的数据模型修改及数据流向变化提供了最直接的分析、修改依据，并可以在第一时间查看并分析出数据的变化对整体数据结构产生的影响，大大降低了数据模型修改对于当前数据结构影响的分析成本。
附图说明
图1为本发明具体实施方式中方法的流程图。
具体实施方式
本具体实施方式公开了基于流程引擎的数据血缘关系计算方法，如图1所示，包括以下步骤：
S1：使用Tomcat作为获取数据模型及其关系的web服务器，为可视化分析提供数据支撑，采用JAVA技术在流程引擎中对起始数据结构进行收集；
S2：采用JAVA技术在流程运行过程中，对每一步的数据变化和转换进行记录，通过分析数据的变化生成数据的血缘关系；针对数据的多次变化，对于数据的血缘关系进行传递和记录，直到流程结束，并将记录的数据血缘关系进行持久化；
S3：使用mxGraph根据步骤S2生成的数据血缘关系绘制出各种数据源及数据模型之间的关联关系拓扑图，构造数据模型原型，展示其字段信息，模型名称等，根据关联信息数据构造关系模型，使用构造的关系模型将数据模型进行关联连接，连接后进行统一布局，展示其数据血缘关联关系；
S4：使用mxGraph根据步骤S2生成的数据血缘关系绘制出不同数据源及数据模型之间联姻融合、转换变换、流转流通的过程的拓扑图。
Claims (6)
1.基于流程引擎的数据血缘关系计算方法，其特征在于：包括以下步骤：
S1：在流程引擎中对起始数据结构进行收集；
S2：在流程运行过程中，对每一步的数据变化和转换进行记录，通过分析数据的变化生成数据的血缘关系。
2.根据权利要求1所述的基于流程引擎的数据血缘关系计算方法，其特征在于：所述步骤S2中，还针对数据的多次变化，对于数据的血缘关系进行传递和记录，直到流程结束，并将记录的数据血缘关系进行持久化。
3.根据权利要求1所述的基于流程引擎的数据血缘关系计算方法，其特征在于：还包括步骤S3：使用mxGraph根据步骤S2生成的数据血缘关系绘制出各种数据源及数据模型之间的关联关系拓扑图。
4.根据权利要求1所述的基于流程引擎的数据血缘关系计算方法，其特征在于：还包括步骤S4：使用mxGraph根据步骤S2生成的数据血缘关系绘制出不同数据源及数据模型之间联姻融合、转换变换、流转流通的过程的拓扑图。
5.根据权利要求1所述的基于流程引擎的数据血缘关系计算方法，其特征在于：所述步骤S1中，采用JAVA技术在流程引擎中对起始数据结构进行收集。
6.根据权利要求1所述的基于流程引擎的数据血缘关系计算方法，其特征在于：所述步骤S2中，采用JAVA技术在流程运行过程中，对每一步的数据变化和转换进行记录，通过分析数据的变化生成数据的血缘关系。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811041758.4A CN109241142A (zh) | 2018-09-07 | 2018-09-07 | 基于流程引擎的数据血缘关系计算方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811041758.4A CN109241142A (zh) | 2018-09-07 | 2018-09-07 | 基于流程引擎的数据血缘关系计算方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109241142A true CN109241142A (zh) | 2019-01-18 |
Family
ID=65060114
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811041758.4A Pending CN109241142A (zh) | 2018-09-07 | 2018-09-07 | 基于流程引擎的数据血缘关系计算方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109241142A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109815378A (zh) * | 2019-01-31 | 2019-05-28 | 三盟科技股份有限公司 | 一种基于元数据链路的数据追踪方法及系统 |
| CN110674229A (zh) * | 2019-09-24 | 2020-01-10 | 山东爱城市网信息技术有限公司 | 一种基于ast的关系型数据库sql表关系分析及展现方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103617184A (zh) * | 2013-11-07 | 2014-03-05 | 宁波保税区攀峒信息科技有限公司 | 一种血亲关系数据库构建方法和装置 |
| CN104615698A (zh) * | 2015-01-27 | 2015-05-13 | 武汉聚脉网络科技有限公司 | 一种人脉网络系统及其数据整合方法 |
| CN106528757A (zh) * | 2016-11-03 | 2017-03-22 | 北京中安智达科技有限公司 | 一种面向大数据的关系分析展示方法 |
| CN106709024A (zh) * | 2016-12-28 | 2017-05-24 | 深圳市华傲数据技术有限公司 | 基于血缘分析进行数据表溯源的方法及装置 |
| CN107608742A (zh) * | 2017-10-12 | 2018-01-19 | 南京中新赛克科技有限责任公司 | 一种自助式分析挖掘工具中算子任务调度方法 |
| CN108228747A (zh) * | 2017-12-20 | 2018-06-29 | 江苏数加数据科技有限责任公司 | 数据治理中的数据血缘关系可视化图形系统 |
-
2018
- 2018-09-07 CN CN201811041758.4A patent/CN109241142A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103617184A (zh) * | 2013-11-07 | 2014-03-05 | 宁波保税区攀峒信息科技有限公司 | 一种血亲关系数据库构建方法和装置 |
| CN104615698A (zh) * | 2015-01-27 | 2015-05-13 | 武汉聚脉网络科技有限公司 | 一种人脉网络系统及其数据整合方法 |
| CN106528757A (zh) * | 2016-11-03 | 2017-03-22 | 北京中安智达科技有限公司 | 一种面向大数据的关系分析展示方法 |
| CN106709024A (zh) * | 2016-12-28 | 2017-05-24 | 深圳市华傲数据技术有限公司 | 基于血缘分析进行数据表溯源的方法及装置 |
| CN107608742A (zh) * | 2017-10-12 | 2018-01-19 | 南京中新赛克科技有限责任公司 | 一种自助式分析挖掘工具中算子任务调度方法 |
| CN108228747A (zh) * | 2017-12-20 | 2018-06-29 | 江苏数加数据科技有限责任公司 | 数据治理中的数据血缘关系可视化图形系统 |
Non-Patent Citations (1)
| Title |
|---|
| 数据大家: ""数据之间有血缘关系？数据治理不得不懂的血缘关系梳理方法"", 《HTTPS://WWW.SOHU.COM/A/161142366_99934777》 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109815378A (zh) * | 2019-01-31 | 2019-05-28 | 三盟科技股份有限公司 | 一种基于元数据链路的数据追踪方法及系统 |
| CN110674229A (zh) * | 2019-09-24 | 2020-01-10 | 山东爱城市网信息技术有限公司 | 一种基于ast的关系型数据库sql表关系分析及展现方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Yang et al. | A system architecture for manufacturing process analysis based on big data and process mining techniques | |
| Schimm | Process miner—a tool for mining process schemes from event-based data | |
| CN105786912B (zh) | 数据采集转换方法及装置 | |
| CN106951576B (zh) | 一种仿真试验评估系统及评估方法 | |
| US20110161132A1 (en) | Method and system for extracting process sequences | |
| Binder et al. | On analyzing process compliance in skin cancer treatment: An experience report from the evidence-based medical compliance cluster (EBMC 2) | |
| Korshunova et al. | CPP2XMI: reverse engineering of UML class, sequence, and activity diagrams from C++ source code | |
| CN104598570B (zh) | 资源的抓取方法及装置 | |
| CN101206570B (zh) | 用于生成用户界面的方法和系统 | |
| CN109241142A (zh) | 基于流程引擎的数据血缘关系计算方法 | |
| CN103605869B (zh) | 面向航天器总装的三维实做数字样机系统及其构建方法 | |
| CN103559588A (zh) | 基于Petri网行为轮廓的日志挖掘方法 | |
| CN111563285A (zh) | 建筑物3d可视化监控方法、系统以及存储介质 | |
| CN106528372A (zh) | 一种程序运行监视系统和方法 | |
| CN107608742A (zh) | 一种自助式分析挖掘工具中算子任务调度方法 | |
| US20230385283A1 (en) | Systems and methods for analyzing distributed system data streams using declarative specification, detection, and evaluation of happened-before relationships | |
| CN104360837A (zh) | 取证软件中基于自定义脚本实现电子数据取证分析的方法 | |
| CN110727670A (zh) | 基于流程图的数据结构预测传递及自动化数据处理方法 | |
| CN108009252A (zh) | 数据同步的方法及装置 | |
| CN102789420B (zh) | 基于程序执行轨迹的动态切片系统 | |
| CN109408601B (zh) | 基于图数据的数据模型转换方法及图数据结构转换器 | |
| EP2599042A1 (en) | Systems and methods of rapid business discovery and transformation of business processes | |
| CN108132802B (zh) | 一种配置模型在系统开发中的应用方法 | |
| TW200519581A (en) | Real-time monitoring system for abnormal situation and method thereof and real-time monitoring interface for complex abnormal situation | |
| CN110334001A (zh) | 一种批量自动生成回声测试的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190118 |
|
| RJ01 | Rejection of invention patent application after publication |