CN115408243A - 一种工作流引擎执行过程链路跟踪方法及系统 - Google Patents

一种工作流引擎执行过程链路跟踪方法及系统 Download PDF

Info

Publication number
CN115408243A
CN115408243A CN202211087501.9A CN202211087501A CN115408243A CN 115408243 A CN115408243 A CN 115408243A CN 202211087501 A CN202211087501 A CN 202211087501A CN 115408243 A CN115408243 A CN 115408243A
Authority
CN
China
Prior art keywords
link
module
server
tree
key mark
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211087501.9A
Other languages
English (en)
Inventor
王三明
王聪明
王本东
葛飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Anyuan Technology Co ltd
Original Assignee
Nanjing Anyuan Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Anyuan Technology Co ltd filed Critical Nanjing Anyuan Technology Co ltd
Priority to CN202211087501.9A priority Critical patent/CN115408243A/zh
Publication of CN115408243A publication Critical patent/CN115408243A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/323—Visualisation of programs or trace data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/3089—Monitoring arrangements determined by the means or processing involved in sensing the monitored data, e.g. interfaces, connectors, sensors, probes, agents
    • G06F11/3093—Configuration details thereof, e.g. installation, enabling, spatial arrangement of the probes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/865—Monitoring of software

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了一种工作流引擎执行过程链路跟踪方法及系统，包括提交模块、服务器、异步队列模块、配置模块、解析模块、生成链路ID模块、树‑链路结构生成模块、上传模块，先提交工作流实例数据至后台服务器,处理提交的实例数据过程中，以文件行的形式记录关键标记点日志,开启异步队列，并且可以常驻服务器后台运行,配置时间间隔频率和行数,顺序读取文件,解析日志结构,生成链路ID,重新组织数据结构形成特定的树‑链路结构,提交组织的树‑链路结构到UI系统。本发明根据链路ID即可高效直观的查看工作流引擎执行过程中的节点信息流转和处理过程。

Description

一种工作流引擎执行过程链路跟踪方法及系统
技术领域
本发明属于计算机技术领域，特别涉及一种工作流引擎执行过程链路跟踪的方法。
背景技术
一直以来工作流引擎都是SasS:(Software-as-a-Service)、PaaS:(Platform-as-a-Service)中的核心系统功能，为之提供对各种角色和信息传递、内容处理等核心解决方案。其中工作流引擎的节点管理、流向管理也是有着非常复杂的处理逻辑，sa管理员对于工作流的查看基本还是处于的历史记录和流程图示流转2个工具功能，但是对于工作流链路的节点信息流转和顺序一直没有很好的工具或者方法。
根据以上的缺陷，工作流引擎执行过程链路跟踪的方法能够记录工作流的节点信息和关键点，生成链路ID，重新组织数据结构形成特定的树-链路结构，提交给UI系统，从而根据链路ID即可高效直观的查看工作流引擎执行过程中链路的节点信息流转。
发明内容
发明目的：为了克服现有技术中存在的不足，本发明提供一种工作流引擎执行过程链路跟踪方法及系统，可以高效直观的查看工作流引擎执行过程中的节点信息流转。
技术方案：为实现上述目的，本发明采用的技术方案为：
一种工作流引擎执行过程链路跟踪方法，包括以下步骤：
步骤1，提交工作流实例数据至服务器。
步骤2，服务器处理提交的工作流实例数据过程中，以文件的形式记录关键标记点日志。
步骤3，开启异步队列，并且常驻服务器后台运行。
步骤4，配置时间间隔频率和行数。
步骤5，根据步骤4配置的时间间隔频率和行数顺序读取步骤2得到的文件，当读取不为空时执行步骤6，读取为空时结束。
步骤6，解析步骤5读取的文件产生的关键标记点日志。
步骤7，根据解析的关键标记点日志生成链路ID。
步骤8，根据步骤7生成的链路ID重新组织数据结构形成特定的树-链路结构。
步骤9，上传步骤8组织得到的树-链路结构到UI界面系统。
优选的：步骤7中根据关键标记点日志自动随机性生成链路ID。
优选的：步骤2中关键标记点日志结构包括实例ID、关键标记点、信息。
优选的：步骤8中树-链路结构包括链路ID、实例ID、 关键标记点、信息。
一种工作流引擎执行过程链路跟踪系统，包括提交模块、服务器、异步队列模块、配置模块、解析模块、生成链路ID模块、树-链路结构生成模块、上传模块，其中：
所述提交模块用于提交工作流实例数据至服务器。
所述服务器处理提交的工作流实例数据过程中，以文件的形式记录关键标记点日志。所述服务器处理根据配置的时间间隔频率和行数顺序读取文件。
所述异步队列模块用于服务器异步处理，并且常驻服务器后台运行。
所述配置模块用于配置时间间隔频率和行数。
所述解析模块用于解析读取的文件产生的关键标记点日志。
所述生成链路ID模块用于根据解析的关键标记点日志生成链路ID。
所述树-链路结构生成模块根据生成的链路ID重新组织数据结构形成特定的树-链路结构。
所述上传模块用于上传组织得到的树-链路结构到UI界面系统。
本发明相比现有技术，具有以下有益效果：
本发明通过组织工作流执行过程中特定的树-链路结构，从而可根据链路ID即可高效直观的查看工作流引擎执行过程中的节点信息流转和处理过程。
附图说明
图1为本发明实施例的流程图。
具体实施方式
下面结合附图和具体实施例，进一步阐明本发明，应理解这些实例仅用于说明本发明而不用于限制本发明的范围，在阅读了本发明之后，本领域技术人员对本发明的各种等价形式的修改均落于本申请所附权利要求所限定的范围。
一种工作流引擎执行过程链路跟踪方法，如图1所示，包括以下步骤：
步骤1，提交工作流实例数据至服务器。 实例数据结构：json结构体 {"时间":"2022-08-18 14:31:58","用户ID":"ApiTest","行为":"workflow_submit","流程实例ID":15598,"流节点":"WorkNode_1","流程数据":{}}。
步骤2，服务器处理提交的工作流实例数据过程中，使用标准的json库序列化关键标记点日志，并以文件形式存储。关键标记点日志结构：实例ID、关键标记点、信息。
步骤3，开启异步队列，并且常驻服务器后台运行。
步骤4，配置时间间隔频率(60秒)和行数（100行）。
步骤5，根据步骤4配置的时间间隔频率和行数顺序读取步骤2得到的文件，当读取不为空时执行步骤6，读取为空时结束。
步骤6，使用标准json库解析步骤5读取的文件产生的关键标记点日志。
步骤7，根据解析的关键标记点日志生成链路ID。根据关键标记点日志链路ID，链路ID结构： Linux时间戳+机器ID。
步骤8，根据步骤7生成的链路ID重新组织数据结构形成链路结构，并使用标准的json库序列化。链路结构：链路ID、实例ID、 关键标记点、信息。
步骤9，上传步骤8组织得到的树-链路结构到UI界面系统。
步骤10，文件不为空则重复执行5-9步骤，读取为空时结束。
一种工作流引擎执行过程链路跟踪系统，包括提交模块、服务器、异步队列模块、配置模块、解析模块、生成链路ID模块、树-链路结构生成模块、上传模块，其中：
所述提交模块用于提交工作流实例数据至服务器。
所述服务器处理提交的工作流实例数据过程中，以文件的形式记录关键标记点日志。所述服务器处理根据配置的时间间隔频率和行数顺序读取文件。
所述异步队列模块用于服务器异步处理，并且常驻服务器后台运行。
所述配置模块用于配置时间间隔频率和行数。
所述解析模块用于解析读取的文件产生的关键标记点日志。
所述生成链路ID模块用于根据解析的关键标记点日志生成链路ID。
所述树-链路结构生成模块根据生成的链路ID重新组织数据结构形成特定的树-链路结构。
所述上传模块用于上传组织得到的树-链路结构到UI界面系统。
本发明通过组织工作流执行过程中特定的树-链路结构，从而可根据链路ID即可高效直观的查看工作流引擎执行过程中的节点信息流转和处理过程。
以上所述仅是本发明的优选实施方式，应当指出：对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (5)

1.一种工作流引擎执行过程链路跟踪方法，其特征在于，包括以下步骤：
步骤1，提交工作流实例数据至服务器；
步骤2，服务器处理提交的工作流实例数据过程中，以文件的形式记录关键标记点日志；
步骤3，开启异步队列，并且常驻服务器后台运行；
步骤4，配置时间间隔频率和行数；
步骤5，根据步骤4配置的时间间隔频率和行数顺序读取步骤2得到的文件，当读取不为空时执行步骤6，读取为空时结束；
步骤6，解析步骤5读取的文件产生的关键标记点日志；
步骤7，根据解析的关键标记点日志生成链路ID；
步骤8，根据步骤7生成的链路ID重新组织数据结构形成特定的树-链路结构；
步骤9，上传步骤8组织得到的树-链路结构到UI界面系统。
2.根据权利要求1所述工作流引擎执行过程链路跟踪方法，其特征在于：步骤7中根据关键标记点日志自动随机性生成链路ID。
3.根据权利要求1所述工作流引擎执行过程链路跟踪方法，其特征在于：步骤2中关键标记点日志结构包括实例ID、关键标记点、信息。
4.根据权利要求1所述工作流引擎执行过程链路跟踪方法，其特征在于：步骤8中树-链路结构包括链路ID、实例ID、 关键标记点、信息。
5.一种基于权利要求1至4任一所述工作流引擎执行过程链路跟踪方法的跟踪系统，其特征在于：包括提交模块、服务器、异步队列模块、配置模块、解析模块、生成链路ID模块、树-链路结构生成模块、上传模块，其中：
所述提交模块用于提交工作流实例数据至服务器；
所述服务器处理提交的工作流实例数据过程中，以文件的形式记录关键标记点日志；所述服务器处理根据配置的时间间隔频率和行数顺序读取文件；
所述异步队列模块用于服务器异步处理，并且常驻服务器后台运行；
所述配置模块用于配置时间间隔频率和行数；
所述解析模块用于解析读取的文件产生的关键标记点日志；
所述生成链路ID模块用于根据解析的关键标记点日志生成链路ID；
所述树-链路结构生成模块根据生成的链路ID重新组织数据结构形成特定的树-链路结构；
所述上传模块用于上传组织得到的树-链路结构到UI界面系统。
CN202211087501.9A 2022-09-07 2022-09-07 一种工作流引擎执行过程链路跟踪方法及系统 Pending CN115408243A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211087501.9A CN115408243A (zh) 2022-09-07 2022-09-07 一种工作流引擎执行过程链路跟踪方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211087501.9A CN115408243A (zh) 2022-09-07 2022-09-07 一种工作流引擎执行过程链路跟踪方法及系统

Publications (1)

Publication Number Publication Date
CN115408243A true CN115408243A (zh) 2022-11-29

Family

ID=84164615

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211087501.9A Pending CN115408243A (zh) 2022-09-07 2022-09-07 一种工作流引擎执行过程链路跟踪方法及系统

Country Status (1)

Country Link
CN (1) CN115408243A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106961445A (zh) * 2017-04-28 2017-07-18 中国人民解放军信息工程大学 基于fpga硬件并行流水线的报文解析方法及其装置
CN107577586A (zh) * 2016-07-04 2018-01-12 阿里巴巴集团控股有限公司 一种用于确定分布式系统中业务执行链路的方法和设备
CN108874559A (zh) * 2018-05-31 2018-11-23 康键信息技术（深圳）有限公司 电子装置、分布式系统业务链路分析方法及存储介质
CN110502494A (zh) * 2019-08-30 2019-11-26 北京思维造物信息科技股份有限公司 日志处理方法、装置、计算机设备及存储介质
CN110569214A (zh) * 2019-08-02 2019-12-13 杭州云纪网络科技有限公司 用于日志文件的索引构建方法、装置及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107577586A (zh) * 2016-07-04 2018-01-12 阿里巴巴集团控股有限公司 一种用于确定分布式系统中业务执行链路的方法和设备
CN106961445A (zh) * 2017-04-28 2017-07-18 中国人民解放军信息工程大学 基于fpga硬件并行流水线的报文解析方法及其装置
CN108874559A (zh) * 2018-05-31 2018-11-23 康键信息技术（深圳）有限公司 电子装置、分布式系统业务链路分析方法及存储介质
CN110569214A (zh) * 2019-08-02 2019-12-13 杭州云纪网络科技有限公司 用于日志文件的索引构建方法、装置及电子设备
CN110502494A (zh) * 2019-08-30 2019-11-26 北京思维造物信息科技股份有限公司 日志处理方法、装置、计算机设备及存储介质

Similar Documents

Publication Publication Date Title
CN110309071B (zh) 测试代码的生成方法及模块、测试方法及系统
CN111367886A (zh) 数据库中数据迁移的方法及装置
CN109448100B (zh) 三维模型格式转换方法、系统、计算机设备及存储介质
CN112491602B (zh) 行为数据的监控方法、装置、计算机设备及介质
US11210274B2 (en) Prediction and repair of database fragmentation
US20180081683A1 (en) Task assignment using machine learning and information retrieval
CN111046036A (zh) 数据同步方法、装置、系统及存储介质
CN111930489A (zh) 一种任务调度方法、装置、设备及存储介质
WO2019104891A1 (zh) 报表导入导出的方法、装置、存储介质及终端
CN106445815A (zh) 一种自动化测试方法及装置
CN115408243A (zh) 一种工作流引擎执行过程链路跟踪方法及系统
US20110078218A1 (en) Event history storage device, event history tracking device, event history storage method, event history storage program, and data structure
Ilin et al. Performance analysis of software with a variant NoSQL data schemes
CN115309334A (zh) 磁盘管理方法、装置、设备及存储介质
US20220283786A1 (en) Methods and systems for correlating source code commitments and model result records during model development
CN111949479B (zh) 交互系统和索引创建情况的确定方法、设备
CN114356454A (zh) 对账数据处理方法、设备、存储介质及程序产品
CN114064510A (zh) 功能测试方法、装置、电子设备和存储介质
CN112364071A (zh) 货值数据分析方法及系统
CN111858279A (zh) 浏览器用户行为追踪方法及装置
TWI499238B (zh) A method of cross - platform record traceability
CN114510490B (zh) 提升数据库数据插入性能的方法和装置
CN112765170B (zh) 一种嵌入式时间序列数据管理方法及设备
CN111680004B (zh) 核对非结构化影像文件迁移准确性的方法和装置
WO2023070417A1 (en) Efficient extraction of provenance information from database query execution logs

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination