CN114819631A - 一种多任务的可视化方法、装置、计算机设备及存储介质 - Google Patents

一种多任务的可视化方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN114819631A
CN114819631A CN202210441462.1A CN202210441462A CN114819631A CN 114819631 A CN114819631 A CN 114819631A CN 202210441462 A CN202210441462 A CN 202210441462A CN 114819631 A CN114819631 A CN 114819631A
Authority
CN
China
Prior art keywords
task
generated
flow chart
interface
node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210441462.1A
Other languages
English (en)
Inventor
朱文沥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Life Insurance Company of China Ltd
Original Assignee
Ping An Life Insurance Company of China Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Life Insurance Company of China Ltd filed Critical Ping An Life Insurance Company of China Ltd
Priority to CN202210441462.1A priority Critical patent/CN114819631A/zh
Publication of CN114819631A publication Critical patent/CN114819631A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311—Scheduling, planning or task assignment for a person or group
    • G06Q10/063114—Status monitoring or status determination for a person or group
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2228—Indexing structures
    • G06F16/2237—Vectors, bitmaps or matrices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/242—Query formulation
    • G06F16/2433—Query languages
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26—Visual data mining; Browsing structured data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28—Databases characterised by their database models, e.g. relational or object models
    • G06F16/284—Relational databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q40/00—Finance; Insurance; Tax strategies; Processing of corporate or income taxes
    • G06Q40/08—Insurance

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Strategic Management (AREA)
  • Economics (AREA)
  • Development Economics (AREA)
  • General Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Marketing (AREA)
  • Finance (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Mathematical Physics (AREA)
  • Educational Administration (AREA)
  • Technology Law (AREA)
  • Game Theory and Decision Science (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明涉及计算机技术领域，提供一种多任务的可视化方法、装置、计算机设备及存储介质，通过获取各个子系统发送的各个任务，判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，构建任务流程图，通过配置各个待生成任务对应的任务模板，自动生成任务，通过调用接口将各个任务发送至对应子系统，获取各个任务的处理状态，并可以获取对应任务的实时处理状态，各个子系统根据生成的任务的开始时间对任务进行自动化处理，避免了人工对任务的跟踪，任务自动化处理提高了任务处理结果的准确性，在可视化界面显示任务流程图以及各个任务的处理状态，从而显示出各个任务之间的依赖关系，可以方便地得到关键任务的处理状态。

Description

一种多任务的可视化方法、装置、计算机设备及存储介质
技术领域
本发明涉及计算机技术领域，尤其涉及一种多任务的可视化方法、装置、计算机设备及存储介质。
背景技术
随着社会的发展，保险已经深入到人们的生活。保险的类型也是越来越多。每个类型的寿险对数据准确性的要求都非常高，因此在后台处理的计算逻辑都会很复杂。对于需要进行月结处理的寿险数据来说，不同子系统中均包含有相当多的月结任务，大多月结任务时效要求高，必须要专人跟踪每个任务的完成情况，并汇总后汇报。
目前，对每个任务进行处理时，通常使用表格进行跟踪任务，每天手动更新一次任务状态，上述通过汇总表格的任务可视化方法的不足之处在于：
(1)需要对应负责人跟踪任务完成情况，每月重复工作浪费人力；
(2)任务处理状态不能快速地进行更新；
(3)人为跟踪，容易出错，降低了任务处理结果的准确性。
发明内容
基于此，有必要针对上述技术问题，提供一种多任务的可视化方法、装置、计算机设备及存储介质，以解决浪费人力，不能及时得到对应任务的处理状态，以及任务处理结果的准确性较低的问题。
第一方面，提供一种多任务的可视化方法，包括：
获取各个子系统发送的各个任务请求，根据各个任务请求判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图；
通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与所述流程图中对应任务节点进行匹配，生成对应任务；
通过调用接口将各个任务发送至对应子系统；
获取各个任务的处理状态，在可视化界面显示所述任务流程图以及各个任务的处理状态。
第二方面，提供一种多任务的可视化装置，其特征在于，
任务流程图生成单元：获取各个子系统发送的各个任务请求，根据各个任务请求判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图；
任务配置单元：通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与所述流程图中对应任务节点进行匹配，生成任务；
接口调用单元：通过调用接口将各个任务发送至对应子系统；
任务状态显示单元：获取各个任务的处理状态，在可视化界面显示所述任务流程图以及各个任务的处理状态。
第三方面，本发明实施例提供一种计算机设备，所述计算机设备包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如第一方面所述的一种多任务的可视化方法。
第四方面，本发明实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的一种多任务的可视化方法。
本发明与现有技术相比存在的有益效果是：
本发明通过获取各个子系统发送的各个任务，判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图，通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与流程图中对应任务节点进行匹配，自动生成任务，通过调用接口将各个任务发送至对应子系统，获取各个任务的处理状态，并可以获取对应任务的实时处理状态，各个子系统根据生成的任务的开始时间对任务进行自动化处理，避免了人工对任务的跟踪，任务自动化处理提高了任务处理结果的准确性，在可视化界面显示任务流程图以及各个任务的处理状态，从而显示出各个任务之间的依赖关系，可以方便地得到关键任务的处理状态。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的一种多任务的可视化方法的一应用环境示意图；
图2是本发明实施例一提供的一种多任务的可视化方法的流程示意图；
图3是本发明实施例提供的一种多任务的可视化装置的结构示意图；
图4是本发明实施例提供的一种多任务的可视化方法计算机设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应当理解，当在本发明说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
如在本发明说明书和所附权利要求书中所使用的那样，术语“如果”可以依据上下文被解释为“当...时”或“一旦”或“响应于确定”或“响应于检测到”。类似地，短语“如果确定”或“如果检测到[所描述条件或事件]”可以依据上下文被解释为意指“一旦确定”或“响应于确定”或“一旦检测到[所描述条件或事件]”或“响应于检测到[所描述条件或事件]”。
另外，在本发明说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
在本发明说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本发明的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。
应理解，以下实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
为了说明本发明的技术方案，下面通过具体实施例来进行说明。
本发明实施例一提供的一种多任务的可视化方法，可应用在如图1的应用环境中，其中，客户端与服务端进行通信。其中，客户端包括但不限于掌上电脑、桌上型计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本、个人数字助理(personal digital assistant，PDA)等计算机设备。服务端可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
参见图2，是本发明一实施例提供的一种多任务的可视化方法的流程示意图，上述多任务的可视化方法可以应用于图1中的客户端，对应的计算机设备通过预设的应用程序接口(Application Programming Interface，API)连接目标数据库。在目标数据被驱动运行以执行相应的任务时，会产生对应的任务日志，通过API可以采集到上述任务日志。如图2所示，该多任务的可视化方法可以包括以下步骤：
S11：获取各个子系统发送的各个任务请求，根据各个任务请求判定各个待生成任务之间依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图；
在步骤S11中，将各个系统中对应的任务联系起来，需要对各个系统中的任务建立依赖关系，确定出上游任务和下游任务，根据各个任务的依赖关系，将各个待生成任务作为任务节点，构建出任务流程图，使这些任务按照上下游的依赖关系有序、高效的执行。
本实施例中，获取将各个子系统中的各个任务，判定各个任务之间的依赖关系，依赖关系为任务处理流程中任务的处理顺序，例如，依赖关系可以是“B依赖A，C依赖D，D依赖B，D依赖C，E依赖C，F依赖D，F依赖E”的依赖关系(A—>B—>D—>F，C—>E—>F，C—>D—>F)。在任务处理流程中，处理任务B时，需先处理任务A，处理任务E时，需先处理任务C，处理任务F时，需先处理任务D和任务E，得到各个任务之间的依赖关系后，从各个任务中选出待生成任务，得到待生成任务之间的依赖关系，将各个待生成任务作为任务节点，并使用任务ID标识各个任务，结合各个待生成任务之间的依赖关系构建任务流程图。其中，当需要执行任务节点对应的任务时，在各个子系统中处理对应任务。
本实施例中，步骤S11具体包括：
解析各个任务请求的脚本内容中的数据表和数据表的标识；根据所述数据表和数据表的标识获取各个待生成任务依赖的上游任务；根据各个待生成任务依赖的上游任务判定各个待生成任务之间的依赖关系；将各个待生成任务作为任务节点，将所述任务节点按照各个待生成任务之间依赖关系用带有方向的导向线连接，构建任务流程图。
本实施例中，各个任务中的处理数据来源为对应的数据库，数据库中具有如表名、字段名、分区数量、分区名等信息。具体的，任务的元数据库来源丰富，以hadoop为例，有内表、外表，同时使用基于postgresql数据库的关系型数据，使用互联互通工具进行基础数据互通，保存数据库中的脚本内容，具体可以包括各个任务不同版本的脚本内容的大小、修改时间等。脚本内容基于HQL(Hibernate Query Language，Hibernate查询语言)语句编写，HQL文件中的语句支持SQL-92标准中入门级(Entry Level)的DML语法，即select、delete、update和insert。其中，SQL-92是数据库的一个ANSI/ISO标准。它定义了一种语言(SQL)以及数据库的行为(事务、隔离级别等)。根据各个任务请求的脚本内容中的数据表和数据表的标识获取各个待生成任务依赖的上游任务。
当获得各个任务上游任务时，建立各个待生成任务与对应的上游任务的依赖关系，从各个任务中选取出待生成任务，将待生成任务作为任务节点，并使用具有方向的导线进行连接，形成任务流程图，该任务流程图为有向无环图，可以利用流程图编辑工具编辑出任务流程图。
需要说明的是，任务流程图中各个任务对应一个工作流程，该工作流程已经获得了相关的处理信息和资源，如果在处理任务时，无法获得已经分配的信息和资源，将会造成对应任务的暂停和终止。例如，在子系统中处理对应的任务时，由于该任务对应的上游任务延迟，该子系统无法获取相关数据或相关信息，将停止处理该任务。
S12：通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与所述流程图中对应任务节点进行匹配，生成对应任务；
在步骤S12中，任务模板为生成对应任务的工具，通过抽象的相同任务类型的共有文件或数据定义任务模板，为各个任务模板配置对应的参数，得到待生成任务对应的配置文件，配置文件中包含对应任务流程图中任务节点中的ID标识字段，将配置文件与任务流程图中任务节点的ID标识字段进行匹配，得到与各个配置文件相对应的任务节点，从而得到通过配置文件生成的任务在任务流程图中的节点位置，获取到该任务的依赖关系。
需要说明的是，任务模板通过抽象相同任务类型的公有文件或数据来定义模板，任务模板包括通用任务模板和自定义任务模板，基于通用模板创建任务时，用户在填写任务名称后，需要将主程序、依赖以及数据文件打包为一个压缩文件，并在表单中填写任务包中主程序的文件名。即以通用模板创建任务时，需提交一个任务中所有的相关文件。自定义模板通过配置参数，使得任务的可变参数可以在动态生成的Form表单上填写，而不是在文件里编辑，以方便操作。系统在用户提交参数表单后，会按照任务模板的定义自动生成参数数据文件、依赖文件。
本实施例中，使用自定义任务模板，对任务目标配置相关参数，例如，任务的名称，任务的频率，任务负责人，任务的开始时间以及结束时间等，根据配置参数得到配置文件。使用配置文件中的任务名称与任务流程图中的任务节点中的ID标识进行匹配，匹配时，把每个配置文件中的任务名称按照标点、符号或单词之间的分隔符进行划分，划分成一个个独立的与子字符串，把一个字段的每一个原子字符串在任务流程图中任务节点ID标识字段中的子字符串列表中进行搜索，互相匹配的子字符串的个数被记录下来，得到匹配结果，使配置文件在任务流程图中找到对应的任务节点，以便根据配置文件生成任务时，可以确定该任务在任务流程图中依赖关系。需要说明的是，根据配置文件生成的任务，主程序为可执行EXE程序，依赖程序为若干动态链接库，数据由多个数据文件组成。
本实施例中，步骤S12具体包括：
通过web页面功能，对各个待生成任务对应的任务模板配置对应参数，得到各个待生成任务对应的配置文件；将各个配置文件与所述务流程图中的各个任务节点字段进行相似度匹配，得到与各个配置文件相似度最大的对应任务节点，并生成对应任务。
本实施例中，任务模板中定义通过前端Form表单录入参数条目，通过web页面功能配置任务模板的参数，一个参数组成应该包括：参数名称、值类型、默认值、是否可为空四项组成。系统会根据任务模板的定义将表单中的参数，写入一定格式的xml参数文件中。
当通过web页面配置完成时，将对应参数转化为预设的数据格式，得到标准参数，预设的数据格式为JSON数据格式或者是XML数据格式，JSON数据格式一种轻量级的数据交换格式，具有良好的可读和便于快速编写的特性。可在不同平台之间进行数据交换。JSON采用兼容性很高的、完全独立于语言文本格式，同时也具备类似于C语言的习惯体系的行为。例如，单个数据通过“键值”形式表征，数据间通过括号“{}”进行分割。XML数据格式用于标记电子文件使其具有结构性的标记语言，可以用来标记数据、定义数据类型，是一种允许用户对自己的标记语言进行定义的源语言。将配置参数转化为目标参数时，得到对应的配置文件，自动化生成对应的任务。
S13：通过调用接口将各个任务发送至对应子系统；
在步骤S13中，当各个子系统接收到对应的任务时，各个子系统对任务进行处理，各个子系统根据接受到的任务进行自动化处理。
本实施例中，根据自动化生成的任务，通过各个子系统对应的接口，将生成的任务发送至各个子系统中，各个子系统在运行的过程中，以一定时间间隔将自身的系统信息(CPU+内存+磁盘)以及对应任务处理状态信息(正在运行的任务)发送给中心服务器，中心服务器将每一条消息需要记录在日志中，以方便后续在可视化界面展示。
其中，对应接口通过SOFARPC(一种远程过程调用框架)编写用于远程调用的标准接口的实现类。通过SOFARPC编写各业务办理任务流程和任务审批流程执行期间所需调用的标准接口，以使得任务处理期间能够通过调用对应的标准接口获取将对应任务发送至对应子系统。
需要说明的是，各个子系统处理各个任务时，调用各个任务对应的数据库，根据数据库的IP地址以及端口号，系统会采用Ping包的形式去校验该地址是否存活以及该端口是否可以提供服务；如访问无问题的情况，子系统根据数据库的账号和密码，同进行匹配如权限访问成功，则子系统可以将数据库中的数据表进行导入、导出等相关操作，各个子系统根据具体的任务对数据库中的数据进行调用处理，完成对应任务。
本实施例中，步骤S13具体包括：
将所述任务流程图部署于流程引擎；利用所述流程引擎通过调用所述任务流程图中任务节点对应的接口，将各个任务发送至对应子系统。
本实施例中，通过流程引擎来驱动各个子系统处理任务，将任务流程图部署于流程引擎，部署时，将任务流程图转化为xml的形式的配置文件。当任务流程图中的任务节点根据接收的流程引擎发送的信息处理时，流程引擎中记录任务节点的开始和结束，及下游任务节点的开始和结束，通过流程变量和流程线控制流程的走向。任务流程图中包括多个任务节点，任务节点对应的任务为每个节点的处理内容，通过任务流程图中的流程线定义流程走向和通过任务节点配置文件生成任务。流程线是链接任务节点任务之间的有向线，用于控制流程走向。
当流程引擎驱动任意任务节点处理任务时，对应的任务节点调用对应子系统的接口，将任务节点对应的任务发送到通过接口发送至子系统，触发子系统的处理功能。
需要说明的是，当在调用时间内调用对应子系统接口失败时，不能触发该子系统处理对应任务，将造成任务延迟。所以，在调用时间内调用对应子系统接口失败时发出一次调用失败提示并进行二次调用，且当二次调用失败时发出二次调用失败提示并停止调用；当在任务时间内未完成任务时发出任务催办提示并根据任务难度分配对应的任务延迟时间，并将任务处理失败的信息发送至对应负责人。
当任务开始，在调用对应子系统接口时可能因为临时性状况发生调用失败故本实施例在一次调用失败时，自动进行二次调用，当二次调用失败时，则说明存在调用故障或接口故障，故进行停止调用并进行二次调用失败提示，并将调用失败原因在二次调用失败提示中显示出来，以便于对应人员根据失败提示进行修复。延时时间可实时倒计时显示，以便于提醒对应人员及时完成任务以保证下游任务的完成效率。当所述任务流程图中上游任务节点对应的任务的处理状态为完成时，流程引擎更新任务流程图中下游任务节点对应的任务中的处理数据，并调用任务流程图中下游任务节点对应的接口，将各个任务发送至对应子系统，获取各个任务的处理状态。其中，当任务流程图中上游任务对应的处理状态为完成时，利用流程引擎更新所述上游任务的下游任务中对应的处理数据，并调用任务流程图中下游任务节点对应的接口，将所述处理数据发送至对应子系统。
需要说明的是，程引擎系统基于petri net开发。petri net是建模语言的基础，是扩展的基线。所以，流程引擎系统的理想状况应该是：首先其语义精确，利于计算机执行；同时，其任务流程图表示简洁，便于阅读和描述业务。
S14：获取各个任务的处理状态，在可视化界面显示所述任务流程图以及各个任务的处理状态。
在步骤S14中，在可视化界面显示任务流程图，以及任务流程图中对应任务的处理状态，其中，各个子系统将任务的处理状态通过对应接口发送至中心服务器，得到各个子系统对应任务的处理状态。各个任务的处理状态，包括但不限于：未处理、处理中、处理成功、运行失败等。使用前端技术进行构建可视化界面，使任务流程图可以更清楚地在可视化界面进行显示。
本实施例中，通过前JavaServer Pages技术构建可视化界面，JavaServer Pages技术允许Web程序员以轻量级的方式创建和调整动态网页。同时，JavaServer Pages技术将可视化界面与系统的内容分开，以便程序员可以在不改变系统软件的底层动态内容的情况下更改Web的布局。通常一个JavaServer Pages技术网页可抽象理解为：JavaServer Pages技术可成功在HTML网页中植入一段能动态生成内容且可执行应用程序代码。
当子系统开始处理对应任务时，该任务节点对应的任务处理状态从未开始变为处理中。任务处理状态用于表示任务的处理情况，包括但不限于：未处理、处理中、处理成功、处理失败等。在处理任务之前，任务的状态为未处理；在启动任务之后，任务的状态为处理中；在任务处理成功之后，任务的状态为处理成功；在任务处理失败之后，任务的状态为处理失败。
当各个子系统的任务处理状态发生变更时，各个子系统通过对应接口，将变更的处理状态发送至中心服务器，各个子系统通过对应接口将任务的处理状态，中心服务器可以通过WebSocket将最新的状态信息发送至可视化界面，并在可视化界面显示对应的处理状态。
本实施例中，步骤S14具体包括：
当接收到任务重启指令，在所述任务流程图中对应任务节点重新生成任务，得到重启任务；将所述重启任务通过对应接口发送至对应子系统，获取所述重启任务的处理状态，在所述可视化界面更新对应任务节点的处理状态；根据所述任务流程图，判定所述重启任务是否具有处于完成状态的下游任务，若重启任务具有处于完成状态的下游任务，重新生成下游任务，得到重启下游任务；将所述重启下游任务通过对应接口发送至对应子系统，获取所述重启下游任务的处理状态，在所述可视化界面更新对应任务节点的处理状态。
本实施例中，当任务流程图中节点对应的任务状态为完成时，任务完成后，将发送相应信息给对应负责人，对应负责人接收到任务完成的信息后，对该任务进行核查，以确保对应任务已经完成。
当对应负责人对该任务的核查结果与负责人接受到的信息不相符时，或者核查时发现任务在处理的过程中出现错误，得到了错误的处理结果，对应负责任人可以在可视化界面进行重启任务，判定重启任务是否具有处于完成状态的下游任务，若重启任务具有处于完成状态的下游任务，重新生成下游任务，得到重启下游任务；将重启下游任务通过对应接口发送至对应子系统，获取重启下游任务的处理状态，在可视化界面更新对应任务节点的处理状态。
需要说明的是，在可视化界面显示任务流程图数据时，一般来说，任务流程图显示的过程中，需兼顾一定的美学标准，以保证任务流程图的美观性。例如，在任务流程图生成算法为力导向绘图(Force-directedgraph drawing)算法时，其任务节点绘制逻辑需兼顾如下公式，在实现可视化流程图的自动化绘制过程中，确定流程连线的长度等，保证所绘制的可视化任务流程图的美观性：边长偏差＝最大边长-最小边长/(平均边长*图的边数)。
本发明涉及计算机技术领域，通过获取各个子系统发送的各个任务，判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图，确定出各个任务的执行顺序，通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与流程图中对应任务节点进行匹配，生成任务，通过调用接口将各个任务发送至对应子系统，获取各个任务的处理状态，各个子系统根据生成的任务的开始时间对任务进行自动化处理，减少了人工对任务的跟踪，在可视化界面显示任务流程图以及各个任务的处理状态，更方便地得到各个任务的处理状态，以防止任务处理延迟的风险。
对应于上文实施例的方法，图3示出了本发明实施例提供的多任务的可视化结构装置框图，上述多任务的可视化装置应用于计算机设备，计算机设备通过预设的应用程序接口连接目标数据库。在目标数据库被驱动运行以执行相应的任务时，会产生对应的任务日志，通过API可以采集到上述任务日志。为了便于说明，仅示出了与本发明实施例相关的部分。
参见图3，该多任务的可视化装置30包括：
任务流程图生成单元31，用于获取各个子系统发送的各个任务请求，根据各个任务请求判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图；
任务配置单元32，用于通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与所述流程图中对应任务节点进行匹配，生成对应任务；
接口调用单元33，用于通过调用接口将各个任务发送至对应子系统；
任务状态显示单元34，用于获取各个任务的处理状态，在可视化界面显示所述任务流程图以及各个任务的处理状态。
作为本申请一实施例，任务流程图生成单元31具体用于解析各个任务请求的脚本内容中的数据表和数据表的标识；根据所述数据表和数据表的标识获取各个待生成任务依赖的上游任务；根据各个待生成任务依赖的上游任务判定各个待生成任务之间的依赖关系；将各个待生成任务作为任务节点，将所述任务节点按照各个待生成任务之间依赖关系用带有方向的导向线连接，构建任务流程图。
作为本申请一实施例，任务配置单元32具体用于通过web页面功能，对各个待生成任务对应的任务模板配置对应参数，得到各个待生成任务对应的配置文件；将各个配置文件与所述任务流程图中的各个任务节点字段进行相似度匹配，得到与各个配置文件相似度最大的对应任务节点，并生成对应任务。
将对应参数转化为预设的数据格式，得到标准参数；基于所述标准参数，得到各个待生成任务对应的配置文件。
作为本申请一实施例，接口调用单元33具体用于将所述任务流程图部署于流程引擎；利用所述流程引擎通过调用所述任务流程图中任务节点对应的接口，将各个任务发送至对应子系统。
当所述任务流程图中上游任务对应的处理状态为完成时，利用所述流程引擎更新所述上游任务的下游任务中对应的处理数据，并调用所述任务流程图中下游任务节点对应的接口，将所述处理数据发送至对应子系统。
作为本申请一实施例，任务状态显示单元34具体用于当接收到任务重启指令，在所述任务流程图中对应任务节点重新生成任务，得到重启任务；将所述重启任务通过对应接口发送至对应子系统，获取所述重启的任务的处理状态，在所述可视化界面更新对应任务节点的处理状态；根据所述任务流程图，判定所述重启任务是否具有处于完成状态的下游任务，若重启任务具有处于完成状态的下游任务，重新生成下游任务，得到重启下游任务；将所述重启下游任务通过对应接口发送至对应子系统，获取所述重启下游任务的处理状态，在所述可视化界面更新对应任务节点的处理状态。
图4为本发明实施例提供的一种计算机设备的结构示意图。如图4所示，该实施例的计算机设备包括：至少一个处理器(图4中仅示出一个)、存储器以及存储在存储器中并可在至少一个处理器上运行的计算机程序，处理器执行计算机程序时实现上述任意各个多任务的可视化方法实施例中的步骤。
该计算机设备可包括，但不仅限于，处理器、存储器。本领域技术人员可以理解，图4仅仅是计算机设备的举例，并不构成对计算机设备的限定，计算机设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如还可以包括网络接口、显示屏和输入装置等。
所称处理器可以是CPU，该处理器还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific IntegratedCircuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器包括可读存储介质、内存储器等，其中，内存储器可以是计算机设备的内存，内存储器为可读存储介质中的操作系统和计算机可读指令的运行提供环境。可读存储介质可以是计算机设备的硬盘，在另一些实施例中也可以是计算机设备的外部存储设备，例如，计算机设备上配备的插接式硬盘、智能存储卡(Smart Media Card，SMC)、安全数字(Secure Digital，SD)卡、闪存卡(Flash Card)等。进一步地，存储器还可以既包括计算机设备的内部存储单元也包括外部存储设备。存储器用于存储操作系统、应用程序、引导装载程序(BootLoader)、数据以及其他程序等，该其他程序如计算机程序的程序代码等。存储器还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。上述装置中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述方法实施例的步骤。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质至少可以包括：能够携待计算机程序代码的任何实体或装置、记录介质、计算机存储器、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。
本发明实现上述实施例方法中的全部或部分流程，也可以通过一种计算机程序产品来完成，当计算机程序产品在计算机设备上运行时，使得计算机设备执行时实现可实现上述方法实施例中的步骤。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中，应该理解到，所揭露的装置/计算机设备和方法，可以通过其它的方式实现。例如，以上所描述的装置/计算机设备实施例仅仅是示意性的，例如，模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。

Claims (10)

1.一种多任务的可视化方法，其特征在于，包括：
获取各个子系统发送的各个任务请求，根据各个任务请求判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图；
通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与所述流程图中对应任务节点进行匹配，生成对应任务；
通过调用接口将各个任务发送至对应子系统；
获取各个任务的处理状态，在可视化界面显示所述任务流程图以及各个任务的处理状态。
2.如权利要求1所述的多任务的可视化方法，其特征在于，所述获取各个子系统发送的各个任务请求，根据各个任务请求判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图，包括：
解析各个任务请求的脚本内容中的数据表和数据表的标识；
根据所述数据表和数据表的标识获取各个待生成任务依赖的上游任务；
根据各个待生成任务依赖的上游任务判定各个待生成任务之间的依赖关系；
将各个待生成任务作为任务节点，将所述任务节点按照各个待生成任务之间依赖关系用带有方向的导向线连接，构建任务流程图。
3.如权利要求1所述的多任务的可视化方法，其特征在于，所述通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与所述流程图中对应任务节点进行匹配，生成任务，包括：
通过web页面功能，对各个待生成任务对应的任务模板配置对应参数，得到各个待生成任务对应的配置文件；
将各个配置文件与所述任务流程图中的各个任务节点字段进行相似度匹配，得到与各个配置文件相似度最大的对应任务节点，生成对应任务。
4.如权利要求3所述的多任务的可视化方法，其特征在于，所述通过web页面功能，对各个待生成任务对应的任务模板配置对应参数，得到各个待生成任务对应的配置文件，包括：
将对应参数转化为预设的数据格式，得到标准参数；
基于所述标准参数，得到各个待生成任务对应的配置文件。
5.如权利要求1所述的多任务的可视化方法，其特征在于，所述通过调用接口将各个任务发送至对应子系统包括：
将所述任务流程图部署于流程引擎；
利用所述流程引擎通过调用所述任务流程图中任务节点对应的接口，将各个任务发送至对应子系统。
6.如权利要求5所述的多任务的可视化方法，其特征在于，利用所述流程引擎通过调用所述任务流程图中任务节点对应的接口，将各个任务发送至对应子系统，包括：
当所述任务流程图中上游任务对应的处理状态为完成时，利用所述流程引擎更新所述上游任务的下游任务中对应的处理数据，并调用所述任务流程图中下游任务节点对应的接口，将所述处理数据发送至对应子系统。
7.如权利要求1所述的多任务的可视化方法，其特征在于，所述在可视化界面显示所述任务流程图以及各个任务的处理状态，包括：
当接收到任务重启指令，在所述任务流程图中对应任务节点重新生成任务，得到重启任务；
将所述重启任务通过对应接口发送至对应子系统，获取所述重启任务的处理状态，在所述可视化界面更新对应任务节点的处理状态；
根据所述任务流程图，判定所述重启任务是否具有处于完成状态的下游任务，若重启任务具有处于完成状态的下游任务，重新生成下游任务，得到重启下游任务；
将所述重启下游任务通过对应接口发送至对应子系统，获取所述重启下游任务的处理状态，在所述可视化界面更新对应任务节点的处理状态。
8.一种多任务的可视化装置，其特征在于，
任务流程图生成单元：获取各个子系统发送的各个任务请求，根据各个任务请求判定各个待生成任务之间的依赖关系，将各个待生成任务作为任务节点，结合各个待生成任务之间的依赖关系构建任务流程图；
任务配置单元：通过配置各个待生成任务对应的任务模板，得到各个待生成任务对应的配置文件，并将各个配置文件与所述流程图中对应任务节点进行匹配，生成对应任务；
接口调用单元：通过调用接口将各个任务发送至对应子系统；
任务状态显示单元：获取各个任务的处理状态，在可视化界面显示所述任务流程图以及各个任务的处理状态。
9.一种终端设备，其特征在于，所述终端设备包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的多任务的可视化方法。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的多任务的可视化方法。
CN202210441462.1A 2022-04-25 2022-04-25 一种多任务的可视化方法、装置、计算机设备及存储介质 Pending CN114819631A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210441462.1A CN114819631A (zh) 2022-04-25 2022-04-25 一种多任务的可视化方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210441462.1A CN114819631A (zh) 2022-04-25 2022-04-25 一种多任务的可视化方法、装置、计算机设备及存储介质

Publications (1)

Publication Number Publication Date
CN114819631A true CN114819631A (zh) 2022-07-29

Family

ID=82506768

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210441462.1A Pending CN114819631A (zh) 2022-04-25 2022-04-25 一种多任务的可视化方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN114819631A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115599524A (zh) * 2022-10-27 2023-01-13 中国兵器工业计算机应用技术研究所（Cn） 一种基于流数据和批数据协同调度处理的数据湖系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293928A (zh) * 2015-06-05 2017-01-04 阿里巴巴集团控股有限公司 一种全局任务节点依赖关系可视化方法、装置和系统
CN112181397A (zh) * 2020-09-30 2021-01-05 平安科技（深圳）有限公司 流程可视化监控方法、装置、计算机设备及存储介质
CN112561386A (zh) * 2020-12-24 2021-03-26 建信金融科技有限责任公司 一种获得业务流程的方法、装置及设备
CN112817720A (zh) * 2021-01-30 2021-05-18 北京奇保信安科技有限公司 一种可视化工作流调度方法、装置及电子设备
CN113065779A (zh) * 2021-04-07 2021-07-02 网易（杭州）网络有限公司 数据处理方法、装置和电子设备
CN113760513A (zh) * 2021-09-16 2021-12-07 康键信息技术（深圳）有限公司 一种分布式任务调度方法、装置、设备和介质
CN114003354A (zh) * 2020-07-27 2022-02-01 阿里巴巴集团控股有限公司 一种任务调度系统、任务调度和调度任务配置方法及装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106293928A (zh) * 2015-06-05 2017-01-04 阿里巴巴集团控股有限公司 一种全局任务节点依赖关系可视化方法、装置和系统
CN114003354A (zh) * 2020-07-27 2022-02-01 阿里巴巴集团控股有限公司 一种任务调度系统、任务调度和调度任务配置方法及装置
CN112181397A (zh) * 2020-09-30 2021-01-05 平安科技（深圳）有限公司 流程可视化监控方法、装置、计算机设备及存储介质
CN112561386A (zh) * 2020-12-24 2021-03-26 建信金融科技有限责任公司 一种获得业务流程的方法、装置及设备
CN112817720A (zh) * 2021-01-30 2021-05-18 北京奇保信安科技有限公司 一种可视化工作流调度方法、装置及电子设备
CN113065779A (zh) * 2021-04-07 2021-07-02 网易（杭州）网络有限公司 数据处理方法、装置和电子设备
CN113760513A (zh) * 2021-09-16 2021-12-07 康键信息技术（深圳）有限公司 一种分布式任务调度方法、装置、设备和介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115599524A (zh) * 2022-10-27 2023-01-13 中国兵器工业计算机应用技术研究所（Cn） 一种基于流数据和批数据协同调度处理的数据湖系统

Similar Documents

Publication Publication Date Title
CN111061817B (zh) 自适应业务构建系统、方法及计算机可读介质
CN108762743B (zh) 一种数据表操作代码生成方法及装置
US9514115B2 (en) Method for creating form validation program and corresponding form interface according to result set metadata
US20130339924A1 (en) Gateway data distribution engine
US9229971B2 (en) Matching data based on numeric difference
CN109710220B (zh) 关系型数据库查询方法、装置、设备及存储介质
CN110825395B (zh) 多插件分层部署系统、设备及介质
CN111784108B (zh) 一种主数据管理平台的建模方法和装置
CN111061733A (zh) 数据处理方法、装置、电子设备和计算机可读存储介质
WO2019161620A1 (zh) 应用依赖关系更新方法、终端、设备及存储介质
US20210124752A1 (en) System for Data Collection, Aggregation, Storage, Verification and Analytics with User Interface
CN111881042A (zh) 自动化测试脚本的生成方法、装置和电子设备
CN115993966B (zh) 应用开发系统及方法
CN111737227A (zh) 数据修改方法及系统
CN110018835B (zh) Yang模型配置数据处理方法及装置、终端设备及存储介质
CN113821565A (zh) 一种多数据源同步数据的方法
CN114819631A (zh) 一种多任务的可视化方法、装置、计算机设备及存储介质
US10318524B2 (en) Reporting and data governance management
CN115794858A (zh) 查询语句处理方法、装置、设备及存储介质
CN114371870A (zh) 代码扫描、提交方法及代码扫描服务器、客户端和服务端
CN112817931B (zh) 一种增量版本文件的生成方法及装置
KR100545348B1 (ko) ＳｙｎｃＭＬ 서버 어플리케이션 개발을 위한 통합 개발시스템
WO2021234019A1 (en) Database management methods and associated apparatus
CN112363700A (zh) 智能合约的协同创建方法、装置、计算机设备和存储介质
US12072857B2 (en) Automation of master data processes with user-centric management of derivation rules

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination