CN110083504A - 分布式任务的运行状态监控方法及装置 - Google Patents
分布式任务的运行状态监控方法及装置 Download PDFInfo
- Publication number
- CN110083504A CN110083504A CN201910252105.9A CN201910252105A CN110083504A CN 110083504 A CN110083504 A CN 110083504A CN 201910252105 A CN201910252105 A CN 201910252105A CN 110083504 A CN110083504 A CN 110083504A
- Authority
- CN
- China
- Prior art keywords
- task
- running state
- tree
- state information
- storage structure
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 69
- 238000000034 method Methods 0.000 title claims abstract description 38
- 238000003860 storage Methods 0.000 claims abstract description 88
- 238000009826 distribution Methods 0.000 claims abstract description 42
- 238000012545 processing Methods 0.000 claims description 6
- 230000008520 organization Effects 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 4
- 230000001052 transient effect Effects 0.000 claims description 2
- 239000004744 fabric Substances 0.000 claims 2
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000000151 deposition Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000004140 cleaning Methods 0.000 description 2
- 238000012217 deletion Methods 0.000 description 2
- 230000037430 deletion Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000000547 structure data Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3055—Monitoring arrangements for monitoring the status of the computing system or of the computing system component, e.g. monitoring if the computing system is on, off, available, not available
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/13—File access structures, e.g. distributed indices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computing Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明实施例提供一种分布式任务的运行状态监控方法及装置，所述方法包括：第一节点服务器接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息；所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；所述第一节点服务器接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
Description
技术领域
本发明实施例涉及信息处理技术领域，尤其涉及一种分布式任务的运行状态监控方法及装置。
背景技术
分布式任务状态监控是基于分布式环境软件开发的，其有别于单机环境，在分布式系统中一个任务可能被分为多个实例运行在多个节点服务器上，而同一时间又可能有多个不同任务并存。为此，任务状态的监控需要考虑各个节点服务器对不同任务数据的收集、存储、同步及清理，对此，目前没有成熟、统一的处理流程，导致无法方便应对状态信息监控难的问题。
发明内容
针对现有技术存在的问题，本发明实施例提供一种分布式任务的运行状态监控方法及装置。
本发明实施例提供一种分布式任务的运行状态监控方法，包括：
第一节点服务器接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息，所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；
所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；
所述第一节点服务器接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
本发明实施例提供一种分布式任务的运行状态监控装置，包括：
监控模块，用于接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息；所述监控模块所属第一节点服务器，所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；
存储模块，用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；
发送模块，用于接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
本发明实施例提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述分布式任务的运行状态监控方法的步骤。
本发明实施例提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述分布式任务的运行状态监控方法的步骤。
本发明实施例提供的分布式任务的运行状态监控方法及装置，通过各个节点服务器接收任务分发服务器针对目标任务下发的实例，运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享，使各个节点服务器均能够获取各任务的各实例的运行状态信息完成存放，并在接收到用户设备发来的监控请求信息后，将各个目标任务的状态信息发送给用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明分布式任务的运行状态监控方法实施例流程图；
图2为本发明分布式任务的运行状态监控方法的信息流向示意图；
图3为本发明分布式任务的运行状态监控方法实施例流程图；
图4为本发明实例节点建立示意图；
图5为本发明分布式任务的运行状态监控方法实施例流程图；
图6为本发明分布式任务的运行状态监控装置实施例结构图；
图7为本发明分布式任务的运行状态监控装置实施例结构图；
图8为本分布式任务的运行状态监控装置实施例结构图；
图9为本发明电子设备实施例结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1示出了本发明一实施例提供的一种分布式任务的运行状态监控方法，包括：
S11、第一节点服务器接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息。
针对步骤S11，需要说明的是，在本发明实施例中，在分布式系统中，一个目标任务会被分为多个实例。各个实例会运行在多个节点服务器上。其中，每个节点服务器上可运行一个或一个以上的实例。实例下发给节点服务器由任务分发服务器完成。任务分发服务器会针对目标任务进行实例划分，并将划分后的实例按照预设分发计划发送给对应的节点服务器。
在本发明实施例中，每个节点服务器均能完成分布式任务的运行状态监控工作。为了方便对监控工作的描述，以单个节点服务器作为主体进行监控方法的阐述。因此，在这里，第一节点服务器作为阐述的主体服务器。第二节点服务器为分发实例的节点服务器中非主体服务器的其他服务器。
在本发明实施例中，无论是第一节点服务器还是第二节点服务器均会接收任务分发服务器针对目标任务下发的实例，运行实例，并将实例的运行状态信息各自存储及发送给分布式信息库。在这里，第一实例为运行在第一节点服务器上的实例，第二实例为运行在第二节点服务器上的实例。所述第一实例和所述第二实例构成所述目标任务。
在本发明实施例中，由于所有的实例的运行状态信息均发送在分布式信息库中，各节点服务器均能够从分布式信息库中获取到其他节点服务器发出的实例的运行状态信息，从而实现状态信息的共享。
如图2所示，图中以两个节点服务器为例，以说明各节点将各自运行的实例的运行状态信息发送到分布式信息库中，再从分布式信息库中获取到其他节点服务器发送的实例的运行状态信息。
S12、所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中。
针对步骤S12，需要说明的是，在本发明实施例中，由于任务分发服务器会同时分发多个不同目标任务的实例，故第一节点服务器会将各个实例的运行状态信息存放在各个目标任务的树状存储结构中。在存放过程中，为了方便存放，各实例的运行状态信息中需至少包含任务ID、实例ID。通过任务ID和实例ID能够清楚的分出哪些实例属于哪个目标任务，从而快速的建立各目标任务下的树状存储结构，快速存储实例的运行状态信息。
S13、所述第一节点服务器接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
针对步骤S13，需要说明的是，在本发明实施例中，用户要查看目标任务的监控数据，可通过用户设备向节点服务器发送监控请求信息，节点服务器接收到请求后，会将当前存在的各个目标任务的树状存储结构发送给所述用户设备。由于各个节点服务器实现了数据共享，因此，无论用户设备向哪一个正常运行的节点服务器发送请求，均能够得到所需的目标任务的状态信息。
本发明实施例提供的分布式任务的运行状态监控方法，通过各个节点服务器接收任务分发服务器针对目标任务下发的实例，运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享，使各个节点服务器均能够获取各任务的各实例的运行状态信息完成存放，并在接收到用户设备发来的监控请求信息后，将各个目标任务的状态信息发送给用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
图3示出了本发明实施例提供的一种分布式任务的运行状态监控方法，包括：
S21、第一节点服务器接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息。
S22、所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中。
S23、所述第一节点服务器对第一实例的运行状态信息和第二实例的运行状态信息进行解析，获得各实例ID及对应的任务ID、获取时间，并根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建；
S24、所述第一节点服务器接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
针对步骤S23，需要说明的是，在本发明实施例中，由于最初每个节点服务器并未获取到各个节点服务器发送的实例的运行状态信息，故第一次从分布式信息库中获取到各节点服务器发送的各实例的运行状态信息后，先建立各个目标任务的树状存储结构。之后的每次从分布式信息库中获取到各节点服务器发送的实例的运行状态信息，均要对已存在的目标任务的树状存储结构进行更新及建立。
在本发明实施例中，每次获取到新的实例的运行状态信息后，节点服务器对实例的运行状态信息进行解析，获得各实例ID及对应的任务ID、获取时间，并根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建。在这里，任务ID用于区分不同目标任务，建立树状存储结构的任务节点。实例ID用于在任务节点下的区分不同实例，建立树状存储结构的实例节点。获取时间为实例的状态信息的更新时间或建立时间。
上述步骤S23具体执行过程可包括：
若确定所述树状存储结构内不存在解析出的任务ID，则根据所述任务ID建立新的目标任务的树状存储结构；
若确定所述树状存储结构内存在解析出的任务ID，且不存在解析出的实例ID，则在对应于所述任务ID的树状存储结构中建立对应于所述实例ID的新实例的运行状态信息；
若确定所述树状存储结构内存在解析出的任务ID，且存在解析出的实例ID，则更新对应于所述任务ID的树状存储结构中对应于所述实例ID的实例的运行状态信息。
上述执行过程说明了树状存储结构的建立任务节点数据、建立实例节点数据及已存有实例节点数据更新。如图4所示，从图中可以看出建立实例节点的过程。
针对其他步骤，在上述实施例中有所说明，在此不再赘述。
本发明实施例提供的分布式任务的运行状态监控方法，通过各个节点服务器接收任务分发服务器针对目标任务下发的实例，运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享，使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新，并在接收到用户设备发来的监控请求信息后，将各个目标任务的状态信息发送给用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
图5示出了本发明一实施例提供的一种分布式任务的运行状态监控方法，包括：
S31、第一节点服务器接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息。
S32、所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中。
S33、所述第一节点服务器对第一实例的运行状态信息和第二实例的运行状态信息进行解析，获得各实例ID及对应的任务ID、获取时间，并根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建；
S34、获取各个目标任务的树状存储结构的最后更新时间，并计算所述最后更新时间与当前时间的差值，当差值超出预设阈值，将对应的目标任务的树状存储结构数据删除；
S35、所述第一节点服务器接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
针对步骤S34，需要说明的是，在本发明实施例中，需要实时对树状存储结构进行清理，释放内存。各节点服务器获取各个目标任务的树状存储结构的最后更新时间，并计算所述最后更新时间与当前时间的差值，当差值超出预设阈值，将对应的目标任务的树状存储结构数据删除。
针对其他步骤，在上述实施例中有所说明，在此不再赘述。
本发明实施例提供的分布式任务的运行状态监控方法，通过各个节点服务器接收任务分发服务器针对目标任务下发的实例，运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享，使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新及删除，并在接收到用户设备发来的监控请求信息后，将各个目标任务的状态信息发送给用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
图6示出了本发明一实施例提供的一种分布式任务的运行状态监控装置，包括监控模块41、存储模块42和发送模块43，其中：
监控模块41，用于接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息；所述监控模块所属第一节点服务器，所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；
存储模块42，用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；
发送模块43，用于接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
由于本发明实施例所述装置与上述实施例所述方法的原理相同，对于更加详细的解释内容在此不再赘述。
需要说明的是，本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。
本发明实施例提供的分布式任务的运行状态监控装置，通过各个节点服务器接收任务分发服务器针对目标任务下发的实例，运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享，使各个节点服务器均能够获取各任务的各实例的运行状态信息完成存放，并在接收到用户设备发来的监控请求信息后，将各个目标任务的状态信息发送给用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
图7示出了本发明一实施例提供的一种分布式任务的运行状态监控装置，包括监控模块41、存储模块42、处理模块51和发送模块43，其中：
监控模块41，用于接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息；所述监控模块所属第一节点服务器，所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；
存储模块42，用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；
处理模块51，用于对第一实例的运行状态信息和第二实例的运行状态信息进行解析，获得各实例ID及对应的任务ID、获取时间，根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建；
发送模块43，用于接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
由于本发明实施例所述装置与上述实施例所述方法的原理相同，对于更加详细的解释内容在此不再赘述。
需要说明的是，本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。
本发明实施例提供的分布式任务的运行状态监控装置，通过各个节点服务器接收任务分发服务器针对目标任务下发的实例，运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享，使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新，并在接收到用户设备发来的监控请求信息后，将各个目标任务的状态信息发送给用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
图8示出了本发明一实施例提供的一种分布式任务的运行状态监控装置，包括监控模块41、存储模块42、处理模块51、删除模块61和第三发送模块43，其中：
监控模块41，用于接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息；所述监控模块所属第一节点服务器，所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；
存储模块42，用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；
处理模块51，用于对第一实例的运行状态信息和第二实例的运行状态信息进行解析，获得各实例ID及对应的任务ID、获取时间，根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建；
删除模块61，用于获取各个目标任务的树状存储结构的最后更新时间，计算所述最后更新时间与当前时间的差值，当差值超出预设阈值，则将对应的目标任务的树状存储结构数据删除；
发送模块43，用于接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
由于本发明实施例所述装置与上述实施例所述方法的原理相同，对于更加详细的解释内容在此不再赘述。
需要说明的是，本发明实施例中可以通过硬件处理器(hardware processor)来实现相关功能模块。
本发明实施例提供的分布式任务的运行状态监控装置，通过各个节点服务器接收任务分发服务器针对目标任务下发的实例，运行实例并将实例的运行状态信息存储及发送给分布式信息库完成数据共享，使各个节点服务器均能够获取各任务的各实例的运行状态信息完成树状存储结构的建立、更新及删除，并在接收到用户设备发来的监控请求信息后，将各个目标任务的状态信息发送给用户设备，实现数据易收集、易同步，提高分布式系统的易用性。
图9示例了一种服务器的实体结构示意图，如图9所示，该服务器可以包括：处理器(processor)710、通信接口(Communications Interface)720、存储器(memory)730和通信总线740，其中，处理器710，通信接口720，存储器730通过通信总线740完成相互间的通信。处理器710可以调用存储器730中的逻辑指令，以执行如下方法：接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息，第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
此外，上述的存储器730中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种分布式任务的运行状态监控方法，其特征在于，包括：
第一节点服务器接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息，所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；
所述第一节点服务器将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；
所述第一节点服务器接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
2.根据权利要求1所述的方法，其特征在于，还包括：
所述第一节点服务器对第一实例的运行状态信息和第二实例的运行状态信息进行解析，获得各实例ID及对应的任务ID、获取时间；
根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建。
3.根据权利要求2所述的方法，其特征在于，所述根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建，包括：
若确定所述树状存储结构内不存在解析出的任务ID，则根据所述任务ID建立新的目标任务的树状存储结构；
若确定所述树状存储结构内存在解析出的任务ID，且不存在解析出的实例ID，则在对应于所述任务ID的树状存储结构中建立对应于所述实例ID的新实例的运行状态信息；
若确定所述树状存储结构内存在解析出的任务ID，且存在解析出的实例ID，则更新对应于所述任务ID的树状存储结构中对应于所述实例ID的实例的运行状态信息。
4.根据权利要求2或3所述的方法，其特征在于，还包括：
获取各个目标任务的树状存储结构的最后更新时间；
计算所述最后更新时间与当前时间的差值，当差值超出预设阈值，则将对应的目标任务的树状存储结构数据删除。
5.一种分布式任务的运行状态监控装置，其特征在于，包括：
监控模块，用于接收任务分发服务器针对目标任务下发的第一实例，运行所述第一实例，并将对应于所述第一实例的运行状态信息存储及发送给分布式信息库，以及从所述分布式信息库中获取第二实例的运行状态信息，所述第二实例的运行状态信息为第二节点服务器接收所述任务分发服务器针对目标任务下发的第二实例，运行所述第二实例后获取到的运行状态信息；所述监控模块所属第一节点服务器，所述第一节点服务器和所述第二节点服务器为所述任务分发服务器针对目标任务下发实例的目标节点服务器，所述第一实例和所述第二实例构成所述目标任务；
存储模块，用于将第一实例的运行状态信息和所述第二实例的运行状态信息存放在各个目标任务的树状存储结构中；
发送模块，用于接收到用户设备发来的监控请求信息后，将各个目标任务的树状存储结构发送给所述用户设备。
6.根据权利要求5所述的装置，其特征在于，还包括处理模块，用于：
对第一实例的运行状态信息和第二实例的运行状态信息进行解析，获得各实例ID及对应的任务ID、获取时间；
根据各实例ID及对应的任务ID、获取时间对各个目标任务的树状存储结构进行更新、新建。
7.根据权利要求6所述的装置，其特征在于，所述处理模块具体用于：
若确定所述树状存储结构内不存在解析出的任务ID，则根据所述任务ID建立新的目标任务的树状存储结构；
若确定所述树状存储结构内存在解析出的任务ID，且不存在解析出的实例ID，则在对应于所述任务ID的树状存储结构中建立对应于所述实例ID的新实例的运行状态信息；
若确定所述树状存储结构内存在解析出的任务ID，且存在解析出的实例ID，则更新对应于所述任务ID的树状存储结构中对应于所述实例ID的实例的运行状态信息。
8.根据权利要求5或6所述的装置，其特征在于，还包括删除模块，用于：
获取各个目标任务的树状存储结构的最后更新时间；
计算所述最后更新时间与当前时间的差值，当差值超出预设阈值，则将对应的目标任务的树状存储结构数据删除。
9.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至4任一项所述分布式任务的运行状态监控方法的步骤。
10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1至4任一项所述分布式任务的运行状态监控方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910252105.9A CN110083504B (zh) | 2019-03-29 | 2019-03-29 | 分布式任务的运行状态监控方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910252105.9A CN110083504B (zh) | 2019-03-29 | 2019-03-29 | 分布式任务的运行状态监控方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110083504A true CN110083504A (zh) | 2019-08-02 |
| CN110083504B CN110083504B (zh) | 2024-04-26 |
Family
ID=67413960
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910252105.9A Active CN110083504B (zh) | 2019-03-29 | 2019-03-29 | 分布式任务的运行状态监控方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110083504B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110751384A (zh) * | 2019-09-30 | 2020-02-04 | 口碑(上海)信息技术有限公司 | 业务监控方法和装置 |
| CN111245909A (zh) * | 2019-12-31 | 2020-06-05 | 深圳云天励飞技术有限公司 | 分布式动态调度方法、装置、电子设备及存储介质 |
| CN113806176A (zh) * | 2021-09-22 | 2021-12-17 | 中国建设银行股份有限公司 | 一种基于配置管理的数据对象识别方法和装置 |
Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101015171A (zh) * | 2004-06-30 | 2007-08-08 | 建利尔电子公司 | 分布式电信平台中的负载平衡 |
| CN101715001A (zh) * | 2009-10-21 | 2010-05-26 | 南京邮电大学 | 一种控制网格任务执行的方法 |
| CN101883098A (zh) * | 2010-06-18 | 2010-11-10 | 大连海事大学 | Rfid设备网络环境下分布式复杂事件检测的系统及方法 |
| CN102346460A (zh) * | 2011-05-27 | 2012-02-08 | 运软网络科技(上海)有限公司 | 一种基于事务的服务控制系统及其控制方法 |
| CN102739775A (zh) * | 2012-05-29 | 2012-10-17 | 宁波东冠科技有限公司 | 物联网数据采集服务器集群的监控和管理方法 |
| US20120317274A1 (en) * | 2011-06-13 | 2012-12-13 | Richter Owen E | Distributed metering and monitoring system |
| CN102984012A (zh) * | 2012-12-10 | 2013-03-20 | 青岛海信传媒网络技术有限公司 | 管理服务资源的方法及服务资源管理系统 |
| CN103118130A (zh) * | 2013-02-25 | 2013-05-22 | 汉柏科技有限公司 | 一种用于分布式服务的集群管理方法和系统 |
| CN103634394A (zh) * | 2013-11-28 | 2014-03-12 | 中国科学院信息工程研究所 | 一种面向数据流处理的弹性可扩展资源管理方法及系统 |
| CN104683480A (zh) * | 2015-03-19 | 2015-06-03 | 成都艺辰德迅科技有限公司 | 一种基于应用的分布式计算方法 |
| CN105022833A (zh) * | 2015-08-10 | 2015-11-04 | 浪潮(北京)电子信息产业有限公司 | 一种数据处理的方法、节点及监控系统 |
| CN108984544A (zh) * | 2017-05-31 | 2018-12-11 | 北京京东尚科信息技术有限公司 | 一种分布式系统修改配置信息的方法和装置 |
-
2019
- 2019-03-29 CN CN201910252105.9A patent/CN110083504B/zh active Active
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101015171A (zh) * | 2004-06-30 | 2007-08-08 | 建利尔电子公司 | 分布式电信平台中的负载平衡 |
| CN101715001A (zh) * | 2009-10-21 | 2010-05-26 | 南京邮电大学 | 一种控制网格任务执行的方法 |
| CN101883098A (zh) * | 2010-06-18 | 2010-11-10 | 大连海事大学 | Rfid设备网络环境下分布式复杂事件检测的系统及方法 |
| CN102346460A (zh) * | 2011-05-27 | 2012-02-08 | 运软网络科技(上海)有限公司 | 一种基于事务的服务控制系统及其控制方法 |
| US20120317274A1 (en) * | 2011-06-13 | 2012-12-13 | Richter Owen E | Distributed metering and monitoring system |
| CN102739775A (zh) * | 2012-05-29 | 2012-10-17 | 宁波东冠科技有限公司 | 物联网数据采集服务器集群的监控和管理方法 |
| CN102984012A (zh) * | 2012-12-10 | 2013-03-20 | 青岛海信传媒网络技术有限公司 | 管理服务资源的方法及服务资源管理系统 |
| CN103118130A (zh) * | 2013-02-25 | 2013-05-22 | 汉柏科技有限公司 | 一种用于分布式服务的集群管理方法和系统 |
| CN103634394A (zh) * | 2013-11-28 | 2014-03-12 | 中国科学院信息工程研究所 | 一种面向数据流处理的弹性可扩展资源管理方法及系统 |
| CN104683480A (zh) * | 2015-03-19 | 2015-06-03 | 成都艺辰德迅科技有限公司 | 一种基于应用的分布式计算方法 |
| CN105022833A (zh) * | 2015-08-10 | 2015-11-04 | 浪潮(北京)电子信息产业有限公司 | 一种数据处理的方法、节点及监控系统 |
| CN108984544A (zh) * | 2017-05-31 | 2018-12-11 | 北京京东尚科信息技术有限公司 | 一种分布式系统修改配置信息的方法和装置 |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110751384A (zh) * | 2019-09-30 | 2020-02-04 | 口碑(上海)信息技术有限公司 | 业务监控方法和装置 |
| CN111245909A (zh) * | 2019-12-31 | 2020-06-05 | 深圳云天励飞技术有限公司 | 分布式动态调度方法、装置、电子设备及存储介质 |
| CN111245909B (zh) * | 2019-12-31 | 2023-04-07 | 深圳云天励飞技术有限公司 | 分布式动态调度方法、装置、电子设备及存储介质 |
| CN113806176A (zh) * | 2021-09-22 | 2021-12-17 | 中国建设银行股份有限公司 | 一种基于配置管理的数据对象识别方法和装置 |
| CN113806176B (zh) * | 2021-09-22 | 2024-06-11 | 中国建设银行股份有限公司 | 一种基于配置管理的数据对象识别方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110083504B (zh) | 2024-04-26 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104780071B (zh) | 虚拟交换机的升级方法及装置 | |
| CN104092756B (zh) | 一种基于dht机制的云存储系统的资源动态分配方法 | |
| CN111147307A (zh) | 基于深度强化学习的服务功能链可靠部署方法 | |
| CN110083504A (zh) | 分布式任务的运行状态监控方法及装置 | |
| CN104601680B (zh) | 一种资源管理方法及装置 | |
| CN109660400A (zh) | 流控配置方法及系统 | |
| CN107645410A (zh) | 一种基于OpenStack云平台的虚拟机管理系统及方法 | |
| CN103077070B (zh) | 云计算管理系统以及云计算系统的管理方法 | |
| CN107404540A (zh) | 数据的同步方法及装置 | |
| CN106101213A (zh) | 信息分布式存储方法 | |
| CN110532021A (zh) | 分布式控制系统的组态文件的处理方法及装置 | |
| CN111200517B (zh) | 一种业务数据预警控制方法、装置、设备及存储介质 | |
| CN109885612A (zh) | 区块链智能合约的同步生效方法及装置 | |
| CN116112175A (zh) | 基于区块链的数字孪生网络的业务处理方法、装置及介质 | |
| CN109857806A (zh) | 数据库表的同步验证方法及装置 | |
| CN106254452A (zh) | 云平台下的医疗大数据访问方法 | |
| CN110275772A (zh) | 一种数据处理方法及其相关设备 | |
| CN108809680A (zh) | 一种设备管理的方法及设备 | |
| CN107147698A (zh) | 智能开关的远程控制系统、方法和装置 | |
| CN106302656A (zh) | 云存储平台的医药数据处理方法 | |
| CN109859038A (zh) | 一种区块链智能合约的生效方法及装置 | |
| CN109683989A (zh) | 一种配置项之间关联关系的自动采集方法及装置 | |
| CN110378692A (zh) | 基于区块链的数据安全处理方法及装置 | |
| CN107959710A (zh) | 基于云平台的协同建模方法、建模控制服务器和客户端 | |
| CN110324385A (zh) | 数据同步方法及装置、分布式系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Country or region after: China Address after: Room 332, 3 / F, Building 102, 28 xinjiekouwei street, Xicheng District, Beijing 100088 Applicant after: QAX Technology Group Inc. Address before: 100015 15, 17 floor 1701-26, 3 building, 10 Jiuxianqiao Road, Chaoyang District, Beijing. Applicant before: BEIJING QIANXIN TECHNOLOGY Co.,Ltd. Country or region before: China |
|
| GR01 | Patent grant | ||
| GR01 | Patent grant |