CN113535514A - 作业跟踪方法、装置、计算机设备和存储介质 - Google Patents
作业跟踪方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN113535514A CN113535514A CN202110753248.5A CN202110753248A CN113535514A CN 113535514 A CN113535514 A CN 113535514A CN 202110753248 A CN202110753248 A CN 202110753248A CN 113535514 A CN113535514 A CN 113535514A
- Authority
- CN
- China
- Prior art keywords
- job
- information
- target
- basic information
- target operation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 307
- 230000008569 process Effects 0.000 claims abstract description 253
- 238000004458 analytical method Methods 0.000 claims abstract description 83
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 33
- 238000005070 sampling Methods 0.000 claims description 37
- 238000004590 computer program Methods 0.000 claims description 13
- 238000010924 continuous production Methods 0.000 claims description 10
- 230000006870 function Effects 0.000 claims description 6
- 238000012544 monitoring process Methods 0.000 abstract description 9
- 238000007405 data analysis Methods 0.000 abstract description 6
- 238000007418 data mining Methods 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3003—Monitoring arrangements specially adapted to the computing system or computing system component being monitored
- G06F11/3006—Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system is distributed, e.g. networked systems, clusters, multiprocessor systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3051—Monitoring arrangements for monitoring the configuration of the computing system or of the computing system component, e.g. monitoring the presence of processing resources, peripherals, I/O links, software programs
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/48—Program initiating; Program switching, e.g. by interrupt
- G06F9/4806—Task transfer initiation or dispatching
- G06F9/4843—Task transfer initiation or dispatching by program, e.g. task dispatcher, supervisor, operating system
- G06F9/4881—Scheduling strategies for dispatcher, e.g. round robin, multi-level priority queues
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Mathematical Physics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请涉及一种作业跟踪方法、装置、计算机设备和存储介质。该方法包括:作业调度系统获取作业调度系统中目标作业的基本信息,将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息,将目标作业的基本信息和目标作业的进程信息输出至数据库中。在本方法中,作业调度系统可以基于获取到的作业的基本信息,根据预设的解析算法确定该作业对应的进程标识,从而基于进程标识确定作业对应的进程的详细信息,实现了对作业调度系统中的作业的进程详细信息的监控跟踪的目的,基于作业的基本信息和进程信息进行进一步地的数据挖掘和分析,为优化作业调度提供数据支持。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种作业跟踪方法、装置、计算机设备和存储介质。
背景技术
SLURM作为一种开源的、容错较好的、具有高可伸缩性的集群作业调度系统,可以实现计算机设备的作业调度,同时也可以实现对作业的监控。具体地,现有技术通过在提交作业的命令和脚本中标注指定字段属性,例如comment属性,通过携带字段属性的SLURMscontrol show job命令获取运行状态下作业的应用名称,通过携带字段属性的linux命令获取运行状态下作业所对应的进程信息,从而根据作业的应用名称和进程信息实现对作业的监控。
但是,上述现有技术在提交作业的命令和脚本中若没有添加comment属性参数,将会无法获取作业的完整信息,作业监控受到局限。
发明内容
基于此,有必要针对上述技术问题,提供一种能够实现对作业完整信息监控跟踪的作业跟踪方法、装置、计算机设备和存储介质。
第一方面,提供一种作业跟踪方法,应用于作业调度系统中,该方法包括:
获取作业调度系统中目标作业的基本信息;
将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息;
将目标作业的基本信息和目标作业的进程信息输出至数据库中;数据库中的目标作业的基本信息和进程信息可显示于作业调度系统的显示界面中。
在本实施例中,作业调度系统可以基于获取到的作业的基本信息,根据预设的解析算法确定该作业对应的进程标识,从而基于进程标识确定作业对应的进程的详细信息,实现了对作业调度系统中的作业的进程详细信息的监控跟踪的目的,将得到的作业的基本信息和进程信息输出至数据库中,可以基于作业的基本信息和进程信息进行进一步地的数据挖掘和分析,为优化作业调度提供数据支持。
在其中一个可选的实施例中,获取作业调度系统中目标作业的基本信息,包括:
根据预设的采样频率,获取作业调度系统中当前采样时刻下作业状态为运行状态的第一作业的基本信息;
获取作业调度系统中上一采样时刻下作业状态为运行状态的第二作业的基本信息;
根据第一作业的基本信息和第二作业的基本信息,确定目标作业的基本信息。
在本实施例中,作业调度系统调用管理节点根据当前采样时刻获取到的信息,与上一采样时刻获取到的信息确定新增的作业的基本信息,该方法可以简单有效地确定目标作业,提高了作业的基本信息的有效性。
在其中一个可选的实施例中,根据第一作业的基本信息和第二作业的基本信息,确定目标作业的基本信息,包括:
根据第一作业的基本信息和第二作业的基本信息,确定第一作业与第二作业的差集;
将差集中的作业确定为目标作业,确定目标作业的基本信息。
在本实施例中,作业调度系统将根据第一作业的基本信息和第二作业的基本信息的差集确定为新增作业的基本信息,即目标作业的基本信息,该方法可以简单有效地确定目标作业,提高了作业的基本信息的有效性。
在其中一个可选的实施例中,将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息,包括:
将目标作业的基本信息输入至解析算法的递归函数中,确定目标作业的进程标识;
根据目标作业的进程标识和预设的字段模型,确定目标作业的进程信息。
在本实施例中,作业调度系统调用计算节点根据目标作业的基本信息,确定目标作业对应的进程标识,从而基于进程标识确定与目标作业对应的进程的详细信息,实现了作业对应进程的信息追踪。
在其中一个可选的实施例中,将目标作业的基本信息和目标作业的进程信息输出至数据库中,包括:
根据预设的写入格式,将目标作业的基本信息和进程信息写入至指定文件中;
根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果;
将目标作业的第一解析结果输出至数据库中。
在本实施例中,管理节点在获取到目标作业的进程信息之后,将目标作业的基本信息和进程信息写入至指定文件中,并对指定文件进行解析,相当于对指定文件进行有效性检测,进一步确保了输出至数据库中的目标作业的信息的有效性。
在其中一个可选的实施例中,根据预设的写入格式,将目标作业的基本信息和进程信息写入至指定文件中,包括:
检测目标作业的进程信息是否为空;
若目标作业的进程信息非空,则根据预设的写入格式将目标作业基本信息和进程信息写入第一指定文件中;
若目标作业的进程信息为空,则根据写入格式将目标作业的基本信息写入指定目录的第二指定文件中;其中,在解析指定文件的过程中,第一指定文件的优先级大于第二指定文件。
在本实施例中,管理节点检测目标作业进程信息是否为空,从而生成对应的第一指定文件与第二指定文件,在后续对指定文件进行解析的过程中,优先处理第一指定文件,提高了解析指定文件的效率。
在其中一个可选的实施例中,根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果,包括:
根据预设的解析频率,逐行扫描指定文件中目标作业的进程信息;
判断当前行对应的进程信息中是否包含预设值;预设值为作业调度系统中作业的预设应用名称配置文件中的字段;
若不包含预设值,则丢弃当前行的进程信息;
若包含预设值,则将当前行的进程信息确定为第一解析结果。
在本实施例中,管理节点检测指定文件中每行数据是够包含预设值,保证了指定文件中各行数据的有效性,也提高了解析指定文件的效率。
在其中一个可选的实施例中,该方法还包括:
若存在多行连续的进程信息均不包含预设值,则获取多行连续的进程信息的预设列的值,将预设列的值确定为第一解析结果。
在其中一个可选的实施例中,在根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果之前,还包括:
根据指定文件的时间戳与作业调度系统的当前时间戳,确定指定文件是否写入完成;
若指定文件的时间戳与当前时间戳的差值大于预设时间阈值,则执行根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果的步骤。
在本实施例中,管理节点基于指定文件的时间戳与当前时间戳的差值确定指定文件的写入状态,保证在指定文件写入完成的情况下,再执行解析指定文件的步骤,确保了指定文件中数据的完整性,也提高了解析指定文件的效率。
第二方面,提供一种作业调度系统,该系统包括管理节点和计算节点;
调用管理节点,获取作业调度系统中目标作业的基本信息;
调用计算节点,将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息;
调用管理节点,将目标作业的基本信息和目标作业的进程信息输出至数据库中;数据库中的目标作业的基本信息和进程信息可显示于作业调度系统的显示界面中。
第三方面,提供一种作业跟踪装置,该装置包括:
获取模块,用于获取作业调度系统中目标作业的基本信息;
解析模块,用于根据目标作业的基本信息和预设的解析算法,对目标作业进行解析,确定目标作业的进程信息;
输出模块,用于将目标作业的基本信息和目标作业的进程信息输出至数据库中;数据库中的目标作业的基本信息和进程信息可显示于作业调度系统的显示界面中。
第四方面,提供一种计算机设备,包括存储器和处理器,该存储器存储有计算机程序,该处理器执行该计算机程序时实现上述第一方面任一所述的作业跟踪方法。
第五方面,提供一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现上述第一方面任一所述的作业跟踪方法。
上述作业跟踪方法、装置、计算机设备和存储介质,作业调度系统获取作业调度系统中目标作业的基本信息,将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息,将目标作业的基本信息和目标作业的进程信息输出至数据库中。在本方法中,作业调度系统可以基于获取到的作业的基本信息,根据预设的解析算法确定该作业对应的进程标识,从而基于进程标识确定作业对应的进程的详细信息,实现了对作业调度系统中的作业的进程详细信息的监控跟踪的目的,将得到的作业的基本信息和进程信息输出至数据库中,可以基于作业的基本信息和进程信息进行进一步地的数据挖掘和分析,为优化作业调度提供数据支持。
附图说明
图1为一个实施例中作业调度系统的结构示意图;
图2为一个实施例中作业跟踪方法的流程示意图;
图3为一个实施例中作业跟踪方法的流程示意图;
图4为一个实施例中作业跟踪方法的流程示意图;
图5为一个实施例中作业跟踪方法的流程示意图;
图6为一个实施例中作业跟踪方法的流程示意图;
图7为一个实施例中作业跟踪方法的流程示意图;
图8为一个实施例中作业跟踪方法的流程示意图;
图9为一个实施例中作业跟踪方法的流程示意图;
图10为一个实施例中作业跟踪方法的流程示意图;
图11为一个实施例中作业跟踪装置的结构框图;
图12为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请提供的作业跟踪方法,可以应用于如图1所示的作业调度系统中。其中,该作业调度系统可以为SLURM作业调度系统;该作业调度系统包括管理节点、计算节点和数据库三部分。其中,可选的,可以将获取新增作业的monitor_job.sh脚本部署在管理节点,以实现调用管理节点获取作业调度系统中作业的基本信息的目的;可选的,可以将解析作业的analysis_job.sh脚本部署在计算节点,以实现调用计算节点根据作业的基本信息和预设的解析算法得到作业对应的进程标识,从而基于进程标识得到进程信息的目的;可选的,可以将作业信息入库的程序部署在管理节点,以实现调用管理节点将作业的基本信息和进程信息输出至数据库的目的。另外,可选的,还可以在管理节点上配置定时任务、脚本目录、日志文件目录等,在计算节点配置脚本目录。
下面将通过实施例并结合附图具体地对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。需要说明的是,本申请图2-图10实施例提供的作业跟踪方法,其执行主体为作业调度系统,也可以是作业跟踪装置,该作业跟踪装置可以通过软件、硬件或者软硬件结合的方式成为作业调度系统的部分或全部。下述方法实施例中,均以执行主体是作业调度系统为例来进行说明。
在一个实施例中,如图2所示,提供了一种作业跟踪方法,涉及的是作业调度系统获取作业调度系统中目标作业的基本信息,将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息,将目标作业的基本信息和目标作业的进程信息输出至数据库中的过程,包括以下步骤:
S201、获取作业调度系统中目标作业的基本信息。
其中,目标作业指的是当前采样时刻下新增的作业;基本信息指的是作业的ID、作业状态、执行作业的服务器节点信息。其中,作业状态包括运行状态、等待状态、完成状态等。
在本实施例中,作业调度系统可以根据预设的采样频率获取作业的基本信息,例如,作业调度系统调用管理节点获取当前采样时刻下所有的作业的基本信息,再根据预设的查新规则,确定当前采样时刻下新增的作业的基本信息,作为目标作业的基本信息。可选的,管理节点可以根据作业的执行时刻和当前采样时刻,确定作业是否为当前采样时刻下新增的作业;管理节点还可以根据历史采样时刻下的作业信息和当前采样时刻下的作业信息,确定当前采样时刻下的新增的作业,本实施例对此不做限定。
S202、将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息。
在本实施例中,作业调度系统可以调用计算节点执行步骤202。预设的解析算法可以部署在计算节点中。计算节点根据目标作业的基本信息确定各个目标作业的作业ID,将作业ID作为输入参数,输入至解析算法中,得到与作业ID对应的进程标识,示例的,进程标识可以为进程ID。计算节点在得到进程ID之后,可以根据进程ID从预设的数据库中获取与进程ID相对应的进程的详细信息;或者,计算节点还可以根据进程ID和预设的字段模型,匹配与进程ID相对应的进程的详细信息,即确定与目标作业相对应的进程信息,本实施例对此不做限定。
S203、将目标作业的基本信息和目标作业的进程信息输出至数据库中;数据库中的目标作业的基本信息和进程信息可显示于作业调度系统的显示界面中。
其中,作业调度系统可以调用管理节点执行将目标作业的基本信息和进程信息输出至数据库的操作。
在本实施例中,计算节点在确定各个目标作业所对应的进程信息之后,可以将各个目标作业对应的进程信息传递给管理节点,管理节点可以将各个目标作业对应的进程信息、基本信息直接存储至数据库中;可选的,为了确保目标作业的进程信息的信息有效性,管理节点还可以对目标作业的进程信息进行有效性检测,例如,将作业的进程信息写入至指定文件中,检测文件中的数据是否为空,在非空的情况下,将进程信息输出至数据库中,本实施例对此不做限定。
上述作业跟踪方法中,作业调度系统获取作业调度系统中目标作业的基本信息,将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息,将目标作业的基本信息和目标作业的进程信息输出至数据库中。在本方法中,作业调度系统可以基于获取到的作业的基本信息,根据预设的解析算法确定该作业对应的进程标识,从而基于进程标识确定作业对应的进程的详细信息,实现了对作业调度系统中的作业的进程详细信息的监控跟踪的目的,将得到的作业的基本信息和进程信息输出至数据库中,可以基于作业的基本信息和进程信息进行进一步地的数据挖掘和分析,为优化作业调度提供数据支持。
作业调度系统可以基于历史作业的基本信息确定当前新增的作业的基本信息,其中,作业调度系统可以调用管理节点执行图3、图4实施例中涉及到的步骤。在一个实施例中,如图3所示,上述获取作业调度系统中目标作业的基本信息,包括:
S301、根据预设的采样频率,获取作业调度系统中当前采样时刻下作业状态为运行状态的第一作业的基本信息。
其中,预设的采样频率可以设定为60s/次;作业调度系统可以在管理节点配置定时任务,即按照预设的采样频率,管理节点获取作业调度系统中的作业的基本信息。可选的,为了进一步提高获取作业的信息的有效性,管理节点可以根据作业的运行状态来获取作业的基本信息,例如,管理节点只获取当前作业状态为运行状态下的作业的基本信息。
在本实施例中,管理节点可以调用作业监控脚本monitor_job.sh脚本来判断有无运行状态的作业,在有的情况下,调用抓取作业脚本analysis_job.sh脚本来获取当前采样时刻下运行状态下的作业的基本信息,作为第一作业的基本信息。可选地,管理节点可以将第一作业的基本信息写入至cur.jobs文件中。
S302、获取作业调度系统中上一采样时刻下作业状态为运行状态的第二作业的基本信息。
在本实施例中,作业调度系统可以调用管理节点从历史信息数据库中获取上一采样时刻下获取到的作业的基本信息,上一采样时刻所获取到的作业的基本信息为上一采样时刻管理节点获取到的在运行状态下的作业的基本信息,作为第二作业的基本信息。可选的,每一个采样时刻所获取到的作业的基本信息可以写入至对应的文件中,管理节点还可以从记录上一采样时刻的作业的基本信息的pre.jobs文件中,获取上一采样时刻的作业的基本信息。
S303、根据第一作业的基本信息和第二作业的基本信息,确定目标作业的基本信息。
其中,作业调度系统调用管理节点来确定目标作业的基本信息。管理节点可以根据第一作业的基本信息和第二作业的基本信息,确定二者的交集,将剩余的作业的信息确定为目标作业的基本信息,或者,管理节点还可以直接确定第一作业的基本信息和第二作业的基本信息的差集,将差集确定为目标作业的基本信息。
其中,如图4所示,根据第一作业的基本信息和第二作业的基本信息,确定目标作业的基本信息,包括:
S401、根据第一作业的基本信息和第二作业的基本信息,确定第一作业与第二作业的差集。
在本实施例中,示例的,管理节点根据第一作业的基本信息所对应的cur.jobs文件、第二作业的基本信息所对应的pre.jobs文件确定差集,可以将cur.jobs文件中的内容覆盖到pre.jobs文件的内容中,以此确定第一作业与第二作业的差集。
S402、将差集中的作业确定为目标作业,确定目标作业的基本信息。
在本实施例中,管理节点将差集中的作业确定为目标作业,并确定差集中作业的基本信息为目标作业的基本信息,也即,目标作业为当前采样时刻下新增的作业,本实施例对此不做限定。
在本实施例中,作业调度系统调用管理节点根据当前采样时刻获取到的信息,与上一采样时刻获取到的信息确定新增的作业的基本信息,该方法可以简单有效地确定目标作业,提高了作业的基本信息的有效性。
作业调度系统可以调用计算节点执行图5实施例中涉及到的步骤,在一个实施例中,如图5所示,将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息,包括:
S501、将目标作业的基本信息输入至解析算法的递归函数中,确定目标作业的进程标识。
其中,进程标识可以为进程ID。在本实施例中,在管理节点确定目标作业的基本信息之后,管理节点可以将目标作业的基本信息传递给计算节点。计算节点在接收到目标作业的基本信息之后,将目标作业的基本信息中的作业ID作为输入参数,输入至预设的解析算法的递归函数中,获取到与目标作业相关的进程数,并确定目标作业对应的进程ID。其中,作业调度系统可以在计算节点中部署解析脚本analysis_job.sh脚本,解析脚本中包括解析算法。
S502、根据目标作业的进程标识和预设的字段模型,确定目标作业的进程信息。
其中,目标作业的进程标识可以为进程ID。在本实施例中,计算节点可以根据目标作业的进程标识从预设的字段模型中匹配与进程ID相对应的进程的详细信息,确定与目标作业相对应的进程信息,或者,计算节点还可以根据目标作业的进程标识,调用Linux命令ps-ef,获取目标作业对应的进程的详细信息。可选地,计算节点在获取到目标作业的进程信息之后,还可以将进程信息传递给管理节点,本实施例对此不做限定。
在本实施例中,作业调度系统调用计算节点根据目标作业的基本信息,确定目标作业对应的进程标识,从而基于进程标识确定与目标作业对应的进程的详细信息,实现了作业对应进程的信息追踪。
作业调度系统在获取到作业的进程信息之后,可以将作业的进程信息和基本信息输出至数据库中,其中,作业调度系统可以调用管理节点来执行图6、图7、图8、图9实施例中涉及到的步骤。在一个实施例中,如图6所示,将目标作业的基本信息和目标作业的进程信息输出至数据库中,包括:
S601、根据预设的写入格式,将目标作业的基本信息和进程信息写入至指定文件中。
在本实施例中,管理节点在接收到计算节点传递的目标作业的进程信息之后,将目标作业的基本信息和进程信息按照预设的写入格式,写入至指令目录下的指定文件中。可选的,管理节点可以基于monitor_job.sh脚本将目标作业的基本信息和进程信息写入至指令目录下的指定文件中。其中,示例地,预设的写入格式可以为作业id:时间戳:hostname。
为了进一步提高指定文件中写入信息的有效性,可选地,在一个实施例中,如图7所示,根据预设的写入格式,将目标作业的基本信息和进程信息写入至指定文件中,包括:
S701、检测目标作业的进程信息是否为空。
在本实施例中,管理节点根据计算节点返回的目标作业的进程信息,判断各个目标作业的进程信息是否为空,其中,管理节点可以调用monitor_job.sh脚本来检测目标作业的进程信息是否为空。
S702、若目标作业的进程信息非空,则根据预设的写入格式将目标作业基本信息和进程信息写入第一指定文件中。
在本实施例中,管理节点若确定目标作业的进程信息非空,则将该目标作业的基本信息和进程信息按照上述预设的写入格式写入指定目录下的第一指定文件,示例的,第一指定文件可以为/process/prcess_result/id:时间戳:hostname文件。
S703、若目标作业的进程信息为空,则根据写入格式将目标作业的基本信息写入指定目录的第二指定文件中。
其中,在解析指定文件的过程中,第一指定文件的优先级大于第二指定文件。
在本实施例中,管理节点确定目标作业的进程信息为空的情况下,可以直接将该目标作业的基本信息中的作业ID写入到指定目录下的第二指定文件中,第二指定文件可以为/prcess/prcocess_no_result/id:时间戳:hostname。
可选地,当管理节点将进程信息为空的作业ID写入/prcess/prcocess_no_result/id:时间戳:hostname文件中之后,管理节点可以读取该文件,调用重试解析算法所对应的重试脚本retry_analysis_job.sh,再次解析一次该作业,将解析结果保存到/process/prcess_result/id:时间戳:hostname文件中,可选地,在确定/prcess/prcocess_no_result/id:时间戳:hostname文件中的作业的进程信息在通过重试解析输出至/process/prcess_result/id:时间戳:hostname文件中之后,管理节点可以删除/prcess/prcocess_no_result/id:时间戳:hostname文件。
S602、根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果。
其中,程序定时读取结果文件入库流程图:程序定时读取linux脚本运行的结果,该目录下的文件命名格式是:作业id:时间戳:hostname。定时读取该目录下的文件,然后将数据入库。
在本实施例中,管理节点按照预设的解析频率,定时解析指定目录下的指定文件,可选的,若指定目录下包括第一指定文件和第二指定文件,在解析过程中,按照优先级为第一指定文件、第二指定文件的顺序来进行解析。即,管理节点优先解析第一指定文件,在解析完第一指定文件之后解析第二指定文件,其中,管理节点解析的过程为按行读取第一指定文件/第二指定文件中的数据,根据读取到的数据进行相应的处理,然后分别得到第一指定文件的解析结果和第二指定文件的解析结果。
可选的,如图8所示,管理节点根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果,包括:
S801、根据预设的解析频率,逐行扫描指定文件中目标作业的进程信息。
在本实施例中,管理节点按照预设的解析频率,循环处理指定文件中的每行数据,可选的,管理节点可以将每行数据插入到指定的集合中。
S802、判断当前行对应的进程信息中是否包含预设值;预设值为作业调度系统中作业的预设应用名称配置文件中的字段。
在本实施例中,管理节点确定每行数据中是否包含预设值,可选的,管理节点可以扫描每行数据,确定每行数据的cmd列中是否包含应用名称配置文件中的字段,若不包含,则执行步骤803;若包含,则执行步骤804。
S803、若不包含预设值,则丢弃当前行的进程信息。
在本实施例中,管理节点若确定本行数据中不包含预设值,则将本行数据丢弃。
S804、若包含预设值,则将当前行的进程信息确定为第一解析结果。
在本实施例中,管理节点在确定当前行的进程信息中包含预设值,可选的,管理节点可以基于该进程信息获取与当前作业对应的应用类型,将作业的应用类型、基本信息、进程信息等数据确定为第一解析结果。
在另外一种情况下,在一个实施例中,该方法还包括:
若存在多行连续的进程信息均不包含预设值,则获取多行连续的进程信息的预设列的值,将预设列的值确定为第一解析结果。
在本实施例中,管理阶段在解析指定文件的过程中,确定存在连续的几行的进程信息中均不包含预设值,此时,管理节点获取预设列的值,也就是管理节点获取指定列的属性值,将属性值确定为第一解析结果;或者,管理节点还可以获取最后一行cmd列的第一个空格之前的数据,将该数据作为第一解析结果。
S603、将目标作业的第一解析结果输出至数据库中。
在本实施例中,管理节点将解析得到的目标作业的第一解析结果存储至数据库中,可选地,作业调度系统可以基于数据库中的目标作业的第一解析结果对目标作业进行数据分析,并将目标的作业的第一解析结果、分析结果等数据展示在作业调度系统的显示界面中,本实施例对此不做限定。
在本实施例中,管理节点在获取到目标作业的进程信息之后,在将目标作业的进程信息和基本信息输出至数据库的过程中,检测目标作业的进程信息是否为空,并按照检测结果将相应的信息写入对应的指定文件,对目标作业的进程信息进行有效性检测,进一步确保了输出至数据库中的目标作业的信息的有效性。
为了保证指定文件的完整性,在一个实施例中,如图9所示,在根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果之前,还包括:
S901、根据指定文件的时间戳与作业调度系统的当前时间戳,确定指定文件是否写入完成。
在本实施例中,管理节点根据指定文件的时间戳与作业调度系统的当前时间戳进行时差比较,若指定文件的时间戳小于作业调度系统的当前时间戳,说明指定文件的写入动作可能已经完成;若指定文件的时间戳等于作业调度系统的当前时间戳,说明指定文件的写入动作可能完成,也可能指定文件一直处于写入过程中。
S902、若指定文件的时间戳与当前时间戳的差值大于预设时间阈值,则执行根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果的步骤。
其中,
在本实施例中,为了进一步确保指定文件写入完成,管理节点可以计算指定文件的时间戳与当前时间戳的差值,当差值大于预设时间阈值,也就是说,当指定文件的时间戳停留一段时间之后,可以确定指定文件写入完成,此时,再根据预设的解析频率,解析指定文件,保证了指定文件中数据的完整性。
在本实施例中,管理节点基于指定文件的时间戳与当前时间戳的差值确定指定文件的写入状态,保证在指定文件写入完成的情况下,再执行解析指定文件的步骤,确保了指定文件中数据的完整性,也提高了解析指定文件的效率。
为了更好的说明上述方法,如图10所示,本实施例提供一种作业跟踪方法,具体包括:
S101、根据预设的采样频率,获取作业调度系统中当前采样时刻下作业状态为运行状态的第一作业的基本信息;
S102、获取作业调度系统中上一采样时刻下作业状态为运行状态的第二作业的基本信息;
S103、根据第一作业的基本信息和第二作业的基本信息,确定第一作业与第二作业的差集;
S104、将差集中的作业确定为目标作业,确定目标作业的基本信息;
S105、将目标作业的基本信息输入至解析算法的递归函数中,确定目标作业的进程标识;
S106、根据目标作业的进程标识和预设的字段模型,确定目标作业的进程信息;
S107、检测目标作业的进程信息是否为空;
S108、若目标作业的进程信息非空,则根据预设的写入格式将目标作业基本信息和进程信息写入第一指定文件中;
S109、若目标作业的进程信息为空,则根据写入格式将目标作业的基本信息写入指定目录的第二指定文件中;
S110、根据指定文件的时间戳与作业调度系统的当前时间戳,确定指定文件是否写入完成;
S111、若指定文件的时间戳与当前时间戳的差值大于预设时间阈值,则根据预设的解析频率,逐行扫描指定文件中目标作业的进程信息;
S112、判断当前行对应的进程信息中是否包含预设值;预设值为作业调度系统中作业的预设应用名称配置文件中的字段;
S113、若不包含预设值,则丢弃当前行的进程信息;
S114、若包含预设值,则将当前行的进程信息确定为第一解析结果;
S115、若存在多行连续的进程信息均不包含预设值,则获取多行连续的进程信息的预设列的值,将预设列的值确定为第一解析结果;
S116、将目标作业的第一解析结果输出至数据库中。
在本实施例中,在本方法中,作业调度系统可以基于获取到的作业的基本信息,根据预设的解析算法确定该作业对应的进程标识,从而基于进程标识确定作业对应的进程的详细信息,实现了对作业调度系统中的作业的进程详细信息的监控跟踪的目的,将得到的作业的基本信息和进程信息输出至数据库中,可以基于作业的基本信息和进程信息进行进一步地的数据挖掘和分析,为优化作业调度提供数据支持。
上述实施例提供的作业跟踪方法,其实现原理和技术效果与上述方法实施例类似,在此不再赘述。
应该理解的是,虽然图2-10的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-10中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中,如图11所示,提供了一种作业跟踪装置:
获取模块01,用于获取作业调度系统中目标作业的基本信息;
解析模块02,用于根据目标作业的基本信息和预设的解析算法,对目标作业进行解析,确定目标作业的进程信息;
输出模块03,用于将目标作业的基本信息和目标作业的进程信息输出至数据库中;数据库中的目标作业的基本信息和进程信息可显示于作业调度系统的显示界面中。
在其中一个可选的实施例中,获取模块01,用于根据预设的采样频率,获取作业调度系统中当前采样时刻下作业状态为运行状态的第一作业的基本信息;获取作业调度系统中上一采样时刻下作业状态为运行状态的第二作业的基本信息;根据第一作业的基本信息和第二作业的基本信息,确定目标作业的基本信息。
在其中一个可选的实施例中,获取模块01,用于根据第一作业的基本信息和第二作业的基本信息,确定第一作业与第二作业的差集;将差集中的作业确定为目标作业,确定目标作业的基本信息。
在其中一个可选的实施例中,解析模块02,用于将目标作业的基本信息输入至解析算法的递归函数中,确定目标作业的进程标识;根据目标作业的进程标识和预设的字段模型,确定目标作业的进程信息。
在其中一个可选的实施例中,输出模块03,用于根据预设的写入格式,将目标作业的基本信息和进程信息写入至指定文件中;根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果;将目标作业的第一解析结果输出至数据库中。
在其中一个可选的实施例中,输出模块03,用于检测目标作业的进程信息是否为空;若目标作业的进程信息非空,则根据预设的写入格式将目标作业基本信息和进程信息写入第一指定文件中;若目标作业的进程信息为空,则根据写入格式将目标作业基本信息写入指定目录的第二指定文件中;其中,在解析指定文件的过程中,第一指定文件的优先级大于第二指定文件。
在其中一个可选的实施例中,输出模块03,用于根据预设的解析频率,逐行扫描指定文件中目标作业的进程信息;判断当前行对应的进程信息中是否包含预设值;预设值为作业调度系统中作业的预设应用名称配置文件中的字段;若不包含预设值,则丢弃当前行的进程信息;若包含预设值,则将当前行的进程信息确定为第一解析结果。
在其中一个可选的实施例中,输出模块03,还用于若存在多行连续的进程信息均不包含预设值,则获取多行连续的进程信息的预设列的值,将预设列的值确定为第一解析结果。
在其中一个可选的实施例中,输出模块03,还用于根据指定文件的时间戳与作业调度系统的当前时间戳,确定指定文件是否写入完成;若指定文件的时间戳与当前时间戳的差值大于预设时间阈值,则执行根据预设的解析频率,解析指定文件,得到目标作业的第一解析结果的步骤。
关于作业跟踪装置的具体限定可以参见上文中对于作业跟踪方法的限定,在此不再赘述。上述作业跟踪装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图12所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信,无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种作业跟踪方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图12中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取作业调度系统中目标作业的基本信息;
将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息;
将目标作业的基本信息和目标作业的进程信息输出至数据库中;数据库中的目标作业的基本信息和进程信息可显示于作业调度系统的显示界面中。
上述实施例提供的计算机设备,其实现原理和技术效果与上述方法实施例类似,在此不再赘述。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取作业调度系统中目标作业的基本信息;
将目标作业的基本信息输入至预设的解析算法中,确定目标作业对应的进程标识,基于进程标识,确定目标作业对应的进程信息;
将目标作业的基本信息和目标作业的进程信息输出至数据库中;数据库中的目标作业的基本信息和进程信息可显示于作业调度系统的显示界面中。
上述实施例提供的计算机可读存储介质,其实现原理和技术效果与上述方法实施例类似,在此不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory,ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic Random Access Memory,DRAM)等。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (13)
1.一种作业跟踪方法,其特征在于,应用于作业调度系统中,所述方法包括:
获取所述作业调度系统中目标作业的基本信息;
将所述目标作业的基本信息输入至预设的解析算法中,确定所述目标作业对应的进程标识,基于所述进程标识,确定所述目标作业对应的进程信息;
将所述目标作业的基本信息和所述目标作业的进程信息输出至数据库中;所述数据库中的目标作业的基本信息和进程信息可显示于所述作业调度系统的显示界面中。
2.根据权利要求1所述的方法,其特征在于,所述获取所述作业调度系统中目标作业的基本信息,包括:
根据预设的采样频率,获取所述作业调度系统中当前采样时刻下作业状态为运行状态的第一作业的基本信息;
获取所述作业调度系统中上一采样时刻下作业状态为运行状态的第二作业的基本信息;
根据所述第一作业的基本信息和所述第二作业的基本信息,确定所述目标作业的基本信息。
3.根据权利要求2所述的方法,其特征在于,所述根据所述第一作业的基本信息和所述第二作业的基本信息,确定所述目标作业的基本信息,包括:
根据所述第一作业的基本信息和所述第二作业的基本信息,确定所述第一作业与所述第二作业的差集;
将所述差集中的作业确定为所述目标作业,确定所述目标作业的基本信息。
4.根据权利要求1所述的方法,其特征在于,所述将所述目标作业的基本信息输入至预设的解析算法中,确定所述目标作业对应的进程标识,基于所述进程标识,确定所述目标作业对应的进程信息,包括:
将所述目标作业的基本信息输入至所述解析算法的递归函数中,确定所述目标作业的进程标识;
根据所述目标作业的进程标识和预设的字段模型,确定所述目标作业的进程信息。
5.根据权利要求1所述的方法,其特征在于,所述将所述目标作业的基本信息和所述目标作业的进程信息输出至数据库中,包括:
根据预设的写入格式,将所述目标作业的基本信息和所述进程信息写入至指定文件中;
根据预设的解析频率,解析所述指定文件,得到所述目标作业的第一解析结果;
将所述目标作业的第一解析结果输出至所述数据库中。
6.根据权利要求5所述的方法,其特征在于,所述根据预设的写入格式,将所述目标作业的基本信息和所述进程信息写入至指定文件中,包括:
检测所述目标作业的进程信息是否为空;
若所述目标作业的进程信息非空,则根据预设的写入格式将所述目标作业基本信息和进程信息写入第一指定文件中;
若所述目标作业的进程信息为空,则根据所述写入格式将所述目标作业的基本信息写入指定目录的第二指定文件中;其中,在解析所述指定文件的过程中,所述第一指定文件的优先级大于所述第二指定文件。
7.根据权利要求5所述的方法,其特征在于,所述根据预设的解析频率,解析所述指定文件,得到所述目标作业的第一解析结果,包括:
根据预设的解析频率,逐行扫描所述指定文件中目标作业的进程信息;
判断当前行对应的进程信息中是否包含预设值;所述预设值为所述作业调度系统中作业的预设应用名称配置文件中的字段;
若不包含所述预设值,则丢弃当前行的进程信息;
若包含所述预设值,则将当前行的进程信息确定为所述第一解析结果。
8.根据权利要求7所述的方法,其特征在于,所述方法还包括:
若存在多行连续的进程信息均不包含所述预设值,则获取所述多行连续的进程信息的预设列的值,将所述预设列的值确定为所述第一解析结果。
9.根据权利要求5所述的方法,其特征在于,在所述根据预设的解析频率,解析所述指定文件,得到所述目标作业的第一解析结果之前,还包括:
根据所述指定文件的时间戳与所述作业调度系统的当前时间戳,确定所述指定文件是否写入完成;
若所述指定文件的时间戳与所述当前时间戳的差值大于预设时间阈值,则执行所述根据预设的解析频率,解析所述指定文件,得到所述目标作业的第一解析结果的步骤。
10.一种作业调度系统,其特征在于,所述系统包括管理节点和计算节点;
调用所述管理节点,获取所述作业调度系统中目标作业的基本信息;
调用所述计算节点,将所述目标作业的基本信息输入至预设的解析算法中,确定所述目标作业对应的进程标识,基于所述进程标识,确定所述目标作业对应的进程信息;
调用所述管理节点,将所述目标作业的基本信息和所述目标作业的进程信息输出至数据库中;所述数据库中的目标作业的基本信息和进程信息可显示于所述作业调度系统的显示界面中。
11.一种作业跟踪装置,其特征在于,所述装置包括:
获取模块,用于获取所述作业调度系统中目标作业的基本信息;
解析模块,用于根据所述目标作业的基本信息和预设的解析算法,对所述目标作业进行解析,确定所述目标作业的进程信息;
输出模块,用于将所述目标作业的基本信息和所述目标作业的进程信息输出至数据库中;所述数据库中的目标作业的基本信息和进程信息可显示于所述作业调度系统的显示界面中。
12.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至9中任一项所述的方法的步骤。
13.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至9中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110753248.5A CN113535514A (zh) | 2021-07-02 | 2021-07-02 | 作业跟踪方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110753248.5A CN113535514A (zh) | 2021-07-02 | 2021-07-02 | 作业跟踪方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113535514A true CN113535514A (zh) | 2021-10-22 |
Family
ID=78126631
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110753248.5A Pending CN113535514A (zh) | 2021-07-02 | 2021-07-02 | 作业跟踪方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113535514A (zh) |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040117792A1 (en) * | 2002-12-17 | 2004-06-17 | Maly John W. | System and method for terminating processes in a distributed computing system |
CN103092698A (zh) * | 2012-12-24 | 2013-05-08 | 中国科学院深圳先进技术研究院 | 云计算应用自动部署系统及方法 |
CN103677840A (zh) * | 2013-12-18 | 2014-03-26 | 浪潮电子信息产业股份有限公司 | 一种在作业调度软件中查看及操作应用图形界面的方法 |
CN106354616A (zh) * | 2016-08-18 | 2017-01-25 | 北京并行科技股份有限公司 | 监测应用执行性能的方法、装置及高性能计算系统 |
CN106371968A (zh) * | 2016-08-23 | 2017-02-01 | 北京奇虎科技有限公司 | 一种对实时计算进行监控的方法和装置 |
CN108268476A (zh) * | 2016-12-30 | 2018-07-10 | 北京国双科技有限公司 | 数据查询方法及装置 |
CN109298937A (zh) * | 2018-09-19 | 2019-02-01 | 中国联合网络通信集团有限公司 | 文件解析方法及网络设备 |
CN109542714A (zh) * | 2018-09-29 | 2019-03-29 | 中国平安人寿保险股份有限公司 | 应用程序监控方法及装置、计算机装置及计算机存储介质 |
CN109558222A (zh) * | 2018-09-30 | 2019-04-02 | 中国平安人寿保险股份有限公司 | 批量业务进程监控方法、装置、计算机及可读存储介质 |
CN109840142A (zh) * | 2018-12-15 | 2019-06-04 | 平安科技(深圳)有限公司 | 基于云监控的线程控制方法、装置、电子设备及存储介质 |
CN110275777A (zh) * | 2019-06-10 | 2019-09-24 | 广州市九重天信息科技有限公司 | 一种资源调度系统 |
CN110928739A (zh) * | 2018-09-19 | 2020-03-27 | 阿里巴巴集团控股有限公司 | 一种进程监控方法、装置以及计算设备 |
CN110941481A (zh) * | 2019-10-22 | 2020-03-31 | 华为技术有限公司 | 资源调度方法、装置及系统 |
CN112306383A (zh) * | 2019-08-02 | 2021-02-02 | 华为技术有限公司 | 执行作业的方法、计算节点、管理节点及计算设备 |
-
2021
- 2021-07-02 CN CN202110753248.5A patent/CN113535514A/zh active Pending
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040117792A1 (en) * | 2002-12-17 | 2004-06-17 | Maly John W. | System and method for terminating processes in a distributed computing system |
CN103092698A (zh) * | 2012-12-24 | 2013-05-08 | 中国科学院深圳先进技术研究院 | 云计算应用自动部署系统及方法 |
CN103677840A (zh) * | 2013-12-18 | 2014-03-26 | 浪潮电子信息产业股份有限公司 | 一种在作业调度软件中查看及操作应用图形界面的方法 |
CN106354616A (zh) * | 2016-08-18 | 2017-01-25 | 北京并行科技股份有限公司 | 监测应用执行性能的方法、装置及高性能计算系统 |
CN106371968A (zh) * | 2016-08-23 | 2017-02-01 | 北京奇虎科技有限公司 | 一种对实时计算进行监控的方法和装置 |
CN108268476A (zh) * | 2016-12-30 | 2018-07-10 | 北京国双科技有限公司 | 数据查询方法及装置 |
CN109298937A (zh) * | 2018-09-19 | 2019-02-01 | 中国联合网络通信集团有限公司 | 文件解析方法及网络设备 |
CN110928739A (zh) * | 2018-09-19 | 2020-03-27 | 阿里巴巴集团控股有限公司 | 一种进程监控方法、装置以及计算设备 |
CN109542714A (zh) * | 2018-09-29 | 2019-03-29 | 中国平安人寿保险股份有限公司 | 应用程序监控方法及装置、计算机装置及计算机存储介质 |
CN109558222A (zh) * | 2018-09-30 | 2019-04-02 | 中国平安人寿保险股份有限公司 | 批量业务进程监控方法、装置、计算机及可读存储介质 |
CN109840142A (zh) * | 2018-12-15 | 2019-06-04 | 平安科技(深圳)有限公司 | 基于云监控的线程控制方法、装置、电子设备及存储介质 |
CN110275777A (zh) * | 2019-06-10 | 2019-09-24 | 广州市九重天信息科技有限公司 | 一种资源调度系统 |
CN112306383A (zh) * | 2019-08-02 | 2021-02-02 | 华为技术有限公司 | 执行作业的方法、计算节点、管理节点及计算设备 |
CN110941481A (zh) * | 2019-10-22 | 2020-03-31 | 华为技术有限公司 | 资源调度方法、装置及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110209652B (zh) | 数据表迁移方法、装置、计算机设备和存储介质 | |
CN109901834B (zh) | 文档页面生成方法、装置、计算机设备和存储介质 | |
CN113593071A (zh) | 巡检方法、装置、系统、计算机设备及存储介质 | |
CN112148610A (zh) | 测试用例执行方法、装置、计算机设备和存储介质 | |
CN111190753B (zh) | 分布式任务处理方法、装置、存储介质和计算机设备 | |
CN105607986A (zh) | 用户行为日志数据采集方法及装置 | |
CN110768872A (zh) | 巡检方法、系统、装置、计算机设备和存储介质 | |
CN110569222B (zh) | 链路追踪方法、装置、计算机设备和可读存储介质 | |
EP4182796B1 (en) | Machine learning-based techniques for providing focus to problematic compute resources represented via a dependency graph | |
CN111475376A (zh) | 处理测试数据的方法、装置、计算机设备和存储介质 | |
CN112817866A (zh) | 录制回放方法、装置、系统、计算机设备以及存储介质 | |
CN108052440B (zh) | 对业务系统操作逻辑的修正方法、装置、设备和存储介质 | |
CN112051771B (zh) | 多云数据采集方法、装置、计算机设备和存储介质 | |
CN112015646A (zh) | 网络请求监听方法、装置、计算机设备和存储介质 | |
CN111290942A (zh) | 压力测试方法、装置以及计算机可读介质 | |
CN113535514A (zh) | 作业跟踪方法、装置、计算机设备和存储介质 | |
CN116820567A (zh) | 指令消耗信息的确定方法、系统、电子设备及存储介质 | |
CN113626483B (zh) | 一种填写表单的前端缓存方法、系统、设备及存储介质 | |
CN113342500B (zh) | 任务执行方法、装置、设备及存储介质 | |
CN113094052A (zh) | 应用构建方法、装置、计算机设备和存储介质 | |
CN114090351A (zh) | 信号测试方法、装置、计算机设备和存储介质 | |
CN111796571A (zh) | 设备故障检测方法、装置、计算机设备和存储介质 | |
CN113268183A (zh) | 一种列表页面倒计时显示方法及装置 | |
CN113254399A (zh) | 日志查询方法、装置、电子设备及介质 | |
CN112732819A (zh) | 基于etl的数据处理方法、装置、设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |