CN111045805A - 任务执行器的评级方法、装置、计算机设备以及存储介质 - Google Patents

Abstract

本发明实施例公开了一种任务执行器的评级方法、装置、计算机设备以及存储介质，所述方法包括：确定执行器中预先选定的多个性能参数中各性能参数的权重值；根据所述权重值计算所述执行器在执行任务时的执行分数；根据所述执行分数对所述执行器进行评级；将所述执行器的级别以心跳信息的形式发送给调度器。本发明能够更好地发现有异常的执行器，避免因为执行器异常导致任务失败，从而提高了任务的执行成功率。

Description

任务执行器的评级方法、装置、计算机设备以及存储介质

技术领域

本发明涉及计算机技术领域，尤其涉及一种任务执行器的评级方法、装置、计算机设备以及存储介质。

背景技术

目前的任务调度系统中，调度器会定时接收来自执行器的心跳信息，并确定执行器是否存活，如果执行器没有在指定时间内发送心跳信息给调度器，调度器就会认为执行器已经不可用了，此时就不会给该执行器下发任务。但是如果执行器定时给调度器发送心跳证明他存活，但是该执行器却频繁出现任务执行失败、任务执行时间过长的现象，调度器没有对此作出任何处理，需要一种机制来解决这个问题。

发明内容

有鉴于此，本发明实施例提供一种任务执行器的评级方法、装置、计算机设备以及存储介质，能够更好地发现有异常的执行器，避免因为执行器异常导致任务失败，从而提高了任务的执行成功率。

一方面，本发明实施例提供了一种任务执行器的评级方法，该方法包括：

确定执行器中预先选定的多个性能参数中各性能参数的权重值；

根据所述权重值计算所述执行器在执行任务时的执行分数；

根据所述执行分数对所述执行器进行评级；

将所述执行器的级别以心跳信息的形式发送给调度器。

另一方面，本发明实施例提供了一种任务执行器的评级装置，所述装置包括：

第一确定单元，用于确定执行器中预先选定的多个性能参数中各性能参数的权重值；

第一计算单元，用于根据所述权重值计算所述执行器在执行任务时的执行分数；

评级单元，用于根据所述执行分数对所述执行器进行评级；

发送单元，用于将所述执行器的级别以心跳信息的形式发送给调度器。

又一方面，本发明实施例还提供了一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述的任务执行器的评级方法。

再一方面，本发明实施例还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有一个或者一个以上计算机程序，所述一个或者一个以上计算机程序可被一个或者一个以上的处理器执行，以实现如上所述的任务执行器的评级方法。

本发明实施例提供一种任务执行器的评级方法、装置、计算机设备以及存储介质，其中方法包括：确定执行器中预先选定的多个性能参数中各性能参数的权重值；根据所述权重值计算所述执行器在执行任务时的执行分数；根据所述执行分数对所述执行器进行评级；将所述执行器的级别以心跳信息的形式发送给调度器。本发明能够更好地发现有异常的执行器，避免因为执行器异常导致任务失败，从而提高了任务的执行成功率。

附图说明

为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例提供的一种任务执行器的评级方法的应用场景示意图；

图2是本发明实施例提供的一种任务执行器的评级方法的示意流程图；

图3是本发明实施例提供的一种任务执行器的评级方法的另一示意流程图；

图4是本发明实施例提供的一种任务执行器的评级方法的另一示意流程图；

图5是本发明实施例提供的一种任务执行器的评级装置的示意性框图；

图6是本发明实施例提供的一种任务执行器的评级装置的另一示意性框图；

图7是本发明实施例提供的一种任务执行器的评级装置的另一示意性框图；

图8是本发明实施例提供的一种任务执行器的评级装置的另一示意性框图；

图9是本发明实施例提供的一种任务执行器的评级装置的另一示意性框图；

图10是本发明实施例提供的一种计算机设备的结构组成示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。

还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。

请参阅图1和图2，图1为本发明实施例提供的一种任务执行器的评级方法的应用场景示意图，图2为本发明实施例提供的一种任务执行器的评级方法的流程示意图。该任务执行器的评级方法应用于分布式任务调度系统1中，其中，分布式任务调度系统1包括执行器12和调度器13，其中调度器13负责接收并分配任务进行任务调度，执行器12负责执行调度器13所分配的任务。作为一应用，如图1所示，该任务执行器的评级方法应用于分布式任务调度系统1中，该分布式任务调度系统1对其中的执行器12进行评级，并将执行器12的级别以心跳信息的形式发送给调度器13。

请参阅图2，图2为本发明实施例提供的一种任务执行器的评级方法的示意流程图。如图2所示，该方法包括以下步骤S101～S104。

S101，确定执行器中预先选定的多个性能参数中各性能参数的权重值。

在本发明实施例中，所述各性能参数具体只包括以下几种参数：执行器的CPU使用率、内存使用率、进程的内存使用情况、网络带宽的使用等信息、任务总数、任务失败总数以及任务失败占比，其中，CPU使用率指的是执行器中运行的程序占用的CPU资源，表示在某个时间点的运行程序的情况，CPU使用率越高，说明在此时运行了很多程序，反之较少；内存使用率指的是所使用的内存比率；进程的内存使用情况指的是执行器所在进程所分配的内存使用比率；任务总数指的是在一定时间段内执行器上执行的任务总数；任务失败总数指的是在一定时间段内执行器上执行失败的任务总数；任务失败占比指的是在一定时间段内执行器执行失败的任务比率。在本实施例中，执行器本身存在总权重值，一般情况下，该总权重值为100％，并且对应的系统分数为100分；所述确定执行器中预先选定的多个性能参数中各性能参数的权重值的步骤具体包括以下步骤：根据不同的参数预先分配不同的权重比例以确定各性能参数的权重值。具体的，在本实施例中，所确定的执行器的参数个数为7个，具体包括有CPU使用率、内存使用率、进程的内存使用情况、网络带宽的使用等信息，任务总数、任务失败总数以及任务失败占比，若需要确定每个参数的所代表的权重值，将根据不同的参数分配各性能参数的所对应的权重值，例如对于CPU使用率，其权重值为10％；对于内存使用率，其权重值为10％；对于进程的内存使用情况，其权重值为10％；对于网络带宽的使用率，其权重值为10％；对于任务总数，其权重值为10％；对于任务失败总数，其权重值为20％；对于任务失败占比，其权重值为30％。其中，各性能参数的权重值分配的占比可以根据用户的实际需求进行确定，最后的总权重值等于100％即可，对于各性能参数的具体的权重值在此不作限制；通过给各性能参数分配权重值，可以利用该权重值并利用加权算法计算执行器的层级，从而实现对执行器进行分级。

S102，根据所述权重值计算所述执行器在执行任务时的执行分数。

在本发明实施例中，执行器在执行任务时的执行分数一般情况下指的是执行器在执行任务时各性能参数的系统分数与本身的权重值进行相乘，再将各性能参数的乘积进行相加即为执行器在执行任务时的执行分数；请参阅图3，所述步骤S102包括步骤S301～S303：S301，确定所述执行器中各性能参数的系统分数；S302，计算各性能参数的系统分数与对应的权重值的乘积；S303，对各性能参数的系统分数与对应的权重值的乘积进行求和得到和值，将所述和值作为所述执行器在执行任务时的执行分数。例如：对于CPU使用率，其权重值为10％，其系统分数为100分*(100％-80％)＝20分，其中100％-80％表示CPU使用率占比；对于内存使用率，其权重值为10％，其系统分数为100分*(100％-80％)＝20分，100％-80％表示内存使用率占比；对于进程的内存使用情况，其权重值为10％，其系统分数为100分*(100％-80％)＝20分，100％-80％表示进程的内存使用情况占比；对于网络带宽的使用率，其权重值为10％，其系统分数为100分*(100％-80％)＝20分，100％-80％表示网络带宽的使用率占比；对于任务总数，其权重值为10％，将任务总数除以10000乘以100％得到一个比率值(若任务总数大于10000，则结果为100％)，假设为80％，其系统分数为100分*(100％-80％)＝20分；对于任务失败总数，将任务失败总数除以1000乘以100％得到一个比率值(若任务失败总数大于1000，则结果为100％)，假设为80％，其权重值为20％，其系统分数为100分*(100％-80％)＝20分；对于任务失败占比，其权重值为30％，其系统分数为10分*(100％-80％)＝20分；那么所述执行器在执行任务时的执行分数为10％*20*5+20％*20+30％*20＝20。

S103，根据所述执行分数对所述执行器进行评级。

在本发明实施例中，在对执行器进行评级之前，预先创建预设级别表并设置等级，将对执行分数划分不同的分数区间，每一分数区间对应一个推荐等级，例如[0,20][21,35][36,50][51,70][71,100]，划分为五个任务执行推荐等级，从低到高分别对应为：非常不推荐、比较不推荐、一般、比较推荐、推荐；再将计算所述执行器在执行任务时的所得到的执行分数对应预设级别表中的分数区间进行对应的查找，并根据所查找到的分数区间对应于哪一个等级，例如所述执行器在执行任务时的执行分数为10％*20*5+20％*20+30％*20＝20，属于[0,20]区间，则该执行器对应的级别为非常不推荐。

请参阅图4，所述步骤S103包括步骤S401～S402：

S401，从预先划分的多个分数区间中确定与所述执行分数相匹配的分数区间作为目标区间。

在本发明实施例中，将对执行分数划分不同的分数区间，每一分数区间对应一个推荐等级，例如[0,20][21,35][36,50][51,70][71,100]，划分为五个任务执行推荐等级，从低到高分别对应为：非常不推荐、比较不推荐、一般、比较推荐、推荐。

S402，根据预设的分数区间与级别的映射关系，确定所述目标区间所对应的级别。

在本发明实施例中，将计算所述执行器在执行任务时的所得到的执行分数对应预设级别表中的分数区间进行对应的查找，并根据所查找到的分数区间对应于哪一个等级，例如所述执行器在执行任务时的执行分数为10％*20*5+20％*20+30％*20＝20，属于[0,20]区间，则该执行器对应的级别为非常不推荐。

S104，将所述执行器的级别以心跳信息的形式发送给调度器。

在本发明实施例中，所述将所述执行器的级别以心跳信息的形式发送给调度器的步骤具体包括：将所述执行器的级别封装成心跳信息；将所述心跳信息发送给调度器。具体的，发送心跳信息的周期为3秒，由于执行器与调度器之间的通信为长连接，因此，执行器发送给调度器的级别信息也应该是长连接情况下的消息，因此，需要将上述级别信息封装成短连接情况下的心跳信息，这样，消息转发设备才能够识别和处理心跳信息；更具体的，可以基于预先设定的信息封装规则，将上述级别信息封装成长连接情况下的心跳信息。其中，信息封装规则可以根据实际情况设定，本说明书实施例对此不做限定。需要说明的是，当调度器收到执行器的心跳信息，若发现该执行器的任务执行推荐等级为非常不推荐的时候，会将该执行器拉入黑名单，并且发送通知信息通知相关的开发人员和运维人员进行执行器的问题查找，同时会在指定的时间内不会给该执行器分配任务；当经过指定的时间之后，调度器会尝试给执行器下发任务、如果执行器的执行结果为成功、并且该执行器的心跳等级有所升级，那么会将该执行器踢出黑名单，加入可正常分配的执行器列表中；通过以上的机制可以更好地发现有问题的执行器，实现执行器的自动踢出和加入，避免因为执行器问题导致任务失败，从而提高了任务的执行成功率。

由以上可见，本发明实施例通过确定执行器中预先选定的多个性能参数中各性能参数的权重值；根据所述权重值计算所述执行器在执行任务时的执行分数；根据所述执行分数对所述执行器进行评级；将所述执行器的级别以心跳信息的形式发送给调度器。本发明能够更好地发现有异常的执行器，避免因为执行器异常导致任务失败，从而提高了任务的执行成功率。

请参阅图5，对应上述一种任务执行器的评级方法，本发明实施例还提出一种任务执行器的评级装置，该装置100包括：第一确定单元101、第一计算单元102、评级单元103、发送单元104。

其中，所述第一确定单元101，用于确定执行器中预先选定的多个性能参数中各性能参数的权重值；第一计算单元102，用于根据所述权重值计算所述执行器在执行任务时的执行分数；评级单元103，用于根据所述执行分数对所述执行器进行评级；发送单元104，用于将所述执行器的级别以心跳信息的形式发送给调度器。

请参阅图6，所述第一确定单元101，包括：分配单元101a，用于根据不同的参数分配不同的权重比例以确定各性能参数的权重值。

请参阅图7，所述第一计算单元102，包括：第二确定单元102a，用于确定所述执行器中各性能参数的系统分数；第一计算子单元102b，用于计算各性能参数的系统分数与对应的权重值的乘积；第二计算子单元102c，用于对各性能参数的系统分数与对应的权重值的乘积进行求和得到和值，将所述和值作为所述执行器在执行任务时的执行分数。

请参阅图8，所述评级单元103，包括：匹配单元103a，用于从预先划分的多个分数区间中确定与所述执行分数相匹配的分数区间作为目标区间；映射单元103b，用于根据预设的分数区间与级别的映射关系，确定所述目标区间所对应的级别。

请参阅图9，所述发送单元104，包括：封装单元104a，用于将所述执行器的级别封装成心跳信息；发送子单元104b，用于将所述心跳信息发送给调度器。

由以上可见，本发明实施例通过确定执行器中预先选定的多个性能参数中各性能参数的权重值；根据所述权重值计算所述执行器在执行任务时的执行分数；根据所述执行分数对所述执行器进行评级；将所述执行器的级别以心跳信息的形式发送给调度器。本发明能够更好地发现有异常的执行器，避免因为执行器异常导致任务失败，从而提高了任务的执行成功率。

上述任务执行器的评级装置与上述任务执行器的评级方法一一对应，其具体的原理和过程与上述实施例所述方法相同，不再赘述。

上述任务执行器的评级装置可以实现为一种计算机程序的形式，计算机程序可以在如图10所示的计算机设备上运行。

图10为本发明一种计算机设备的结构组成示意图。该设备可以是终端，也可以是服务器，其中，终端可以是智能手机、平板电脑、笔记本电脑以及台式电脑等电子装置。服务器可以是独立的服务器，也可以是多个服务器组成的服务器集群。参照图10，该计算机设备500包括通过系统总线501连接的处理器502、非易失性存储介质503、内存储器504和网络接口505。其中，该计算机设备500的非易失性存储介质503可存储操作系统5031和计算机程序5032，该计算机程序5032被执行时，可使得处理器502执行一种任务执行器的评级方法。该计算机设备500的处理器502用于提供计算和控制能力，支撑整个计算机设备500的运行。该内存储器504为非易失性存储介质503中的计算机程序5032的运行提供环境，该计算机程序被处理器执行时，可使得处理器502执行一种任务执行器的评级方法。计算机设备500的网络接口505用于进行网络通信。本领域技术人员可以理解，图10中所示仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。

其中，所述处理器502执行所述计算机程序时实现如下操作：

确定执行器中预先选定的多个性能参数中各性能参数的权重值；

根据所述权重值计算所述执行器在执行任务时的执行分数；

根据所述执行分数对所述执行器进行评级；

将所述执行器的级别以心跳信息的形式发送给调度器。

在一个实施例中，所述确定执行器中预先选定的多个性能参数中各性能参数的权重值，包括：

根据不同的参数预先分配不同的权重比例以确定各性能参数的权重值。

在一个实施例中，所述根据所述权重值计算所述执行器在执行任务时的执行分数，包括：

确定所述执行器中各性能参数的系统分数；

计算各性能参数的系统分数与对应的权重值的乘积；

对各性能参数的系统分数与对应的权重值的乘积进行求和得到和值，将所述和值作为所述执行器在执行任务时的执行分数。

在一个实施例中，根据所述执行分数对所述执行器进行评级，包括：

从预先划分的多个分数区间中确定与所述执行分数相匹配的分数区间作为目标区间；

根据预设的分数区间与级别的映射关系，确定所述目标区间所对应的级别。

在一个实施例中，将所述执行器的级别以心跳信息的形式发送给调度器，包括：

将所述执行器的级别封装成心跳信息；

将所述心跳信息发送给调度器。

本领域技术人员可以理解，图10中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定，在其他实施例中，计算机设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。例如，在一些实施例中，计算机设备仅包括存储器及处理器，在这样的实施例中，存储器及处理器的结构及功能与图10所示实施例一致，在此不再赘述。

本发明提供了一种计算机可读存储介质，计算机可读存储介质存储有一个或者一个以上计算机程序，所述一个或者一个以上计算机程序可被一个或者一个以上的处理器执行，以实现以下步骤：

确定执行器中预先选定的多个性能参数中各性能参数的权重值；

根据所述权重值计算所述执行器在执行任务时的执行分数；

根据所述执行分数对所述执行器进行评级；

将所述执行器的级别以心跳信息的形式发送给调度器。

在一个实施例中，所述确定执行器中预先选定的多个性能参数中各性能参数的权重值，包括：

根据不同的参数预先分配不同的权重比例以确定各性能参数的权重值。

在一个实施例中，所述根据所述权重值计算所述执行器在执行任务时的执行分数，包括：

确定所述执行器中各性能参数的系统分数；

计算各性能参数的系统分数与对应的权重值的乘积；

对各性能参数的系统分数与对应的权重值的乘积进行求和得到和值，将所述和值作为所述执行器在执行任务时的执行分数。

在一个实施例中，根据所述执行分数对所述执行器进行评级，包括：

从预先划分的多个分数区间中确定与所述执行分数相匹配的分数区间作为目标区间；

根据预设的分数区间与级别的映射关系，确定所述目标区间所对应的级别。

在一个实施例中，将所述执行器的级别以心跳信息的形式发送给调度器，包括：

将所述执行器的级别封装成心跳信息；

将所述心跳信息发送给调度器。

本发明前述的存储介质包括：磁碟、光盘、只读存储记忆体(Read-Only Memory，ROM)等各种可以存储程序代码的介质。

本发明所有实施例中的单元可以通过通用集成电路，例如CPU(CentralProcessing Unit，中央处理器)，或通过ASIC(Application Specific IntegratedCircuit，专用集成电路)来实现。

本发明实施例任务执行器的评级方法中的步骤可以根据实际需要进行顺序调整、合并和删减。

本发明实施例任务执行器的评级装置中的单元可以根据实际需要进行合并、划分和删减。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (10)

1.一种任务执行器的评级方法，其特征在于，所述方法包括：

确定执行器中预先选定的多个性能参数中各性能参数的权重值；

根据所述权重值计算所述执行器在执行任务时的执行分数；

根据所述执行分数对所述执行器进行评级；

将所述执行器的级别以心跳信息的形式发送给调度器。

2.如权利要求1所述的方法，其特征在于，所述确定执行器中预先选定的多个性能参数中各性能参数的权重值，包括：

根据不同的参数预先分配不同的权重比例以确定各性能参数的权重值。

3.如权利要求1所述的方法，其特征在于，所述根据所述权重值计算所述执行器在执行任务时的执行分数，包括：

确定所述执行器中各性能参数的系统分数；

计算各性能参数的系统分数与对应的权重值的乘积；

对各性能参数的系统分数与对应的权重值的乘积进行求和得到和值，将所述和值作为所述执行器在执行任务时的执行分数。

4.如权利要求1所述的方法，其特征在于，根据所述执行分数对所述执行器进行评级，包括：

从预先划分的多个分数区间中确定与所述执行分数相匹配的分数区间作为目标区间；

根据预设的分数区间与级别的映射关系，确定所述目标区间所对应的级别。

5.如权利要求1所述的方法，其特征在于，将所述执行器的级别以心跳信息的形式发送给调度器，包括：

将所述执行器的级别封装成心跳信息；

将所述心跳信息发送给调度器。

6.一种任务执行器的评级装置，其特征在于，所述装置包括：

第一确定单元，用于确定执行器中预先选定的多个性能参数中各性能参数的权重值；

第一计算单元，用于根据所述权重值计算所述执行器在执行任务时的执行分数；

评级单元，用于根据所述执行分数对所述执行器进行评级；

发送单元，用于将所述执行器的级别以心跳信息的形式发送给调度器。

7.如权利要求6所述的装置，其特征在于，所述第一确定单元，包括：

第一确定子单元，用于

分配单元，用于根据不同的参数分配不同的权重比例以确定各性能参数的权重值。

8.如权利要求6所述的装置，其特征在于，所述第一计算单元，包括：

第二确定单元，用于确定所述执行器中各性能参数的系统分数；

第一计算子单元，用于计算各性能参数的系统分数与对应的权重值的乘积；

第二计算子单元，用于对各性能参数的系统分数与对应的权重值的乘积进行求和得到和值，将所述和值作为所述执行器在执行任务时的执行分数。

9.一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1-5任一项所述的任务执行器的评级方法。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有一个或者一个以上计算机程序，所述一个或者一个以上计算机程序可被一个或者一个以上的处理器执行，以实现如权利要求1-5任一项所述的任务执行器的评级方法。

Images