CN107766156A - 任务处理方法及装置 - Google Patents
任务处理方法及装置 Download PDFInfo
- Publication number
- CN107766156A CN107766156A CN201710999222.2A CN201710999222A CN107766156A CN 107766156 A CN107766156 A CN 107766156A CN 201710999222 A CN201710999222 A CN 201710999222A CN 107766156 A CN107766156 A CN 107766156A
- Authority
- CN
- China
- Prior art keywords
- personal
- processing
- level
- personal device
- equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title abstract description 16
- 230000004044 response Effects 0.000 claims abstract description 20
- 238000012545 processing Methods 0.000 claims description 162
- 238000000034 method Methods 0.000 claims description 73
- 238000012544 monitoring process Methods 0.000 claims description 54
- 230000008859 change Effects 0.000 claims description 35
- 238000005516 engineering process Methods 0.000 abstract description 2
- 230000006641 stabilisation Effects 0.000 abstract 1
- 238000011105 stabilization Methods 0.000 abstract 1
- 239000000047 product Substances 0.000 description 15
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000012217 deletion Methods 0.000 description 6
- 230000037430 deletion Effects 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 230000001502 supplementing effect Effects 0.000 description 5
- BQCADISMDOOEFD-UHFFFAOYSA-N Silver Chemical compound [Ag] BQCADISMDOOEFD-UHFFFAOYSA-N 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000004883 computer application Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明实施方式提供了任务处理方法及装置,涉及计算机应用技术领域。其中,所述任务处理方法包括:监听个人设备的加入事件;响应于所述加入事件,预估所述个人设备的处理能力等级;若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。由于在感知个人设备的加入事件的基础上,进一步预估该个人设备的处理能力等级,并且在该处理能力等级满足设定条件的情形下接入该个人设备,因此,能够使集群在复用个人设备的场景下维持其性能的稳定,此外,由于集群复用个人设备,因此提高了设备的利用率、从而降低了成本,实现了高性能与低成本的有效兼顾。
Description
技术领域
本发明涉及计算机应用技术领域,更为具体而言,涉及任务处理方法及装置。
背景技术
集群是一组相互独立的、通过高速网络互联的计算机,它们构成了一个组,并以单一系统的模式加以管理。通过集群技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性等方面的相对较高的收益。因此,越来越多的互联网企业开始采用集群技术。
但随着各大互联网企业的业务拓展,后台需要处理的数据量越来越大,因此,集群会面临数据处理不及时的问题,最终导致整个集群因为资源耗尽而崩溃。
然而,现有的解决方案难以兼顾集群的性能和成本。由此导致互联网企业不得不花费大量的费用来保证性能。而这却与采用集群技术的初衷相违背。
发明内容
在现有的解决方案中,通过为集群补充机器来解决因数据量大而导致集群崩溃的问题,但考虑到性能的稳定性,机器在集群中是独立部署的、不允许个人用户复用,因此导致了资源利用率、成本高的问题。
对此,本发明实施方式提供了任务处理方法及装置、终端设备和计算机存储介质,用以解决现有技术中所存在的上述技术问题。
第一方面,本发明实施方式提供了一种任务处理方法。
具体地,所述方法包括:
监听个人设备的加入事件;
响应于所述加入事件,预估所述个人设备的处理能力等级;
若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
由于在本实施方式中,在感知个人设备的加入事件的基础上,进一步预估该个人设备的处理能力等级,并且在该处理能力等级满足设定条件的情形下接入该个人设备,因此,能够使集群在复用个人设备的场景下维持其性能的稳定,此外,由于集群复用个人设备,因此提高了设备的利用率、从而降低了成本,实现了高性能与低成本的有效兼顾。
结合第一方面,在本发明的一些实施方式中,预估所述个人设备的处理能力等级包括:
识别所述个人设备是否记录于设定的黑名单配置文件;
若所述个人设备记录于设定的黑名单配置文件,则确定所述处理能力等级为第一等级。
由于本实施方式引入黑名单配置文件来对个人设备的处理能力等级的进行预估,因此能够实现用户个性化地定义个人设备的处理能力等级。
结合第一方面,在本发明的一些实施方式中,预估所述个人设备的处理能力等级还包括:
若所述个人设备未记录于设定的黑名单配置文件,则将所述个人设备的空闲资源与设定阈值进行比较;
若所述空闲资源小于设定阈值,则确定所述处理能力等级为所述第一等级。
由于本实施方式在黑名单配置文件的基础上,进一步根据空闲资源预估个人设备的处理能力等级,因此,能够在个性化定义处理能力等级的同时保证预估结果的准确性和客观性。
结合第一方面,在本发明的一些实施方式中,预估所述个人设备的处理能力等级还包括:
若所述空闲资源大于或等于设定阈值,则确定所述处理能力等级为第二等级。
结合第一方面,在本发明的一些实施方式中,监听个人设备的加入事件包括:
根据活动设备树的节点变化信息监听个人设备的加入事件。
第二方面,本发明实施方式提供了一种任务处理装置。
具体地,所述装置包括:
第一监听模块,用于监听个人设备的加入事件;
预估模块,用于响应于所述加入事件,预估所述个人设备的处理能力等级;
处理模块,用于在所述处理能力等级满足设定条件的情形下,将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
由于在本实施方式中,在感知个人设备的加入事件的基础上,进一步预估该个人设备的处理能力等级,并且在该处理能力等级满足设定条件的情形下接入该个人设备,因此,能够使集群在复用个人设备的场景下维持其性能的稳定,此外,由于集群复用个人设备,因此提高了设备的利用率、从而降低了成本,实现了高性能与低成本的有效兼顾。
结合第二方面,在本发明的一些实施方式中,所述预估模块包括:
识别单元,用于识别所述个人设备是否记录于设定的黑名单配置文件;
第一确定单元,用于在所述个人设备记录于设定的黑名单配置文件的情形下,确定所述处理能力等级为第一等级。
由于本实施方式引入黑名单配置文件来对个人设备的处理能力等级的进行预估,因此能够实现用户个性化地定义个人设备的处理能力等级。
结合第二方面,在本发明的一些实施方式中,所述预估模块还包括:
比较单元,用于在所述个人设备未记录于设定的黑名单配置文件的情形下,将所述个人设备的空闲资源与设定阈值进行比较;
第二确定单元,用于在所述空闲资源小于设定阈值的情形下,确定所述处理能力等级为所述第一等级。
由于本实施方式在黑名单配置文件的基础上,进一步根据空闲资源预估个人设备的处理能力等级,因此,能够在个性化定义处理能力等级的同时保证预估结果的准确性和客观性。
结合第二方面,在本发明的一些实施方式中,所述预估模块还包括:
第三确定单元,用于在所述空闲资源大于或等于设定阈值的情形下,确定所述处理能力等级为第二等级。
结合第二方面,在本发明的一些实施方式中,所述第一监听模块,用于通过下述处理实现监听个人设备的加入事件:根据活动设备树的节点变化信息监听个人设备的加入事件。
本发明的这些方面或其他方面在以下具体实施方式的描述中会更加简明易懂。
附图说明
为了更清楚地说明本发明实施方式的技术方案,下面将对实施方式描述中所需要使用的附图作一简单的介绍,显而易见地,下面描述中的附图是本发明的一些实施方式,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明方法实施方式1的任务处理方法的流程图;
图2出了图1所示的处理S12的一种实施方式;
图3是根据本发明方法实施方式3的任务处理方法的流程图;
图4是根据本发明方法实施方式4的任务处理方法的流程图;
图5是根据本发明方法实施方式5的任务处理方法的流程图;
图6是根据本发明方法实施方式6的任务处理方法的流程图;
图7是根据本发明实施方式的集群的架构图;
图8是根据本发明实施方式的工作模式启动方法的流程图;
图9是根据本发明产品实施方式1的任务处理装置的结构示意图;
图10示出了图9所示的预估模块12的一种实施方式;
图11示出了图9所示的预估模块12的另一种实施方式;
图12是根据本发明产品实施方式5的任务处理装置的结构示意图;
图13是根据本发明产品实施方式6的任务处理装置的结构示意图;
图14是根据本发明产品实施方式7的任务处理装置的结构示意图;
图15是根据本发明实施方式的一种终端设备的结构示意图。
具体实施方式
以下结合附图和具体实施方式对本发明的各个方面进行详细阐述。其中,在本发明的各个具体实施方式中,众所周知的操作过程、程序模块、单元及其相互之间的连接、链接、通信或操作没有示出或未作详细说明。
并且,所描述的特征、架构或功能可在一个或一个以上实施例中以任何方式组合。
此外,本领域技术人员应当理解,下述的各种实施方式只用于举例说明,而非用于限制本发明的保护范围。本领域的技术人员还可以容易理解,本文所述和附图所示的各实施方式中的程序模块、单元或步骤可以按多种不同配置进行组合和设计。
对于未在本说明书中进行具体说明的技术术语,除非另有特定说明,都应以本领域最宽泛的意思进行解释。
在本发明的说明书和权利要求书及上述附图中的描述的一些流程中,包含了按照特定顺序出现的多个操作,但是应该清楚了解,这些操作可以不按照其在本文中出现的顺序来执行或并行执行,操作的标号如S10、S11等,仅仅是用于区分开各个不同的操作,序号本身不代表任何的执行顺序。另外,这些流程可以包括更多或更少的操作,并且这些操作可以按顺序执行或并行执行。需要说明的是,本文中的“第一”、“第二”等描述,是用于区分不同的消息、设备、模块等,不代表先后顺序,也不限定“第一”和“第二”是不同的类型。
下面将结合附图,对本发明实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式仅仅是本发明的一部分实施方式,而不是全部的实施方式。基于本发明中的实施方式,本领域技术人员在没有付出创造性劳动的前提下所获得的所有其他实施方式,都属于本发明保护的范围。
【方法实施方式1】
图1是根据本发明方法实施方式1的任务处理方法的流程图。参见图1,在本实施方式中,所述方法包括:
S11:监听个人设备的加入事件。
S12:响应于所述加入事件,预估所述个人设备的处理能力等级。
S13:若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
由于在本实施方式中,在感知个人设备的加入事件的基础上,进一步预估该个人设备的处理能力等级,并且在该处理能力等级满足设定条件的情形下接入该个人设备,因此,能够使集群在复用个人设备的场景下维持其性能的稳定,此外,由于集群复用个人设备,因此提高了设备的利用率、从而降低了成本,实现了高性能与低成本的有效兼顾。
【方法实施方式2】
本实施方式所提供的任务处理方法包括了方法实施方式1中的全部内容,在此不再赘述。参见图2,在本实施方式中,通过下述处理实现处理S12,包括:
S121:响应于所述加入事件,识别所述个人设备是否记录于设定的黑名单配置文件,若是,则执行S122,若否则,执行S123。
S122:确定所述处理能力等级为第一等级(用于表示个人设备的处理能力不满足要求)。
S123:将所述个人设备的空闲资源与设定阈值进行比较。若所述空闲资源小于设定阈值,则执行S122,若所述空闲资源大于或等于设定阈值,则执行S124。
S124:确定所述处理能力等级为第二等级(用于表示个人设备的处理能力满足要求)。
由于本实施方式引入黑名单配置文件来对个人设备的处理能力等级的进行预估,因此能够实现用户个性化地定义个人设备的处理能力等级。
此外,本实施方式在黑名单配置文件的基础上,还进一步根据空闲资源预估个人设备的处理能力等级,因此,能够在个性化定义处理能力等级的同时保证预估结果的准确性和客观性。
【方法实施方式3】
图3是根据本发明方法实施方式3的任务处理方法的流程图。参见图3,在本实施方式中,所述方法包括:
S31:根据活动设备树的节点变化信息监听个人设备的加入事件。
其中,所述活动设备树中的树节点对应于处于活动状态的个人设备。
所述节点变化信息用于指示该活动设备树中树节点的变化情况,例如,向该活动设备树中添加树节点或者从该活动设备树中删除树节点等。
举例而言,若节点变化信息指示该活动设备树中新增了树节点,则表示有个人设备启动。
S32:响应于所述加入事件,预估所述个人设备的处理能力等级。
S33:若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
【方法实施方式4】
图4是根据本发明方法实施方式4的任务处理方法的流程图。参见图4,在本实施方式中,所述方法包括:
S41:根据活动设备树的节点变化信息监听个人设备的加入事件。
S42:响应于所述加入事件,预估所述个人设备的处理能力等级。
S43:若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
S44:根据所述节点变化信息监听所述待调度池中个人设备的离开事件。
S45:响应于所述离开事件,将离开的个人设备从所述待调度池中删除。
由于在本实施方式中,集群能够根据节点变化信息自动感知个人设备的离开事件,并且将离开的个人设备从集群中删除,因此,可以有效避免将任务分发至已退出的个人设备,从而保证集群的有效性。
【方法实施方式5】
图5是根据本发明方法实施方式5的任务处理方法的流程图。参见图5,在本实施方式中,所述方法包括:
S51:根据活动设备树的节点变化信息监听个人设备的加入事件。
S52:响应于所述加入事件,预估所述个人设备的处理能力等级。
S53:若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务,并发地执行处理S54和S56。
S54:根据所述节点变化信息监听所述待调度池中个人设备的离开事件。
S55:响应于所述离开事件,将离开的个人设备从所述待调度池中删除。
S56:监听所述待调度池中个人设备的处理能力等级是否满足设定条件。
S57:将处理能力等级不满足设定条件的个人设备从所述待调度池中删除。
由于在本实施方式中,集群在自动感知并删除离开的个人设备的基础上,监听其中的个人设备的处理能力等级是否满足设定条件,并且将处理能力等级不满足设定条件的个人设备删除,因此,可以有效避免将任务分发至处理能力不足的个人设备,以进一步保证集群的有效性。
【方法实施方式6】
图6是根据本发明方法实施方式6的任务处理方法的流程图。参见图6,在本实施方式中,所述方法包括:
S61:根据活动设备树的节点变化信息监听个人设备的加入事件。
S62:响应于所述加入事件,预估所述个人设备的处理能力等级。
S63:若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务,并发地执行S64和S66。
S64:根据所述节点变化信息监听所述待调度池中个人设备的离开事件。
S65:响应于所述离开事件,将离开的个人设备从所述待调度池中删除,跳转至处理S68。
S66:监听所述待调度池中个人设备的处理能力等级是否满足设定条件。
S67:将处理能力等级不满足设定条件的个人设备从所述待调度池中删除。
S68:响应于所述删除,从所述活动设备树中选取处理能力等级满足设定条件的个人设备补入所述待调度池。
由于在本实施方式中,在集群中处理设备的数量减少的情形下,补充符合要求的个人设备,因此可以有效保证集群的稳定性。
【方法实施方式7】
图7是根据本发明实施方式的集群的架构图。参见图7,在本实施方式中,集群包括:master机器(主设备)、slave机器(从设备)、monitor机器(监控设备)和数据中心。
其中,master机器具有如下功能:
1)推选出一个master机器来决策和调度slave机器;
2)监听集群中slave机器的加入和离开事件,并根据加入和离开事件更新slave机器列表;
3)监听并处理各slave机器的告警信息,移除资源紧张的slave机器并补入新的slave机器;
4)查询各slave机器的运行状态(包括机器性能和任务执行状态);
5)故障恢复能力。
Slave机器具有如下功能:
1)定时监控自身性能,如果资源条件不满足要求,则发送告警信息给master机器;
2)定时监控任务的执行状态;
3)接受monitor机器发送的命令(例如软件升级或版本查询等命令)并在本地执行。
Monitor机器具有如下功能:
1)查询并显示master机器和slave机器的运行状态和版本号;
2)查询并显示slave机器上任务处理程序的运行状态和版本号;
3)控制单个slave机器的启动和停止;
4)下发命令(例如软件升级命令)到slave机器。
数据中心具有如下功能:用于通过监控树节点的变化来实现master机器和slave机器的协同工作。
其中,所述树节点例如包括:alivemaster(活动的主设备)节点、aliveslave(活动的从设备)节点、topnslave(从设备列表)节点、和swupdate(软件升级)节点。
下面对以上各节点分别进行说明。
1)alivemaster:当master机器启动时,会在该节点下添加用于标识自身的子节点来完成注册;
2)aliveslave:当slave机器在启动时,会在该节点下添加用于表示自身的会话(session)子节点来完成注册,slave机器退出后该会话子节点会被自动删除。其中,master机器通过监听该节点的子节点变化情况来感知slave机器的加入或离开事件;
3)topnslave:该节点存储slave机器列表(记载要参与调度的slave机器),由master机器负责更新该slave机器列表,例如,去除该列表中已经离线的slave机器、去除该列表中虽然在线但不满足要求的slave机器、将aliveslave节点下满足要求的slave机器补充至该列表中,此外,slave机器负责监听该节点的变化以判断其自身是否属于所述列表,若属于,则使本地的任务处理程序处于启动状态,并定时监控自身性能,若不属于,则使本地的任务处理程序处于关闭状态;
4)swupdate:该节点存储软件包地址,master机器负责向该节点写入软件包地址,各slave机器在监听到该节点发生变化后,判断自身是否需要进行软件升级,若需要,则根据软件包地址进行软件升级,并且在升级完成后,重新根据topnslave节点判断自身是否需要启动任务处理程序。
此外,如图8所示,在本实施方式中,个人设备首先启动web(网络)容器,作为集群内交换数据的通道,以接收请求数据(例如,HTTP(HyperText Transfer Protocol,超文本传输协议)请求)并返回响应结果,然后读取配置文件中的工作模式参数以识别自身的工作模式(包括master模式和slave模式),若为master模式,则在alivemaster节点下添加标识自身的子节点,并与其他的master机器一同基于选主策略选取一个master机器作为活动的决策机器,若该决策机器异常退出,则再自动推选出新的决策机器,由此个人设备完成了工作模式的启动。
下面将分别介绍master工作模式和slave工作模式:
master工作模式:
步骤1:master机器接收aliveslave节点的节点变化信息,以感知slave机器的加入事件或离开事件。
步骤2:响应于所述加入事件,master机器预估加入的slave机器的处理能力等级。具体地:
master机器识别slave机器是否记录于设定的黑名单配置文件,若是,则确定slave机器的处理能力等级为第一等级,若否,则将slave机器的空闲资源与设定阈值进行比较,若空闲资源小于设定阈值,则确定slave机器的处理能力等级为第一等级,若空闲资源大于或等于设定阈值,则确定slave机器的处理能力等级为第二等级。
步骤3:若该加入的slave机器的处理能力等级满足设定条件(例如,处理能力等级为第二等级),则将该slave机器添加至slave机器列表中以便于调度该slave机器处理任务。
步骤4:响应于所述离开事件,master机器识别离开的slave机器是否属于slave机器列表,若否,则返回执行步骤1,若是,则将该离开的slave机器从slave机器列表中删除。
步骤5:master机器监听slave机器列表中slave机器的处理能力等级是否满足设定条件。
例如,若master机器监听到黑名单配置文件更新或者接收到slave机器发送的告警信息(如slave机器发现自身的空闲资源不满足要求),则重新判断slave机器的处理能力等级是否满足设定条件。
步骤6:master机器将处理能力等级不满足设定条件的slave机器从slave机器列表中删除。
步骤7:响应于所述删除,master机器从aliveslave节点中选取处理能力等级满足设定条件的slave机器补入slave机器列表。
例如,master机器按照空闲资源由高到低的顺序或者按照CPU(CentralProcessing Unit,中央处理器)使用率由低到高的顺序,从aliveslave节点中选取slave机器补入slave机器列表。
slave工作模式:
步骤1:slave机器响应于启动指令,与数据中心之间建立连接以向数据中心发送自身的标识信息(例如,IP(Internet Protocol,网络协议)地址)。
步骤2:slave机器识别salve机器列表中是否存在对应于该标识信息的列表项。若是,则执行步骤3,若否,则执行步骤5。
步骤3:slave机器使任务处理程序处于启动状态以便于处理任务,并且,定时监控自身的资源状态。
步骤4:在资源状态不满足设定条件的情形下,slave机器向master机器发送告警信息。
步骤5:slave机器使所述任务处理程序处于停止状态。
相应地,在本实施方式中,数据中心响应于与slave机器间的连接建立事件,根据slave机器发送的标识信息向aliveslave节点添加子节点,根据所述添加生成第一节点变化信息(用于指示aliveslave节点中新增了子节点),将所述第一节点变化信息推送至master机器,以便于master机器基于所述第一节点变化信息更新slave机器列表,并从更新后的slave机器列表中选取slave机器处理任务;此外,数据中心还响应于与slave机器间的连接断开事件从aliveslave节点中删除子节点,根据所述删除生成第二节点变化信息(用于指示aliveslave节点中减少了子节点),将所述第二节点变化信息推送至master机器,以便于master机器基于所述第二节点变化信息更新slave机器列表。
此外,在本实施方式中,对salve机器设定CPU和内存使用上限,以降低对个人用户的使用所造成的影响。
另外,在本实施方式中,集群通过调用java(一种面向对象的编程语言)接口中的公共方法来实现支持多种任务,并且基于java的跨平台性,可以在windows(一种操作系统)和linux(一种操作系统)平台同时部署slave机器。
【产品实施方式1】
图9是根据本发明产品实施方式1的任务处理装置的结构示意图。参见图9,在本实施方式中,任务处理装置10包括:第一监听模块11、预估模块12和处理模块13,具体地:
第一监听模块11用于监听个人设备的加入事件。
预估模块12用于响应于第一监听模块11监听到的加入事件,预估所述个人设备的处理能力等级。
处理模块13用于在预估模块12预估出的处理能力等级满足设定条件的情形下,将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
由于在本实施方式中,在感知个人设备的加入事件的基础上,进一步预估该个人设备的处理能力等级,并且在该处理能力等级满足设定条件的情形下接入该个人设备,因此,能够使集群在复用个人设备的场景下维持其性能的稳定,此外,由于集群复用个人设备,因此提高了设备的利用率、从而降低了成本,实现了高性能与低成本的有效兼顾。
【产品实施方式2】
本实施方式所提供的任务处理装置包括产品实施方式1中的全部内容,在此不再赘述。如图10所示,在本实施方式中,预估模块12包括:识别单元121和第一确定单元122,具体地:
识别单元121用于识别所述个人设备是否记录于设定的黑名单配置文件。
第一确定单元122用于在识别单元121识别出所述个人设备记录于设定的黑名单配置文件的情形下,确定所述处理能力等级为第一等级。
由于本实施方式引入黑名单配置文件来对个人设备的处理能力等级的进行预估,因此能够实现用户个性化地定义个人设备的处理能力等级。
【产品实施方式3】
本实施方式所提供的任务处理装置包括产品实施方式1中的全部内容,在此不再赘述。如图11所示,在本实施方式中,预估模板12包括:识别单元121’、第一确定单元122’、比较单元123’、第二确定单元124’和第三确定单元125’,具体地:
识别单元121’和第一确定单元122’分别同方法实施方式2中的识别单元121和第一确定单元122,在此不再赘述。
比较单元123’用于在识别单元121’识别出所述个人设备未记录于设定的黑名单配置文件的情形下,将所述个人设备的空闲资源与设定阈值进行比较。
第二确定单元124’用于在比较单元123’比较出所述空闲资源小于设定阈值的情形下,确定所述处理能力等级为所述第一等级。
第三确定单元125’用于在比较单元123’比较出所述空闲资源大于或等于设定阈值的情形下,确定所述处理能力等级为第二等级。
由于本实施方式在黑名单配置文件的基础上,进一步根据空闲资源预估个人设备的处理能力等级,因此,能够在个性化定义处理能力等级的同时保证预估结果的准确性和客观性。
【产品实施方式4】
本实施方式所提供的任务处理装置包括产品实施方式1至产品实施方式3中任一项的全部内容,在此不再赘述。其中,在本实施方式中,第一监听模块11具体通过下述方式实现监听个人设备的加入事件:根据活动设备树的节点变化信息监听个人设备的加入事件。
其中,所述活动设备树中的树节点对应于处于活动状态的个人设备。
所述节点变化信息用于指示该活动设备树中树节点的变化情况,例如,向该活动设备树中添加树节点或者从该活动设备树中删除树节点等。
举例而言,若节点变化信息指示该活动设备树中新增了树节点,则表示有个人设备启动。
【产品实施方式5】
本实施方式所提供的任务处理装置包括产品实施方式1至产品实施方式4中任一项的全部内容,在此不再赘述。如图12所示,在本实施方式中,任务处理装置10还包括:第二监听模块14和第一删除模块15,具体地:
第二监听模块14用于根据所述节点变化信息监听所述待调度池中个人设备的离开事件。
第一删除模块15用于响应于第二监听模块14监听到的离开事件,将离开的个人设备从所述待调度池中删除。
由于在本实施方式中,集群能够根据节点变化信息自动感知个人设备的离开事件,并且将离开的个人设备从集群中删除,因此,可以有效避免将任务分发至已退出的个人设备,从而保证集群的有效性。
【产品实施方式6】
本实施方式所提供的任务处理装置包括产品实施方式5中的全部内容,在此不再赘述。如图13所示,在本实施方式中,任务处理装置10还包括:第三监听模块16和第二删除模块17,具体地:
第三监听模块16用于监听所述待调度池中个人设备的处理能力等级是否满足设定条件。
第二删除模块17用于将第三监听模块16监听出处理能力等级不满足设定条件的个人设备从所述待调度池中删除。
由于在本实施方式中,集群在自动感知并删除离开的个人设备的基础上,监听其中的个人设备的处理能力等级是否满足设定条件,并且将处理能力等级不满足设定条件的个人设备删除,因此,可以有效避免将任务分发至处理能力不足的个人设备,以进一步保证集群的有效性。
【产品实施方式7】
本实施方式所提供的任务处理装置包括产品实施方式6中的全部内容,在此不再赘述。如图14所示,在本实施方式中,任务处理装置10还包括补充模块18,具体地:
补充模块18用于响应于第一删除模块15或第二删除模块17所执行的删除处理,从所述活动设备树中选取处理能力等级满足设定条件的个人设备补入所述待调度池。
由于在本实施方式中,在集群中处理设备的数量减少的情形下,补充符合要求的个人设备,因此可以有效保证集群的稳定性。
如图15所示,本发明的实施方式还提供了一种终端设备,包括存储器21和处理器22;其中,
存储器21用于存储一条或多条计算机指令,其中,所述一条或多条计算机指令被处理器22执行时能够实现如方法实施方式1至方法实施方式7中任意一项所述的方法。
由于在感知个人设备的加入事件的基础上,进一步预估该个人设备的处理能力等级,并且在该处理能力等级满足设定条件的情形下接入该个人设备,因此,能够使集群在复用个人设备的场景下维持其性能的稳定,此外,由于集群复用个人设备,因此提高了设备的利用率、从而降低了成本,实现了高性能与低成本的有效兼顾。
此外,本发明的实施方式还提供一种计算机存储介质,所述计算机存储介质用于存储一条或多条计算机指令,其中,当所述一条或多条计算机指令被执行时能够实现如方法实施方式1至方法实施方式7中任意一项所述的方法。
由于在感知个人设备的加入事件的基础上,进一步预估该个人设备的处理能力等级,并且在该处理能力等级满足设定条件的情形下接入该个人设备,因此,能够使集群在复用个人设备的场景下维持其性能的稳定,此外,由于集群复用个人设备,因此提高了设备的利用率、从而降低了成本,实现了高性能与低成本的有效兼顾。
本领域的技术人员可以清楚地了解到本发明可全部通过软件实现,也可借助软件结合硬件平台的方式来实现。基于这样的理解,本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来,所述计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,智能手机或者网络设备等)执行本发明各个实施方式或者实施方式的某些部分所述的方法。
本文中所使用的“软件”等词均指一般意义上的任意类型的计算机编码或者计算机可执行指令集,可以运行所述编码或者指令集来使计算机或其他处理器程序化以执行如上所述的本发明的技术方案的各个方面。此外,需要说明的是,根据实施方式的一个方面,在执行时实施本发明的技术方案的方法的一个或多个计算机程序不必须要在一台计算机或处理器上,而是可以分布于多个计算机或者处理器中的模块中,以执行本发明的技术方案的各个方面。
计算机可执行指令可以有许多形式,如程序模块,可以由一台或多台计算机或是其他设备执行。一般地,程序模块包括例程、程序、对象、组件以及数据结构等等,执行特定的任务或是实施特定的抽象数据类型。特别地,在各种实施方式中,程序模块进行的操作可以根据各个不同实施方式的需要进行结合或者拆分。
并且,本发明的技术方案可以体现为一种方法,并且已经提供了所述方法的至少一个示例。可以通过任何一种合适的顺序执行动作,所述动作表现为所述方法中的一部分。因此,实施方式可以构造成可以按照与所示出的执行顺序不同的顺序执行动作,其中,可以包括同时地执行一些动作(尽管在示出的实施方式中,这些动作是连续的)。
本文所给出的和使用的定义,应当对照字典、通过引用而并入的文档中的定义、和/或其通常意思进行理解。
在权利要求书中以及上述的说明书中,所有的过度短语,例如“包括”、“具有”、“包含”、“承载”、“具有”、“涉及”、“主要由…组成”以及类似词语是应理解为是开放式的,即,包含但不限于。
本发明说明书中使用的术语和措辞仅仅为了举例说明,并不意味构成限定。本领域技术人员应当理解,在不脱离所公开的实施方式的基本原理的前提下,对上述实施方式中的各细节可进行各种变化。因此,本发明的范围只由权利要求确定,在权利要求中,除非另有说明,所有的术语应按最宽泛合理的意思进行理解。
以上具体描述了本发明的各种不同的实施方式,下面以另一种形式描述本发明各实施方式的技术方案的各个方面或特征,并且其不限于下述一系列段落,为了清楚起见,可给这些段落中的一些或所有段落指定字母数字。这些段落中的每一段可以以任何合适的方式与一个或多个其他段落的内容组合。在不限定合适的组合中的一些的实例的条件下,下文中的一些段落特别引用其他段落并且进一步限定其他段落。
A1、一种任务处理方法,所述方法包括:
监听个人设备的加入事件;
响应于所述加入事件,预估所述个人设备的处理能力等级;
若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
A2、如A1所述的方法中,预估所述个人设备的处理能力等级包括:
识别所述个人设备是否记录于设定的黑名单配置文件;
若所述个人设备记录于设定的黑名单配置文件,则确定所述处理能力等级为第一等级。
A3、如A2所述的方法中,预估所述个人设备的处理能力等级还包括:
若所述个人设备未记录于设定的黑名单配置文件,则将所述个人设备的空闲资源与设定阈值进行比较;
若所述空闲资源小于设定阈值,则确定所述处理能力等级为所述第一等级。
A4、如A3所述的方法中,预估所述个人设备的处理能力等级还包括:
若所述空闲资源大于或等于设定阈值,则确定所述处理能力等级为第二等级。
A5、如A4所述的方法中,监听个人设备的加入事件包括:
根据活动设备树的节点变化信息监听个人设备的加入事件。
A6、如A5所述的方法中,所述方法还包括:
根据所述节点变化信息监听所述待调度池中个人设备的离开事件;
响应于所述离开事件,将离开的个人设备从所述待调度池中删除。
A7、如A5所述的方法中,所述方法还包括:
监听所述待调度池中个人设备的处理能力等级是否满足设定条件;
将处理能力等级不满足设定条件的个人设备从所述待调度池中删除。
A8、如A6或A7所述的方法中,所述方法还包括:
响应于所述删除,从所述活动设备树中选取处理能力等级满足设定条件的个人设备补入所述待调度池。
B9、一种任务处理装置,所述装置包括:
第一监听模块,用于监听个人设备的加入事件;
预估模块,用于响应于所述加入事件,预估所述个人设备的处理能力等级;
处理模块,用于在所述处理能力等级满足设定条件的情形下,将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
B10、如B9所述的装置中,所述预估模块包括:
识别单元,用于识别所述个人设备是否记录于设定的黑名单配置文件;
第一确定单元,用于在所述个人设备记录于设定的黑名单配置文件的情形下,确定所述处理能力等级为第一等级。
B11、如B10所述的装置中,所述预估模块还包括:
比较单元,用于在所述个人设备未记录于设定的黑名单配置文件的情形下,将所述个人设备的空闲资源与设定阈值进行比较;
第二确定单元,用于在所述空闲资源小于设定阈值的情形下,确定所述处理能力等级为所述第一等级。
B12、如B11所述的装置中,所述预估模块还包括:
第三确定单元,用于在所述空闲资源大于或等于设定阈值的情形下,确定所述处理能力等级为第二等级。
B13、如B12所述的装置中,所述第一监听模块,用于通过下述处理实现监听个人设备的加入事件:根据活动设备树的节点变化信息监听个人设备的加入事件。
B14、如B13所述的装置中,所述装置还包括:
第二监听模块,用于根据所述节点变化信息监听所述待调度池中个人设备的离开事件;
第一删除模块,用于响应于所述离开事件,将离开的个人设备从所述待调度池中删除。
B15、如B14所述的装置中,所述装置还包括:
第三监听模块,用于监听所述待调度池中个人设备的处理能力等级是否满足设定条件;
第二删除模块,用于将处理能力等级不满足设定条件的个人设备从所述待调度池中删除。
B16、如B14或B15所述的装置中,所述装置还包括:
补充模块,用于响应于所述删除,从所述活动设备树中选取处理能力等级满足设定条件的个人设备补入所述待调度池。
C17、一种终端设备,包括存储器和处理器;其中,
所述存储器用于存储一条或多条计算机指令,其中,所述一条或多条计算机指令被所述处理器执行时能够实现如A1至A8中任一项所述的方法。
D18、一种计算机存储介质,用于存储一条或多条计算机指令,其中,当所述一条或多条计算机指令被执行时能够实现如A1至A8中任一项所述的方法。
Claims (10)
1.一种任务处理方法,其特征在于,所述方法包括:
监听个人设备的加入事件;
响应于所述加入事件,预估所述个人设备的处理能力等级;
若所述处理能力等级满足设定条件,则将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
2.如权利要求1所述的方法,其特征在于,预估所述个人设备的处理能力等级包括:
识别所述个人设备是否记录于设定的黑名单配置文件;
若所述个人设备记录于设定的黑名单配置文件,则确定所述处理能力等级为第一等级。
3.如权利要求2所述的方法,其特征在于,预估所述个人设备的处理能力等级还包括:
若所述个人设备未记录于设定的黑名单配置文件,则将所述个人设备的空闲资源与设定阈值进行比较;
若所述空闲资源小于设定阈值,则确定所述处理能力等级为所述第一等级。
4.如权利要求3所述的方法,其特征在于,预估所述个人设备的处理能力等级还包括:
若所述空闲资源大于或等于设定阈值,则确定所述处理能力等级为第二等级。
5.如权利要求4所述的方法,其特征在于,监听个人设备的加入事件包括:
根据活动设备树的节点变化信息监听个人设备的加入事件。
6.一种任务处理装置,其特征在于,所述装置包括:
第一监听模块,用于监听个人设备的加入事件;
预估模块,用于响应于所述加入事件,预估所述个人设备的处理能力等级;
处理模块,用于在所述处理能力等级满足设定条件的情形下,将所述个人设备添加至待调度池中以便于调度所述个人设备处理任务。
7.如权利要求6所述的装置,其特征在于,所述预估模块包括:
识别单元,用于识别所述个人设备是否记录于设定的黑名单配置文件;
第一确定单元,用于在所述个人设备记录于设定的黑名单配置文件的情形下,确定所述处理能力等级为第一等级。
8.如权利要求7所述的装置,其特征在于,所述预估模块还包括:
比较单元,用于在所述个人设备未记录于设定的黑名单配置文件的情形下,将所述个人设备的空闲资源与设定阈值进行比较;
第二确定单元,用于在所述空闲资源小于设定阈值的情形下,确定所述处理能力等级为所述第一等级。
9.如权利要求8所述的装置,其特征在于,所述预估模块还包括:
第三确定单元,用于在所述空闲资源大于或等于设定阈值的情形下,确定所述处理能力等级为第二等级。
10.如权利要求9所述的装置,其特征在于,
所述第一监听模块,用于通过下述处理实现监听个人设备的加入事件:根据活动设备树的节点变化信息监听个人设备的加入事件。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710999222.2A CN107766156B (zh) | 2017-10-20 | 2017-10-20 | 任务处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710999222.2A CN107766156B (zh) | 2017-10-20 | 2017-10-20 | 任务处理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107766156A true CN107766156A (zh) | 2018-03-06 |
CN107766156B CN107766156B (zh) | 2020-07-10 |
Family
ID=61269257
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710999222.2A Expired - Fee Related CN107766156B (zh) | 2017-10-20 | 2017-10-20 | 任务处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107766156B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109614236A (zh) * | 2018-12-07 | 2019-04-12 | 深圳前海微众银行股份有限公司 | 集群资源动态调整方法、装置、设备及可读存储介质 |
CN113034107A (zh) * | 2021-03-29 | 2021-06-25 | 北京沃东天骏信息技术有限公司 | 一种流程处理方法和装置 |
CN113157240A (zh) * | 2021-04-27 | 2021-07-23 | 百度在线网络技术(北京)有限公司 | 语音处理方法、装置、设备、存储介质及计算机程序产品 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102291260A (zh) * | 2011-08-15 | 2011-12-21 | 南京财经大学 | 一种基于as间合作的粮库监控网络系统处理方法 |
CN103019837A (zh) * | 2011-09-27 | 2013-04-03 | 中国移动通信集团公司 | 资源调度方法、装置及终端设备 |
CN103164262A (zh) * | 2011-12-15 | 2013-06-19 | 阿里巴巴集团控股有限公司 | 一种任务管理方法及装置 |
KR20140011068A (ko) * | 2012-07-17 | 2014-01-28 | 현대오토에버 주식회사 | 사업장에서의 모바일 디바이스 관리 시스템 |
CN106095586A (zh) * | 2016-06-23 | 2016-11-09 | 东软集团股份有限公司 | 一种任务分配方法、装置及系统 |
-
2017
- 2017-10-20 CN CN201710999222.2A patent/CN107766156B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102291260A (zh) * | 2011-08-15 | 2011-12-21 | 南京财经大学 | 一种基于as间合作的粮库监控网络系统处理方法 |
CN103019837A (zh) * | 2011-09-27 | 2013-04-03 | 中国移动通信集团公司 | 资源调度方法、装置及终端设备 |
CN103164262A (zh) * | 2011-12-15 | 2013-06-19 | 阿里巴巴集团控股有限公司 | 一种任务管理方法及装置 |
KR20140011068A (ko) * | 2012-07-17 | 2014-01-28 | 현대오토에버 주식회사 | 사업장에서의 모바일 디바이스 관리 시스템 |
CN106095586A (zh) * | 2016-06-23 | 2016-11-09 | 东软集团股份有限公司 | 一种任务分配方法、装置及系统 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109614236A (zh) * | 2018-12-07 | 2019-04-12 | 深圳前海微众银行股份有限公司 | 集群资源动态调整方法、装置、设备及可读存储介质 |
CN113034107A (zh) * | 2021-03-29 | 2021-06-25 | 北京沃东天骏信息技术有限公司 | 一种流程处理方法和装置 |
CN113157240A (zh) * | 2021-04-27 | 2021-07-23 | 百度在线网络技术(北京)有限公司 | 语音处理方法、装置、设备、存储介质及计算机程序产品 |
Also Published As
Publication number | Publication date |
---|---|
CN107766156B (zh) | 2020-07-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108683516B (zh) | 一种应用实例的升级方法、装置和系统 | |
US7533173B2 (en) | Policy driven automation - specifying equivalent resources | |
US8549536B2 (en) | Performing a workflow having a set of dependancy-related predefined activities on a plurality of task servers | |
CN110505155B (zh) | 请求降级处理方法、装置、电子设备及存储介质 | |
US20170329643A1 (en) | Distributed node intra-group task scheduling method and system | |
US9703610B2 (en) | Extensible centralized dynamic resource distribution in a clustered data grid | |
US20050091352A1 (en) | Policy driven autonomic computing-specifying relationships | |
CN107766156B (zh) | 任务处理方法及装置 | |
US8381222B2 (en) | Policy driven automation—specifying equivalent resources | |
CN107908488B (zh) | 消息请求接口交互方法、装置、计算机设备及存储介质 | |
CN111694517B (zh) | 分布式数据迁移方法、系统和电子设备 | |
CN113067850A (zh) | 一种多云场景下的集群编排系统 | |
EP3399413B1 (en) | Component logical threads quantity adjustment method and device | |
CN103354990A (zh) | 处理云平台中的虚拟机的系统和方法 | |
CN111400041A (zh) | 服务器配置文件的管理方法、装置及计算机可读存储介质 | |
US12035156B2 (en) | Communication method and apparatus for plurality of administrative domains | |
CN110944067B (zh) | 一种负载均衡方法和服务器 | |
US8719622B2 (en) | Recording and preventing crash in an appliance | |
CN117130730A (zh) | 面向联邦Kubernetes集群的元数据管理方法 | |
US8892702B2 (en) | Policy driven autonomic computing-programmatic policy definitions | |
ur Rehman et al. | Decision-making framework for user-based inter-cloud service migration | |
US8276150B2 (en) | Methods, systems and computer program products for spreadsheet-based autonomic management of computer systems | |
CN117170842A (zh) | 线程池管理架构及线程池管理方法 | |
CN111061723A (zh) | 工作流实现方法及装置 | |
CN101604256A (zh) | 虚拟化软件的可靠执行方法和节点管理装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: 100085 Beijing, Haidian District on the road to the information on the ground floor of the 1 to the 3 floor of the 2 floor, room 11, 202 Applicant after: Beijing Xingxuan Technology Co.,Ltd. Address before: 100085 Beijing, Haidian District on the road to the information on the ground floor of the 1 to the 3 floor of the 2 floor, room 11, 202 Applicant before: Beijing Xiaodu Information Technology Co.,Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200710 |
|
CF01 | Termination of patent right due to non-payment of annual fee |