CN104699542B - 任务处理方法及系统 - Google Patents

Abstract

本发明实施例提供的任务处理方法及系统，可以对待处理任务进行拆分，获得多个子任务，任一子任务的颗粒度均为预设的多个颗粒度中的一个；从各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理。由于各任务处理节点所要处理的任务的颗粒度与该任务处理节点的处理能力相匹配，因此各任务处理节点处理子任务所花费的时间相当，不会出现处理能力高的任务处理节点长时间处于空闲状态进行等待的情况。本发明有效提高了资源利用情况和任务处理速度。

Description

任务处理方法及系统

技术领域

本发明涉及任务处理技术领域，特别是涉及任务处理方法及系统。

背景技术

随着科学技术的发展，具有任务处理能力的各种智能电子设备的性能也越来越高。通过将一个复杂的任务拆分为多个子任务，并将子任务分配到多个任务处理节点上进行处理，可以提高任务的处理速度。

具体的过程为：

首先将复杂的任务平均拆分为多个子任务，每个子任务的大小相同；

在任务拆分完毕后，将各个子任务平均分配到各任务处理节点上进行处理，每个任务处理节点上的子任务数量也是相同的。

申请人研究发现：不同的任务处理节点的处理能力并不相同，由于每个任务处理节点上分配的子任务的大小和数量均相同，因此处理能力较高的任务处理节点在处理任务完毕后将处于空闲状态，以等待处理能力较低的任务处理节点处理完毕，只有全部子任务均处理完毕后，该复杂的任务才处理完毕，这无疑浪费了资源，不利于任务的快速处理。

发明内容

本发明实施例的目的在于提供一种任务处理方法及系统，以实现任务的快速处理。

为达到上述目的，本发明实施例公开了一种任务处理方法，应用于任务分发服务器中，所述任务分发服务器与多个任务处理节点相连接，所述方法包括：

获得待处理任务，对所述待处理任务进行拆分，获得多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；

从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理。

可选的，还包括：

接收相连接的所述多个任务处理节点发送的任务处理能力；

根据所接收的任务处理能力更新任务处理节点的任务处理能力记录。

可选的，将对所述待处理任务进行拆分，获得多个子任务后，所述方法还包括：按照颗粒度大小，将拆分得到的各子任务放入分别与不同颗粒度对应的多个任务队列中；

所述根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理，包括：

根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

可选的，所述对所述待处理任务进行拆分，获得多个子任务，包括：

当所述多个任务队列中存在处于未满状态的任务队列时，对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务。

可选的，所述对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，包括：

调用第一线程对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列；

所述将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理，包括：

调用第二线程将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

一种任务处理系统，应用于任务分发服务器中，所述任务分发服务器与多个任务处理节点相连接，所述系统包括：任务拆分模块和任务分配模块，

所述任务拆分模块，用于获得待处理任务，对所述待处理任务进行拆分，获得多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；

所述任务分配模块，用于从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理。

可选的，还包括：处理能力接收模块和记录更新模块，

所述处理能力接收模块，用于接收相连接的所述多个任务处理节点发送的任务处理能力；

所述记录更新模块，用于根据所接收的任务处理能力更新任务处理节点的任务处理能力记录。

可选的，所述系统还包括：入列模块，用于在所述任务拆分模块将对所述待处理任务进行拆分，获得多个子任务后，按照颗粒度大小，将拆分得到的各子任务放入分别与不同颗粒度对应的多个任务队列中；

所述任务分配模块，具体设置为：从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

可选的，所述任务拆分模块，具体设置为：

当所述多个任务队列中存在处于未满状态的任务队列时，对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个。

可选的，所述任务拆分模块，具体设置为：

当所述多个任务队列中存在处于未满状态的任务队列时，调用第一线程对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；

所述任务分配模块，具体设置为：从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，调用第二线程将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

本发明实施例提供的一种任务处理方法及系统，可以将待处理任务拆分为具有不同颗粒度的子任务，并将子任务分配到任务处理能力与该子任务的颗粒度匹配的任务处理节点进行处理。由于各任务处理节点所要处理的任务的颗粒度与该任务处理节点的处理能力相匹配，因此各任务处理节点处理子任务所花费的时间相当，不会出现处理能力高的任务处理节点长时间处于空闲状态进行等待的情况。本发明有效提高了资源利用情况和任务处理速度。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种任务处理方法的流程图；

图2为本发明实施例提供的另一种任务处理方法的流程图；

图3为本发明实施例提供的另一种任务处理方法的流程图；

图4为本发明实施例提供的一种任务处理系统的结构示意图；

图5为本发明实施例提供的另一种任务处理系统的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

如图1所示，本发明实施例提供的一种任务处理方法，应用于任务分发服务器中，所述任务分发服务器与多个任务处理节点相连接，该方法可以包括：

S100、获得待处理任务，对所述待处理任务进行拆分，获得多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；

其中，任务处理节点可以为与任务分发服务器相连接的具有处理功能的设备。待处理任务可以为各种任务，例如消息推送任务等，本发明在此不做限定。

颗粒度即为任务所需的计算量，颗粒度越大，则任务所需的计算量越大。

可选的，预设的颗粒度数量可以根据各任务处理节点的处理能力来确定，例如：将各任务处理节点的处理能力划分为多个等级，预设的颗粒度数量和等级数量相同即可。

S200、从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理。

其中，选择采用节点组的方式有多种，例如：选择空闲的第一数目的任务处理节点作为采用节点组，或，选择处理能力之和与各子任务的颗粒度之和匹配的第一数目的任务处理节点作为采用节点组，或，根据为各任务处理节点设置的权重选择权重较大的第一数目的任务处理节点。

具体的，与任务分发服务器相连接的所有任务处理节点的处理能力都可以进行存储并进行更新。更新的方式可以有多种，如周期性更新、实时更新、触发性更新等。

具体的，确定具有与子任务的颗粒度匹配的任务处理能力的任务处理节点的方式可以有多种，例如：当采用节点组中存在一任务处理节点的处理能力不低于该子任务的颗粒度且不超过该子任务的颗粒度的一定百分比时，确定该任务处理节点具有与该子任务的颗粒度匹配的任务处理能力。

本发明实施例提供的一种任务处理方法，可以将待处理任务拆分为具有不同颗粒度的子任务，并将子任务分配到任务处理能力与该子任务的颗粒度匹配的任务处理节点进行处理。由于各任务处理节点所要处理的任务的颗粒度与该任务处理节点的处理能力相匹配，因此各任务处理节点处理子任务所花费的时间相当，不会出现处理能力高的任务处理节点长时间处于空闲状态进行等待的情况。本发明有效提高了资源利用情况和任务处理速度。

如图2所示，本发明实施例提供的另一任务处理方法，还以包括：

S300、接收相连接的所述多个任务处理节点发送的任务处理能力；

S400、根据所接收的任务处理能力更新任务处理节点的任务处理能力记录。

由于任务处理节点的任务处理能力可能会发生变化，因此通过接收任务处理节点发送的任务处理能力就可以更新所存储的各任务处理节点的任务处理能力记录。

其中，各任务处理节点可以仅在其任务处理能力发生变化时将变化后的任务处理能力发送到任务分发服务器中，也可以周期性的发送到任务分发服务器中。

在图1所示实施例基础上，如图3所示，本发明实施例提供的另一种任务处理方法，在S100后，还可以包括：

S110、按照颗粒度大小，将拆分得到的各子任务放入分别与不同颗粒度对应的多个任务队列中；

S200具体包括：

从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

当然，S110也可以添加到图2所示实施例上，图3所示实施例中S200的具体实现也可以应用到图2所示实施例上。

具体的，任务队列的数量可以与各子任务的颗粒度等级数量相同，例如颗粒度等级分为高、中、低三个等级，则任务队列也可以有三个，分别对应其中一个颗粒度等级。各颗粒度等级的子任务分别放入相对应的任务队列中。

其中，任务队列中的子任务可以按照放入的先后顺序分配到任务处理节点中进行处理，这样，新的子任务不断生成并放入任务队列中，而旧的子任务又不断被分配到任务处理节点中进行处理，从而形成一个连贯而有序的处理过程。

其中，图3所示实施例中S100对所述待处理任务进行拆分，获得多个子任务的具体过程可以包括：

当所述多个任务队列中存在处于未满状态的任务队列时，对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务。

具体的，可以调用第一线程对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列。

当所有任务队列已满时，可以不再拆分得到子任务，等待出现处于未满状态的任务队列时，再进行拆分，并拆分到可以分配到该处于未满状态的任务队列的子任务。

具体的，也可以调用第二线程将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

这样，通过不同的两个线程分别进行任务拆分和任务分配，不同线程之间互不干扰，并行处理，有效提高了整体处理速度。

相应于上述的方法实施例，本发明还提供了一种任务处理系统。

如图4所示，本发明实施例提供的一种任务处理系统，应用于任务分发服务器中，所述任务分发服务器与多个任务处理节点相连接，该系统可以包括：任务拆分模块100和任务分配模块200，

所述任务拆分模块100，用于获得待处理任务，对所述待处理任务进行拆分，获得多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；

其中，任务处理节点可以为与任务分发服务器相连接的具有处理功能的设备。待处理任务可以为各种任务，例如消息推送任务等，本发明在此不做限定。

颗粒度即为任务所需的计算量，颗粒度越大，则任务所需的计算量越大。

可选的，预设的颗粒度数量可以根据各任务处理节点的处理能力来确定，例如：将各任务处理节点的处理能力划分为多个等级，预设的颗粒度数量和等级数量相同即可。

所述任务分配模块200，用于从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理。

其中，选择采用节点组的方式有多种，例如：选择空闲的第一数目的任务处理节点作为采用节点组，或，选择处理能力之和与各子任务的颗粒度之和匹配的第一数目的任务处理节点作为采用节点组，或，根据为各任务处理节点设置的权重选择权重较大的第一数目的任务处理节点。

具体的，与任务分发服务器相连接的所有任务处理节点的处理能力都可以进行存储并进行更新。更新的方式可以有多种，如周期性更新、实时更新、触发性更新等。

具体的，确定具有与子任务的颗粒度匹配的任务处理能力的任务处理节点的方式可以有多种，例如：当采用节点组中存在一任务处理节点的处理能力不低于该子任务的颗粒度且不超过该子任务的颗粒度的一定百分比时，确定该任务处理节点具有与该子任务的颗粒度匹配的任务处理能力。

本发明实施例提供的一种任务处理系统，可以将待处理任务拆分为具有不同颗粒度的子任务，并将子任务分配到任务处理能力与该子任务的颗粒度匹配的任务处理节点进行处理。由于各任务处理节点所要处理的任务的颗粒度与该任务处理节点的处理能力相匹配，因此各任务处理节点处理子任务所花费的时间相当，不会出现处理能力高的任务处理节点长时间处于空闲状态进行等待的情况。本发明有效提高了资源利用情况和任务处理速度。

如图5所示，本发明实施例提供的另一种任务处理系统，还可以包括：处理能力接收模块300和记录更新模块400，

所述处理能力接收模块300，用于接收相连接的所述多个任务处理节点发送的任务处理能力；

所述记录更新模块400，用于根据所接收的任务处理能力更新任务处理节点的任务处理能力记录。

由于任务处理节点的任务处理能力可能会发生变化，因此通过接收任务处理节点发送的任务处理能力就可以更新所存储的各任务处理节点的任务处理能力记录。

其中，各任务处理节点可以仅在其任务处理能力发生变化时将变化后的任务处理能力发送到任务分发服务器中，也可以周期性的发送到任务分发服务器中。

在图4或图5所示实施例的基础上，本发明实施例提供的另一种任务处理系统，还可以包括：入列模块，用于在所述任务拆分模块100将对所述待处理任务进行拆分，获得多个子任务后，按照颗粒度大小，将拆分得到的各子任务放入分别与不同颗粒度对应的多个任务队列中；

所述任务分配模块200，具体设置为：从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

具体的，任务队列的数量可以与各子任务的颗粒度等级数量相同，例如颗粒度等级分为高、中、低三个等级，则任务队列也可以有三个，分别对应其中一个颗粒度等级。各颗粒度等级的子任务分别放入相对应的任务队列中。

其中，任务队列中的子任务可以按照放入的先后顺序分配到任务处理节点中进行处理，这样，新的子任务不断生成并放入任务队列中，而旧的子任务又不断被分配到任务处理节点中进行处理，从而形成一个连贯而有序的处理过程。

其中，所述任务拆分模块100，可以具体设置为：

当所述多个任务队列中存在处于未满状态的任务队列时，对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个。

当所有任务队列已满时，可以不再拆分得到子任务，等待出现处于未满状态的任务队列时，再进行拆分，并拆分到可以分配到该处于未满状态的任务队列的子任务。

进一步，所述任务拆分模块100，可以具体设置为：

当所述多个任务队列中存在处于未满状态的任务队列时，调用第一线程对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；

所述任务分配模块200，可以具体设置为：从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，调用第二线程将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

这样，通过不同的两个线程分别进行任务拆分和任务分配，不同线程之间互不干扰，并行处理，有效提高了整体处理速度。

需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (8)

1.一种任务处理方法，其特征在于，应用于任务分发服务器中，所述任务分发服务器与多个任务处理节点相连接，所述方法包括：

获得待处理任务，对所述待处理任务进行拆分，获得多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理；

其中，所述对所述待处理任务进行拆分，获得多个子任务后，所述方法还包括：按照颗粒度大小，将拆分得到的各子任务放入分别与不同颗粒度对应的多个任务队列中；

所述根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理，包括：

根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

2.根据权利要求1所述的方法，其特征在于，还包括：

接收相连接的所述多个任务处理节点发送的任务处理能力；

根据所接收的任务处理能力更新任务处理节点的任务处理能力记录。

3.根据权利要求1所述的方法，其特征在于，所述对所述待处理任务进行拆分，获得多个子任务，包括：

当所述多个任务队列中存在处于未满状态的任务队列时，对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务。

4.根据权利要求3所述的方法，其特征在于，所述对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，包括：

调用第一线程对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列；

所述将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理，包括：

调用第二线程将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

5.一种任务处理系统，其特征在于，应用于任务分发服务器中，所述任务分发服务器与多个任务处理节点相连接，所述系统包括：任务拆分模块和任务分配模块，

所述任务拆分模块，用于获得待处理任务，对所述待处理任务进行拆分，获得多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；所述任务分配模块，用于从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将拆分的各子任务分别分配到所述采用节点组中具有与该子任务的颗粒度匹配的任务处理能力的任务处理节点进行处理；

其中，所述系统还包括：

入列模块，用于在所述任务拆分模块将对所述待处理任务进行拆分，获得多个子任务后，按照颗粒度大小，将拆分得到的各子任务放入分别与不同颗粒度对应的多个任务队列中；

所述任务分配模块，具体设置为：从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。

6.根据权利要求5所述的系统，其特征在于，还包括：处理能力接收模块和记录更新模块，

所述处理能力接收模块，用于接收相连接的所述多个任务处理节点发送的任务处理能力；

所述记录更新模块，用于根据所接收的任务处理能力更新任务处理节点的任务处理能力记录。

7.根据权利要求5所述的系统，其特征在于，所述任务拆分模块，具体设置为：

当所述多个任务队列中存在处于未满状态的任务队列时，对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个。

8.根据权利要求7所述的系统，其特征在于，所述任务拆分模块，具体设置为：

当所述多个任务队列中存在处于未满状态的任务队列时，调用第一线程对所述待处理任务进行拆分直至所述多个任务队列中不再存在处于未满状态的任务队列，得到具有处于未满状态的任务队列对应的颗粒度的多个子任务，其中，任一所述子任务的颗粒度均为预设的多个颗粒度中的一个；

所述任务分配模块，具体设置为：从与所述任务分发服务器相连接的各任务处理节点中选择第一数目的任务处理节点作为采用节点组，根据存储的所述采用节点组中各任务处理节点的任务处理能力记录，调用第二线程将各任务队列中的子任务分别分配到所述采用节点组中具有与该任务队列对应的颗粒度匹配的任务处理能力的任务处理节点进行处理。