CN111381948A - 分布式计算任务处理方法、装备及电子设备 - Google Patents

Abstract

本发明实施例提供了一种分布式计算任务处理方法、装置及电子设备，其中，方法包括：获取当前节点的处理资源状态，所述处理资源状态至少包括当前节点未使用的处理资源信息；根据所述当前节点的处理资源状态向所述当前节点以外的其他节点发送任务请求；接收所述当前节点以外的其他节点对所述任务请求的响应。本发明实施例通过获取当前节点的处理资源状态，根据处理资源状态发送任务请求，接收到任务请求的节点根据任务请求向发送任务请求的节点分配处理任务。从而合理调配处理任务，实现处理任务的优化调度及资源利用率的最大化。

Description

分布式计算任务处理方法、装备及电子设备

技术领域

本申请涉及一种分布式计算任务处理方法、装置及电子设备，属于 计算机技术领域。

背景技术

在现有的音视频数据处理中，由于音视频采集设备设置的分散 性，每个数据采集处理节点数据量不尽相同，从而导致设置在各音 视频采集点处的视频处理设备由于各个节点数据量不同而出现负荷 不同的情况。

发明内容

本发明实施例提供一种分布式计算任务处理方法、装置及电子设备， 实现分散视频采集情况下处理任务的优化调度及资源利用率的最大化。

为了实现上述目的，本发明实施例提供了一种分布式计算任务处理 方法，包括：

获取当前节点的处理资源状态，所述处理资源状态至少包括当 前节点未使用的处理资源信息；

根据所述当前节点的处理资源状态向所述当前节点以外的其他 节点发送任务请求，其中，所述任务请求至少包含有当前节点的网 络标识以及所述处理资源状态；

接收所述当前节点以外的其他节点对所述任务请求的响应，其 中，所述响应中至少包含基于所述处理资源状态的计算任务分配信 息，所述分配信息中至少包含所述计算任务的所属节点的网络标识 以及计算数据信息。

本发明实施例还提供了一种分布式计算任务处理方法：

接收其他节点的任务请求，所述任务请求至少包括所述发送任 务请求的节点的网络标识以及处理资源状态，所述处理资源状态至 少包括发送任务请求的节点未使用的处理资源信息；

根据所述任务请求及任务状态表，向发送任务请求的节点分配 第二任务，所述任务状态表中至少包括当前节点未分配的任务信息；

向所述发送任务请求的节点发送所述第二任务的分配信息，所 述分配信息至少包括所述第二任务的所属节点的网络标识以及计算 数据信息。

本发明实施例还提供了一种分布式计算任务处理装置，包括：

处理资源状态获取模块，用于获取当前节点的处理资源状态， 所述处理资源状态至少包括当前节点未使用的处理资源信息；

任务请求发送模块，用于根据所述当前节点的处理资源状态向 所述当前节点以外的其他节点发送任务请求，其中，所述任务请求 至少包含有当前节点的网络标识以及所述处理资源状态；

响应接收模块，用于接收所述当前节点以外的其他节点对所述 任务请求的响应，其中，所述响应中至少包含基于所述处理资源状 态的计算任务分配信息，所述分配信息中至少包含所述计算任务的 所属节点的网络标识以及计算数据信息。

本发明实施例还提供了一种分布式计算任务处理装置，包括：

任务请求接收模块，用于接收当前节点以外的其他节点的任务 请求，所述任务请求至少包括所述发送任务请求的节点的网络标识 以及处理资源状态，所述处理资源状态至少包括发送任务请求的节 点未使用的处理资源信息；

任务分配模块，用于根据所述任务请求及任务状态表，向发送 任务请求的节点分配第二任务，所述任务状态表中至少包括当前节 点未分配的任务信息；

任务分配信息发送模块，用于向所述发送任务请求的节点发送 所述第二任务的分配信息，所述分配信息至少包括所述第二任务的 所属节点的网络标识以及计算数据信息。

本发明实施例还提供了一种电子设备，包括：

存储器，用于存储程序；

处理器，用于运行所述存储器中存储的所述程序，以执行上述 的分布式计算任务处理方法。

本发明实施例通过根据处理资源状态向当前节点以外的其他节 点发送任务请求，然后接收来自其他节点分配的处理任务来合理调 配处理任务，实现分散视频、音频、图片等采集情况下处理任务的 优化调度及资源利用率的最大化。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明 的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上 述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实 施方式。

附图说明

图1为本发明实施例的分布式计算任务处理方法的流程示意图 之一；

图2为本发明实施例的分布式计算任务处理方法的流程示意图 之二；

图3为本发明实施例的分布式计算任务处理方法的流程示意图 之三；

图4为本发明实施例的分布式计算任务处理方法的流程示意图 之四；

图5为本发明实施例的分布式计算任务处理装置的结构示意图 之一；

图6为本发明实施例的分布式计算任务处理装置的结构示意图 之二；

图7为本发明实施例的分布式计算任务处理装置的结构示意图 之三；

图8为本发明实施例的分布式计算任务处理装置的结构示意图 之四；

图9为本发明实施例的电子设备的结构示意图之一；

图10为本发明实施例的电子设备的结构示意图之二。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附 图中显示了本公开的示例性实施例，然而应当理解，可以以各种形 式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些 实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围 完整的传达给本领域的技术人员。

在现有的音视频数据处理中，由于音视频采集设备设置的分散 性，每个数据采集处理节点数据量都不尽相同，从而导致设置在各 音视频采集点处的视频处理设备由于各个节点数据量不同而出现负 荷不同的情况，因此，在包含多个视频处理设备的计算机网络中， 有些处理设备(节点)的视频处理任务较少，从而这些节点为处理 资源有剩余，因此可以将其看作为处于空闲状态的节点。另外，有 些视频处理设备(节点)的视频处理任务较多，这些节点的处理资 源没有剩余，因此这些节点为处于忙碌状态的节点，并且，忙碌状态的节点的过多的处理任务处于排队状态。在这种情况下，计算机 网络中就出现了处理资源与处理任务的不平衡。

在本发明实施例中，通过获取当前处理任务的节点的处理资源 状态，当该节点剩余的处理资源有能力处理额外的处理任务时，根 据当前节点的处理资源状态，向处理任务较多的节点发送任务请求， 接收到任务请求的处理任务较多的节点根据任务请求向发送任务请 求的节点分配处理任务。从而在分散视频、音频、图片等采集情况 下，合理调配处理任务，实现处理任务的优化调度及资源利用率的 最大化。

下面通过一些具体实施例来进一步说明本发明的技术方案。

实施例一

如图1所示，其为本发明实施例的分布式计算任务处理方法的 流程示意图之一，在本申请实施例中，计算机网络中包括多个节点， 该方法包括如下步骤：

S101：获取当前节点的处理资源状态。

具体地，处理资源状态可以至少包括当前节点未使用的处理资 源信息。例如，当前节点的处理资源状态可以包括已使用的处理资 源情况及未使用的处理资源情况等。在本申请实施例中，可以通过 获取当前节点的CPU算力、GPU算力、存储器的占用率、图形处理器使用率等情况来确定当前节点的处理资源状态。

S102：根据当前节点的处理资源状态向当前节点以外的其他节 点发送任务请求。

具体地，可以根据当前节点的处理资源状态，判断其是否符合 预设的条件，例如，预设条件可以为未使用的处理资源大于30％， 这里可以理解为在满足预设条件的情况下，剩余的未使用的处理资 源有能力来处理临时的处理任务。

当处理资源状态符合预设条件时，可以根据当前节点的处理资 源状态，例如，剩余的处理资源情况，向当前节点以外的其他节点 发送任务请求。在本申请实施例中，任务请求可以至少包含有当前 节点的网络标识以及处理资源状态。

例如，计算机网络中有4个节点，其中，节点1为当前节点， 并且，当前时刻节点1的处理资源状态为未使用的处理资源为总的 处理资源的40％，因此，节点1的处理资源状态符合预设的条件。 另外，当前节点以外的其他节点中，节点2，节点3、节点4为处理 任务较多的节点。因此，节点1可以向当前节点以外的其他节点发 送任务请求，其中，任务请求中可以包括节点1的网络标识以及处 理资源状态，例如，节点1的标号1或者预先设定的用于标识节点1 的字母A等和节点1剩余的处理资源情况。

进一步地，节点1可以通过向当前节点以外的其他节点广播任 务请求的方式将任务请求发送给当前节点以外的其他节点。还可以 接收来自计算任务较多的节点2、节点3、节点4广播的节点任务状 态信息，节点任务状态信息中可以包括节点的网络标识及节点未处 理的任务状态信息，然后，节点1可以比较接收到的节点任务状态 信息，选择向节点任务最多的节点发送任务请求，也可以向节点2、 节点3或者节点4中的任意节点发送任务请求。

另外，需要说明的是，在上述的场景中，计算机网络中还可以 包含多个类似于上述节点1的未使用的处理资源符合预设条件的处 于空闲状态的节点。对于该多个节点中每个节点向当前节点以外的 其他节点发送任务请求的处理可以参照节点1的处理，此处不再赘 述。

S103：接收当前节点以外的其他节点对任务请求的响应。

在本申请实施例中，响应中可以至少包含基于处理资源状态的 计算任务分配信息，分配信息中可以至少包含计算任务的所属节点 的网络标识以及计算数据信息。

具体地，例如，在上述的场景中，当节点1将任务请求通过广 播的方式发送给其他多个节点时，对于当前节点以外的其他节点任 务请求的响应，节点1可以接收最先反馈的节点的响应，也可以接 收其他多个节点的响应，然后在后续的获取计算任务时选择任意节点的响应。

进一步地，上述的当前节点以外的其他节点的对任务请求的响 应是基于当前节点的处理资源状态的计算任务分配信息，例如，节 点2接收到节点1的任务请求之后，节点2可以根据任务请求中节 点1的处理资源状态进行任务分配，例如，节点1剩余的处理资源可以处理10万个视频帧，那么，节点2可以向节点1分配10万个 视频帧的计算任务量。其中，所分配的任务可以是1个任务，也可 以是对应总任务量为10万的多个任务的组合。

需要说明的是，上述的视频帧的任务量为示例性的描述，在对 任务进行分配时，所分配的任务的任务量以及多个任务组合总的任 务量往往难以达到正好与节点1未使用的处理资源所能处理的任务 量吻合，在实际进行分配时，可以通过预先设定一个任务量匹配的 区间或者匹配度，例如，节点1未使用的处理资源可以处理10万个 视频帧，那么可以将匹配的区间预设为9万至10万。在对任务进行 分配时，所分配的任务或者多个任务的组合的任务量在该区间内即 可。

另外，在节点2向节点1反馈的计算任务分配信息中，可以包 括节点2的网络标识，以及分配给节点1的处理任务的计算数据信 息，例如，计算数据的存储地址及计算数据的数据量等信息。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例二

如图2所示，其为本发明实施例的分布式计算任务处理方法的 流程示意图之二，在本申请实施例中，计算机网络中包括多个节点， 该方法包括如下步骤：

在实施例一的基础上，在步骤S101之后，可以增加步骤S202， 以及在步骤S103之后，可以增加步骤S205。

S201：获取当前节点的处理资源状态。

在本申请实施例中，处理资源状态可以至少包括当前节点未使 用的处理资源信息。

S202：接收当前节点以外的其他节点的任务列表。

具体地，可以接收对读取任务列表的请求的响应，响应中可以 至少包括任务列表及任务列表所属节点的网络标识，读取任务列表 的请求中可以至少包括当前节点的网络标识。

具体地，这里的任务列表可以记录计算机网络中所有节点的任 务信息的列表，例如，各个节点已完成的处理任务、正在处理的任 务、以及未处理的任务信息等。

另外，任务列表可以存储在任一节点上，还可以存储在计算机 网络以外的节点上，例如，云端的节点。

S203：根据当前节点的处理资源状态向当前节点以外的其他节 点发送任务请求。

在本申请实施例中，任务请求可以至少包含有当前节点的网络 标识以及处理资源状态。

具体地，可以根据处理资源状态选择任务列表中的第一任务， 将包含有针对第一任务的选择信息发送给第一任务的所属节点。

例如，可以根据当前节点的处理资源中未使用的处理资源在任 务列表中选择处理任务(为方便描述，这里称为第一处理任务)。 例如，在上述的计算机网络中，节点1剩余的处理资源可以处理10 万个视频帧，那么节点1可以在任务列表中选择对应任务量为10万个视频帧的处理任务。其中，节点1可以任意选择任务列表中未处 理任务较多的节点，还可以选择任务列表中未处理的任务最多的节 点，然后，在该节点的未处理的任务中选择第一任务，并将针对该 第一任务的选择信息发送给该节点。

其中，所分配的第一任务可以是1个任务，也可以是对应总任 务量为10万的多个任务的组合。

需要说明的是，上述的视频帧的任务量为示例性的描述，在对 第一任务进行分配时，所分配的任务的任务量以及多个任务组合总 的任务量往往难以达到正好与节点1未使用的处理资源所能处理的 任务量吻合，在实际进行分配时，可以通过预先设定一个任务量匹 配的区间或者匹配度，例如，节点1未使用的处理资源可以处理10 万个视频帧，那么可以将匹配的区间预设为9万至10万。在对任务 进行分配时，所分配的任务或者多个任务的组合的任务量在该区间 内即可。

S204：接收当前节点以外的其他节点对任务请求的响应。

在本申请实施例中，响应中可以至少包含基于处理资源状态的 计算任务分配信息，分配信息中可以至少包含计算任务的所属节点 的网络标识以及计算数据信息。

S205：根据计算任务分配信息，获取计算任务。

具体地，计算任务分配信息可以包括计算任务的所属节点以及 计算数据信息，例如，计算数据的存储地址及计算数据的数据量等 信息。

另外，步骤S201、S204与实施例一种的Si01、S103相同，此 处不再赘述。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例三

如图3所示，其为本发明实施例的分布式计算任务处理方法的 流程示意图之三，其中，计算机网络中包括多个节点，该方法包括 如下步骤：

S301：接收当前节点以外的其他节点的任务请求。

具体地，当前节点可以接收一个节点的任务请求，也可以接收 多个节点的任务请求。例如，计算机网络中包括4个节点，节点4 可以接收来自节点1的任务请求后不再接收来自当前节点以外的其 他节点的任务请求，也可以接收来自节点1、节点2、节点3等多个 节点的任务请求。

在本申请实施例中，任务请求中可以包括发送任务请求的节点 的网络标识，例如节点1的标号1或者预先设定的用于标识节点1 的字母A等。另外，还可以包括发送任务请求的节点的处理资源状 态，处理资源状态可以至少包括发送任务请求的节点未使用的处理资源信息。例如，未使用的CPU、存储器、图形处理器的信息。

5302：根据任务请求及任务状态表，向发送任务请求的节点分 配第二任务。

具体地，在本申请实施例中，任务状态表中可以至少包括当前 节点未分配的任务信息。例如，可以根据发送任务请求的节点的处 理资源状态，从任务状态表中未分配的任务中分配第二任务。

例如，在上述的计算机网络中，节点4的任务状态表中存在100 个任务，其中任务1至任务20为已处理的任务，任务21为节点4 正在处理的任务，任务22至任务100为未处理的任务，在未处理的 任务当中任务80至任务任务100为已经分配给当前节点以外的其他 节点处理的任务，因此，可以在未处理的且未分配的任务22至任务 79中向发送任务请求的节点1分配第二任务。

进一步地，在任务22至任务79中，根据任务请求中发送任务 请求的节点1的处理资源状态向其分配第二任务，例如，节点1的 未使用的处理资源可以处理10万个视频帧，在任务22至任务79中， 第二任务的分配可以按照任务生成的先后顺序，将对应10万个视频帧的任务分配为第二任务。其中，所分配的第二任务可以是任务22 至任务79中的一个任务，也可以是多个总任务量为10万个视频帧 的任务的组合。

需要说明的是，上述的视频帧的任务量为示例性的描述，在对 第二任务进行分配时，节点4的任务中各个任务的任务量以及多个 任务组合总的任务量往往难以达到正好与节点1未使用的处理资源 所能处理的任务量吻合，在实际进行分配时，可以通过预先设定一 个任务量匹配的区间或者匹配度，例如，节点1未使用的处理资源 可以处理10万个视频帧，那么可以将匹配的区间预设为9万至10 万。在对第二任务进行分配时，所分配的任务或者多个任务的组合 的任务量在该区间内即可。

此外，任务状态表中未分配的任务信息中还可以包括优先处理 的任务信息，因此，可以根据发送任务请求的节点的处理资源状态， 从任务状态表中优先处理的任务中分配第二任务。

例如，在上述的计算机网络中，未分配的未处理任务22至任务 79中，任务22至任务30为需要优先处理的任务，那么，在分配第 二任务时，可以优先任务22至任务30进行分配，当任务22至任务 30的任务量没有达到节点1未使用的处理资源所能处理的任务量 时，再在剩余的任务31至任务79中分配。

S303：向发送任务请求的节点发送第二任务的分配信息。

在本申请实施例中，分配信息可以至少包括第二任务的所属节 点的网络标识以及计算数据信息。

具体地，第二任务的所属节点的网络标识可以为节点的标号或 者预先设定的用于标识该节点的字母等。计算数据信息可以包括计 算数据的存储地址及计算数据的数据量等信息。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例四

如图4所示，其为本发明实施例的分布式计算任务处理方法的 流程示意图之四，该方法包括如下步骤：

在实施例三的基础上，在步骤S302之后可以增加步骤S403或 者步骤S404。

S401：接收当前节点以外的其他节点的任务请求。

在本申请实施例中，任务请求可以至少包括发送任务请求的节 点的网络标识以及处理资源状态，处理资源状态可以至少包括发送 任务请求的节点未使用的处理资源信息。

S402：根据任务请求及任务状态表，向发送任务请求的节点分 配第二任务。

在本申请实施例中，任务状态表中可以至少包括当前节点未分 配的任务信息。

S403：在任务状态表中将第二任务标记为已分配的任务。

具体地，为避免同一个任务被重复的分配而浪费处理资源，可 以在向发送任务请求的节点分配第二任务之后，在任务状态表中将 第二任务标记为已分配的任务。其中，这里对第二任务的标记可以 通过不同的方式实现，例如，将未分配的任务和已分配的任务存储 在不同的分区，然后在任务状态表中更新已分配的第二任务的存储 位置。例如，还可以在任务状态表中对第二任务增加表示该任务为 已分配的任务的字段。

S404：在任务状态表中删除第二任务。

具体地，为避免同一个任务被重复的分配而浪费处理资源，可 以在向发送任务请求的节点分配第二任务之后，在任务状态表中删 除第二任务。

S405：向发送任务请求的节点发送第二任务的分配信息。

在本申请实施例中，分配信息可以至少包括第二任务的所属节 点的网络标识以及计算数据信息。

另外，步骤S401、S402及S405与实施例三中的S301、S302及 S303相同，此处不再赘述。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例五

如图5所示，其为本发明实施例的分布式计算任务处理装置的 结构示意图之一，该装置用于执行实施例一中的步骤S101至S103， 该装置包括：

处理资源状态获取模块501，用于获取当前节点的处理资源状 态，在本申请实施例中，处理资源状态可以至少包括当前节点未使 用的处理资源信息。

具体地，当前节点的处理资源状态可以包括已使用的处理资源 情况及未使用的处理资源情况等。其中，可以通过获取当前节点的 CPU的使用率、存储器的占用率、图形处理器使用率等情况来确定 当前节点的处理资源状态。

任务请求发送模块502，用于根据当前节点的处理资源状态向当 前节点以外的其他节点发送任务请求，在本申请实施例中，任务请 求可以至少包含有当前节点的网络标识以及处理资源状态。

具体地，可以根据当前节点的处理资源状态，判断其是否符合 预设的条件，例如，预设条件可以为未使用的处理资源大于30％， 这里可以理解为在满足预设条件的情况下，剩余的未使用的处理资 源有能力来处理临时的处理任务。

当处理资源状态符合预设条件时，可以根据当前节点的处理资 源状态，例如，剩余的处理资源情况，向当前节点以外的其他节点 发送任务请求。

响应接收模块503，用于接收当前节点以外的其他节点对任务请 求的响应，在本申请实施例中，响应中可以至少包含基于处理资源 状态的计算任务分配信息，分配信息中至少包含计算任务的所属节 点的网络标识以及计算数据信息。

具体地，计算任务的所属节点的网络标识可以为节点的标号或 者预先设定的用于标识该节点的字母等。计算数据信息可以包括计 算数据的存储地址及计算数据的数据量等信息。

具体的，本发明实施例的分布式计算任务处理装置中各模块实现其 功能的具体过程可参见上述实施例一所示方法实施例中的相关描述，此 处不再赘述。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例六

如图6所示，其为本发明实施例的分布式计算任务处理装置的 结构示意图之二，本发明实施例的分布式计算任务处理装置，在实 施例五的基础上，还可以包括任务列表接收模块504和计算任务获 取模块505。

任务列表接收模块504，用于接收当前节点以外的其他节点的任 务列表。

具体地，可以接收对读取任务列表的请求的响应，响应中至少 包括任务列表及任务列表所属节点的网络标识，读取任务列表的请 求中至少包括当前节点的网络标识。

具体地，这里的任务列表可以记录计算机网络中所有节点的任 务信息的列表，例如，各个节点已完成的处理任务、正在处理的任 务、以及未处理的任务信息等。

另外，任务列表可以存储在任一节点上，还可以存储在计算机 网络以外的节点上，例如，云端的节点。

此外，任务请求发送模块502还用于，根据处理资源状态选择 任务列表中的第一任务，将包含有针对第一任务的选择信息发送给 第一任务的所属节点。

计算任务获取模块505，用于根据计算任务分配信息，获取计算 任务。

具体地，计算任务分配信息可以包括计算任务的所属节点以及 计算数据信息，例如，计算数据的存储地址及计算数据的数据量等 信息。

具体的，本发明实施例的分布式计算任务处理装置中各模块实现其 功能的具体过程可参见上述实施例二所示方法实施例中的相关描述，此 处不再赘述。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例七

如图7所示，其为本发明实施例的分布式计算任务处理装置的 结构示意图之三，该装置用于执行实施例三中的步骤S301至S303， 该装置包括：

任务请求接收模块701，用于接收当前节点以外的其他节点的任 务请求，在本申请实施例中，任务请求可以至少包括发送任务请求 的节点的网络标识以及处理资源状态，处理资源状态可以至少包括 发送任务请求的节点未使用的处理资源信息。

具体地，当前节点可以接收一个节点的任务请求，也可以接收 多个节点的任务请求。例如，计算机网络中包括4个节点，节点4 可以接收来自节点1的任务请求后不再接收来自当前节点以外的其 他节点的任务请求，也可以接收来自节点1、节点2、节点3等多个 节点的任务请求。

其中，任务请求中可以包括发送任务请求的节点的网络标识， 例如节点1的标号1或者预先设定的用于标识节点1的字母A等。 另外，还包括发送任务请求的节点的处理资源状态，例如该节点未 使用的处理资源信息，例如，未使用的CPU、存储器、图形处理器 的信息。

任务分配模块702，用于根据任务请求及任务状态表，向发送任 务请求的节点分配第二任务，在本申请实施例中，任务状态表中可 以至少包括当前节点未分配的任务信息。

具体地，可以根据发送任务请求的节点的处理资源状态，从任 务状态表中未分配的任务中分配第二任务。

此外，任务状态表中未分配的任务信息中还可以包括优先处理 的任务信息，因此，可以根据发送任务请求的节点的处理资源状态， 从任务状态表中优先处理的任务中分配第二任务。

任务分配信息发送模块703，用于向发送任务请求的节点发送第 二任务的分配信息，在本申请实施例中，分配信息可以至少包括第 二任务的所属节点的网络标识以及计算数据信息。

具体地，第二任务的所属节点的网络标识可以为节点的标号或 者预先设定的用于标识该节点的字母等。计算数据信息可以包括计 算数据的存储地址及计算数据的数据量等信息。

具体的，本发明实施例的分布式计算任务处理装置中各模块实现其 功能的具体过程可参见上述实施例三所示方法实施例中的相关描述，此 处不再赘述。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例八

如图8所示，其为本发明实施例的分布式计算任务处理装置的 结构示意图之四，本发明实施例的分布式计算任务处理装置，在实 施例七的基础上，还可以包括任务标记模块704或任务删除模块 705。

任务标记模块704，用于在根据任务请求及任务状态表，向发送 任务请求的节点分配第二任务之后，在任务状态表中将第二任务标 记为已分配的任务。

具体地，为避免同一个任务被重复的分配而浪费处理资源，可 以在向发送任务请求的节点分配第二任务之后，在任务状态表中将 第二任务标记为已分配的任务。其中，这里对第二任务的标记可以 通过不同的方式实现，例如，将未分配的任务和已分配的任务存储 在不同的分区，然后在任务状态表中更新已分配的第二任务的存储 位置。例如，还可以在任务状态表中对第二任务增加表示该任务为 已分配的任务的字段。

任务删除模块705，用于在根据任务请求及任务状态表，向发送 任务请求的节点分配第二任务之后，在任务状态表中删除第二任务。

具体地，为避免同一个任务被重复的分配而浪费处理资源，可 以在向发送任务请求的节点分配第二任务之后，在任务状态表中删 除第二任务。

具体的，本发明实施例的分布式计算任务处理装置中各模块实现其 功能的具体过程可参见上述实施例四所示方法实施例中的相关描述，此 处不再赘述。

本发明实施例，通过获取当前处理任务的节点的处理资源状态， 当该节点剩余的处理资源有能力处理额外的处理任务时，根据当前 节点的处理资源状态，向处理任务较多的节点发送任务请求，接收 到任务请求的处理任务较多的节点根据任务请求向发送任务请求的 节点分配处理任务。从而在分散视频、音频、图片等采集情况下， 合理调配处理任务，实现处理任务的优化调度及资源利用率的最大 化。

实施例九

前面实施例描述了本发明实施例的流程处理及装置结构，上述的方 法和装置的功能可借助一种电子设备实现完成，如图9所示，其为本发 明实施例的电子设备的结构示意图，具体包括：存储器910和处理器920。

存储器910，用于存储程序。

除上述程序之外，存储器910还可被配置为存储其它各种数据以支 持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的 任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片， 视频等。

存储器910可以由任何类型的易失性或非易失性存储设备或者它们 的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存 储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存 储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或 光盘。

处理器920，耦合至存储器910，用于执行存储器910中的程序，以 执行前述实施例中所描述的分布式计算任务处理方法的操作步骤。

此外，处理器920也可以包括前述实施例所描述的各种模块以执行 分布式计算任务的处理，并且存储器910可以例如用于存储这些模块执 行操作所需要的数据和/或所输出的数据。

对于上述处理过程具体说明、技术原理详细说明以及技术效果详细 分析在前面实施例中进行了详细描述，在此不再赘述。

进一步，如图所示，电子设备还可以包括：通信组件930、电源组件 940、音频组件950、显示器960等其它组件。图中仅示意性给出部分组 件，并不意味着电子设备只包括图中所示组件。

通信组件930被配置为便于电子设备和其他设备之间有线或无线方 式的通信。电子设备可以接入基于通信标准的无线网络，如WiFi，3G、 4G或5G，或它们的组合。在一个示例性实施例中，通信组件930经由 广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一 个示例性实施例中，通信组件930还包括近场通信(NFC)模块，以促 进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数 据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技 术来实现。

电源组件940，为电子设备的各种组件提供电力。电源组件940可以 包括电源管理系统，一个或多个电源，及其他与为电子设备生成、管理 和分配电力相关联的组件。

音频组件950被配置为输出和/或输入音频信号。例如，音频组件950 包括一个麦克风(MIC)，当电子设备处于操作模式，如呼叫模式、记录 模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的 音频信号可以被进一步存储在存储器910或经由通信组件930发送。在 一些实施例中，音频组件950还包括一个扬声器，用于输出音频信号。

显示器960包括屏幕，其屏幕可以包括液晶显示器(LCD)和触摸 面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收 来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、 滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的 边界，而且还检测与触摸或滑动操作相关的持续时间和压力。

实施例十

前面实施例描述了本发明实施例的流程处理及装置结构，上述的方 法和装置的功能可借助一种电子设备实现完成，如图10所示，其为本发 明实施例的电子设备的结构示意图，具体包括：存储器1010和处理器 1020。

存储器1010，用于存储程序。

除上述程序之外，存储器1010还可被配置为存储其它各种数据以支 持在电子设备上的操作。这些数据的示例包括用于在电子设备上操作的 任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片， 视频等。

存储器1010可以由任何类型的易失性或非易失性存储设备或者它们 的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存 储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存 储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或 光盘。

处理器1020，耦合至存储器1010，用于执行存储器1010中的程序， 以执行前述实施例中所描述的分布式计算任务处理方法的操作步骤。

此外，处理器1020也可以包括前述实施例所描述的各种模块以执行 分布式计算任务的处理，并且存储器1010可以例如用于存储这些模块 执行操作所需要的数据和/或所输出的数据。

对于上述处理过程具体说明、技术原理详细说明以及技术效果详细 分析在前面实施例中进行了详细描述，在此不再赘述。

进一步，如图所示，电子设备还可以包括：通信组件1030、电源组 件1040、音频组件1050、显示器1060等其它组件。图中仅示意性给出 部分组件，并不意味着电子设备只包括图中所示组件。

通信组件1030被配置为便于电子设备和其他设备之间有线或无线方 式的通信。电子设备可以接入基于通信标准的无线网络，如WiFi，2G或 3G，或它们的组合。在一个示例性实施例中，通信组件1030经由广播信 道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例 性实施例中，通信组件1030还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会 (IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实 现。

电源组件1040，为电子设备的各种组件提供电力。电源组件1040可 以包括电源管理系统，一个或多个电源，及其他与为电子设备生成、管 理和分配电力相关联的组件。

音频组件1050被配置为输出和/或输入音频信号。例如，音频组件 1050包括一个麦克风(MIC)，当电子设备处于操作模式，如呼叫模式、 记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接 收的音频信号可以被进一步存储在存储器1010或经由通信组件1030发 送。在一些实施例中，音频组件1050还包括一个扬声器，用于输出音频信号。

显示器1060包括屏幕，其屏幕可以包括液晶显示器(LCD)和触摸 面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收 来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、 滑动和触摸面板上的手势。触摸传感器可以不仅感测触摸或滑动动作的 边界，而且还检测与触摸或滑动操作相关的持续时间和压力。

本领域普通技术人员可以理解：实现上述各方法实施例的全部或部 分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一 计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施 例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种 可以存储程序代码的介质。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而 非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领 域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术 方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这 些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术 方案的范围。

Claims (22)

1.一种分布式计算任务处理方法，其中，所述方法包括：

获取当前节点的处理资源状态，所述处理资源状态至少包括当前节点未使用的处理资源信息；

根据所述当前节点的处理资源状态向所述当前节点以外的其他节点发送任务请求，其中，所述任务请求至少包含有当前节点的网络标识以及所述处理资源状态；

接收所述当前节点以外的其他节点对所述任务请求的响应，其中，所述响应中至少包含基于所述处理资源状态的计算任务分配信息，所述分配信息中至少包含所述计算任务的所属节点的网络标识以及计算数据信息。

2.根据权利要求1所述的方法，其中，所述方法还包括：

接收所述当前节点以外的其他节点的任务列表，并且

所述根据所述当前节点的处理资源状态向所述当前节点以外的其他节点发送任务请求进一步包括：

根据所述处理资源状态选择所述任务列表中的第一任务，

将包含有针对所述第一任务的选择信息发送给所述第一任务的所属节点。

3.根据权利要求2所述的方法，其中，所述接收所述当前节点以外的其他节点的任务列表包括：

接收对读取任务列表的请求的响应，所述响应中至少包括所述任务列表及所述任务列表所属节点的网络标识，

所述读取任务列表的请求中至少包括当前节点的网络标识。

4.根据权利要求1所述的方法，其中，所述获取当前节点的处理资源状态包括：获取当前节点的CPU的使用率、存储器的占用率、图形处理器使用率。

5.根据权利要求1所述的方法，其中，还包括：根据所述计算任务分配信息，获取所述计算任务。

6.一种分布式计算任务处理方法，其中，所述方法包括：

接收当前节点以外的其他节点的任务请求，所述任务请求至少包括所述发送任务请求的节点的网络标识以及处理资源状态，所述处理资源状态至少包括发送任务请求的节点未使用的处理资源信息；

根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务，所述任务状态表中至少包括当前节点未分配的任务信息；

向所述发送任务请求的节点发送所述第二任务的分配信息，所述分配信息至少包括所述第二任务的所属节点的网络标识以及计算数据信息。

7.根据权利要求6所述的方法，其中，所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务包括：

根据所述发送任务请求的节点的处理资源状态，从所述任务状态表中未分配的任务中分配所述第二任务。

8.根据权利要求7所述的方法，其中，所述任务状态表中未分配的任务信息中还包括优先处理的任务信息，所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务包括：

根据所述发送任务请求的节点的处理资源状态，从所述任务状态表中优先处理的任务中分配所述第二任务。

9.根据权利要求6所述的方法，其中，所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务之后还包括：

在所述任务状态表中将所述第二任务标记为已分配的任务。

10.根据权利要求6所述的方法，其中，所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务之后还包括：

在所述任务状态表中删除所述第二任务。

11.一种分布式计算任务处理装置，所述装置包括：

处理资源状态获取模块，用于获取当前节点的处理资源状态，所述处理资源状态至少包括当前节点未使用的处理资源信息；

任务请求发送模块，用于根据所述当前节点的处理资源状态向所述当前节点以外的其他节点发送任务请求，其中，所述任务请求至少包含有当前节点的网络标识以及所述处理资源状态；

响应接收模块，用于接收所述当前节点以外的其他节点对所述任务请求的响应，其中，所述响应中至少包含基于所述处理资源状态的计算任务分配信息，所述分配信息中至少包含所述计算任务的所属节点的网络标识以及计算数据信息。

12.根据权利要求11所述的装置，其中，所述装置还包括：

任务列表接收模块，用于接收所述当前节点以外的其他节点的任务列表，并且

任务请求发送模块还用于，根据所述处理资源状态选择所述任务列表中的第一任务，

将包含有针对所述第一任务的选择信息发送给所述第一任务的所属节点。

13.根据权利要求12所述的装置，其中，所述接收所述当前节点以外的其他节点的任务列表包括：

接收对读取任务列表的请求的响应，所述响应中至少包括所述任务列表及所述任务列表所属节点的网络标识，

所述读取任务列表的请求中至少包括当前节点的网络标识。

14.根据权利要求11所述的装置，其中，所述获取当前节点的处理资源状态包括：获取当前节点的CPU的使用率、存储器的占用率、图形处理器使用率。

15.根据权利要求11所述的装置，其中，还包括：

计算任务获取模块，用于根据所述计算任务分配信息，获取所述计算任务。

16.一种分布式计算任务处理装置，其中，所述装置包括：

任务请求接收模块，用于接收当前节点以外的其他节点的任务请求，所述任务请求至少包括所述发送任务请求的节点的网络标识以及处理资源状态，所述处理资源状态至少包括发送任务请求的节点未使用的处理资源信息；

任务分配模块，用于根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务，所述任务状态表中至少包括当前节点未分配的任务信息；

任务分配信息发送模块，用于向所述发送任务请求的节点发送所述第二任务的分配信息，所述分配信息至少包括所述第二任务的所属节点的网络标识以及计算数据信息。

17.根据权利要求16所述的装置，其中，所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务包括：

根据所述发送任务请求的节点的处理资源状态，从所述任务状态表中未分配的任务中分配所述第二任务。

18.根据权利要求17所述的装置，其中，所述任务状态表中未分配的任务信息中还包括优先处理的任务信息，所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务包括：

根据所述发送任务请求的节点的处理资源状态，从所述任务状态表中优先处理的任务中分配所述第二任务。

19.根据权利要求16所述的装置，其中，还包括：

任务标记模块，用于在所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务之后，在所述任务状态表中将所述第二任务标记为已分配的任务。

20.根据权利要求16所述的装置，其中，还包括：

任务删除模块，用于在所述根据所述任务请求及任务状态表，向发送任务请求的节点分配第二任务之后，在所述任务状态表中删除所述第二任务。

21.一种电子设备，包括：

存储器，用于存储程序；

处理器，用于运行所述存储器中存储的所述程序，以执行权利要求1至5中任一所述的分布式计算任务处理方法。

22.一种电子设备，包括：

存储器，用于存储程序；

处理器，用于运行所述存储器中存储的所述程序，以执行权利要求6至10中任一所述的分布式计算任务处理方法。

Images