CN106100901B - 一种流速控制方法及装置 - Google Patents

Abstract

本发明实施例公开了一种流速控制方法及装置。本发明实施例中，确定待控制节点的资源占用率大于预设占用率阈值后，获取待控制节点的各个交易维度在当前时刻所占用的资源个数，不仅确保了系统的可用性，而且有效避免了在资源不紧张时进行无效的流速控制；针对各个交易维度中的第一交易维度，若确定第一交易维度在当前时刻所占用的资源个数大于第一交易维度的当前阈值，则将接收到的第一交易维度的交易进行快速失败处理，从而实现了对可能发生故障的渠道进行平滑过渡的控制；且，第一交易维度的当前阈值是根据第一交易维度的历史阈值得到的，从而保证了阈值的动态更新，更加符合实际交易的特点。

Description

一种流速控制方法及装置

技术领域

本发明涉及通信技术领域，尤其涉及一种流速控制方法及装置。

背景技术

在网关以及分布式互联网交易系统中，通常需要进行流速控制。现有技术在进行流速控制时，为保证内部系统不至于承受来自外部的太大压力，通常将占用资源过多的节点作为故障节点，并对故障节点进行隔离。

然而，被隔离的故障节点在满足何种条件进行恢复是比较难以处理的问题，而且其恢复交易往往会导致系统出现较大的波动。因此，目前亟需一种更为有效的流速控制方法，用于解决现有技术中对故障节点进行隔离，从而使得后续难以恢复的技术问题。

发明内容

本发明实施例提供一种流速控制方法及装置，用于解决现有技术中对故障节点进行隔离，从而使得后续难以恢复的技术问题。

本发明实施例提供的一种流速控制方法，包括：

确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；

针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；所述第一交易维度为所述各个交易维度中的任一交易维度。

较佳地，若确定所述第一交易维度在当前时刻所占用的资源个数小于等于所述第一交易维度的当前阈值，则对接收到的所述第一交易维度的交易进行处理。

较佳地，所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的，包括：

通过以下公式确定所述第一交易维度的当前阈值：

F_t＝αX_t+(1-α)F_t-1

其中，F_t为所述第一交易维度的当前阈值，F_t-1为所述第一交易维度在当前时刻的前一时刻的历史阈值，X_t为所述第一交易维度当前占用的资源个数，α为第一交易维度的权重值。

较佳地，所述待控制节点的各个交易维度是通过如下方式得到的：

获取所述待控制节点对应的各个报文；

根据所述各个报文中包含的业务要素，将所述各个报文中均包含的业务要素确定为目标业务要素；

将各个所述目标业务要素中所包含的类型进行组合，得到所述待控制节点的各个交易维度。

本发明实施例提供一种流速控制装置，该装置包括：

获取模块，用于确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；

处理模块，用于针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；所述第一交易维度为所述各个交易维度中的任一交易维度。

较佳地，所述处理模块还用于：

若确定所述第一交易维度在当前时刻所占用的资源个数小于等于所述第一交易维度的当前阈值，则对接收到的所述第一交易维度的交易进行处理。

较佳地，所述处理模块具体用于：

通过以下公式确定所述第一交易维度的当前阈值：

F_t＝αX_t+(1-α)F_t-1

其中，F_t为所述第一交易维度的当前阈值，F_t-1为所述第一交易维度在当前时刻的前一时刻的历史阈值，X_t为所述第一交易维度当前占用的资源个数，α为第一交易维度的权重值。

较佳地，所述处理模块还用于通过如下方式得到所述待控制节点的各个交易维度：

获取所述待控制节点对应的各个报文；

根据所述各个报文中包含的业务要素，将所述各个报文中均包含的业务要素确定为目标业务要素；

将各个所述目标业务要素中所包含的类型进行组合，得到所述待控制节点的各个交易维度。

本发明的上述实施例中，确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；本发明实施例中，一方面，通过将待控制节点的资源占用率与预设占用率阈值进行比较，并在资源占用率大于预设占用率阈值的情况下，执行后续的流速控制操作，不仅确保了系统的可用性，而且有效避免了在资源不紧张时进行无效的流速控制，节省处理资源；另一方面，针对各个交易维度中的任一交易维度，若占用的资源个数大于阈值，则说明该交易维度的渠道可能发生故障，此时可将接收到的该交易维度的交易进行快速失败处理，从而实现在资源紧张的情况下，对可能发生故障的渠道进行平滑过渡的控制，而非完全隔离，通过牺牲一部分本来就无法成功的交易，来避免该交易维度的渠道发生故障，以便于在该交易维度恢复正常后平缓地进行自动恢复；特别地，第一交易维度的当前阈值是根据第一交易维度的历史阈值得到的，从而保证了阈值的动态更新，更加符合实际交易的特点。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种流速控制方法所对应的流程示意图；

图2为本发明实施例提供的一种流速控制装置的结构示意图。

具体实施方式

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

本发明实施例中的流速控制方法可适用于多种架构中，尤其适用于TSM平台云迁移架构。TSM平台分为接入层、应用层、服务层，针对该系统架构的特点，本发明实施例中的流速控制方法可应用在接入层与应用层。具体来说，由于TSM系统需要和许多外部机构进行信息交流，若存在某些外部机构处理缓慢，则在此情况下需要采用流速控制方法，以防止部分机构突发的故障挤占其他机构的交易处理资源，确保内部应用系统的稳定性。

图1为本发明实施例提供的一种流速控制方法所对应的流程示意图。如图1所示，该方法包括：

步骤101，确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；

步骤102，针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；所述第一交易维度为所述各个交易维度中的任一交易维度。

具体来说，本发明实施例中，在步骤101中，不同的节点可对应不同的预设占用率阈值。以本发明实施例中的待控制节点为例，待控制节点的预设占用率阈值可由本领域技术人员根据经验设置，进一步地，可依据待控制节点后续所有应用节点的反应速度以及待控制节点的处理能力来确定预设占用率阈值。

本发明实施例中，通过将待控制节点的资源占用率与预设占用率阈值进行比较，并在资源占用率大于预设占用率阈值的情况下，执行后续的流速控制操作，不仅确保了系统的可用性，而且有效避免了在资源不紧张时进行无效的流速控制，节省了处理资源。

本发明实施例中，针对于待控制节点，需要先定义待控制节点的各个交易维度，具体来说，待控制节点的各个交易维度是通过如下方式得到的：获取所述待控制节点对应的各个报文；根据所述各个报文中包含的业务要素，将所述各个报文中均包含的业务要素确定为目标业务要素；将各个所述目标业务要素中所包含的类型进行组合，得到所述待控制节点的各个交易维度。

举个例子，假设确定出的待控制节点的目标业务要素为业务要素A和业务要素B，业务要素A中包含的类型个数为3个，分别为类型A1、类型A2、类型A3，业务要素B中包含的类型个数为2个，分别为类型B1、类型B2，则可得到待控制节点的交易维度为6个，分别为{A1，B1}、{A2，B1}、{A3，B1}、{A1，B2}、{A2，B2}、{A3，B2}，如表1，示出了待控制节点的交易维度。

表1：待控制节点的交易维度示意表

由上述内容可知，若待控制节点的目标业务要素为业务要素A和业务要素B，业务要素A中包含的类型个数为M个，业务要素B中包含的类型个数为N个，则可得到待控制节点的交易维度为M*N个。

本发明实施例中，通过上述方式确定出待控制节点的各个交易维度后，可为每个交易维度设置一个基准值。其中，基准值可由本领域技术人员根据经验设置，或者，也可以根据待控制节点的总资源个数以及交易维度的个数确定基准值。具体来说，若待控制节点的总资源个数为S个，交易维度的个数为k个，将S/k向下取整得到X，并待控制节点的各个交易维度的基准值设置为X。

本发明实施例中，若各个业务维度的权重值分别为α1、α2、α3、……、αk，则说明可为各个维度分配的资源个数分别为X*α1、X*α2、X*α3、……、X*αk，也就是说，各个业务维度在初始时刻的阈值可以分别为X*α1、X*α2、X*α3、……、X*αk。

本发明实施例中，可将未分配的多余资源作为动态分配资源，动态分配资源的特点是先不给任何特定的渠道/服务分配，当某个渠道/服务在获取线程资源的时候没有空闲线程，则可将动态资源分配给它。

以各个业务维度中的第一交易维度为例，第一交易维度在不同时刻可对应有不同的阈值，第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的。需要说明的是，根据上述内容可知，若是在初始时刻，则第一交易维度的阈值可根据基准值和权重值得到，此时不存在历史时刻，可假设历史阈值为0。

具体地，可通过以下公式确定所述第一交易维度的当前阈值：

F_t＝αX_t+(1-α)F_t-1……公式(1)

其中，F_t为所述第一交易维度的当前阈值，F_t-1为所述第一交易维度在当前时刻的前一时刻的历史阈值，X_t为所述第一交易维度当前占用的资源个数，α为第一交易维度的权重值。其中，第一交易维度当前占用的资源个数可通过第一交易维度当前处理的交易量得到。

可选地，也可通过以下公式确定所述第一交易维度的当前阈值：

F_t＝αX_t+α(1-α)X_t-1+α(1-α)²X_t-2+…+(1-α)^t-1X₁……公式(2)

其中，F_t为所述第一交易维度的当前阈值，X_t为所述第一交易维度当前占用的资源个数，X_t-1为所述第一交易维度在当前时刻的前一时刻的占用的资源个数，X_t-2为所述第一交易维度在当前时刻的前两个时刻的占用的资源个数，X₁为所述第一交易维度在初始时刻占用的资源个数。

在步骤102中，若占用的资源个数大于阈值，则说明第一交易维度的渠道可能发生故障，此时可将接收到的第一交易维度的交易进行快速失败处理，从而实现在资源紧张的情况下，对可能发生故障的渠道进行平滑过渡的控制，而非完全隔离，通过牺牲一部分本来就无法成功的交易，来避免交易维度的渠道发生故障。

进一步地，在后续时刻，若确定所述第一交易维度在当前时刻所占用的资源个数小于等于所述第一交易维度的当前阈值，则说明第一交易维度已恢复正常，此时，可对接收到的第一交易维度的交易进行正常处理，而不再进行快速失败处理，从而能够平稳地恢复交易流量。

本发明实施例中，由于当前阈值是根据历史阈值得到的，从而实现了阈值的不断更新，更加符合实际交易的特点，比如某后端渠道处理交易缓慢，那么在资源不紧张的情况下，资源必定向其倾斜，保证其交易能够处理；但是资源紧张的时候，就不能因此而影响其他交易量大的渠道，将此后端渠道的交易进行有限度的控制，既保证有交易处理，又控制其交易量。这种处理方法比直接隔离此渠道的交易更为温和，且能够动态的恢复其交易流量。

本发明实施例中，可按照设定周期对各个交易维度进行监控，具体的监控信息可包括每个交易的到达时间、处理时长、是否成功/超时/快速失败、所属的交易维度；目前正在处理的交易数量；各个交易维度目前使用的阈值。每个交易的到达时间与所属的交易维度用来确定某个交易维度的交易量数据，正在处理的交易数据与阈值的比较用来判断是否需要进行有限控制。其他信息可以提供报警功能，便于人工查看各个渠道处理能力，明确的性能数据，有便于与外部系统接口人进行沟通。通过上述轻量级的并行监控取样，保证了性能数据的准确性和准时性，监控信息取样周期可以精确到秒级别。

上述流速控制方法与通用流控模块相比，提供了更细粒度的控制能力；与细粒度流控模型相比，无需复杂的配置参数，且更加符合实际。通过公式(1)或公式(2)中的自适应的算法能够保证系统的适应能力，在交易分布发生变化的情况下，不需要人工重新配置参数，减少了运维时间，降低了运维难度。且，通过设置阈值的更新速度，能够保证秒级别的阈值更新能力，相比于人工配置阈值，本发明实施例更合理可信。

针对上述方法流程，本发明实施例还提供一种流速控制装置，该装置的具体内容可以参照上述方法实施。

图2为本发明实施例提供的一种流速控制装置的结构示意图。如图2所示，该装置包括：

获取模块201，用于确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；

处理模块202，用于针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；所述第一交易维度为所述各个交易维度中的任一交易维度。

较佳地，所述处理模块还用于：

若确定所述第一交易维度在当前时刻所占用的资源个数小于等于所述第一交易维度的当前阈值，则对接收到的所述第一交易维度的交易进行处理。

较佳地，所述处理模块具体用于：

通过以下公式确定所述第一交易维度的当前阈值：

F_t＝αX_t+(1-α)F_t-1

其中，F_t为所述第一交易维度的当前阈值，F_t-1为所述第一交易维度在当前时刻的前一时刻的历史阈值，X_t为所述第一交易维度当前占用的资源个数，α为第一交易维度的权重值。

较佳地，所述处理模块还用于通过如下方式得到所述待控制节点的各个交易维度：

获取所述待控制节点对应的各个报文；

根据所述各个报文中包含的业务要素，将所述各个报文中均包含的业务要素确定为目标业务要素；

将各个所述目标业务要素中所包含的类型进行组合，得到所述待控制节点的各个交易维度。

从上述内容可以看出：本发明的上述实施例中，确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；本发明实施例中，一方面，通过将待控制节点的资源占用率与预设占用率阈值进行比较，并在资源占用率大于预设占用率阈值的情况下，执行后续的流速控制操作，不仅确保了系统的可用性，而且有效避免了在资源不紧张时进行无效的流速控制，节省处理资源；另一方面，针对各个交易维度中的任一交易维度，若占用的资源个数大于阈值，则说明该交易维度的渠道可能发生故障，此时可将接收到的该交易维度的交易进行快速失败处理，从而实现在资源紧张的情况下，对可能发生故障的渠道进行平滑过渡的控制，而非完全隔离，通过牺牲一部分本来就无法成功的交易，来避免该交易维度的渠道发生故障，以便于在该交易维度恢复正常后平缓地进行自动恢复；特别地，第一交易维度的当前阈值是根据第一交易维度的历史阈值得到的，从而保证了阈值的动态更新，更加符合实际交易的特点。

本领域内的技术人员应明白，本发明的实施例可提供为方法、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (7)

1.一种流速控制方法，其特征在于，该方法包括：

确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；其中，所述各个交易维度是通过如下方式确定的：获取所述待控制节点对应的各个报文；根据所述各个报文中包含的业务要素，将所述各个报文中均包含的业务要素确定为目标业务要素；将各个所述目标业务要素中所包含的类型进行组合，得到所述待控制节点的各个交易维度；

针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；所述第一交易维度为所述各个交易维度中的任一交易维度。

2.如权利要求1所述的方法，其特征在于，若确定所述第一交易维度在当前时刻所占用的资源个数小于等于所述第一交易维度的当前阈值，则对接收到的所述第一交易维度的交易进行处理。

3.如权利要求1所述的方法，其特征在于，所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的，包括：

通过以下公式确定所述第一交易维度的当前阈值：

F_t＝αX_t+(1-α)F_t-1

其中，F_t为所述第一交易维度的当前阈值，F_t-1为所述第一交易维度在当前时刻的前一时刻的历史阈值，X_t为所述第一交易维度当前占用的资源个数，α为第一交易维度的权重值。

4.一种流速控制装置，其特征在于，该装置包括：

获取模块，用于确定待控制节点的资源占用率大于预设占用率阈值后，获取所述待控制节点的各个交易维度在当前时刻所占用的资源个数；

处理模块，用于针对所述各个交易维度中的第一交易维度，若确定所述第一交易维度在当前时刻所占用的资源个数大于所述第一交易维度的当前阈值，则将接收到的所述第一交易维度的交易进行快速失败处理；所述第一交易维度的当前阈值是根据所述第一交易维度的历史阈值得到的；所述第一交易维度为所述各个交易维度中的任一交易维度；

其中，所述处理模块通过如下方式得到所述待控制节点的各个交易维度：获取所述待控制节点对应的各个报文；根据所述各个报文中包含的业务要素，将所述各个报文中均包含的业务要素确定为目标业务要素；将各个所述目标业务要素中所包含的类型进行组合，得到所述待控制节点的各个交易维度。

5.如权利要求4所述的装置，其特征在于，所述处理模块还用于：

若确定所述第一交易维度在当前时刻所占用的资源个数小于等于所述第一交易维度的当前阈值，则对接收到的所述第一交易维度的交易进行处理。

6.如权利要求4所述的装置，其特征在于，所述处理模块具体用于：

通过以下公式确定所述第一交易维度的当前阈值：

F_t＝αX_t+(1-α)F_t-1

其中，F_t为所述第一交易维度的当前阈值，F_t-1为所述第一交易维度在当前时刻的前一时刻的历史阈值，X_t为所述第一交易维度当前占用的资源个数，α为第一交易维度的权重值。

7.一种计算机可读存储介质，其特征在于，其上存储有指令，所述指令被计算机执行以实现如权利要求1至3任一项所述的方法。