CN103577468A - 一种适用于oltp系统的流量控制器和流量控制方法 - Google Patents

Abstract

本发明公开一种适用于OLTP系统的流量控制器，这里，所述OLTP系统包括上游系统、中间系统、下游系统，其中，交易数据通过中间系统的入口，从上游系统被传送到中间系统，并且，交易数据通过中间系统的出口，从中间系统被传送到下游系统，其特征在于，所述流量控制器被设置在所述中间系统处，用于控制通过中间系统的入口和/或中间系统的出口的交易数据的传送。

Description

一种适用于OLTP系统的流量控制器和流量控制方法

技术领域

本发明涉及OLTP系统，并且尤其涉及一种适用于OLTP系统的流量控制器和流量控制方法。

背景技术

对于金融电信业的OLTP（On-Line Transaction Processing，联机事务处理系统）系统来说，交易处理的连续、平稳、高效是衡量OLTP系统质量的重要指标。现在的交易处理系统集通常由多个节点构成，每个节点的处理能力又不尽相同。处于这个交易处理链条上的节点（尤其是处于中间环节的关键节点）的系统（下文统称该系统为中间环节的中间系统），其处理交易的能力强弱会影响上下游系统的处理能力，甚至影响整个处理系统集的能力。这里，站在中间系统的角度，根据交易的流向，对于那些向中间系统上送交易的节点，其内部的系统，统称为上游系统；对于需要由中间系统将交易转送给其他的节点上的内部系统，统称为下游系统。因此，需要一种适用于OLTP系统的流量控制器和流量控制方法，对交易的“流速”进行控制，防止上下游系统受到冲击，提高交易处理系统集的处理性能。

发明内容

根据本发明的一个目的，公开一种适用于OLTP系统的流量控制器，这里，所述OLTP系统包括上游系统、中间系统、下游系统，其中，交易数据通过中间系统的入口，从上游系统被传送到中间系统，并且，交易数据通过中间系统的出口，从中间系统被传送到下游系统，其特征在于，所述流量控制器被设置在所述中间系统处，用于控制通过中间系统的入口和/或中间系统的出口的交易数据的传送。

优选地，所述流量控制器包括规则定义模块、流量监控模块，其中，所述规则定义模块被配置成定义流量控制规则，所述流量监控模块被配置成根据流量控制规则监控所述交易数据的传送。

优选地，所述流量控制器还包括流量调节模块，其中，所述流量监控模块被进一步配置成产生监控统计数据，所述流量调节模块被配置成根据监控统计数据调节所述流量控制规则。

优选地，所述流量监控模块被配置成同时基于不同的流量控制规则监控所述交易数据的传送。

优选地，所述流量调节模块被配置成根据即时监控统计数据即时调节所述流量控制规则或者根据历史监控统计数据周期性地调节所述流量控制规则。

优选地，所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否超过预定阈值；当所述交易数据量超过预定阈值（入口交易数据量阈值）时，所述流量监控模块被配置成丢弃在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据的全部或者一部分。

优选地，所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否超过预定阈值（出口交易数据量阈值）；当所述交易数据量超过预定阈值时，所述流量监控模块被配置成丢弃在预定时间区间内、减缓通过中间系统的出口传送到下游系统的交易数据。

优选地，所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否在预定阈值±偏离值的范围内，当所述交易数据量不再所述范围内时，所述流量调节模块被配置成调节所述预定阈值。

优选地，所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否在预定阈值±偏离值的范围内，当所述交易数据量不再所述范围内时，所述流量调节模块被配置成调节所述预定阈值。

根据本发明的另一个目的，公开一种适用于OLTP系统的流量控制方法，这里，所述OLTP系统包括上游系统、中间系统、下游系统，其中，交易数据通过中间系统的入口，从上游系统被传送到中间系统，并且，交易数据通过中间系统的出口，从中间系统被传送到下游系统，其特征在于，所述方法包括下述步骤：在所述中间系统处设置流量控制器，利用所述流量控制器控制通过中间系统的入口和/或中间系统的出口的交易数据的传送。

优选地，所述流量控制器包括规则定义模块、流量监控模块，其中，所述方法还包括下述步骤：利用所述规则定义模块定义流量控制规则，利用所述流量监控模块根据流量控制规则监控所述交易数据的传送。

优选地，所述流量控制器还包括流量调节模块，其中，所述方法还包括下述步骤：利用所述流量监控模块产生监控统计数据，利用所述流量调节模块根据监控统计数据调节所述流量控制规则。

优选地，利用所述流量监控模块同时基于不同的流量控制规则监控所述交易数据的传送。

优选地，利用所述流量调节模块根据即时监控统计数据即时调节所述流量控制规则或者根据历史监控统计数据周期性地调节所述流量控制规则。

优选地，利用所述流量监控模块监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否超过预定阈值；当所述交易数据量超过预定阈值时，利用所述流量监控模块丢弃在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据的全部或者一部分。

优选地，利用所述流量监控模块监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否超过预定阈值；当所述交易数据量超过预定阈值时，利用所述流量监控模块、减缓通过中间系统的出口传送到下游系统的交易数据。

优选地，利用所述流量监控模块监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否在预定阈值±偏离值的范围内，当所述交易数据量不在所述范围内时，利用所述流量调节模块调节所述预定阈值。

优选地，利用所述流量监控模块监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否在预定阈值±偏离值的范围内，当所述交易数据量不在所述范围内时，利用所述流量调节模块调节所述预定阈值。

本发明的一个优势在于，能够基于即时或者历史监控统计数据智能地对交易流速进行控制，避免对上下游系统造成冲击。历史监控统计数据可以根据当日监控统计数据明细表汇总生成，根据历史监控统计数据，能够结合特定的算法（如最大最小值、均值、浮动偏差等）对动态参数进行周期性地调整。

本发明的另一个优势在于，能够增加中间系统自身处理交易的稳定性、适应上游系统突发的交易事件（例如，交易量突增或骤减）等异常状况。

本发明的另一个优势在于，能够保障或监控下游系统处理交易的稳定性、避免引起下游系统突发的交易事件（例如，交易量突增或骤减）等异常状况。

本发明的另一个优势在于，在中间系统中设置流量控制器不会影响总体交易，上下游系统也无需做任何改造。

本发明的另一个优势在于，基于灵活的流量控制规则控制“流速”，即交易数据的传送；同时由于可以自定义流量控制规则，使得能够快速适应各种具体业务场景。

附图说明

在参照附图阅读了本发明的具体实施方式以后，本领域技术人员将会更清楚地了解本发明的各个方面。本领域技术人员应当理解的是，这些附图仅仅用于配合具体实施方式说明本发明的技术方案，而并非意在对本发明的保护范围构成限制。其中，

图1是根据本发明实施例的适用于OLTP系统的流量控制器的配置示意图。

具体实施方式

下面参照附图，对本发明的具体实施方式作进一步的详细描述。

图1是根据本发明实施例的适用于OLTP系统的流量控制器的配置示意图。如图所示，OLTP系统包括上游系统、中间系统、下游系统，其中，交易数据通过中间系统的入口，从上游系统被传送到中间系统，并且，交易数据通过中间系统的出口，从中间系统被传送到下游系统。这里，如图所示，上游系统和下游系统可以分别是一个或多个，来自上游系统的数据在处于中间环节的中间系统中经过处理后被发送到下游系统。流量控制器被设置在中间系统处，用于控制通过中间系统的入口和/或中间系统的出口的交易数据的传送（接收/发送）。

进一步，如图1所示，流量控制器可以包括规则定义模块、流量监控模块，其中，规则定义模块被配置成定义流量控制规则。流量监控模块被配置成根据流量控制规则监控交易数据的传送。流量监控模块可以被配置成同时执行针对同一监控对象的两条或者两条以上的流量控制规则，例如不同的流量控制规则可以定义相同的监控对象，监控的对象可以是上游/下游系统中的一个或者多个。在本发明中，监视的值为交易数据量（交易量）、控制的对象是交易数据（一笔或者多笔交易记录）。进一步，流量控制器还可以包括流量调节模块，其中，流量监控模块被进一步配置成产生监控统计数据，流量调节模块被配置成根据监控统计数据调节流量控制规则。监控统计数据可以是即时的统计数据也可以是历史统计数据，流量监控模块能够响应于即时的统计数据立即进行流量控制规则的变更，或者根据历史统计数据在合适的时间进行流量控制规则的变更。如下文所述，流量控制规则动态变更的对象可以是流量控制规则中的特定的参数。

流量控制规则可以是一条或多条，每条流量控制规则规定监视内容以及控制操作，作为流量控制规则的参数的监视内容以及控制操作可以被定义到数据表中。监视的内容可以是监控对象（例如，上游/下游系统中的一个或者多个）、监控时间区间（例如，全时间、指定日期、指定日期内的时间段、每周固定一天内的时间段）、监控周期（即，每次检查交易数据量的周期，例如1分钟等）、监控交易量的阈值（例如，阈值为N笔交易），控制操作可以是交易量超过阈值时的响应操作（例如，丢弃交易数据、丢弃部分交易数据、减速处理交易数据、报警等）、响应操作的时间（例如，持续M1秒内执行响应操作或最迟在M2秒内执行响应操作）、响应操作值（该参数规定响应操作的量或者程度，例如对于丢弃部分交易数据的情况可以规定丢弃其中的P%的交易数据，对于减速处理交易数据的情况，可以规定减速50ms的处理时间），此外流量控制规则还可以规定用于动态调整的参数，例如阈值偏离范围（例如，可以为R，那么当监视的交易量不再N±R的范围内时，动态更新阈值）、响应操作值变更步长（例如，可以为+10ms，当历史监控统计数据表明当被触发的减速处理的响应操作在预定的时间（例如，一周）发生的次数超过预定值（例如，100次）时，流量调节模块可以将响应操作值增加一个变更步长）。本领域的技术人员可以理解的是，能够将上述一个或者多个参数组合在一条流量控制规则内，并且根据需要组合一条或者多条流量控制规则来监控特定的对象。

下文将根据多个实施例说明根据本发明实施例的流量控制器如何控制通过中间系统的入口和/或中间系统的出口的交易数据的传送。

在一个实施例中，流量监控模块被配置成监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否超过预定阈值，这里的预定阈值是相对于通过入口转送的交易数据量；当交易数据量超过预定阈值时，流量监控模块被配置成丢弃在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据的全部或者一部分。可替换地，流量监控模块还可以被配置成监视在预定时间区间内、通过中间系统的出口、被传送到下游系统的交易数据量是否超过预定阈值，这里的预定阈值是相对于通过出口转送的交易数据量；当交易数据量超过预定阈值时，流量监控模块被配置成通过中间系统的出口、减缓传送到下游系统的交易数据。如前文所述，流量监控模块能够根据规则定义模块中流量控制规则来监控交易数据的传送。在上述实施例中，规则定义模块可以定义以下用于流量控制规则的参数：监控对象，这里监控对象可以是所有上游系统或者上游系统中的一个或多个，可替换地，监控对象还可以是所有下游系统或者下游系统中的一个或多个；预定时间区间，这里预定时间区间可以被定义为参数交易数据的高峰时间（例如，每周四下午五点至晚上八点）或者是全部时间；相对于通过入口交易数据量的第一预定阈值或者相对于通过出口的交易数据量的第二预定阈值，如下文还将描述的，预定阈值可以经由流量调节模块被动态地调整；超出阈值所触发的响应操作，这里，响应操作可以是通过中间系统的入口接收的交易数据的全部或者一部分。本领域的技术人员还可以理解的是，还能够定义其它参数，例如响应操作的时间，该参数规定响应操作完成的持续时间或最迟完成时限。

流量控制规则的参数可以分为静态参数与动态参数，静态参数根据相关系统的具体性能被设定；动态参数根据相关监控统计数据被动态地设定的。在一个示例中，流量监控模块监控所有上游系统通过中间系统的入口上送的总交易量在预定时间区间内是否超过阈值N1，当超过时，流量监控模块将告知中间系统接下的30秒内将所有的交易数据丢弃。

在另一个示例中，流量监控模块监控一部分上游系统通过中间系统的入口上送的总交易量在预定时间区间内是否超过阈值N2，当超过时，流量监控模块将告知中间系统接下的10秒内将产生总交易量的所有的交易数据一部分丢弃。

在另一个实施例中，流量监控模块被配置成监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否在预定阈值±偏离值的范围内，当交易数据量不在所述范围时，流量调节模块被配置成调节预定阈值。如上所述的，规则定义模块可以定义用于流量控制规则的参数。这里，所述的预定范围可以在规则定义模块中被定义为流量控制规则的一个参数。因此，在该实施例中，规则定义模块定义的这条流量控制规则包括下列参数：监控对象、预定时间区间、预定值、偏离值、超出预定范围所触发的响应操作。可以理解的是，流量调节模块根据即时监控统计数据动态地调节预定阈值，即动态地调节流量控制规则。如后文将要描述的，流量调节模块还能够根据历史监控统计数据动态地调节预定阈值。

在另一个实施例中，根据另外的流量控制规则，流量监控模块被配置成监视在监控周期内（例如，2分钟）监控中间系统将要发给某个下游系统的交易量（源自一个或多个上游系统接收的交易数据），当前后两个监控周期的交易量相差阈值百分比（例如，50%）或者预定阈值以上时，触发流量监控模块的响应操作，响应操作例如可以为减速处理交易数据或者报警，在减速处理的情况下，流量监控模块将暂缓处理交易数据（例如，暂时不将交易数据发送到下游系统）。规则定义模块可以定义响应操作值，例如减速处理50ms或者报警10秒。在一个示例中，还可以设置减速处理时间变换步长作为流量控制规则的参数，例如-5ms。流量调节模块还能够根据历史监控统计数据动态地调节减速处理时间，例如当历史监控统计数据表明当被触发的减速处理的响应操作在预定的时间发生的次数超过某一阈值时，流量调节模块可以将规则定义模块中的流量控制规则的减速处理时间参数增加/减少一个减速处理时间变换步长，例如在这个示例中就是减少5ms。

通过以上实施方式的描述，本领域中的普通技术人员能够理解，在不偏离本发明的精神和范围的情况下，还可以对本发明的具体实施方式作各种变更和替换。这些变更和替换都落在本发明权利要求书所限定的范围内。

Claims (18)

1.一种适用于OLTP系统的流量控制器，这里，所述OLTP系统包括上游系统、中间系统、下游系统，其中，交易数据通过中间系统的入口，从上游系统被传送到中间系统，并且，交易数据通过中间系统的出口，从中间系统被传送到下游系统，其特征在于，

所述流量控制器被设置在所述中间系统处，用于控制通过中间系统的入口和/或中间系统的出口的交易数据的传送。

2.如权利要求1所述的流量控制器，其特征在于，

所述流量控制器包括规则定义模块、流量监控模块，其中，

所述规则定义模块被配置成定义流量控制规则，

所述流量监控模块被配置成根据流量控制规则监控所述交易数据的传送。

3.如权利要求2所述的流量控制器，其特征在于，

所述流量控制器还包括流量调节模块，其中，

所述所述流量监控模块被进一步配置成产生监控统计数据，

所述流量调节模块被配置成根据监控统计数据调节所述流量控制规则。

4.如权利要求2所述的流量控制器，其特征在于，

所述流量监控模块被配置成同时基于不同的流量控制规则监控所述交易数据的传送。

5.如权利要求3所述的流量控制器，其特征在于，

所述流量调节模块被配置成根据即时监控统计数据即时调节所述流量控制规则或者根据历史监控统计数据周期性地调节所述流量控制规则。

6.如权利要求2所述的流量控制器，其特征在于，

所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否超过预定阈值；

当所述交易数据量超过预定阈值时，所述流量监控模块被配置成丢弃在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据的全部或者一部分。

7.如权利要求2所述的流量控制器，其特征在于，所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否超过预定阈值；

当所述交易数据量超过预定阈值时，所述流量监控模块被配置成在预定时间区间内，减缓通过中间系统的出口传送给下游系统交易数据。

8.如权利要求3所述的流量控制器，其特征在于，

所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否在预定阈值±偏离值的范围内，

当所述交易数据量不在所述范围内时，所述流量调节模块被配置成调节所述预定阈值。

9.如权利要求3所述的流量控制器，其特征在于，

所述流量监控模块被配置成监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否在预定阈值±偏离值的范围内，

当所述交易数据量不在所述范围内时，所述流量调节模块被配置成调节所述预定阈值。

10.一种适用于OLTP系统的流量控制方法，这里，所述OLTP系统包括上游系统、中间系统、下游系统，其中，交易数据通过中间系统的入口，从上游系统被传送到中间系统，并且，交易数据通过中间系统的出口，从中间系统被传送到下游系统，其特征在于，所述方法包括下述步骤：

在所述中间系统处设置流量控制器，

利用所述流量控制器控制通过中间系统的入口和/或中间系统的出口的交易数据的传送。

11.如权利要求10所述的流量控制方法，其特征在于，

所述流量控制器包括规则定义模块、流量监控模块，其中，所述方法还包括下述步骤：

利用所述规则定义模块定义流量控制规则，

利用所述流量监控模块根据流量控制规则监控所述交易数据的传送。

12.如权利要求11所述的流量控制方法，其特征在于，

所述流量控制器还包括流量调节模块，其中，所述方法还包括下述步骤：

利用所述所述流量监控模块产生监控统计数据，

利用所述流量调节模块根据监控统计数据调节所述流量控制规则。

13.如权利要求11所述的流量控制方法，其特征在于，

利用所述流量监控模块同时基于不同的流量控制规则监控所述交易数据的传送。

14.如权利要求12所述的流量控制方法，其特征在于，

利用所述流量调节模块根据即时监控统计数据即时调节所述流量控制规则或者根据历史监控统计数据周期性地调节所述流量控制规则。

15.如权利要求11所述的流量控制方法，其特征在于，

利用所述流量监控模块监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否超过预定阈值；

当所述交易数据量超过预定阈值时，利用所述流量监控模块丢弃在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据的全部或者一部分。

16.如权利要求11所述的流量控制方法，其特征在于，

利用所述流量监控模块监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否超过预定阈值；

当所述交易数据量超过预定阈值时，利用所述流量监控模块，减缓通过中间系统的出口传送到下游系统的交易数据。

17.如权利要求12所述的流量控制方法，其特征在于，

利用所述流量监控模块监视在预定时间区间内、通过中间系统的入口、从上游系统被传送到中间系统的交易数据量是否在预定阈值±偏离值的范围内，

当所述交易数据量不在所述范围内时，利用所述流量调节模块调节所述预定阈值。

18.如权利要求12所述的流量控制方法，其特征在于，

利用所述流量监控模块监视在预定时间区间内、通过中间系统的出口、传送到下游系统的交易数据量是否在预定阈值±偏离值的范围内，

当所述交易数据量不在所述范围内时，利用所述流量调节模块调节所述预定阈值。

Images