CN111131479A - 流量处理方法、装置及分流器 - Google Patents

Abstract

本申请提供一种流量处理方法、装置及分流器，涉及数据通信技术领域。方法包括：方法包括：将源端口接收的数据流量送入绑定的第一分流组；在确定第一分流组的目的发送端口中包括去重模块对应的入口时，通过分流模块将数据流量送入去重模块；在去重模块对数据流量执行去重操作后，将去重后的数据流量由去重模块对应的出口送入源端口绑定的第二分流组，分流模块依据第二分流组将去重后的数据流量送入对应的目的发送端口，能够改善对流量进行预处理的灵活性差的问题，有利于满足流量多样化分析业务的需求。

Description

流量处理方法、装置及分流器

技术领域

本发明涉及数据通信技术领域，具体而言，涉及一种流量处理方法、装置及分流器。

背景技术

在大数据和网络信息安全的背景下，客户现有业务或新部署和规划的网络中，通常有在不影响业务的情况下对业务数据进行可视化分析、网络性能分析、异常流量来源快速识别等需求。随着数据中心、云计算场景等大规模网络普及，对数据进行监控和分析的需求也随之骤增。目前可以通过网络分流器为各个服务器的流量分析处理进行预处理，以便于各个服务器能够接收到相应的数据流量，以进行相应的分析处理。然而，目前的网络分流器对流量进行预处理的灵活性差，无法满足流量多样化分析业务的需求。

发明内容

本申请提供一种流量处理方法、装置及分流器，能够改善对流量进行预处理的灵活性差的问题。

为了实现上述目的，本申请实施例所提供的技术方案如下所示：

第一方面，本申请实施例提供一种流量处理方法，应用于分流器，所述分流器包括分流模块及去重模块，所述分流模块中包括一个以上的分流组，每个分流组中绑定有接收数据流量的源端口和对应的目的发送端口，所述方法包括：

将源端口接收的数据流量送入绑定的第一分流组；在确定所述第一分流组的目的发送端口中包括所述去重模块对应的入口时，通过所述分流模块将所述数据流量送入所述去重模块；在所述去重模块对所述数据流量执行去重操作后，将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组，所述分流模块依据所述第二分流组将去重后的所述数据流量送入对应的目的发送端口。

在上述的实施方式中，分流模块可以通过分流组将数据流量复制成多份，去重模块可以将从分流组送入数据流量进行去重，使得分流器可以同时提供去重后的数据流量及未去重的数据流量，有利于用户根据需求灵活控制分流器输出的数据流量的类型从而改善对流量进行预处理的灵活性差的问题，有利于满足流量多样化分析业务的需求。

结合第一方面，在一些可选的实施方式中，所述通过所述分流模块将所述数据流量送入所述去重模块，包括：

通过所述分流模块在所述数据流量中添加所述源端口的信息；将添加所述源端口的信息后的所述数据流量通过所述去重模块对应的入口送入所述去重模块，所述源端口的信息用于供所述去重模块查找所述第二分流组。

在上述的实施例方式中，通过对数据流量添加源端口的信息，使得数据流量能够准确发送至相应的端口，以便于去重模块在完成数据流量的去重后，能够输出去重后的数据流量。

结合第一方面，在一些可选的实施方式中，所述将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组，包括：

通过所述去重模块依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；在去重后的所述数据流量中添加所述第二分流组的信息发送到所述去重模块对应的出口；在所述去重模块对应的出口根据所述第二分流组的信息，去除所述数据流量中的所述源端口的信息和所述第二分流组的信息后，将去除所述源端口的信息和所述第二分流组的信息后的所述数据流量送入所述第二分流组。

在上述的实施方式中，源端口的信息及第二分流组的信息有助于去重模块将去重后的流量发送至相应的第二分流组。另外，去重模块在输出去重后的数据流量之前，通过删除数据流量在传输过程中添加的源端口的信息及第二分流组的信息，使得数据流量的内容恢复为分流器接收该数据流量时内容，避免源端口的信息影响对数据流量的分析处理。

结合第一方面，在一些可选的实施方式中，所述将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组，包括：

通过所述去重模块将去重后的所述数据流量发送到所述去重模块对应的出口；通过所述去重模块对应的出口依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；在所述去重模块对应的出口去除所述数据流量中的所述源端口的信息后，将去除所述源端口的信息的所述数据流量送入所述第二分流组。

在上述的实施方式中，源端口的信息有助于去重模块将去重后的流量发送至相应的第二分流组。另外，去重模块在输出去重后的数据流量之前，通过删除数据流量在传输过程中添加的源端口的信息，使得数据流量的内容恢复为分流器接收该数据流量时内容，避免源端口的信息影响对数据流量的分析处理。

结合第一方面，在一些可选的实施方式中，所述方法还包括：

在确定所述第一分流组中除所述去重模块对应的入口还包括其他目的发送端口时，通过所述分流模块根据所述其他目的发送端口的数量对所述数据流量进行复制；将复制后的所述数据流量分别送入所述其他目的发送端口。

在上述的实施方式中，分流模块可以复制多份数据流量，其中一部分数据流量可以发送至去重模块进行去重，一部分数据流量输出至其他目的发送端口，使得分流器能够同时提供去重后的数据流量及未去重的数据流量。

第二方面，本申请实施例还提供一种流量处理装置，应用于分流器，所述流量处理装置包括端口收发模块、分流模块及去重模块，所述分流模块中包括一个以上的分流组，每个分流组中绑定有接收数据流量的源端口和对应的目的发送端口，其中：

所述端口收发模块，用于将源端口接收的数据流量送入绑定的第一分流组；

所述分流模块，用于在确定所述第一分流组的目的发送端口中包括所述去重模块对应的入口时，将所述数据流量送入所述去重模块；

所述去重模块，用于在所述去重模块对所述数据流量执行去重操作后，将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组；

所述分流模块，还用于依据所述第二分流组将去重后的所述数据流量送入对应的目的发送端口；

所述端口收发模块，还用于将送入目的发送端口的去重后的所述数据流量从所述目的发送端口发送出去。

结合第二方面，在一些可选的实施方式中，所述分流模块还用于：

在所述数据流量中添加所述源端口的信息；

将添加所述源端口的信息后的所述数据流量通过所述去重模块对应的入口送入所述去重模块，所述源端口的信息用于供所述去重模块查找所述第二分流组。

结合第二方面，在一些可选的实施方式中，所述去重模块还用于：

根据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；

在去重后的所述数据流量中添加所述第二分流组的信息发送到所述去重模块对应的出口；

在所述去重模块对应的出口根据所述第二分流组的信息，去除所述数据流量中的所述源端口的信息和所述第二分流组的信息后，将去除所述源端口的信息和所述第二分流组的信息后的所述数据流量送入所述第二分流组。

结合第二方面，在一些可选的实施方式中，所述去重模块还用于：

将去重后的所述数据流量发送到所述去重模块对应的出口；

通过所述去重模块对应的出口依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；

在所述去重模块对应的出口去除所述数据流量中的所述源端口的信息后，将去除所述源端口的信息的所述数据流量送入所述第二分流组。

结合第二方面，在一些可选的实施方式中，所述分流模块还用于：

在确定所述第一分流组中除所述去重模块对应的入口还包括其他目的发送端口时，根据所述其他目的发送端口的数量对所述数据流量进行复制；

将复制后的所述数据流量分别送入所述其他目的发送端口。

第三方面，本申请实施例还提供一种分流器，所述分流器包括存储器和处理器，所述存储器内存储计算机程序，当所述计算机程序被所述处理器执行时，使得所述分流器执行上述的方法。

附图说明

为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍。应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1为本申请实施例提供的分流器的结构示意图之一。

图2为本申请实施例提供的分流器的结构示意图之二。

图3为本申请实施例提供的分流器的结构示意图之三。

图4为本申请实施例提供的流量处理方法的流程示意图。

图5为本申请实施例提供的流量处理装置的方框示意图。

图标：10-分流器；11-第一分流组；12-去重模块；13-第二分流组；14-第三分流组；100-流量处理装置；110-端口收发模块；120-分流模块；121-第一分流组；122-第二分流组；130-去重模块。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行描述。需要说明的是，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

在拓扑网络系统中，通常会设置多个用于采集数据流量的采集点，数据流量在传输过程中，可以被多个采集点采集到。而采集到的数据流量可以发送至分流器，从而使得分流器所接收到的数据流量(或数据集合)中包括重复的数据流量。

请参照图1，本申请实施例提供一种分流器10，该分流器10可以对接收到的数据流量进行预处理，然后将预处理后的数据流量发送至相应的分析服务器，以供分析服务器对数据流量进行分析处理。

可理解地，分流器10接收的数据流量通常为持续性的，时间越长，接收到的数据流量的总数据量越大。为了提高数据分析的效率，通常需要将数据流量复制成多份(或多个)，以分别发送至多个分析服务器，多个分析服务器可以对数据流量中的一项或多项进行分析处理。其中，分析服务器通常需要对未去重的数据流量进行分析处理，另外，也需要对去重后的数据流量进行分析处理，以便于得到在不同条件下的分析结果，从而有利于提高分析的准确性及可靠性。

其中，分析服务器对数据流量(或数据集合，包括多份数据流量)进行分析处理的项目可以包括但不限于：基于数据流量的内容检测网络入侵、网络攻击、服务器延时性能、访问各个服务IP的流量大小等。

在现有技术中，对数据流量进行预处理的功能单一，无法同时提供未去重的数据流量及去重后的数据流量。而本申请提供的分流器10、流量处理方法便能改善无法同时提供未去重的数据流量及去重后的数据流量这一问题。

请再次参照图1，在本实施例中，分流器10可以包括分流模块及去重模块12，可以用于对数据流量进行预处理，其中，分流模块可以包括一个或多个分流组。在图1所示的分流器10中，分流模块包括第一分流组11，第一分流组11的一个出口(或称为输出端口)与去重模块12的入口(或称为输入端口)连接。可理解地，若分流模块只包括一个分流组，则该分流组即为分流模块。

另外，分流模块可以通过分流组对接收到的数据流量进行复制，去重模块12可以对复制后的其中一份或多份数据流量进行去重等预处理操作，使得分流器10既能够提供未去重的数据流量，也能提供去重后的数据流量，以便于相应的分析服务器根据不同的需求对预处理后的数据流量进行分析处理。其中，分流组复制的数据流量的份数可以根据实际情况进行设置，例如，可以为两份或更多。

例如，在图1中，第一分流组11可以将数据流量F1、F2、F3复制成三份数据流量，其中一份数据流量输入至去重模块12进行去重，并通过去重模块12输出去重后的数据流量。剩余两份数据流量通过分流组的目的端口D1、目的端口D2输出至其他设备或服务器。可理解地，目的端口D1、目的端口D2分别为第一分流组11的目的发送端口。

分流器10还可以包括存储器、处理器。其中，存储器内可以存储计算机程序，当计算机程序被处理器执行时，可以使得分流器10执行下述的流量处理方法。

在本实施例中，分流模块通过分流组，可以对分流器10接收到的数据流量进行复制，其复制的个数(或份数)可以根据实际情况进行设置，例如可以为两个或更多的个数，从而能够得到相应份数的数据流量。可理解地，通过复制得到的多份数据流量的内容相同，多份数据流量中的一部分数据流量可以被发送至相应的分析服务器进行分析处理，另一部分数据流量可以被发送至相应的去重模块12进行去重处理。去重模块12可以对数据流量进行去重，从而得到去重后的数据流量。去重后的数据流量可以被发送至相应的分析服务器以进行分析处理。基于此，分流器10便能对外(分析服务器)同时提供未去重的数据流量及去重后的数据流量。

在本实施例中，分流器10中可以配置分流模块、去重模块12。分流模块可以包括至少一个分流组。其中，分流器10，也称为测试访问点(Test Access Point，简称TAP)，为一种不影响业务网络的情况下，通过旁接或串接部署后将业务网络中的流量根据需求采集到一台或多台分析服务器的设备。分流模块内配置有源端口和目的发送端口(目的发送端口又称工具端口)，数据流量从源端口流向目的发送端口。

可以理解的是，图1所示的结构仅为分流器10的一种结构示意图，分流器10还可以包括比图1所示更多的组件。图1中所示的各组件可以采用硬件、软件或其组合实现。

在本实施例中，若去重后的数据流量只需要发送至一个分析服务器，则可以由去重模块12直接发送至该分析服务器对应的端口。若去重后的数据流量需要发送至两个或多个分析服务器，分流模块可以包括用于对去重模块12输出的去重后的数据流量进行复制的分流组。

例如，请参照图2，图2所示的分流器10中，分流模块包括至少一个第一分流组11及至少一个第二分流组13，第一分流组11、去重模块12的功能作用参见上述的对图1所示的分流器10的描述。第二分流组13的入口与去重模块12的出口连接，可以接收去重模块12去重后的数据流量，并根据需求复制相应个数去重后的数据流量。然后将去重后的每个数据流量发送至相应的分析服务器，以便于分析服务器对去重后的数据流量进行分析处理。

作为一种可选的实施方式，分流器10中的去重模块12可以为一个或多个(其数量可以根据实际情况进行设置)。另外，每个去重模块12的出口可以与一个第二分流组13的入口(或称为源端口)连接。其中，与去重模块12的出口连接的第二分流组13可以用于对去重后的流量进行复制。

例如，请参照图3，分流器10包括两个去重模块12，另外，分流模块包括第一分流组11、第二分流组13及第三分流组14。去重模块12的入口为第一分流组11中的其中一个出口。去重模块12的出口分别与第二分流组13、第三分流组14的入口连接。其中，分别与两个去重模块12的出口连接的第二分流组13、第三分流组14可以用于对去重后的流量分别进行复制。即，第二分流组13可以对于第二分流组13连接的去重模块12输出的去重后的流量进行复制，第三分流组14可以对与第三分流组14连接的去重模块12所输出的去重后的流量进行复制。基于此，有助于提高去重的效率，以及提高输出的去重后数据流量的份数。

可理解地，每一组中的去重模块12、与去重模块12的出口连接的分流组可以作为一个提供去重后的数据流量的去重处理单元。另外，多个去重处理单元中的一部分可以作为备用，一部分作为主用，以提高分流器10的可靠性。例如，在当前的去重处理单元出现故障(比如超负荷)时，可以启用备用的去重处理单元，从而提高分流器10运行的可靠性及稳定性。

需要说明的是，用户可以根据需求控制分流器10输出的数据流量的类型，可以通过控制相应端口的通断即可实现输出的控制。其中，分流器10可以只输出未去重的数据流量，或者只输出去重后的数据流量，或者既能输出去重后的数据流量，也能输出未去重的数据流量。用户可以根据实际情况，灵活地选择相应类型的数据流量的进行输出。另外，第一分流组11、第二分流组13、第三分流组14、去重模块12等可以集成在一个设备上，也可以分别作为一个独立的设备存在。

请参照图4，本申请实施例还提供一种流量处理方法，可以应用于上述的分流器10中，由分流器10执行或实现方法的各步骤。其中，方法可以包括步骤S210至步骤S230。

下面将结合图2对图4所示的流量处理方法的各步骤进行详细阐述：

步骤S210，将源端口接收的数据流量送入绑定的第一分流组11。

在本实施例中，分流器10可以通过第一分流组11的源端口接收采集网络系统的数据流量得到的数据流量，该数据流量中的数据流量可以称为原始流量。即，分流器10可以将源端口接收的数据流量送入该源端口绑定的第一分流组11。数据流量的内容包括但不限于视频数据、音频数据、图像数据、文本数据、应用程序等，这里不作具体限定。

可理解地，管理人员可以预先对第一分流组11中一个或多个源端口分别建立与去重模块12的入口和/或至少一个目的发送端口之间的对应关系。其中，通过第一分流组11对应的目的发送端口输出的数据流量为未去重的数据流量。

步骤S220，在确定所述第一分流组11的目的发送端口中包括所述去重模块12对应的入口时，通过所述分流模块将所述数据流量送入所述去重模块12。

在本实施例中，第一分流组11在接收到数据流量后，可以根据实际对应的出口情况对数据流量进行复制，以得到一份或多份相同的数据流量。

在完成数据流量的复制后，第一分流组11基于绑定的目的发送端口发送复制的数据流量。通常而言，当目的发送端口包括去重模块12的入口时，第一分流组11便可以将复制的其中一份数据流量通过分流模块送入至去重模块12。

需要说明的是，若目的发送端口包括多个去重模块12的入口，则第一分流组11便可以将复制后的相应数据流量通过每个去重模块12的入口分别发送至相应的去重模块12，使得每个去重模块12可以从第一分流组11接收到数据流量。

例如，若去重模块12为1个，分析服务器为3个，则需要发送的数据流量的目的发送端口为4个，即需要复制得到4份数据流量，其中，每份数据流量需要发送至一个目的发送端口。在这4个数据流量中，其中一份数据流量需要发送至去重模块12，其余3份数据流量需要分别发送至3个分析服务器。

作为一种可选的实施方式，步骤S220可以包括：通过所述分流模块在所述数据流量中添加所述源端口的信息；将添加所述源端口的信息后的所述数据流量通过所述去重模块12对应的入口送入所述去重模块12，所述源端口的信息用于供所述去重模块12查找所述第二分流组13。

在本实施例中，分流模块可以将送入至每个去重模块12的数据流量可以添加源端口的信息。例如，若去重模块12为一个，送入至该去重模块12的数据流量中所添加的信息便可以包括：数据流量的源端口、目的发送端口等信息。数据流量(报文)的源端口可以为第一分流组11中接收数据流量的源端口，目的发送端口可以为第二分流组13(或分析服务器)的入口。基于此，去重模块12在对数据流量进行去重处理后，可以根据所添加的信息，将去重后的数据流量准确发送至相应的第二分流组13、分析服务器，避免因数据流量的目的地址不清楚而无法将去重后的数据流量输出。

步骤S230，在所述去重模块12对所述数据流量执行去重操作后，将去重后的所述数据流量由所述去重模块12对应的出口送入所述源端口绑定的第二分流组13，所述分流模块依据所述第二分流组13将去重后的所述数据流量送入对应的目的发送端口。

在本实施例中，第一分流组11可以发送一份数据流量至去重模块12进行去重。若向一个去重模块12发送多份内容相同的数据流量，去重模块12在对多份数据流量去重后，输出的去重后的数据流量与去重模块12对分流组送入的一份数据流量进行去重的去重结果相同。即，去重后的数据流量中不存在重复数据。

其中，去重模块12的去重原理可以为：从每个数据流量中的多个数据中确定每种数据的重复数据量；从每种数据流量的重复数据中选取一个数据进行保留，并删除或丢弃每种数据中的除去所选取的数据之外的剩余数据，从而得到去重后的数据流量。

通常而言，去重后的数据流量需要进行多项分析，也就需要复制成多份以分别进行分析。此时，去重模块12的出口可以与第二分流组13的入口连接。去重模块12在完成数据流量的去重后，可以将去重后的数据流量送入第二分流组13。第二分流组13在接收到去重后的数据流量后，可以对去重后的数据流量进行复制，并将复制的每份数据流量发送至相应的目的发送端口。每个目的发送端口通常为分析服务器的一个接口，可以供分析服务器单独针对一份数据流量进行分析处理。

作为一种可选的实施方式，步骤S230可以包括：

通过所述去重模块12依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组13；

在去重后的所述数据流量中添加所述第二分流组13的信息发送到所述去重模块12对应的出口；

在所述去重模块12对应的出口根据所述第二分流组13的信息，去除所述数据流量中的所述源端口的信息和所述第二分流组13的信息后，将去除所述源端口的信息和所述第二分流组13的信息后的所述数据流量送入所述第二分流组13。

在本实施例中，添加在数据流量中的源端口的信息可以预先与和去重模块12的出口绑定，而去重模块12的出口与相应的分流组(例如第二分流组13、第三分流组14)的入口连接。在去重后的数据流量中添加第二分流组13的信息可以包括第二分流组13的入口的信息，用于供去重模块12的出口将去重后的数据流量准确发送至第二分流组13。

可理解地，去重模块12在完成数据流量的去重后，可以基于绑定关系，从源端口的信息确定出当前的数据流量在去重模块12上的出口。然后，由去重模块12将去重后的数据流量送入至该出口。其中，在数据流量中添加的源端口的信息、第二分流组13的信息不会在去重期间被删除，即，去重后的数据流量中，携带有源端口的信息、第二分流组13的信息。在数据流量送到去重模块12的出口时，再由去重模块12根据第二分流组13的信息确定去重后的数据流量的目的发送端口，该目的发送端口即为与去重模块12的出口连接的分流组(例如第二分流组13、第三分流组14)的入口。最后，在由去重模块12去除在在数据流量中添加的源端口的信息、第二分流组13的信息，并将去除源端口的信息、第二分流组13的信息的去重后的数据流量发送至相应的目的发送端口。

其中，通过删除去重后的数据流量中的源端口的信息、第二分流组13的信息，有利于避免源端口的信息、第二分流组13的信息影响分析服务器对去重后的数据流量的分析处理。

作为一种可选的实施方式，步骤S230可以包括：

通过所述去重模块12将去重后的所述数据流量发送到所述去重模块12对应的出口；

通过所述去重模块12对应的出口依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组13；

在所述去重模块12对应的出口去除所述数据流量中的所述源端口的信息后，将去除所述源端口的信息的所述数据流量送入所述第二分流组13。

在本实施例中，去重模块12在完成数据流量的去重后，可以自动将去重后的数据流量送入去重模块12的出口。添加在数据流量中的源端口的信息可以预先与和去重模块12的出口连接的分流组(例如第二分流组13、第三分流组14)的入口绑定。此时，去重模块12便可以基于该绑定关系，可以确定出去重后的数据流量的目的发送端口，即为第二分流组13的入口。在发送去重后的数据流量之前，去重模块12将去重后的数据流量中的源端口的信息删除，再将去除源端口信息的去重后的数据流量准确发送至第二分流组13的入口，从而将去重后的数据流量送入至第二分流组13。

其中，通过删除去重后的数据流量中的源端口的信息，有利于避免源端口的信息影响分析服务器对去重后的数据流量的分析处理。

作为一种可选的实施方式，方法还可以包括：在确定所述第一分流组11中除所述去重模块12对应的入口还包括其他目的发送端口时，通过所述分流模块根据所述其他目的发送端口的数量对所述数据流量进行复制；将复制后的所述数据流量分别送入所述其他目的发送端口。

可理解地，第一分流组11的目的发送端口除了包括去重模块12的入口，还可以包括分析服务器的入口，或其他设备的入口。即，其他目的发送端口可以包括分析服务器的入口，或其他设备的入口。此时，第一分流组11在完成相应的目的发送端口的数据流量的复制后，可以将复制的每份数据流量分别发送至其他目的发送端口。此时，分流器10便能同时对外提供去重后的数据流量，以及未去重的数据流量。

在本实施例中，去重模块12可以为一个或多个。第一分流组11可以向一个或多个去重模块12的入口分别发送一份数据流量。

例如，请再次参照图3，去重模块12为两个，第一分流组11可以分别向两个去重模块12的入口发送一份数据流量，以便于两个去重模块12分别对各自接收到的数据流量进行去重处理。

可理解地，每个分流组用于传输数据的带宽有限、端口资源也有限，去重模块12的处理性能也有限。通过设置两个或多个去重模块12、以及将每个去重模块12的出口与新的分流组(例如，第二分流组13、第三分流组14)的入口连接，可以提高数据流量去重的效率，增加去重后的数据流量的数量。

作为一种可选的实施方式，方法还可以包括：通过去重模块12的出口将去重后的数据流量发送至指定目的发送端口。

在本实施例中，指定目的发送端口通常为需要对去重后的数据流量进行分析的分析服务器的端口，可以根据实际情况进行设置。当需要对去重后的流量进行分析的设备(或服务器)为一个时，可以直接将去重后的流量发送至该设备的指定的目的发送端口，无需通过第二分流组13对去重后的流量再复制，以简化分流器10的结构。

为便于理解流量处理方法的整体流程，下面将基于图2所示的分流器10对方法的整体流程进行举例阐述：

在分流器10中的第一分流组11、去重模块12、第二分流组13生效前，需要对第一分流组11、去重模块12、第二复制进行配置。其配置的操作步骤可以包括：开启去重模块12的入口的添加去重报文头(路径信息)功能；将去重模块12的入口添加成第一分流组11的成员；记录源端口S1、S2和S3与第二分流组13的对应关系；配置去重模块12去重处理时需要忽略去重报文头；开启去重模块12的出口的剥离去重报文头功能。

在完成分流器10的配置后，分流器10便可以对接收到的原始流量进行预处理，预处理的步骤可以如下：

第一步，原始流量F1，F1，F2分别通过第一分流组11的源端口S1、S2、S3进入分流器10(分流器10)。

第二步，第一分流组11根据成员端口属性完成流量复制，其中，复制到目的发送端口D1和目的发送端口D2的流量未经过处理就可以发送到分析服务器。复制到去重入口上的流量在原始报文头前添加去重报文头(即路径信息)，添加去重报文头的流量变成F1’、F1’、F2’。

第三步，去重模块12收到流量F1’、F1’、F2’后，进行去重处理(该去重模块12可以忽略去重报文头)，去重后的流量变成F1’、F2’(多余的F1’被当成重复流量丢弃)。

第四步，去重模块12读取去重后的流量F1’、F2’的去重报文头，找到报文源端口，根据源端口和第二分流组13(目的发送端口)的对应关系，找到去第二分流组13的端口标识(Identity Document，简称ID)，并将用于去往第二分流组13的端口标识更新到去重报文头中后送到去重出口。

第五步，去重模块12中的出口收到去重的报文后，通过去重报文头中的报文第二分流组13的端口标识字段找到对应的报文复制组并将去重报文头剥离掉(流量从F1’、F2’变回F1、F2)后送到第二分流组13。

第六步，第二分流组13根据成员端口属性完成流量复制，复制到目的发送端口D3和目的发送端口D4。目的发送端口D3和D4的输出的流量便为去重后的流量。

基于上述设计，分流器10通过将去重入口添加为原始流量复制组成员，以及为去重入口的数据流量添加去重报文头，确保原始流量被复制到原始流量分析服务器的同时，也能复制到去重处理单元，以达到用户根据需求可灵活配置需要接收原始流量的分析服务器，以及需要接收去重后流量的服务器的目的。

请参照图5，本申请实施例还提供一种流量处理装置100，可以应用于上述的分流器10中，用于执行或实现方法的各步骤。该流量处理装置100包括至少一个可以软件或固件(Firmware)或者芯片逻辑的形式固化在分流器10中的虚拟功能模块。处理器用于执行存储器中存储的可执行模块，例如流量处理装置100所包括的软件功能模块及计算机程序等。

在本实施例中，流量处理装置100可以包括端口收发模块110、分流模块120及去重模块130。所述分流模块120中包括一个以上的分流组，每个分流组中绑定有接收数据流量的源端口和对应的目的发送端口。例如，分流模块120可以包括第一分流组121及第二分流组122。

所述端口收发模块110，用于将源端口接收的数据流量送入绑定的第一分流组121。

所述分流模块120，用于在确定所述第一分流组121的目的发送端口中包括所述去重模块130对应的入口时，将所述数据流量送入所述去重模块130。

所述去重模块130，用于在所述去重模块130对所述数据流量执行去重操作后，将去重后的所述数据流量由所述去重模块130对应的出口送入所述源端口绑定的第二分流组122。

所述分流模块120，还用于依据所述第二分流组122将去重后的所述数据流量送入对应的目的发送端口。

可选地，所述分流模块120还用于：在所述数据流量中添加所述源端口的信息；将添加所述源端口的信息后的所述数据流量通过所述去重模块130对应的入口送入所述去重模块130，所述源端口的信息用于供所述去重模块130查找所述第二分流组122。

可选地，所述去重模块130还用于：根据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组122；在去重后的所述数据流量中添加所述第二分流组122的信息发送到所述去重模块130对应的出口；在所述去重模块130对应的出口根据所述第二分流组122的信息，去除所述数据流量中的所述源端口的信息和所述第二分流组122的信息后，将去除所述源端口的信息和所述第二分流组122的信息后的所述数据流量送入所述第二分流组122。

可选地，所述去重模块130还用于：将去重后的所述数据流量发送到所述去重模块130对应的出口；通过所述去重模块130对应的出口依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组122；在所述去重模块130对应的出口去除所述数据流量中的所述源端口的信息后，将去除所述源端口的信息的所述数据流量送入所述第二分流组122。

可选地，所述第一分流组121还用于：在确定所述第一分流组121中除所述去重模块130对应的入口还包括其他目的发送端口时，通过所述分流模块120根据所述其他目的发送端口的数量对所述数据流量进行复制；将复制后的所述数据流量分别送入所述其他目的发送端口。

需要说明的是，所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的分流器10、流量处理装置100的具体工作过程，可以参考前述方法中的各步骤对应过程，在此不再过多赘述。

另外，分流器10中的处理器可以是中央处理器(Central Processing Unit，简称CPU)、图形处理器(Graphics Processing Unit，简称GPU)、网络处理器(NetworkProcessor，简称NP)等；还可以是数字信号处理器(Digital Signal Processing，简称DSP)、专用集成电路(Application Specific Integrated Circuit，简称ASIC)、现场可编程门阵列(Field－Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件，可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。

存储器可以是，但不限于，随机存取存储器，只读存储器，可编程只读存储器，可擦除可编程只读存储器，电可擦除可编程只读存储器等。在本实施例中，存储器可以用于存储端口信息、路径信息等。当然，存储器还可以用于存储程序，处理器在接收到执行指令后，执行该程序。

分流器10还可以包括通信模块，通信模块用于通过网络建立分流器10与分析服务器、流量采集设备的通信连接，并通过网络收发数据。其中，流量采集设备为拓扑网络系统中用于采集流量的设备，可以为服务器、流量采集器等设备。

本申请实施例还提供一种计算机可读存储介质。可读存储介质中存储有计算机程序，当计算机程序在计算机上运行时，使得计算机执行如上述实施例中所述的流量处理方法。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本申请可以通过硬件实现，也可以借助软件加必要的通用硬件平台的方式来实现，基于这样的理解，本申请的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者分流器等)执行本申请各个实施场景所述的方法。

综上所述，本申请提供一种流量处理方法、装置及分流器。方法包括：将源端口接收的数据流量送入绑定的第一分流组；在确定第一分流组的目的发送端口中包括去重模块对应的入口时，通过分流模块将数据流量送入去重模块；在去重模块对数据流量执行去重操作后，将去重后的数据流量由去重模块对应的出口送入源端口绑定的第二分流组，分流模块依据第二分流组将去重后的数据流量送入对应的目的发送端口。在本方案中，分流模块可以通过分流组将数据流量复制成多份，去重模块可以将从分流组送入数据流量进行去重，使得分流器可以同时提供去重后的数据流量及未去重的数据流量，有利于用户根据需求灵活控制分流器输出的数据流量的类型从而改善对流量进行预处理的灵活性差的问题，有利于满足流量多样化分析业务的需求。

在本申请所提供的实施例中，应该理解到，所揭露的装置、系统和方法，也可以通过其它的方式实现。以上所描述的装置、系统和方法实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本申请的多个实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。另外，在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。

以上所述仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

Claims (11)

1.一种流量处理方法，其特征在于，应用于分流器，所述分流器包括分流模块及去重模块，所述分流模块中包括一个以上的分流组，每个分流组中绑定有接收数据流量的源端口和对应的目的发送端口，所述方法包括：

将源端口接收的数据流量送入绑定的第一分流组；

在确定所述第一分流组的目的发送端口中包括所述去重模块对应的入口时，通过所述分流模块将所述数据流量送入所述去重模块；

在所述去重模块对所述数据流量执行去重操作后，将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组，所述分流模块依据所述第二分流组将去重后的所述数据流量送入对应的目的发送端口。

2.根据权利要求1所述的方法，其特征在于，所述通过所述分流模块将所述数据流量送入所述去重模块，包括：

通过所述分流模块在所述数据流量中添加所述源端口的信息；

将添加所述源端口的信息后的所述数据流量通过所述去重模块对应的入口送入所述去重模块，所述源端口的信息用于供所述去重模块查找所述第二分流组。

3.根据权利要求2所述的方法，其特征在于，所述将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组，包括：

通过所述去重模块依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；

在去重后的所述数据流量中添加所述第二分流组的信息发送到所述去重模块对应的出口；

在所述去重模块对应的出口根据所述第二分流组的信息，去除所述数据流量中的所述源端口的信息和所述第二分流组的信息后，将去除所述源端口的信息和所述第二分流组的信息后的所述数据流量送入所述第二分流组。

4.根据权利要求2所述的方法，其特征在于，所述将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组，包括：

通过所述去重模块将去重后的所述数据流量发送到所述去重模块对应的出口；

通过所述去重模块对应的出口依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；

在所述去重模块对应的出口去除所述数据流量中的所述源端口的信息后，将去除所述源端口的信息的所述数据流量送入所述第二分流组。

5.根据权利要求1-4中任意一项所述的方法，其特征在于，所述方法还包括：

在确定所述第一分流组中除所述去重模块对应的入口还包括其他目的发送端口时，通过所述分流模块根据所述其他目的发送端口的数量对所述数据流量进行复制；

将复制后的所述数据流量分别送入所述其他目的发送端口。

6.一种流量处理装置，其特征在于，应用于分流器，所述流量处理装置包括端口收发模块、分流模块及去重模块，所述分流模块中包括一个以上的分流组，每个分流组中绑定有接收数据流量的源端口和对应的目的发送端口，其中：

所述端口收发模块，用于将源端口接收的数据流量送入绑定的第一分流组；

所述分流模块，用于在确定所述第一分流组的目的发送端口中包括所述去重模块对应的入口时，将所述数据流量送入所述去重模块；

所述去重模块，用于在所述去重模块对所述数据流量执行去重操作后，将去重后的所述数据流量由所述去重模块对应的出口送入所述源端口绑定的第二分流组；

所述分流模块，还用于依据所述第二分流组将去重后的所述数据流量送入对应的目的发送端口；

所述端口收发模块，还用于将送入目的发送端口的去重后的所述数据流量从所述目的发送端口发送出去。

7.根据权利要求6所述的装置，其特征在于，所述分流模块还用于：

在所述数据流量中添加所述源端口的信息；

将添加所述源端口的信息后的所述数据流量通过所述去重模块对应的入口送入所述去重模块，所述源端口的信息用于供所述去重模块查找所述第二分流组。

8.根据权利要求7所述的装置，其特征在于，所述去重模块还用于：

根据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；

在去重后的所述数据流量中添加所述第二分流组的信息发送到所述去重模块对应的出口；

在所述去重模块对应的出口根据所述第二分流组的信息，去除所述数据流量中的所述源端口的信息和所述第二分流组的信息后，将去除所述源端口的信息和所述第二分流组的信息后的所述数据流量送入所述第二分流组。

9.根据权利要求7所述的装置，其特征在于，所述去重模块还用于：

将去重后的所述数据流量发送到所述去重模块对应的出口；

通过所述去重模块对应的出口依据去重后的所述数据流量中的所述源端口的信息，确定与所述源端口对应的用于发送去重后的所述数据流量的所述第二分流组；

在所述去重模块对应的出口去除所述数据流量中的所述源端口的信息后，将去除所述源端口的信息的所述数据流量送入所述第二分流组。

10.根据权利要求6-9中任意一项所述的装置，其特征在于，所述分流模块还用于：

在确定所述第一分流组中除所述去重模块对应的入口还包括其他目的发送端口时，根据所述其他目的发送端口的数量对所述数据流量进行复制；

将复制后的所述数据流量分别送入所述其他目的发送端口。

11.一种分流器，其特征在于，所述分流器包括存储器和处理器，所述存储器内存储计算机程序，当所述计算机程序被所述处理器执行时，使得所述分流器执行如权利要求1-5中任一项所述的方法。

Images