CN116094950A - 一种流量采集带宽的控制方法、装置及流量分析服务器 - Google Patents

一种流量采集带宽的控制方法、装置及流量分析服务器 Download PDF

Info

Publication number
CN116094950A
CN116094950A CN202111283855.6A CN202111283855A CN116094950A CN 116094950 A CN116094950 A CN 116094950A CN 202111283855 A CN202111283855 A CN 202111283855A CN 116094950 A CN116094950 A CN 116094950A
Authority
CN
China
Prior art keywords
flow
monitoring
objects
data
monitoring tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111283855.6A
Other languages
English (en)
Inventor
刘刚国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Maipu Communication Technology Co Ltd
Original Assignee
Maipu Communication Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Maipu Communication Technology Co Ltd filed Critical Maipu Communication Technology Co Ltd
Priority to CN202111283855.6A priority Critical patent/CN116094950A/zh
Publication of CN116094950A publication Critical patent/CN116094950A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/02Capturing of monitoring data
    • H04L43/028Capturing of monitoring data by filtering
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/50Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本申请提供一种流量采集带宽的控制方法、装置及流量分析服务器。该方法包括:获取网点设备发送的第一流量报文;监控流量监控工具的第二流量数据;其中,第二流量数据为流量监控工具封装第一流量报文时所产生的流量数据;当第二流量数据所占用的带宽超过预设阈值时,基于第一流量报文确定流量监控工具的监控对象中的过滤对象;将过滤对象发送至网点设备,以使流量监控工具对排除过滤对象外的剩余监控对象进行监控。通过上述动态调整流量监控工具的监控对象的方式,能够对网点设备进行流量采集所消耗的带宽进行有效地且合理的控制,使得网点设备中采集流量所消耗的带宽始终处于一个稳定、合理的范围。

Description

一种流量采集带宽的控制方法、装置及流量分析服务器
技术领域
本申请涉及通信技术领域,具体而言,涉及一种流量采集带宽的控制方法、装置及流量分析服务器。
背景技术
网络已作为各种企业、单位的主要基础设施,对于中心-网点型网络架构的企业,该企业在各个地理位置的网点门店,均配置有网点设备以用于该网点的终端设备接入企业的网络和业务系统。
对于各企业、单位来说,网络带宽仍然是稀缺资源,而针对网点设备的流量采集,不能采用对汇聚或核心设备相同的方法(汇聚、核心设备通常进行全量采集)。这就要求在任何情况下都需要保障链路带宽不能被流量采集过多占用,但是目前对于网点设备的流量采集的方式,如固定采集某些业务的数据流量,虽然能够一定程度控制带宽的过多占用,但是当这些业务的数据流量明显增多时,其带宽仍无法得到有效地控制。
发明内容
本申请实施例的目的在于提供一种流量采集带宽的控制方法、装置及流量分析服务器,以对网点设备的流量采集所消耗的带宽进行有效地且合理的控制。
本发明是这样实现的:
第一方面,本申请实施例提供一种流量采集带宽的控制方法,应用于流量分析服务器,所述方法包括:获取网点设备发送的第一流量报文;其中,所述网点设备通过自身配置的流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为所述第一流量报文;监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象;将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控。
本申请实施例所提供的流量采集带宽的控制方法,流量分析服务器在监控到流量监控工具封装第一流量报文时所产生的流量数据超过预设阈值后,能够基于第一流量报文来确定流量监控工具所需要去除的过滤对象,进而使得流量监控工具在后续的监控中不再对过滤对象进行监控,通过上述动态调整流量监控工具的监控对象的方式,能够对网点设备进行流量采集所消耗的带宽进行有效地且合理的控制,使得网点设备中采集流量所消耗的带宽始终处于一个稳定、合理的范围。
结合上述第一方面提供的技术方案,在一些可能的实现方式中,所述监控对象包括关键对象及普通对象,所述基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象,包括:确定所述第一流量报文中的所述关键对象及所述普通对象;基于所述监控对象的类别以及各监控对象的流量大小对所述监控对象进行排序;所述关键对象排列在所述普通对象前面,且流量大的监控对象排列在流量小的监控对象前面;每个所述监控对象包括:源IP地址,应用及目的IP地址;计算距离当前时间的预设时长内每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽,并根据排序顺序按照从低到高的顺序依次抽取所述监控对象,直至所述流量监控工具在所述预设时长内的平均带宽不超过所述预设阈值的第一预设比值;其中,抽取出的监控对象为所述过滤对象。
在本申请实施例中,通过监控对象的类别以及流量大小对监控对象进行排序,以使得流量分析服务器在确定过滤对象时,先过滤掉非关键对象以及流量小的对象。通过该方式,使得网点设备能够继续对关键业务及访问量大的业务进行监控,提高确定过滤对象的合理性。
结合上述第一方面提供的技术方案,在一些可能的实现方式中,所述计算距离当前时间的预设时长内每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽,包括:统计距离当前时间的预设时长内每个所述监控对象的数据条数;基于所述流量监控工具对每个所述监控对象中的每条数据进行封装的模板数据大小计算每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽。
在本申请实施例中,通过流量监控工具对每个监控对象中的每条数据进行封装的模板数据大小可以准确地计算出每个监控对象在被监控时流量监控工具的预计消耗带宽。
结合上述第一方面提供的技术方案,在一些可能的实现方式中,所述监控对象包括关键对象及普通对象,所述基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象,包括:确定所述第一流量报文中的所述关键对象;确定所述流量监控工具的监控对象中除所述关键对象外的其余对象为所述过滤对象。
在本申请实施例中,确定出的过滤对象为非关键对象。通过该方式,使得网点设备能够继续对关键业务进行监控,提高确定过滤对象的合理性。
结合上述第一方面提供的技术方案,在一些可能的实现方式中,在所述将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控之后,所述方法还包括:获取所述网点设备发送的第三流量报文;其中,所述第三流量报文为所述流量监控工具对排除所述过滤对象外的流量数据进行监控并封装形成的报文;监控所述流量监控工具的第四流量数据;其中,所述第四流量数据为所述流量监控工具封装所述第三流量报文时所产生的流量数据;当所述第四流量数据所占用的带宽低于所述预设阈值的第二预设比值时,确定所述流量监控工具的扩展监控对象;将所述扩展监控对象发送至所述网点设备,以使所述流量监控工具对所述扩展监控对象进行监控。
在本申请实施例中,流量分析服务器在监控到流量监控工具封装第三流量报文时所产生的流量数据低于预设阈值的第二预设比值时,还会确定出流量监控工具的扩展监控对象;进而使得网点设备扩大监控对象。通过该方式使得当流量采集所消耗的带宽过少时,能够主动地增加监控对象,进而使得整个流量采集过程既不会占用过多带宽,又能够采集到一定数量的流量数据。
第二方面,本申请实施例提供一种流量采集带宽的控制方法,应用于网点设备,其中,所述网点设备中配置有流量监控工具,所述方法包括:通过所述流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为第一流量报文;将所述第一流量报文发送至流量分析服务器;接收所述流量分析服务器发送的过滤对象,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控;其中,所述流量分析服务器通过监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述过滤对象。
第三方面,本申请实施例提供一种流量采集带宽的控制装置,应用于流量分析服务器,所述装置包括:获取模块,用于获取网点设备发送的第一流量报文;其中,所述网点设备通过自身配置的流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为所述第一流量报文;监控模块,用于监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;确定模块,用于当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象;发送模块,用于将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控。
第四方面,本申请实施例提供一种流量采集带宽的控制装置,应用于网点设备,其中,所述网点设备中配置有流量监控工具,所述装置包括:监控模块,用于通过所述流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为第一流量报文;发送模块,用于将所述第一流量报文发送至流量分析服务器;接收模块,用于接收所述流量分析服务器发送的过滤对象,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控;其中,所述流量分析服务器通过监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述过滤对象。
第五方面,本申请实施例提供一种流量分析服务器,包括:处理器和存储器,所述处理器和所述存储器连接;所述存储器用于存储程序;所述处理器用于调用存储在所述存储器中的程序,执行如上述第一方面实施例和/或结合上述第一方面实施例的一些可能的实现方式提供的方法。
第六方面,本申请实施例提供一种网点设备,包括:处理器和存储器,所述处理器和所述存储器连接;所述存储器用于存储程序;所述处理器用于调用存储在所述存储器中的程序,执行如上述第二方面实施例提供的方法。
第七方面,本申请实施例提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序在被处理器运行时执行如上述第一方面实施例和/或结合上述第一方面实施例的一些可能的实现方式提供的方法,或执行如上述第二方面实施例提供的方法。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对本申请实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1为本申请实施例提供的一种流量监控系统的系统框图。
图2为本申请实施例提供的一种流量分析服务器的模块框图。
图3为本申请实施例提供的一种流量采集带宽的控制方法的步骤流程图。
图4为本申请实施例提供的另一种流量采集带宽的控制方法的步骤流程图。
图5为本申请实施例提供的又一种流量采集带宽的控制方法的步骤流程图。
图标:10-流量监控系统;100-流量分析服务器;110-处理器;120-存储器;200-网点设备。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。
请参阅图1,本申请实施例提供一种流量监控系统10,其包括流量分析服务器100以及网点设备200。
其中,流量分析服务器100与网点设备200之间通信连接。网点设备200中配置有流量监控工具,通过流量监控工具可采集经过该网点设备的流量数据。其中,流量监控工具可以是,但不限于Netflow、sFlow等。
流量分析服务器100用于获取网点设备200发送的流量监控数据,以及下发监控策略至网点设备200中,以使网点设备200基于监控策略进行流量的监控。
请参阅图2,图2为本申请实施例提供的流量分析服务器100的示意性模块框图。流量分析服务器100可以是但不限于网络服务器、数据库服务器、云服务器或由多个子服务器构成的服务器集成等。当然,上述列举的设备仅用于便于理解本申请实施例,其不应作为对本实施例的限定。
在结构上,流量分析服务器100可以包括处理器110和存储器120。
处理器110与存储器120直接或间接地电性连接,以实现数据的传输或交互,例如,这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。流量采集带宽的控制装置包括至少一个可以软件或固件(Firmware)的形式存储在存储器120中或固化在流量分析服务器100的操作系统(Operating System,OS)中的软件模块。处理器110用于执行存储器120中存储的可执行模块,例如,流量采集带宽的控制装置所包括的软件功能模块及计算机程序等,以实现流量采集带宽的控制方法。处理器110可以在接收到执行指令后,执行计算机程序。
其中,处理器110可以是一种集成电路芯片,具有信号处理能力。处理器110也可以是通用处理器,例如,可以是中央处理器(Central Processing Unit,CPU)、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific IntegratedCircuit,ASIC)、分立门或晶体管逻辑器件、分立硬件组件,可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。此外,通用处理器可以是微处理器或者任何常规处理器等。
存储器120可以是,但不限于,随机存取存储器(Random Access Memory,RAM)、只读存储器(Read Only Memory,ROM)、可编程只读存储器(Programmable Read-OnlyMemory,PROM)、可擦可编程序只读存储器(Erasable Programmable Read-Only Memory,EPROM),以及电可擦编程只读存储器(Electric Erasable Programmable Read-OnlyMemory,EEPROM)。存储器120用于存储程序,处理器110在接收到执行指令后,执行该程序。
需要说明的是,图2所示的结构仅为示意,本申请实施例提供的流量分析服务器100还可以具有比图2更少或更多的组件,或是具有与图2所示不同的配置。此外,图2所示的各组件可以通过软件、硬件或其组合实现。
于本申请实施例中,流量分析服务器100中配置有流量分析平台,以使得管理员可以通过流量分析平台配置流量监控的关键对象及相关监控参数。流量分析平台可以包括可视化面板,以使得管理员可以实时监控当前采集到的网点设备的流量数据。
其中,网点设备200可以是,但不限于路由器,网关等等。网点设备200的具体结构也可以参考图2所示出的结构,本申请不作详述。网点设备200可以设置在不同的区域,相应的,流量分析服务器100可以同时与多个网点设备200进行连接,本申请不作限定。
请参阅图3,本申请实施例提供一种应用于流量监控系统的流量采集带宽的控制方法。该方法具体包括:步骤S101~步骤S106。
步骤S101:网点设备通过流量监控工具对流经网点设备的数据流量进行监控,并通过流量监控工具封装为第一流量报文。
以流量监控工具为Netflow为例(后续示例均以Netflow为例),流量监控工具进行流量采集,按照标准的五元组(源IP(Internet Protocol,网际互连协议)地址、源端口、目的IP地址、目的端口、网络协议)、出端口、入端口、流量大小、报文个数等其它信息基于Netflow封装模板封装为标准的Netflow9报文(即第一流量报文)。
需要说明的是,流量采集协议中,采用Netflow9的报文协议传输数据,在此协议中,不同类型的数据(TCP(Transmission Control Protocol,传输控制协议)、UDP(UserDatagram Protocol,用户数据报协议)等)有不同的封装模板,传输数据时按照模板格式来组装数据,即Netflow封装模板包括TCP流量模板和UDP流量模板。
其中,TCP流量模板如下:
Figure BDA0003332272670000091
由于上述模板为本领域所熟知的TCP流量模块,对此不作过多说明。
其中,UDP流量模板如下:
Figure BDA0003332272670000092
Figure BDA0003332272670000101
由于上述模板为本领域所熟知的UDP流量模块,对此不作过多说明。
步骤S102:网点设备将第一流量报文发送至流量分析服务器。
步骤S103:流量分析服务器监控流量监控工具的第二流量数据。
其中,第二流量数据为流量监控工具封装第一流量报文时所产生的流量数据。
于本申请实施例中,流量分析服务器在获取到第一流量报文之后,即可得到流量监控工具封装第一流量报文时所产生的流量数据。具体的,流量分析服务器可以根据Netflow封装模板确定出监控数据的条数,进而确定出所产生的流量数据。即封装一条数据的Netflow封装模板大小即为采集该条数据所产生的流量。
步骤S104:当第二流量数据所占用的带宽超过预设阈值时,流量分析服务器基于第一流量报文确定流量监控工具的监控对象中的过滤对象。
流量分析服务器获取到流量监控工具封装第一流量报文时所产生的流量数据后,判断当前的流量数据所占用的带宽是否超过预设阈值,若未超过预设阈值,则继续进行监控,若超过阈值则,基于第一流量报文确定流量监控工具的监控对象中的过滤对象。
示例性的,预设阈值可以是200kbps(千比特每秒)、300kbps,本申请作限定。
一实施例中,监控对象包括关键对象及普通对象。作为一种确定过滤对象的实施方式,上述步骤中流量分析服务器基于第一流量报文确定流量监控工具的监控对象中的过滤对象,可以具体包括:流量分析服务器确定第一流量报文中的关键对象及普通对象;基于所述监控对象的类别以及各监控对象的流量大小对监控对象进行排序;计算距离当前时间的预设时长内每个监控对象在被监控时流量监控工具的预计消耗带宽,并根据排序顺序按照从低到高的顺序依次抽取监控对象,直至流量监控工具在所述预设时长内的平均带宽不超过预设阈值的第一预设比值。
其中,关键对象排列在普通对象前面,且流量大的监控对象排列在流量小的监控对象前面;每个监控对象包括:源IP地址,应用及目的IP地址。抽取出的监控对象为过滤对象。
需要说明的是,关键对象由管理员进行配置,管理员可以通过流量分析平台设置关键对象的五元组(源IP地址、源端口、目的IP地址、目的端口、网络协议)。通过设置关键对象的五元组以便于从监控对象出确定出关键对象。每个监控对象包括源IP、应用及目的IP,即按照“源IP、应用及目的IP”对流量数据进行排序。该应用为根据五元组识别出的应用,其可以是应用程序、企业内部访问地址或网站。预设时长可以是30分钟、15分钟等,第一预设比值可以是70%、80%,本申请均不作限定。
示例性的,监控工具的监控对象包括监控对象A、监控对象B、监控对象C、监控对象D和监控对象E。其中,监控对象A、监控对象B为管理员配置的关键对象。上述监控对象的流量大小分别为监控对象B>监控对象D>>监控对象A监控对象C>监控对象E。则根据上述规则进行排序后的顺序为:监控对象B、监控对象A、监控对象D、监控对象C、监控对象E。最后流量分析服务器计算15分钟内每个监控对象在被监控时流量监控工具的预计消耗带宽,然后根据排序顺序按照从低到高的顺序依次抽取监控对象,直至流量监控工具在15分钟内的平均带宽不超过预设阈值的70%。如,当抽取后监控对象E,流量监控工具在15分钟内的平均带宽不超过预设阈值的70%时,则监控对象E确定为过滤对象。
其中,计算距离当前时间的预设时长内每个监控对象在被监控时流量监控工具的预计消耗带宽,具体包括:统计距离当前时间的预设时长内每个监控对象的数据条数;基于流量监控工具对每个监控对象中的每条数据进行封装的模板数据大小计算每个监控对象在被监控时流量监控工具的预计消耗带宽。
示例性的,统计30分钟内每个监控对象的数据条数,然后基于每条数据进行封装的模板数据大小计算每个监控对象在被监控时流量监控工具的预计消耗带宽。封装一条数据的Netflow封装模板大小即为采集该条数据所产生的流量,通过该方式,即可得到预估的带宽。本申请实施例中,通过流量监控工具对每个监控对象中的每条数据进行封装的模板数据大小以便准确地计算出每个监控对象在被监控时流量监控工具的预计消耗带宽。
在本申请实施例中,通过关键对象以及流量大小对监控对象进行排序,以使得流量分析服务器在确定过滤对象时,先过滤掉非关键对象以及流量小的对象。通过该方式,使得网点设备能够继续对关键业务及访问量大的业务进行监控,提高确定过滤对象的合理性。
作为另一种确定过滤对象的实施方式,上述步骤中流量分析服务器基于第一流量报文确定流量监控工具的监控对象中的过滤对象,可以具体包括:流量分析服务器确定第一流量报文中的关键对象;确定流量监控工具的监控对象中除关键对象外的其余对象为过滤对象。
也即,流量分析服务器可以仅根据关键对象来确定出过滤对象,通过该方式也能使得网点设备继续对关键业务进行监控,提高确定过滤对象的合理性。
步骤S105:流量分析服务器将过滤对象发送至网点设备。
在确定出过滤对象后,流量分析服务器将过滤对象发送至网点设备,该过滤对象即为流量分析服务器下发的监控策略。
步骤S106:网点设备接收流量分析服务器发送的过滤对象,以使流量监控工具对排除过滤对象外的剩余监控对象进行监控。
示例性的,流量分析服务器发送的为过滤对象监控对象E,则在后续的监控过程中,流量监控工具仅对监控对象A、监控对象B、监控对象C和监控对象D进行流量的监控和报文的封装。
综上,本申请实施例所提供的流量采集带宽的控制方法,流量分析服务器在监控到流量监控工具封装第一流量报文时所产生的流量数据超过预设阈值后,能够基于第一流量报文来确定流量监控工具所需要去除的过滤对象,进而使得流量监控工具在后续的监控中不再对过滤对象进行监控,通过上述动态调整流量监控工具的监控对象的方式,能够对网点设备进行流量采集所消耗的带宽进行有效地且合理的控制,使得网点设备中采集流量所消耗的带宽始终处于一个稳定、合理的范围。
可选地,在上述步骤S106之后,该方法还包括:流量分析服务器获取网点设备发送的第三流量报文;流量分析服务器监控流量监控工具的第四流量数据,当第四流量数据所占用的带宽低于预设阈值的第二预设比值时,确定流量监控工具的扩展监控对象;流量分析服务器将扩展监控对象发送至网点设备,以使流量监控工具对扩展监控对象进行监控。
其中,第三流量报文为流量监控工具对排除过滤对象外的流量数据进行监控并封装形成的报文;第四流量数据为流量监控工具封装第三流量报文时所产生的流量数据。上述的第二预设比值可以是40%、50%等,本申请不作对象。上述步骤的目的在于当流量采集所消耗的带宽过少时,能够主动地增加监控对象,进而使得整个流量采集过程既不会占用过多带宽,又能够采集到一定数量的流量数据。
可选地,上述的扩展监控对象可以是流量分析服务器在前一次所确定出的过滤对象。当然,扩展监控对象也可以是流量分析服务器在前一次所确定出的过滤对象的一半的对象,对此,本申请不作限定。
请参阅图4,基于同一发明构思,图4为本申请实施例提供的另一种流量采集带宽的控制方法的步骤流程图,该方法应用于图2所示的流量分析服务器100。需要说明的是,本申请实施例提供的流量采集带宽的控制方法不以图4及以下所示的顺序为限制,该方法包括:步骤S201-步骤S204。
步骤S201:获取网点设备发送的第一流量报文。
其中,网点设备通过自身配置的流量监控工具对流经网点设备的数据流量进行监控,并通过流量监控工具封装为所述第一流量报文。
步骤S202:监控流量监控工具的第二流量数据。
其中,第二流量数据为流量监控工具封装第一流量报文时所产生的流量数据。
步骤S203:当第二流量数据所占用的带宽超过预设阈值时,基于第一流量报文确定流量监控工具的监控对象中的过滤对象。
步骤S204:将过滤对象发送至网点设备,以使流量监控工具对排除过滤对象外的剩余监控对象进行监控。
需要说明的是,由于上述步骤在前述实施例中已有说明,此处不作赘述,相同部分互相参考即可。
请参阅图5,基于同一构思,本申请实施例还提供一种流量采集带宽的控制方法,该方法应用于图2所示的网点设备200。需要说明的是,该流量采集带宽的控制方法不以图5及以下所示的顺序为限制,该方法包括步骤S301~步骤S303。
步骤S301:通过流量监控工具对流经网点设备的数据流量进行监控,并通过流量监控工具封装为第一流量报文。
步骤S302:将第一流量报文发送至流量分析服务器。
步骤S303:接收流量分析服务器发送的过滤对象,以使流量监控工具对排除过滤对象外的剩余监控对象进行监控。
其中,流量分析服务器通过监控流量监控工具的第二流量数据;其中,第二流量数据为所述流量监控工具封装第一流量报文时所产生的流量数据;当第二流量数据所占用的带宽超过预设阈值时,基于第一流量报文确定所述过滤对象。
需要说明的是,由于上述步骤在前述实施例中已有说明,此处不作赘述,相同部分互相参考即可。
基于同一发明构思,本申请实施例还提供一种流量采集带宽的控制装置,应用于流量分析服务器,所述装置包括:
获取模块,用于获取网点设备发送的第一流量报文;其中,所述网点设备通过自身配置的流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为所述第一流量报文。
监控模块,用于监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据。
确定模块,用于当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象。
发送模块,用于将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控。
可选地,所述监控对象包括关键对象及普通对象,确定模块具体用于确定所述第一流量报文中的所述关键对象及所述普通对象;基于所述监控对象的类别以及各监控对象的流量大小对所述监控对象进行排序;所述关键对象排列在所述普通对象前面,且流量大的监控对象排列在流量小的监控对象前面;每个所述监控对象包括:源IP地址,应用及目的IP地址;计算距离当前时间的预设时长内每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽,并根据排序顺序按照从低到高的顺序依次抽取所述监控对象,直至所述流量监控工具在所述预设时长内的平均带宽不超过所述预设阈值的第一预设比值;其中,抽取出的监控对象为所述过滤对象。
可选地,确定模块还具体用于统计距离当前时间的预设时长内每个所述监控对象的数据条数;基于所述流量监控工具对每个所述监控对象中的每条数据进行封装的模板数据大小计算每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽。
可选地,所述监控对象包括关键对象及普通对象,确定模块还具体用于确定所述第一流量报文中的所述关键对象;确定所述流量监控工具的监控对象中除所述关键对象外的其余对象为所述过滤对象。
可选地,在所述将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控之后,获取模块,还用于获取所述网点设备发送的第三流量报文;其中,所述第三流量报文为所述流量监控工具对排除所述过滤对象外的流量数据进行监控并封装形成的报文。相应的,监控模块还用于监控所述流量监控工具的第四流量数据;其中,所述第四流量数据为所述流量监控工具封装所述第三流量报文时所产生的流量数据。确定模块还用于当所述第四流量数据所占用的带宽低于所述预设阈值的第二预设比值时,确定所述流量监控工具的扩展监控对象。发送模块还用于将所述扩展监控对象发送至所述网点设备,以使所述流量监控工具对所述扩展监控对象进行监控。
基于同一发明构思,本申请实施例还提供一种流量采集带宽的控制装置,应用于网点设备,所述装置包括:
监控模块,用于通过所述流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为第一流量报文。
发送模块,用于将所述第一流量报文发送至流量分析服务器。
接收模块,用于接收所述流量分析服务器发送的过滤对象,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控;其中,所述流量分析服务器通过监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述过滤对象。
需要说明的是,由于所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
基于同一发明构思,本申请实施例还提供一种计算机可读存储介质,其上存储有计算机程序,计算机程序在被运行时执行上述实施例中提供的方法。
该存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如软盘、硬盘、磁带)、光介质(例如DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
在本申请所提供的实施例中,应该理解到,所揭露装置和方法,可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,又例如,多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
另外,作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
再者,在本申请各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。
在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。
以上所述仅为本申请的实施例而已,并不用于限制本申请的保护范围,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种流量采集带宽的控制方法,其特征在于,应用于流量分析服务器,所述方法包括:
获取网点设备发送的第一流量报文;其中,所述网点设备通过自身配置的流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为所述第一流量报文;
监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;
当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象;
将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控。
2.根据权利要求1所述的方法,其特征在于,所述监控对象包括关键对象及普通对象,所述基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象,包括:
确定所述第一流量报文中的所述关键对象及所述普通对象;
基于所述监控对象的类别以及各监控对象的流量大小对所述监控对象进行排序;所述关键对象排列在所述普通对象前面,且流量大的监控对象排列在流量小的监控对象前面;每个所述监控对象包括:源IP地址,应用及目的IP地址;
计算距离当前时间的预设时长内每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽,并根据排序顺序按照从低到高的顺序依次抽取所述监控对象,直至所述流量监控工具在所述预设时长内的平均带宽不超过所述预设阈值的第一预设比值;其中,抽取出的监控对象为所述过滤对象。
3.根据权利要求2所述的方法,其特征在于,所述计算距离当前时间的预设时长内每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽,包括:
统计距离当前时间的预设时长内每个所述监控对象的数据条数;
基于所述流量监控工具对每个所述监控对象中的每条数据进行封装的模板数据大小计算每个所述监控对象在被监控时所述流量监控工具的预计消耗带宽。
4.根据权利要求1所述的方法,其特征在于,所述监控对象包括关键对象及普通对象,所述基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象,包括:
确定所述第一流量报文中的所述关键对象;
确定所述流量监控工具的监控对象中除所述关键对象外的其余对象为所述过滤对象。
5.根据权利要求1所述的方法,其特征在于,在所述将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控之后,所述方法还包括:
获取所述网点设备发送的第三流量报文;其中,所述第三流量报文为所述流量监控工具对排除所述过滤对象外的流量数据进行监控并封装形成的报文;
监控所述流量监控工具的第四流量数据;其中,所述第四流量数据为所述流量监控工具封装所述第三流量报文时所产生的流量数据;
当所述第四流量数据所占用的带宽低于所述预设阈值的第二预设比值时,确定所述流量监控工具的扩展监控对象;
将所述扩展监控对象发送至所述网点设备,以使所述流量监控工具对所述扩展监控对象进行监控。
6.一种流量采集带宽的控制方法,其特征在于,应用于网点设备,其中,所述网点设备中配置有流量监控工具,所述方法包括:
通过所述流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为第一流量报文;
将所述第一流量报文发送至流量分析服务器;
接收所述流量分析服务器发送的过滤对象,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控;其中,所述流量分析服务器通过监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述过滤对象。
7.一种流量采集带宽的控制装置,其特征在于,应用于流量分析服务器,所述装置包括:
获取模块,用于获取网点设备发送的第一流量报文;其中,所述网点设备通过自身配置的流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为所述第一流量报文;
监控模块,用于监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;
确定模块,用于当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述流量监控工具的监控对象中的过滤对象;
发送模块,用于将所述过滤对象发送至所述网点设备,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控。
8.一种流量采集带宽的控制装置,其特征在于,应用于网点设备,其中,所述网点设备中配置有流量监控工具,所述装置包括:
监控模块,用于通过所述流量监控工具对流经所述网点设备的数据流量进行监控,并通过所述流量监控工具封装为第一流量报文;
发送模块,用于将所述第一流量报文发送至流量分析服务器;
接收模块,用于接收所述流量分析服务器发送的过滤对象,以使所述流量监控工具对排除所述过滤对象外的剩余监控对象进行监控;其中,所述流量分析服务器通过监控所述流量监控工具的第二流量数据;其中,所述第二流量数据为所述流量监控工具封装所述第一流量报文时所产生的流量数据;当所述第二流量数据所占用的带宽超过预设阈值时,基于所述第一流量报文确定所述过滤对象。
9.一种流量分析服务器,其特征在于,包括:处理器和存储器,所述处理器和所述存储器连接;
所述存储器用于存储程序;
所述处理器用于运行存储在所述存储器中的程序,执行如权利要求1-5中任一项所述的方法。
10.一种网点设备,其特征在于,包括:处理器和存储器,所述处理器和所述存储器连接;
所述存储器用于存储程序;
所述处理器用于运行存储在所述存储器中的程序,执行如权利要求6所述的方法。
CN202111283855.6A 2021-11-01 2021-11-01 一种流量采集带宽的控制方法、装置及流量分析服务器 Pending CN116094950A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111283855.6A CN116094950A (zh) 2021-11-01 2021-11-01 一种流量采集带宽的控制方法、装置及流量分析服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111283855.6A CN116094950A (zh) 2021-11-01 2021-11-01 一种流量采集带宽的控制方法、装置及流量分析服务器

Publications (1)

Publication Number Publication Date
CN116094950A true CN116094950A (zh) 2023-05-09

Family

ID=86210642

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111283855.6A Pending CN116094950A (zh) 2021-11-01 2021-11-01 一种流量采集带宽的控制方法、装置及流量分析服务器

Country Status (1)

Country Link
CN (1) CN116094950A (zh)

Similar Documents

Publication Publication Date Title
US7512705B2 (en) Truncating data units
US11272396B2 (en) Frame aggregation method, network setting frame sending method, and device
JP5904908B2 (ja) 通信システムおよび品質管理サーバ
EP4024778A1 (en) Method for determining required bandwidth for data stream transmission, and devices and system
US9705745B2 (en) System and method for virtualizing software defined network (SDN)-based network monitoring
US11570107B2 (en) Method and system for triggering augmented data collection on a network device based on traffic patterns
CN111092840B (zh) 处理策略的生成方法、系统及存储介质
CN109995668B (zh) 流量控制方法及装置、存储介质
EP3952233A1 (en) Tcp congestion control method, apparatus, terminal, and readable storage medium
KR20220029142A (ko) Sdn 컨트롤러 서버 및 이의 sdn 기반 네트워크 트래픽 사용량 분석 방법
CN111885549A (zh) 信息采集方法、装置、存储介质及电子装置
US20220053373A1 (en) Communication apparatus, communication method, and program
CN110661722B (zh) 一种流量控制的方法及装置
WO2023125380A1 (zh) 一种数据管理的方法及相应装置
CN116094950A (zh) 一种流量采集带宽的控制方法、装置及流量分析服务器
JP2011239218A (ja) ネットワーク中継機器、統計情報取得システム及び統計情報取得方法
US7746788B2 (en) Traffic information aggregating apparatus
JP4313779B2 (ja) 輻輳制御方法、輻輳制御プログラム、および、輻輳制御装置
CN111641698B (zh) 一种数据统计方法、系统、设备及存储介质
JP2015103979A (ja) トラフィック管理装置、ネットワークシステム及び制御方法
KR101506448B1 (ko) M2m 트래픽 관리 방법 및 장치
CN114006872B (zh) 数据包的传输方法、装置、电子设备及可读存储介质
CN113691410B (zh) 网络性能数据的获取方法、装置和服务器
CN114244786B (zh) 安全防护方法、装置、设备和存储介质
CN112787952B (zh) 一种业务流量调整方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication