CN112260899A - 基于mmu的网络监测方法和装置 - Google Patents
基于mmu的网络监测方法和装置 Download PDFInfo
- Publication number
- CN112260899A CN112260899A CN202011123363.6A CN202011123363A CN112260899A CN 112260899 A CN112260899 A CN 112260899A CN 202011123363 A CN202011123363 A CN 202011123363A CN 112260899 A CN112260899 A CN 112260899A
- Authority
- CN
- China
- Prior art keywords
- mmu
- packet loss
- network monitoring
- reason
- message
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0823—Errors, e.g. transmission errors
- H04L43/0829—Packet loss
- H04L43/0835—One way packet loss
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0876—Network utilisation, e.g. volume of load or congestion level
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L49/00—Packet switching elements
- H04L49/90—Buffering arrangements
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D30/00—Reducing energy consumption in communication networks
- Y02D30/50—Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Environmental & Geological Engineering (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种基于MMU的网络监测方法和装置,其中,所述基于MMU的网络监测方法包括:报文进入流量管理模块;获取报文出方向的目的端口所对应的队列长度;IPFIX判断所述目的端口对应的队列长度是否大于预设阈值;如果大于,则发出上报信息,且上报原因为出现流量Burst;否则不发出上报信息。通过所述基于MMU的网络监测方法和装置,可以解决现有技术中存在的无法有效监测网络拥塞的问题。
Description
技术领域
本发明涉及网络技术领域,特别是涉及一种基于MMU的网络监测方法和装置。
背景技术
随着软件系统升级以及漏洞修补方案的成熟,直接入侵主机进行破坏的病毒攻击方式逐渐减少,继而转为恶意消耗有限的网络资源,造成网络拥塞,以此破坏系统对外提供服务的能力。网络数据流检测协议(NetFlow)技术可实现对高速转发的IP数据流进行测量和统计,成为了当今互联网领域公认的最主要的IP/MPLS流量分析、统计和计费行业标准。NetFlow技术能对IP/MPLS网络的通信流量进行详细的行为模式分析和计量,并提供网络运行的详细统计数据。NetFlow系统包括探测器、采集器和分析报告系统三个部分。
基于流的技术被越来越广泛地应用于网络领域,但网络管理员却缺少一种输出数据流的标准格式。IP数据流信息输出(IP Flow Information Export,IPFIX)就是为了满足这一需求提出的流信息测量的标准协议。IPFIX是一种针对数据流特征分析,基于模板格式输出的协议,一般采用源IP地址、目的IP地址、TCP/UDP源端口、TCP/UDP目的端口、三层协议类型、服务类型和输入端口七元组作为关键字匹配IP报文,记录网络中这些流量的特征,如流量持续时间、报文个数、平均包长等,我们可以根据这些统计信息了解当前网络的应用情况,并根据这些信息对网络进行优化,安全检测和流量计费。
现有交换芯片一般都支持报文入方向和出方向的报文信息统计,但是不能将报文在队列中的情况反馈给用户。报文在入方向处理引擎(Ingress Process Engine,IPE)或出方向处理引擎(Egress Process Engine,EPE)处理时,会将报文转发过程中的一些统计信息送入IPFIX引擎。IPFIX可以将这些统计信息(如报文个数、报文长度、时延、抖动等)写入统计信息表,并上报给上层用户。但通过IPFIX来实现对网络流量的监测,当网络中出现拥塞时,不能及时做出调整,从而导致仍然无法有效地提升网络质量。
发明内容
本发明实施例所要解决的技术问题是如何解决现有技术中存在的无法有效监测网络拥塞的问题。
为了解决上述问题,本发明提供的技术方案如下:
一种基于MMU的网络监测方法,其中,包括:报文进入流量管理模块;获取报文出方向的目的端口所对应的队列长度;IPFIX判断所述目的端口对应的队列长度是否大于预设阈值;如果大于,则发出上报信息,且上报原因为出现流量Burst;否则不发出上报信息。
为了解决上述的技术问题,本发明还公开了另一种基于MMU的网络监测方法,其中,包括:报文进入流量管理模块;通过检测交换芯片的缓冲资源,判定报文是否丢包;如发生丢包,记录丢包原因;IPFIX检测是否产生丢包原因;如果产生丢包原因,则发出上报信息,且上报原因为MMU丢包,并将丢包原因放在所述上报信息中;否则不发出上报信息。
较优的,上述的基于MMU的网络监测方法中,所述检测交换芯片的缓冲资源包括进口资源管理,出口资源管理;所述丢包原因包括:Port buffer资源丢包,队列buffer资源丢包,总buffer资源丢包。
为了解决上述的技术问题,本发明还公开了再一种基于MMU的网络监测方法,其中,包括上述的两种基于MMU的网络监测方法。
较优的,上述的基于MMU的网络监测方法中,所述发出上报信息包括:将MMU统计表中的信息通过DMA上报给用户。
为了解决上述的技术问题,本发明还公开了一种基于MMU的网络监测装置,其中,包括:流量管理模块,用于报文进入后,获取报文出方向的目的端口所对应的队列长度;IPFIX处理引擎,用于判断所述目的端口对应的队列长度是否大于预设阈值;如果大于,则发出上报信息,且上报原因为出现流量Burst;否则不发出上报信息。
为了解决上述的技术问题,本发明还公开了另一种基于MMU的网络监测装置,其中,包括:流量管理模块,用于报文进入后,通过检测交换芯片的缓冲资源,判定报文是否丢包;如发生丢包,记录丢包原因;IPFIX处理引擎,用于检测是否产生丢包原因;如果产生丢包原因,则发出上报信息,且上报原因为MMU丢包,并将丢包原因放在所述上报信息中;否则不发出上报信息。
较优的,上述的基于MMU的网络监测装置中,所述检测交换芯片的缓冲资源包括进口资源管理,出口资源管理;所述丢包原因包括:Port buffer资源丢包,队列buffer资源丢包,总buffer资源丢包。
为了解决上述的技术问题,本发明还公开了再一种基于MMU的网络监测装置,其中,包括上述的两种基于MMU的网络监测装置。
较优的,上述的基于MMU的网络监测装置中,所述发出上报信息包括:将MMU统计表中的信息通过DMA上报给用户。
与现有技术相比,本发明的技术方案具有以下优点:
本发明中,本发明提出了一种基于内存管理单元(Memory Management Unit,MMU)的网络监测方法,为了统计和计量MMU中的丢包和队列信息,增加了MMU的IPFIX统计信息表的功能。报文在流量管理模块(Taffic Manager,TM)处理时,通过获取队列长度,在TM丢包时获取丢包原因,送往IPFIX处理引擎,在IPFIX处理引擎做记录,因此补充传统基于出入方向统计报文信息的不足,解决了现有技术中一则不能统计MMU的丢包情况,二则用户无法获取报文在队列中处理情况以及队列的状态信息的问题。通过将信息流在队列中处理情况上报给用户,真正实现网络可视化。
附图说明
图1是本发明实施例所应用的IPFIX的基本架构示意图;
图2是本发明实施例1的一种基于MMU的网络监测方法的流程示意图。
具体实施方式
现有交换芯片一般都支持报文入方向和出方向的报文信息统计,但是不能将报文在队列中的情况反馈给用户。报文在入方向处理引擎或出方向处理引擎处理时,会将报文转发过程中的一些统计信息送入IPFIX引擎。IPFIX可以将这些统计信息(如报文个数、报文长度、时延、抖动等)写入统计信息表,并上报给上层用户。但通过IPFIX来实现对网络流量的监测,当网络中出现拥塞时,不能及时做出调整,从而导致仍然无法有效地提升网络质量。
本发明实施例为了统计和计量MMU中的丢包和队列信息,增加了MMU的IPFIX统计信息表的功能。报文在流量管理模块(Taffic Manager,TM)处理时,获取队列长度,在TM丢包时获取丢包原因,送往IPFIX处理引擎,在IPFIX处理引擎做记录,因此补充传统基于出入方向统计报文信息的不足,解决了现有技术中一则不能统计MMU的丢包情况,二则用户无法获取报文在队列中处理情况以及队列的状态信息的问题。通过将信息流在队列中处理情况上报给用户,真正实现网络可视化。
为使本发明的上述目的、特征和优点能够更为明显易懂,下面结合附图对本发明的具体实施例做详细的说明。
实施例1
本实施例公开了一种基于MMU的网络监测方法,应用于IPFIX标准中。相对于传统IPFIX仅支持IPE和EPE的报文信息统计的处理,本实施例基于MMU的IPFIX芯片实现方法,可以记录队列的状态,当出现突发流量burst或丢包时及时上报给用户。
如图1所示,本实施例的一种基于MMU的网络监测方法包括:
步骤S101,报文进入流量管理模块。
报文在IPE ipfix Engine处理完后,根据关键域匹配,分配相应的flowId,并携带所述flowId,进入流量管理模块处理。
步骤S102,获取报文出方向的目的端口所对应的队列长度,以及检测交换芯片的缓冲资源,判定报文是否丢包;如发生丢包,记录丢包原因。
网络拥塞造成丢包率上升的原因很多,主要是网路资源被大量占用造成的。应用中遇到的造成网络拥塞的情况有很多,如大量的UDP流量,大量的组播流、广播包穿越路由器等。上述情况造成网络拥塞后,系统会采取流量控制,丢弃不能传输的包。所述检查芯片缓冲资源情况包括:进口资源管理和出口资源管理。通过对芯片缓冲资源的检查,可以检测当前报文是否存在丢包的情况,并进一步地输出资源丢包原因,是因为哪种资源检查丢的包。例如,Port buffer资源丢包,队列buffer资源丢包,总buffer资源丢包等。MMU将上述丢包原因记录到MMU统计表中。同时,流量管理模块也会检测并记录报文的目的端口(即在本网络设备上出方向上下一跳的端口地址)的队列长度。
步骤S103,将丢包原因和所述目的端口所对应的队列长度发送给IPFIX处理引擎。
步骤S104,IPFIX判断所述目的端口对应的队列长度是否大于预设阈值。
所述预设阈值存储在寄存器中。通过检测目的端口对应的队列长度是否大于预设阈值,可以判断目前在目的端口是否存在网络拥塞,即流量Burst。如果大于,进入步骤S105,否则进入步骤S106。
步骤S105,发出上报信息,且上报原因为出现流量Burst。
在MMU的统计信息表中保存当前目的端口的队列长度后,将MMU统计表中的信息通过直接存储器访问(Direct Memory Access,DMA)上报给用户,上报原因为出现流量Burst。上报信息中包含最大队列长度、最小队列长度和队列的burst状态等。
步骤S106,IPFIX是否检测到丢包。
IPFIX检测所述记录的丢包原因数量是否大于0,如果丢包原因数量不大于0,则说明报文未发生丢包情况,否则说明已发生丢包。如果大于0,则进入步骤S107,否则进入步骤S108,网络监测结束。
步骤S107,发出上报信息,且上报原因为MMU丢包。
判定出现丢包后,IPFIX记录丢包原因,报文在流量管理模块被丢弃。此时,需要上报给用户,将MMU统计表中的信息,如丢包原因等,通过DMA上报给用户,上报原因为MMU丢包。上报信息中包含具体的丢包原因。
步骤S108,结束。
报文在队列中的排队时延及当前队列的拥塞情况直接反映网络的服务质量,因此根据该队列信息及时调整网络部署,优化网络结构能够显著提升网络质量。本实施例通过计量和统计MMU丢包情况和队列Burst状态,提出了基于MMU的IPFIX的方法,通过记录MMU产生的包丢原因,包括进、出口buffer资源,以及基于MMU记录报文队列的将网络拥塞状态,记录最大队列长度,最小队列长度,队列的突发burst状态,从而便于运维人员对网络进行调整和优化。
实施例2
本实施例公开了一种与实施例1相对应的基于MMU的网络监测装置,包括流量管理模块和IPFIX处理引擎。其中,
流量管理模块用于报文进入后,获取报文出方向的目的端口所对应的队列长度,以及通过检测交换芯片的缓冲资源,判定报文是否丢包;如发生丢包,记录丢包原因。所述检测交换芯片的缓冲资源包括进口资源管理,出口资源管理;所述丢包原因包括:Portbuffer资源丢包,队列buffer资源丢包,总buffer资源丢包。
IPFIX处理引擎用于判断所述目的端口对应的队列长度是否大于预设阈值,以及用于检测所述记录的丢包原因数量是否大于0。如果所述目的端口对应的队列长度大于所述预设阈值,则发出上报信息,且上报原因为出现流量Burst;否则不发出上报信息。如果所述记录的丢包原因数量大于0,则发出上报信息,且上报原因为MMU丢包;否则不发出上报信息。所述发出上报信息包括:将MMU统计表中的信息(包括但不限于,最大队列长度,最小队列长度,队列的突发burst状态,和产生丢包时的丢包原因等)通过DMA上报给用户。
可以理解的是,本实施例的一种基于MMU的网络监测装置和实施例1的一种基于MMU的网络监测方法为基于同一发明构思。本领域技术人员可以理解的是,本实施例的相应实施可以参照实施例1的相应内容,此处不再赘述。
以上是对本发明的实现方式的具体说明,但是本领域的技术人员将理解的是,前面实施方案是示例性的并且是出于清晰和理解的目的,而不限于本发明的范围,所意图的是,本领域的技术人员在阅读了数码说并研究了附图之后,会明了其所有置换形式,增强形式,等同形式,组合形式,改进形式都被包括在本发明的实质范围内。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序和指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:ROM、RAM、磁盘或光盘等。
虽然本发明披露如上,但本发明并非限定于此。任何本领域技术人员,在不脱离本发明的精神和范围内,均可作各种更动与修改,因此本发明的保护范围应当以权利要求所限定的范围为准。
Claims (10)
1.一种基于MMU的网络监测方法,其特征在于,包括:
报文进入流量管理模块;获取报文出方向的目的端口所对应的队列长度;
IPFIX判断所述目的端口对应的队列长度是否大于预设阈值;
如果大于,则发出上报信息,且上报原因为出现流量Burst;否则不发出上报信息。
2.一种基于MMU的网络监测方法,其特征在于,包括:
报文进入流量管理模块;通过检测交换芯片的缓冲资源,判定报文是否丢包;如发生丢包,记录丢包原因;
IPFIX检测是否产生丢包原因;
如果产生丢包原因,则发出上报信息,且上报原因为MMU丢包,并将丢包原因放在所述上报信息中;否则不发出上报信息。
3.如权利要求2所述的基于MMU的网络监测方法,其特征在于,
所述检测交换芯片的缓冲资源包括进口资源管理,出口资源管理;
所述丢包原因包括:Port buffer资源丢包,队列buffer资源丢包,总buffer资源丢包。
4.一种基于MMU的网络监测方法,其特征在于,包括如权利要求1和2所述的基于MMU的网络监测方法。
5.如权利要求4所述的基于MMU的网络监测方法,其特征在于,所述发出上报信息包括:将MMU统计表中的信息通过DMA上报给用户。
6.一种基于MMU的网络监测装置,其特征在于,包括:
流量管理模块,用于报文进入后,获取报文出方向的目的端口所对应的队列长度;
IPFIX处理引擎,用于判断所述目的端口对应的队列长度是否大于预设阈值;
如果大于,则发出上报信息,且上报原因为出现流量Burst;否则不发出上报信息。
7.一种基于MMU的网络监测装置,其特征在于,包括:流量管理模块,用于报文进入后,通过检测交换芯片的缓冲资源,判定报文是否丢包;如发生丢包,记录丢包原因;
IPFIX处理引擎,用于检测是否产生丢包原因;
如果产生丢包原因,则发出上报信息,且上报原因为MMU丢包,并将丢包原因放在所述上报信息中;否则不发出上报信息。
8.如权利要求7所述的基于MMU的网络监测装置,其特征在于,
所述检测交换芯片的缓冲资源包括进口资源管理,出口资源管理;
所述丢包原因包括:Port buffer资源丢包,队列buffer资源丢包,总buffer资源丢包。
9.一种基于MMU的网络监测装置,其特征在于,包括如权利要求6和/或7所述的基于MMU的网络监测装置。
10.如权利要求9所述的基于MMU的网络监测装置,其特征在于,所述发出上报信息包括:将MMU统计表中的信息通过DMA上报给用户。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011123363.6A CN112260899B (zh) | 2020-10-20 | 2020-10-20 | 基于mmu的网络监测方法和装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011123363.6A CN112260899B (zh) | 2020-10-20 | 2020-10-20 | 基于mmu的网络监测方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112260899A true CN112260899A (zh) | 2021-01-22 |
CN112260899B CN112260899B (zh) | 2022-08-26 |
Family
ID=74244417
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011123363.6A Active CN112260899B (zh) | 2020-10-20 | 2020-10-20 | 基于mmu的网络监测方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112260899B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115002009A (zh) * | 2022-05-17 | 2022-09-02 | 中国电信股份有限公司 | 一种流量采样方法、装置、系统、电子设备及介质 |
CN115348219A (zh) * | 2022-08-11 | 2022-11-15 | 中国工商银行股份有限公司 | 网络服务质量队列设置方法、装置、设备、介质和产品 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102404213A (zh) * | 2011-11-18 | 2012-04-04 | 盛科网络(苏州)有限公司 | 报文缓存管理方法及系统 |
CN110661716A (zh) * | 2019-09-16 | 2020-01-07 | 锐捷网络股份有限公司 | 网络丢包的通知方法、监控装置、交换机和存储介质 |
-
2020
- 2020-10-20 CN CN202011123363.6A patent/CN112260899B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102404213A (zh) * | 2011-11-18 | 2012-04-04 | 盛科网络(苏州)有限公司 | 报文缓存管理方法及系统 |
CN110661716A (zh) * | 2019-09-16 | 2020-01-07 | 锐捷网络股份有限公司 | 网络丢包的通知方法、监控装置、交换机和存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115002009A (zh) * | 2022-05-17 | 2022-09-02 | 中国电信股份有限公司 | 一种流量采样方法、装置、系统、电子设备及介质 |
CN115348219A (zh) * | 2022-08-11 | 2022-11-15 | 中国工商银行股份有限公司 | 网络服务质量队列设置方法、装置、设备、介质和产品 |
Also Published As
Publication number | Publication date |
---|---|
CN112260899B (zh) | 2022-08-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7426634B2 (en) | Method and apparatus for rate based denial of service attack detection and prevention | |
US7729271B2 (en) | Detection method for abnormal traffic and packet relay apparatus | |
US8582428B1 (en) | Methods and apparatus for flow classification and flow measurement | |
US10574546B2 (en) | Network monitoring using selective mirroring | |
US7860009B2 (en) | Providing backpressure flow control to specific traffic flows | |
CN112260899B (zh) | 基于mmu的网络监测方法和装置 | |
US9350631B2 (en) | Identifying flows causing undesirable network events | |
US10924374B2 (en) | Telemetry event aggregation | |
US10771374B2 (en) | Delay measurement method and device | |
KR20010111501A (ko) | 유입 속도 감시에 바탕한 대기행렬 관리를 통한 데이터네트워크에서의 시스템 성능 개선 | |
US11171869B2 (en) | Microburst detection and management | |
US20170353478A1 (en) | Packet relay apparatus | |
CN111314179B (zh) | 网络质量检测方法、装置、设备和存储介质 | |
US20090240804A1 (en) | Method and apparatus for preventing igmp packet attack | |
WO2022105691A1 (zh) | 防止ipfix消息丢失的方法及其应用、asic芯片 | |
CN113992341A (zh) | 一种报文处理方法及装置 | |
CN111970211A (zh) | 一种基于ipfix的大象流处理方法及装置 | |
CN112187586A (zh) | 微突发流量的监测方法和装置 | |
CN111800383A (zh) | 一种基于SDN的DDos流量检测方法及装置 | |
Wu et al. | Lossdetection: Real-time packet loss monitoring system for sampled traffic data | |
KR101466895B1 (ko) | VoIP 불법 검출 방법, 이를 수행하는 VoIP 불법 검출 장치 및 이를 저장하는 기록매체 | |
JP2008079138A (ja) | 通信監視システム、フロー収集装置、解析マネージャ装置及びプログラム | |
JP2006148778A (ja) | パケット転送制御装置 | |
JP4282556B2 (ja) | フローレベル通信品質管理装置と方法およびプログラム | |
CN112637007A (zh) | 基于ip dscp实现网络时延测量和丢包检测的方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: 215000 unit 13 / 16, 4th floor, building B, No.5 Xinghan street, Suzhou Industrial Park, Jiangsu Province Applicant after: Suzhou Shengke Communication Co.,Ltd. Address before: Unit 13 / 16, floor 4, building B, No. 5, Xinghan street, Suzhou Industrial Park, Suzhou, Jiangsu Province, 215000 Applicant before: CENTEC NETWORKS (SUZHOU) Co.,Ltd. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |