CN114124761B - 用于带宽一致性验证的电子设备、系统、方法和介质 - Google Patents
用于带宽一致性验证的电子设备、系统、方法和介质 Download PDFInfo
- Publication number
- CN114124761B CN114124761B CN202010896673.5A CN202010896673A CN114124761B CN 114124761 B CN114124761 B CN 114124761B CN 202010896673 A CN202010896673 A CN 202010896673A CN 114124761 B CN114124761 B CN 114124761B
- Authority
- CN
- China
- Prior art keywords
- flow
- bandwidth
- server
- client
- actual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012795 verification Methods 0.000 title claims abstract description 53
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000012360 testing method Methods 0.000 claims abstract description 53
- 230000005540 biological transmission Effects 0.000 claims abstract description 44
- 238000010276 construction Methods 0.000 claims abstract description 39
- 230000015654 memory Effects 0.000 claims abstract description 33
- 230000004044 response Effects 0.000 claims abstract description 31
- 230000002159 abnormal effect Effects 0.000 claims abstract description 18
- 238000005259 measurement Methods 0.000 claims abstract description 18
- 101001094649 Homo sapiens Popeye domain-containing protein 3 Proteins 0.000 claims description 14
- 101000608234 Homo sapiens Pyrin domain-containing protein 5 Proteins 0.000 claims description 14
- 101000578693 Homo sapiens Target of rapamycin complex subunit LST8 Proteins 0.000 claims description 14
- 102100027802 Target of rapamycin complex subunit LST8 Human genes 0.000 claims description 14
- 238000011156 evaluation Methods 0.000 claims description 8
- 230000008676 import Effects 0.000 claims description 2
- 230000006870 function Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 3
- 230000008447 perception Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 241001112258 Moca Species 0.000 description 1
- 229910005580 NiCd Inorganic materials 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008571 general function Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 229910001416 lithium ion Inorganic materials 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- -1 niMH Inorganic materials 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000010998 test method Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0876—Network utilisation, e.g. volume of load or congestion level
- H04L43/0894—Packet rate
Abstract
本发明涉及用于带宽一致性验证的电子设备、系统、方法和介质。该电子设备包括:存储器,具有存储在其上的指令;处理器,被配置为执行存储在存储器上的指令以使得电子设备执行以下操作:接收对电子设备的模式的选择,该模式包括客户端模式和服务器模式;响应于用户选择客户端模式:在与服务器进行时间同步后发送带宽测试请求;接收到允许测速应答后预测业务流量速率;获得需要构造的流量速率;根据需要构造的流量速率获得每次发送的构造流量,按照各流量的所占比例与业务流量一起发送到服务器;响应于用户选择服务器模式:根据接收到的实际流量获得实际流量速率;剔除异常值并对剔除异常值后的实际流量速率计算平均值作为实际可占用带宽的下限。
Description
技术领域
本发明属于网络运营和通信技术领域,特别涉及用于专线业务在线时的带宽一致性验证的电子设备、系统、方法和介质。
背景技术
现有技术中诸如5G专线带宽一致性测试方法通常基于二层测试,运营商专线开通竣工时将测试仪表置于运营商网络的端到端两侧,通过占满带宽的方式打流或者环回测试。
现有测试方法存在的技术问题为:1)基于二层的狭义的端到端的测试不能测出应用层的问题并匹配客户真实的业务需求;2)客户业务在线时,占满带宽无疑会影响客户正常业务和体验,导致现有方法不能用于业务在线时的带宽一致性验证。
因此,需要在客户业务在线时也能够实现带宽一致性验证的方法和系统。
发明内容
鉴于以上技术问题,本发明提出了一种带宽一致性验证的电子设备、系统、方法和介质。
根据本发明的一个方面,提供了一种电子设备,包括:存储器,具有存储在其上的指令;以及处理器,被配置为执行存储在所述存储器上的指令,以使得所述电子设备执行以下操作:接收用户对所述电子设备的模式的选择,其中所述模式包括客户端模式和服务器模式;其中响应于用户选择客户端模式:在与服务器进行时间同步后向服务器发送带宽测试请求,所述请求包括测试开始时间、发送时间粒度、每次发送持续时间;在接收到来自服务器的允许测速应答后,根据客户流量预测曲线预测未来一段时间内所述发送时间粒度的业务流量速率b;根据带宽阈值a以及所预测的业务流量速率b获得未来一段时间内所述发送时间粒度需要构造的流量速率c;以及根据需要构造的流量速率c以及每次发送持续时间获得每次发送的构造流量c1,并按照业务流量组成分析结果中各流量的所占比例与业务流量一起发送到服务器;并且响应于用户选择服务器模式:接收客户端的带宽测试请求,并向客户端发送允许测速应答;根据接收到的实际流量d1和每次发送持续时间获得实际流量速率d;以及按照3σ法则剔除所获得的实际流量速率中的异常值,并对剔除异常值后的实际流量速率e计算平均值作为实际可占用带宽的下限,其中在所述实际可占用带宽的下限达到签约带宽的90%时认为带宽一致。
根据一个示例实施例,所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:响应于用户选择客户端模式,导入客户流量预测曲线和业务流量组成分析结果,其中所述业务流量组成分析结果包括TCP流量、HTTP流量、FTP流量和POP3流量各自所占的比例。
根据一个示例实施例,所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:响应于用户选择客户端模式,配置构造流量参数并发送到服务器,所述构造流量参数包括带宽阈值a、并发连接数、协议类型、发包的速率调整算法。
根据一个示例实施例,所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:响应于用户选择服务器模式,接收来自客户端的构造流量参数。
根据一个示例实施例,所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:响应于用户选择服务器模式,对剔除异常值后的实际流量速率e计算方差,并通过回归模型的评价指标R2=r2_score(e-c,b)来检验测试准确性。
根据一个示例实施例,所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:响应于用户选择服务器模式,显示以下内容中的至少一项:所接收的构造流量参数、所获得的所述实际可占用带宽的下限、所述方差、R2以及带宽是否一致。
根据本发明的另一方面提供了一种带宽一致性验证系统,包括客户端和服务器,其中所述客户端被配置成:在与服务器进行时间同步后向服务器发送带宽测试请求,所述请求包括测试开始时间、发送时间粒度、每次发送持续时间;在接收到来自服务器的允许测速应答后,根据客户流量预测曲线预测未来一段时间内所述发送时间粒度的业务流量速率b;根据带宽阈值a以及所预测的业务流量速率b获得未来一段时间内所述发送时间粒度需要构造的流量速率c;以及根据需要构造的流量速率c以及每次发送持续时间获得每次发送的构造流量c1,并按照业务流量组成分析结果中各流量的所占比例与业务流量一起发送到服务器;并且所述服务器被配置成:接收客户端的带宽测试请求,并向客户端发送允许测速应答;根据接收到的实际流量d1和每次发送持续时间获得实际流量速率d;以及按照3σ法则剔除所获得的实际流量速率中的异常值,并对剔除异常值后的实际流量速率e计算平均值作为实际可占用带宽的下限,其中在所述实际可占用带宽的下限达到签约带宽的90%时认为带宽一致。
根据一个示例实施例,所述客户端还被配置成:导入客户流量预测曲线和业务流量组成分析结果,其中所述业务流量组成分析结果包括TCP流量、HTTP流量、FTP流量和POP3流量各自所占的比例。
根据一个示例实施例,所述客户端还被配置成:配置构造流量参数并发送到服务器,所述构造流量参数包括带宽阈值a、并发连接数、协议类型、发包的速率调整算法。
根据一个示例实施例,所述服务器还被配置成:接收来自客户端的构造流量参数。
根据一个示例实施例,所述服务器还被配置成:对剔除异常值后的实际流量速率e计算方差,并通过回归模型的评价指标R2=r2_score(e-c,b)来检验测试准确性。
根据一个示例实施例,所述服务器还被配置成显示以下内容中的至少一项:所接收的构造流量参数、所获得的所述实际可占用带宽的下限、所述方差、R2以及带宽是否一致。
根据本发明的另一方面还提供了一种带宽一致性验证方法,包括:客户端在与服务器进行时间同步后向服务器发送带宽测试请求,所述请求包括测试开始时间、发送时间粒度、每次发送持续时间;客户端在接收到来自服务器的允许测速应答后,根据客户流量预测曲线预测未来一段时间内所述发送时间粒度的业务流量速率b;客户端根据带宽阈值a以及所预测的业务流量速率b获得未来一段时间内所述发送时间粒度需要构造的流量速率c;客户端根据需要构造的流量速率c以及每次发送持续时间获得每次发送的构造流量c1,并按照业务流量组成分析结果中各流量的所占比例与业务流量一起发送到服务器;服务器根据接收到的实际流量的d1和每次发送持续时间获得实际流量速率d;服务器按照3σ法则剔除所获得的实际流量速率中的异常值,并对剔除异常值后的实际流量速率e计算平均值作为实际可占用带宽的下限,其中在所述实际可占用带宽的下限达到签约带宽的90%时认为带宽一致。
根据一个示例实施例,所述带宽一致性验证方法还包括:客户端导入客户流量预测曲线和业务流量组成分析结果,其中所述业务流量组成分析结果包括TCP流量、HTTP流量、FTP流量和POP3流量各自所占的比例。
根据一个示例实施例,所述带宽一致性验证方法还包括:客户端配置构造流量参数并发送到服务器,所述构造流量参数包括带宽阈值a、并发连接数、协议类型、发包的速率调整算法。
根据一个示例实施例,所述带宽一致性验证方法还包括:服务器接收来自客户端的构造流量参数。
根据一个示例实施例,所述带宽一致性验证方法还包括:服务器对剔除异常值后的实际流量速率e计算方差,并通过回归模型的评价指标R2=r2_score(e-c,b)来检验测试准确性。
根据一个示例实施例,所述带宽一致性验证方法还包括服务器显示以下内容中的至少一项:所接收的构造流量参数、所获得的所述实际可占用带宽的下限、所述方差、R2以及带宽是否一致。
根据本发明的再一方面提供了一种非瞬时性计算机可读介质,所述非瞬时性计算机可读介质具有存储在其上的指令,以用于由处理器执行以执行根据本发明所述的带宽一致性验证方法的步骤。
根据本发明的又一方面提供了一种带宽一致性验证装置,包括用于执行本发明所述的带宽一致性验证方法的步骤的单元。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,还可以根据这些附图获得其他的附图。
为了更好地理解本公开,并示出如何实现本公开,现在将以举例的方式参照附图描述,其中:
图1示出了根据本公开的实施例的用于实现带宽一致性验证装置的电子设备的框图;
图2示出了根据本公开的实施例的带宽一致性验证系统的系统架构图;
图3A和图3B示出了根据本公开的实施例的带宽一致性验证装置的示例性结构框图;
图4示出了根据本公开的实施例的示例性带宽一致性验证方法的流程图;
图5示出了根据本公开的实施例的示例性带宽一致性验证方法的时序图。
注意,在整个附图中,相似的附图标记指代对应的部分。
具体实施方式
参考附图进行以下详细描述,并且提供以下详细描述以帮助全面理解本公开的各种示例实施例。以下描述包括各种细节以帮助理解,但是这些细节仅被认为是示例,而不是为了限制本公开,本公开是由随附权利要求及其等同内容限定的。在以下描述中使用的词语和短语仅用于能够清楚一致地理解本公开。另外,为了清楚和简洁起见,可能省略了对公知的结构、功能和配置的描述。本领域普通技术人员将认识到,在不脱离本公开的精神和范围的情况下,可以对本文描述的示例进行各种改变和修改。
图1是示出根据本公开的实施例的电子设备100的示例性配置框图。电子设备100可以用于实现根据本发明的带宽一致性验证装置。
如图1所示,电子设备100包括用户接口20、网络接口21、电源22、外部网络接口23、存储器24和处理器26。用户接口20可以包括但不限于按钮、键盘、小键盘、LCD、CRT、TFT、LED、HD或其它类似的显示设备,包括具有触摸屏能力使得能够进行用户和网关设备之间的交互的显示设备。在一些实施例中,用户接口20可以用于呈现图形用户界面(GUI)以接收用户输入。
网络接口21可以包括各种网卡以及以软件和/或硬件实现的电路系统,以便能够使用有线或无线协议与用户设备通信。有线通信协议例如是以太网协议、MoCA规范协议、USB协议或其它有线通信协议中的任何一种或多种。无线协议例如是任何IEEE 802.11Wi-Fi协议、蓝牙协议、低功耗蓝牙(BLE)或根据无线技术标准进行操作的其他短距离协议,用于使用任何许可的或未许可的频带(诸如公民宽带无线电服务(CBRS)频带、2.4GHz频带、5GHz频带、6GHz频带或60GHz频带)、RF4CE协议、ZigBee协议、Z-Wave协议或IEEE 802.15.4协议在短距离上交换数据。在网络接口21使用无线协议的情况下,在一些实施例中,网络接口21还可以包括一个或多个天线(未示出)或者用于耦合到一个多个天线的电路节点。电子设备100可以通过网络接口21向用户设备提供内部网络。
电源22通过内部总线27向电子设备100的内部组件提供电力。电源22可以是自备电源,诸如电池组,其接口通过(例如,直接或通过其他设备)连接到插座的充电器供电。电源22还可以包括可拆卸以供替换的可再充电电池,例如NiCd、NiMH、Li-ion或Li-pol电池。外部网络接口23可以包括各种网卡以及以软件和/或硬件实现的电路系统,以实现电子设备100与外部网络的提供者(例如互联网服务提供商或多系统运营商(MSO))之间的通信。
存储器24包括单个存储器或一个或多个存储器或存储位置,包括但不限于随机存取存储器(RAM)、动态随机存取存储器(DRAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、EPROM、EEPROM、闪存、FPGA的逻辑块、硬盘或存储器层次结构的任何其他各层。存储器24可以用于存储任何类型的指令、软件或算法,包括用于控制电子设备100的一般功能和操作的软件25。
处理器26控制电子设备100的一般操作,并执行与网络中的其他设备(诸如用户设备)有关的管理功能。处理器26可以包括但不限于CPU、硬件微处理器、硬件处理器、多核处理器、单核处理器、微控制器、专用集成电路(ASIC)、DSP或其他类似的处理设备,能够执行根据本公开中描述的实施例的用于控制电子设备100的操作和功能的任何类型的指令、算法或软件。处理器26可以是在计算系统中执行功能的数字电路系统、模拟电路系统或混合信号(模拟和数字的组合)电路系统的各种实现。处理器26可以包括例如诸如集成电路(IC)、单独处理器核心的部分或电路、整个处理器核心、单独的处理器、诸如现场可编程门阵列(FPGA)的可编程硬件设备、和/或包括多个处理器的系统。
可以使用内部总线27来建立电子设备100的组件(例如20-22、24和26)之间的通信。
尽管使用特定组件来描述电子设备100,但是在替选实施例中,电子设备100中可以存在不同的组件。例如,电子设备100可以包括一个或多个附加控制器、存储器、网络接口、外部网络接口和/或用户接口。另外,电子设备100中可能不存在组件的一个或多个。此外,在一些实施例中,电子设备100可以包括在图1中未示出的一个或多个组件。另外,尽管在图1中示出单独的组件,但是在一些实施例中,给定组件的一些或全部可以集成到电子设备100中的其他组件中的一个或多个中。此外,可以使用模拟和/或数字电路的任何组合来实现电子设备100中的电路和组件。
图2示出了根据本发明的实施例的带宽一致性系统的示例性系统架构图200。如图2所示,在客户终端设备(CPE:Customer Premise Equipment)两侧接入带宽一致性验证装置,将一端的带宽一致性验证装置设置为客户端模式,另一端的带宽一致性验证装置设置为服务器模式,进行端到端的打流测试。所述带宽一致性验证装置可通过图1所示的电子设备来实现。
如图2所示,被分别设置为客户端和服务器模式的带宽一致性验证装置构成带宽一致性验证系统,其中被设置为客户端模式的带宽一致性验证装置被连接到诸如中国电信政企客户智慧服务平台的运营商平台,从而能够从该平台导入客户流量预测曲线和业务流量组成分析结果。
图3A和图3B分别示出了作为客户端和服务器运行的带宽一致性验证装置的另一种实现方式。如图3A所示,带宽一致性验证装置在作为客户端时包括流量预测加载单元、构造单元、显示控制单元、存储单元、发送单元和接收单元。如图3B所示,带宽一致性验证装置在作为服务器时包括显示控制单元、存储单元、发送单元和接收单元。这些功能单元可以通过硬件、软件、固件或其组合的方式来实现。例如,根据一些实施例,在以软件方式实现时,存储单元可以通过图1中的存储器24来实现,构造单元和显示控制单元可以通过图1中的处理器26来实现,发送单元、接收单元和流量预测加载单元可以通过图1中的网络接口21来实现。下面介绍各个单元的功能。
流量预测加载单元负责从诸如中国电信政企客户智慧服务平台之类的运营商平台导入客户流量预测曲线和业务流量组成分析结果。业务流量组成分析结果包含TCP流量、HTTP流量、FTP流量和POP3流量等各自在业务流量中所占的比例。
客户端显示控制单元通过UI界面经由客户端发送单元向服务器提交带宽测试申请。该带宽测试申请包括测试开始时间、发送时间粒度、每次发送持续时间等测试参数。同时客户端显示控制单元还配置带宽阈值(设定为一定比例的签约接入速率)、并发连接数、协议类型、发包的速率调整算法等各种构造流量参数,将控制指令下发给客户端各单元,通过接收单元接收来自服务器的测速允许应答,并接收来自构造单元的构造流量信息以和配置的各种参数发送至存储单元存储以作更多分析。
根据本发明的实施例,为了更加贴近客户真实应用环境,客户端显示控制单元构造与业务流量一致的流量和业务流量一起发送以进行打流测试。具体地,显示控制单元构造基于标准TCP协议栈的流量、服务器端HTTP服务、FTP服务和POP3服务,同时可以构造并发多个TCP连接、HTTP连接、FTP连接和POP3连接的方式发生流量。在TCP流量构造中可以调节几个不同的参数来构造所需流量:TCP并发连接数量,TCP窗口大小,TCP MSS,TCP源/目的端口号;在HTTP测试中可以调节几个不同的参数来构造所需流量:HTTP并发连接数,每个HTTP连接中的请求数量,HTTP是否启用压缩;在FTP测试中可以调节几个不同的参数来构造所需流量:FTP并发连接数,是否启用认证,主动还是被动模式,2进制还是文本模式,一次传输的文件数量;在POP3测试中可以调节几个不同的参数来构造所需流量:POP3并发连接数,是否启用认证,发送邮件大小等。TCP流量、HTTP流量、FTP流量和POP3流量的构造均支持IPV4/IPV6协议。
构造单元接收流量预测加载单元导入的客户流量预测曲线、业务流量组成分析结果和显示控制单元配置的各种参数,得到流量速率构造曲线,将需要构造的流量信息反馈至客户端显示控制单元,以按照业务流量组成分析结果构造与业务流量一致的流量与业务流量一起发送至服务器。
客户端发送单元将显示控制单元的指令、参数和构造单元的构造流量发送至服务器。客户端存储单元存储显示控制单元的各种指令、参数和构造流量信息。客户端接收单元接收服务器发送的测速允许应答并发送至显示控制单元。
服务器接收单元接受客户端发送的带宽测试请求和构造流量参数,从测试开始时间按照与客户端发送流量相同的时间粒度采集一段时间内的专线流量数据,每次收集客户端发送持续时间内的流量。因为发送时间很短,流量除以发送时间可以作为此时刻流量速率,剔除3σ法则判定的异常值后求平均速率,平均速率即为实际可占用带宽的下限,并可以通过计算方差、R2等评价指标来检验测试准确性,将带宽测试请求、参数、平均速率和评价指标等发送至服务器显示控制单元。
服务器显示控制单元接收来自客户端的带宽测试请求并通过服务器发送单元向客户端发送测速允许应答,将控制指令下发给服务器各单元,提供HTTP服务、FTP服务和POP3服务等,并显示参数、测速结果、评价指标等。
服务器发送单元向客户端发送测速允许应答。服务器存储单元存储各指令、参数、测速结果、评价指标等。
图4示出了根据本发明的实施例的示例性带宽一致性验证方法的流程图400。图4所示的带宽一致性验证方法可由图2中所示的带宽一致性验证系统执行。
如图4所示,在步骤S410处,客户端在与服务器进行时间同步后向服务器发送带宽测试请求。根据一个示例性实施例,所述请求包括测试开始时间T、发送时间粒度5分钟、每次发送持续时间1秒等测试参数。
在步骤S420处,在接收到来自服务器的允许测速应答后,客户端根据客户流量预测曲线预测未来一段时间内一定时间粒度的业务流量速率。根据一个示例性实施例,客户端可以根据客户流量预测曲线预测未来1个小时时间粒度为5分钟的业务流量速率(单位为Mbps),得到时间序列b=[40,32,38,48,42,45,35,40,50,34,46,42]。
在步骤S430处,根据带宽阈值以及所预测的业务流量速率获得未来一段时间内一定时间粒度需要构造的流量速率。根据一个示例性实施例,可以根据带宽阈值a=100×90%=90Mbps以及所预测的上述业务流量速率b获得未来1个小时时间粒度为5分钟需要构造的流量速率为c=a-b=[50,58,52,42,48,45,55,50,40,56,44,48]。这里假设签约接入速率为100Mbps,带宽阈值设定为一定比例,例如90%的签约接入速率。和带宽阈值a一起配置的还有并发连接数、协议类型、发包的速率调整算法等各种构造流量参数。
在步骤S440处,根据需要构造的流量速率以及每次发送持续时间获得每次发送的构造流量,并按照业务流量组成分析结果中TCP、HTTP、FTP、POP3等流量所占比例将构造流量与业务流量一起发送至服务器。根据一个示例性实施例,可以根据需要构造的流量速率c以及每次发送持续时间1秒获得每次发送的构造流量c1=c×1=[50,58,52,42,48,45,55,50,40,56,44,48]Mb,并按照业务流量组成分析结果中HTTP、FTP、邮件等流量所占比例(例如,50%、30%、20%)将构造流量与业务流量一起发送至服务器。
在步骤S450处,服务器根据接收到的实际流量和每次发送持续时间获得实际流量速率。根据一个示例性实施例,服务器根据接收到的实际流量d1=[90,91,93,88,90,98,89,87,92,90,91,89]和每次发送持续时间1秒获得实际流量速率d=[90,91,93,88,90,98,89,87,92,90,91,89]。
在步骤S460处,服务器按照3σ法则剔除所获得的实际流量速率中的异常值得到时间序列。具体地,服务器按照3σ法则取(μ-2σ,μ+2σ)区间为正常值时剔除掉d中的异常值98得到时间序列e=[90,91,93,88,90,89,87,92,90,91,89]。
在步骤S470处,服务器对剔除异常值后的时间序列求平均得到平均值作为实际可占用带宽的下限。例如,对上述时间序列e求平均得到平均值90作为实际可占用带宽的下限90Mbps。通常,在实际可占用带宽的下限达到签约带宽的90%时认为带宽一致。在此示例中,实际可占用带宽的下限为90Mbps,为签约带宽的90%,因此认为上述带宽一致。进而可在服务器的用户接口,例如显示屏上显示带宽一致的验证结果。如果经验证获得的实际可占用带宽的下限达不到签约带宽的90%,则认为带宽不一致,可在服务器的用户接口上显示带宽不一致。
根据本发明的带宽一致性验证方法还可以包括计算时间序列e的方差,得到2.73,以及计算回归模型的评价指标R2=r2_score(e-c,b)≈0.81,以用来检验测试准确性。
图5示出了根据本发明的实施例的带宽一致性验证方法的时序图。如图5所示,服务器从T时刻开始按照与客户端发送时间间隔相同的粒度接收专线流量并计算每一时刻的流量速率并持续一段时间,去除时间序列的异常值(图中黑点),计算时间序列正常值(图中白点)的均值得到实际可占用带宽的下限,并可以将时间序列的方差和回归结果的R2等特征作为测试结果的评价指标。
根据本发明的带宽一致性验证还可以根据客户业务需求和感知需求确定是否需要调整带宽阈值以进行进一步测试。工信部要求专线带宽下载速率≥传输带宽/8×0.9,因此,带宽阈值可以根据客户业务需求和感知需求在90%-100%之间进行调整。例如,可以将带宽阈值a调整为签约接入速率×95%。
本发明基于历史流量数据预测未来一段时间的流量速率,通过设定流量阈值和构造流量解决了业务在线时无法测试专线速率的问题,尽可能小的减少了对客户业务在线时的业务运行和使用体验的影响。而且本发明依靠运营商的资源数据优势,由网络侧获取历史流量数据,方案部署简单易推广,无需对终端设备进行改进,能够在结合客户业务需求和历史流量数据的情况下,用于传统端到端专线和云专线开通时和业务在线时基于应用层在客户端到端两侧进行带宽一致性验证。解决了客户投诉带宽测试不达标、上下行不对称、带宽波动、单线程不达标和业务在线时无法测试带宽等问题,提升了客户满意度。
此外,本发明通过设定可调的流量阈值解决了业务在线时为了不影响客户正常业务和使用体验测试流量不能占满带宽的技术问题,在客户业务在线时通过牺牲一定客户感知提高带宽阈值进行一致性测试,从而提高了测试准确性。
本公开可以被实现为装置、系统、集成电路和非瞬时性计算机可读介质上的计算机程序的任何组合。可以将一个或多个控制器实现为执行本公开中描述的部分或全部功能的集成电路(IC)、专用集成电路(ASIC)或大规模集成电路(LSI)、系统LSI、超级LSI或超LSI组件。
本公开包括软件、应用程序、计算机程序或算法的使用。可以将软件、应用程序、计算机程序或算法存储在非瞬时性计算机可读介质上,以使诸如一个或多个处理器的计算机执行上述步骤和附图中描述的步骤。例如,一个或多个存储器以可执行指令存储软件或算法,并且一个或多个处理器可以关联执行该软件或算法的一组指令,以根据本公开中描述的实施例提供网络接入设备的网络配置信息管理功能。
软件和计算机程序(也可以称为程序、软件应用程序、应用程序、组件或代码)包括用于可编程处理器的机器指令,并且可以以高级过程性语言、面向对象编程语言、功能性编程语言、逻辑编程语言或汇编语言或机器语言来实现。术语“计算机可读介质”是指用于向可编程数据处理器提供机器指令或数据的任何计算机程序产品、装置或设备,例如磁盘、光盘、固态存储设备、存储器和可编程逻辑设备(PLD),包括将机器指令作为计算机可读信号来接收的计算机可读介质。
举例来说,计算机可读介质可以包括动态随机存取存储器(DRAM)、随机存取存储器(RAM)、只读存储器(ROM)、电可擦只读存储器(EEPROM)、紧凑盘只读存储器(CD-ROM)或其他光盘存储设备、磁盘存储设备或其他磁性存储设备,或可以用于以指令或数据结构的形式携带或存储所需的计算机可读程序代码以及能够被通用或专用计算机或通用或专用处理器访问的任何其它介质。如本文中所使用的,磁盘或盘包括紧凑盘(CD)、激光盘、光盘、数字多功能盘(DVD)、软盘和蓝光盘,其中磁盘通常以磁性方式复制数据,而盘则通过激光以光学方式复制数据。上述的组合也包括在计算机可读介质的范围内。
另外,以上描述提供了示例,而不限制权利要求中阐述的范围、适用性或配置。在不脱离本公开的精神和范围的情况下,可以对所讨论的元件的功能和布置进行改变。各种实施例可以适当地省略、替代或添加各种过程或部件。例如,关于某些实施例描述的特征可以在其他实施例中被结合。
Claims (20)
1.一种用于带宽一致性验证的电子设备,包括:
存储器,具有存储在其上的指令;以及
处理器,被配置为执行存储在所述存储器上的指令,以使得所述电子设备执行以下操作:
接收用户对所述电子设备的模式的选择,其中所述模式包括客户端模式和服务器模式;其中
响应于用户选择客户端模式:
在与服务器进行时间同步后向服务器发送带宽测试请求,所述请求包括测试开始时间、发送时间粒度、每次发送持续时间;
在接收到来自服务器的允许测速应答后,根据客户流量预测曲线预测未来一段时间内所述发送时间粒度的业务流量速率b;
根据带宽阈值a以及所预测的业务流量速率b获得未来一段时间内所述发送时间粒度需要构造的流量速率c;以及根据需要构造的流量速率c以及每次发送持续时间获得每次发送的构造流量c1,并按照业务流量组成分析结果中各流量的所占比例与业务流量一起发送到服务器;并且
响应于用户选择服务器模式:
接收客户端的带宽测试请求,并向客户端发送允许测速应答;
根据接收到的实际流量d1和每次发送持续时间获得实际流量速率d;以及
按照3σ法则剔除所获得的实际流量速率中的异常值,
并对剔除异常值后的实际流量速率e计算平均值作为实际可占用带宽的下限,其中在所述实际可占用带宽的下限达到签约带宽的90%时认为带宽一致。
2.根据权利要求1所述的电子设备,其中所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:
响应于用户选择客户端模式,导入客户流量预测曲线和业务流量组成分析结果,其中所述业务流量组成分析结果包括TCP流量、HTTP流量、FTP流量和POP3流量各自所占的比例。
3.根据权利要求1所述的电子设备,其中所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:
响应于用户选择客户端模式,配置构造流量参数并发送到服务器,所述构造流量参数包括带宽阈值a、并发连接数、协议类型、发包的速率调整算法。
4.根据权利要求1所述的电子设备,其中所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:
响应于用户选择服务器模式,接收来自客户端的构造流量参数并存储在所述存储器中。
5.根据权利要求4所述的电子设备,其中所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:
响应于用户选择服务器模式,对剔除异常值后的实际流量速率e计算方差,并通过回归模型的评价指标R2来检验测试准确性。
6.根据权利要求5所述的电子设备,其中所述处理器还被配置为执行存储在所述存储器上的指令以使所述电子设备执行以下操作:
响应于用户选择服务器模式,显示以下内容中的至少一项:所接收的构造流量参数、所获得的所述实际可占用带宽的下限、所述方差、R2以及带宽是否一致。
7.一种带宽一致性验证系统,包括客户端和服务器,其中:
所述客户端被配置成:
在与服务器进行时间同步后向服务器发送带宽测试请求,所述请求包括测试开始时间、发送时间粒度、每次发送持续时间;
在接收到来自服务器的允许测速应答后,根据客户流量预测曲线预测未来一段时间内所述发送时间粒度的业务流量速率b;
根据带宽阈值a以及所预测的业务流量速率b获得未来一段时间内所述发送时间粒度需要构造的流量速率c;以及
根据需要构造的流量速率c以及每次发送持续时间获得每次发送的构造流量c1,并按照业务流量组成分析结果中各流量的所占比例与业务流量一起发送到服务器;并且
所述服务器被配置成:
接收客户端的带宽测试请求,并向客户端发送允许测速应答;
根据接收到的实际流量d1和每次发送持续时间获得实际流量速率d;以及
按照3σ法则剔除所获得的实际流量速率中的异常值,并对剔除异常值后的实际流量速率e计算平均值作为实际可占用带宽的下限,其中在所述实际可占用带宽的下限达到签约带宽的90%时认为带宽一致。
8.根据权利要求7所述的带宽一致性验证系统,其中所述客户端还被配置成:
导入客户流量预测曲线和业务流量组成分析结果,其中所述业务流量组成分析结果包括TCP流量、HTTP流量、FTP流量和POP3流量各自所占的比例。
9.根据权利要求7所述的带宽一致性验证系统,其中所述客户端还被配置成:
配置构造流量参数并发送到服务器,所述构造流量参数包括带宽阈值a、并发连接数、协议类型、发包的速率调整算法。
10.根据权利要求7所述的带宽一致性验证系统,其中所述服务器还被配置成:
接收来自客户端的构造流量参数并存储在存储器中。
11.根据权利要求10所述的带宽一致性验证系统,其中所述服务器还被配置成:
对剔除异常值后的实际流量速率e计算方差,并通过回归模型的评价指标R2来检验测试准确性。
12.根据权利要求11所述的带宽一致性验证系统,其中所述服务器还被配置成显示以下内容中的至少一项:所接收的构造流量参数、所获得的所述实际可占用带宽的下限、所述方差、R2以及带宽是否一致。
13.一种带宽一致性验证方法,包括:
客户端在与服务器进行时间同步后向服务器发送带宽测试请求,所述请求包括测试开始时间、发送时间粒度、每次发送持续时间;
客户端在接收到来自服务器的允许测速应答后,根据客户流量预测曲线预测未来一段时间内所述发送时间粒度的业务流量速率b;
客户端根据带宽阈值a以及所预测的业务流量速率b获得未来一段时间内所述发送时间粒度需要构造的流量速率c;
客户端根据需要构造的流量速率c以及每次发送持续时间获得每次发送的构造流量c1,并按照业务流量组成分析结果中各流量的所占比例与业务流量一起发送到服务器;
服务器根据接收到的实际流量的d1和每次发送持续时间获得实际流量速率d;
服务器按照3σ法则剔除所获得的实际流量速率中的异常值,并对剔除异常值后的实际流量速率e计算平均值作为实际可占用带宽的下限,其中在所述实际可占用带宽的下限达到签约带宽的90%时认为带宽一致。
14.根据权利要求13所述的带宽一致性验证方法,还包括:
客户端导入客户流量预测曲线和业务流量组成分析结果,其中所述业务流量组成分析结果包括TCP流量、HTTP流量、FTP流量和POP3流量各自所占的比例。
15.根据权利要求13所述的带宽一致性验证方法,还包括:
客户端配置构造流量参数并发送到服务器,所述构造流量参数包括带宽阈值a、并发连接数、协议类型、发包的速率调整算法。
16.根据权利要求13所述的带宽一致性验证方法,还包括:
服务器接收来自客户端的构造流量参数并进行存储。
17.根据权利要求16所述的带宽一致性验证方法,还包括:
服务器对剔除异常值后的实际流量速率e计算方差,并通过回归模型的评价指标R2来检验测试准确性。
18.根据权利要求17所述的带宽一致性验证方法,还包括服务器显示以下内容中的至少一项:所接收的构造流量参数、所获得的所述实际可占用带宽的下限、所述方差、R2以及带宽是否一致。
19.一种非瞬时性计算机可读介质,所述非瞬时性计算机可读介质具有存储在其上的指令,以用于由处理器执行以执行根据权利要求13-18中任一项所述的方法的步骤。
20.一种带宽一致性验证装置,包括用于执行根据权利要求13-18中任一项所述的方法的步骤的单元。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010896673.5A CN114124761B (zh) | 2020-08-31 | 2020-08-31 | 用于带宽一致性验证的电子设备、系统、方法和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010896673.5A CN114124761B (zh) | 2020-08-31 | 2020-08-31 | 用于带宽一致性验证的电子设备、系统、方法和介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114124761A CN114124761A (zh) | 2022-03-01 |
CN114124761B true CN114124761B (zh) | 2024-04-09 |
Family
ID=80359990
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010896673.5A Active CN114124761B (zh) | 2020-08-31 | 2020-08-31 | 用于带宽一致性验证的电子设备、系统、方法和介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114124761B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1630297A (zh) * | 2003-12-15 | 2005-06-22 | 国际商业机器公司 | 用于在增值网业务中测试差别业务的系统和方法 |
US7418492B1 (en) * | 2002-06-20 | 2008-08-26 | P-Cube Ltd. | System and a method for testing network communication devices |
CN110347596A (zh) * | 2019-07-02 | 2019-10-18 | 腾讯科技(深圳)有限公司 | 一种测试方法、装置、系统、电子设备及介质 |
-
2020
- 2020-08-31 CN CN202010896673.5A patent/CN114124761B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7418492B1 (en) * | 2002-06-20 | 2008-08-26 | P-Cube Ltd. | System and a method for testing network communication devices |
CN1630297A (zh) * | 2003-12-15 | 2005-06-22 | 国际商业机器公司 | 用于在增值网业务中测试差别业务的系统和方法 |
CN110347596A (zh) * | 2019-07-02 | 2019-10-18 | 腾讯科技(深圳)有限公司 | 一种测试方法、装置、系统、电子设备及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN114124761A (zh) | 2022-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11029937B2 (en) | Technologies for performing energy efficient software distribution | |
US20220138081A1 (en) | Systems and Methods for Optimization of Application Performance on a Telecommunications Network | |
AU2016334120B2 (en) | Cloud based system and method for managing messages regarding cable test device operation | |
WO2017186092A1 (zh) | 网络切片的选择方法及装置 | |
CN112887120B (zh) | 一种信息处理方法及装置 | |
US10045234B2 (en) | Performing an analysis of information to identify a source of an error related to a device | |
CN111327471B (zh) | 网络质量分析方法、装置、计算机设备及存储介质 | |
JP2005521359A (ja) | ソフトウェアアプリケーションのネットワーク動作特性を測定する方法、システム及びコンピュータプログラム | |
US20170324627A1 (en) | Diagnostic testing in networks | |
US20210194782A1 (en) | Identifying network communication performance outlier endpoints in a computer network | |
CN103023815B (zh) | 聚合链路负载分担方法及装置 | |
CN104065538B (zh) | 网络性能的测量控制方法、控制服务器和系统 | |
US10320650B2 (en) | Testing a network using a communication device | |
Zamani et al. | Edge-supported approximate analysis for long running computations | |
Łubkowski et al. | Test of the multimedia services implementation in information and communication networks | |
US9531630B2 (en) | Capacity estimates using burst-trailer trains | |
CN113965904A (zh) | 设备注册方法、装置和存储介质 | |
CN105379189B (zh) | 用于发送和接收信息数据的方法和系统 | |
Díaz Zayas et al. | QoE evaluation: the TRIANGLE testbed approach | |
CN114124761B (zh) | 用于带宽一致性验证的电子设备、系统、方法和介质 | |
US8614962B2 (en) | Communication device, communication method, and program | |
US20220345396A1 (en) | Information processing apparatus, packet generation method, system, and program | |
EP4142220A1 (en) | Method and apparatus for evaluating network operation impact, and device | |
WO2016095463A1 (zh) | 小区的选取方法、装置及系统 | |
JP2023506100A (ja) | サービス品質パラメーターを決定する方法、コンピューター可読ストレージ媒体、コンピュータープログラム及び通信デバイス |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |