CN107409071B - 获得诊断测试结果的方法、控制模块及计算机可读存储介质 - Google Patents

获得诊断测试结果的方法、控制模块及计算机可读存储介质 Download PDF

Info

Publication number
CN107409071B
CN107409071B CN201680016378.8A CN201680016378A CN107409071B CN 107409071 B CN107409071 B CN 107409071B CN 201680016378 A CN201680016378 A CN 201680016378A CN 107409071 B CN107409071 B CN 107409071B
Authority
CN
China
Prior art keywords
network
user
diagnostic test
application
devices
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680016378.8A
Other languages
English (en)
Other versions
CN107409071A (zh
Inventor
特雷弗·伯布里奇
A·史密斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
British Telecommunications PLC
Original Assignee
British Telecommunications PLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by British Telecommunications PLC filed Critical British Telecommunications PLC
Publication of CN107409071A publication Critical patent/CN107409071A/zh
Application granted granted Critical
Publication of CN107409071B publication Critical patent/CN107409071B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/50—Network service management, e.g. ensuring proper service fulfilment according to agreements
    • H04L41/5061—Network service management, e.g. ensuring proper service fulfilment according to agreements characterised by the interaction between service providers and their network customers, e.g. customer relationship management
    • H04L41/5067—Customer-centric QoS measurements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/02—Capturing of monitoring data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/02—Capturing of monitoring data
    • H04L43/026—Capturing of monitoring data using flow identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0811—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking connectivity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0852—Delays
    • H04L43/0864—Round trip delays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/12—Network monitoring probes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/50—Testing arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2854—Wide area networks, e.g. public data networks
    • H04L12/2856—Access arrangements, e.g. Internet access
    • H04L12/2869—Operational details of access network equipments
    • H04L12/2898—Subscriber equipments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0823—Errors, e.g. transmission errors
    • H04L43/0829—Packet loss
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876—Network utilisation, e.g. volume of load or congestion level
    • H04L43/0894—Packet rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

获得诊断测试结果的方法、控制模块及计算机可读存储介质。公开了用于诊断测试的方法和设备，并且具体涉及用于获得关于本地用户网络(3)中的一个或更多个装置(1、1’)所使用的网络依赖应用的诊断测试结果的方法和设备，所述一个或更多个用户装置(1、1’)可操作以经由具有与其相关联的控制模块的网络网关装置(2)与数字通信接入网络(5、6、8)进行通信，并且可操作以经由所述接入网络与所述网络依赖应用中所涉及的远程联网装置(7、9)进行通信，优选实施方式涉及用于触发诊断测试程序并且获得指示在用户网络(3)中的用户装置(1、1’)上运行的应用的一个或更多个用户的实际体验质量(QoE)的测试结果的方法和设备。

Description

获得诊断测试结果的方法、控制模块及计算机可读存储介质
技术领域
本发明涉及诊断测试，并且具体涉及用于获得关于用户网络中的一个或更多个装置所使用的网络依赖应用的诊断测试结果的方法和设备。优选实施方式涉及用于触发诊断测试程序并且获得指示在用户网络的联网用户装置上运行的应用的一个或更多个用户的实际体验质量(QoE)的测试结果的方法和设备。
背景技术
评估基于因特网协议(IP)的网络和其它网络的性能长期以来一直不但是因特网服务提供商(ISP)的关注点，也是用户、标准机构、网络设备供应商、监管机构等的关注点。
有关网络和通信技术，通常使用术语“服务质量”(QoS)和“体验质量”(QoE)，前者一般涉及关于提供给客户的网络或通信服务的性能的客观性(或至少基本上客观的)度量，后者一般涉及指示用户对提供给他们的服务有多满意的主观性(或至少基本上主观的)度量。
考虑到各种不同的标准(包括诸如丢失、延迟、抖动以及吞吐量的网络特性)，可以以各种方式定义和测量“服务质量”，但一旦定义，其就可以(至少在理论上) 被测量，因为可以测量这样的网络特性，并且然后可以根据预定功能来组合(若需要的话)关于其的值，以便获得一个或更多个“QoS度量”、“QoS值”或其它这样的“QoS 指示”。“体验质量”虽然通常取决于相同或相似的标准，并因此通常至少部分地取决于关于提供给个人客户的服务而实现的“服务质量”(因此通常在一定程度上与针对该客户实现的“服务质量”相关)，但基本上是一个主观性度量，所以一般不能直接测量，除了直接从客户那里获得有关他们的满意度的反馈以外(其本身一般是主观的) -这些反馈可能受到有关客户的情绪的影响，或者客户是否具有有关其它类似服务更好或更差的先前体验)。然而，“体验质量”可以以各种方式进行估计或评估，一般考虑到一种或更多种类型的性能标准，例如通常用于获得“服务质量”度量的性能标准，然后估计这些对服务体验的影响，因为这将被客户所感知。因此，虽然“体验质量”一般是主观性度量，但其(一旦适当定义)也可以(至少部分地)基于可测量的网络性能数据，按客观方式估计、评估或评价。
对于各种不同特性，存在用于测试通用服务和/或进行网络性能测量的方法。关于宽带服务的端到端测试，现在主要有两种方法：(i)测试网站；和(ii)基于探测的测试。
利用测试网站，将浏览器应用或“app”用于在用户装置与远程测试服务器之间进行测试，例如，Ookla的www.speedtest.net。在用户装置与远程测试服务器之间发送一系列分组，以允许计算诸如往返时间(RTT)、吞吐量、抖动以及丢失的网络特性。
利用基于探测的测试，诸如SamKnows(www.samknows.com)的公司使用一小组用户，向他们提供探测装置，以供在他们的家庭/办公室/本地网络中使用。这些探测装置然后执行涉及与许多测试服务器交换的测试以测量网络特性。该探测装置还可以测试典型因特网应用的行为，诸如网络话音电话业务(VoIP)通信和web浏览。例如，web浏览可以通过加载几个流行的网站并记录页面加载时间来测试。提供给该组用户的探测装置通常由想要进行测试的组织支付，其通常是网络所有者或监管者。
一篇题为“Measuring and Understanding Broadband:Speed,Quality andApplication",dated 8th June 2010from"Ookla”的文章(可在如下网址在线获得：http://www.ookla.com/docs/UnderstandingBroadbandMeasurement.pdf)讨论了Ookla推荐的技术。这些技术用于基于web的网络性能测量，并且该文章解释了作者用于测量“...在给定位置至和从他们选择的服务器的连接的最大可维持吞吐量”的推理。
来自“SamKnows”具有文献编号：SQ301-003-EN的、2014年9月的题为“SAMKNOWSTEST METHODOLOGY-Methodology and technical information relating to theSamKnows testing platform”的文献(可在如下网址在线获得：https:// www.samknows.com/broadband/uploads/methodology/SQ301-003-EN-Test-Suite- Whitepaper.pdf)讨论了可以针对宽带连接进行的各种性能测试。该文献讨论了通用的基于探测的网络性能特性测量，包括某些应用特定测试。
各种现有技术文献指出，它们旨在测量(或至少估计)QoE而不是简单的QoS 或网络性能，但这些问题经常被混淆。
欧洲专利申请EP2632100(例如)涉及用于流量管理的系统和方法，并且公开了具有“...被配置成实时监测体验质量(QoE)度量的QoE测量模块”的流量管理系统。
美国申请US 2013/0262659涉及基于网页下载所花费的时间在中间网络节点处实时测量web浏览体验质量。
欧洲专利申请EP2784984涉及用于监测关于数字通信网络的网络性能的技术，该数字通信网络包括：其中具有至少一个用户装置的用户网络，其能够经由中间控制模块向一个或更多个远程服务器提交数据请求以及从一个或更多个远程服务器接收数据；以及接入网络，经由该接入网络，数据可以经由控制模块传送至用户网络，并且具体公开了这样的技术，即，允许网络服务提供商经由接入网络向其客户的家庭网络提供网络服务，以了解客户家庭网络的性能和/或在这些客户家庭网络内的一个或更多个联网装置的性能。
然而，目前关于宽带线路的QoE评估/测量方法通常仅测量线路的一般性能，通常测量针对几台专用测试服务器的带宽和连接。一些应用特定测试尝试测量针对诸如通用VoIP的应用(再次针对专用测试服务器)或针对特定服务(例如，特定网站或诸如YouTube的其它网络服务)的QoE。
评估客户实现(或者更正确地说，感知)的有关通过他们的宽带线路或其它这样的网络连接所提供的联网服务的体验质量对于网络提供商或ISP来说是极其重要的，因为客户如何评定他们从他们的因特网连接的计算和电话装置接收的服务在很大程度上取决于他们对因特网传送的服务感知的QoE(而不是实际上实现的(客观的)服务质量(QoS))。
虽然存在用于测试通用服务的方法(如上所示)，但应注意到，这样的方法不是致力于测试个人客户实际使用的那些服务。然而，客户通常根据他们实际上正在使用或(频繁或通常)实际使用的应用和服务的质量来判断他们的ISP的性能。例如，他们可能在与使用特定VoIP服务的另一个国家或其它国家的亲戚进行交流(或者可能频繁地交流)、访问不在通用预定测试计划表上的网站、使用不同的视频服务等。
此外，在获得QoS的测量时可以考虑的网络特性的类型(例如，丢失、延迟、抖动、吞吐量等)可以以不同的方式和不同的程度影响不同的网络依赖应用，因此，与通常对针对不同的客户的相应QoS度量具有相同或相似影响的网络特性有关的变化对于那些不同的客户(或者对于在不同时间的同一客户)的相应QoE度量可能完全具有非常不同的影响。这意味着，虽然所感知的QoE通常仍将呈现与正在实现的 QoS的一定程度的相关性，但在特定时间的QoE可能特别受到在对QoS没有如此显著影响的网络特性方面的改变的影响，反之亦然，从而削弱或消除了任何这样的相关性。任何此类相关性将受到影响的程度可能取决于所涉及网络特性影响由相应客户 (或者由在不同时间的同一客户)实际使用的网络依赖应用的程度。
简要参考其它现有公开，国际申请WO2014/166523(“Nokia”)涉及旨在提供对基于web的应用的用户体验的了解的方法和装置。一种这样的方法涉及收集和测量应用级关键性能指标(KPI)，通过监测网络中的网络侧用户流量来检测用户动作，将用户动作与KPI相关联，以便评估和量化用户的体验质量(QoE)，并将较差的QoE 与网络侧KPI相关联，以确定该较差的QoE的潜在根本原因。
Bagnulo等人的题为“Building a Standard Measurement Platform”的论文(IEEE Communications Magazine,vol.52,no.5,May 2014)讨论了如何经由针对不同技术和端到端网络的部分的不同解决方案来实现网络管理，以及如何获得总体看法并预测对服务用户的影响是困难的。其讨论了已出现的许多专有平台如何从用户住宅进行端到端测试，以及这些平台在规模、互操作性以及用于比较类似结果的能力方面如何受限。以SamKnows平台为例，提出了从其目前的专有协议到标准化协议和测试的演进。
发明内容
根据本发明第一方面，提供了一种获得关于本地用户网络中的一个或更多个用户装置所使用的网络依赖应用的诊断测试结果的方法，所述一个或更多个用户装置可操作以经由具有与其相关联的控制模块的网络网关装置与数字通信接入网络进行通信，并且可操作以经由所述接入网络与所述网络依赖应用中所涉及的远程联网装置进行通信，所述方法包括以下步骤：
所述控制模块监测所述一个或更多个用户装置与所述远程装置之间的通信，以便识别由所述一个或更多个用户装置使用的网络依赖应用；
对于被识别为由所述一个或更多个用户装置使用的多个网络依赖应用中的每一个，从多个不同的预定诊断测试程序中选择适用的诊断测试程序，以获得关于如被识别为使用所述网络依赖应用的所述一个或更多个用户装置所体验的网络依赖应用的诊断测试结果；
触发被选择为适用的诊断测试程序，从而获得关于如所述一个或更多个用户装置所体验的所述网络依赖应用的诊断测试结果。
根据优选实施方式，所述诊断测试程序使得针对所述网络依赖应用获得的诊断测试结果很可能指示如被识别为使用所述网络依赖应用的所述一个或更多个用户装置实际上所体验的网络依赖应用的性能度量。例如，所述一个或更多个用户装置可以被识别为使用在特定监测时间或者在已经执行了监测的监测时段期间涉及的网络依赖应用。
根据优选实施方式，可以触发被选择为适用于获得关于如特定用户装置所体验的特定网络依赖应用的诊断测试结果的特定诊断测试程序，以在所述用户装置不使用所涉及的网络依赖应用时发生。这可能是为了确保所述测试程序本身的执行不会干扰用户使用所述网络依赖应用，或降低用户的体验。另选地，可以触发所述特定诊断测试程序，以在所述用户装置使用所涉及的网络依赖应用时发生。这可能是为了确保所述结果与在它们实际上正在影响用户体验的同时所涉及的特性相关。
根据优选实施方式，所述一个或更多个用户装置所使用的网络依赖应用可以包括以下中的一个或更多个：
(i)从一个或更多个远程服务器获得数据以供web浏览器使用的应用，诸如web 浏览应用以及依赖于web浏览应用的应用；
(ii)向一个或更多个远程服务器提供数据的应用，举例来说，诸如用于归档或以其它方式将数据发送至远程“基于云”的储存库的应用；
(iii)向和/或从一个或更多个远程服务器流传输数据的应用，举例来说，诸如音频和/或视频流应用；
(iv)与一个或更多个远程用户装置交换数据的应用，举例来说，诸如上述应用中的任何一个的“对等”版本，或其它这样的“对等”应用。
然而，应当清楚，可以替代地或者同样使用其它类型。
类似地，应当清楚，对于优选实施方式，所述远程联网装置可以包括以下中的一个或更多个：
(i)一个或更多个远程内容服务器，诸如提供网页内容或其它数据的服务器(或者可能是内容传送网络节点)；
(ii)一个或更多个远程流服务器(其通常是内容服务器类型，并且可以是CDN 节点，但可以特别适于向用户流传输音频和/或视频内容)；
(iii)一个或更多个远程用户装置(例如，其可以是“对等”应用中所涉及的“同等”装置)。
根据优选实施方式，所述预定诊断测试程序可以包括以下中的一个或更多个：
(i)用于在用户装置与远程装置之间建立连接的测试程序；
(ii)用于建立关于用户装置与远程装置之间的数据交换的数据速率、延迟、数据丢失和/或可靠性的测试程序；
(iii)用于建立远程装置的能力的测试程序。
根据优选实施方式，可以针对控制模块(即，在该控制模块处、通过该控制模块或者代表该控制模块)维护诊断测试程序的计划表，该计划表针对对于被识别为被所述一个或更多个用户装置所使用的网络依赖应用而被选择为适用的诊断测试程序而进行更新。在这样的实施方式中，触发被选择为适用的诊断测试程序的步骤可以包括如在更新后的计划表中所阐述的(或者根据更新后的计划表以其它方式)来触发诊断测试程序。所述计划表还可以根据其间特定网络依赖应用未被识别为被所述用户装置使用的时段来进行更新，如果显然网络依赖应用未被重新使用、未被使用达某一时段，或者使用频率不足以调整任何(或者这样频繁的)测试，那么这可能是为了降低对于特定网络依赖应用适用的诊断测试程序被触发的频率。
根据优选实施方式，所述控制模块可以是网络网关装置、可以是所述网络网关装置的功能模块，或者可以被可通信地耦接至所述网络网关装置(可能作为单独的本地或远程单元)。
根据优选实施方式，所述网络网关装置可以是住宅或局域网网关装置，诸如住宅网关路由器调制解调器或“集线器”装置。例如，这可以具有用于(可能经由本地ISP 或接入网络)与因特网进行通信的一个或更多个外部网络接口，和一个或更多个内部网络接口(诸如用于与家庭网络内的用户装置进行无线通信的WiFi接口、用于与家庭网络内的用户装置进行有线通信的以太网或其它这样的接口，以及诸如LTE接口的可能的其它接口)。
根据本发明第二方面，提供了一种用于获得关于本地用户网络中的一个或更多个用户装置所使用的网络依赖应用的诊断测试结果的控制模块，所述一个或更多个用户装置可操作以经由与所述控制模块相关联的网络网关装置与数字通信接入网络进行通信，并且可操作以经由所述接入网络与所述网络依赖应用中所涉及的远程联网装置进行通信，所述控制模块包括一个或更多个处理器，所述处理器可操作以：
-监测所述一个或更多个用户装置与所述远程装置之间的通信，以便识别由所述一个或更多个用户装置所使用的网络依赖应用；
-对于被识别为被所述一个或更多个用户装置使用的多个网络依赖应用中的每一个，从多个不同预定诊断测试程序中选择适用的诊断测试程序，用于网络依赖应用的所述适用的诊断测试程序是用于获得关于如被识别为使用所述网络依赖应用的所述一个或更多个用户装置所体验的网络依赖应用的诊断测试结果的诊断测试程序；并且
-触发被选择为适用的诊断测试程序，以获得关于如所述一个或更多个用户装置所体验的网络依赖应用的诊断测试结果。
根据本发明第三方面，提供了一种包括计算机程序代码的计算机程序产品，该计算机程序代码用于在被加载到计算机系统中并且在其上被执行时，使该计算机执行根据所述第一方面的方法的所有步骤。
上面关于所述第一方面所引用的各种选项和优选实施方式也适用于所述第二和第三方面。
根据优选实施方式，控制模块(例如，其可以是住宅网关路由器调制解调器或者“集线器”装置，或者另一这样的局域网网关装置、其一部分、或者与这样的网关装置相关联的单独的装置)因此可以将其测试引导至用户实际上使用的那些服务，并且测试至用户装置所连接的特定远程服务器或者至那些实体驻留其上的网络的连接，或者以其它方式执行适当的测试来获得指示用户实际感知到的那些的QoE度量。这可以在用户不使用那些服务或与那些终端系统或网络连接时完成，并且可以确保(i) 可以通知用户关于他们实际上使用的任何服务、终端系统或远程网络是否存在问题 (以及该问题的原因)；(ii)可以通知网络提供商或ISP针对给定客户是否存在问题。
附图说明
现在将参照附图对本发明的优选实施方式进行描述，其中：
图1示出在根据优选实施方式的方法的执行中可能涉及的实体；
图2例示可以存在于执行根据优选实施方式的方法的家庭网关内的功能模块，以及可以与这样的家庭网关接触的其它实体；以及
图3是例示根据优选实施方式的方法的流程图。
具体实施方式
现在将参照附图对根据优选实施方式的方法和设备进行描述。
通常，诸如家庭或住宅网络或局域网(LAN)的用户网络包括网关装置，该网关装置允许用户网络内(或使用用户网络)的用户装置与外部的装置之间(经由广域网 (WAN))的通信，该广域网本身例如可以是较大的计算机网络，诸如提供与市区内的住宅的连接的市政广域网(WAN)或者因特网。
对于家庭或住宅网络，网关装置的主要功能组件通常驻留在诸如住宅网关路由器调制解调器或“家庭集线器”之类的设备中，其通常位于用户的家中，形成用户的家庭网络的一部分。网关装置通常包括无线接入点，该无线接入点允许网关装置与本地网络内的诸如(具有WiFi能力、LTE能力等的)“智能电话”和(具有WiFi能力、 LTE能力等的)“膝上型”计算机的装置无线地通信(例如，使用WiFi、第四代/长期演进(4G LTE，或简称“LTE”)等)。网关装置还可以通过无线方式或者经由有线连接与本地网络内的诸如“台式”计算机、联网电视机等的装置进行通信。
可以通过数字用户线路(DSL)技术、有线调制解调器、宽带移动电话网络，或其它通信技术来提供网关装置与WAN或其它这样的外部网络之间的连接。
借助这种连接，用户网络中的、运行网络依赖应用的用户装置能够经由网关装置与外部网络(包括诸如接入网络的网络)通信，并因此能够经由外部网络与网络依赖应用中所涉及的远程联网装置进行通信。
诸如“家庭集线器”的局域网或家庭网络网关装置通常很适合拦截从用户网络中的用户装置或者向用户网络中的用户装置行进的流量，分析该流量并进行或触发其它实体以立即或稍后进行测试，测试的结果可以被用于确保通过该网关装置的流量将达到或可能实现足够的QoE。
将对通过根据优选实施方式的控制模块来实现根据优选实施方式的方法的技术进行描述，所述控制模块在诸如“家庭集线器”的局域网或家庭网络网关装置内。
图1示出在根据优选实施方式的方法的执行中可能涉及的实体。属于客户或者以其它方式在客户的家庭网络3内使用的用户装置1、1’经由家庭网关装置2的形式的控制模块连接到因特网6，使得来自该用户装置的所有宽带流量通过该家庭网关。应当理解，家庭网络3(其可以基于有线、无线，或有线和无线通信)通常不会有硬或固定的边界-特别是在其部分为无线网络的情况下，其范围通常将受到多种因素的影响，诸如家庭网关2和用户装置1的信号强度和其它能力、认证/许可问题、建筑物的结构/架构问题，以及其它因素。
家庭网关2被示出为经由客户的本地ISP网络5与因特网6通信，并且经由其它 ISP网络8和/或以其它方式与诸如内容服务器7、远程用户的装置9等的远程(联网) 装置通信。家庭网关2包括用于执行各种功能的元件，包括普通家庭网关2的那些功能，以及下面将更详细说明的其它功能。
图2示出家庭网关2内的功能模块，以及来自图1的、与家庭网关2直接接触的实体(即，用户装置1和本地ISP网络5)。家庭网关2内的功能模块包括用于执行各种功能的元件，包括普通家庭网关2的那些功能，以及将更详细说明的其它功能。
家庭网关2具有一个或更多个内部网络接口20，该内部网络接口20可以包括：用于在家庭网络3内与用户装置1进行无线通信的WiFi接口20a；用于在家庭网络内与用户装置1进行有线通信的以太网接口20b；以及可能的其它接口(举例来说，诸如LTE接口)。家庭网关2还具有至少一个外部(或广域网，WAN)网络接口26，借助所述外部网络接口26，所述家庭网关2经由本地ISP网络5与因特网6进行通信。网络接口20、26是针对用于输入或输出数据或者用于输入和输出数据两者的装置的接口。
家庭网关2还具有形成中央处理器单元(CPU)的一个或更多个处理器22，其通信地连接至接口20、26和数据存储部或存储器24，该数据存储部或存储器24可以是任何读/写存储装置或模块，或者诸如随机存取存储器(RAM)或非易失性存储装置的装置/模块的组合，并且可以被用于存储可执行和/或不可执行数据。
处理器22被示出为具有用于分组路由220、分组检查222、测试选择224以及测试触发226的功能模块，其功能将在稍后进行说明。存储器24可以在其中存储有测试计划表242和黑名单244，其也将在稍后进行说明。
具体参照上述附图，可以获得关于用户网络3中的一个或更多个用户装置1所使用的网络依赖应用的诊断测试结果，所述一个或更多个用户装置1可操作以经由外部网络(诸如本地ISP网络5、因特网6以及其它网络)与那些网络依赖应用中所涉及的远程联网装置7、9进行通信，并且经由家庭网关或其它这样的控制模块与外部网络进行通信。根据优选实施方式，可以以下列方式获得诊断测试结果。
在家庭网关2(或包括控制模块的关联设备)内，处理器22的分组检查模块222 监测用户装置1与远程装置7、9之间的通信，以便识别由一个或更多个用户装置1 正在使用的网络依赖应用。对正在使用哪些网络依赖应用的识别可以通过识别关于哪些分组(其在持续进行的基础上通过家庭网关2的处理器22的分组路由模块220接收和转发)正在从用户装置1发送和/或由用户装置1接收或以其它方式发送和/或接收的单个流来实现。然后，对于被识别为由一个或更多个用户装置1使用的每个网络依赖应用，家庭网关2(或关联设备)的处理器22的测试选择模块224选择诊断测试程序(来自预定的一组诊断测试程序)，该诊断测试程序适用于(或者最适用于) 获得关于所涉及的网络依赖应用的诊断测试结果，以便关于所涉及网络依赖的应用而获得的诊断测试结果将指示如实际上由已经被发现在使用那些网络依赖应用的用户装置1的用户所体验的特定网络依赖应用的相应性能。这样被选择为适用的诊断测试程序然后可以通过处理器22的测试触发模块226触发，以便家庭网关2(或关联设备)然后可以获得关于如由在家庭网络3中已经被观察到正在使用“使用中(in-use)”网络依赖应用的用户装置1的用户实际上所体验的网络依赖应用的诊断测试结果。
上述方法的步骤(即监测用户装置1与远程装置7、9之间的通信，选择适当的测试程序并触发适当的测试)中的一些或全部可以由家庭网关装置2或其适当的模块来执行，从而利用正常拓扑和/或地理位置以及这样的装置的现有或正常功能的优点，同时适应这种情况，使其能够根据需要监测用户流量、执行必要的处理、然后触发适当的测试。与网关装置2或其适当的模块协作地，所述步骤中的一些或全部可以另选地由一个或更多个关联装置来执行。
结果，基于在家庭网络处观察到的使用模式，可以产生测试计划表242(其在图 2中被示出为存储在家庭网关2的存储器24中，但可以保持在别的地方)。其它信息也可以获得和/或存储在家庭网关2的存储器24中或别的地方，并且与上述相关使用。例如，可以存储不作为诊断技术的一部分来进行测试的网站的黑名单244。例如，这样的黑名单可能是合乎需要的，以使任何可能令用户为难的网站不会显示在任何结果网页上。
更详细地看这一点，应当理解，出于测试的目的，本地用户将与之交互的实体例如可以分成三类：
1)诸如网站和流服务器的服务；
2)应用(诸如VoIP)中的对等体(peer)，其中装置1的本地用户正在与远程装置9的另一特定远程用户进行交互；
3)对等体，其中装置1的本地用户正在与其他非特定对等体(诸如在多玩家游戏或对等共享网络中)进行交互。
也可能涉及其它类型的实体。
网站和流服务可以在内容服务器7上实现，或者实现为内容传送网络(CDN)，其本身可以集成到本地ISP网络5中。内容服务器可以经由另一ISP网络8连接至因特网，或者可以是位于服务提供商自己的网络上的负载均衡服务器集群。为了清楚起见，图1和图2中仅示出了一种连接模式。对于连接至对等体的应用，这些应用通常将与远程用户装置9进行通信。这可以是用于诸如VoIP的应用的特定装置，或者用于对等文件共享等的多个非特定远程装置。
这些不同类别的交互托管可以以不同的方式进行测试。首先可能存在定制测试可用。这可以是诸如被设计成测试特定服务(诸如“YouTube”)或诸如“Smooth Streaming”(来自Microsoft(微软)的视频流技术)的特定技术的定制测试。利用Web下载测试，该测试通常被设计成与小范围的网站一起工作，以确保获得的页面下载时间相当于访问该网站。对于任何随机网站，确切的时间可能不太准确，然而，随着时间的推移通常趋于可用。服务类别中的大多数实体可以利用这样的定制测试或重新制定的定制测试来进行测试。
对于在特定对等体之间发生的应用，通信对等体不太可能运行可以进行测试的服务；更何况例如提供成为VoIP测试服务器的测试点。然而，观察到的每个IP地址都可以在稍后的时间直接地或者在相应网络中的不太深的级别下检查连接性。大多数IP 地址(特别是静态的，但也有动态的)一般会对例如“Ping”测试做出响应。这样的测试可以被用于测量例如往返时间(Round Trip Times)和丢失。可以比较来自在不同时间执行的“Ping”测试的结果。即使不能确定绝对值，通常仍然可以随着时间的推移根据结果确定QoE比之前某个时间更好还是更差。如果没有IP地址可用于测试 -如可能是其中进行例如“Skype”或其它这样的VoIP呼叫(至少针对大多数住宅地址)的情况，则可以使用诸如“traceroute”的程序来确定最后的“可ping通”地址 (即，将响应于“Ping”测试的最新IP地址)。这通常是响应者的ISP。因此可以测试至远程ISP的连接。例如，可以发现，用户经常经由其进行通信以便经由VoIP联系朋友、亲戚，或生意伙伴的ISP不可靠。可以通知用户这种情况，以使得他们知道故障出在哪里。本地ISP还可以访问该信息，以便对来自用户的可能的故障呼叫进行警告。
对于对等共享网络和多玩家游戏，可能需要定制测试，但可以执行关于覆盖网络(在文件共享的情况下)或游戏服务器的可用性的测试，而无需这样的定制测试。
关于涉及数据提供者(诸如视频流服务器)的服务，定制测试程序可以涉及执行测试或测试的组合，以便针对个人用户和特定数据提供服务器进行测量，不仅仅是数据提供服务器与个人用户之间用于下载或流传输的连接质量(例如，延迟测试)，还包括用于提供数据(下载或流传输)的数据提供服务器的当前剩余容量(或带宽)。因此，合适的定制测试程序可以涉及特定的测试组合，可以包括结合单独测试(或甚至信息请求)的测量(例如使用“Ping”或其它这样的测试)，以便建立数据提供服务器当前的实用程序级别和/或用于向附加客户端提供数据的能力。
应当理解，其它定制测试程序(涉及单独测试或测试组合)可适用于其它特定联网服务或特定类型的联网服务。
在某些情况下，可以使用在适当网络位置处具有与服务器、对等体或其它节点类似的特性和/或能力的“虚拟节点”，其将响应于定制或其它测试，并且允许针对用户装置1正与之交互或已经进行交互的实际节点来执行所选择/适用的测试。
分组：
结果和测试可以在连接到相同地址/ISP/服务的宽带或其他用户之间进行合并。考虑在英国使用“Skype”(或另一这样的VoIP服务)的宽带用户与日本的亲戚进行交流的情况。他们的个性化测试可以测试与他们在日本的亲戚的ISP的连接。如果另一个宽带用户也在使用Skype与使用同一个日本ISP的其他人进行交流，则可以合并该测试。仅需要进行一次端到端测试。如果两个宽带用户都可以访问自己的ISP，并且可以端到端访问，则可以断定本地ISP与日本ISP之间存在连接。该结果可以合并，以使可以向与日本ISP连接的所有用户通知他们的线路性能。这在存在连接问题的情况下大概是最有用的，并且可以意味着，不是打电话给帮助台，而是可以通知宽带用户或者发现例如日本的ISP(或整个网络)存在问题。
测试安排：
使用不同服务的频率或与不同端点通信的频率可能会影响测试的规律性或频率。大多数基于探测的测试将具有可以根据测试计划表242执行的一组测试。利用这样的“个人”或“个性化”QoE测试，可以最经常地测试最经常运行或使用的那些服务。例如考虑“YouTube测试”。如果用户经常访问“YouTube”服务，那么这可以频繁地进行测试，以确保该服务对于该用户始终可用(或指示是否不是这样)。如果用户不经常访问“YouTube”服务，那么对于“YouTube”服务器来说，可能不太频繁的测试可能的QoE可能仍然是可取的，以防用户开始使用“YouTube”，并且还可以为ISP 提供对所有客户潜在体验的QoE的看法。
优选地更新计划表，使得对于已被识别为使用的特定应用的测试频率随时间衰减，除非这种使用在一定时段内继续或重复。这可以做到，以确保针对朋友或亲戚的一次性“Skype”(或其它这样的VoIP)呼叫(其中，该朋友或亲戚在度假时正在网吧使用他们的iPad)不会无限期地导致例如对于VoIP应用和/或假期位置的重复测试。
图3是例示根据优选实施方式的方法的流程图，其可以在诸如图2所示的家庭网关2中实现或由该家庭网关2实现。家庭网关2等待分组(s300)。当在其网络接口中的一个上接收到分组时(s305)，可以将该分组与黑名单244进行比较(该黑名单 244在图2中被示出为存储在家庭网关2的存储器24中，但可以保持在别的地方)，以去除不被测试的地址(s310)。一旦已经接收到足够允许识别流的分组，就将该分组与同一流中的其它分组一起进行检查(即，可能是基于这些分组具有相同的源IP 地址和源端口，以及相同的目的地IP地址和目的地端口，或以其它方式)(s315)。如果无法识别流，则存储流信息(s320)，并且该过程返回等待分组(s300)。
应当注意，通常不可能根据在流中观察到的第一个分组来识别应用-通常需要接收多个分组来识别应用的签名。存在这么做的各种技术，如“深度分组检测”(DPI)，其先前已在DPI中间框中实现，并且其在此可以通过处理器22的分组检查模块222 加以执行。当流已被识别时，可以确定其是否是新的应用/目的地配对(s325)(即，例如，其中，“新”可以意味着以前未被处理器看到，或者最近未足以保持存储在存储器24中地看到)。应当注意，新的“目的地”可能不仅仅是一个新的IP地址，因为许多服务将具有多个IP地址。网站或流服务使用服务器集群或CDN的情况就是这样。决定这是否是新的应用/目标配对可以利用有关CDN和主要内容服务提供商的信息来完成。可以通过观察对域名服务(DNS)的请求来进行补充。例如，针对 www.google.com的DNS请求返回一个或更多个IP地址。因此，随后发送到这些IP 地址中的一个的所观察到的分组将与访问Google网站相关联。
如果应用/目的地配对不是新的，则记录对该配对进行的连接数的计数(s330) 连同针对该新访问尝试的时间戳。然后，可以更新测试计划表242(其在图2中被示出为存储在家庭网关2的存储器24中，但可以保持在别的地方)(s335)，以使得可以更频繁地测试更频繁访问的配对，并且一段时间未使用的配对可以不太频繁地安排或者完全不安排。因此，这样的变化将反映在更新的计划表中，从而导致在下一测试实例按照更新的计划表来触发适当的测试(s365)。然后，该过程可以结束或者通过返回至等待分组(s300)的起始点而继续进行。
如果在步骤s325已经观察到新的应用/目的地配对，那么将在测试计划表242中添加新的测试。首先确定定制测试是否可用(s340)。有关定制测试(和其它测试) 的信息可以本地存储在例如家庭网关2的存储器24中，或者可以从别的地方获得。其例如可以从与其它控制装置共享的公共或中央远程存储器获得，以允许集中更新信息，而不是在每个控制装置处更新信息。
如果定制测试可用，则将该测试添加至测试计划表(s345)。如果定制测试不可用，则可以检查远程地址以查看其是否响应任何已知的测试，诸如较早讨论的“Ping”测试(s350)或其它测试，如果是这样的话，那么可以安排这样的测试(例如，“Ping”测试该地址、(可能指定的)相应或类似地址，或以其它方式)(s355)。如果IP地址不“可ping通”，那么可以使用诸如“traceroute”的程序来找到最后的“可ping通”地址(s360)。另选地，例如可以对目的地IP地址的/24掩码进行测试。
如前所述，这样的变化然后被反映在更新的计划表中，从而导致在触发下一测试实例时根据更新的计划表来触发适当的测试(s365)，然后，该过程结束或者通过返回至等待分组(s300)的起始点而继续进行。
应当注意，使用“点划”线示出了导致“触发测试”步骤(s365)和“等待分组”步骤(s300)的箭头。这是鉴于这两个步骤实际上可以在持续进行的基础上执行，而不是简单地在每次执行完步骤s335、s345或s355中的任一个步骤后顺序地执行的事实。
该测试结果可以提供给用户和/或ISP，以便可以进行监测。所执行的特定测试和/或所测试的网站不一定需要发送至ISP，或者甚至不需要发送给用户-例如可以仅决定向ISP报告所达到的QoE级别。
只要所描述的本发明的实施方式至少部分地可使用诸如微处理器、数字信号处理器或其它处理装置的软件控制可编程处理装置、数据处理设备或系统实现，就应当清楚，用于配置用于实现前述方法的可编程装置、设备或系统的计算机程序都设想为本发明的一方面。该计算机程序例如可以被具体实施为源代码或者经历编译以在处理装置、设备或系统上实现，或者可以具体实施为目标代码。
适当地，计算机程序以机器或装置可读形式存储在载体介质上，例如存储在固态存储器、诸如磁盘或磁带的磁存储器、光学或磁光可读存储器(如光盘或数字万用盘等)中，并且处理装置利用该程序或其一部分来配置它以供操作。该计算机程序可以从在诸如电子信号、射频载波或光学载波的通信介质中具体实施的远程源提供。这种载体介质也被设想为本发明的方面。
本领域技术人员应当理解，尽管已经关于上述示例性实施方式对本发明进行了描述，但本发明不限于此，而是存在落入本发明的范围内的许多可能变型例和修改例。
本发明的范围包括本文所公开的任何新颖特征或特征组合。本申请人特此通知，在进行本申请或从其衍生的任何这种进一步的申请期间，可以对这种特征或特征的组合制定新的权利要求。具体地，参照所附权利要求，来自从属权利要求的特征可以与独立权利要求的那些特征组合，并且来自相应独立权利要求的特征可以以任何适当的方式组合，而不仅仅是权利要求中列举的具体组合。

Claims (14)

1.一种获得关于本地用户网络中的一个或更多个用户装置所使用的网络依赖应用的诊断测试结果的方法，所述一个或更多个用户装置能够被操作以经由网络网关装置与数字通信接入网络进行通信，所述网络网关装置具有与该网络网关装置相关联的控制模块，并且所述一个或更多个用户装置能够被操作以经由所述数字通信接入网络与所述网络依赖应用中所涉及的远程联网装置进行通信，所述方法包括以下步骤：
所述控制模块监测所述一个或更多个用户装置与所述远程联网装置之间的通信，以便识别被所述一个或更多个用户装置使用的网络依赖应用；
对于被识别为被所述一个或更多个用户装置使用的多个网络依赖应用中的每一个，从多个不同的预定诊断测试程序中选择适用的诊断测试程序，用于获得关于如被识别为使用所述网络依赖应用的所述一个或更多个用户装置所体验的所述网络依赖应用的诊断测试结果；
触发被选择为适用的所述诊断测试程序，从而获得关于如所述一个或更多个用户装置所体验的所述网络依赖应用的诊断测试结果。
2.根据权利要求1所述的方法，其中，关于所述网络依赖应用的所述诊断测试结果指示如被识别为使用所述网络依赖应用的所述一个或更多个用户装置所体验的所述网络依赖应用的性能的度量。
3.根据权利要求1或2所述的方法，其中，触发被选择为适用于获得关于如特定用户装置所体验的特定网络依赖应用的诊断测试结果的特定诊断测试程序，以在所述特定用户装置不使用所述特定网络依赖应用时发生。
4.根据权利要求1所述的方法，其中，被所述一个或更多个用户装置使用的所述网络依赖应用包括以下中的一个或更多个：
(i)从一个或更多个远程服务器获得数据以供web浏览器使用的应用；
(ii)向一个或更多个远程服务器提供数据的应用；
(iii)向一个或更多个远程服务器和/或从一个或更多个远程服务器流传输数据的应用；
(iv)与一个或更多个远程用户装置交换数据的应用。
5.根据权利要求1所述的方法，其中，所述远程联网装置包括以下中的一个或更多个：
(i)一个或更多个远程内容服务器；
(ii)一个或更多个远程流服务器；
(iii)一个或更多个远程用户装置。
6.根据权利要求1所述的方法，其中，所述预定诊断测试程序包括以下中的一个或更多个：
(i)用于在用户装置与远程联网装置之间建立连接的测试程序；
(ii)用于建立关于用户装置与远程联网装置之间的数据交换的数据速率、延迟、数据丢失和/或可靠性的测试程序；
(iii)用于建立远程联网装置的能力的测试程序。
7.根据权利要求1所述的方法，其中，针对所述控制模块维护诊断测试程序的计划表，所述计划表针对对于被识别为被所述一个或更多个用户装置使用的网络依赖应用而被选择为适用的诊断测试程序而进行更新。
8.根据权利要求7所述的方法，其中，触发被选择为适用的所述诊断测试程序的所述步骤包括根据更新的计划表触发诊断测试程序。
9.根据权利要求7或8所述的方法，其中，所述计划表还根据特定网络依赖应用未被识别为被所述一个或更多个用户装置使用所经过的时间段来进行更新，从而降低触发适用于所述特定网络依赖应用的诊断测试程序的频率。
10.根据权利要求1所述的方法，其中，所述控制模块是所述网络网关装置、是所述网络网关装置的一部分，或者通信地耦接至所述网络网关装置。
11.根据权利要求1所述的方法，其中，所述网络网关装置是住宅网关装置或局域网网关装置。
12.根据权利要求1所述的方法，其中，所述网络网关装置是路由器调制解调器装置。
13.一种用于获得有关本地用户网络中的一个或更多个用户装置所使用的网络依赖应用的诊断测试结果的控制模块，所述一个或更多个用户装置能够被操作以经由与所述控制模块相关联的网络网关装置与数字通信接入网络进行通信，并且所述一个或更多个用户装置能够被操作以经由所述数字通信接入网络与所述网络依赖应用中所涉及的远程联网装置进行通信，所述控制模块包括存储器以及一个或更多个处理器，所述一个或更多个处理器适于：
-监测所述一个或更多个用户装置与所述远程联网装置之间的通信，以便识别被所述一个或更多个用户装置使用的网络依赖应用；
-对于被识别为被所述一个或更多个用户装置使用的多个网络依赖应用中的每一个，从多个不同的预定诊断测试程序中选择适用的诊断测试程序，用于网络依赖应用的所述适用的诊断测试程序是用于获得关于如被识别为使用所述网络依赖应用的所述一个或更多个用户装置所体验的所述网络依赖应用的诊断测试结果的诊断测试程序；并且
-触发被选择为适用的所述诊断测试程序，以获得关于如所述一个或更多个用户装置所体验的所述网络依赖应用的诊断测试结果。
14.一种存储有计算机程序代码的计算机可读存储介质，所述计算机程序代码用于在被加载到计算机中并且在该计算机上被执行时，使所述计算机执行根据权利要求1至12中任一项所述的方法的所有步骤。
CN201680016378.8A 2015-03-20 2016-03-14 获得诊断测试结果的方法、控制模块及计算机可读存储介质 Active CN107409071B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP15275083 2015-03-20
EP15275083.2 2015-03-20
PCT/EP2016/055477 WO2016150748A1 (en) 2015-03-20 2016-03-14 Diagnostic testing

Publications (2)

Publication Number Publication Date
CN107409071A CN107409071A (zh) 2017-11-28
CN107409071B true CN107409071B (zh) 2020-08-18

Family

ID=52824178

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680016378.8A Active CN107409071B (zh) 2015-03-20 2016-03-14 获得诊断测试结果的方法、控制模块及计算机可读存储介质

Country Status (4)

Country Link
US (1) US10623280B2 (zh)
EP (1) EP3272077B1 (zh)
CN (1) CN107409071B (zh)
WO (1) WO2016150748A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190188122A1 (en) * 2017-12-20 2019-06-20 Rainforest Qa, Inc. Electronic product testing systems
US10341217B2 (en) * 2016-04-20 2019-07-02 Centurylink Intellectual Property Llc Local performance test device
TWI606732B (zh) * 2016-10-24 2017-11-21 Chunghwa Telecom Co Ltd System and method for measuring mobile network quality using home gateway
GB201703460D0 (en) 2017-03-03 2017-04-19 Scirra Ltd Methods adn devices for testing appliances
EP3370396B1 (en) * 2017-03-03 2019-10-16 Scirra Ltd. Methods and devices for testing applications
CN108122129B (zh) * 2017-12-01 2022-02-22 上海子午线新荣科技有限公司 一种数据处理方法、装置及电子设备
US10721142B1 (en) * 2018-03-08 2020-07-21 Palantir Technologies Inc. Computer network troubleshooting
US11196649B2 (en) 2018-06-25 2021-12-07 British Telecommunications Public Limited Company Processing local area network diagnostic data
WO2020002159A1 (en) * 2018-06-25 2020-01-02 British Telecommunications Public Limited Company Processing local area network diagnostic data
EP3614627B1 (en) * 2018-08-20 2021-09-15 EXFO Inc. Telecommunications network and services qoe assessment
US11297142B2 (en) * 2019-01-31 2022-04-05 Nec Corporation Temporal discrete event analytics system
US10855555B2 (en) * 2019-03-11 2020-12-01 Juniper Networks, Inc. On-demand probing for quality of experience metrics
EP4038840A1 (en) 2019-09-30 2022-08-10 British Telecommunications public limited company Processing local area network diagnostic data
GB202017135D0 (en) 2020-10-29 2020-12-16 British Telecomm Apportioning of data traffic between communication channels

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103703825A (zh) * 2011-08-29 2014-04-02 英派尔科技开发有限公司 以应用为基础在终端上输出估计的QoE的方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100030874A1 (en) * 2008-08-01 2010-02-04 Louis Ormond System and method for secure state notification for networked devices
US8578020B2 (en) * 2009-12-24 2013-11-05 Empire Technology Development Llc Dynamic mobile application quality-of-service monitoring and reporting
EP2632100B1 (en) 2012-02-24 2015-12-30 Sandvine Incorporated ULC Systems and methods for traffic management
US9167021B2 (en) * 2012-03-30 2015-10-20 Citrix Systems, Inc. Measuring web browsing quality of experience in real-time at an intermediate network node
EP2784984A1 (en) 2013-03-28 2014-10-01 British Telecommunications public limited company Monitoring network performance
US20160065419A1 (en) 2013-04-09 2016-03-03 Nokia Solutions And Networks Oy Method and apparatus for generating insight into the customer experience of web based applications
WO2015049771A1 (ja) * 2013-10-03 2015-04-09 株式会社日立製作所 コンピュータシステム
CN103841412B (zh) * 2014-03-18 2016-03-02 北京邮电大学 一种网络视频用户体验质量测量方法和装置
US20160044520A1 (en) * 2014-08-11 2016-02-11 Verizon Patent And Licensing Inc. Mobile automation test platform
US9632811B2 (en) * 2015-03-25 2017-04-25 Ca, Inc. Virtualization of purpose-built devices

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103703825A (zh) * 2011-08-29 2014-04-02 英派尔科技开发有限公司 以应用为基础在终端上输出估计的QoE的方法

Also Published As

Publication number Publication date
CN107409071A (zh) 2017-11-28
US10623280B2 (en) 2020-04-14
EP3272077B1 (en) 2019-03-20
EP3272077A1 (en) 2018-01-24
WO2016150748A1 (en) 2016-09-29
US20180062947A1 (en) 2018-03-01

Similar Documents

Publication Publication Date Title
CN107409071B (zh) 获得诊断测试结果的方法、控制模块及计算机可读存储介质
Dhamdhere et al. Inferring persistent interdomain congestion
Bauer et al. Understanding broadband speed measurements
US8972568B2 (en) Quantifying user quality of experience by passive monitoring
US20060034185A1 (en) Systems and methods for monitoring and evaluating a connectivity device
EP3682595B1 (en) Obtaining local area network diagnostic test results
US12052144B2 (en) Prediction of a performance indicator
US20150358225A1 (en) Method and System For Testing a Broadband Internet Bandwidth
JP5957419B2 (ja) ＱｏＥ推定装置、ＱｏＥ推定方法及びプログラム
EP3414870B1 (en) Calculating service performance indicators
US11611612B2 (en) Link quality measurements and link status detection
KR20040082032A (ko) 초고속 인터넷 서비스에서의 웹기반 단대단모의ＶｏＩＰ품질측정방법
Hora et al. Predicting the effect of home Wi-Fi quality on Web QoE
JP5477501B1 (ja) 情報処理システム及び情報処理プログラム
Koukoutsidis Public QoS and Net Neutrality Measurements: Current Status and Challenges Toward Exploitable Results
Milanesio et al. Network level perspective in web sessions troubleshooting
GB2566467A (en) Obtaining local area network diagnostic test results
CN113676369B (zh) 一种网络质量分析方法、数据接收服务器及存储介质
US20240031252A1 (en) Methods for measuring user experience and satisfaction and identifying bottlenecks on communications networks
Shaikh Non-Intrusive Network-Based Estimation of Web Quality of Experience Indicators
JP6280836B2 (ja) 識別装置、識別方法および識別プログラム
Arvidsson et al. Detecting user dissatisfaction from passive monitoring
JP6212871B2 (ja) 通信監視システム、通信監視装置、通信監視プログラム及び通信端末
Saiz et al. A unified framework of internet access speed measurements
Zeljkovic Predicting Network Performance for Internet Activities Using a Web Browser

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant