CN108702334B - 用于针对零费率的网络配置的分布式测试的方法和系统 - Google Patents
用于针对零费率的网络配置的分布式测试的方法和系统 Download PDFInfo
- Publication number
- CN108702334B CN108702334B CN201680082838.7A CN201680082838A CN108702334B CN 108702334 B CN108702334 B CN 108702334B CN 201680082838 A CN201680082838 A CN 201680082838A CN 108702334 B CN108702334 B CN 108702334B
- Authority
- CN
- China
- Prior art keywords
- zero
- test
- network
- data
- rated
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0866—Checking the configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
- H04L43/106—Active monitoring, e.g. heartbeat, ping or trace-route using time related information in packets, e.g. by adding timestamps
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/50—Testing arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/02—Standardisation; Integration
- H04L41/0246—Exchanging or transporting network management information using the Internet; Embedding network management web servers in network elements; Web-services-based protocols
- H04L41/0253—Exchanging or transporting network management information using the Internet; Embedding network management web servers in network elements; Web-services-based protocols using browsers or web-pages for accessing management information
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/04—Network management architectures or arrangements
- H04L41/046—Network management architectures or arrangements comprising network management agents or mobile agents therefor
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0803—Configuration setting
- H04L41/0813—Configuration setting characterised by the conditions triggering a change of settings
Abstract
服务器使被配置为测试代理的用户设备实施用于测试关于零费率的网络配置的测试计划。通过使测试代理实施测试计划,服务器使测试代理向一个或多个相应的预定IP地址发送一个或多个请求。服务器接收指示一个或多个请求的结果的数据。该服务器进一步使用该数据来识别网络配置是否关于零费率被潜在误配置。响应于识别出网络配置关于零费率被潜在误配置,服务器向网络运营商发送潜在误配置的通知。
Description
技术领域
本发明总体上涉及网络通信,包括但不限于从服务器设备针对关于电子设备上的零费率的网络配置的分发测试计划。
背景技术
移动设备已经变得越来越主要的意思是消费者通过其访问、下载和消费互联网上的电子内容。
尽管电信技术的大量进步,然而,对互联网可实现的访问和用于访问互联网上的内容的数据速率仍然是受限的。考虑到在某些地理区域中的互联网接入的有限可用性,消费者常常难以访问互联网,并且因此常常在使用移动设备时感到沮丧。此外,难以监控服务器系统上的网络配置以理解网络是否被正确地配置并且用于互联网接入的服务被正确地提供给相应的用户设备(例如,移动设备)。
发明内容
因而,需要用于改进网络可操作性的方法、设备和系统。
具体地,在所附权利要求和以下描述中阐述了本发明处理这个目的的实施方式。
具体地在权利要求和以下描述中阐述的本发明的实施方式,涉及用于将零费率的网络配置的测试从服务器系统分发给用户设备的方法、设备和系统。可以向用户提供对互联网上的某些内容(例如,零费率内容)的零费率(例如,免费)访问,同时还可以提供对互联网上的其他内容(例如,非零费率内容)的非零费率(例如,付费)访问。因此,零费率内容可以在不被网络提供商针对网络访问收费的情况下被访问,而访问非零费率内容导致被网络提供商针对网络访问征收费用。应当监控网络配置以确保零费率内容被正确地免费提供给相应的用户设备。此外,不需要用户设备为非零费率访问进行支付的情况下,不应当将非零费率内容提供给任何用户设备。通过将针对零费率的网络配置的测试从服务器系统分发给各个用户设备,服务器系统可以及时监控网络是否被正确地配置和操作以向用户设备提供零费率服务。
根据一些实施方式,可以在电子设备(例如,服务器设备)处执行计算机实施的方法,该电子设备具有一个或多个处理器和存储用于由一个或多个处理器执行的指令的存储器。该方法包括例如由服务器设备使被配置为测试代理的用户设备实施用于测试关于零费率的网络配置的测试计划。通过使被配置为测试代理的用户设备实施测试计划,该方法包括使测试代理向一个或多个相应的预定IP地址发送一个或多个请求。服务器设备可以接收指示一个或多个请求的结果的第一数据。服务器设备可以进一步使用第一数据来识别网络配置是否关于零费率被潜在误配置。
根据一些实施方式,电子设备(例如,服务器设备)可以包括一个或多个处理器、存储器和一个或多个程序;该一个或多个程序存储在该存储器中并且被配置为由该一个或多个处理器执行。该一个或多个程序包括用于执行本文所描述的方法或方法的任何实施方式的操作的指令。根据一些实施方式,非暂时性计算机可读存储介质中存储有指令,该指令在由电子设备执行时使电子设备执行本文所描述的方法或方法的任何实施方式的操作。
根据一些实施方式,在具有一个或多个处理器和存储用于由一个或多个处理器执行的指令的存储器的电子设备(例如,用户设备)处执行计算机实施的方法。该方法包括例如在用户设备处从服务器设备接收用于测试关于零费率的网络配置的测试计划。测试计划包括用于使电子设备将一个或多个请求发送到一个或多个相应的预定IP地址的指令。在实施测试计划时,电子设备将一个或多个请求发送到一个或多个相应的预定IP地址。该电子设备进一步向该服务器设备发送用于识别该网络配置是否关于零费率被潜在误配置的数据。该数据基于该一个或多个请求和对该一个或多个请求的相应响应而生成。
根据一些实施方式,电子设备(例如,用户设备)包括一个或多个处理器、存储器和一个或多个程序;该一个或多个程序存储在该存储器中并且被配置为由该一个或多个处理器执行。该一个或多个程序包括用于执行涉及本文所描述的方法的用户侧设备执行的方法或方法的任何实施方式的操作的指令。根据一些实施方式,非暂时性计算机可读存储介质中存储有指令,该指令在由电子设备执行时使电子设备执行针对本文所描述的方法的用户侧设备执行的方法或方法的任何实施方式的操作。
在具体实施方式中的本发明的另外的实施方式涉及由从属权利要求和结合附图对示例性实施方式的以下描述得到的服务器侧实现方式和/或客户端侧实现方式。
根据本发明的实施方式特别地在所附权利要求中公开,其中,在一个权利要求类别(例如,方法)中提及的任何特征也可以在另一个权利要求类别(例如,系统或设备)中要求保护。所附权利要求中的依赖或引用关系仅出于形式原因而选择。然而,也可要求保护由对任何先前权利要求的故意引用(特别是多重依赖关系)得到的任何主题,使权利要求及其特征的任何组合应视为被公开并且适合于被要求保护,而不管在所附权利要求中选择的依赖关系。可以要求保护的主题不仅包括所附权利要求中阐述的特征的组合,还包括权利要求中的特征的任何其他组合,其中,权利要求中提及的每个特征可以与权利要求中的任何其他特征或其他特征的组合相结合。此外,本文所描述或描绘(特别是结合附图)的任何实施方式和特征可以在单独的权利要求中和/或在与本文所描述或描绘的任何实施方式或特征或与所附权利要求的任何特征的任何组合中要求保护。
附图说明
为了更好地理解各种描述的实施方式,应当结合以下附图参考以下实施方式的描述。在整个附图和说明书中,相同的参考标号指代相对应的部分。
图1是示出根据一些实施方式的网络架构的框图。
图2是示出根据一些实施方式的用户设备的框图。
图3是示出根据一些实施方式的服务器系统的框图。
图4是示出根据一些实施方式的用于测试关于零费率的网络配置的模型的框图。
图5是示出根据一些实施方式的用于分发测试计划的方法的流程图。
具体实施方式
现在将参考实施方式,实施方式的实例在附图中示出。在下面的描述中,阐述了许多具体细节以便提供对所描述的各种实施方式的理解。然而,本领域普通技术人员将清楚的是,可以在没有这些具体细节的情况下实践所描述的各种实施方式。在其他实例中,没有详细描述众所周知的方法、过程、组件、电路和网络,以便不会不必要地模糊实施方式的各方面。
还将理解,尽管本文中使用的术语第一、第二等在一些实例中用于描述不同元件,但这些元件不应受到这些术语的限制。这些术语仅用于将一个元件与另一个元件区分开。例如,第一数据可被称为第二数据,并且类似地,第二数据可被称为第一数据,而不背离所描述的各种实施方式的范围。第一数据和第二数据都是数据,但是它们不是相同的数据。
本文所描述的各种实施方式的描述中使用的术语仅用于描述特定实施方式的目的,而不旨在是限制性的。除非上下文另外明确地指示,否则如在对所描述的各种实施方式和所附权利要求的描述中所使用的单数形式“一(a)”、“一个(an)”和“该(the)”旨在也包括复数形式。还将理解,本文所使用的术语“和/或”是指并且涵盖相关联的所列出项中的一个或多个的任何和所有可能的组合。将进一步理解,术语“包括(include)”、“包括(including)”、“包含(comprise)”、和/或“包含(comprising)”当在本说明书中使用时指定所陈述特征、整体、步骤、操作、元件和/或组件的存在,但不排除一个或多个其他特征、整体、步骤、操作、元件、组件和/或其组合的存在或添加。
本文所使用的术语“如果”根据上下文可选地被解释为意味着“当...时”或“在...时”或“响应于确定”或“响应于检测”或“根据...的确定”。类似地,根据上下文,短语“如果确定”或“如果检测到[规定的条件或事件]”可选地被解释为意味着“在确定时”或“响应于确定”或“在检测到[规定的条件或事件]时”或“响应于检测到[规定的条件或事件]”或“根据检测到[规定的条件或事件]的确定”。
本文所使用的术语“示例性”在“充当示例、实例或例示”的意义上使用,而不是在“表示其种类的最佳的”意义上使用。
图1示出了根据一些实施方式的网络架构100。网络架构100用于向用户设备分发测试计划,以检查网络或网络段是否被正确地配置。例如,网络架构100用于检查针对零费率(例如,对某些互联网内容的自由网络访问)和/或非零费率(例如,对某些互联网内容的付费网络访问)的配置是否正确。通过使用零费率服务,用户可以在没有被针对网络访问收费的情况下访问一个或多个IP地址。而对于非零费率服务,用户向网络运营商支付服务费以访问一个或多个IP地址。
网络架构100包括通过一个或多个网络112(例如,互联网、蜂窝电话网络、移动数据网络、其他广域网、局域网、城域网等)可通信地连接到服务器系统104的多个用户设备(也被称为“客户端设备”、“客户端系统”、“客户端计算机”或“客户端”)102-1、102-2、...、102-n。在一些实施方式中,一个或多个网络112包括公共通信网络(例如,互联网和/或蜂窝数据网络)、专用通信网络(例如,专用LAN或租用线路)、或这些通信网络的组合。
网络架构100包括分别对应于一个或多个基站114-1、114-2、...、114-m的一个或多个网络段106-1、106-2、...、106-m。(尽管每个段被示出为对应于单个基站,但是一个段可对应于多个基站)。在一些实施方式中,网络段内的网络连接由拥有或控制一个或多个对应的基站和相关基础设施以向网络段内的用户设备提供网络服务的某些网络运营商(例如,网络服务提供商、网络运营商或蜂窝公司)提供。例如,对应的网络段106(例如,106-1)的基站114(例如,114-1)可通信地将一个或多个用户设备102(例如,102-1和102-2)彼此和/或连接到网络112。
在一些实施方式中,用户设备102是移动设备和/或固定位置设备。例如,用户设备102包括计算设备,诸如功能型电话、智能电话、智能手表、个人数字助理、便携式媒体播放器、平板计算机、2D游戏设备、3D(例如,虚拟现实)游戏设备、膝上型计算机、台式计算机、具有嵌入其中或耦接至其的一个或多个处理器的电视机、车载信息系统(例如,提供导航、娱乐和/或其他信息的车载计算机系统),和/或可用于与服务器系统104通信的其他适当的计算设备。在一些实施方式中,服务器系统104是诸如计算机服务器的单个计算设备。在其他实施方式中,服务器系统104由一起工作以执行服务器系统的动作(例如,云计算)的多个计算设备来实施。服务器系统104与网络运营商不同且独立。在一些实施方式中,服务器系统104能够分别识别与一个或多个不同的网络运营商相关联的某些网络问题。例如,服务器系统104可以识别与相应网络段的相应网络运营商相关联的网络拥塞、网络错误和/或关于零费率和/或其他服务的某些网络配置。在一些实施方式中,服务器系统104可以在没有来自网络运营商的任何帮助的情况下识别与网络运营商相关联的某些网络问题。
在一些实施方式中,用户设备102与采用用户设备102来访问一个或多个IP地址(例如,包括零费率IP地址和/或非零费率IP地址)的用户(未示出)相关联。在一些实施方式中,访问一个或多个IP地址的请求被转发到服务器系统104或单独的服务器系统(未示出)的一个或多个模块并由其路由。用户设备102执行可以用于访问一个或多个IP地址的网络浏览器应用和/或其他应用。
在一些实施方式中,与用户设备102交互的用户被提供有零费率服务。零费率服务可由服务器系统104提供、测试和监控。可替代地,零费率服务由单独的服务器系统(未示出)提供,但是由服务器系统104测试和监控。在一些实施方式中,通过使用零费率服务,用户设备102可以免费访问一个或多个预定的IP地址。例如,用户设备102可以免费下载、上传和/或查看与预定的IP地址相关联的网页或使用与预定的IP地址相关联的应用,而不被针对网络访问收费。由此,这些类型的预定的IP地址被称为零费率IP地址。来自零费率网页和/或应用的内容被称为零费率内容。
在一些实施方式中,用户设备102可以通过向网络运营商支付服务费来访问不是零费率IP地址的一个或多个IP地址。需要付费网络访问的这些IP地址被称为非零费率IP地址,由非零费率IP地址提供的内容被称为非零费率内容。
网络架构100还可以包括第三方服务器110-1、110-2、...、110-p。
在一些实施方式中,给定的第三方服务器110用于托管向用户设备102提供网页的第三方网站。在一些实施方式中,给定的第三方服务器用于托管由客户端设备104使用的第三方应用。如以上所讨论的,服务器系统(例如,服务器系统104或单独的服务器系统)可以将来自用户设备102的请求路由或重定向到相应的第三方服务器110。在一些实施方式中,服务器系统(例如,服务器104)使用内联框架(“内嵌框架”)来嵌套网络会话(例如,零费率或非零费率会话)内的独立网站。在一些实施方式中,服务器系统(例如,服务器104)使用内嵌框架来使第三方开发者能够创建由第三方服务器110分开托管、但是在用户的会话内操作并且通过服务器系统中的用户的配置文件来访问的应用。示例性的第三方应用包括针对书籍、商业、通信、竞赛、教育、娱乐、时尚、金融、食物和饮料、游戏、健康和健身、生活方式、本地信息、电影、电视、音乐和音频、新闻、照片、视频、生产力、参考材料、安全性、购物、运动、旅行、公用事业、社交网络等的应用。在一些实施方式中,给定的第三方服务器110用于提供第三方内容(例如,新闻文章、评论、消息馈送等)。
在一些实施方式中,一个或多个第三方服务器110的相应IP地址被预先确定为被配置为向用户设备102提供零费率内容的零费率IP地址。用户设备102不需要向网络提供商支付任何数据使用费来查看、下载数据和/或将数据上传到一个或多个零费率IP地址。在一些实施方式中,一个或多个第三方服务器110的相应IP地址是提供非零费率(例如,付费)内容的非零费率IP地址。用户设备102向网络提供商支付数据使用费来查看、下载数据和/或将数据上传到一个或多个非零费率IP地址。
在一些实施方式中,给定的第三方服务器110是单个计算设备,而在其他实施方式中,给定的第三方服务器110由一起工作以执行服务器系统的动作(例如,云计算)的多个计算设备实施。
可选地,网络架构100进一步包括位于网络段(例如,106-1)内的用于收集与网络段有关的基线数据的测试元件(例如,103-1)。在一些实施方式中,测试元件103是计算设备,该计算设备包括一个或多个处理器、存储器和存储在存储器中且被配置为由一个或多个处理器执行的一个或多个程序。一个或多个程序包括待由测试元件103执行的用于测试与网络段相关联的网络连接的指令(例如,测试脚本)。例如,一个或多个程序包括Javascript代码,该Javascript代码在由一个或多个处理器执行时使测试元件103将请求发送到一个或多个预定的IP地址(例如,包括零费率IP地址和/或非零费率IP地址)、收集请求的结果,并且将收集的结果发送到服务器系统104。在一些实施方式中,测试元件103完全由第三方提供商提供或结合第三方提供商的基础设施提供。在一些实施方式中,测试元件103具有用于网络访问的零余额账户,使得账户不具有用于网络访问的任何信用。测试元件103对于一个或多个网络段是可选的。
在一些实施方式中,测试元件103被请求根据预定调度周期性地访问一个或多个预定的IP地址。例如,与从测试元件103到预定IP地址的相应请求相关联的时间戳是预定且已知的。在一些实施方式中,测试元件103位于网络段内的固定且已知的位置处。在一些实施方式中,测试元件103与固定且已知的IP地址相关联。在一些实施方式中,测试元件103与预定且已知的设备标识符相关联。在一些实施方式中,与测试元件103相关联的网络类型是预定的、固定的和已知的。
来自测试元件103的数据以及其他类型的数据(诸如预定的所请求的IP地址、测试元件标识符、测试元件103的位置、与测试元件103相关联的网络类型、以及与从测试元件103到预定的IP地址的相应请求相关联的时间戳)由服务器系统104用作将由统计模型分析的基线数据。来自测试元件103的基线数据可以用作基础事实(ground-truth)数据、模型训练数据、模型测试数据和/或用于在将模型应用于来自用户设备102的传入数据时验证对应的网络段的网络配置的数据。
图2是示出根据一些实施方式的示例性用户设备102(例如,图1的用户设备102-1至102-n中的一个)的框图。用户设备102通常包括一个或多个中央处理单元(CPU,例如,处理器或核)202、一个或多个网络(或其他通信)接口210、存储器212、以及用于将这些组件互连的一个或多个通信总线214。通信总线214可选地包括在系统组件之间互连并且控制系统组件之间的通信的电路(有时称为芯片组)。
如图2所示,用户设备102包括用户界面204,用户界面包括输出设备206和输入设备208。在一些实施方式中,输入设备包括键盘或触控板。可替代地或另外地,在一些实施方式中,用户界面204包括含触敏表面的显示设备,在这种情况下,显示设备是触敏显示器。在具有触敏显示器的用户设备中,物理键盘是可选的(例如,当需要键盘输入时,可以显示软键盘)。输出设备(例如,输出设备206)还可选地包括扬声器或连接到扬声器、耳塞或耳机的音频输出连接(即,音频插孔)。此外,一些用户设备102使用麦克风和语音识别设备来补充或代替键盘。可选地,用户设备102包括用于捕获音频(例如,来自用户的语音)的音频输入设备(例如,麦克风)。可选地,用户设备102包括位置检测设备(诸如GPS(全球定位卫星)或其他地理位置接收器)和/或用于确定用户设备102的位置的位置检测软件。
在一些实施方式中,一个或多个网络接口210包括用于从其他用户设备102、服务器系统104和/或其他设备或系统接收数据和/或将数据传输至其的无线和/或有线接口。在一些实施方式中,使用各种定制或标准的无线协议(例如,NFC、RFID、IEEE802.15.4、Wi-Fi、ZigBee、6LoWPAN、线程、Z波、蓝牙、ISA100.11a、无线HART、MiWi等)中的任一种来执行数据通信。此外,在一些实施方式中,使用各种定制或标准的有线协议(例如,USB、火线、以太网等)中的任一种来执行数据通信。例如,在一些实施方式中,一个或多个网络接口210包括用于使能(经由图1的一个或多个网络112)与其他WLAN兼容设备和/或服务器系统104的数据通信的无线LAN(WLAN)接口250。
存储器212包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备;并且可以包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存设备或其他非易失性固态存储设备。存储器212可以可选地包括远离CPU 202的一个或多个存储设备。存储器212,或可替代地存储器212内的非易失性存储器固态存储设备包括非暂时性计算机可读存储介质。在一些实施方式中,存储器212或存储器212的非暂时性计算机可读存储介质存储以下程序、模块和数据结构或其子集或超集:
·操作系统216,包括用于处理各种基本系统服务和用于执行硬件相关任务的过程;
·用于经由一个或多个网络接口210(有线或无线)将用户设备102连接到其他计算设备(例如,服务器系统104、用户设备102和/或其他设备)的网络通信模块218;
·用户界面模块220,经由用户界面204接收来自用户的命令和/或输入(例如,来自可包括键盘、触摸屏、麦克风、眼睛跟踪组件、三维手势跟踪组件等的输入设备208),并且向用户界面提供用于在用户界面204(例如,可包括显示屏、触摸屏、扬声器等的输出设备206)上显示的对象和其他输出;
·一个或多个客户端应用模块222,包括以下模块(或指令集),或其子集或超集:
o网络浏览器模块224(例如,微软的Internet Explorer、Mozilla的Firefox、苹果的Safari、Opera软件的Opera或谷歌的Chrome),用于访问、查看网站(例如,零费率和/或非零费率网站)并且与其交互,网站包括由服务器系统104提供的用于在由网络浏览器模块224执行时测试关于零费率服务的网络配置的零费率测试脚本226(例如,嵌入在网页中);
o零费率应用模块230,用于提供到零费率服务(例如,由服务器系统104提供的零费率服务)和相关特征的接口,零费率应用模块包括从服务器系统104接收的测试文件232。例如,用户设备102运行由服务器系统104提供的自由基本服务(FBS)应用。零费率应用模块230可以是FBS应用的一部分,该FBS应用提供直接到服务器系统104的链路,但是最终目的地是一个或多个第三方服务器110-1、110-2、...、110-p。服务器系统104可以充当代理并且在一个或多个第三方服务器110-1、110-2、...、110-p与用户设备102之间路由业务;以及
o其他可选的客户端应用模块240,诸如用于文字处理、日程安排、映射、天气、股票、计时、虚拟数字助理、呈现、数值计算(电子表格)、绘图、即时消息、电子邮件、电话、视频会议、照片管理、视频管理、数字音乐播放器、数字视频播放器、2D游戏、3D(例如,虚拟现实)游戏、电子书阅读器和/或锻炼支持的应用,包括与相应可选的客户端应用模块240的一个或多个版本对应的安装文件242。
上述模块和应用中的每一个对应于用于执行如上所述的一个或多个功能和/或在本申请中描述的方法(例如,本文所描述的计算机实施的方法和其他信息处理方法)的可执行指令集。这些模块(即,指令集)不需要被实施为单独的软件程序、过程或模块,并且因此在各种实施方式中,这些模块的不同子集可选地组合或以其他方式重新布置。
图3是示出根据一些实施方式的示例性服务器系统104的框图。服务器系统104通常包括一个或多个处理单元(处理器或核)302、一个或多个网络或其他通信接口304、存储器306、以及用于互连这些组件的一个或多个通信总线308。通信总线308可选地包括在系统组件之间互连和控制系统组件之间的通信的电路(有时称为芯片组)。服务器系统104可选地包括用户界面(未示出)。用户界面(如果提供的话)可以包括显示设备并且可选地包括诸如键盘、鼠标、触控板和/或输入按钮的输入。可替代地或另外地,显示设备包括触敏表面,在这种情况下,显示器是触敏显示器。
存储器306包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM或其他随机存取固态存储器设备;并且可以包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存设备和/或其他非易失性固态存储设备。存储器306可以可选地包括远离处理器302的一个或多个存储设备。存储器306,或可替代地存储器306内的非易失性存储器设备,包括非暂时性计算机可读存储介质。在一些实施方式中,存储器306或存储器306的计算机可读存储介质存储以下程序、模块和数据结构或其子集或超集:
·操作系统310,包括用于处理各种基本系统服务和用于执行硬件相关任务的过程;
·网络通信模块312,用于经由一个或多个通信接口304(有线的或无线的)和一个或多个通信网络(例如,一个或多个网络112)将服务器系统104连接到其他计算机;
·零费率数据库314,用于存储与零费率服务相关联的数据,包括:
o模型信息320,包括模型数据322,诸如用于相应统计模型用来检查关于零费率服务的网络配置的模型类型信息、模型格式信息和相关系数;在一些实施方式中,模型信息320包括用于不同类型的应用(例如,测试零费率网络配置、测试免费数据滥用等)的相应统计模型的模型数据322的集合。
o与每个测试情况相关联的测试情况信息330,包括但不限于:
■网络连接结果数据332;
■与用于每个测试情况的一个或多个请求相关联的IP地址334,包括但不限于用于测试的一个或多个预定的IP地址(例如,零费率IP地址和/或非零费率IP地址);
■测试设备标识符336(例如,测试代理标识符);
■与测试设备(例如,测试代理)相关联的位置信息338;
■与测试设备相关联的网络类型信息340(例如,网络类型和/或网络运营商信息);以及
■与从测试设备到预定IP地址的相应请求相关联的时间戳342;
o用户管理350,诸如用户信息352和/或用户设备信息354(例如,用户设备类型、用户设备MAC地址、用户设备标识符等);以及
o测试计划356,包括要在用户设备上实施的测试脚本和/或组件(例如,通过使用图2中的在用户设备102上的浏览器模块224或零费率应用模块230);
·零费率服务器模块360,用于提供零费率服务和相关特征(例如,结合图2中的用户设备102上的浏览器模块224或零费率应用模块230),包括:
o测试计划管理模块362,用于生成和分发测试计划356;
o模型管理模块364,用于执行模型构建、模型训练、模型测试、模型应用和/或模型更新;
o测试代理管理模块366,用于管理和选择来自用户设备102中的一个或多个测试代理;以及
o数据分析模块368,用于处理从相应的测试代理(以及可选的测试元件)接收的测试情况数据330并且使用模型320来分析测试情况数据330;以及
·用于存储应用的安装文件(例如,用于下载到和安装在图1的客户端设备102上)的安装文件数据库370,包括:
o用于安装应用(例如,图2的零费率应用模块230、可选的客户端应用模块240)的应用安装文件372,可以包括用于相应应用的多个版本的安装文件。
零费率数据库314将与零费率服务相关联的数据存储在一个或多个类型的数据库(诸如图形、维度、扁平、分层、网络、面向对象的、关系和/或XML数据库)中。
用户管理信息350包括用户信息352,诸如用户配置文件、登录信息、隐私和其他偏好、传记数据等。在一些实施方式中,对于给定用户,用户信息352包括用户的姓名、配置文件图片、联系人信息、出生日期、性别、婚姻状态、家庭状态、职业、教育背景、偏好、兴趣和/或其他人口统计信息。
在一些实施方式中,零费率服务器模块360包括网络或超文本传输协议(HTTP)服务器、文件传输协议(FTP)服务器以及使用通用网关接口(CGI)脚本、PHP超文本预处理(PHP)、活动服务器页面(ASP)、超文本标记语言(HTML)、可扩展标记语言(XML)、Java、JavaScript、异步JavaScript和XML(AJAX)、XHP、Javelin、无线通用资源文件(WURFL)等实施的网页和应用。
图4是示出根据一些实施方式的用于测试关于零费率的网络配置的示例性模型400的框图。在一些实施方式中,模型400是从示例输入构建并且用于做出与关于零费率的网络配置有关的预测和/或决定的机器学习模型。在一些实施方式中,服务器系统104将从一个或多个用户设备102和一个或多个测试元件103接收的测试情况数据提供给模型400以用于训练、测试和应用以获得预测和/或决定。
在一些实施方式中,模型400包括存储在服务器系统104的存储器306中的模型信息320。在一些实施方式中,模型400包括完全或结合存储器306存储在另一个存储空间中的模型信息,并且可由服务器系统104经由网络112检索和使用。在一些实施方式中,模型400由系统服务器104的模型管理模块364来管理。在一些实施方式中,模型400由完全或结合存储器306存储在另一个存储空间中的一个或多个模块管理,并且可由服务器系统104经由网络112检索和使用。
在一些实施方式中,模型400的输入数据410包括用于多个测试情况的数据。在一些实施方式中,从在用户设备102上执行的零费率应用模块(例如,图2中的零费率应用模块230)接收测试情况(例如,测试情况1)。在一些实施方式中,从执行零费率测试脚本(例如,图2的零费率测试脚本226)的网络浏览器模块(例如,图2的网络浏览器模块224)接收测试情况(例如,测试情况2)。在一些实施方式中,从包括在网络段(例如,图1中的网络段106-1)中的测试元件(例如,测试元件103-1,图1)接收测试情况(例如,测试情况3)。在一些实施方式中,针对每个测试情况的测试情况信息(例如,图3的测试情况信息330)包括一个或多个数据字段,诸如网络连接结果、所请求的IP地址、测试设备标识符(例如,测试代理标识符)、测试设备的位置、与测试设备相关联的网络类型、和/或与从测试设备到预定的IP地址的相应请求相关联的时间戳。
在一些实施方式中,模型400的输入数据410包括用于在将模型400应用于来自任何用户设备的传入数据之前训练和测试模型400的数据(例如,基础事实数据)的集合。
在一些实施方式中,从相应网络段106的测试元件103(例如,图1中的网络段106-1的测试元件103-1)收集基础事实数据。在一些实施方式中,测试元件的一个或多个数据字段(诸如所请求的IP地址、测试元件标识符、测试元件的位置、与测试元件相关联的网络类型以及与从测试元件到预定IP地址的相应请求相关联的时间戳)是已知的。测试元件将网络连接结果发送到服务器系统104,并且服务器系统104将测试元件数据馈送到模型400以用于训练和/或测试目的。
在一些实施方式中,从满足具有针对网络访问的零余额的预定义的可能性的一个或多个用户设备102(例如,测试代理)收集基础事实数据。在一个示例中,基于测试情况数据,服务器系统104可以检测用户设备已经成功访问零费率内容,但是未能访问非零费率内容。在另一示例中,服务器系统104可以检测到来自用户设备的针对非零费率内容的请求导致到针对零费率内容的入口的重定向。在又一示例中,服务器系统104可以从网络运营商和/或用户设备接收用户设备具有(或可能具有)针对网络访问的零余额的指示。服务器系统104选择可能具有零余额的这样的用户设备作为收集基础事实数据的测试代理。在一些可替换的实施方式中,从随机选择的一个或多个用户设备102收集基础事实数据。
在一些实施方式中,模型400的输入数据410包括来自任何用户设备(例如,测试代理)的用于测试关于零费率的网络配置的传入数据。服务器系统104可以将测试计划分发给所有或多个随机选择的用户设备,并且从实施测试计划的多个用户设备102收集模型400的输入数据410。
在一些实施方式中,从满足具有针对网络访问的零余额的预定义的可能性的一个或多个用户设备102(例如,测试代理)收集输入数据410。服务器系统104可以确定用户设备具有针对网络访问的零余额的可能性。例如,服务器系统104可以检测到用户设备已经成功访问零费率内容,但是未能访问非零费率内容。在另一示例中,服务器系统104可以检测到来自用户设备的针对非零费率内容的请求导致到针对零费率内容的入口的重定向。可替代地或结合地,用户设备和/或向用户设备提供网络服务的网络运营商可以确定用户设备具有针对网络访问的零余额的可能性。例如,服务器系统104可以从网络运营商和/或用户设备接收用户设备具有(或可能具有)针对网络访问的零余额的指示。
在一些实施方式中,模型400的输出数据420包括具有关于网络段中的零费率的网络误配置的概率、测试设备具有零余额账户(或者测试设备是否具有零余额账户)的概率和/或网络连接错误发生在网络段内(或者网络段内是否发生网络错误)的概率。输出数据420还可以包括关于网络段内的零费率的潜在误配置的置信水平。
图5是示出根据一些实施方式的用于分发测试计划的方法500的流程图。方法500由服务器系统504(例如,图1和图3中的服务器系统104)和用户设备502(例如,图1和图2中的用户设备102-1)执行。在图5中执行的操作对应于存储在计算机存储器(例如,图2至图3中的存储器212和306)或其他计算机可读存储介质中的指令。在一些实施方式中,用户设备502可以是如以上参考图1至图2所解释的任何用户设备102。例如,用户设备502可以使用测试工具(例如,Facebook测试工具)和/或通过测试元件(例如,如以上参考图1解释的测试元件103)在应用(例如,Facebook Android App)、在网站(例如,Facebook网站)上运行测试计划。
在一些实施方式中,服务器系统504(例如,图1和图3)向用户设备502发送(510)测试计划(例如,图3中的测试计划356)。用户设备502接收测试计划。测试计划用于测试关于零费率的网络配置,并且包括用于使用户设备502向一个或多个相应的预定IP地址发送一个或多个请求的指令。在一些实施方式中,一个或多个预定的IP地址包括一个或多个零费率IP地址。在一些实施方式中,预定的IP地址包括一个或多个非零费率IP地址。例如,通过一个或多个网络112(图1)发送测试计划。
在一些实施方式中,服务器系统504向所有用户设备(例如,图1中的用户设备102-1、102-2、...、102-n)发送测试计划。所有用户设备可以接收测试计划。在一些实施方式中,所有用户设备可以实施测试计划(例如,用作测试代理)。例如,每个用户设备102可以向一个或多个预定的IP地址发送一个或多个请求。
可选地,服务器系统504选择(512)用户设备(例如,用户设备502)作为实施测试计划的测试代理(例如,测试设备)。在一些实施方式中,所有用户设备从服务器系统504接收测试计划,但是只有所选择的一个或多个测试代理实施测试计划。可替代地,只有所选择的测试代理接收并实施该测试计划。
在一些实施方式中,在用户设备502实施测试计划之前,服务器系统504将用户设备502识别为满足具有针对网络访问的零余额的预定义可能性,并且选择(512)所识别的用户设备作为测试代理。例如,服务器系统504识别出用户设备502已成功访问零费率内容,但未能访问非零费率内容。作为响应,服务器系统504选择(512)这样识别的用户设备作为测试代理。在一些实施方式中,服务器系统504检测到从用户设备502到用于非零费率内容的非零费率IP地址的请求导致到针对零费率内容的入口的重定向,并且作为响应,选择(512)这样的用户设备作为测试代理。入口可以是与零费率服务相关的网页。入口可以包括用于用户设备502的用户检查账户余额的信息和/或链接。可替代地或另外地,门户可包括提醒用户访问非零费率IP地址的尝试的信息,并且可为用户提供购买将在将来用于访问非零费率IP地址的数据计划的选项。
在一些实施方式中,服务器系统504基于包括但不限于与相应用户设备502相关联的先前测试结果、用户设备状态、网络状态、账户状态和订户标识模块(SIM)卡余额信息的一个或多个(例如,多个)指示来选择一个或多个用户设备502作为相应测试代理。例如,如果关于零费率的网络被正确地配置,则在耦接到用户设备的预付费的订户标识模块(SIM)卡中具有零余额的用户设备只能访问零费率IP地址。通过选择满足具有针对网络访问的零余额的预定义可能性的用户设备作为测试代理,服务器系统504可以在不与来自任何网络运营商的收费系统集成的情况下测试关于零费率的网络配置。因此,用于测试关于零费率的网络配置的系统和方法可以对于具有任意数量的网络段的任意数量的网络运营商是可扩展的。
在一些实施方式中,服务器系统504从网络运营商接收用户设备502具有针对网络访问的零余额的指示。作为响应,服务器系统504选择(512)用户设备作为测试代理。在一些实施方式中,服务器系统504从用户设备502接收关于账户余额信息的指示,诸如针对网络访问的零余额。作为响应,服务器系统504选择(512)用户设备作为测试代理。例如,用户设备502确定用户账户余额是否满足具有针对网络访问的零余额的预定义可能性。然后,用户设备502向服务器系统504报告确定的结果(例如,用户账户余额可能是零余额)。
用户设备502实施(514)从服务器系统504接收的测试计划。在一些实施方式中,服务器系统504使配置为测试代理的用户设备502实施测试计划。测试计划包括用于使用户设备502向一个或多个相应的预定IP地址发送一个或多个请求的指令。
在一些实施方式中,在用户设备502上运行的应用(例如,图2中的零费率应用模块230)上实施测试计划。用户设备502执行应用(例如,图2的零费率应用模块230)。该应用包括用于实施测试计划的指令。在一些实施方式中,测试计划在另一类型的应用(例如,图2中的其他客户端应用模块240)(诸如在用户设备502上运行的社交网络应用)上实施。用户设备502上的应用的安装将用户设备502配置为测试代理。
在一些实施方式中,服务器系统502向用户设备502提供具有用于测试计划的测试脚本(例如,以Javascript)的网页。测试计划由在用户设备502上执行测试脚本的浏览器(例如,图2中的网络浏览器模块224)实施。用户设备502使用浏览器(例如,图2中的网络浏览器模块224)为测试计划渲染具有测试脚本的网页。向用户设备502提供网页将用户设备502配置为测试代理。
通过实施测试计划,用户设备502将一个或多个请求发送到一个或多个相应的预定IP地址。在一些实施方式中,来自用户设备502的一个或多个请求可以首先被转发到服务器系统(例如,与服务器系统504相同或不同于服务器系统504),并且服务器系统可以进一步将一个或多个请求路由到相应的目的地IP地址。
用户设备502向服务器系统504发送(516)指示一个或多个请求的结果的数据。服务器系统504接收指示一个或多个请求的结果的数据。可基于一个或多个请求和对一个或多个请求的相应响应来生成数据。该数据用于识别该网络配置是否关于零费率被潜在误配置。在一个示例中,关于零费率的误配置导致不能免费访问和/或根本不能访问预定的零费率IP地址的情况。在另一个示例中,关于零费率的误配置导致能够免费访问预定的非零费率IP地址的情况。
可替代地或另外地,该数据可用于识别与用户设备502相关联的网络段内的网络连接错误。例如,单独或与从其他测试情况和/或其他测试代理收集的数据结合使用的数据可以指示在网络段内是否存在网络拥塞。当在网络段内存在网络拥塞时,网络段内的用户设备可能由于网络带宽不足(例如,每秒的比特)、过多的网络延迟和/或网络段内的网络连接的其他性能故障而遇到互联网接入失败。
在一些实施方式中,服务器系统504从用户设备502接收指示一个或多个请求的结果的数据(例如,图3中的测试情况信息330)。在一些替代实施方式中,服务器系统504从另一实体接收指示一个或多个请求的结果的数据(例如,图3中的测试情况信息330)。例如,服务器系统504可以从用于路由一个或多个请求的服务器系统接收结果的数据。在另一个示例中,服务器系统504可以从向用户设备502提供网络服务的网络运营商接收结果的数据。
在一些实施方式中,指示一个或多个请求的结果的数据包括一个或多个字段,诸如:网络连接结果(例如,到所请求的IP地址的网络连接是成功还是被拒绝)、所请求的IP地址、测试代理标识符(例如,与用户设备502相关联的设备标识符)、测试代理的位置、与测试代理相关联的网络类型、和/或与从测试代理到所请求的IP地址的相应请求相关联的时间戳。在一些实施方式中,服务器系统504可以在将数据馈送到模型之前进一步合并一个或多个字段的所接收的数据。
服务器系统504向模型(例如,图4的模型400)提供(518)指示一个或多个请求的结果的数据。模型400可以是用于确定关于零费率的网络误配置的概率的统计模型。模型400可以是建立用于确定关于零费率的网络误配置的概率的机器学习模型。在一些实施方式中,用户设备502(例如,图1中的用户设备102-1)位于网络段(例如,图1中的网络段106-1)中,并且模型识别针对网络段中的零费率的潜在误配置。
通过使用模型400,服务器系统504确定(520)关于零费率的网络误配置的概率。在一些实施方式中,服务器系统504确定一个或多个概率,包括:关于网络段中的零费率的误配置的概率、测试代理具有零余额账户的概率、和/或在网络段内发生网络连接错误的概率。在一些实施方式中,模型400输出关于零费率的潜在误配置的置信水平。例如,置信水平可以指示关于网络段中的零费率具有可能的误配置的预测是否可信。置信水平可表示为0%与100%之间的百分数。在一些实施方式中,模型400基于所确定的是否存在(或可能是)关于零费率的网络误配置的结果来处理数据以更新对应网络段中的网络配置的状态。
在一些实施方式中,用户设备502(例如,测试代理)向包括一个或多个零费率IP地址的一个或多个预定IP地址发送请求。在服务器系统504处接收的数据指示来自用户设备502的到一个或多个零费率IP地址的请求是否成功。如果网络被正确配置,并且如果没有网络连接错误,则用于访问零费率IP地址的请求应该被准许。在一些实施方式中,服务器系统504在模型400中应用此原理以基于该数据识别网络配置是否关于零费率被潜在误配置。例如,通过使用模型400,服务器系统504至少部分地基于从用户设备502到一个或多个零费率IP地址中的至少一个的请求的拒绝来识别潜在的误配置。该识别可以进一步基于用户设备502具有针对网络访问的零余额的可能性。
在一些实施方式中,用户设备502(例如,测试代理)向包括一个或多个非零费率IP地址的一个或多个预定IP地址发送请求。在服务器系统504处接收的数据指示来自用户设备502的到一个或多个非零费率IP地址的请求是否被拒绝。假设如果网络被正确地配置,则对于零余额用户,访问非零费率IP地址的请求应该被拒绝。在一些实施方式中,服务器系统504在模型400中应用此原理以基于该数据确定该网络配置是否关于零费率被潜在误配置。例如,通过使用模型400,服务器系统504确定用户设备502具有零余额账户的可能性。如果用户设备502被确定为是可能的零余额账户,则服务器系统504可以至少部分地基于对一个或多个非零费率IP地址中的至少一个的成功访问来识别潜在误配置。这可以被视为与其中零余额用户账户能够访问非零费率IP地址的免费数据滥用有关的网络误配置。
可选地,测试元件506(例如,图1中的测试元件103-1)可用于向模型400提供数据(例如,用于训练、测试和使用模型400的基线数据)。测试元件506可与其他用户设备结合使用以提供由模型400使用来确定关于零费率的网络误配置的概率的数据。在一些实施方式中,测试元件506是与用户设备102不同的零余额设备。服务器系统504向测试元件506发送(522)测试计划。服务器系统504使测试元件506向一个或多个预定的IP地址(包括零费率IP地址和/或非零费率IP地址)发送一个或多个请求。
测试元件506向服务器系统504发送(524)测试结果的数据。服务器系统504从测试元件506接收测试结果的数据。测试结果的数据可以指示由测试元件506发送的一个或多个请求的结果。服务器系统504向模型400提供(526)所接收的数据。模型400可使用从测试元件506接收的数据以及从用户设备502和/或其他用户设备102接收的数据来识别网络配置是否关于零费率被潜在误配置。
在一些实施方式中,响应于识别出网络配置关于零费率被潜在误配置,服务器系统504向网络运营商发送(528)潜在误配置的通知(例如,警报)。例如,用户设备502(例如,图1中的用户设备102-1)位于网络段(例如,图1中的网络段106-1)中,并且通知网络段106-1的网络运营商。在一些实施方式中,服务器系统504向与由服务器系统504提供的服务相关联的一方或多方发送一个或多个通知(例如,警报和/或状态更新)。例如,服务器系统504向一个或多个用户(例如,服务订户)、一个或多个网络运营商508和/或一个或多个第三方服务器提供通知。
对于上面讨论的系统收集关于用户设备的信息(例如,设备标识符、设备位置、账户信息和/或到IP地址的请求的结果)的情况,可以为用户提供选择加入/退出可以收集这样的信息或其他类型的个人信息的程序或特征的机会。另外,在一些实施方式中,在存储或使用某些数据之前,可以以一种或多种方式使某些数据匿名,从而去除个人可识别信息。例如,可以使用户的身份匿名,使得无法确定用户的或与用户相关联的个人可识别信息。
虽然不同的附图中的一些以特定顺序示出了多个逻辑级,但是可以对不是顺序相关的级进行重新排序,并且可以组合或断开其他级。虽然一些重排序或其他分组被特别地提及,但是其他方式对于本领域普通技术人员将是很清楚的,所以本文中呈现的排序和分组不是可替代的穷尽列表。此外,应当认识到,级可以以硬件、固件、软件或其任何组合来实施。
出于解释的目的,已经参考具体实施方式描述了前述描述。然而,以上说明性讨论并非旨在是穷尽性的或将权利要求的范围限制为所公开的确切形式。鉴于以上教导,许多修改和变化是可能的。选择这些实施方式是为了最佳地解释权利要求及其实际应用下的原理,从而使本领域其他技术人员能够利用如适合于所设想的特定用途的各种修改来最佳地使用实施方式。
Claims (19)
1.一种用于分发测试计划的方法,包括:
在具有一个或多个处理器和存储用于由所述一个或多个处理器执行的指令的存储器的服务器处,其中,所述服务器耦接到多个用户设备:
使被配置为测试代理的用户设备实施用于测试关于零费率的网络配置的测试计划,所述测试计划包括使所述测试代理向相应的一个或多个预定的IP地址发送一个或多个请求;
接收指示所述一个或多个请求的结果的第一数据;
使用所述第一数据来识别所述网络配置是否关于零费率被潜在误配置;以及
在使被配置为所述测试代理的所述用户设备实施所述测试计划之前:
将所述用户设备识别为满足具有针对网络访问的零余额的预定义可能性;以及
选择所识别的用户设备作为所述测试代理,其中,将所述用户设备识别为满足具有零余额的所述预定义可能性包括检测到来自所述用户设备的针对非零费率内容的请求导致到针对零费率内容的入口的重定向。
2.根据权利要求1所述的方法,其中,所述测试计划在所述测试代理上运行的应用上实施。
3.根据权利要求1或权利要求2所述的方法,进一步包括向所述测试代理提供具有用于所述测试计划的测试脚本的网页;
其中,所述测试计划由所述测试代理上的执行所述测试脚本的浏览器实施。
4.根据权利要求1或权利要求2所述的方法,其中:
所述一个或多个预定的IP地址包括一个或多个零费率IP地址;
所述第一数据指示从所述测试代理到所述一个或多个零费率IP地址的请求是否成功;以及
使用所述第一数据来识别所述网络配置是否关于零费率被潜在误配置包括:至少部分地基于从所述测试代理到所述一个或多个零费率IP地址中的至少一个的请求的拒绝来识别潜在误配置。
5.根据权利要求4所述的方法,其中:
所述一个或多个预定的IP地址进一步包括一个或多个非零费率IP地址;
所述第一数据指示从所述测试代理到所述一个或多个非零费率IP地址的请求是否被拒绝;以及
使用所述第一数据来识别所述网络配置是否关于零费率被潜在误配置包括:至少部分地基于由所述测试代理对所述一个或多个非零费率IP地址中的至少一个的成功访问来识别潜在误配置。
6.根据权利要求1、2和5中任一项所述的方法,其中,所述第一数据包括从由以下项组成的组中选择的一个或多个字段:(1)网络连接结果,(2)所请求的IP地址,(3)测试代理标识符,(4)所述测试代理的位置,(5)与所述测试代理相关联的网络类型,以及(6)与从所述测试代理到预定的IP地址的相应请求相关联的时间戳。
7.根据权利要求1、2和5中任一项所述的方法,其中,所述服务器进一步耦接到测试元件,其中,所述测试元件是与多个所述用户设备不同的零余额设备,所述方法进一步包括:
使所述测试元件向相应的所述一个或多个预定的IP地址发送一个或多个请求;
接收指示由所述测试元件发送的所述一个或多个请求的结果的第二数据;以及
使用所述第二数据以及所述第一数据来识别所述网络配置是否关于零费率被潜在误配置。
8.根据权利要求1、2和5中任一项所述的方法,其中,从所述测试代理接收所述第一数据。
9.根据权利要求1所述的方法,其中,使用所述第一数据来识别所述网络配置是否关于零费率被潜在误配置包括:向统计模型提供所述第一数据以用于确定关于零费率的网络误配置的概率。
10.根据权利要求9所述的方法,其中:
所述测试代理位于网络段中;并且
所述统计模型确定:(1)关于所述网络段中的零费率的误配置,(2)所述测试代理是否具有零余额账户,以及(3)所述网络段内是否发生网络连接错误。
11.根据权利要求9或权利要求10所述的方法,其中,所述统计模型输出关于零费率的潜在误配置的置信水平。
12.根据权利要求1、2、5、9和10中任一项所述的方法,进一步包括:
响应于识别出所述网络配置关于零费率被潜在误配置,向网络运营商发送所述潜在误配置的通知。
13.根据权利要求12所述的方法,其中:
所述测试代理位于网络段中;以及
所述网络运营商是所述网络段的运营商。
14.一种存储用于由电子设备的一个或多个处理器执行的一个或多个程序的非暂时性计算机可读存储介质,所述一个或多个程序包含用于以下操作的指令:
使被配置为测试代理的用户设备实施用于测试关于零费率的网络配置的测试计划,所述测试计划包括使所述测试代理向相应的一个或多个预定的IP地址发送一个或多个请求;
接收指示所述一个或多个请求的结果的第一数据;
使用所述第一数据来识别所述网络配置是否关于零费率被潜在误配置;以及
在使被配置为所述测试代理的所述用户设备实施所述测试计划之前:
将所述用户设备识别为满足具有针对网络访问的零余额的预定义可能性;以及
选择所识别的用户设备作为所述测试代理,其中,将所述用户设备识别为满足具有零余额的所述预定义可能性包括检测到来自所述用户设备的针对非零费率内容的请求导致到针对零费率内容的入口的重定向。
15.一种用于实施与零费率相关的测试计划的方法,包括:
在具有一个或多个处理器和存储用于由所述一个或多个处理器执行的指令的存储器的计算设备处:
从服务器设备接收用于测试关于零费率的网络配置的测试计划,其中,所述测试计划包括用于使满足具有针对网络访问的零余额的预定义可能性的所述计算设备向相应的一个或多个预定的IP地址发送一个或多个请求的指令,其中,所述计算设备满足具有针对网络访问的零余额的所述预定义可能性包括检测到来自所述计算设备的针对非零费率内容的请求导致到针对零费率内容的入口的重定向;
将所述一个或多个请求发送到相应的所述一个或多个预定的IP地址;以及
向所述服务器设备发送用于识别所述网络配置是否关于零费率被潜在误配置的数据,其中,所述数据基于所述一个或多个请求和对所述一个或多个请求的相应响应而生成;
在向相应的所述一个或多个预定的IP地址发送所述一个或多个请求之前,在所述计算设备处确定所述计算设备是否满足具有针对网络访问的零余额的预定义可能性;以及
在向相应的所述一个或多个预定的IP地址发送所述一个或多个请求之前,向所述服务器设备报告确定的结果。
16.根据权利要求15所述的方法,其中,所述数据包括从包括以下项的组中选择的一个或多个字段:(1)网络连接结果,(2)所请求的IP地址,(3)测试代理标识符,(4)测试代理的位置,(5)与所述测试代理相关联的网络类型,以及(6)与从所述测试代理到预定的IP地址的相应请求相关联的时间戳。
17.根据权利要求15或权利要求16所述的方法,进一步包括在所述计算设备处执行包括用于实施所述测试计划的指令的应用。
18.根据权利要求15或权利要求16所述的方法,进一步包括在所述计算设备处渲染具有用于所述测试计划的测试脚本的网页,其中,所述测试计划由所述计算设备上的执行所述测试脚本的浏览器实施。
19.一种计算机化系统,包括一个或多个处理器;以及存储指令的一个或多个存储器,所述指令在由所述一个或多个处理器中的至少一个执行时使所述系统执行根据权利要求1至12中的任一项所述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/083,168 US20170279681A1 (en) | 2016-03-28 | 2016-03-28 | Methods and Systems for Distributed Testing of Network Configurations for Zero-Rating |
US15/083,168 | 2016-03-28 | ||
PCT/US2016/024770 WO2017171732A1 (en) | 2016-03-28 | 2016-03-29 | Methods and systems for distributed testing of network configurations for zero-rating |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108702334A CN108702334A (zh) | 2018-10-23 |
CN108702334B true CN108702334B (zh) | 2022-09-09 |
Family
ID=59898340
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680082838.7A Active CN108702334B (zh) | 2016-03-28 | 2016-03-29 | 用于针对零费率的网络配置的分布式测试的方法和系统 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20170279681A1 (zh) |
CN (1) | CN108702334B (zh) |
WO (1) | WO2017171732A1 (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10452508B2 (en) * | 2015-06-15 | 2019-10-22 | International Business Machines Corporation | Managing a set of tests based on other test failures |
US10216619B2 (en) * | 2017-06-23 | 2019-02-26 | Jpmorgan Chase Bank, N.A. | System and method for test automation using a decentralized self-contained test environment platform |
US10841538B2 (en) | 2018-08-03 | 2020-11-17 | At&T Intellectual Property I, L.P. | Method and apparatus for managing data subsidies in a communication system |
US11700263B2 (en) * | 2018-10-12 | 2023-07-11 | Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. | Method for validating ownership of a resource within a network, coordinating agent and validation agent |
US20220263866A1 (en) * | 2021-02-12 | 2022-08-18 | Keysight Technologies, Inc. | Methods, systems, and computer readable media for testing a network system under test communicating over a secure channel |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6915344B1 (en) * | 1999-11-30 | 2005-07-05 | Microsoft Corporation | Server stress-testing response verification |
CN101668276A (zh) * | 2008-09-05 | 2010-03-10 | 埃森哲环球服务有限公司 | 费率管理测试自动化 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6704883B1 (en) * | 1999-12-22 | 2004-03-09 | Cisco Systems, Inc. | Event-enabled distributed testing system |
CN101819609A (zh) * | 2001-09-21 | 2010-09-01 | 无线谷通讯有限公司 | 用于设计、跟踪、测量、预测和优化数据通信网络的系统和方法 |
US8005726B1 (en) * | 2002-12-03 | 2011-08-23 | Verizon Data Services Llc | Method and system for interactive rate plan recommender |
US20050107990A1 (en) * | 2003-11-19 | 2005-05-19 | Monk John M. | Distributed testing system having framework for adding measurements and physical agents |
US20060034185A1 (en) * | 2004-07-08 | 2006-02-16 | Patzschke Till I | Systems and methods for monitoring and evaluating a connectivity device |
US8799451B2 (en) * | 2009-01-28 | 2014-08-05 | Headwater Partners I Llc | Verifiable service policy implementation for intermediate networking devices |
US9351193B2 (en) * | 2009-01-28 | 2016-05-24 | Headwater Partners I Llc | Intermediate networking devices |
US8214487B2 (en) * | 2009-06-10 | 2012-07-03 | At&T Intellectual Property I, L.P. | System and method to determine network usage |
US9246699B2 (en) * | 2010-06-07 | 2016-01-26 | Salesforce.Com, Inc. | Method and system for testing multiple components of a multi-tenant, multi-domain, multi-tiered website |
US20120209990A1 (en) * | 2011-02-13 | 2012-08-16 | Openwave Systems Inc. | Method and system for providing a zero rating service to an end-user device |
KR101593984B1 (ko) * | 2011-09-06 | 2016-02-16 | 한국전자통신연구원 | 분산 테스트 시스템 및 방법, 분산 테스트 관제 시스템 및 방법, 분산 테스트 플랜 작성 장치 및 방법, 분산 테스트 에이전트 및 분산 테스트 플랜 실행 방법 |
US20150025976A1 (en) * | 2013-07-17 | 2015-01-22 | LotusFlare, Inc. | Systems and methods for providing mobile applications to users at a predetermined data rate |
US20160004628A1 (en) * | 2014-07-07 | 2016-01-07 | Unisys Corporation | Parallel test execution framework for multiple web browser testing |
US9444718B2 (en) * | 2014-07-28 | 2016-09-13 | Verizon Digital Media Services Inc. | Distributed platform test network |
-
2016
- 2016-03-28 US US15/083,168 patent/US20170279681A1/en not_active Abandoned
- 2016-03-29 WO PCT/US2016/024770 patent/WO2017171732A1/en active Application Filing
- 2016-03-29 CN CN201680082838.7A patent/CN108702334B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6915344B1 (en) * | 1999-11-30 | 2005-07-05 | Microsoft Corporation | Server stress-testing response verification |
CN101668276A (zh) * | 2008-09-05 | 2010-03-10 | 埃森哲环球服务有限公司 | 费率管理测试自动化 |
Also Published As
Publication number | Publication date |
---|---|
WO2017171732A1 (en) | 2017-10-05 |
US20170279681A1 (en) | 2017-09-28 |
CN108702334A (zh) | 2018-10-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210037097A1 (en) | Cloud data storage location monitoring | |
CN108702334B (zh) | 用于针对零费率的网络配置的分布式测试的方法和系统 | |
US10574771B2 (en) | Methods and systems for rewriting scripts to redirect web requests | |
EP3011769B1 (en) | Detecting carriers for mobile devices | |
US10635716B2 (en) | Methods and systems for secured end-to-end data communication | |
AU2016339974A1 (en) | Application service configuration system | |
US20170359313A1 (en) | Methods and Systems for Data Anonymization at a Proxy Server | |
US10057302B2 (en) | Context-based selection of instruction sets for connecting through captive portals | |
US10630800B2 (en) | Methods and systems for handling requests regarding zero-rating | |
WO2012101243A1 (en) | Systems, methods, and media for managing ambient adaptability of web applications and web services | |
US20180234319A1 (en) | Methods and Systems for Congestion-Based Content Delivery | |
CN108028768A (zh) | 通过近距离通信安装应用程序版本的方法和系统 | |
US9866454B2 (en) | Generating anonymous data from web data | |
CN106817296B (zh) | 信息推荐的测试方法、装置以及电子设备 | |
EP3015984A1 (en) | Providing data from data sources | |
US10511454B2 (en) | Methods and systems for implementing differential pricing configurations | |
US20220174120A1 (en) | Multi-device connection management | |
US20190036835A1 (en) | Client side information to influence service level for client system | |
EP3226478B1 (en) | Methods and systems for distributed testing of network configurations for zero-rating | |
US11676237B2 (en) | Network based rendering and hosting systems and methods utilizing an aggregator | |
US11651467B2 (en) | Network based provision of rendering and hosting systems | |
EP3121713A2 (en) | Methods and systems for installing an application version via close-range communications | |
US20180069898A1 (en) | Methods and Systems for Managing Carrier Configurations in a Zero-Rated System | |
CN109391642A (zh) | 一种订单处理方法及装置、存储介质、服务器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: California, USA Applicant after: Yuan platform Co. Address before: California, USA Applicant before: Facebook, Inc. |
|
GR01 | Patent grant | ||
GR01 | Patent grant |