CN102244594A - 在手动和自动测试工具中的网络仿真技术 - Google Patents

在手动和自动测试工具中的网络仿真技术 Download PDF

Info

Publication number
CN102244594A
CN102244594A CN2011101340986A CN201110134098A CN102244594A CN 102244594 A CN102244594 A CN 102244594A CN 2011101340986 A CN2011101340986 A CN 2011101340986A CN 201110134098 A CN201110134098 A CN 201110134098A CN 102244594 A CN102244594 A CN 102244594A
Authority
CN
China
Prior art keywords
network
test
overview
network profile
profile
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011101340986A
Other languages
English (en)
Other versions
CN102244594B (zh
Inventor
L·B·克鲁格
W·H·巴奈特
E·D·格拉斯
M·W·陶特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN102244594A publication Critical patent/CN102244594A/zh
Application granted granted Critical
Publication of CN102244594B publication Critical patent/CN102244594B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3664—Environments for testing or debugging software
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H04L41/145—Network analysis or design involving simulating, designing, planning or modelling of a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/50—Testing arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Environmental & Geological Engineering (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Debugging And Monitoring (AREA)

Abstract

在手动和自动测试工具中的网络仿真技术。在此描述的网络仿真系统允许软件开发者在单个或多个计算机上测试应用、框架、或其他软件代码时精确模拟不同的网络特性。本系统也提供记录真实网络特性并在测试期间应用这些特性的能力。本网络仿真系统将网络仿真设备集成到用于手动和自动测试的测试工具中，并允许在变化的网络条件下操作时测试应用、框架、或其他软件代码，变化的网络条件包括诸如带宽、等待时间、分组重排序和复制、断开连接、等等。因此，本网络仿真系统允许软件开发者测试软件代码以快速容易地确定软件代码将如何在多种真实世界网络情况中执行而不需要物理地设置每个这些情况。

Description

在手动和自动测试工具中的网络仿真技术
技术领域
本申请涉及软件开发技术，特别是软件测试中的网络仿真技术。
背景技术
现代软件通常包含许多通常由大型团队的软件开发者开发的组件。过程程序设计的时代已经结束了，在过程程序设计中，单个开发者可编写一个简单地从开始执行至完成执行单个明确定义的任务的应用程序。软件开发者经常使用库、组件、框架、以及由其他开发者撰写的其他代码主体，生成与其他系统进行交互并操作在良好连接的环境下的软件代码。在如何使用具体的外部函数或模块上犯错或误解的机会比以往都高。
当今的许多软件也涉及对一个或多个网络的使用。互联网以及企业局域网(LAN)的兴起导致大多数应用包括至少一些基于网络的功能。应用可访问公共互联网数据、存储在企业LAN上的私人数据、数据库(远程的、本地的、或基于云的)、以及许多其他基于网络的资源。
应用测试和验证通常涉及在各种真实世界条件中使用软件，以确保软件正确工作。软件测试者经常开发详尽的测试通过组合，其每一个都验证软件在一个或多个条件下提供期望的响应。这些条件可包括常规条件以及边缘情况、应被识别为无效的输入等等。
在不同网络条件下的测试应用可能是困难的。很难预测在面临网络连接丢失或当网络条件与期望的不同时，应用将如何工作。精确地模拟这些条件通常涉及昂贵的硬件、多次运行测试或手动用户干预。例如，考虑大型互联网电子商务站点。当对运行在该电子商务站点上的web应用和其他软件进行更新时，站点拥有者更愿测试系统的真实世界负载。然而，该站点通常每天承受50000个或更多的顾客购买量。软件制造商将很难设置50000个机器来产生软件每天将承受的此类真实世界负载。此外，站点拥有者会希望应对峰值负载，诸如在情人节或其他节日电子商务站点通常会承受高于平均使用量时的订单。
发明内容
在此描述的网络仿真系统允许软件开发者在单个或多个计算机在测试应用、框架、或其他软件代码时精确模拟不同的网络特性。本系统也提供记录真实网络特性并在测试期间应用这些特性的能力。本网络仿真系统将网络仿真设备集成到用于手动和自动测试的测试工具中，并允许在操作在变化的网络条件下工作时测试应用、框架、或其他软件代码，变化的网络条件包括诸如带宽、等待时间、分组重排序和复制、断开连接、等等。本系统精确模拟用于软件代码的多个网络，其可以被单独测试或使用单个或多个计算机的负载情况下测试。因此，本网络仿真系统允许软件开发者测试软件代码以快速且容易地确定软件代码将如何在多种真实世界网络情况中执行而不需要物理地设置每个这些情况。
提供本发明内容以便以简化形式介绍将在以下的具体实施方式中进一步描述的一些概念。本发明内容并不旨在标识出所要求保护的主题的关键特征或必要特征，也不旨在用于限定所要求保护的主题的范围。
附图说明
图1是示出在一个实施例中的网络仿真系统的各组件的框图。
图2是示出一个实施例中的记录网络特性的网络仿真系统的处理的流程图。
图3是示出一个实施例中的使用模拟的网络硬件设置并执行负载测试的网络仿真系统的处理的流程图。
图4是示出一个实施例中的用于测量网络特性的分组对测试的网络分组图。
图5是示出一个实施例中的用于测量网络特性的简单丢失测试的网络分组图。
图6是示出一个实施例中的用于测量网络特性的通路线性调频脉冲测试(pathchirp test)的网络分组图。
图7是示出一个实施例中的用于测量网络特性的同步ping(乒)测试的网络分组图。
图8是示出一个实施例中的用于测量网络特性的TCP窗口大小测试的网络分组图。
图9是示出一个实施例中的用于测量网络特性的TCP溢出测试的网络分组图。
具体实施方式
在此描述的网络仿真系统允许软件开发者在单个或多个计算机上测试应用、框架、或其他软件代码时精确模拟不同的网络特性。例如，本系统允许仅使用少量的计算机对所预计的来自数以千计的计算机的网络负载的模拟。本系统也提供”记录”真实网络特性并在测试期间应用这些特性的能力。例如，软件开发者可记录用于Wi-Fi网络、蓝牙网络、3G蜂窝网络等的不同概况(profile)。作为替代或附加，软件开发者可以记录具有高分组丢失的(诸如，10％)、正常分组丢失(诸如，＜1％)、高带宽、低带宽、高等待时间、低等待时间、以及以上的组合的网络的概况。本系统向软件开发者提供了在同一个测试期间模拟多个网络(诸如，56k、T1、T3)以模拟不同潜在使用模式的能力。
本网络仿真系统将网络模拟设备集成到用于手动和自动测试的测试工具中，并允许在变化的网络条件下工作时测试应用、框架、或其他软件代码，变化的网络条件包括诸如带宽、等待时间、分组重排序和复制、断开连接、等等。本系统通过记录真实网络的特性而自动生成该网络的网络概况。本系统随后将该网络概况应用到正在运行的测试，以使得软件代码在特定网络条件下被测试。本系统精确模拟用于软件代码的多个网络，其可以被单独测试或使用单个或多个计算机的负载情况下测试。因此，本网络仿真系统允许软件开发者测试软件代码以快速容易地确定软件代码将如何在多种真实世界网络情况中执行而不需要物理地设置每个这些情况。
在一些实施例中，实现本系统的网络仿真工具使用单个计算机来模拟不同网络特性的条件，以测试应用、框架、或其他软件代码。在以前，这是通过购买额外的硬件来重现不同网络条件而完成的。然而，使用本网络仿真系统，单个计算机可通常重现任何将要测试的网络条件。
图1是示出在一个实施例中的网络仿真系统的各组件的框图。系统100包括网络概况存储器110、概况记录组件120、概况应用组件130、负载模式组件140、网络模拟组件150、用户界面组件160、以及网络接口组件170。此处更详细地描述了这些组件中的每一个。
网络概况存储器110存储描述本系统可仿真的一个或多个网络的属性的网络概况。存储器可包括一个或多个文件、文件系统、数据库、基于云的存储服务、或其他用于存储信息的设备。网络概况存储器110存储多种网络属性，包括：跨网络的回程时间(等待时间)、可用带宽量、队列行为、分组丢失、分组重排序、以及误差传递。这些信息可被应用到上游话务或下游话务，或这两者。其也可被用于指定诸如分组重排序/丢失和连接断开的事件。此外，概况存储了如何应用概况中所描述的特性。
概况记录组件120观察特定网络并将一个或多个属性记录在网络概况存储器110所存储的网络概况中。组件120被设计为容易记录多种特性，包括：现有网络的跨网络的回程时间(等待时间)、可用带宽量、队列行为、分组丢失、分组重排序、以及误差传递。组件120提供了测量并记录网络容量、可用带宽、回程事件、分组丢失率、TCP吞吐量、等等的功能。所记录的信息随后被存储在网络概况中，使得其可在之后被(例如)网络模拟组件150所使用。
概况记录组件120可包括多种用于确定特定网络的特性的测试和方法。以下是几个示例。分组对带宽测试从源向目的地发送多个背靠背分组，并测量一对的扩散情况。根据分组的大小和它们之间的距离，组件120可近似估计链路容量，而不具有实质的带宽影响。简单丢失测试发送特定数量的分组，并绘制出它们到达的顺序，提供了丢失和重排序统计。ping测试仿真了使用UDP套接字的互联网控制消息协议(ICMP)ping，提供了对于给定链路的通用回程时间(RTT)。通路线性调频脉冲测试使用被称为线性调频脉冲的探测器的指数飞行模式。通过快速增加每个线性调频脉冲中的探测率，该测试获取一组大量信息，从中可以动态估计可用带宽。传输控制协议(TCP)窗口大小测试通过重复填充套接字缓冲器直至其被装满，来跟踪TCP窗口大小的扩增和缩小。TCP溢出测试在特定的时间段(诸如，一秒钟)内在单个TCP连接上发送尽可能多的话务。概况记录组件120使用这些和其他测试来标识并记录两个或多个端点之间的给定网络连接的属性。
概况应用组件130从用户或测试装置(test harness)接收所标识的概况的指示，并从网络概况存储器110加载关于该概况的信息。在一些实施例中，用户向测试框架指示他们希望通过启用网络仿真功能来模拟特定网络。用户随后从配置对话中选择一指示他们希望模拟的特性的概况。例如，用户可选择801.11b Wi-Fi概况。当测试运行开始时，概况应用组件130配置网络模拟组件150并根据该概况中所指定的开始网络仿真。当运行结束时，停止网络仿真并且停止所有模拟。
负载模式组件140接收多个网络概况以包括在用于测试软件代码的网络话务混合中。当创建负载测试时，用户指定将要运行的一组场景。每个场景包括一组测试和一组虚拟用户。用户同时指定“网络混合”。网络混合是分配给虚拟用户的一组网络概况。这将允许测试来模拟不同类型网络上的不同的用户。例如：x个用户使用56kbps电话调制解调器，x个用户使用T1线路，x个用户使用3G蜂窝电话。网络混合允许用户以用户的百分比来指定不同的网络概况。例如，用户可以指定一混合，其中50％的用户使用有线调制解调器，10％的使用56kbps调制解调器，40％使用T1线路。用户也可指定要测试的连接或用户的总数(诸如，50000个)，系统将根据所选择的负载模式来创建虚拟连接。
网络模拟组件150将一个或多个所选择的网络概况在运行时应用以在软件代码测试期间呈现由所选择的概况所定义的特性。当开始负载或其他测试时，网络仿真开始。网络模拟组件150获得所有可用TCP/IP端口的清单。组件150随后将这些端口划分为x组端点(x＝场景数量)，并向每个场景分配一组端口，其中每组获取的端口的数量正比于在该场景中的虚拟用户的数量。每个场景随后将其的端口组划分为n组(n＝在网络混合中指定的概况的数量)，其中每组获取的端口的数量正比于概况的分布。基于用户被分配的网络概况，由每个虚拟用户所生成的所有的网络话务随后被导向至合适的端口。在一些实施例中，向网络模拟组件150和其他组件提供了集成开发环境(IDE)(诸如，微软TM Visual Studio)作为扩展或内建特征。这允许软件开发者编写软件代码，并随后在同一环境中设置代码的基于网络的测试。
用户界面组件160向一个或多个用户提供界面，用于使用本系统来配置和初始化网络测试。例如，用户界面可提供一个或多个配置对话，通过这些配置对话用户可选择特定网络概况或网络概况的混合，以用于测试运行。在一些实施例中，用户界面组件160提供应用程序接口(API)，通过API，测试应用可编程化地配置系统100来实现用于特定测试的网络特性和连接的特定混合。
网络接口组件170向一个或多个网络硬件设备提供接口。在一些情况中，网络接口组件170可包括协议驱动器或其他操作系统扩展，其向系统100的其他组件提供用于操纵通过操作系统网络堆栈而存储和传输的分组的底层访问。该扩展也允许组件170修改源和目的地地址、丢弃被标记为丢失的分组(诸如，为了模拟分组丢失)、保持被标记为重排序或延迟的分组，等等。网络接口组件170可与物理网络硬件以及虚拟回环适配器进行接口，虚拟回环适配器允许对网络连接的模拟完全发生在单个机器上。
其上实现网络仿真系统的计算设备可包括中央处理单元、存储器、输入设备(例如，键盘和定点设备)、输出设备(例如，显示设备)和存储设备(例如，盘驱动器或其他非易失性存储介质)。存储器和存储设备是可以用实现或允许该系统的计算机可执行指令(例如，软件)来编码的计算机可读存储介质。另外，数据结构和消息结构可以被存储或通过诸如通信链路上的信号之类的数据传输介质传输。可以使用各种通信链路，如因特网、局域网、广域网、点对点拨号连接、蜂窝电话网络等等。
系统的各实施例可以在各种操作环境中实现，操作环境包括个人计算机、服务器计算机、手持式或膝上型设备、多处理器系统、基于微处理器的系统、可编程消费电子产品、数码相机、网络PC、小型计算机、大型计算机、包括任意上述系统或设备中的的分布式计算机环境等。计算机系统可以是蜂窝电话、个人数字助理、智能电话、个人计算机、可编程消费电子产品、数码相机等等。
可以在由一台或多台计算机或其他设备执行的诸如程序模块之类的计算机可执行的指令的一般上下文中来描述本系统。一般而言，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。通常，程序模块的功能可以按需在各个实施例中进行组合或分布。
图2是示出一个实施例中的记录网络特性的网络仿真系统的处理的流程图。在框210开始，系统接收标识物理网络的信息。例如，用户可指定从当前计算机系统到所标识的远程计算机系统的连接通过标识远程计算机系统来测量。用户可指定IP地址、域名系统(DNS)名称、等来标识远程计算机系统。继续到框220中，系统开始网络记录工具来确定网络的特性。例如，该工具可调用一个或多个被设计为确定网络的带宽、等待时间、缓存和其他特性的网络测试。.
继续到框230中，本系统开始一个或多个网络测量测试，这些网络测量测试被选为测量所标识的物理网络的特性。例如，本系统可开始测试组合，包括ping测试、分组对测试、以及产生有助于确定网络特性的结果的其他测试。所确定的特性可包括带宽、等待时间、分组丢失，等等。继续到框240中，本系统捕捉一个或多个测试结果，并分析这些结果以标识所标识的物理网络的特性。例如，本系统在分组对测试中测量分组的接收时间的差，以确定物理网络的等待时间和/或带宽。本系统可将结果存储在中间缓冲器中以允许在执行分析之前完成多个测试，或可并行分析测试结果以提高网络测量的速度。继续到框250中，本系统接收一个或多个网络测量测试已经完成的指示，并根据测试结果创建网络概况。例如，本系统可调用一个或多个线程来执行测试，并且这些线程随着测试结果的指示来完成。
本系统接收描述新概况的信息。例如，用户可指定概况名称、描述文本、以及网络的已知特性的标识符(诸如，无线连接、有线连接、802.11b、3G网络，等等)。本系统使用所接收的信息以在日后向用户标识概况。例如，本系统可向用户呈现友好的概况名称列表，用户可在测试运行开始时从中进行选择。继续到框260中，本系统将所接收的描述概况的信息以及所分析的测试结果存储在已存储网络概况中，用于在使用网络的软件代码测试期间的后续使用。例如，本系统可将概况与其他网络概况一起存储在数据库或文件(诸如，可扩展标记语言(XML)文件)中，多个测试可从中进行选择。在框260之后，这些步骤结束。
图3是示出一个实施例中的使用模拟的网络硬件设置并实行测试的网络仿真系统的处理的流程图。开始在框310，本系统从网络概况存储器接收一个或多个网络概况，网络概况包括测试模式以及一个或多个在负载测试期间将要仿真的网络的描述特性。例如，本系统可呈现用户界面或API，用户或测试程序可从其接收可用网络概况列表，选择包括在用于负载测试的负载模式中的概况，并指定所选的概况的网络混合(诸如，每一个的连接数或总数的百分比)。本系统可接收任何信息，从将特性应用到正在运行测试的单个机器以仿真经由网络连接的许多附加计算机系统。继续到框320中，本系统使用与所接收的一个或多个网络概况有关的信息来配置运行时网络模拟组件。网络模拟组件可提供多种配置输入，系统可设置这些配置输入以适于各种特定网络概况。例如，网络模拟组件可包括用于平均等待时间、平均分组丢失、带宽、以及其他公共网络属性的设置。
继续到框330中，本系统基于所接收的网络概况，开始对所接收的模式的模拟。例如，本系统可创建一个或多个软件线程和/或打开一个或多个网络端口用于网络概况的所选混合。如果用户选择单个连接，那么系统可应用由网络概况指定的带宽和等待时间限制。如果用户选择50000个连接，那么系统可预留适当的端口数以模拟50000个虚拟用户中每一个的行为，以在负载下测试对象软件代码。在一些实施例中，本系统可控制其他计算机系统并可使用其他计算机系统来提供部分的所选网络混合。例如，涉及20000个连接的负载测试可通过向两个远程计算机系统中的每一个分配10000个连接来进行。
继续到框340中，本系统开始由应用开发者指定的一个或多个测试，该测试在由所接收的负载模式所生成的负载下测试目标软件代码。例如，电子商务web应用的应用开发者可包括当web应用被数以千计的请求占用时从电子目录订购特定商品的测试，以确定web应用在负载下的响应度。可由应用开发者提供多种测试，同时网络仿真系统提供执行测试所处于的特定网络负载。继续到框350中，本系统收集一个或多个测试的结果。例如，本系统可测量订购时间、响应度、操作成功、或由应用开发者指定为测试一部分的其他标准。
继续到框360中，在完成一个或多个测试之后，本系统结束网络模拟。例如，本系统可重新配置测试机器的网络设置以用于常规网络使用、卸载一个或多个协议驱动器、等等，以将测试机器返回到测试前状态。继续到框370中，本系统将所收集的一个或多个测试的结果报告给应用开发者。例如，本系统可显示可视报告、将结果写入日志文件、通过API提供结果、或其任何组合或输出测试结果的其他方法。基于负载测试，应用开发者可确定应用在真实网络条件下将如何运转，而不需要设置产品网络环境的物理重现的时间和花费。在框370之后，这些步骤结束。
图4-9示出了用于进行一个或多个网络测量测试以测量物理网络的特性的分组行为。网络仿真系统使用这些和类似测试来创建真实网络的网络概况，其可在之后被用于模拟在测试环境下的真实网络的行为。
图4是示出一个实施例中的用于测量网络特性的分组配对测试的网络分组图。左侧线代表客户机410。从左侧线出发的箭头代表由客户机410发出的分组，并且指向左侧线的箭头表示由客户机410接收的分组。右侧线代表与客户机410通信的服务器420。术语客户机和服务器不表示任何特定类型的计算机硬件，因为一特定机器可在某些时刻代表客户机而在其他时刻代表服务器。机器可也为桌面计算机、膝上型计算机、蜂窝电话、或其他类型的计算设备。
在分组对测试中，在客户机410和服务器420之间交换一个或多个设置分组430以配置测试。例如，客户机可向服务器发送重复测试的次数以及客户机410将使用的分组对之间的时间间隔。服务器420可通过分配给该连接的端口号以及其他信息来响应。为了开始测试，客户机向服务器发送不可靠数据报协议(UDP)分组的对440。服务器也向客户机发送类似分组的对450。在接收到分组后，服务器420向客户机410发送结果分组460，指示在分组对440之间测得的扩散(dispersion)。客户机410也可测量从服务器420接收到的分组对的扩散。处理将重复多次，其中每一侧发送新的UDP分组对并测量扩散或其他特性。使用该信息，客户机410确定客户机410和服务器420之间的链路的特性。
图5是示出一个实施例中的用于测量网络特性的简单损耗测试的网络分组图。简单丢失测试包括设置阶段，在其中客户机510向服务器520发送一个或多个设置分组530以配置测试的每一侧。简单丢失测试涉及从客户机510向服务器550发送许多分组540。服务器520也可向客户机510发送批量分组550。服务器520向客户机510指示接收到多少分组，并可选地指示结果分组560为何种排序。基于从服务器520接收到的信息，客户机510能确定分组丢失率、是否发生了分组重排序或复制、以及客户机510和服务器520之间的链路的其他特性。
图6是示出一个实施例中的用于测量网络特性的通路线性调频脉冲测试的网络分组图。通路线性调频脉冲测试包括设置阶段，在其中客户机610向服务器620发送一个或多个设置分组630以配置测试的每一侧。通路线性调频脉冲测试涉及从客户机610向服务器650发送对数间隔(logarithmically spaced)的分组640。服务器620响应以拥塞概况分组650，其指示由服务器620接收到的分组的信息，诸如它们何时到达并按何种顺序。服务器620也可向客户机610发送批量分组，使得客户机610可对返回通路执行类似的测量。基于从服务器620接收到的信息，客户机610能确定客户机610和服务器620之间的链路的多种特性。
图7是示出一个实施例中的用于测量网络特性的同步ping(乒)测试的网络分组图。同步ping测试包括设置阶段，在其中客户机710向服务器720发送一个或多个设置分组730以配置测试的每一侧。同步ping测试涉及可被用于测量往返时间和从客户机710到服务器720的单向等待时间的发送时间戳ping分组(诸如，ICMPping)。服务器720提供确认750或同样被时间戳的pong(乓)，以允许客户机测量返回通路的类似特性。基于从服务器720接收到的信息，客户机710能确定客户机710和服务器720之间的链路的多种特性。
图8是示出一个实施例中的用于测量网络特性的TCP窗口大小测试的网络分组图。TCP窗口大小测试包括设置期间，在其中客户机810向服务器820发送一个或多个设置分组830以配置测试的每一侧。TCP窗口大小测试通过重复填充套接字缓冲器直至其被装满，来跟踪TCP窗口大小的扩增和缩小。客户机810向服务器发送TCP窗口数据效用840并随后关闭连接。通过重复进行该动作，客户机810可填满任何本地的客户机侧缓冲器并确定TCP窗口大小。
图9是示出一个实施例中的用于测量网络特性的TCP溢出测试的网络分组图。TCP溢出测试包括设置阶段，在其中客户机910向服务器920发送一个或多个设置分组930以配置测试的每一侧。TCP溢出测试在特定的时间段(诸如，一秒钟)内在单个TCP连接上发送尽可能多的话务。例如，客户机910可向服务器920在分组940中发送一秒的数据效用，并且服务器920可通过向客户机910发送类似的分组950来进行响应。基于从服务器920接收到的信息，客户机910能确定客户机910和服务器920之间的链路的多种特性。
在一些实施例中，网络仿真系统将网络模拟与性能测试工具相组合以生成统一的结果。例如，本系统可报告在许多网络连接的负载之下的网站响应时间。另一个示例是，应用开发者可设置阈值(诸如阈值订购时间)，使得系统可在测试期间的任何时候当超过阈值时(诸如，超过两分钟的订购时间)向开发者发出警报。本系统也可在产生任何错误状态时向开发商发出警报，诸如超文本传输协议(HTTP)500响应。
在一些实施例中，网络仿真系统基于指定的负载模式随机创建新的虚拟用户。例如，本系统可在开始时创建全部数量的用户，并将他们放置在与他们相关联的网络概况相关的分类中。例如，如果用户已经选择1000个用户，并且50％的用户使用一个网络概况，随后系统创建1000个用户，并将其中的500个用户放置在与正确的概况相关联的分类中。随后，在测试期间，系统可从可用用户池中进行随机选择，并且分布将(平均地)匹配特定负载模式的分布。
在一些实施例中，网络仿真系统为每个用户创建会话日志，使得在任何给定测试之后，应用开发者或其他用户可查看特定用户的日志，以确保用户对应用的体验符合质量标准。例如，开发者可查看日志以确定是否任何用户体验到了缓慢的页面加载时间、错误消息、或其他问题。会话日志可包括与关于用户的网络概况相关的信息、做出的请求、请求和响应的时限。
在一些实施例中，网络仿真系统将多个虚拟用户的结果数据集合为统一的报告或统一的单独统计。例如，对于web应用，本系统可基于所有用户的平均来产生关于主页响应时间的集合数据、产生关于与特定概况类型相关的用户的聚集信息、以及关于其他有用的细分信息的聚集信息。
在一些实施例中，网络仿真系统可被用于对真实用户的实时测试。例如，提供全球基于web的应用的应用开发者可希望运行应用以体验来自日本的用户会体验到何种情况、或全国各地的用户会体验到何种情况。本系统能提供基于由真实用户所选的网络概况的模拟，并随后允许用户手动与应用进行交互以确定其行为是否是可接受的(诸如，有响应的、没有不正常延迟、等等)。
在一些实施例中，网络仿真系统可被用于出于非测试目的将负载应用到系统。例如，本系统可被用于限制计算机系统的网络容量，诸如为了增强带宽定额。作为示例，管理员可在一机器上设置数据库服务器以及网络仿真包(其可运行在单独模式或者在IDE中)，并使网络仿真包模拟在所有时刻都模拟给定的网络概况。这可以是对该服务器的所有连接起到节流作用的一种方式。这也可以是供应云系统中的数据库的供应商可限制特定用户为特定带宽的一种方式。
从上文将会认识到，虽然在此已出于说明目的描述了网络仿真系统的具体实施例，但是可以做出各种修改而不背离本发明的精神和范围。相应地，本发明不受限制，只受所附的权利要求书的限制。

Claims (15)

1.一种用于使用模拟的网络硬件来设置并执行测试的计算机实现方法，所述方法包括：
从网络概况存储器接收(310)一个或多个网络概况，所述网络概况包括测试模式以及一个或多个在测试期间将要仿真的网络的描述特性；
使用与所接收的一个或多个网络概况相关的信息配置(320)运行时网络模拟组件；
基于所接收的网络概况开始(330)对测试模式的模拟；
开始(340)一个或多个测试，其中在由所接收的测试模式所产生的网络条件之下测试目标软件代码；
收集(350)所述一个或多个测试的结果；
在所述一个或多个测试完成之后，结束(360)所述网络模拟；以及
向用户报告(370)所收集的一个或多个测试的结果；
其中以上步骤由至少一个处理器来执行。
2.如权利要求1所述的方法，其特征在于，接收一个或多个网络概况包括：显示用户界面，从其上用户可查看可用网络概况的列表，选择被包括到用于测试的测试模式中的概况，并指定所选的概况的网络混合。
3.如权利要求2所述的方法，其特征在于，所述网络混合包括被包括在测试模式中的每种类型的网络概况的百分比。
4.如权利要求1所述的方法，其特征在于，接收一个或多个网络概况包括：经由向测试应用提供编程访问的应用编程接口接收一个或多个概况的选择。
5.如权利要求1所述的方法，其特征在于，配置运行时组件包括：提供用于以下至少一个的参数值：平均等待时间、平均分组丢失、以及带宽。
6.如权利要求1所述的方法，其特征在于，开始模拟包括：为所选的网络概况的混合开启一个或多个网络端口。
7.如权利要求1所述的方法，其特征在于，开始模拟包括：创建一个或多个虚拟用户，每一个虚拟用户使用具有匹配于网络概况的一个属性的连接而连接到软件应用。
8.如权利要求1所述的方法，其特征在于，开始模拟包括：与至少一个远程计算机系统进行通信，以准备所述远程计算机系统以提供至少部分的所选网络混合。
9.如权利要求1所述的方法，其特征在于，开始一个或多个测试包括：从软件应用开发者接收代码的标识符。
10.如权利要求1所述的方法，其特征在于，结束网络模拟包括：为了重新配置测试机器的网络设置以用于常规网络使用，将测试机器返回到测试前状态。
11.如权利要求1所述的方法，其特征在于，报告所收集的结果包括：为由所述测试模式所定义的多个虚拟用户中的每一个生成会话日志文件。
12.一种用于模拟应用上的网络负载的计算机系统，所述系统包括：
被配置成执行软件指令的处理器和存储器；
网络概况存储器(110)，被配置为存储描述本系统可仿真的一个或多个网络的属性的网络概况；
概况记录组件(120)，被配置为测量特定网络并将一个或多个属性记录在网络概况存储器所存储的网络概况中；
概况应用组件(130)，被配置为接收标识的概况的指示，并加载与来自所述网络概况存储器的概况相关的信息；
负载模式组件(140)，被配置为接收多个网络概况以包括在用于测试软件代码的网络话务的混合中；
网络模拟组件(150)，被配置为将一个或多个所选择的网络概况在运行时应用以在软件代码测试期间展现由所选择的概况所定义的特性；
用户界面组件(160)，被配置为向一个或多个用户提供界面，用于使用本系统来配置和实例化网络测试；
网络接口组件(170)，被配置为向一个或多个硬件或回环网络设备提供接口。
13.如权利要求12所述的系统，其特征在于，所述概况记录组件进一步被配置为确定以下至少一个：跨网络的往返时间、可用带宽量、队列行为、分组丢失、分组重排序、以及误差传递。
14.如权利要求12所述的系统，其特征在于，所述概况记录组件进一步被配置为包括一个或多个发送并接收测试负载以确定网络的特性的测量测试。
15.如权利要求12所述的系统，其特征在于，所述概况应用组件进一步被配置为显示接收一个或多个要模拟的网络概况的概况配置对话。
CN201110134098.6A 2010-05-15 2011-05-13 在手动和自动测试工具中的网络仿真技术 Active CN102244594B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/780,896 2010-05-15
US12/780,896 US20110282642A1 (en) 2010-05-15 2010-05-15 Network emulation in manual and automated testing tools

Publications (2)

Publication Number Publication Date
CN102244594A true CN102244594A (zh) 2011-11-16
CN102244594B CN102244594B (zh) 2016-01-13

Family

ID=44912529

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110134098.6A Active CN102244594B (zh) 2010-05-15 2011-05-13 在手动和自动测试工具中的网络仿真技术

Country Status (2)

Country Link
US (1) US20110282642A1 (zh)
CN (1) CN102244594B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103139004A (zh) * 2011-12-02 2013-06-05 阿里巴巴集团控股有限公司 利用网络限速工具模拟网络带宽的方法及系统
CN103634137A (zh) * 2012-08-27 2014-03-12 浙江大华技术股份有限公司 一种网络传输环境的模拟系统
CN105022625A (zh) * 2015-04-07 2015-11-04 陈伟德 一种软件设计方法及操作系统
CN106031107A (zh) * 2014-02-28 2016-10-12 凯为公司 网络处理器中的分组调度
WO2017012343A1 (zh) * 2015-07-20 2017-01-26 深圳市中兴微电子技术有限公司 不同网络制式间互操作性能的测试装置及方法
CN109271310A (zh) * 2017-07-18 2019-01-25 北京京东尚科信息技术有限公司 移动应用程序网络功能的开发测试方法和装置
CN110865931A (zh) * 2018-08-28 2020-03-06 阿里巴巴集团控股有限公司 模拟方法、装置、电子设备和存储介质
CN110959270A (zh) * 2017-07-21 2020-04-03 思科技术公司 使用实时测试的服务功能链优化
US10776252B1 (en) * 2018-11-27 2020-09-15 Walgreen Co. Crowd-sourced automatic generation of user interface tests for enterprise-specific mobile applications
CN112289368A (zh) * 2020-10-27 2021-01-29 英业达科技有限公司 通用型硬盘仿真配重治具
CN112632105A (zh) * 2020-01-17 2021-04-09 华东师范大学 大规模事务负载生成与数据库隔离级别正确性验证系统及方法
CN113067744A (zh) * 2021-02-08 2021-07-02 杭州涂鸦信息技术有限公司 网络测试方法和电子设备、存储装置

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9154611B1 (en) 2006-08-14 2015-10-06 Soasta, Inc. Functional test automation for gesture-based mobile applications
US9720569B2 (en) 2006-08-14 2017-08-01 Soasta, Inc. Cloud-based custom metric/timer definitions and real-time analytics of mobile applications
US9990110B1 (en) 2006-08-14 2018-06-05 Akamai Technologies, Inc. Private device cloud for global testing of mobile applications
US9495473B2 (en) 2010-07-19 2016-11-15 Soasta, Inc. Analytic dashboard with user interface for producing a single chart statistical correlation from source and target charts during a load test
US9229842B2 (en) 2010-07-19 2016-01-05 Soasta, Inc. Active waterfall charts for continuous, real-time visualization of website performance data
US9436579B2 (en) * 2010-07-19 2016-09-06 Soasta, Inc. Real-time, multi-tier load test results aggregation
US9251035B1 (en) * 2010-07-19 2016-02-02 Soasta, Inc. Load test charts with standard deviation and percentile statistics
US8341462B2 (en) 2010-07-19 2012-12-25 Soasta, Inc. System and method for provisioning and running a cross-cloud test grid
US9021362B2 (en) * 2010-07-19 2015-04-28 Soasta, Inc. Real-time analytics of web performance using actual user measurements
US8738798B2 (en) * 2010-08-06 2014-05-27 Acquire Media Ventures, Inc. Method and system for pacing, ack'ing, timing, and handicapping (PATH) for simultaneous receipt of documents
US8612578B2 (en) * 2011-03-10 2013-12-17 International Business Machines Corporation Forecast-less service capacity management
US20120263058A1 (en) * 2011-04-15 2012-10-18 Jds Uniphase Corporation Testing shaped tcp traffic
US9230061B2 (en) * 2011-08-15 2016-01-05 Medcpu, Inc. System and method for text extraction and contextual decision support
US9785533B2 (en) 2011-10-18 2017-10-10 Soasta, Inc. Session template packages for automated load testing
US8967824B2 (en) * 2012-05-15 2015-03-03 Charles B. Hootman Portable light having a modular base
CN103684895B (zh) * 2012-09-10 2018-08-10 百度在线网络技术（北京）有限公司 一种产生克隆环境的方法和装置
US9113358B1 (en) * 2012-11-19 2015-08-18 Google Inc. Configurable network virtualization
US9772923B2 (en) 2013-03-14 2017-09-26 Soasta, Inc. Fast OLAP for real user measurement of website performance
US9465726B2 (en) * 2013-06-05 2016-10-11 Vmware, Inc. Abstract layer for automatic user interface testing
GB2520268A (en) * 2013-11-13 2015-05-20 Ibm Injecting lost packets and protocol errors in a simulation environment
US10601674B2 (en) 2014-02-04 2020-03-24 Akamai Technologies, Inc. Virtual user ramp controller for load test analytic dashboard
US20150286416A1 (en) * 2014-04-07 2015-10-08 International Business Machines Corporation Introducing Latency And Delay For Test Or Debug Purposes In A SAN Environment
US20150288570A1 (en) * 2014-04-07 2015-10-08 International Business Machines Corporation Introducing Latency And Delay In A SAN Environment
CN105094511A (zh) * 2014-05-20 2015-11-25 富士通株式会社 测试例生成方法和测试例生成设备
FI126611B (en) * 2014-11-17 2017-03-15 Rugged Tooling Oy test Device
US10200866B1 (en) 2014-12-12 2019-02-05 Aeris Communications, Inc. Method and system for detecting and minimizing harmful network device and application behavior on cellular networks
US10256920B2 (en) 2015-01-25 2019-04-09 Valens Semiconductor Ltd. Mode-conversion digital canceller for high bandwidth differential signaling
US10171182B2 (en) 2015-01-25 2019-01-01 Valens Semiconductor Ltd. Sending known data to support fast convergence
EP3293931A1 (en) 2015-01-25 2018-03-14 Valens Semiconductor Ltd. Transceiver and method for fast recovery from quality degradation
CN104869030A (zh) * 2015-04-08 2015-08-26 太仓市同维电子有限公司 接入终端产品模拟多用户的测试方法
US10346431B1 (en) 2015-04-16 2019-07-09 Akamai Technologies, Inc. System and method for automated run-tme scaling of cloud-based data store
US9916225B1 (en) * 2016-06-23 2018-03-13 VCE IP Holding Company LLC Computer implemented system and method and computer program product for testing a software component by simulating a computing component using captured network packet information
US10374934B2 (en) 2016-12-16 2019-08-06 Seetharaman K Gudetee Method and program product for a private performance network with geographical load simulation
US10409632B2 (en) * 2017-03-31 2019-09-10 The Boeing Company Emulation of hardware components based on interrupt design
US10979453B2 (en) * 2017-08-31 2021-04-13 International Business Machines Corporation Cyber-deception using network port projection
US10917325B2 (en) * 2018-02-17 2021-02-09 Fortinet, Inc. Deriving test profiles based on security and network telemetry information extracted from the target network environment
US11249819B2 (en) * 2018-05-11 2022-02-15 Jade Global, Inc. Middleware for enabling interoperation between a chatbot and different computing systems
US11323524B1 (en) * 2018-06-05 2022-05-03 Amazon Technologies, Inc. Server movement control system based on monitored status and checkout rules
US10938666B2 (en) 2018-08-23 2021-03-02 Hewlett Packard Enterprise Development Lp Network testing simulation
WO2020162868A1 (en) * 2019-02-04 2020-08-13 Siemens Aktiengesellschaft System and method for testing and validating applications
US11165648B1 (en) * 2019-09-26 2021-11-02 Juniper Networks, Inc. Facilitating network configuration testing
US11106566B2 (en) 2020-01-22 2021-08-31 Netflix, Inc. Techniques for transparently emulating network conditions
CN111651357B (zh) * 2020-06-03 2023-04-07 厦门力含信息技术服务有限公司 一种基于云计算的软件自动化测试方法
US20220138081A1 (en) * 2020-11-02 2022-05-05 Innovate5G, Inc. Systems and Methods for Optimization of Application Performance on a Telecommunications Network
CN114640596B (zh) * 2020-12-16 2024-02-06 慧盾信息安全科技(北京)有限公司 一种实现自动对两个实体间所有交互报文进行网络损伤模拟的系统和方法
CN114697233A (zh) * 2020-12-29 2022-07-01 慧盾信息安全科技(北京)有限公司 一种单设备以太网端口环回模式连线进行网口测试的软件及方法
US11490432B1 (en) 2021-05-28 2022-11-01 T-Mobile Usa, Inc. Unified query tool for network function virtualization architecture
US11546243B1 (en) 2021-05-28 2023-01-03 T-Mobile Usa, Inc. Unified interface and tracing tool for network function virtualization architecture
US11509704B1 (en) 2021-05-28 2022-11-22 T-Mobile Usa. Inc. Product validation based on simulated enhanced calling or messaging communications services in telecommunications network
CN116541312B (zh) * 2023-07-06 2023-09-22 广汽埃安新能源汽车股份有限公司 一种汽车软件持续集成测试方法及系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020016708A1 (en) * 2000-08-02 2002-02-07 Henry Houh Method and apparatus for utilizing a network processor as part of a test system
US6741967B1 (en) * 1998-11-02 2004-05-25 Vividence Corporation Full service research bureau and test center method and apparatus
US20060085788A1 (en) * 2004-09-29 2006-04-20 Arnon Amir Grammar-based task analysis of web logs
US20060230384A1 (en) * 2005-04-11 2006-10-12 Microsoft Corporation Methods and apparatus for generating a work item
US20080316966A1 (en) * 2007-06-22 2008-12-25 Motorola, Inc. Optimizing positions of time slots in a hybrid time division multiple access (tdma)-carrier sense multiple access (csma) medium access control (mac) for multi-hop ad hoc networks
CN101340695A (zh) * 2008-08-14 2009-01-07 中兴通讯股份有限公司 一种模拟网元上报性能测量数据的方法及系统

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6058260A (en) * 1995-06-12 2000-05-02 The United States Of America As Represented By The Secretary Of The Army Methods and apparatus for planning and managing a communications network
US6091801A (en) * 1996-04-04 2000-07-18 Rockwell Semiconductor Systems, Inc. Emulator for a telephone system
US6542854B2 (en) * 1999-04-30 2003-04-01 Oracle Corporation Method and mechanism for profiling a system
US7342897B1 (en) * 1999-08-07 2008-03-11 Cisco Technology, Inc. Network verification tool
US6901357B1 (en) * 1999-12-14 2005-05-31 Microsoft Corporation System and method for simulating network connection characteristics
GB0007898D0 (en) * 2000-03-31 2000-05-17 British Telecomm Apparatus for optimising configuration parameters of a network
US7024475B1 (en) * 2000-04-24 2006-04-04 Nortel Networks Limited Performance modeling of a communications system
US6898564B1 (en) * 2000-05-23 2005-05-24 Microsoft Corporation Load simulation tool for server resource capacity planning
US20020138226A1 (en) * 2001-03-26 2002-09-26 Donald Doane Software load tester
US6823051B1 (en) * 2001-04-10 2004-11-23 Cisco Technology, Inc. Traffic distribution generator
ATE515148T1 (de) * 2001-07-06 2011-07-15 Hewlett Packard Co Mehrdienstkommunikationssystem
EP1415307A2 (en) * 2001-08-06 2004-05-06 Mercury Interactive Corporation System and method for automated analysis of load testing results
US7295953B2 (en) * 2001-12-21 2007-11-13 International Business Machines Corporation Scenario based testing and load generation for web applications
US20040003070A1 (en) * 2002-06-26 2004-01-01 Clarus Systems, Inc. Centrally controlled end-to-end service quality monitoring system and method in a distributed environment
US7159021B2 (en) * 2002-06-27 2007-01-02 Microsoft Corporation System and method for testing peer-to-peer network applications
EP1382976B1 (en) * 2002-07-19 2007-02-28 Infineon Technologies AG Method of processing test patterns for an integrated circuit
US7447622B2 (en) * 2003-04-01 2008-11-04 Microsoft Corporation Flexible network simulation tools and related methods
US7840664B2 (en) * 2003-05-21 2010-11-23 Ixia Automated characterization of network traffic
US7630862B2 (en) * 2004-03-26 2009-12-08 Microsoft Corporation Load test simulator
US20070002753A1 (en) * 2005-06-30 2007-01-04 Bailey Michael D System and method for testing a packet data communications device
US20080209566A1 (en) * 2005-06-30 2008-08-28 Raw Analysis Ltd. Method and System For Network Vulnerability Assessment
US20070230356A1 (en) * 2006-04-04 2007-10-04 Kalantri Sacchindrakumar G Method and apparatus for enabling FLO device certification
US7631227B2 (en) * 2006-11-21 2009-12-08 Etaliq Inc. Automated testing and control of networked devices
US20080181100A1 (en) * 2007-01-31 2008-07-31 Charlie Chen-Yui Yang Methods and apparatus to manage network correction procedures
US7921205B2 (en) * 2007-04-13 2011-04-05 Compuware Corporation Website load testing using a plurality of remotely operating agents distributed over a wide area
US8670972B1 (en) * 2007-06-07 2014-03-11 West Corporation Method and apparatus for voice recognition unit simulation
JP4500338B2 (ja) * 2007-10-04 2010-07-14 シャープ株式会社 テストパターン評価方法及びテストパターン評価装置
US7512933B1 (en) * 2008-01-27 2009-03-31 International Business Machines Corporation Method and system for associating logs and traces to test cases
EP2093614A1 (en) * 2008-02-22 2009-08-26 Imec Split and design guidelines for double patterning
US8024615B2 (en) * 2008-04-28 2011-09-20 Microsoft Corporation Steady state computer testing
US8462619B2 (en) * 2009-12-10 2013-06-11 At&T Intellectual Property I, L.P. Systems and methods for providing fault detection and management
US8626151B2 (en) * 2010-06-25 2014-01-07 At&T Mobility Ii Llc Proactive latency-based end-to-end technology survey and fallback for mobile telephony
US8515041B2 (en) * 2010-08-31 2013-08-20 Avaya Inc. Audio conference feedback system and method
US9082294B2 (en) * 2011-09-14 2015-07-14 Enernoc, Inc. Apparatus and method for receiving and transporting real time energy data
US9596156B2 (en) * 2011-09-26 2017-03-14 Theranos, Inc. Network connectivity methods and systems
US9582391B2 (en) * 2012-04-18 2017-02-28 W2Bi, Inc. Logistics of stress testing

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6741967B1 (en) * 1998-11-02 2004-05-25 Vividence Corporation Full service research bureau and test center method and apparatus
US20020016708A1 (en) * 2000-08-02 2002-02-07 Henry Houh Method and apparatus for utilizing a network processor as part of a test system
US20060085788A1 (en) * 2004-09-29 2006-04-20 Arnon Amir Grammar-based task analysis of web logs
US20060230384A1 (en) * 2005-04-11 2006-10-12 Microsoft Corporation Methods and apparatus for generating a work item
US20080316966A1 (en) * 2007-06-22 2008-12-25 Motorola, Inc. Optimizing positions of time slots in a hybrid time division multiple access (tdma)-carrier sense multiple access (csma) medium access control (mac) for multi-hop ad hoc networks
CN101340695A (zh) * 2008-08-14 2009-01-07 中兴通讯股份有限公司 一种模拟网元上报性能测量数据的方法及系统

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103139004A (zh) * 2011-12-02 2013-06-05 阿里巴巴集团控股有限公司 利用网络限速工具模拟网络带宽的方法及系统
CN103139004B (zh) * 2011-12-02 2015-11-25 阿里巴巴集团控股有限公司 利用网络限速工具模拟网络带宽的方法及系统
CN103634137A (zh) * 2012-08-27 2014-03-12 浙江大华技术股份有限公司 一种网络传输环境的模拟系统
CN106031107A (zh) * 2014-02-28 2016-10-12 凯为公司 网络处理器中的分组调度
CN105022625A (zh) * 2015-04-07 2015-11-04 陈伟德 一种软件设计方法及操作系统
WO2017012343A1 (zh) * 2015-07-20 2017-01-26 深圳市中兴微电子技术有限公司 不同网络制式间互操作性能的测试装置及方法
CN109271310A (zh) * 2017-07-18 2019-01-25 北京京东尚科信息技术有限公司 移动应用程序网络功能的开发测试方法和装置
CN110959270A (zh) * 2017-07-21 2020-04-03 思科技术公司 使用实时测试的服务功能链优化
CN110959270B (zh) * 2017-07-21 2023-01-31 思科技术公司 用于虚拟网络环境的方法和装置
CN110865931A (zh) * 2018-08-28 2020-03-06 阿里巴巴集团控股有限公司 模拟方法、装置、电子设备和存储介质
CN110865931B (zh) * 2018-08-28 2023-05-12 阿里巴巴集团控股有限公司 模拟方法、装置、电子设备和存储介质
US10776252B1 (en) * 2018-11-27 2020-09-15 Walgreen Co. Crowd-sourced automatic generation of user interface tests for enterprise-specific mobile applications
US11704228B1 (en) * 2018-11-27 2023-07-18 Walgreen Co. Crowd-sourced automatic generation of user interface tests for enterprise-specific mobile applications
CN112632105A (zh) * 2020-01-17 2021-04-09 华东师范大学 大规模事务负载生成与数据库隔离级别正确性验证系统及方法
CN112289368A (zh) * 2020-10-27 2021-01-29 英业达科技有限公司 通用型硬盘仿真配重治具
CN112289368B (zh) * 2020-10-27 2023-07-25 英业达科技有限公司 通用型硬盘仿真配重治具
CN113067744A (zh) * 2021-02-08 2021-07-02 杭州涂鸦信息技术有限公司 网络测试方法和电子设备、存储装置

Also Published As

Publication number Publication date
CN102244594B (zh) 2016-01-13
US20110282642A1 (en) 2011-11-17

Similar Documents

Publication Publication Date Title
CN102244594B (zh) 在手动和自动测试工具中的网络仿真技术
US10198348B2 (en) Method to configure monitoring thresholds using output of load or resource loadings
CN104993946B (zh) 灰度发布的评估方法、装置和系统
US9471951B2 (en) Watermarking and scalability techniques for a virtual desktop planning tool
US6993747B1 (en) Method and system for web based software object testing
Stantchev Performance evaluation of cloud computing offerings
EP1214656B1 (en) Method for web based software object testing
US8819638B2 (en) Application protoyping suite
KR100551454B1 (ko) 서버의 응용프로그램 성능을 시험하기 위한 그리드 컴퓨팅제어방법 및 그 서비스방법
US8677324B2 (en) Evaluating performance of an application using event-driven transactions
US10277475B2 (en) System and method for dynamically testing networked target systems
CN109302522A (zh) 测试方法、装置以及计算机系统和介质
CN104579822A (zh) 基于Http协议的移动应用自动化性能测试系统及方法
US20080244062A1 (en) Scenario based performance testing
US7412623B1 (en) State machine simulator for testing computer systems
US10452522B1 (en) Synthetic data generation from a service description language model
Beuran Introduction to network emulation
CN109032923A (zh) 基于调用链的软件测试方法、装置、终端
CN108073506A (zh) 测试方法和装置
CN105068876A (zh) 基于分布式部署真机采集手机app性能数据的方法
Tan et al. Software testing levels in internet of things (IoT) architecture
Ivanic et al. Mobile ad hoc network emulation environment
Beilharz et al. Continuously testing distributed iot systems: An overview of the state of the art
Herrnleben et al. An iot network emulator for analyzing the influence of varying network quality
CN102014163A (zh) 一种基于事务驱动的云存储测试方法及系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MICROSOFT TECHNOLOGY LICENSING LLC

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150727

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20150727

Address after: Washington State

Applicant after: Micro soft technique license Co., Ltd

Address before: Washington State

Applicant before: Microsoft Corp.

C14 Grant of patent or utility model
GR01 Patent grant