CN109416639A - 用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质 - Google Patents

用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质 Download PDF

Info

Publication number
CN109416639A
CN109416639A CN201780021733.5A CN201780021733A CN109416639A CN 109416639 A CN109416639 A CN 109416639A CN 201780021733 A CN201780021733 A CN 201780021733A CN 109416639 A CN109416639 A CN 109416639A
Authority
CN
China
Prior art keywords
use pattern
user
computer
traffic patterns
network traffic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780021733.5A
Other languages
English (en)
Other versions
CN109416639B (zh
Inventor
A·拉曼斯
S·里沃夫
G·M·普基乌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Deutsche Technologies Singapore (sales) Private Ltd
Original Assignee
Deutsche Technologies Singapore (sales) Private Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Deutsche Technologies Singapore (sales) Private Ltd filed Critical Deutsche Technologies Singapore (sales) Private Ltd
Publication of CN109416639A publication Critical patent/CN109416639A/zh
Application granted granted Critical
Publication of CN109416639B publication Critical patent/CN109416639B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/50—Testing arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/14—Network analysis or design
    • H04L41/145—Network analysis or design involving simulating, designing, planning or modelling of a network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/20—Arrangements for monitoring or testing data switching networks the monitoring system or the monitored elements being virtualised, abstracted or software-defined entities, e.g. SDN or NFV
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/455—Emulation; Interpretation; Software simulation, e.g. virtualisation or emulation of application or operating system execution engines
    • G06F9/45533—Hypervisors; Virtual machine monitors
    • G06F9/45558—Hypervisor-specific management and integration aspects
    • G06F2009/45595—Network integration; Enabling network access in virtual machine instances
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0805—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability
    • H04L43/0817—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters by checking availability by checking functioning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00—Arrangements for monitoring or testing data switching networks
    • H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0876—Network utilisation, e.g. volume of load or congestion level

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质。在一个例子中，该方法包括基于多个网络流量模式和计算机处理使用模式来生成用户规范，以及在由DUT托管的虚拟机处接收包含该多个网络流量模式和计算机处理使用模式的用户规范。该方法进一步包括基于该多个网络流量模式生成多个网络流量序列以及基于该多个计算机处理使用模式生成多个计算机处理使用模式指令序列。该方法还包括在多个虚拟网络接口卡(VNIC)之间分配该多个网络流量序列中的每一个，以及在该虚拟机中的多个虚拟处理核心之间分配该多个计算机处理使用模式指令序列中的每一个。

Description

用于在虚拟机上拟真网络流量模式的方法、系统以及计算机 可读介质
优先权要求
本申请要求于2016年4月6日申请的美国专利申请号15/092,575的权益，该美国专利申请的全部内容通过引用结合于此。
技术领域
本文描述的主题涉及用于测试虚拟部署的方法和装置。更具体地，本文描述的主题涉及用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质。
发明背景
目前，系统管理员正在不断扩展的电信网络中部署大量网络元件和服务节点。为了通过供应最优的资源数量或最优资源量来适当地解决网络的处理需求，系统管理员通常需要根据网络元件可能受到的网络用户的要求来了解网络元件的处理能力。为了获得相关信息，系统管理员理想地能够在由测试环境中的网络元件托管的虚拟机上拟真特定CPU和IO使用模式。值得注意的是，这种特定的拟真使得测试管理员能够对被测试装置(DUT)中的虚拟机设置进行压力测试，并且随后监测和测量所产生的性能行为。
因此，需要用于在虚拟机上拟真计算机处理使用模式的方法、系统以及计算机可读介质。
发明内容
本发明公开了用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质。根据一个实施方案，本文描述的主题包括一种用于在虚拟机上拟真网络流量模式的方法。在一个例子中，该方法包括基于多个网络流量模式和计算机处理使用模式来生成用户规范，以及在由被测试装置(DUT)托管的虚拟机处接收包含该多个网络流量模式和计算机处理使用模式的用户规范。该方法进一步包括生成基于该多个网络流量模式的多个网络流量序列以及基于该多个计算机处理使用模式的多个计算机处理使用模式指令序列。该方法还包括在多个虚拟网络接口卡(VNIC)之间分配该多个网络流量序列中的每一个，以及在该虚拟机中的多个虚拟处理核心之间分配该多个计算机处理使用模式指令序列中的每一个。
本文描述的主题可以在硬件、软件、固件或者它们的任何组合中实现。因而，如本文使用的术语“功能”或“模块”是指用于实现所描述的特征(例如，经由所执行的软件进行仿真和拟真)的硬件，也可以包括软件和/或固件部件。在一个示例实现方式中，本文描述的主题可以使用其上存储有计算机可执行指令的非瞬态计算机可读介质来实现，其中当该计算机可执行指令被计算机的处理器执行时致使该计算机执行步骤。适合于实现本文所描述的主题的示例计算机可读介质包括非瞬态计算机可读介质，诸如磁盘存储器设备、芯片存储器设备、可编程逻辑设备以及专用集成电路。此外，实现本文所描述的主题的计算机可读介质可以位于单个设备或计算平台上，或者可以分布在多个设备或计算平台上。
附图简述
现在将参考附图来说明本文中描述的主题，其中：
图1是说明根据本文描述的主题的实施方案的用于在虚拟机上拟真网络流量模式的示例性系统的图；
图2是表示根据本文描述的主题的实施方案的用户规范的线状图表；
图3是说明根据本文描述的主题的实施方案的、被配置用于拟真网络流量模式的示例性虚拟机的框图；并且
图4是说明根据本文描述的主题的实施方案的用于在虚拟环境中的虚拟机上拟真网络流量模式的示例性过程的流程图。
发明详述
本文描述的主题涉及用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质。在一些实施方案中，网络流量模式还可以与执行拟真的计算机处理单元(CPU)使用模式同步。即，所公开的主题有助于对网络流量模式的拟真，该网络流量模式复制与经由用户规范中所包含的使用模式或特征(profile)来定义的用户定义的应用程序动作或活动相关联的网络流量(例如，分组流量和信令)。如本文所使用的，使用模式或特征可以包括与应用程序或应用程序组合的操作相关联的多个处理活动或载荷。此外，使用模式可以表示由单个拟真用户或多个拟真用户生成的活动(例如，多个且同时的银行账户访问实例)。类似地，如本文所使用的，网络流量模式或特征可以包括与CPU执行的活动相关联的拟真网络流量行为，该活动仿真与应用程序的使用对应的上述用户动作/活动(例如，仿真的用户动作)。
在一些实施方案中，该主题通过执行诸如通过预定/定制仿真使用模式或通过预定/定制网络流量模式而在用户定义的使用模式和用户定义的网络流量模式中指定的动作来仿真计算机处理(例如，CPU)使用。值得注意的是，所公开的主题为用户提供了定义计算机处理使用的特定模式的能力，该特定模式可以在测试工具环境中使用和提供以生成CPU消耗量、文件输入/输出(I/O)访问(例如，非高速缓冲存储装置访问、磁盘访问等)、存储器使用量(例如，RAM消耗量、高速缓冲利用率、处理器高速缓冲消耗量等)和/或相关网络流量活动。因此，用户动作和/或网络流量活动所经历的所生成的计算机处理使用量的预定义水平(例如，CPU消耗量、文件I/O访问和/或存储器使用量)可以用于验证由被测试的物理装置和/或虚拟机所采用的CPU管理解决方案。在一些实施方案中，该主题进一步被配置为将网络流量模式(和/或基础序列)的执行与计算机处理使用模式(例如，CPU使用模式)和/或虚拟机内的基础序列的执行同步。例如，虚拟机可以利用应用程序编程接口(API)在模式序列生成器与网络流量序列生成器之间进行同步消息的交换以有助于对如下所述的被测试装置的测试仿真。
现在将详细参考在此公开的主题的示例性实施例，其示例在附图中示出。在可能的情况下，在所有附图中使用相同的附图标记来表示相同或类似的部分。本文公开和描述了本主题的各种实施方案。
图1是说明测试系统100的图，该测试系统包括处理活动拟真器102(例如，处理活动拟真机)和被测试装置(DUT)104。处理活动拟真器102可以经由有线或无线连接而通信地连接到DUT 104。在一些实施方案中，处理活动拟真器102可以包括设计模块106、捕获模块108、模式数据库110、供应模块112以及统计和报告模块113。在一些实施方案中，模块106、108、112和113中的每一个可以包括基于软件的程序，该程序包含/存储在存储器中，在存储器中，该程序可以由拟真器102中的处理器(未示出)来执行。模式数据库110可以包括被配置为存储使用模式数据和网络流量模式数据的任何存储单元或存储器结构。
在一些实施方案中，设计模块106可以由用户(例如，系统管理员、网络管理员、测试管理员等)利用来创建和/或构建可以包括在用户规范中的网络流量模式和CPU使用模式。在一些实施方案中，设计模块106使得用户能够指定要包括在定制的用户规范中的某些参数和/或值。例如，设计模块106可以包括被配置为经由用户界面从用户接收输入和/或规范的模块。在一些实施方案中，设计模块106使得用户能够指定包括对CPU使用动作与网络流量动作的组合进行拟真的用户活动序列的特征。例如，特征可以包括表示开始玩在线游戏的网络游戏玩家的活动，该在线游戏需要分配资源和执行某些CPU特定动作。这样的CPU动作可以由网络流量动作的发生所引起，该网络流量动作包括认证、从主机向玩家用户传送游戏内容数据、以及从玩家用户接收更新的游戏内容数据。特征的另一个例子可以表示Twitch应用程序用户，其利用该应用程序来对玩家进行排名并且查看直播游戏视频流。特征的又一例子可以表示打开存储在云中的新Word文档并且随后编辑和保存文档的用户。值得注意的是，这些仿真用户动作可能涉及网络流量模式与CPU使用模式的组合。此外，用户可以发布CPU密集型操作以将文档转换为PDF格式，然后经由网络流量动作下载文档。
在一些实施方案中，定制(例如，预定)活动模式可以包括网络流量活动和由执行网络流量活动引起的相关联的CPU使用活动。在一些实施方案中，网络流量活动和CPU使用活动中的每一个可以在创建时由设计模块106用活动配对标识符和相关时间线数据值或标签来标记。值得注意的是，活动标识符和时间线数据值可以最终被虚拟机中的部件(例如，模式执行模块和/或网络流量序列生成器)利用来将网络流量活动与其相关联的CPU使用活动(如实施为指令序列)同步以便有助于测试仿真。
在一些实施方案中，用户可以利用设计模块106来创建和/或构建计算机处理使用模式，该模式拟真与执行软件应用程序相关联的用户定义的用户交互模式(例如，与文字处理应用程序的操作对应的用户活动)。具体地，设计模块106可以用于定制用户规范101，该用户规范包括：i)计算机处理使用模式规范，其指定软件应用程序在用户的操作下可能经历的单独活动、输入和/或命令；以及ii)网络流量模式规范，其包括与使用模式规范中指定的活动中的至少一些活动相关的网络动作。在一些实施方案中，用户可以初始地选择需要在装置(例如，DUT)和/或要测试的相关联虚拟机上拟真的应用操作的可执行动作。可以被仿真的示例性用户动作可以包括启动/打开应用程序、关闭应用程序、应用程序的操作、在应用程序内保存文件等。在该背景中的应用程序的例子可以包括文字处理应用程序、媒体播放器应用程序、电子表格应用程序、网络浏览应用程序等。在一些实施方案中，用户定义的活动和动作可以如图2中所示的图形方式(而不是基于任务的方式)来表示。例如，用户定义的活动可以包括定义和/或指定活动的不同使用模式(诸如处理活动的增加、处理活动的减少、处理活动的泊松分布模式等)的时间线。
作为例子，图2中说明了示例性用户规范的图形表示。值得注意的是，用户规范103(与图1中的用户规范101不同)包括实线109，该实线描绘了表示用户执行的动作的特定动作特征的CPU使用模式。类似地，图2进一步包括虚线107，该虚线描绘了与传送的网络流量相关联的使用模式。值得注意的是，由实线109表示的CPU使用水平包括并且考虑与网络流量相关联的CPU使用量，如虚线107所指示。具体地，用户规范103的实线109表示由用户动作(例如，打开文字处理应用程序、编辑文字处理文档、启动Twitch应用程序、开始游戏、创建PDF文档等)和与所述用户动作相关联的网络流量水平引起的累积CPU使用量。值得注意的是，处理活动拟真器102可以利用用户规范103(尤其是所生成的用户特征)作为输入来生成用户规范101。
除了指定要拟真的动作之外，用户可以随后选择将应用于用户定义的计算机处理使用模式的指定动作的相关执行参数(例如，运行应用程序的核心的数量等)。在一些例子中，操作该执行参数以建立和/或提供用于在DUT上执行选定动作的规则。例如，用户可以利用设计模块106(例如，经由GUI或命令行界面)来指定多个执行参数，诸如i)计算机处理使用模式计数，ii)执行该模式的总时间量，iii)关于该模式是要串行还是并行执行的指定，iv)关于模式是否应以均匀分布的方式加载处理核心的指定等。除了这些“全局”输入执行参数之外，每个模式可以进一步包括模式特有的执行参数，包括i)用于执行计算机处理使用模式的指定线程计数，ii)用于执行计算机处理使用模式的核心数量，iii)是否自动扩展计算机处理使用模式以在所有虚拟处理核心上运行的指示(例如，标志、位指示符等)，iv)重复执行计算机处理使用模式的实例数量(例如，“P”次)，和/或v)执行计算机处理使用模式的总时间(例如，时间线和/或时间限制持续时间)。在一些实施方案中，执行参数可以进一步包括在仿真测试中要遵守的中央处理单元(CPU)使用量阈值限制、文件I/O访问阈值限制和/或存储器使用量阈值限制。值得注意的是，这些阈值限制中的每一个可以包括最小阈值限制和/或最大阈值限制。以类似方式，用户可以利用设计模块106来设计包括多个网络流量序列参数的网络流量模式，该网络流量序列参数诸如i)网络命令序列指示符，ii)执行时间，iii)重复执行网络流量模式的实例数量(例如，“P”次)，以及iv)目标对象(例如，仿真用户、连接数、交易次数等)。
在如上所述由用户指定使用量和网络流量动作/活动和相关参数之后，设计模块106可以生成包括网络流量模式规范数据和使用模式规范数据的用户规范101，诸如CPU使用模式规范、文件I/O访问模式规范、存储器使用模式规范。值得注意的是，设计模块106可以组合或聚合指定动作和参数以形成用户规范101，其可以实施为包括XML数据、二进制数据或文件数据的基于软件的分组或对象。
在由设计模块106创建之后，用户规范101(包括使用模式规范数据、网络流量模式规范数据或者其组合)可以由设计模块106转发到供应模块112以便传递到DUT 104。备选地，用户规范101可以由设计模块106经由供应模块112存储在模式数据库110中以供将来测试使用和/或DUT供应。在一些实施方案中，供应模块112被配置为将用户规范101发送到已被指定为执行仿真的特定虚拟机120。值得注意的是，用户规范101被提供给指定虚拟机120中的使用模式生成器(UPG)122和网络流量模式生成器(NTPG)126。UPG 122和NTPG 126中的每一个被配置为提取相关模式数据和同步数据以便有助于i)执行CPU使用仿真和/或网络流量仿真，以及ii)同步执行由发生器进行的这两个仿真。更具体地，UPG 122被配置为从用户规范101中提取和/或利用CPU使用模式规范数据，并且NTPG 126被配置为从用户规范101中提取和/或利用网络流量模式规范数据。下面和图3中更详细地描述了虚拟机接收和处理用户规范101的方式。
如上面所指示，处理活动拟真器102进一步包括捕获模块108。在一些例子中，捕获模块108可以包括被配置为监测和记录由所部署的计算装置和/或网络元件执行的实际CPU使用模式的任何软件实体。此外，捕获模块108可以被配置为捕获可以用于创建和生成网络流量模式和/或特征的网络流量活动。例如，捕获模块108可以包括实用软件元件，其由拟真器102的至少一个处理器执行并且提供用于监测拟真应用程序过程与处理器之间的交互(诸如系统调用、信号传递、过程状态变化等)的诊断工具。在其他实施方案中，捕获模块108包括诊断软件工具，其监测和记录与CPU使用和网络流量活动相关联的系统调用。在捕获模块108记录多个观察到的系统调用和/或信号传递之后，捕获模块108可以将记录的信息转发到设计模块106(例如，经由应用程序编程接口(API))。然后，设计模块106可以处理从捕获模块108接收的信息以生成一个或多个网络流量模式规范和使用模式规范。在一些例子中，捕获模块108可以被配置为监测和记录由所部署的计算装置和/或网络元件处理的实际网络流量模式。随后可以由设计模块106利用这样的网络流量模式和/或对其建模来生成网络流量特征。
在一些实施方案中，模式数据库110可以包括被配置为存储多个定制的使用模式规范数据和/或网络流量模式规范数据的任何数据存储装置。存储在数据库110中的模式规范数据可以包括由设计模块106生成的定制模式规范或基于由捕获模块108捕获的数据的模式规范。此外，模式数据库110还可以被配置为接收和存储由分离的系统生成和/或设计的预定CPU使用模式和网络流量模式。在一些实施方案中，供应模块112可以被配置为按照用户的指示或经由系统调用来访问数据库110，以便获得用于传递到DUT 104或者在DUT上供应的存储模式规范(例如，作为用户规范101的一部分)。
如图1中所示，处理活动拟真器102可以进一步包括统计和报告模块113。在一些实施方案中，统计和报告模块113被配置为(例如，经由消息和/或图形用户界面(GUI)显示)向系统的用户生成统计和测试状况的报告。
在一些实施方案中，DUT 104可以包括处理器114和存储器115。存储器115可以包括虚拟机监测(VMM)模块116，其在由处理器114执行时在DUT 104上建立虚拟环境118。在一些实施方案中，VMM模块116可以包括监管程序或其他软件应用程序，其被配置为管理和支持包括多个虚拟机1201…N(或虚拟端口)的虚拟环境118。在每个虚拟机或端口中，能够将模式指定为输入。如下所述，每个虚拟机具有使用模式生成器122和识别输入并生成模式的网络流量模式生成器126。例如，图1中描绘的虚拟机1201…N中的每一个可以包括使用模式生成器122、网络流量模式生成器126以及发布器模块(PM)124。虚拟环境118可以进一步由常驻在DUT 104上的基础硬件部件(例如，处理器114、存储器115以及数据存储元件)支持。
如图1中所描绘，DUT 104包括处理器114和存储器115，它们可以经由系统总线(未示出)通信地连接。在一些实施方案中，处理器114可以包括微处理器、中央处理单元(CPU)或任何其他类似的基于硬件的处理单元。在一些实施方案中，使用模式生成器122和网络流量模式生成器126可以电子方式存储在存储器115中，该存储器可以包括随机存取存储器(RAM)、只读存储器(ROM)、光学读/写存储器、高速缓冲存储器、磁性读/写存储器、闪存或任何其他非瞬态计算机可读介质。在一些实施方案中，处理器114和存储器115可以用于执行和管理UPG 122、NTPG 126和/或PM 124的操作。在一些实施方案中，处理器114和存储器115中的每一个可以包括基础专用机器的硬件元件，该基础专用机器支持在虚拟机和/或虚拟环境中执行UPG 122、PM 124和/或NTPG 126。
在一些实施方案中，使用模式生成器122包括软件模块，该软件模块可以被配置为从拟真器102接收用户规范101作为输入并且提取相关计算机处理使用模式规范数据(例如，CPU使用模式规范数据)。以类似方式，网络流量模式生成器126包括软件模块，该软件模块可以被配置为从拟真器102接收用户规范101作为输入并且提取相关网络流量模式规范数据。下面参考图2(例如，使用模式生成器205和网络流量模式生成器215)更详细地讨论使用模式生成器122和网络流量模式生成器126的功能。
在一些实施方案中，发布模块124可以包括软件模块，该软件模块被配置为监测跨多个处理核心(例如，图3中的核心212)的CPU使用量和跨多个VNIC(例如，图3中的VNIC226)的网络流量活动。发布模块124进一步经由处理活动拟真器102向测试管理者报告执行状况信息。在一些实施方案中，拟真器102可以被配置为聚合从多个虚拟机(例如，虚拟机1201…N)接收的执行状况信息，并且向测试管理者或其他用户显示处理统计信息。值得注意的是，模式和相关联的处理统计信息的发布用于确认虚拟机从监管程序中表现的性能水平是准确的。
图3是说明根据本文描述的主题的实施方案的、被配置用于拟真和/或同步计算机处理使用模式和网络流量模式的分配和/或执行的示例性虚拟机的框图。例如，虚拟机201可以包括使用模式生成器(UPG)205、网络流量模式生成器(NTPG)215、多个虚拟网络接口卡(VNIC)226，以及多个虚拟处理核心，诸如虚拟CPU核心212。UPG 205可以进一步包括解析器204、模式指令序列生成器206以及模式执行模块208，下面将更详细地描述其中的每一个。同样，NTPG 215包括解析器218和网络流量序列发生器222，它们在下面类似地更详细地描述。
在一些实施方案中，UPG 205中的解析器204从处理活动拟真器(例如，图1中的拟真器102)接收用户规范200以进行处理。例如，解析器204可以被配置为从所接收的用户规范200(与图1中的用户规范101不同)中提取一个或多个计算机处理使用模式(例如，CPU使用模式)。此外，解析器204可以进一步从该模式中的每个模式中提取使用模式参数，并且将每个执行参数转换为机器兼容格式。例如，解析器204可以将执行参数转换为可以由模式指令序列生成器206读取的XML文件。
在一些实施方案中，每个使用模式202可以包括模式参数数据，该模式参数数据指定i)线程计数，ii)处理核心计数，iii)对所有核心的可扩展性，iv)重复次数，以及v)从要处理的每个模式(例如，模式2021…M)获得的执行时间。在解析器204进行转化之后，可以将前述模式参数转发到模式指令序列生成器206，在该模式指令序列生成器中收集并聚合参数。在一些实施方案中，模式指令序列生成器206接收单独的CPU使用模式信息。在一些实施方案中，模式指令序列生成器206可以被配置为进一步从解析器204接收全局CPU使用模式信息作为输入。值得注意的是，全局CPU使用模式信息包括由解析器204提供的单独的CPU使用模式信息的聚合。
在一些实施方案中，NTPG 215中的解析器218接收用户规范200以进行处理。例如，解析器218可以被配置为从所接收的用户规范200(与图1中的用户规范101不同)中提取一个或多个网络流量模式。此外，解析器218可以进一步从该模制220中的每个模式中提取网络流量参数，并且将模式220中的每个参数转换为机器兼容格式。例如，解析器204可以将参数转换为可由网络流量序列生成器222读取的XML文件。在一些实施方案中，每个网络流量模式220可以包括模式参数数据，该模式参数数据指定i)网络命令序列，ii)被分配用于执行一组完整网络命令的时间，iii)命令序列是否需要重复“P”次的指示，和/或iv)网络流量活动的目标对象(例如，对特定数量的用户、某一数量的并发连接、特定的每秒连接率，和/或特定的每秒交易率和/或吞吐量的仿真)。
返回到UPG 205，在接收到使用模式202中所包括的执行参数时，模式指令序列生成器206可以为该多个使用模式中的每一个生成唯一的指令序列。如本文所使用，示例性指令序列可以包括软件程序和/或对象。例如，指令序列可以体现为XML格式、二进制格式、JavaScript对象表示法(JSON)格式或文件数据。一旦由模式指令序列生成器206生成，指令序列就作为输入被转发到模式执行模块208。例如，图3描绘了由模式执行模块208利用(例如，从存储器或数据库访问)指令序列2101…P用于处理和/或分配。模式执行模块208被配置为执行由指令序列建立的规则，并且用作所有指令序列的聚合器。值得注意的是，模式执行模块208将使用模式指令序列传递到虚拟核心(例如，为要被模式执行模块208处理和/或转化的模式指令序列中的每一个生成执行序列)。在一些例子中，所传递的使用模式指令序列(例如，执行序列)可以表示为由一个或多个虚拟核心仿真的时间线。
同样地，对于NTPG 215，在接收到包括于网络流量模式220中的网络流量模式参数时，网络流量序列生成器222可以为多个模式中的每一个生成唯一的网络流量序列。如本文所使用，示例性网络流量序列可以包括软件程序和/或对象。例如，网络流量序列可以实施为XML格式、二进制格式、JavaScript对象表示法(JSON)格式或文件数据。一旦由网络流量序列生成器222生成，网络流量序列就被分配并转发到VNIC 226以执行网络流量仿真。
返回到UPG 205，模式执行模块208可以在虚拟机201的虚拟处理核心2121…Q之间发起指令序列的分配和/或加载以执行CPU使用仿真。例如，模式执行模块208可以跨虚拟处理核心2121…Q实现指令序列210的轮询分配。虚拟处理核心2121…Q中的每一个随后执行指令序列210，该指令序列进而仿真用户最初定义的CPU使用。例如，可以经由预定仿真模式和/或由处理活动拟真器(例如，处理活动拟真器102)管理的定制定义模式来定义CPU使用。
通过跨虚拟处理核心2121…Q供应指令序列，在DUT的虚拟机201上拟真选定CPU使用模式。这种仿真测试为用户提供了控制CPU使用并且将其与包括硬件和/或监管程序的基础系统相关的能力以确定系统是否正确地工作。值得注意的是，基于指令序列的数量正在生成对利用多个应用程序的多个用户的仿真并且应用于处理核心2121…Q。在一些实施方案中，所公开的主题被配置为允许用户经由跨多个服务器的特征(例如，定制CPU使用模式)来仿真多个CPU使用模式并且监测性能水平。
如上面所指示的，模式执行模块208可以与网络流量序列发生器222进行通信以同步指令序列210和所生成的网络流量序列的执行和/或分配。具体地，模式执行模块208和网络流量序列发生器222可以利用通信信道213(例如，API)来交换包括活动标识符和时间线值/标签数据的同步消息。值得注意的是，指令序列210和针对VNIC 226的网络流量序列中的每一个包括活动标识符和相关时间线标签，其可以由模式执行模块208和网络流量序列生成器222用于以同步方式(例如，在由时间线值/标签指定的时间转发具有匹配时间线值的序列)协调序列到处理核心212和VNIC 226的传递。
在由虚拟处理核心212执行模式指令序列之后，模式执行模块208可以生成电子状态报告，其指示所有执行的模式指令序列208的状态和/或执行状况。值得注意的是，模式执行模块208可以被配置为评估所执行的模式指令序列的状况，并且将反应这种状况的电子状况报告发送到统计和报告模块113。以类似方式，网络流量序列生成器222可以被配置为生成电子状况报告，该电子状况报告指示由VNIC 226处理的所有网络流量序列的状态和/或执行状况。然后，可以将由模式执行模块208和网络流量序列生成器222生成的报告转发给统计发布器224。然后，发布器模块224可以可视方式(诸如经由图形用户界面(GUI)或打印报告)提供和/或呈现所收集的状况信息。
图4是说明根据本文描述的主题的实施方案的用于在虚拟机上拟真网络流量模式的示例性方法400的流程图。在步骤402中，生成用户规范。最初，测试系统管理员或另一个用户首先定制和/或定义可以包括在要生成的用户规范中的网络流量模式规范。在一些实施方案中，网络流量模式可以基于由安装在虚拟环境上的特定应用程序获取或捕获的网络流量测量值。在一些实例中，网络流量模式可以由用户定义或定制为在一段时间内传送的网络流量活动的图形表示。例如，用户可以定义网络流量模式(如图2中所示)以包括在时间线上显示的网络流量活动的增加、减少和/或稳定状态。
在如上所述由用户定义一个或多个网络流量模式之后，处理活动拟真器中的设计模块可以生成用户规范，该用户规范包括一个或多个网络流量模式规范和相应的一个或多个计算机处理使用模式的用户规范(例如，CPU使用模式)。在一些实施方案中，处理活动拟真器可以被配置为将网络流量模式和相关计算机处理使用模式聚合到用户规范中。设计模块还可以被配置为将所生成的用户规范(包括聚合的网络流量模式规范和相关CPU使用规范)转发到处理活动拟真器中的供应模块以便分配给一个或多个DUT。
在步骤404中，接收包括至少多个网络流量模式和计算机处理使用模式的用户规范。在一些实施方案中，由DUT托管的虚拟机(经由供应模块)从处理活动拟真器接收包括网络流量模式规范数据以及计算机处理使用模式规范数据(例如，CPU使用模式规范数据)的用户规范。更具体地，网络流量生成器上的解析器接收用户规范(或其副本)，并且随后提取和/或访问包括在用户规范中的网络流量规范数据。类似地，使用模式生成器上的解析器接收用户规范(或其副本)，并且随后提取和/或访问包括在所接收的用户规范中的计算机处理使用模式规范数据。
在一些实施方案中，虚拟机的生成器中的解析器中的每一个接收用户规范并且提取前述模式以进行转化程序(例如，将包括在用户规范中的模式转换为由网络流量序列生成器或模式指令序列生成器理解的格式)。
在步骤406中，生成基于网络流量模式的多个网络流量序列以及基于该多个计算机处理使用模式的多个计算机处理使用模式指令序列。在一些实施方案中，虚拟机中的网络流量序列生成器处理网络流量模式，并且随后为每个相应的网络流量模式(包含所述执行参数)生成模式指令序列。此外，虚拟机中的使用模式生成器处理计算机处理使用模式来以类似方式生成计算机处理使用模式指令序列。
在步骤408中，将该多个网络流量序列中的每一个在常驻在虚拟机中的多个VNIC之间分配，并且将该多个计算机处理使用模式指令序列中的每一个在虚拟机中的多个虚拟处理核心之间分配。例如，网络流量序列生成器可以轮询方式或者根据路由规则和/或基于载荷的参数在VNIC之间分配网络流量序列。
在步骤410中，将执行网络流量序列与在虚拟机中执行计算机处理使用模式指令序列同步。在一些实施方案中，该多个VNIC之间的网络流量序列的分配和/或执行可以与由虚拟机的使用模式执行模块管理的使用模式指令序列的传递和/或执行同步。具体地，可以经由模式执行模块与网络流量序列发生器之间的消息交换(例如，经由API)来进行和管理仿真同步。值得注意的是，执行同步有助于托管在虚拟机上的一个或多个应用程序的CPU使用和网络流量仿真。例如，模式执行模块和网络流量序列生成器可以经由API进行通信，并且交换包含活动标识符和相关联的时间线值的消息，这些值可以用于执行使用模式指令序列(例如，执行序列)和/或将使用模式指令序列传递到虚拟处理核心，并且执行网络流量序列和/或将网络流量序列传递到VNIC。因而，通过以由执行参数指定的方式在虚拟处理核心上执行模式指令序列并且以同步方式将网络流量引导到VNIC并在VNIC上执行该网络流量来拟真应用程序的操作。此外，统计和报告模块113可以监测或测量进行仿真的虚拟处理核心和VNIC中的每一个的性能水平。
应当注意，处理活动拟真器102、DUT 104和/或本文描述的功能(例如，参见图1)可以构成专用计算系统。此外，处理活动拟真器102、DUT 104和/或本文描述的功能可以通过拟真CPU使用模式和网络流量模式以遵循预定义和/或定制的用户定义的活动或动作来改进仿真测试的技术领域，由此有助于在虚拟机环境中进行可靠的压力测试并且随后观察虚拟机环境中的单独虚拟机所表现出的行为。
应当理解，在不脱离本文中描述的主题的范围的情况下，可以改变本文中描述的主题的各种细节。此外，前面的描述仅仅是出于说明的目的，而不是出于限制的目的，因为在此描述的主题由下文中阐述的权利要求书限定。

Claims (20)

1.一种方法，其包括：
基于多个网络流量模式和计算机处理使用模式来生成用户规范；
在由被测试装置(DUT)托管的虚拟机处接收包含该多个网络流量模式和计算机处理使用模式的用户规范；
基于该多个网络流量模式生成多个网络流量序列以及基于该多个计算机处理使用模式生成多个计算机处理使用模式指令序列；以及
在多个虚拟网络接口卡(VNIC)之间分配该多个网络流量序列中的每一个，以及在该虚拟机中的多个虚拟处理核心之间分配该多个计算机处理使用模式指令序列中的每一个。
2.权利要求1的方法，其包括通过执行该多个网络流量序列和该计算机处理使用模式指令序列在该虚拟机上拟真一个或多个应用程序的操作。
3.权利要求2的方法，其包括将由该多个VNIC执行该多个网络流量序列与由该虚拟机中的该多个虚拟处理核心执行该计算机处理使用模式指令序列同步。
4.权利要求3的方法，其中该多个网络流量模式中的每一个包括与执行仿真用户动作相关联的网络流量活动，该仿真用户动作与该一个或多个应用程序相关联。
5.权利要求4的方法，其进一步包括通过以由包括在该计算机处理使用模式中的执行参数指定的方式在该一个或多个虚拟处理核心上执行该使用模式指令序列来在该虚拟机上拟真该一个或多个应用程序的操作。
6.权利要求1的方法，其中该多个网络流量模式和多个计算机处理使用模式由用户生成。
7.权利要求1的方法，其进一步包括测量以下各项的性能水平：i)一个或多个虚拟处理核心中的每一个，ii)文件输入/输出访问，或者iii)拟真应用程序的操作的存储器使用量。
8.一种用于在虚拟机上拟真计算机处理使用模式的系统，该系统包括：
处理活动拟真机，该处理活动拟真机被配置为基于由用户提供的至少多个网络流量模式来生成用户规范；
被测试装置(DUT)，该被测试装置包括：
由该DUT托管的一个或多个虚拟机，该虚拟机被配置为接收包含该多个网络流量模式和计算机处理使用模式的该用户规范，其中该一个或多个虚拟机中的每一个包括：
网络流量模式生成器，该网络流量模式生成器包括解析器和网络流量序列生成器，该解析器被配置为接收该用户规范并且从该用户规范中提取多个网络流量模式，该网络流量序列生成器被配置为基于从该解析器接收的该多个网络流量模式生成多个网络流量序列并且在该虚拟机的多个虚拟网络接口卡之间分配该多个网络流量序列中的每一个；以及
使用模式生成器，该使用模式生成器包括解析器、模式指令序列生成器以及模式执行模块，该解析器被配置为接收该用户规范并且从该用户规范中提取多个计算机处理使用模式，该模式指令序列生成器被配置为基于从该解析器接收的该多个计算机处理使用模式生成多个计算机处理使用模式指令序列，该模式执行模块被配置为接收该多个计算机处理使用模式指令序列以在该虚拟机的多个虚拟处理核心之间分配该多个计算机处理使用模式指令序列中的每一个。
9.权利要求8的系统，其中该虚拟机被配置为通过执行该多个网络流量序列和该计算机处理使用模式指令序列来拟真一个或多个应用程序的操作。
10.权利要求9的系统，其中该虚拟机被配置为将由该多个VNIC执行该多个网络流量序列与由该多个虚拟处理核心执行该计算机处理使用模式指令序列同步。
11.权利要求10的系统，其中该多个网络流量模式中的每一个包括与执行仿真用户动作相关联的网络流量活动，该仿真用户动作与该一个或多个应用程序相关联。
12.权利要求11的系统，进一步其中该虚拟机被配置为通过以由包括在该计算机处理使用模式中的执行参数指定的方式在该一个或多个虚拟处理核心上执行该使用模式指令序列来拟真该一个或多个应用程序的操作。
13.权利要求8的系统，其中该多个网络流量模式和多个计算机处理使用模式由用户生成。
14.权利要求8的系统，其中该处理活动拟真器进一步被配置为测量以下各项的性能水平：i)一个或多个虚拟处理核心中的每一个，ii)文件输入/输出访问，或者iii)拟真应用程序的操作的存储器使用量。
15.一种存储有可执行指令的非瞬态计算机可读介质，该可执行指令在由计算机的处理器执行时使该计算机执行包括以下各项的步骤：
基于多个网络流量模式和计算机处理使用模式来生成用户规范；
在由被测试装置(DUT)托管的虚拟机处接收包含该多个网络流量模式和计算机处理使用模式的用户规范；
基于该多个网络流量模式生成多个网络流量序列以及基于该多个计算机处理使用模式生成多个计算机处理使用模式指令序列；以及
在多个虚拟网络接口卡(VNIC)之间分配该多个网络流量序列中的每一个，以及在该虚拟机中的多个虚拟处理核心之间分配该多个计算机处理使用模式指令序列中的每一个。
16.权利要求15的计算机可读介质，其包括通过执行该多个网络流量序列和该计算机处理使用模式指令序列在该虚拟机上拟真一个或多个应用程序的操作。
17.权利要求16的计算机可读介质，其包括将由该多个VNIC执行该多个网络流量序列与由该虚拟机中的该多个虚拟处理核心执行该计算机处理使用模式指令序列同步。
18.权利要求17的计算机可读介质，其中该多个网络流量模式中的每一个包括与执行仿真用户动作相关联的网络流量活动，该仿真用户动作与该一个或多个应用程序相关联。
19.权利要求18的计算机可读介质，其进一步包括通过以由包括在该计算机处理使用模式中的执行参数指定的方式在该一个或多个虚拟处理核心上执行该使用模式指令序列来在该虚拟机上拟真该一个或多个应用程序的操作。
20.权利要求15的计算机可读介质，其中该多个网络流量模式和多个计算机处理使用模式由用户生成。
CN201780021733.5A 2016-04-06 2017-03-22 用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质 Active CN109416639B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US15/092,575 2016-04-06
US15/092,575 US10341215B2 (en) 2016-04-06 2016-04-06 Methods, systems, and computer readable media for emulating network traffic patterns on a virtual machine
PCT/US2017/023625 WO2017176455A1 (en) 2016-04-06 2017-03-22 Methods, systems, and computer readable media for emulating network traffic patterns on a virtual machine

Publications (2)

Publication Number Publication Date
CN109416639A true CN109416639A (zh) 2019-03-01
CN109416639B CN109416639B (zh) 2023-10-27

Family

ID=59998929

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780021733.5A Active CN109416639B (zh) 2016-04-06 2017-03-22 用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质

Country Status (4)

Country Link
US (1) US10341215B2 (zh)
CN (1) CN109416639B (zh)
GB (1) GB2565673B (zh)
WO (1) WO2017176455A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112235782A (zh) * 2020-10-16 2021-01-15 蜂助手股份有限公司 一种防止手机刷量的方法及系统

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10229039B2 (en) * 2016-10-27 2019-03-12 International Business Machines Corporation Testing a virtual network function by a virtual network tester
US10374934B2 (en) * 2016-12-16 2019-08-06 Seetharaman K Gudetee Method and program product for a private performance network with geographical load simulation
EP3747178A1 (en) * 2018-02-01 2020-12-09 Gsx Participations Sa Monitoring of iot simulated user experience
US10353804B1 (en) * 2019-01-22 2019-07-16 Capital One Services, Llc Performance engineering platform and metric management
US11106505B2 (en) * 2019-04-09 2021-08-31 Vmware, Inc. System and method for managing workloads using superimposition of resource utilization metrics
CN110324203B (zh) * 2019-06-18 2022-08-02 哈尔滨工业大学（威海） 一种多通道高精度网络流量生成装置
US11689551B2 (en) * 2020-06-26 2023-06-27 AppCensus, Inc. Automatic identification of applications that circumvent permissions and/or obfuscate data flows
US11323354B1 (en) 2020-10-09 2022-05-03 Keysight Technologies, Inc. Methods, systems, and computer readable media for network testing using switch emulation
US11483227B2 (en) 2020-10-13 2022-10-25 Keysight Technologies, Inc. Methods, systems and computer readable media for active queue management
US11855872B2 (en) * 2021-07-02 2023-12-26 Keysight Technologies, Inc. Methods, systems, and computer readable media for network traffic generation using machine learning
CN116132328A (zh) * 2023-02-10 2023-05-16 北京安锐卓越信息技术股份有限公司 网络压力测试方法、装置、存储介质及电子设备

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040243338A1 (en) * 2003-05-30 2004-12-02 Sabiers Mark L. Simulation of network service test environments
CN102148716A (zh) * 2010-02-05 2011-08-10 中国联合网络通信集团有限公司 一种点对点系统网络性能测试方法及其系统
CN103188116A (zh) * 2011-12-31 2013-07-03 中国移动通信集团公司 一种刀片服务器的网络性能检测方法和系统
CN103248535A (zh) * 2013-04-28 2013-08-14 华为技术有限公司 一种云系统测试方法及装置
US20140298335A1 (en) * 2013-03-27 2014-10-02 Ixia Methods, systems, and computer readable media for emulating virtualization resources
CN105144118A (zh) * 2013-03-18 2015-12-09 微软技术许可有限责任公司 应用测试和分析

Family Cites Families (130)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5812780A (en) 1996-05-24 1998-09-22 Microsoft Corporation Method, system, and product for assessing a server application performance
US6542854B2 (en) 1999-04-30 2003-04-01 Oracle Corporation Method and mechanism for profiling a system
US6990663B1 (en) 2000-06-08 2006-01-24 International Business Machines Corporation Hypervisor virtualization of OS console and operator panel
US6654699B2 (en) 2000-12-29 2003-11-25 Microsoft Corporation Computer network testing system and method using client playback of edited network information
US6769054B1 (en) 2001-02-26 2004-07-27 Emc Corporation System and method for preparation of workload data for replaying in a data storage environment
US6865731B2 (en) 2001-05-30 2005-03-08 International Business Machines Corporation Method and computer program product for testing application program software
US7090749B2 (en) 2001-07-31 2006-08-15 International Business Machines Corporation Method and apparatus for simulating application workloads on an e-business application server
US6792393B1 (en) 2001-12-03 2004-09-14 At&T Corp. System and method for diagnosing computer system operational behavior
US6782515B2 (en) 2002-01-02 2004-08-24 Cadence Design Systems, Inc. Method for identifying test points to optimize the testing of integrated circuits using a genetic algorithm
US20030182408A1 (en) 2002-02-15 2003-09-25 Qinglong Hu Load test system for a server and method of use
US20040015600A1 (en) 2002-02-21 2004-01-22 Ashutosh Tiwary Workload post-processing and parameterization for a system for performance testing of N-tiered computer systems using recording and playback of workloads
US7277395B2 (en) 2002-04-25 2007-10-02 Ixia Method and apparatus for wireless network load emulation
US7313793B2 (en) 2002-07-11 2007-12-25 Microsoft Corporation Method for forking or migrating a virtual machine
US7159184B2 (en) 2002-07-31 2007-01-02 Hewlett-Packard Development Company, L.P. Method and graphical user interface for creating a configuration file used to allocate computer system resources among workloads
US8122106B2 (en) 2003-03-06 2012-02-21 Microsoft Corporation Integrating design, deployment, and management phases for systems
US9020801B2 (en) 2003-08-11 2015-04-28 Scalemp Inc. Cluster-based operating system-agnostic virtual computing system
KR20050053447A (ko) 2003-12-02 2005-06-08 엘지.필립스 엘시디 주식회사 액정 표시 장치 및 그 구동 방법
US7328134B1 (en) 2004-02-26 2008-02-05 Sprint Communications Company L.P. Enterprise integration test tool
US7630862B2 (en) 2004-03-26 2009-12-08 Microsoft Corporation Load test simulator
US7945657B1 (en) * 2005-03-30 2011-05-17 Oracle America, Inc. System and method for emulating input/output performance of an application
US7257811B2 (en) 2004-05-11 2007-08-14 International Business Machines Corporation System, method and program to migrate a virtual machine
US7506338B2 (en) 2004-08-30 2009-03-17 International Business Machines Corporation Method and apparatus for simplifying the deployment and serviceability of commercial software environments
US7603372B1 (en) 2004-10-29 2009-10-13 Netapp, Inc. Modeling file system operation streams
DE602004027516D1 (de) 2004-12-03 2010-07-15 St Microelectronics Srl Ein Verfahren zum Verwalten von virtuellen Maschinen in einer körperlichen Verarbeitungsmaschine, ein entsprechendes Prozessorsystem und Computerprogrammprodukt dafür
US20060159432A1 (en) 2005-01-14 2006-07-20 Citrix Systems, Inc. System and methods for automatic time-warped playback in rendering a recorded computer session
US7865908B2 (en) 2005-03-11 2011-01-04 Microsoft Corporation VM network traffic monitoring and filtering on the host
US7818150B2 (en) * 2005-03-11 2010-10-19 Hyperformix, Inc. Method for building enterprise scalability models from load test and trace test data
US7481361B2 (en) 2005-09-29 2009-01-27 International Business Machines Corporation Method and system for identifying unsafe synthetic transactions and modifying parameters for automated playback
US7519527B2 (en) 2005-10-31 2009-04-14 International Business Machines Corporation Method for a database workload simulator
US20070213966A1 (en) * 2006-03-13 2007-09-13 Finisar Corporation Traffic generator program
JP4849929B2 (ja) * 2006-03-28 2012-01-11 富士通株式会社 シナリオ作成プログラム
US7814495B1 (en) 2006-03-31 2010-10-12 V Mware, Inc. On-line replacement and changing of virtualization software
US7823152B2 (en) 2006-06-06 2010-10-26 International Business Machines Corporation System and method for collaborative hosting of applications, virtual machines, and data objects
US7735051B2 (en) * 2006-08-29 2010-06-08 International Business Machines Corporation Method for replicating and synchronizing a plurality of physical instances with a logical master
US8068602B1 (en) 2006-09-29 2011-11-29 Verint Americas, Inc. Systems and methods for recording using virtual machines
US8381209B2 (en) 2007-01-03 2013-02-19 International Business Machines Corporation Moveable access control list (ACL) mechanisms for hypervisors and virtual machines and virtual port firewalls
US20080189700A1 (en) 2007-02-02 2008-08-07 Vmware, Inc. Admission Control for Virtual Machine Cluster
JP4978233B2 (ja) 2007-02-22 2012-07-18 富士通セミコンダクター株式会社 シミュレータ開発システム及びシミュレータ開発方法
US20080221857A1 (en) 2007-03-05 2008-09-11 Andrea Casotto Method and apparatus for simulating the workload of a compute farm
US8181159B2 (en) * 2007-03-29 2012-05-15 Microsoft Corporation Test automation using virtual machines
US7730492B1 (en) 2007-05-03 2010-06-01 Oracle America, Inc. Method and system for running multiple virtual machines in a single process
US8954397B2 (en) 2007-05-03 2015-02-10 Oracle International Corporation Creation and replay of a simulation workload using captured workloads
US8145470B2 (en) 2007-06-27 2012-03-27 Microsoft Corporation Accelerated access device emulator access scheme in a hypervisor environment with child and root partitions
US8365184B2 (en) 2007-08-31 2013-01-29 Apple Inc. Multi-core resource utilization planning
US8131530B2 (en) 2007-09-28 2012-03-06 Oracle America, Inc. Mechanism for realistic application/network modeling using a workload description
US8191063B2 (en) 2007-09-30 2012-05-29 Symantex Corporation Method for migrating a plurality of virtual machines by associating files and state information with a single logical container
US20090119542A1 (en) 2007-11-05 2009-05-07 Advantest Corporation System, method, and program product for simulating test equipment
JP5245539B2 (ja) 2008-05-27 2013-07-24 富士通株式会社 仮想マシンの入出力エミュレーション機構
US7827438B2 (en) * 2008-06-10 2010-11-02 Microsoft Corporation Distributed testing system and techniques
US8230155B2 (en) 2008-06-26 2012-07-24 Microsoft Corporation Direct memory access filter for virtualized operating systems
US8086882B2 (en) * 2008-06-29 2011-12-27 Microsoft Corporation Energy measurement techniques for computing systems
US20100332212A1 (en) 2008-09-19 2010-12-30 Ori Finkelman Method and apparatus for sleep and wake of computer devices
US8572226B2 (en) 2008-12-17 2013-10-29 Sap Ag Enhancing network details using network monitoring scripts
US7979619B2 (en) 2008-12-23 2011-07-12 Hewlett-Packard Development Company, L.P. Emulating a line-based interrupt transaction in response to a message signaled interrupt
US8392916B2 (en) 2008-12-31 2013-03-05 International Business Machines Corporation Multiple layers of virtualization in a computing system
US8370835B2 (en) 2009-03-12 2013-02-05 Arend Erich Dittmer Method for dynamically generating a configuration for a virtual machine with a virtual hard disk in an external storage device
JP5293580B2 (ja) 2009-03-19 2013-09-18 日本電気株式会社 ウェブサービスシステム、ウェブサービス方法及びプログラム
US8146082B2 (en) 2009-03-25 2012-03-27 Vmware, Inc. Migrating virtual machines configured with pass-through devices
US8689211B2 (en) 2009-05-25 2014-04-01 International Business Machines Corporation Live migration of virtual machines in a computing environment
US8954487B2 (en) 2009-06-23 2015-02-10 Samsung Electronics Co., Ltd. Management server and method for providing cloud computing service
US8731896B2 (en) 2009-07-02 2014-05-20 Spirent Communications, Inc. Virtual testbed for system verification test
US8949791B2 (en) 2009-07-08 2015-02-03 Vmware, Inc. Distributed software testing using cloud computing resources
US8234469B2 (en) 2009-07-09 2012-07-31 Microsoft Corporation Backup of virtual machines using cloned virtual machines
US8386731B2 (en) 2009-09-14 2013-02-26 Vmware, Inc. Method and system for optimizing live migration of persistent data of virtual machine using disk I/O heuristics
US8635395B2 (en) 2009-09-14 2014-01-21 Vmware, Inc. Method of suspending and resuming virtual machines
US20110126193A1 (en) 2009-11-20 2011-05-26 Dell Products, Lp System and Method for Imaging and Provisioning of Information Handling System
JP5549237B2 (ja) 2010-01-21 2014-07-16 富士通株式会社 試験環境構築プログラム、試験環境構築方法、及び試験装置
JP5493125B2 (ja) 2010-02-05 2014-05-14 株式会社日立製作所 仮想化方法及び計算機
US8631404B2 (en) 2010-02-18 2014-01-14 Red Hat Israel, Ltd. Mechanism for downloading hypervisor updates via a virtual hardware device using existing virtual machine-host channels
US8990813B2 (en) * 2010-03-29 2015-03-24 Red Hat, Inc. Automated virtual machine image deployment and testing by accessing downloadable test packages and dynamically-changing test parameters
US8612633B2 (en) 2010-03-31 2013-12-17 Microsoft Corporation Virtual machine fast emulation assist
US8533531B2 (en) * 2010-06-10 2013-09-10 Microsoft Corporation Multimedia hardware emulation for application testing
WO2012020482A1 (ja) 2010-08-11 2012-02-16 富士通株式会社 バックアップ方法、情報処理装置及びプログラム
US20120054740A1 (en) 2010-08-31 2012-03-01 Microsoft Corporation Techniques For Selectively Enabling Or Disabling Virtual Devices In Virtual Environments
US9239765B2 (en) 2010-08-31 2016-01-19 Avaya Inc. Application triggered state migration via hypervisor
US20120060167A1 (en) 2010-09-08 2012-03-08 Salsburg Michael A Method and system of simulating a data center
WO2012044700A1 (en) 2010-10-01 2012-04-05 Huawei Technologies Co., Ltd. System and method for controlling the input/output of a virtualized network
JP5691390B2 (ja) 2010-10-25 2015-04-01 サンケン電気株式会社 電源装置およびプログラム
US9183046B2 (en) 2010-10-27 2015-11-10 Red Hat Israel, Ltd. Network address retrieval for live migration of a guest system in a virtual machine system
JP5463267B2 (ja) 2010-11-19 2014-04-09 株式会社日立製作所 仮想計算機システムおよび仮想計算機の移行方法
US8819678B2 (en) 2010-12-15 2014-08-26 Red Hat Israel, Ltd. Live migration of a guest from a source hypervisor to a target hypervisor
US8850430B2 (en) 2011-01-25 2014-09-30 International Business Machines Corporation Migration of virtual machines
US8805951B1 (en) 2011-02-08 2014-08-12 Emc Corporation Virtual machines and cloud storage caching for cloud computing applications
WO2012117453A1 (ja) 2011-03-03 2012-09-07 株式会社日立製作所 計算機システム、および、計算機システムにおける仮想計算機の最適配置方法
JP5585844B2 (ja) 2011-03-25 2014-09-10 株式会社日立製作所 仮想計算機の制御方法及び計算機
US8533714B2 (en) 2011-05-03 2013-09-10 International Business Machines Corporation Dynamic virtual machine domain configuration and virtual machine relocation management
JP2012243254A (ja) 2011-05-24 2012-12-10 Intelligent Willpower Corp バーチャルマシン提供システム
US8762113B2 (en) 2011-06-03 2014-06-24 Sony Computer Entertainment America Llc Method and apparatus for load testing online server systems
US9535817B2 (en) * 2011-06-10 2017-01-03 Microsoft Technology Licensing, Llc Application development environment for portable electronic devices
TWI476586B (zh) 2011-07-13 2015-03-11 Inst Information Industry 以雲端技術為基礎之測試系統、方法以及其電腦可讀取記錄媒體
US8813074B2 (en) 2011-08-05 2014-08-19 Vmware, Inc. Detecting and correcting network interruptions using network address translation
JP5648186B2 (ja) 2011-08-22 2015-01-07 インターナショナル・ビジネス・マシーンズ・コーポレーションＩｎｔｅｒｎａｔｉｏｎａｌ Ｂｕｓｉｎｅｓｓ Ｍａｃｈｉｎｅｓ Ｃｏｒｐｏｒａｔｉｏｎ トランザクションを再生するためのデータを生成する装置及び方法
US20130080999A1 (en) 2011-09-26 2013-03-28 Microsoft Corporation Automated Testing for Hosted Applications on Various Computing Platforms
US8694644B2 (en) 2011-09-29 2014-04-08 Nec Laboratories America, Inc. Network-aware coordination of virtual machine migrations in enterprise data centers and clouds
US20140289418A1 (en) 2011-10-10 2014-09-25 Ira Cohen Methods and systems for planning execution of an application in a cloud computing system
US9880868B2 (en) 2011-11-30 2018-01-30 Red Hat, Inc. Modifying an OS installer to allow for hypervisor-specific adjustment of an OS
US9280378B2 (en) 2011-11-30 2016-03-08 Red Hat, Inc. Adjustment during migration to a different virtualization environment
JP5786037B2 (ja) 2011-12-08 2015-09-30 株式会社日立製作所 仮想計算機の制御方法及び仮想計算機システム
JP5542788B2 (ja) 2011-12-13 2014-07-09 株式会社日立製作所 仮想計算機システムおよび仮想計算機の移行制御方法
US10514937B2 (en) 2012-01-05 2019-12-24 Vmware, Inc. Auto-discovery service and method of discovering applications within a virtual network
US20130191105A1 (en) 2012-01-20 2013-07-25 International Business Machines Coporation Virtual systems testing
US9323563B2 (en) 2012-02-28 2016-04-26 Red Hat Israel, Ltd. Determining virtual machine migration in view of a migration rule
CN104272698A (zh) 2012-03-08 2015-01-07 惠普发展公司，有限责任合伙企业 修改虚拟机通信
US9184981B2 (en) 2012-03-09 2015-11-10 Futurewei Technologies, Inc. System and apparatus for distributed mobility management based network layer virtual machine mobility protocol
JP5748349B2 (ja) 2012-03-16 2015-07-15 株式会社日立製作所 仮想計算機の制御方法及び仮想計算機システム
US8949830B2 (en) 2012-03-29 2015-02-03 International Business Machines Corporation Emulating a data center network on a single physical host with support for virtual machine mobility
US10333827B2 (en) 2012-04-11 2019-06-25 Varmour Networks, Inc. Adaptive session forwarding following virtual machine migration detection
US20130282354A1 (en) 2012-04-18 2013-10-24 Salman Yaniv Sayers Generating load scenarios based on real user behavior
US9286103B2 (en) 2012-04-21 2016-03-15 International Business Machines Corporation Method and apparatus for providing a test network as an IP accessible cloud service
US9223634B2 (en) 2012-05-02 2015-12-29 Cisco Technology, Inc. System and method for simulating virtual machine migration in a network environment
US8984341B1 (en) 2012-05-08 2015-03-17 Amazon Technologies, Inc. Scalable testing in a production system with autoscaling
JP2013242797A (ja) 2012-05-22 2013-12-05 Fujitsu Ltd 情報処理装置、情報処理方法および情報処理プログラム
US9110704B2 (en) 2012-05-31 2015-08-18 Red Hat Israel, Ltd. Pre-warming of multiple destinations for fast live migration
US9342328B2 (en) 2012-05-31 2016-05-17 International Business Machines Corporation Model for simulation within infrastructure management software
US8869157B2 (en) 2012-06-21 2014-10-21 Breakingpoint Systems, Inc. Systems and methods for distributing tasks and/or processing recources in a system
US9152532B2 (en) 2012-08-07 2015-10-06 Advanced Micro Devices, Inc. System and method for configuring a cloud computing system with a synthetic test workload
US8839042B2 (en) 2012-08-31 2014-09-16 Ca, Inc. Dynamic load calculation and predictive scaling
US10261888B2 (en) 2012-10-12 2019-04-16 Teradata Us, Inc. Emulating an environment of a target database system
US10067858B2 (en) 2012-10-12 2018-09-04 Vmware, Inc. Cloud-based software testing
RU2535172C2 (ru) * 2013-02-26 2014-12-10 Открытое Акционерное Общество "Информационные Технологии И Коммуникационные Системы" Способ предотвращения повторного использования пакетов цифровых данных в сетевой системе передачи данных
US20140013306A1 (en) 2013-04-20 2014-01-09 Concurix Corporation Computer Load Generator Marketplace
US9841983B2 (en) 2013-06-28 2017-12-12 Vmware, Inc. Single click host maintenance
US9524299B2 (en) 2013-08-12 2016-12-20 Ixia Methods, systems, and computer readable media for modeling a workload
US9628290B2 (en) 2013-10-09 2017-04-18 International Business Machines Corporation Traffic migration acceleration for overlay virtual environments
US9426284B2 (en) 2013-11-13 2016-08-23 Ixia Methods, systems, and computer readable media for call flow analysis using comparison level indicators
WO2015078566A1 (en) * 2013-11-27 2015-06-04 Gmc Software Ag System and method for testing data representation for different mobile devices
WO2015092847A1 (ja) 2013-12-16 2015-06-25 株式会社日立製作所 コンピュータシステムおよびその処理方法
RO130722A2 (ro) 2014-04-10 2015-11-27 Ixia, A California Corporation Metodă şi sistem pentru implementare hardware a pachetelor de date uniform amestecate
US9436566B2 (en) 2014-07-29 2016-09-06 Ixia Methods, systems, and computer readable media for scaling a workload
US9507616B1 (en) 2015-06-24 2016-11-29 Ixia Methods, systems, and computer readable media for emulating computer processing usage patterns on a virtual machine

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040243338A1 (en) * 2003-05-30 2004-12-02 Sabiers Mark L. Simulation of network service test environments
CN102148716A (zh) * 2010-02-05 2011-08-10 中国联合网络通信集团有限公司 一种点对点系统网络性能测试方法及其系统
CN103188116A (zh) * 2011-12-31 2013-07-03 中国移动通信集团公司 一种刀片服务器的网络性能检测方法和系统
CN105144118A (zh) * 2013-03-18 2015-12-09 微软技术许可有限责任公司 应用测试和分析
US20140298335A1 (en) * 2013-03-27 2014-10-02 Ixia Methods, systems, and computer readable media for emulating virtualization resources
CN103248535A (zh) * 2013-04-28 2013-08-14 华为技术有限公司 一种云系统测试方法及装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112235782A (zh) * 2020-10-16 2021-01-15 蜂助手股份有限公司 一种防止手机刷量的方法及系统
CN112235782B (zh) * 2020-10-16 2023-04-28 蜂助手股份有限公司 一种防止手机刷量的方法及系统

Also Published As

Publication number Publication date
GB201817757D0 (en) 2018-12-19
US10341215B2 (en) 2019-07-02
GB2565673A (en) 2019-02-20
WO2017176455A1 (en) 2017-10-12
US20170295084A1 (en) 2017-10-12
GB2565673B (en) 2021-10-27
CN109416639B (zh) 2023-10-27

Similar Documents

Publication Publication Date Title
CN109416639A (zh) 用于在虚拟机上拟真网络流量模式的方法、系统以及计算机可读介质
Abreu et al. A comparative analysis of simulators for the cloud to fog continuum
CN106484622B (zh) 测试方法、装置及系统
CN104811331B (zh) 一种可视化网络运维方法和装置
US11870658B2 (en) Method and apparatus for updating gateway resource, and IOT control platform
CN106874187B (zh) 代码覆盖率收集方法和装置
CN108829581A (zh) 应用程序测试方法、装置、计算机设备及存储介质
CN109074284A (zh) 用于按比例增减资源的方法和系统、以及计算机程序产品
CN109308552A (zh) 一种业务策略评估方法、装置及电子设备
CN107925701A (zh) 对于应用的事件通知
CN109981416A (zh) 一种区块链性能检测方法与系统
CN110471821A (zh) 异常变更检测方法、服务器及计算机可读存储介质
CN109165153A (zh) 一种高仿真证券业交易类系统的性能测试方法
CN107612962A (zh) 一种分布式仿真评估试验管理系统
CN106453506A (zh) 一种资源统一调度的试验系统及方法
CN103493437B (zh) 网络解析支援装置、网络试验装置、网络解析支援方法以及网络试验方法
US9507616B1 (en) Methods, systems, and computer readable media for emulating computer processing usage patterns on a virtual machine
WO2011088256A2 (en) Methods and apparatus for predicting the performance of a multi-tier computer software system
CN111813788A (zh) 信息的查询方法和装置、信息的同步方法和装置
CN103346978A (zh) 一种虚拟机网络带宽公平性和稳定性保障方法
CN109684211A (zh) 一种基于店铺维度的订单调度系统压力测试方法及装置
CN106471470A (zh) 一种模型驱动的基于亲和性的网络功能的方法和装置
CN109032850A (zh) 现场装置调试系统和现场装置调试方法
CN110324203A (zh) 一种多通道高精度网络流量生成装置
CN110493044A (zh) 一种可量化的态势感知的方法和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant