CN105683938A - 记录应用测试 - Google Patents

记录应用测试 Download PDF

Info

Publication number
CN105683938A
CN105683938A CN201380080538.1A CN201380080538A CN105683938A CN 105683938 A CN105683938 A CN 105683938A CN 201380080538 A CN201380080538 A CN 201380080538A CN 105683938 A CN105683938 A CN 105683938A
Authority
CN
China
Prior art keywords
record
playback
test
described multiple
phase
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380080538.1A
Other languages
English (en)
Inventor
耶胡达·萨博格
斯维特拉娜·阿罗诺夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Antite Software Co., Ltd.
Original Assignee
Hewlett Packard Enterprise Development LP
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hewlett Packard Enterprise Development LP filed Critical Hewlett Packard Enterprise Development LP
Publication of CN105683938A publication Critical patent/CN105683938A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3692—Test management for test results analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/362—Software debugging
    • G06F11/3636—Software debugging by tracing the execution of the program
    • G06F11/364—Software debugging by tracing the execution of the program tracing values on a bus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3664—Environments for testing or debugging software
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/22—Detection or location of defective computer hardware by testing during standby operation or during idle time, e.g. start-up testing
    • G06F11/2273—Test methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G06F11/3414—Workload generation, e.g. scripts, playback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G06F11/3476—Data logging

Abstract

记录应用测试可包括创建多个记录，所述多个记录限定与被测应用(AUT)的多个交互，其中，所述多个记录是按顺序创建的。记录应用测试可包括在创建所述多个记录的同时回放所述多个记录中的每个记录以确定测试的结果。记录应用测试可包括分析和报告所述测试的结果。

Description

记录应用测试
背景技术
包括诸如网页的基于网络的应用的应用程序以及与应用相关的硬件通常在极端使用条件下被测试。此类条件可由模拟多个用户的同时运行应用的系统来提供。可通过运行程序来模拟用户，该程序例如为先前获取的脚本，其提供适当的用户输入并响应以实践应用。脚本获取系统核查用户动作以确定哪些动作应该被包含在脚本中。
附图说明
图1例示了根据本公开的记录应用测试的示例的框图。
图2例示了根据本公开的回放阶段的示例的框图。
图3例示了根据本公开的开发阶段的示例的框图。
图4例示了根据本公开的计算装置的示例的框图。
图5例示了根据本公开的用于记录应用测试的系统的示例的框图。
图6例示了根据本公开的用于记录应用测试的方法的示例的流程图。
具体实施方式
用于测试应用的工作流可包括记录阶段、开发阶段、回放阶段和分析阶段。在多个示例中，记录阶段可与回放阶段并行执行，并且开发阶段可与回放阶段并行执行，从而减少与执行工作流相关联的时间。
在多个示例中，工作流可创建可用于测试应用的脚本。也就是，记录阶段可创建脚本，回放阶段可执行脚本以确定脚本功能是否按照预期运作，并且开发阶段可识别未按照预期运作的脚本并且向脚本提供方案。然后，可使用该脚本来测试应用。
在多个先前方案中，用于测试应用的工作流可包括记录阶段、回放阶段、分析阶段和开发阶段。阶段是按顺序执行的。例如，记录阶段可在回放阶段开始之前开始并结束，回放阶段可在分析阶段开始之前开始并结束，并且分析阶段可在开发阶段开始之前开始并结束。与工作流相关联的时间可为与执行记录阶段、开发阶段、回放阶段和分析阶段相关联的时间的总和。例如，如果记录阶段花了5个时间单位来完成，开发阶段花了2个时间单位，回放阶段花了5个时间单位，并且分析阶段花了3个时间单位，则工作流可在15个时间单位内完成。时间单位可为秒、分钟和/或小时以及其他时间单位。
在本公开的多个示例中，记录阶段和回放阶段可被同时运行以减少执行记录阶段、开发阶段、回放阶段和/或分析阶段所需的时间。开发阶段和回放阶段可被同时运行以减少执行记录阶段、开发阶段、回放阶段和/或分析阶段所需的时间。
例如，工作流可在比与记录阶段、回放阶段、分析阶段和开发阶段相关联的时间的总和更少的时间内完成。如果记录阶段花了5个时间单位来完成，开发阶段花了2个时间单位，回放阶段花了5个时间单位，并且分析阶段花了3个时间单位，则在多个示例中，工作流可在少于15个时间单位内完成。可通过并行运行记录阶段与回放阶段并且通过并行运行开发阶段与回放阶段来减少与工作流的完成相关联的时间。
在多个示例中，通过减少与回放阶段相关联的时间，工作流可在比与记录阶段、开发阶段、回放阶段和分析阶段相关联的时间的总和更少的时间内完成。可通过在多个不同平台上同时回放测试的多个部分来减少与回放阶段的完成相关联的时间。
在本公开中，参照了构成本公开的一部分的附图，附图中以示意性方式示出了如何能够实施本公开的多个示例。以充分的细节描述了这些示例从而使本领域的普通技术人员能够实施本公开的示例，并且应理解的是，可使用其他示例并且可在不脱离本公开的范围的前提下做出步骤、电气和/或结构上的修改。
在此的附图遵循一定的编号规定：第一个数字对应于附图标号，而剩下的数字识别附图中的元件或组件。可添加、交换和/或删除在此的各个附图中示出的元件从而提供本公开的多个额外示例。此外，附图中提供的元件所占比重和相对比例旨在例示本公的示例而不应被视为是限制性的意义。
图1例示了根据本公开的记录应用测试的示例的框图。图1包括记录阶段100、开发阶段102、回放阶段104-1和回放阶段104-2。
图1包括开始时间108和结束时间110。连接记录阶段100和开发阶段102的线代表与运行记录阶段100、开发阶段102、回放阶段104-1和/或回放阶段104-2所需的时间相关联的时间线。也就是，记录阶段100可在开发阶段102之前的时间内运行，并且记录阶段100可与回放阶段104-1并行运行。
在记录阶段100中，例如测试开发者的IT人员可记录与被测应用(AUT)的多个交互。应用可由指令构成，可由计算装置运行该指令以执行多个功能。应用可为软件和/或硬件的组合。应用可包括单个应用或互相依赖的多个应用。应用可为基于网络的应用和/或基于桌面的应用。应用可在单个计算装置和/或多个计算装置上运行。
在多个示例中，应用可由图形用户界面(GUI)和/或逻辑单元构成。GUI可接收用户交互并将交互转发给逻辑单元。逻辑单元可基于接收到的交互运行多个指令。GUI可向用户显示该多个交互的运行的表示。在多个示例中，可通过与GUI和/或与逻辑单元交互来测试应用。例如，测试开发者可与GUI和/或逻辑单元交互以测试应用。
在多个示例中，记录阶段的输出可为通用脚本，例如，朴素(na'ive)脚本。如在此使用的，例如通用脚本和/或增强脚本的脚本可包括可被运行为在应用上执行多个测试的机器可运行指令和/或的硬件。增强脚本是已被强化的通用脚本。
通用脚本可为例如测试开发者与应用的交互的表示。通用脚本可用于复制测试开发者与应用的交互而不需要测试开发者以物理方式执行该交互。例如，测试开发者可经由计算装置以物理方式与应用交互一次以创建通用脚本。然后，可使用通用脚本以复制测试开发者与应用的交互而不需要测试开发者提供进一步的交互。通用脚本可被重复使用。
与应用的交互可包括执行与应用相关联的功能。例如，交互可包括：向应用提供用户名和密码作为身份验证过程的一部分；选择通过GUI呈现的链接；和/或与应用交互的其他示例。进一步参照图2限定记录阶段100。
例如可统称为回放阶段104的回放阶段104-1和回放阶段104-2可运行通用脚本和/或增强脚本的同时搜集关于AUT的信息。例如，回放阶段104-1可在多个不同计算装置上并行运行多个通用脚本。图2和图3进一步解释了回放阶段104-1和回放阶段104-2。
在开发阶段102中，可强化由记录阶段100创建的通用脚本。强化可包括参数化、相关和/或强化开发。例如，强化可包括模拟不同的输入场景、使脚本适应于不同平台和/或对脚本运行添加例如重复if/then条件的流逻辑。模拟不同用户的对通用脚本的强化可包括创建多个不同用户账号，从而允许使用多个不同用户账号来运行通用脚本。不同测试场景的强化可包括向通用脚本提供脚本所使用的参数的变量。例如，通用脚本可将文本输入到文本域中。输入的例如“HelloWorld”的文本可为参数。参数的变量可包括使例如“HelloWorld1234”的数字、例如“HelloWorld！#$”的符号和/或，例如“HelloWorld,.；”的标点符号与文本结合。在多个示例中，参数“HelloWorld”可用不同的文本替换。例如，参数“HelloWorld”可由“ABCDEFG”替换。
通过修改通用脚本与操作系统、网站和/或不同应用(除通用脚本可交互的其他目标之外)交互所使用的句法，可强化通用脚本以模拟应用在不同平台上的使用。例如，使用第一浏览器导航到网站的通用脚本可使用第一数量的命令。使用第二浏览器导航到网站的增强脚本可使用第二数量的命令。也就是，可通过用第二数量的命令替换第一数量的命令来强化通用脚本，其中第二数量的命令执行与第一数量的系统调用相同的功能但在第二浏览器上执行。
强化通用脚本可引起一个增强脚本的创建和/或多个增强脚本的创建。例如，通用脚本的强化可产生包括与三个不同浏览器交互的句法的一个增强脚本，或者可产生每个包括与三个浏览器中的一个浏览器交互的句法的多个增强脚本。在多个示例中，开发阶段102可由测试开发者执行并/或基于多个规则自动执行。
在分析阶段期间，对搜集的信息进行分析以确定通用脚本和/或增强脚本是否按照预期执行，例如，是否已通过了回放阶段。分析阶段可在记录阶段100之后、在回放阶段104-1之后、在开发阶段102之前和/或回放阶段104-2之后开始。
分析阶段可包括向测试开发者报告回放阶段104-1的结果。例如，可在分析阶段中经由一个计算装置和/或多个计算装置向测试开发者报告回放阶段的结果。报告可包括：脚本在应用上运行时的预期性能；脚本在应用上应用时的实际性能；脚本在应用上应用时的实际性能的例如测试失败状态或测试通过状态的解释；对于针对脚本的例如校正的可能修改的多个建议，做出这些修改以改变运行的脚本的行为。测试开发者可使用报告来理解脚本问题。
在开发阶段102中，当应用未能通过测试时，测试开发者可对通用脚本和/或增强脚本进行多个修改。测试开发者可重新记录与应用的多个交互以创建多个通用脚本并/或可在已对通用脚本进行多个修改之后重新使用在开发阶段102期间先前创建的通用脚本。可通过并行运行开发阶段102和回放阶段104-2来重新测试应用。基于通用脚本和/或增强脚本在应用上运行的次数，开发阶段102和回放阶段104-2可被运行该次数。
在多个示例中，记录阶段100和回放阶段104-2可同时运行以减少执行记录阶段100、开发阶段102、回放阶段104和/或分析阶段所需的时间。开发阶段102和回放阶段104-2可同时运行以减少执行记录阶段100、开发阶段102、回放阶段104和/或分析阶段所需的时间。
通过并行运行第一阶段和第二阶段，多个阶段可同时执行。例如，当回放阶段104-1的运行在记录阶段100的运行结束之前开始时，记录阶段100可与回放阶段104-1并行运行。例如，当回放阶段104-2的运行在开发阶段102的运行结束之前开始时，开发阶段102可与回放阶段104-2并行运行。
与按顺序运行多个阶段相比较，并行运行多个阶段可减少运行多个阶段所花的时间。图2和图3进一步限定了多个阶段的并行运行。
在多个示例中，记录阶段100、开发阶段102、回放阶段104和/或分析阶段可在不同计算装置上运行。例如，记录阶段100可在第一计算装置上运行。开发阶段102可在第二计算装置上运行。回放阶段104-1和回放阶段104-2可分别在第三计算装置和第四计算装置上运行，或者，回放阶段104-1和回放阶段104-2可在第三计算装置上运行。分析阶段可在第五计算装置上运行。在多个示例中，记录阶段100、开发阶段102、回放阶段104和分析阶段可在相同计算装置上运行。
图2例示了根据本公开的回放阶段的示例的框图。图2示出了类似于图1中的记录阶段100的记录阶段200以及类似于图1中回放阶段104-1的回放阶段204。
由记录阶段200创建的通用脚本可划分为多个部分。例如，通用脚本可通过步骤220-1、步骤220-2、…、和步骤220-N(例如，统称为步骤220)以及其他步骤划分为多个部分。每个步骤220可创建和/或划分通用脚本的一部分。例如，步骤220-1可创建通用脚本的第一部分，步骤220-2可创建通用脚本的第二部分，…，步骤220-N可创建通用脚本的第N部分。步骤中的每个可通过多个规则自动限定和/或由测试开发者限定。
测试开发者在进行记录的同时可指示步骤220-1的开始和步骤220-1的结束。例如，测试开发者可通过GUI指示步骤220-1的开始和/或步骤220-1的结束。在多个示例中，测试开发者通过GUI指示步骤220-1的开始和/或步骤220-1的结束，该GUI可为与AUT相关联的相同的GUI和/或与用于运行记录阶段200并/或制作通用脚本的软件相关联的不同的GUI。测试开发者还可指示步骤220-2、…、和/或步骤220-N的开始和/或步骤220-2、…、和/或步骤220-N的结束。
基础脚本和/或增强脚本可通过脚本运行引擎划分为多个部分。在多个示例中，脚本运行引擎可使用逻辑将脚本划分为多个部分。例如，脚本运行引擎可关联可将脚本划分为多个部分的多个逻辑规则。
在多个示例中，通用脚本的多个部分可被发送到回放阶段204并/或在回放阶段204接收。例如，步骤220-1可创建通用脚本的可被发送到回放阶段204的部分228-1，步骤220-2可创建通用脚本的可被发送到回放阶段204的部分228-2，…，步骤220-N可创建通用脚本的可被发送到回放阶段204的部分228-N，例如，统称为通用脚本的部分228。部分228可共同地限定通用脚本。
在多个示例中，步骤220可创建多个通用脚本。例如，由步骤220-1创建的第一通用脚本可独立于由步骤220-2创建的第二通用脚本。多个通用脚本可在开发阶段被强化以创建多个增强脚本。
在多个示例中，回放阶段204可在第二阶段200开始的同时开始，或者可在创建步骤220-1之后开始。回放阶段204可包括步骤回放226-1、步骤回放226-2、…、和步骤回放226-N，例如，统称为步骤回放226。步骤回放226可与步骤220相关联。例如，步骤回放226-1可与步骤220-1相关联。
步骤回放226-1可回放(例如，运行)由步骤220-1创建的通用脚本的部分228-1。步骤回放226-1可在创建步骤220-1之后开始，步骤回放226-2可在创建步骤220-2之后开始，…，步骤回放226-N可在创建步骤回放220-N之后开始。在多个示例中，步骤回放226-1可与由测试开发者和/或由记录阶段200创建步骤220-2同时运行。也就是，步骤回放22601可与步骤220-2的创建并行运行。步骤回放226-2可与由测试开发者创建步骤220-3同时运行，…，并且/或步骤回放226-N-1可与由测试开发者创建步骤220-N同时运行。步骤回放226可与步骤220的创建并行运行。例如，步骤回放226-1可与由测试开发者创建步骤220-3同时运行。
分析阶段可分析在步骤回放226期间搜集的信息。例如，分析阶段可分析应用的行为作为脚本的运行的结果。应用的行为可用于确定与步骤回放226-1相关联的测试是通过还是失败。
失败的测试可指示与通用脚本相关联的问题。例如，如果步骤回放226-1回放向应用提供用户名和密码的通用脚本的部分228-1，如果应用拒绝了该用户名和密码，则确定脚本是否正常运作的测试失败。分析阶段可确定测试失败的发生、失败的源头和/或针对失败的方案。
分析阶段可产生包括测试的状态的报告。在测试失败的情况下，报告还可包括：测试失败、失败的源头和/或用于解决与失败相关联的问题的方案、以及其他可与应用相关联的数据。例如，报告230-1可包括在步骤回放226-1中进行的测试的状态，报告230-2可包括在步骤回放226-2中进行的测试的状态，…，并且/或报告230-N可包括在步骤回放226-N中进行的测试的状态，例如，被统称为报告230。
可经由计算装置将报告230传送给测试开发者。测试开发者可在报告230创建之后接收报告230中的每个。例如，可在创建步骤220-2之前、在创建步骤220-2时和/或在创建步骤220-2之后传送报告230-1。创建报告230可与步骤220的创建并行进行。一旦完成通用脚本的创建，测试开发者就可具有即时反馈，这是因为记录阶段200和回放阶段204可与记录阶段200并行运行。
在多个示例中，由步骤220创建的通用脚本可被强化以在多个不同平台上运作。例如，通用脚本可被强化以在平台244-1、平台244-2和/或平台244-3上运行，例如，被统称为平台244。通用脚本可被强化以在比此处示出的更多或更少的平台上运行。平台可为机器可读指令和/或硬件，其可用于运行和/或协助通用脚本的运行。例如，如果AUT为网站，则平台可为多个不同的网页浏览器，其可用于实施多个增强脚本以测试该网站。平台244可为操作系统、数据库、服务器和/或AUT所依赖的应用、以及其他平台示例。可在多个平台244上并行回放多个增强脚本。在多个平台244上并行回放的该多个脚本的运行可与步骤220的创建并行进行。
图3例示了根据本公开的开发阶段的示例的框图。图3包括类似于图1中的开发阶段102的开发阶段302以及类似于图1中的回放阶段104-1、回放阶段104-2和图2中的回放阶段204的回放阶段304。
在开发阶段302中，测试开发者可针对多个问题提供多个方案。例如，在开发阶段302中，可提供方案346-1、方案346-2、…、和方案346-N，例如，被统称为方案346。方案可与多个步骤和/或多个步骤回放相关联。例如，方案346-1可为针对基于由图2中的步骤回放226-1创建的报告而识别的问题的方案，步骤回放226-1回放了由图2中的步骤220-1创建的通用脚本的一部分。
开发阶段302可基于方案346创建通用脚本和/或增强脚本。例如，开发阶段302可基于方案346-1创建通用脚本的一部分。在多个示例中，开发阶段302可基于方案346-1创建增强脚本的部分328-1。增强脚本的该部分328-1可在步骤回放326-1中运行。在多个示例中，方案阶段342可再次使用由图2中的步骤220-1创建的通用脚本以测试方案346-1并创建增强脚本的部分328-1。方案346-2可创建增强脚本的一部分328-2，…，并且方案346-N可创建增强脚本的部分328-2。
步骤回放326的运行可与方案346的提供并行进行。例如，可在提供方案346-2之前、在提供方案346-2时和/或在已提供方案346-2之后运行步骤回放326-1。
可在步骤回放326-1中运行增强脚本的部分328-1的同时搜集数据，并且可经由计算装置向测试开发者提供多个报告。例如，可向测试开发者提供报告330-1、报告330-2、…、和报告330-N，例如，被统称为报告330。将报告330提供给开发者可与方案346的创建并行进行。例如，可在提供方案346-2之前、在提供方案346-2时和/或在已提供方案346-2之后将报告330-1提供给开发者。与方案346的创建并行地回放脚本并且提供报告可减少运行开发阶段302和回放阶段304所需的时间。
可在测试开发者提供方案346之后自动运行步骤回放326。例如，可在测试开发者提供方案346-1之后自动运行步骤回放326-1。自动运行步骤回放326-1可减少运行开发阶段302和回放阶段304所需的时间。
图4例示了根据本公开的计算装置的示例的框图。计算装置490可利用软件、硬件、固件和/或逻辑来执行在此描述的多个功能。
计算装置490可为被配置为记录应用测试的硬件和程序指令的任意组合。硬件例如可包括处理器资源491和/或存储器资源493，例如，机器可读介质(MRM)、数据库等。在此使用的处理器资源491可包括能够运行由存储器资源493存储的指令的任意数量的处理器。处理器资源491可集成在单个装置中或分布在多个装置中。例如机器可读指令(MRI)的程序指令可包括存储在存储器资源493上并且可由处理器资源491运行以实施期望的功能的指令，期望的功能例如为记录应用测试。
存储器资源493可与处理器资源491通信。在此使用的存储器资源493可包括能够存储可由处理器资源491运行的指令的任意数量的存储器组件。此类存储器资源493可为非暂时性MRM。存储器资源493可集成在单个装置中或分布在多个装置中。而且，存储器资源493可全部或部分地与处理器资源491集成在相同装置中，或者其可为分立的但可由该装置和处理器资源491访问。因此，应注意，计算装置490可在参与装置上、在服务器装置上、在服务器装置的集合上和/或在参与装置与服务器装置的组合上实施。
存储器资源493可经由例如路径492的通信链路与处理器资源491通信。通信链路492对于例如与处理器资源491相关联的计算装置的机器而言是本地的或远程的。逻辑通信链路492的示例可包括例如计算装置的机器内部的电子总线，其中，存储器资源493是经由电子总线与处理器资源491通信的易失性、非易失性、固定和/或可移动存储介质中的一种。
多个模块494、495、496可包括当由处理器资源491运行时可执行多个功能的MRI。多个模块494、495、496可为其他模块的子模块。例如，记录模块494和回放模块495可为子模块并/或包含在同一计算装置内。在另一示例中，多个模块494、495、496可包括位于分离且不同的位置处的独立模块，例如，MRM等。
多个模块494、495、496中的每个模块可包括当由处理器资源491运行时起到在此描述的对应引擎的作用的指令。例如，输入模块494可包括当由处理器资源491运行时起到记录引擎的作用的指令。
在图4的示例中，记录模块494可包括当由处理器资源491运行时创建多个记录的MRI，该多个记录限定与被测应用(AUT)的多个交互。该多个记录可用于创建可用于测试应用的通用脚本。在多个示例中，记录是按顺序创建的。
在多个示例中，可初始化多个资源。多个资源可用于回放多个记录中的每个记录。资源可为计算装置、不同的应用、数据库、网页浏览器和/或可用于回放记录(例如，运行脚本)的任意其他资源。资源可包括例如软件的机器可运行指令和/或可用于回放记录的硬件。可在创建多个记录之前和/或在创建多个记录期间初始化该多个资源。在多个示例中，可在回放多个记录之前初始化资源。在创建多个记录之前和/或创建多个记录期间初始化资源可允许多个记录使用该资源被回放，这可允许记录和记录的回放被并行运行。
回放模块495可包括由处理器资源491运行以在创建多个记录的同时回放该多个记录中的每个记录从而确定测试结果的MRI。可通过运行基于记录创建的脚本来回放多个记录。例如，基于第一记录创建的第一脚本(例如，通用脚本和/或增强脚本)可与由第二记录创建第二增强脚本同时运行。
分析模块495可包括由处理器资源491运行以分析和报告测试结果的MRI。该分析可基于在回放多个记录期间搜集的数据。报告可基于分析被创建并且经由计算装置被传送给测试开发者。
图5例示了根据本公开的用于记录应用测试的系统的示例的框图。系统570可包括计算系统572和/或多个引擎574、576、578。计算系统572可包括该多个引擎，例如记录引擎574、回放引擎576、分析引擎578等。计算系统572可包括比例示的更多的或更少的引擎以执行在此描述的各种功能。
多个引擎可包括被配置为执行在此描述的例如记录应用测试等的多个功能的硬件和程序的组合。程序可包括存储在例如机器可读介质等的存储器资源中的程序指令(例如软件、固件等)以及硬接线程序(例如，逻辑)。
记录引擎574可包括硬件和/或硬件与程序的组合，以创建限定与被测应用(AUT)的多个交互的多个记录。多个记录可按顺序创建。可由测试开发者划分多个交互并/或可使用脚本运行引擎自动划分多个交互，以将记录划分为脚本的多个部分。
回放引擎576可包括硬件和/或硬件与程序的组合，以开始在多个不同平台上并行回放多个记录中的每个记录。并行回放可在多个记录的创建期间开始。
分析引擎578可包括硬件和/或硬件与程序的组合，以分析和报告测试(例如，脚本)的与该多个记录相关联的多个部分的多个结果。可在相关联的记录的并行回放之后和/或在记录阶段终止之前报告脚本的运行的多个结果。记录阶段包括多个记录的创建。
在多个示例中，进行分析和报告分析的结果可包括推荐针对测试的失败的多个部分中的每个部分的方案。可在创建该多个记录的同时给出多个推荐。
图6例示了根据本公开的用于记录应用测试的方法的示例的流程图。在660中，限定与AUT的多个交互的多个记录可被创建。多个记录可按顺序创建。
在662中，可运行在多个不同平台上的多个记录的多个并行回放。多个并行回放中的每个并行回放可在创建对应的记录之后和在创建不同的记录之前开始。
在664中，可分析和报告测试的结果。测试开发者可经由计算装置接收测试的结果。测试开发者可使用测试的结果和测试的结果的分析以提供针对可能与失败的测试相关联的问题的方案。在666中，可提供针对测试的多个失败部分的多个方案。多个方案可按顺序提供。
在668中，与测试的多个失败部分相关联的多个记录的多个并行回放可在提供多个方案之后开始。与测试的多个失败部分相关联的多个记录的多个并行回放中的每个可在提供对应的方案之后开始。例如，与测试的第一失败部分相关联的记录的回放可在由测试开发者提供了解决与测试的第一失败部分相关联的问题的方案之后开始。在多个示例中，与测试的多个失败部分相关联的多个记录的多个并行回放中的每个可在提供针对测试的不同失败部分的方案之前开始。
在多个示例中，开始与测试的多个失败部分相关联的多个记录的多个并行回放可包括：在多个不同计算装置上托管(host)多个并行回放和多个不同平台。例如，如果第一回放是在第一平台上运行的，则第一计算装置可在第一平台上托管第一回放的运行，而第二计算装置可在第二平台上托管第二回放的运行。
在此使用的“逻辑”是用于执行在此描述的具体动作和/或功能等的可替换的或者额外的处理资源，其包括例如各种形式的晶体管逻辑、专用集成电路(ASIC)等的硬件，与存储在存储器中并且可由处理器运行的例如软件固件等的计算机可运行指令相反。
如在此使用，“一个”或“多个”事物可指一个或多个此类事物。例如，“多个小部件”可指一个或多个小部件。
上述文字说明书、示例和数据提供了本公开的方法和应用的描述以及系统和方法的使用。由于可在不脱离本公开的系统和方法的精神和范围的前提下做出许多示例，此说明书仅提出了许多种可能的实施例配置和实施方式中的一些。

Claims (15)

1.一种存储指令的非暂时性机器可读介质，所述指令用于记录应用测试并且能够由机器运行以使得所述机器：
创建多个记录，所述多个记录限定与被测应用(AUT)的多个交互，其中，所述多个记录是按顺序创建的；
在创建所述多个记录的同时回放所述多个记录中的每个记录，以确定测试的结果；以及
分析和报告所述测试的结果。
2.如权利要求1所述的介质，其中，所述指令是可运行为初始化能够回放所述多个记录中的每个记录的多个资源。
3.如权利要求2所述的介质，其中，在创建所述多个记录之前初始化所述多个资源。
4.如权利要求2所述的介质，其中，在回放所述多个记录之前初始化所述多个记录。
5.如权利要求1所述的介质，其中，可运行为创建所述多个记录的所述指令包括：通过基于多个规则划分记录来创建所述多个记录的指令。
6.如权利要求1所述的介质，其中，可运行为创建所述多个记录的所述指令包括：基于由用户提供的多个输入来创建所述多个记录的指令，所述多个输入通过信号指示所述多个记录中的每个记录的开始和结束。
7.一种用于记录应用测试的系统，所述系统包括与具有指令的非暂时性机器可读介质通信的处理资源，所述指令能够由所述处理资源运行以实施：
记录引擎，用于创建多个记录，所述多个记录限定与被测应用(AUT)的多个交互，其中，所述多个记录是按顺序创建的；
回放引擎，用于在多个不同平台上开始所述多个记录中的每个记录的并行回放，其中，所述并行回放在创建所述多个记录期间开始；以及
分析引擎，用于分析和报告测试的与所述多个记录相关联的多个部分的多个结果。
8.如权利要求7所述的系统，包括用于在相关联的记录的并行回放之后分析和报告所述测试的所述多个部分的所述多个结果的指令。
9.如权利要求8所述的系统，包括用于在记录阶段结束之前分析和报告所述测试的所述多个部分的所述多个结果的指令，其中，记录阶段包括所述多个记录的创建。
10.如权利要求7所述的系统，包括用于推荐针对所述测试的失败的所述多个部分中的每个部分的方案的指令，其中，多个推荐是在创建所述多个记录的同时给出的。
11.一种用于记录应用测试的方法，包括：
创建多个记录，所述多个记录限定与被测应用(AUT)的多个交互，其中，所述多个记录是按顺序创建的；
在多个不同平台上开始所述多个记录的多个并行回放，其中，所述多个并行回放中的每个并行回放在创建对应的记录之后以及在创建不同的记录之前开始；
分析和报告测试的结果；
提供针对所述测试的多个失败部分的多个方案；以及。
在提供所述多个方案之后，开始与所述测试的所述多个失败部分相关联的所述多个记录的多个并行回放。
12.如权利要求11所述的方法，其中，所述方法包括按顺序提供所述多个方案。
13.如权利要求12所述的方法，其中，与所述测试的所述多个失败部分相关联的所述多个记录的所述多个并行回放中的每个并行回放在提供对应的方案之后开始。
14.如权利要求13所述的方法，其中，与所述测试的所述多个失败部分相关联的所述多个记录的所述多个并行回放中的每个并行回放在提供针对所述测试的不同失败部分的方案之前开始。
15.如权利要求14所述的方法，其中，开始与所述测试的所述多个失败部分相关联的所述多个记录的所述多个并行回放包括：在多个不同计算装置上托管所述多个并行回放和所述多个不同平台。
CN201380080538.1A 2013-10-30 2013-10-30 记录应用测试 Pending CN105683938A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2013/067480 WO2015065364A1 (en) 2013-10-30 2013-10-30 Recording an application test

Publications (1)

Publication Number Publication Date
CN105683938A true CN105683938A (zh) 2016-06-15

Family

ID=53004781

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380080538.1A Pending CN105683938A (zh) 2013-10-30 2013-10-30 记录应用测试

Country Status (4)

Country Link
US (1) US10296449B2 (zh)
EP (1) EP3063650A4 (zh)
CN (1) CN105683938A (zh)
WO (1) WO2015065364A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9747191B1 (en) * 2015-10-05 2017-08-29 Amazon Technologies, Inc. Tool to replicate actions across devices in real time for improved efficiency during manual application testing
WO2017123218A1 (en) * 2016-01-13 2017-07-20 Entit Software Llc Determining a functional state of a system under test

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6477483B1 (en) * 2000-01-17 2002-11-05 Mercury Interactive Corporation Service for load testing a transactional server over the internet
US20050138646A1 (en) * 2003-12-18 2005-06-23 International Business Machines Corporation Method and system to create and access an object on a computing system
US6978218B1 (en) * 2003-10-13 2005-12-20 Sap Ag System and method for testing applications at the presentation layer
US20080270836A1 (en) * 2006-12-19 2008-10-30 Kallakuri Praveen State discovery automaton for dynamic web applications
CN101399821A (zh) * 2007-09-28 2009-04-01 国际商业机器公司 记录/重放系统、记录器/播放器、和方法
US20090313603A1 (en) * 2008-06-13 2009-12-17 Dov Tendler System And Method For Creating Virtual Callback Objects
US20100095161A1 (en) * 2008-10-14 2010-04-15 Hana Giat Test tool for concurrent web services and user interface testing
US20100162050A1 (en) * 2008-12-19 2010-06-24 Cathro Ian A Fault replay system and method
US20120198476A1 (en) * 2011-01-31 2012-08-02 Dmitry Markuza Evaluating performance of an application using event-driven transactions

Family Cites Families (82)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ATE157182T1 (de) * 1989-06-19 1997-09-15 Digital Equipment Corp Anordnung zur integration von anwendungsprogrammen in einem digitalen datenverarbeitungssystem
US5218605A (en) * 1990-01-31 1993-06-08 Hewlett-Packard Company Software modules for testing computer hardware and software
US5157782A (en) * 1990-01-31 1992-10-20 Hewlett-Packard Company System and method for testing computer hardware and software
US5483468A (en) 1992-10-23 1996-01-09 International Business Machines Corporation System and method for concurrent recording and displaying of system performance data
US6421793B1 (en) * 1999-07-22 2002-07-16 Siemens Information And Communication Mobile, Llc System and method for automated testing of electronic devices
US6449739B1 (en) * 1999-09-01 2002-09-10 Mercury Interactive Corporation Post-deployment monitoring of server performance
US6907546B1 (en) * 2000-03-27 2005-06-14 Accenture Llp Language-driven interface for an automated testing framework
US6502102B1 (en) * 2000-03-27 2002-12-31 Accenture Llp System, method and article of manufacture for a table-driven automated scripting architecture
US6701514B1 (en) * 2000-03-27 2004-03-02 Accenture Llp System, method, and article of manufacture for test maintenance in an automated scripting framework
US7231606B2 (en) * 2000-10-31 2007-06-12 Software Research, Inc. Method and system for testing websites
US7197559B2 (en) * 2001-05-09 2007-03-27 Mercury Interactive Corporation Transaction breakdown feature to facilitate analysis of end user performance of a server system
US20020198985A1 (en) * 2001-05-09 2002-12-26 Noam Fraenkel Post-deployment monitoring and analysis of server performance
US6738933B2 (en) * 2001-05-09 2004-05-18 Mercury Interactive Corporation Root cause analysis of server system performance degradations
US20040015600A1 (en) 2002-02-21 2004-01-22 Ashutosh Tiwary Workload post-processing and parameterization for a system for performance testing of N-tiered computer systems using recording and playback of workloads
US20040054715A1 (en) * 2002-09-16 2004-03-18 Paul Cesario Capturing and replaying internet application transactions using an embedded browser
US7716322B2 (en) * 2002-09-23 2010-05-11 Alcatel-Lucent Usa Inc. Automatic exploration and testing of dynamic Web sites
US6792460B2 (en) * 2002-10-02 2004-09-14 Mercury Interactive Corporation System and methods for monitoring application server performance
US7712074B2 (en) * 2002-11-21 2010-05-04 Bing Ren Automating interactions with software user interfaces
US7877681B2 (en) * 2002-12-05 2011-01-25 Borland Software Corporation Automatic context management for web applications with client side code execution
US20040172253A1 (en) * 2003-02-28 2004-09-02 Sun Microsystems, Inc., A Delaware Corporation Capture and playback web automation tool
US8261239B2 (en) * 2003-03-25 2012-09-04 International Business Machines Corporation Locating a testable object in a functional testing tool
US7107174B2 (en) * 2003-03-25 2006-09-12 International Business Machines Corporation Disambiguating like testable objects in a functional testing tool
JP2005026777A (ja) * 2003-06-30 2005-01-27 Pioneer Electronic Corp 情報記録装置、その方法、そのプログラム、および、そのプログラムを記録した記録媒体
US7552424B1 (en) * 2003-10-06 2009-06-23 Sap Ag Apparatus and method for identifying a system under test
US7653896B2 (en) * 2004-06-30 2010-01-26 Microsoft Corporation Smart UI recording and playback framework
US8239826B2 (en) * 2004-07-16 2012-08-07 International Business Machines Corporation Automating modular manual tests including framework for test automation
US20060101404A1 (en) * 2004-10-22 2006-05-11 Microsoft Corporation Automated system for tresting a web application
US7676508B2 (en) 2004-11-10 2010-03-09 Microsoft Corporation Method and system for recording and replaying input-output requests issued by a user-mode program
US7673292B2 (en) * 2005-01-11 2010-03-02 International Business Machines Corporation Auto conversion of tests between different functional testing tools
US8015549B2 (en) * 2005-05-10 2011-09-06 Novell, Inc. Techniques for monitoring application calls
WO2006132564A1 (en) * 2005-06-10 2006-12-14 Intel Corporation A cognitive control framework for automatic control of application programs exposing a graphical user interface
US7934200B2 (en) * 2005-07-20 2011-04-26 International Business Machines Corporation Enhanced scenario testing of an application under test
US20070240118A1 (en) * 2006-02-28 2007-10-11 Ido Keren System, method, and software for testing a software application
US8271962B2 (en) * 2006-09-12 2012-09-18 Brian Muller Scripted interactive screen media
US20080082629A1 (en) * 2006-10-03 2008-04-03 Oracle International Corporation Enabling Users to Repeatedly Perform a Sequence of User Actions When Interacting With a Web Server
US20080141221A1 (en) * 2006-12-08 2008-06-12 Microsoft Corporation Using recorder technology to find defects in software applications
US8135572B2 (en) * 2007-01-23 2012-03-13 Microsoft Corporation Integrated debugger simulator
US7783927B2 (en) * 2007-03-09 2010-08-24 International Business Machines Corporation Intelligent processing tools
US20150205882A1 (en) * 2007-03-19 2015-07-23 Dean Vukas Testing accessibility and compatibility of websites and web-based software
US8380665B2 (en) * 2011-02-24 2013-02-19 Oracle International Corporation Application workload capture and replay system
US8392890B2 (en) * 2007-10-15 2013-03-05 Software Research, Inc. Method and system for testing websites
US8473914B2 (en) * 2007-06-19 2013-06-25 International Business Machines Corporation Semi-automated update of application test scripts
CN101446909B (zh) 2007-11-30 2011-12-28 国际商业机器公司 用于管理任务事件的方法和系统
US8473919B2 (en) * 2008-01-31 2013-06-25 Ca, Inc. System and method for repeating program flow for debugging and testing
US20090249216A1 (en) * 2008-03-28 2009-10-01 International Business Machines Corporation Interacting with multiple browsers simultaneously using linked browsers controlled from a primary browser interface
US8495008B2 (en) * 2008-10-14 2013-07-23 International Business Machines Corporation Application-aware recording and replay
US20100153780A1 (en) * 2008-12-12 2010-06-17 Sergej Kirtkow Techniques for generating a reusable test script for a multiple user performance test
US8291068B2 (en) * 2009-01-14 2012-10-16 Hewlett-Packard Development Company, L.P. Automatic protocol detection
US8347147B2 (en) * 2009-03-09 2013-01-01 Wipro Limited Lifecycle management of automated testing
US8402318B2 (en) * 2009-03-24 2013-03-19 The Trustees Of Columbia University In The City Of New York Systems and methods for recording and replaying application execution
GB2470417B (en) * 2009-05-22 2011-08-03 S3 Res & Dev Ltd A test system for a set-top box
US8527953B2 (en) * 2009-06-11 2013-09-03 Accenture Global Services Limited Assessment system for choosing maintenance approaches for GUI-directed test scripts
US20110016456A1 (en) * 2009-07-14 2011-01-20 International Business Machines Corporation Generating additional user inputs for fault detection and localization in dynamic software applications
US8943478B2 (en) * 2009-07-14 2015-01-27 International Business Machines Corporation Fault detection and localization in dynamic software applications
US8516449B2 (en) * 2009-07-14 2013-08-20 International Business Machines Corporation Detecting and localizing security vulnerabilities in client-server application
US8578342B2 (en) * 2009-07-14 2013-11-05 International Business Machines Corporation Fault detection and localization in dynamic software applications requiring user inputs and persistent states
US20110022899A1 (en) * 2009-07-27 2011-01-27 Vitali Greenberg Producing or executing a script for an operation test of a terminal server
US8549478B2 (en) * 2009-12-02 2013-10-01 Hewlett-Packard Development Company, L.P. Graphical user interface input element identification
US20110173589A1 (en) * 2010-01-13 2011-07-14 Microsoft Corporation Cross-Browser Interactivity Testing
US20110191676A1 (en) * 2010-01-29 2011-08-04 Microsoft Corporation Cross-Browser Interactivity Recording, Playback, and Editing
US8756571B2 (en) * 2010-05-07 2014-06-17 Hewlett-Packard Development Company, L.P. Natural language text instructions
US8443292B2 (en) * 2010-06-11 2013-05-14 Hewlett-Packard Development Company, L.P. Scripting application with privacy mode coordination
US8533532B2 (en) * 2010-06-23 2013-09-10 International Business Machines Corporation System identifying and inferring web session events
US8621486B2 (en) * 2010-06-30 2013-12-31 Hewlett-Packard Development Company, L.P. Significance level automation
US8572095B2 (en) * 2010-10-19 2013-10-29 Hewlett-Packard Development Company, L.P. Adaptive object identification
GB201018991D0 (en) * 2010-11-10 2010-12-22 Net Magnus Ltd Opus
US8819631B2 (en) * 2011-01-13 2014-08-26 Hewlett-Packard Development Company, L.P. System and method for self dependent web automation
JP5476326B2 (ja) * 2011-03-08 2014-04-23 株式会社日立製作所 ウェブ操作記録・再現方法および装置
US9038026B2 (en) * 2011-10-17 2015-05-19 International Business Machines Corporation System and method for automating test automation
US8977904B2 (en) * 2012-02-17 2015-03-10 Hewlett-Packard Development Company, L.P. Generating a replayable testing script for iterative use in automated testing utility
US8850407B2 (en) * 2012-05-23 2014-09-30 Hewlett-Packard Development Company, L.P. Test script generation
CN104487935B (zh) * 2012-07-27 2018-04-24 慧与发展有限责任合伙企业 记录外部过程
US9355015B2 (en) * 2012-09-26 2016-05-31 Dynatrace Llc Technique for simulating an orientation change event in a test environment
US9047413B2 (en) * 2012-10-05 2015-06-02 Software Ag White-box testing systems and/or methods for use in connection with graphical user interfaces
US9129058B2 (en) * 2013-02-19 2015-09-08 Microsoft Technology Licensing, Llc Application monitoring through continuous record and replay
US20140317602A1 (en) * 2013-04-19 2014-10-23 International Business Machines Corporation Graphical User Interface Debugger with User Defined Interest Points
US10073761B2 (en) * 2013-09-30 2018-09-11 Entit Software Llc Legacy system
WO2015062631A1 (en) * 2013-10-29 2015-05-07 Nec Europe Ltd. Method and system for recording a multiuser web session and replaying a multiuser web session
US10901810B2 (en) * 2014-05-14 2021-01-26 Intel Corporation Event-based record and replay for advanced applications
US20160301732A1 (en) * 2015-04-13 2016-10-13 Cloudy Days Inc. Dba Nouvola Systems and Methods for Recording and Replaying of Web Transactions
US9721052B1 (en) * 2015-08-27 2017-08-01 Cadence Design Systems, Inc. Concurrent design process
US9684750B1 (en) * 2015-08-27 2017-06-20 Cadence Design Systems, Inc. Concurrent design process

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6477483B1 (en) * 2000-01-17 2002-11-05 Mercury Interactive Corporation Service for load testing a transactional server over the internet
US6978218B1 (en) * 2003-10-13 2005-12-20 Sap Ag System and method for testing applications at the presentation layer
US20050138646A1 (en) * 2003-12-18 2005-06-23 International Business Machines Corporation Method and system to create and access an object on a computing system
US20080270836A1 (en) * 2006-12-19 2008-10-30 Kallakuri Praveen State discovery automaton for dynamic web applications
CN101399821A (zh) * 2007-09-28 2009-04-01 国际商业机器公司 记录/重放系统、记录器/播放器、和方法
US20090313603A1 (en) * 2008-06-13 2009-12-17 Dov Tendler System And Method For Creating Virtual Callback Objects
US20100095161A1 (en) * 2008-10-14 2010-04-15 Hana Giat Test tool for concurrent web services and user interface testing
US20100162050A1 (en) * 2008-12-19 2010-06-24 Cathro Ian A Fault replay system and method
US20120198476A1 (en) * 2011-01-31 2012-08-02 Dmitry Markuza Evaluating performance of an application using event-driven transactions

Also Published As

Publication number Publication date
US20160246708A1 (en) 2016-08-25
EP3063650A1 (en) 2016-09-07
US10296449B2 (en) 2019-05-21
EP3063650A4 (en) 2017-05-31
WO2015065364A1 (en) 2015-05-07

Similar Documents

Publication Publication Date Title
US7810070B2 (en) System and method for software testing
CN105095059B (zh) 一种自动化测试的方法和装置
CN107526676B (zh) 一种跨系统测试方法及装置
CN112052172B (zh) 第三方通道的快速测试方法、装置和电子设备
CN104520812A (zh) 检测融合基础架构模型和正运行的融合基础架构之间的模式匹配的自动化方法
CN109710810A (zh) 变更管理方法、装置、设备和存储介质
CN106603296A (zh) 日志的处理方法及装置
CN112380255A (zh) 一种业务处理方法、装置、设备和存储介质
US20150286555A1 (en) System and method for converting the business processes to test-centric activity diagrams
CN106873957A (zh) 一种业务流程的处理方法和设备
CN105630667A (zh) 一种测试方法和终端设备
CN108460068A (zh) 报表导入导出的方法、装置、存储介质及终端
Garcia et al. A Requirements-to-Implementation Mapping Tool for Requirements Traceability.
CN115705255A (zh) 学习因果关系
CN105683938A (zh) 记录应用测试
CN109359045A (zh) 一种测试方法、装置、设备和存储介质
CN110209565A (zh) 一种元数据模型调试方法及其装置
WO2016114748A1 (en) Data comparison
Mariani et al. Generation of integration tests for self-testing components
Fagerström et al. Verdict machinery: On the need to automatically make sense of test results
CN101616153B (zh) 基于网页的操作信息交互方法、系统和装置
CN110362294A (zh) 开发任务执行方法、装置、电子设备及存储介质
CN110334014A (zh) 用于用户界面自动化测试方法、系统、服务器及存储介质
CN113900933A (zh) 一种测试方法和相关装置
CN115687054A (zh) 基于业务分割还原的自适应测试方法以及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20180613

Address after: American California

Applicant after: Antite Software Co., Ltd.

Address before: American Texas

Applicant before: HEWLETT PACKARD ENTERPRISE DEVELOPMENT LP

TA01 Transfer of patent application right
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160615

WD01 Invention patent application deemed withdrawn after publication