CN114840424A - 测试案例处理方法、装置、计算机系统和可读存储介质 - Google Patents

测试案例处理方法、装置、计算机系统和可读存储介质 Download PDF

Info

Publication number
CN114840424A
CN114840424A CN202210508156.5A CN202210508156A CN114840424A CN 114840424 A CN114840424 A CN 114840424A CN 202210508156 A CN202210508156 A CN 202210508156A CN 114840424 A CN114840424 A CN 114840424A
Authority
CN
China
Prior art keywords
target
information
test case
test
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210508156.5A
Other languages
English (en)
Inventor
王彩霞
李积宏
陈惠梅
边露
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Industrial and Commercial Bank of China Ltd ICBC
Original Assignee
Industrial and Commercial Bank of China Ltd ICBC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Industrial and Commercial Bank of China Ltd ICBC filed Critical Industrial and Commercial Bank of China Ltd ICBC
Priority to CN202210508156.5A priority Critical patent/CN114840424A/zh
Publication of CN114840424A publication Critical patent/CN114840424A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements

Abstract

本公开提供了一种测试案例处理方法、装置、计算机系统、计算机可读存储介质和计算机程序产品,可用于大数据、信息安全技术领域或其他领域。其中,该方法包括:响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,目标标签表征用于触发生成目标测试案例的标签,第二可视化页面中包括与生成目标测试案例相关的待配置信息;获取基于第二可视化页面输入的与待配置信息相关的目标配置信息;以及根据目标配置信息,生成目标测试案例。

Description

测试案例处理方法、装置、计算机系统和可读存储介质
技术领域
本公开涉及大数据、信息安全技术领域,更具体地,涉及一种测试案例处理方法、装置、计算机系统、计算机可读存储介质和计算机程序产品。
背景技术
随着智能设备的不断发展,与之相对应的软硬件测试工作也变得愈发的重要。测试案例,即测试用例,是指对一项特定的软件产品进行测试任务的描述,体现测试方案、方法、技术和策略。内容包括测试目标、测试环境、输入数据、测试步骤、预期结果、测试脚本等,并形成文档,用于测试某个程序路径是否满足某个特定需求。
在实现本公开构思的过程中,发明人发现相关技术中至少存在如下问题,测试案例编写困难,测试效率低。
发明内容
有鉴于此,本公开提供了一种测试案例处理方法、装置、计算机系统、计算机可读存储介质和计算机程序产品。
本公开的一个方面提供了一种测试案例处理方法,包括:响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,所述目标标签表征用于触发生成目标测试案例的标签,所述第二可视化页面中包括与生成所述目标测试案例相关的待配置信息;获取基于所述第二可视化页面输入的与所述待配置信息相关的目标配置信息;以及根据所述目标配置信息,生成所述目标测试案例。
本公开的另一个方面提供了一种测试案例处理装置,包括:跳转模块,用于响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,所述目标标签表征用于触发生成目标测试案例的标签,所述第二可视化页面中包括与生成所述目标测试案例相关的待配置信息;获取模块,用于获取基于所述第二可视化页面输入的与所述待配置信息相关的目标配置信息;以及第一生成模块,用于根据所述目标配置信息,生成所述目标测试案例。
本公开的另一方面提供了一种计算机系统,包括:一个或多个处理器;存储器,用于存储一个或多个程序,其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现根据本公开所述的测试案例处理方法。
本公开的另一方面提供了一种计算机可读存储介质,其上存储有计算机可执行指令,所述指令在被执行时用于实现根据本公开所述的测试案例处理方法。
本公开的另一方面提供了一种计算机程序产品,所述计算机程序产品包括计算机可执行指令,所述指令在被执行时用于实现根据本公开所述的测试案例处理方法。
根据本公开的实施例,通过采用了响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,目标标签表征用于触发生成目标测试案例的标签,第二可视化页面中包括与生成目标测试案例相关的待配置信息;获取基于第二可视化页面输入的与待配置信息相关的目标配置信息;以及根据目标配置信息,生成目标测试案例的技术手段,由于可以通过在可视化页面中进行相关配置,并结合配置的目标配置信息,自动生成测试案例,所以至少部分地克服了案例编写工作量大、专业性高的技术问题,进而达到了提高测试效率的技术效果。
附图说明
通过以下参照附图对本公开实施例的描述,本公开的上述以及其他目的、特征和优点将更为清楚,在附图中:
图1示意性示出了根据本公开实施例的可以应用测试案例处理方法的示例性系统架构;
图2示意性示出了根据本公开实施例的测试案例处理方法的流程图;
图3示意性示出了根据本公开实施例的测试案例生成方法的流程图;
图4示意性示出了根据本公开实施例的案例生成系统的系统架构图;
图5示意性示出了根据本公开的实施例的测试案例处理装置的框图;以及
图6示意性示出了根据本公开实施例的适于测试案例处理方法的计算机系统的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。
软件测试自动化能够提高测试效率,减少测试开销。自动生成测试案例是软件测试自动化的关键之一。
发明人在实现本公开构思的过程中发现,大部分自动生成测试案例的方法是针对编译器的测试案例自动化扩展,如ECPAG(针对嵌入式C编译器测试的测试案例生成工具)、TCAT(一种覆盖分析工具)等。该类方法对专业和技术的要求比较高,测试人员必须具有相应的编码能力才能运用该些方法,使得在测试设计阶段需要花费大量时间编写测试案例,降低了测试效率。
本公开的实施例提供了一种测试案例处理方法、装置、计算机系统、计算机可读存储介质和计算机程序产品。该方法包括响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,目标标签表征用于触发生成目标测试案例的标签,第二可视化页面中包括与生成目标测试案例相关的待配置信息;获取基于第二可视化页面输入的与待配置信息相关的目标配置信息;以及根据目标配置信息,生成目标测试案例。
图1示意性示出了根据本公开实施例的可以应用测试案例处理方法的示例性系统架构100。
需要注意的是,图1所示仅为可以应用本公开实施例的系统架构的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,根据该实施例的系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线和/或无线通信链路等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用,例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端和/或社交平台软件等(仅为示例)。
终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。
服务器105可以是提供各种服务的服务器,例如对用户利用终端设备101、102、103所浏览的网站提供支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的用户请求等数据进行分析等处理,并将处理结果(例如根据用户请求获取或生成的网页、信息、或数据等)反馈给终端设备。
需要说明的是,本公开实施例所提供的测试案例处理方法一般可以由服务器105执行。相应地,本公开实施例所提供的测试案例处理装置一般可以设置于服务器105中。本公开实施例所提供的测试案例处理方法也可以由不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群执行。相应地,本公开实施例所提供的测试案例处理装置也可以设置于不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群中。或者,本公开实施例所提供的测试案例处理方法也可以由终端设备101、102、或103执行,或者也可以由不同于终端设备101、102、或103的其他终端设备执行。相应地,本公开实施例所提供的测试案例处理装置也可以设置于终端设备101、102、或103中,或设置于不同于终端设备101、102、或103的其他终端设备中。
例如,用于形成第一可视化页面的相关服务可以原本存储在终端设备101、102、或103中的任意一个(例如,终端设备101,但不限于此)之中,或者存储在外部存储设备上并可以导入到终端设备101中。然后,终端设备101可以在本地执行本公开实施例所提供的测试案例处理方法,或者将用于形成第一可视化页面的相关服务发送到其他终端设备、服务器、或服务器集群,并由接收该用于形成第一可视化页面的相关服务的其他终端设备、服务器、或服务器集群来执行本公开实施例所提供的测试案例处理方法。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
需要说明的是,本公开测试案例处理方法、装置、计算机系统、计算机可读存储介质和计算机程序产品可用于大数据、信息安全技术领域,也可用于除大数据和信息安全技术领域之外的任意领域,本公开测试案例处理方法、装置、计算机系统、计算机可读存储介质和计算机程序产品的应用领域不做限定。
图2示意性示出了根据本公开实施例的测试案例处理方法的流程图。
如图2所示,该方法包括操作S201~S203。
在操作S201,响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,目标标签表征用于触发生成目标测试案例的标签,第二可视化页面中包括与生成目标测试案例相关的待配置信息。
根据本公开的实施例,第一可视化页面和第二可视化页面可表征同一页面的不同区域,也可以表征不同的页面。目标标签可以表现为设置于第一可视化页面中的链接形式的页面元素。通过点击目标标签,可以从第一可视化页面跳转至与选择的目标标签相对应的第二可视化页面。目标标签的数目可以为一个或多个。在目标标签的数目为多个的情况下,不同的目标标签可以表征用于触发生成不同的目标测试案例的标签。通过选择不同的目标标签,跳转到的第二可视化页面可以不同。目标测试案例例如可以包括基础功能类测试案例、流程类测试案例以及其他类别的测试案例等其中至少之一。基础功能类测试案例可以表征针对单个功能模块进行测试而生成的案例,基础功能类测试案例可以表征针对业务流程进行测试而生成的案例。
根据本公开的实施例,待配置信息例如可以包括前端页面布局属性信息、输入框属性信息、批量调度依赖属性信息、业务流程图属性信息以及其他功能属性信息等其中至少之一。前端页面布局属性信息可以提供对页面的文字、图形或表格进行格式设置的接口,实现对如字体、字号、颜色、纸张大小、方向以及页边距等其中至少之一进行设置。输入框属性信息可以提供对与输入框相关的属性信息进行设置的接口,实现对如输入内容的数据类型、数据长度等信息进行设置。批量调度依赖属性信息可以提供用于选择批量调度需依赖的业务属性信息的接口。业务流程图属性信息可以提供用于导入业务流程图的接口。
根据本公开的实施例,在目标标签表征用于触发生成基础功能类测试案例的标签的情况下,选择目标标签后可以跳转到包括前端页面布局属性、输入框属性、批量调度依赖属性等其中至少之一的第二可视化页面中。在目标标签表征用于触发生成流程类测试案例的标签的情况下,选择目标标签后可以跳转到包括业务流程图属性信息的第二可视化页面中。
在操作S202,获取基于第二可视化页面输入的与待配置信息相关的目标配置信息。
根据本公开的实施例,可以针对每个待配置信息预先定义多个可选项,目标配置信息可以表征用户从多个可选项中选择的目标可选项。也可以针对每个待配置信息设置可补充信息的输入框,目标配置信息可以表征输入该输入框的信息。
在操作S203,根据目标配置信息,生成目标测试案例。
根据本公开的实施例,在第二可视化页面中通过选择或填充的方式确定目标配置信息之后,可以基于预先定义的测试案例生成规则,结合目标配置信息,生成目标测试案例。
通过本公开的上述实施例,基于包括目标标签的第一可视化页面和包括待配置信息的第二可视化页面,可以构建得到一种易用又实用的案例生成系统。通过在可视化页面中进行相关配置,可以结合配置的目标配置信息,自动生成测试案例。通过可视化页面维护自动生成案例,实现过程简单、方便,可有效简化测试过程中案例编写工作量大的问题,并可避免测试案例编写人员与案例执行人员衔接不明导致的沟通不顺畅问题,具有很高的实用价值。
下面结合具体实施例,对图2所示的方法做进一步说明。
根据本公开的实施例,目标测试案例可以包括表征针对单个功能模块进行测试的基础功能类测试案例,待配置信息可以包括待配置属性信息和待配置业务信息。根据目标配置信息,生成目标测试案例可以包括:响应于接收到与待配置属性信息相关的第一目标属性信息以及与待配置业务信息相关的第一目标业务信息,通过第一案例生成模块,生成目标测试案例。
根据本公开的实施例,第一目标属性信息例如可以表征与待配置业务信息以及其他待配置页面属性信息的格式、类型、长度及其他属性信息等其中至少之一相关的信息。第一目标业务信息例如可以表征与待配置业务信息相关的具有实际意义的业务数据集。待配置业务信息可以包括根据需要生成的测试案例确定的预定义的业务属性信息。第一目标业务信息可以包括一个或多个业务数据集。
根据本公开的实施例,第一案例生成模块中可以预先定义有测试案例生成规则。在第一案例生成模块的作用下,可以基于案例生成规则,结合第一目标属性信息和第一目标业务信息,自动生成相应的基础功能类测试案例。
根据本公开的实施例,第一案例生成模块可以被设计为第二可视化页面中的一个可选择的标签。例如,可以在选择表征用于触发生成基础功能类测试案例的标签之后跳转到的第二可视化页面中设置一个表征“生成案例”的标签。在配置好第一目标属性信息和第一目标业务信息之后,通过点击选择该“生成案例”标签,可以自动生成与配置的第一目标属性信息和第一目标业务信息相对应的基础功能类测试案例。
通过本公开的上述实施例,可以结合配置的第一目标属性信息和第一目标业务信息,自动生成基础功能类测试案例。简化测试案例的编写,提高测试效率。
根据本公开的实施例,目标测试案例可以包括表征针对单个功能模块进行测试的基础功能类测试案例,待配置信息可以包括待配置属性信息和待配置业务信息。根据目标配置信息,生成目标测试案例还可以包括:响应于接收到针对批量维护业务信息的选择操作,获得根据第一预定义模板确定的多个第二目标业务信息。第一预定义模板根据待配置业务信息确定。根据接收到的与待配置属性信息相关的第二目标属性信息以及多个第二目标业务信息,通过第二案例生成模块,生成目标测试案例。
根据本公开的实施例,第一预定义模板可以包括根据预定义的业务属性信息和其信息格式等其中至少之一确定的模板。基于第一预定义模板,可以在需要配置的第一目标业务信息的数目为多个的情况下,对多个第一目标业务信息批量导入,以确定多个第二目标业务信息。第二目标属性信息与第一目标属性信息可表达相同的含义,关于第二目标属性信息的描述,可参考前述针对第一目标属性信息,在此不再赘述。
根据本公开的实施例,可以在选择表征用于触发生成基础功能类测试案例的标签之后跳转到的第二可视化页面中设置表征“批量维护”或“下载模板”的标签,通过点击选择该类标签,可以得到包括第一预定义模板的文件。该文件可以包括以第一预定义模板为表头,支持填入待配置业务信息的表格文件。在基于该文件填入待配置业务信息的情况下,可以通过导入文件的方式,批量导入需维护的多个第二目标业务信息。
根据本公开的实施例,第二案例生成模块中可以预先定义有测试案例生成规则。在第二案例生成模块的作用下,可以基于案例生成规则,结合第二目标属性信息和第二目标业务信息,自动生成相应的基础功能类测试案例。
根据本公开的实施例,第二案例生成模块可以被设计为第二可视化页面中的一个可选择的标签。例如,可以在第二可视化页面中设置一个表征“生成案例”的标签。在配置好第二目标属性信息和导入第二目标业务信息之后,通过点击选择该“生成案例”标签,可以自动生成与配置的第而目标属性信息和第而目标业务信息相对应的基础功能类测试案例。
通过本公开的上述实施例,可以结合配置的第二目标属性信息和第二目标业务信息,自动生成基础功能类测试案例。简化测试案例的编写,提高测试效率。
根据本公开的实施例,目标测试案例可以包括表征针对业务流程进行测试的流程类测试案例。根据目标配置信息,生成目标测试案例可以包括:响应于接收到针对导入流程信息的选择操作,获得根据第二预定义模板确定的目标业务流程信息。根据目标业务流程信息,通过工作流引擎模块,生成目标测试案例。
根据本公开的实施例,第二预定义模板可以定义绘制流程图所需要的各模块组件及其格式、功能等信息。第二预定义模板例如可以定义开始框、结束框、输入框、判断框及流程线等其中至少之一。
根据本公开的实施例,可以在选择表征用于触发生成流程类测试案例的标签之后跳转到的第二可视化页面中设置一个表征“导入流程图”的标签。通过点击该标签,可以从已有的文件中选择需要配置的流程图文件。也可以在选择表征用于触发生成流程类测试案例的标签之后跳转到的第二可视化页面中设置一个表征“下载模板”的标签。通过点击该标签,可以得到包括第二预定义模板的文件。
根据本公开的实施例,工作流引擎模块可以用于处理前端绘制的流程图,并可根据流程图生成流程类测试案例。
根据本公开的实施例,工作流引擎模块中可以预先定义有流程类测试案例的生成规则。在工作流引擎模块的作用下,可以基于案例生成规则,结合导入的流程图,自动生成相应的流程类测试案例。
通过本公开的上述实施例,可以结合配置的目标业务流程信息,自动生成流程类测试案例。简化测试案例的编写,提高测试效率。
根据本公开的实施例,待配置信息可以包括待配置接口信息,测试案例处理方法方法还可以包括:在接收到与待配置接口信息相关的接口类配置信息之后,响应于接收到针对生成报文的选择操作,生成与接口类配置信息相关的测试报文。通过调度引擎模块,对测试报文进行处理,生成接口测试报告。
根据本公开的实施例,对于基础功能类测试案例中可能存在的接口类配置信息进行测试时,可以通过生成测试报文的方式进行测试。可以在选择表征用于触发生成基础功能类测试案例的标签之后跳转到的第二可视化页面中设置表征“生成报文”的标签。在用户确定待配置信息中包括待配置接口信息,并针对待配置接口信息配置有接口类配置信息的情况下,可以通过点击选择“生成报文”标签,生成与接口类配置信息相关的测试报文。
根据本公开的实施例,调度引擎模块可以对生成的测试报文进行批量调度,并可自动化执行如后端接口测试、压力测试及其他可行性测试等其中至少一种测试,以及生成相应的测试报告,如接口测试报告等。
根据本公开的实施例,生成的测试报文可以存储在预定义目录中,提供查看和下载等功能。
通过本公开的上述实施例,对于接口类配置信息生成测试报文并执行测试过程,可以保证测试完整性,并可提高测试结果的准确度。
根据本公开的实施例,响应于接收到针对生成报文的选择操作,生成与接口类配置信息相关的测试报文可以包括:响应于接收到针对生成报文的选择操作,生成多个表征不同报文格式的格式选择标签。响应于接收到针对目标格式选择标签的选择操作,生成具有目标格式的测试报文。
根据本公开的实施例,格式选择标签例如可以包括表征Xml格式的标签、表征json格式的标签以及表征其他格式的标签等其中至少之一。对应于选择的目标格式选择标签,生成的测试报文可以包括Xml报文、json报文或其他格式的报文。
通过本公开的上述实施例,测试报文的多样性设计,可以增强测试过程的通用性,通过上述方法实现的测试案例的生成及处理方法,具有较高的使用价值和推广价值。
图3示意性示出了根据本公开实施例的测试案例生成方法的流程图。
如图3所示,该方法包括操作S301~S310。
在操作S301,在第一可视化页面中选择表征用于触发生成目标测试案例的目标标签。
在操作S302,判断目标测试案例是否是基础功能类测试案例?若是,则执行操作S303~S305;若否,则执行操作S307~S308。
在操作S303,判断是否选择批量维护业务信息?若是,则执行操作S304和S306;若否,则执行操作S305~S306。
需要说明的是,点击“下载模板”可以判定位选择“批量维护”。
在操作S304,通过第一预定义模板批量导入需维护的多个第二目标业务信息。
在操作S305,在选择表征用于触发生成基础功能类测试案例的标签之后跳转到的第二可视化页面中维护第一目标业务信息。
在操作S306,生成基础功能类测试案例。
在操作S307,通过流程引擎模块绘制业务流程图。
在操作S308,生成流程类测试案例。
在操作S309,判断是否选择生成测试报文?若是,则执行操作S310后结束流程;若否,则直接结束流程。
在操作S310,选择报文格式、导入测试数据文件、生成测试报文。
通过本公开的上述实施例,提供了一种基于业务基础功能及流程的测试案例的自动化生成方法。可以通过可视化页面配置、批量导入以及绘制工作流的形式自动生成测试案例,并可以根据需要生成测试报文,从而生成自动化测试脚本。对测试执行结果生成报表文件,可以使得不同版本的结果比对,结果分析简单明了。有效减轻了测试人员的工作量,提高了测试效率,有利于自动化测试及回归测试。
根据本公开的实施例,测试案例处理方法还可以包括:响应于通过监控模块检测到与目标测试案例相关的目标测试报告,通过消息模块向用户发送目标测试报告。
根据本公开的实施例,目标测试报告可以包括与目标测试案例相关的所有报告,或者可以包括与目标测试案例相关的具有异常信息的报告等。用户可以包括订阅相关信息的用户以及其他预定义用户等其中至少之一。
根据本公开的实施例,在基于包括目标标签的第一可视化页面和包括待配置信息的第二可视化页面构建得到的案例生成系统中,可以引入监控预警机制,在检测到目标测试报告之后,可以以邮件或短信的形式及时通知相关测试人员进行异常结果的分析。
通过本公开的上述实施例,可以及时将测试结果告知相关人员,优势是在测试发生异常时,有利于相关人员及时排除故障,提高测试效率。
根据本公开的实施例,测试案例处理方法还可以包括:响应于接收到与处理目标测试案例相关的目标操作信息,通过日志收集模块记录目标操作信息。
根据本公开的实施例,目标操作信息可以包括配置过程的配置信息,生成案例的过程中的案例名称、生成时间、测试结果以及与该案例相关的配置信息等其中至少之一。目标操作信息还可以包括与生成的测试报文相关的信息、与测试报文相关的配置信息、测试报告以及测试报告的存储信息等其中至少之一。
根据本公开的实施例,在基于包括目标标签的第一可视化页面和包括待配置信息的第二可视化页面构建得到的案例生成系统中,可以引入日志分析系统,对日志进行检索分析。
通过本公开的上述实施例,通过记录日志,可以更精准的分析测试的整个流程,便于后续优化处理。
图4示意性示出了根据本公开实施例的案例生成系统的系统架构图。
如图4所示,案例生成系统400为分布式架构系统,可以包括应用层410、接入层420、服务层430和数据层440。
根据本公开的实施例,案例生成系统可以采用SpringCloud(一系列框架的有序集合)框架,该框架可以提供服务发现注册中心、配置中心、消息总线、负载均衡、断路器、数据监控等功能。
根据本公开的实施例,应用层410可以提供用户登录的功能。可登录案例生成系统400的用户例如可以包括操作员、部门负责人和系统管理员。操作员例如可以执行与操作员相关的案例生成、报表查看的相关操作。部门负责人例如可以执行与本部门所有用户相关的案例生成、报表查看等操作。系统管理员例如具有授权和修改密码等功能。
根据本公开的实施例,接入层420可以提供协议转换模块421、访问控制模块422、Restful(Representational State Transfer,描述了一个架构样式的网络系统)接口423等模块。通过将SpringCloud框架与nginx(一种反向代理服务器)结合,可以实现系统的负载均衡。SpringCloud框架中的网关模块可以用于实现访问权限控制以及协议端口的过滤,保证系统的访问权限体系。
需要说明的是,常用的反向代理服务器还可以包括IIS、Apache等。Nginx相对来说优势在于轻量级、高性能、配置简单、启动容易几乎可做到7*24小时运行。
根据本公开的实施例,在服务层430中,可以使用SpringCloud框架的注册中心模块Eureka(一种微服务注册中心)保证各个微服务之间的注册联通。服务层430可以为案例生成系统400提供用户中心模块431、案例生成模块432、批量调度模块433、工作流引擎模块434和报表分析模块435等多个微服务,可以分别实现用户信息的管理、测试案例的生成、批量案例的执行、工作流案例的绘制以及测试结果报告的查看、下载以及不同版本测试结果比对。
需要说明的是,微服务注册中心Eureka,可以使用微服务注册中心Nacos、Zookeeper等代替。Nacos比Eureka多一个配置管理,其他完全可以替代。Zookeeper和Eureka的区别在于,Zookeeper是基于数据一致性高的CP(Consistency和Partitiontolerance,一致性和分区容错性)设计原则进行设计,Eureka是基于服务高可用AP(Availability和Partition tolerance,可用性和分区容错性)设计原则进行设计。
根据本公开的实施例,在案例生成系统400中引入Feign技术,可以保证各个服务之间协调调用期间能实现负载均衡功能。使用SpringCloud框架的Hystrix技术可以保证系统调用的容错性,进而可有效增强系统的健壮性。Feign是一种声明式、模板化的HTTP客户端。Hystrix是一个服务隔离组件,通过服务隔离来避免由于依赖延迟、异常,引起资源耗尽导致系统不可用的解决方案。Hystrix可以由Sentinel替换,Sentinel是面向分布式服务架构的高可用流量防护组件,可通过流量控制、熔断降级、系统负载保护等多个维度来保障服务之间的稳定性。
根据本公开的实施例,数据层440可以引入Redis 441、MySQL 442等技术,将常用的基础数据放置缓存,可有效减少与数据库的交互,提高系统的访问速率。
根据本公开的实施例,案例生成系统400中还可以引入监控模块451、消息模块452以及日志收集模块453等。监控模块451可以采用Zipkin(一个分布式链路跟踪系统)等技术,通过对sleuth(日志收集工具包)指标的监控,可以实时检查系统的健康状况。消息模块452可以引入Kafka、MQ等(一种消息队列)技术,利用其高吞吐的特性,应对高并发场景。消息模块452还可以实现系统的解耦,保证在发送短信、邮件等的情况下,不影响正常服务的使用。日志收集模块453可以采用ELK(ElasticSearch的简称)技术,将各个服务的日志统一收集至ElasticSearch数据库中,利用ElasticSearch检索快特点,更快更准更集中的分析出测试过程中的问题,便于更进一步分析测试过程中的问题。
通过本公开的上述实施例,提供的案例生成系统,通过提供一个可视化页面,在用户登录后可以根据需要选择案例类型,是属于基础功能类还是流程性案例,调用不同的服务生成对应案例。基于该系统生成测试案例的方法简单实用,且使用门槛低。
此外,案例生成系统采用SpringCloud分布式框架,并引入消息队列、日志分析、监控系统、短信系统等技术,结合相关前沿技术,实现的生成案例的方法集成度比较高,在案例生成的基础上还可以实现接口自动化和压力测试,通用性强,具有较高的使用价值和推广价值。
图5示意性示出了根据本公开的实施例的测试案例处理装置的框图。
如图5所示,测试案例处理装置500包括跳转模块510、获取模块520和生成模块530。
跳转模块510,用于响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面。目标标签表征用于触发生成目标测试案例的标签。第二可视化页面中包括与生成目标测试案例相关的待配置信息。
获取模块520,用于获取基于第二可视化页面输入的与待配置信息相关的目标配置信息。
第一生成模块530,用于根据目标配置信息,生成目标测试案例。
根据本公开的实施例,目标测试案例包括表征针对单个功能模块进行测试的基础功能类测试案例,待配置信息包括待配置属性信息和待配置业务信息。第一生成模块包括第一生成单元。
第一生成单元,用于响应于接收到与待配置属性信息相关的第一目标属性信息以及与待配置业务信息相关的第一目标业务信息,通过第一案例生成模块,生成目标测试案例。
根据本公开的实施例,目标测试案例包括表征针对单个功能模块进行测试的基础功能类测试案例,待配置信息包括待配置属性信息和待配置业务信息。第一生成模块还包括第一获得单元和第二生成单元。
第一获得单元,用于响应于接收到针对批量维护业务信息的选择操作,获得根据第一预定义模板确定的多个第二目标业务信息。第一预定义模板根据待配置业务信息确定。
第二生成单元,用于根据接收到的与待配置属性信息相关的第二目标属性信息以及多个第二目标业务信息,通过第二案例生成模块,生成目标测试案例。
根据本公开的实施例,目标测试案例包括表征针对业务流程进行测试的流程类测试案例。第一生成模块包括第二获得单元和第三生成单元。
第二获得单元,用于响应于接收到针对导入流程信息的选择操作,获得根据第二预定义模板确定的目标业务流程信息。
第三生成单元,用于根据目标业务流程信息,通过工作流引擎模块,生成目标测试案例。
根据本公开的实施例,待配置信息包括待配置接口信息。测试案例处理装置还包括第二生成模块和第三生成模块。
第二生成模块,用于在接收到与待配置接口信息相关的接口类配置信息之后,响应于接收到针对生成报文的选择操作,生成与接口类配置信息相关的测试报文。
第三生成模块,用于通过调度引擎模块,对测试报文进行处理,生成接口测试报告。
根据本公开的实施例,第二生成模块包括第四生成单元和第五生成单元。
第四生成单元,用于响应于接收到针对生成报文的选择操作,生成多个表征不同报文格式的格式选择标签;以及
第五生成单元,用于响应于接收到针对目标格式选择标签的选择操作,生成具有目标格式的测试报文。
根据本公开的实施例,测试案例处理装置还包括发送模块。
发送模块,用于响应于通过监控模块检测到与目标测试案例相关的目标测试报告,通过消息模块向用户发送目标测试报告。
根据本公开的实施例,测试案例处理装置还包括记录模块。
记录模块,用于响应于接收到与处理目标测试案例相关的目标操作信息,通过日志收集模块记录目标操作信息。
根据本公开的实施例的模块、单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,跳转模块510、获取模块520和生成模块530中的任意多个可以合并在一个模块/单元中实现,或者其中的任意一个模块/单元可以被拆分成多个模块/单元。或者,这些模块/单元中的一个或多个模块/单元的至少部分功能可以与其他模块/单元的至少部分功能相结合,并在一个模块/单元中实现。根据本公开的实施例,跳转模块510、获取模块520和生成模块530中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,跳转模块510、获取模块520和生成模块530中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
需要说明的是,本公开的实施例中测试案例处理装置部分与本公开的实施例中测试案例处理方法部分是相对应的,测试案例处理装置部分的描述具体参考测试案例处理方法部分,在此不再赘述。
图6示意性示出了根据本公开实施例的适于测试案例处理方法的计算机系统的框图。图6示出的计算机系统仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图6所示,根据本公开实施例的计算机系统600包括处理器601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。处理器601例如可以包括通用微处理器(例如CPU)、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器601还可以包括用于缓存用途的板载存储器。处理器601可以包括用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
在RAM 603中,存储有系统600操作所需的各种程序和数据。处理器601、ROM 602以及RAM 603通过总线604彼此相连。处理器601通过执行ROM 602和/或RAM 603中的程序来执行根据本公开实施例的方法流程的各种操作。需要注意,所述程序也可以存储在除ROM 602和RAM 603以外的一个或多个存储器中。处理器601也可以通过执行存储在所述一个或多个存储器中的程序来执行根据本公开实施例的方法流程的各种操作。
根据本公开的实施例,系统600还可以包括输入/输出(I/O)接口605,输入/输出(I/O)接口605也连接至总线604。系统600还可以包括连接至I/O接口605的以下部件中的一项或多项:包括键盘、鼠标等的输入部分606;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
根据本公开的实施例,根据本公开实施例的方法流程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读存储介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被处理器601执行时,执行本公开实施例的系统中限定的上述功能。根据本公开的实施例,上文描述的系统、设备、装置、模块、单元等可以通过计算机程序模块来实现。
本公开还提供了一种计算机可读存储介质,该计算机可读存储介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读存储介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现根据本公开实施例的方法。
根据本公开的实施例,计算机可读存储介质可以是非易失性的计算机可读存储介质。例如可以包括但不限于:便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
例如,根据本公开的实施例,计算机可读存储介质可以包括上文描述的ROM 602和/或RAM 603和/或ROM 602和RAM 603以外的一个或多个存储器。
本公开的实施例还包括一种计算机程序产品,其包括计算机程序,该计算机程序包含用于执行本公开实施例所提供的方法的程序代码,当计算机程序产品在电子设备上运行时,该程序代码用于使电子设备实现本公开实施例所提供的测试案例处理方法。
在该计算机程序被处理器601执行时,执行本公开实施例的系统/装置中限定的上述功能。根据本公开的实施例,上文描述的系统、装置、模块、单元等可以通过计算机程序模块来实现。
在一种实施例中,该计算机程序可以依托于光存储器件、磁存储器件等有形存储介质。在另一种实施例中,该计算机程序也可以在网络介质上以信号的形式进行传输、分发,并通过通信部分609被下载和安装,和/或从可拆卸介质611被安装。该计算机程序包含的程序代码可以用任何适当的网络介质传输,包括但不限于:无线、有线等等,或者上述的任意合适的组合。
根据本公开的实施例,可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例提供的计算机程序的程序代码,具体地,可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。程序设计语言包括但不限于诸如Java,C++,python,“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。在涉及远程计算设备的情形中,远程计算设备可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN),连接到用户计算设备,或者,可以连接到外部计算设备(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
以上对本公开的实施例进行了描述。但是,这些实施例仅仅是为了说明的目的,而并非为了限制本公开的范围。尽管在以上分别描述了各实施例,但是这并不意味着各个实施例中的措施不能有利地结合使用。本公开的范围由所附权利要求及其等同物限定。不脱离本公开的范围,本领域技术人员可以做出多种替代和修改,这些替代和修改都应落在本公开的范围之内。

Claims (12)

1.一种测试案例处理方法,包括:
响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,所述目标标签表征用于触发生成目标测试案例的标签,所述第二可视化页面中包括与生成所述目标测试案例相关的待配置信息;
获取基于所述第二可视化页面输入的与所述待配置信息相关的目标配置信息;以及
根据所述目标配置信息,生成所述目标测试案例。
2.根据权利要求1所述的方法,其中,所述目标测试案例包括表征针对单个功能模块进行测试的基础功能类测试案例,所述待配置信息包括待配置属性信息和待配置业务信息;
所述根据所述目标配置信息,生成所述目标测试案例包括:
响应于接收到与待配置属性信息相关的第一目标属性信息以及与待配置业务信息相关的第一目标业务信息,通过第一案例生成模块,生成所述目标测试案例。
3.根据权利要求1所述的方法,其中,所述目标测试案例包括表征针对单个功能模块进行测试的基础功能类测试案例,所述待配置信息包括待配置属性信息和待配置业务信息;
所述根据所述目标配置信息,生成所述目标测试案例还包括:
响应于接收到针对批量维护业务信息的选择操作,获得根据第一预定义模板确定的多个第二目标业务信息,其中,所述第一预定义模板根据所述待配置业务信息确定;以及
根据接收到的与所述待配置属性信息相关的第二目标属性信息以及所述多个第二目标业务信息,通过第二案例生成模块,生成所述目标测试案例。
4.根据权利要求1所述的方法,其中,所述目标测试案例包括表征针对业务流程进行测试的流程类测试案例;
所述根据所述目标配置信息,生成所述目标测试案例包括:
响应于接收到针对导入流程信息的选择操作,获得根据第二预定义模板确定的目标业务流程信息;以及
根据所述目标业务流程信息,通过工作流引擎模块,生成所述目标测试案例。
5.根据权利要求1所述的方法,其中,所述待配置信息包括待配置接口信息,所述方法还包括:
在接收到与所述待配置接口信息相关的接口类配置信息之后,响应于接收到针对生成报文的选择操作,生成与所述接口类配置信息相关的测试报文;以及
通过调度引擎模块,对所述测试报文进行处理,生成接口测试报告。
6.根据权利要求5所述的方法,其中,所述响应于接收到针对生成报文的选择操作,生成与所述接口类配置信息相关的测试报文包括:
响应于接收到针对生成报文的选择操作,生成多个表征不同报文格式的格式选择标签;以及
响应于接收到针对目标格式选择标签的选择操作,生成具有目标格式的测试报文。
7.根据权利要求1所述的方法,还包括:
响应于通过监控模块检测到与所述目标测试案例相关的目标测试报告,通过消息模块向用户发送所述目标测试报告。
8.根据权利要求1所述的方法,还包括:
响应于接收到与处理所述目标测试案例相关的目标操作信息,通过日志收集模块记录所述目标操作信息。
9.一种测试案例处理装置,包括:
跳转模块,用于响应于针对第一可视化页面中目标标签的选择操作,跳转到第二可视化页面,其中,所述目标标签表征用于触发生成目标测试案例的标签,所述第二可视化页面中包括与生成所述目标测试案例相关的待配置信息;
获取模块,用于获取基于所述第二可视化页面输入的与所述待配置信息相关的目标配置信息;以及
第一生成模块,用于根据所述目标配置信息,生成所述目标测试案例。
10.一种计算机系统,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
其中,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现权利要求1至8中任一项所述的方法。
11.一种计算机可读存储介质,其上存储有可执行指令,该指令被处理器执行时使处理器实现权利要求1至8中任一项所述的方法。
12.一种计算机程序产品,包括计算机可执行指令,所述指令在被执行时用于实现权利要求1至8中任一项所述的方法。
CN202210508156.5A 2022-05-10 2022-05-10 测试案例处理方法、装置、计算机系统和可读存储介质 Pending CN114840424A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210508156.5A CN114840424A (zh) 2022-05-10 2022-05-10 测试案例处理方法、装置、计算机系统和可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210508156.5A CN114840424A (zh) 2022-05-10 2022-05-10 测试案例处理方法、装置、计算机系统和可读存储介质

Publications (1)

Publication Number Publication Date
CN114840424A true CN114840424A (zh) 2022-08-02

Family

ID=82570955

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210508156.5A Pending CN114840424A (zh) 2022-05-10 2022-05-10 测试案例处理方法、装置、计算机系统和可读存储介质

Country Status (1)

Country Link
CN (1) CN114840424A (zh)

Similar Documents

Publication Publication Date Title
US8433782B2 (en) Simplifying determination of dependencies among SOA services
US10452463B2 (en) Predictive analytics on database wait events
CN113987074A (zh) 分布式服务全链路监控方法、装置、电子设备及存储介质
US11256590B1 (en) Agent profiler to monitor activities and performance of software agents
US11294740B2 (en) Event to serverless function workflow instance mapping mechanism
CN113760641A (zh) 业务监控方法、装置、计算机系统和计算机可读存储介质
CN113900834A (zh) 基于物联网技术的数据处理方法、装置、设备及存储介质
CN113076253A (zh) 一种测试方法和测试装置
CN108694120B (zh) 测试服务组件的方法和装置
CN114490268A (zh) 全链路监控方法、装置、设备、存储介质和程序产品
CN115357761A (zh) 链路追踪方法、装置、电子设备及存储介质
CN110717992B (zh) 调度模型的方法、装置、计算机系统和可读存储介质
US20180219752A1 (en) Graph search in structured query language style query
CN115202973A (zh) 应用运行状态的确定方法、装置、电子设备和介质
CN114840424A (zh) 测试案例处理方法、装置、计算机系统和可读存储介质
CN113032237A (zh) 数据处理方法及装置、电子设备和计算机可读存储介质
CN114116509A (zh) 程序分析方法、装置、电子设备和存储介质
CN113419887A (zh) 主机联机事务异常的处理方法及装置
CN114201508A (zh) 数据处理方法、数据处理装置、电子设备和存储介质
CN113595795A (zh) 网络通信方法、装置、系统、设备和介质
CN113392010A (zh) 公共组件测试方法、装置、电子设备及存储介质
CN113360825A (zh) WebUI自动化测试方法、装置、电子设备及存储介质
KR20220071173A (ko) 가상 서버들로부터 대용량 로그 파일들을 프로세싱하는 컴퓨터 시스템 및 방법
Mengistu Distributed Microservice Tracing Systems: Open-source tracing implementation for distributed Microservices build in Spring framework
CN116594968A (zh) 服务器冗余文件的清理方法、系统、设备、介质及产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination