CN113515451A - 一种联锁工具软件的自动化测试方法 - Google Patents

一种联锁工具软件的自动化测试方法 Download PDF

Info

Publication number
CN113515451A
CN113515451A CN202110643539.9A CN202110643539A CN113515451A CN 113515451 A CN113515451 A CN 113515451A CN 202110643539 A CN202110643539 A CN 202110643539A CN 113515451 A CN113515451 A CN 113515451A
Authority
CN
China
Prior art keywords
file
tool software
data
test
interlocking tool
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110643539.9A
Other languages
English (en)
Inventor
王绍新
杨平
黎瀚泽
辛帆
雷贝贝
张国茹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casco Signal Cherngdu Ltd
Original Assignee
Casco Signal Cherngdu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casco Signal Cherngdu Ltd filed Critical Casco Signal Cherngdu Ltd
Priority to CN202110643539.9A priority Critical patent/CN113515451A/zh
Publication of CN113515451A publication Critical patent/CN113515451A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3684Test management for test design, e.g. generating new test cases
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3688Test management for test execution, e.g. scheduling of test suites
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/36Preventing errors by testing or debugging software
    • G06F11/3668Software testing
    • G06F11/3672Test management
    • G06F11/3692Test management for test results analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种联锁工具软件的自动化测试方法,涉及轨道交通联锁工具软测技术领域,包括用例设计步骤、参数配置步骤、指令生成步骤、用例测试步骤、目录检查步骤和数据分析步骤,是一种能解放测试人员、验证人员的人力,同时又能高效、准确地对联锁工作软件进行脚本测试进行自动化的检查和分析的联锁工具软件的自动化测试方法。

Description

一种联锁工具软件的自动化测试方法
技术领域
本发明涉及轨道交通联锁工具软件测试技术领域,确切地说涉及一种联锁工具软件的自动化执行验证测试方法。
背景技术
如今,我国“四纵四横”的高速铁路网络已基本成型,成为世界上规模最大、最现代化的高铁网。中国高铁正在引领世界高速铁路发展,无愧为一张亮丽的国家名片。随着研发的不断投入和技术的持续演进,联锁工具软件的更新换代使得其功能更加强大。随着联锁工具软件的功能越来越复杂,软件测试工作的压力也越来越大,测试的成本也相应越来越高,传统的人工测试已经很难满足日益增长的软件测试需求。
软件测试是软件项目的一个重要环节,也是确保软件质量的一个重要手段,可以提高软件的质量与可靠性。软件测试的手段主要为人工测试和自动化测试。传统的软件测试,即人工对软件进行测试,但是人工测试存在费时费力且效率低下,并且人工测试易产生主观错误等缺陷。当前市面上使用较多的自动化测试工具有QTP(Quick TestProfessional,软件功能自动测试工具)、WinRunner(企业级的功能测试工具)、QA Run(应用的功能测试工具)以及Test Partner等。以QTP为例,自动化测试用来执行重复的手动测试,用以检测应用程序是否能够达到预期的功能及正常运行,达到省时、省力、效率高以及方便灵活的优点;但是这些现有技术方法也存在着一定的局限性和缺点,比如它们都适用于特定的软件环境,而且工具脚本维护起来比较麻烦,对于不同用例需要重新编译脚本,且无法测试部分联锁工具的软件需求,另外,也存在某些自动化测试工具在使用上有较强的门槛(脚本难以编写),或者个别自动化测试软件授权费用高昂。
对于产品型的软件,每次发布一个新版本,其大部分功能和上一个版本相似,基于脚本的自动化测试具有可复现性好、可复用性高,尤其适用回归测试的特点,是减轻测试执行工作压力、提高测试效率的一种有效手段。
所以,如何实现一种既能解放测试人员、验证人员的人力,同时又能高效、准确地对联锁工具软件进行自动化的执行、检查验证和数据分析方法就变得越来越必要和紧迫。
发明内容
本发明的目的在于针对现有技术的不足、克服现有技术的缺点,提供一种能解放测试人员、验证人员的人力,同时又能高效、准确地对联锁工具软件进行自动化的执行、检查验证和数据分析的自动化执行验证测试方法。
本发明的目的是通过以下技术方案实现的:
本发明涉及一种联锁工具软件的自动化执行验证测试方法,包括以下步骤:
用例设计步骤,根据所有待测试联锁工具软件的功能分别设计若干相应的测试用例并形成带有用例目录的、用于存放所述测试用例的存储地址,建立用于存储被测试的工具软件运行后输出数据存储地址的生成目录;所述测试用例包括待测试的联锁工具软件执行各功能所需要的输入文件样本、配置文件样本和执行流程指令;
进一步的,所述输入文件包括文本文件、Xml文件、二进制文件以及Excel文件。
优选地,所述配置文件为包括联锁工具软件的配置信息的Tab文件。
参数配置步骤,选择要进行测试的联锁工具软件,并根据所述用例设计步骤中的用例目录选择对应被测试联锁工具软件的测试用例在存储文件的存储地址,以及根据所述生成目录选择设定被测试联锁工具软件运行后输出数据的存储地址;
指令生成步骤,根据所述参数配置步骤中选择的对应被测试联锁工具软件的测试用例在存储文件的存储地址调取每个对应的测试用例中所有的输入文件样本、配置文件样本和执行流程指令,再根据参数配置步骤中设定的被测试联锁工具软件运行后输出数据的存储地址生成被测试联锁工具软件运行输出数据输出的存储路径,生成包括输入文件、软件配置、运行流程和数据输出目录的测试指令;即测试指令可以按照测试用例的执行流程指令启动被测试的联锁工具软件文件调用测试用例中的配置文件样本对软件自动完成配置、并以输入文件样本作为输入数据开始运行,将运行后的输出数据按照存储路径输出到对应文件中;
用例测试步骤,根据指令生成步骤中生成的测试指令,启动被测试联锁工具软件对每个对应的测试用例进行运行,直至所有测试用例运行完毕,并将运行后的输出数据按照所述指令生成步骤中的存储路径分别输出并存储到对应文件中;
目录检查步骤,对所述用例测试步骤中被测试的联锁工具软件运行每个测试用例的输出数据进行回归分析与目录文件列表比较,分类标记并存储。
所述目录检查步骤,具体的,将每个测试用例本次进行用例测试所生成的输出数据与历史数据文件中的历史数据逐一进行对比分析;确认生成数据中的文件和历史数据相应目录中文件的对应关系,按文件名称相同(历史数据和生成数据都有)、历史数据有而生成数据没有、生成数据有而历史数据没有这三类进行区分存储。
数据分析步骤,将所述目录检查步骤的存储结果行数据分析和处理,具体的,对于文件名称相同的进行文件内容匹配比较,如果文件内容也一致,则标记为一致,写入测试报告,如果内容不一致,则需要进行下一步的详细文件内容比较分析;对于单独的文件直接写入测试报告。
所述对于文件名称相同的进行文件内容匹配比较,具体的,首先按照文本文件(含自定义格式文件)、二进制文件、电子表格文件三类判断所述目录检查步骤的存储结果中的的文件类型;
对于文本文件类型的文件,按照文件的大小以及校验和、文本行数、具体行内容等三个层次来依次进行匹配比较,根据相似度=2*相同元素数/(生成数据文件元素数+历史数据文件元素数)的标准来进行评估;
对于文本文件类型的文件,具体行内容是采用暴力检索算法进行比较评估,也就是从首字母开始挨个的将生成数据和历史数据的内容做比对。
对于二进制文件,直接按文件内容进行逐字节严格比较;
对于电子表格文件,依次按文件的大小和校验和、子表个数和名称、各子表行列数、各子表对应行列的单元格内容、各对应单元格的数据格式等5个层次来进行匹配比较。
与现有技术相比,上述技术方案包括以下创新点及有益效果(优点):
1、本发明这种方案设计了一个基于配置文件的联锁工具自动化测试方法,支持各种文件类型(Excel、文本、二进制、工具自定义文件等)的通用的数据分析比较方案,可以很好的完成用例执行与回归分析,可以适配目前各个类型的联锁工具软件,而不是只针对某一个工具有效;
2、本发明的自动化执行方案省去大量人工点击软件窗口进行确认测试执行的繁杂动作,可以调用自动化指令完成测试用例的自动执行,极大的减少人工操作的时间,减少人工失误,节约测试成本,非常有效的提高生产效率和生产质量。附图说明
本发明的前述和下文具体描述在结合以下附图阅读时变得更清楚,其中:
图1为本发明自动化测试一种基本方案的逻辑示意图。
具体实施方式
下面通过几个具体的实施例来进一步说明实现本发明目的技术方案,需要说明的是,本发明要求保护的技术方案包括但不限于以下实施例。
作为本发明一种具体的实施方案,本实施例这种联锁工具软件的自动化执行验证测试方法可以分为自动执行阶段、验证检查阶段和数据分析阶段,具体的,自动执行阶段包括用例设计步骤、参数配置步骤、指令生成步骤和用例测试步骤,这个阶段中,主要是通过测试用的用例、参配生成对联锁工具软件的指令,然后通过联锁工具软件对每个用例进行执行测试,完成测试的具体过程;验证检查阶段主要包括目录检查步骤,主要是将测试用例执行的结果进行聚类;数据分析阶段则主要包括数据分析步骤,对经过聚类的结果按类进行分析得到结果。
更为具体的,对应上述各阶段,本实施例的这种联锁工具软件的自动化执行验证测试方法,包括用例设计步骤、参数配置步骤、指令生成步骤、用例测试步骤、目录检查步骤和数据分析步骤。
所述用例设计步骤,根据所有待测试联锁工具软件的功能分别设计若干相应的测试用例并形成带有用例目录的、用于存放所述测试用例的存储地址,建立用于存储被测试的工具软件运行后输出数据存储地址的生成目录;所述测试用例包括待测试的联锁工具软件执行各功能所需要的输入文件样本、配置文件样本和执行流程指令。
其中,所述输入文件包括文本文件、Xml文件、二进制文件以及Excel文件;而所述配置文件为包括联锁工具软件的配置信息的Tab文件。
所述参数配置步骤,选择要进行测试的联锁工具软件,并根据所述用例设计步骤中的用例目录选择对应被测试联锁工具软件的测试用例在存储文件的存储地址,以及根据所述生成目录选择设定被测试联锁工具软件运行后输出数据的存储地址。
所述指令生成步骤,根据所述参数配置步骤中选择的对应被测试联锁工具软件的测试用例在存储文件的存储地址调取每个对应的测试用例中所有的输入文件样本、配置文件样本和执行流程指令,再根据参数配置步骤中设定的被测试联锁工具软件运行后输出数据的存储地址生成被测试联锁工具软件运行输出数据输出的存储路径,生成包括输入文件、软件配置、运行流程和数据输出目录的测试指令;即测试指令可以按照测试用例的执行流程指令启动被测试的联锁工具软件文件调用测试用例中的配置文件样本对软件自动完成配置、并以输入文件样本作为输入数据开始运行,将运行后的输出数据按照存储路径输出到对应文件中;
所述用例测试步骤,根据指令生成步骤中生成的测试指令,启动被测试联锁工具软件对每个对应的测试用例进行运行,直至所有测试用例运行完毕,并将运行后的输出数据按照所述指令生成步骤中的存储路径分别输出并存储到对应文件中;
所述目录检查步骤,对所述用例测试步骤中被测试的联锁工具软件运行每个测试用例的输出数据进行回归分析与目录文件列表比较,分类标记并存储。具体的,将每个测试用例本次进行用例测试所生成的输出数据与历史数据文件中的历史数据逐一进行对比分析;确认生成数据中的文件和历史数据相应目录中文件的对应关系,按文件名称相同、历史数据有而生成数据没有、生成数据有而历史数据没有这三类进行区分存储,其中,文件名称相同的情况在历史数据和生成数据都有。
所述数据分析步骤,将所述目录检查步骤的存储结果行数据分析和处理,具体的,对于文件名称相同的进行文件内容匹配比较,如果文件内容也一致,则标记为一致,写入测试报告,如果内容不一致,则需要进行下一步的详细文件内容比较分析;对于单独的文件直接写入测试报告。
对于文本文件类型的文件,按照文件的大小以及校验和、文本行数、具体行内容等三个层次来依次进行匹配比较,具体是根据相似度=2*相同元素数/(生成数据文件元素数+历史数据文件元素数)的标准来进行评估;
对于二进制文件,直接按文件内容进行逐字节严格比较;
对于电子表格文件,依次按文件的大小和校验和、子表个数和名称、各子表行列数、各子表对应行列的单元格内容、各对应单元格的数据格式等5个层次来进行匹配比较。
所述对于文件名称相同的进行文件内容匹配比较,具体的,首先按照文本文件、二进制文件、电子表格文件三类判断所述目录检查步骤的存储结果中的的文件类型,所述文本文件中包含自定义格式文件。
对于文本文件类型的文件,具体行内容是采用暴力检索算法进行比较评估,也就是从首字母开始挨个的将生成数据和历史数据的内容做比对。

Claims (7)

1.一种联锁工具软件的自动化执行验证测试方法,其特征在于,包括以下步骤:
用例设计步骤,根据所有待测试联锁工具软件的功能分别设计若干相应的测试用例并形成带有用例目录的、用于存放所述测试用例的存储地址,建立用于存储被测试的工具软件运行后输出数据存储地址的生成目录;所述测试用例包括待测试的联锁工具软件执行各功能所需要的输入文件样本、配置文件样本和执行流程指令;
参数配置步骤,选择要进行测试的联锁工具软件,并根据所述用例设计步骤中的用例目录选择对应被测试联锁工具软件的测试用例在存储文件的存储地址,以及根据所述生成目录选择设定被测试联锁工具软件运行后输出数据的存储地址;
指令生成步骤,根据所述参数配置步骤中选择的对应被测试联锁工具软件的测试用例在存储文件的存储地址调取每个对应的测试用例中所有的输入文件样本、配置文件样本和执行流程指令,再根据参数配置步骤中设定的被测试联锁工具软件运行后输出数据的存储地址生成被测试联锁工具软件运行输出数据输出的存储路径,生成包括输入文件、软件配置、运行流程和数据输出目录的测试指令;
用例测试步骤,根据指令生成步骤中生成的测试指令,启动被测试联锁工具软件对每个对应的测试用例进行运行,直至所有测试用例运行完毕,并将运行后的输出数据按照所述指令生成步骤中的存储路径分别输出并存储到对应文件中;
目录检查步骤,对所述用例测试步骤中被测试的联锁工具软件运行每个测试用例的输出数据进行回归分析与目录文件列表比较,分类标记并存储;
数据分析步骤,将所述目录检查步骤的存储结果行数据分析和处理,具体的,对于文件名称相同的进行文件内容匹配比较,如果文件内容也一致,则标记为一致,写入测试报告,如果内容不一致,则需要进行下一步的详细文件内容比较分析;对于单独的文件直接写入测试报告。
2.如权利要求1所述的一种联锁工具软件的自动化执行验证测试方法,其特征在于:所述输入文件包括文本文件、Xml文件、二进制文件以及Excel文件。
3.如权利要求1或2所述的一种联锁工具软件的自动化执行验证测试方法,其特征在于:所述配置文件为包括联锁工具软件的配置信息的Tab文件。
4.如权利要求1所述的一种联锁工具软件的自动化执行验证测试方法,其特征在于:所述目录检查步骤,具体的,将每个测试用例本次进行用例测试所生成的输出数据与历史数据文件中的历史数据逐一进行对比分析;确认生成数据中的文件和历史数据相应目录中文件的对应关系,按文件名称相同、历史数据有而生成数据没有、生成数据有而历史数据没有这三类进行区分存储。
5.如权利要求1所述的一种联锁工具软件的自动化执行验证测试方法,其特征在于:所述数据分析步骤中对于文件名称相同的进行文件内容匹配比较,具体的,首先按照文本文件、二进制文件、电子表格文件三类判断所述目录检查步骤的存储结果中的的文件类型;
对于文本文件类型的文件,按照文件的大小以及校验和、文本行数、具体行内容三个层次来依次进行匹配比较评估;
对于二进制文件,直接按文件内容进行逐字节严格比较;
对于电子表格文件,依次按文件的大小和校验和、子表个数和名称、各子表行列数、各子表对应行列的单元格内容、各对应单元格的数据格式来进行匹配比较。
6.如权利要求5所述的一种联锁工具软件的自动化执行验证测试方法,其特征在于:匹配比较评估是根据相似度=2*相同元素数/(生成数据文件元素数+历史数据文件元素数)的标准来进行的。
7.如权利要求5或6所述的一种联锁工具软件的自动化执行验证测试方法,其特征在于:对于文本文件类型的文件,具体行内容是采用暴力检索算法进行比较评估,也就是从首字母开始挨个的将生成数据和历史数据的内容做比对。
CN202110643539.9A 2021-06-09 2021-06-09 一种联锁工具软件的自动化测试方法 Pending CN113515451A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110643539.9A CN113515451A (zh) 2021-06-09 2021-06-09 一种联锁工具软件的自动化测试方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110643539.9A CN113515451A (zh) 2021-06-09 2021-06-09 一种联锁工具软件的自动化测试方法

Publications (1)

Publication Number Publication Date
CN113515451A true CN113515451A (zh) 2021-10-19

Family

ID=78065502

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110643539.9A Pending CN113515451A (zh) 2021-06-09 2021-06-09 一种联锁工具软件的自动化测试方法

Country Status (1)

Country Link
CN (1) CN113515451A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101551818A (zh) * 2009-04-14 2009-10-07 北京红旗中文贰仟软件技术有限公司 一种单向多映射文件匹配方法
CN103744781A (zh) * 2013-12-27 2014-04-23 北京交控科技有限公司 一种联锁软件的测试方法和测试系统
CN103970728A (zh) * 2013-02-01 2014-08-06 中国银联股份有限公司 一种文件的比对方法和系统
CN109522215A (zh) * 2018-10-12 2019-03-26 中国铁道科学研究院集团有限公司通信信号研究所 铁路信号系统安全苛求软件的自动化测试平台
CN109885488A (zh) * 2019-01-30 2019-06-14 上海卫星工程研究所 用例表驱动的卫星轨道计算软件自动化测试方法及系统
CN109902025A (zh) * 2019-03-25 2019-06-18 腾讯科技(深圳)有限公司 测试环境中文件处理方法、装置、存储介质和计算机设备
CN110096429A (zh) * 2019-03-18 2019-08-06 深圳壹账通智能科技有限公司 测试报告生成方法、装置、设备及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101551818A (zh) * 2009-04-14 2009-10-07 北京红旗中文贰仟软件技术有限公司 一种单向多映射文件匹配方法
CN103970728A (zh) * 2013-02-01 2014-08-06 中国银联股份有限公司 一种文件的比对方法和系统
CN103744781A (zh) * 2013-12-27 2014-04-23 北京交控科技有限公司 一种联锁软件的测试方法和测试系统
CN109522215A (zh) * 2018-10-12 2019-03-26 中国铁道科学研究院集团有限公司通信信号研究所 铁路信号系统安全苛求软件的自动化测试平台
CN109885488A (zh) * 2019-01-30 2019-06-14 上海卫星工程研究所 用例表驱动的卫星轨道计算软件自动化测试方法及系统
CN110096429A (zh) * 2019-03-18 2019-08-06 深圳壹账通智能科技有限公司 测试报告生成方法、装置、设备及存储介质
CN109902025A (zh) * 2019-03-25 2019-06-18 腾讯科技(深圳)有限公司 测试环境中文件处理方法、装置、存储介质和计算机设备

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
WEIXIN_39957805: "python excel对比_python项目实战:文件数据对比,小白看了都会,值得收藏", pages 1 - 4, Retrieved from the Internet <URL:https://blog.csdn.net/weixin_39957805/article/details/110058308> *
或许对了: "Python之filecmp模块-文件目录比较", pages 1 - 6, Retrieved from the Internet <URL:https://blog.csdn.net/wads23456/article/details/112634482> *
李元静: "fliecmp库:Python比较文件操作", pages 1 - 5, Retrieved from the Internet <URL:https://blog.csdn.net/liyuanjinglyj/article/details/116428048> *
林新发: "【工具脚本】python比较两个目录的文件差异、对比", pages 1 - 4, Retrieved from the Internet <URL:https://blog.csdn.net/linxinfa/article/details/90240952> *

Similar Documents

Publication Publication Date Title
US10572374B2 (en) System and method for automated software testing based on machine learning (ML)
CN106776515B (zh) 数据处理的方法及装置
CN108763091B (zh) 用于回归测试的方法、装置及系统
CN109376247B (zh) 一种基于关联规则的软件缺陷自动分类方法
CN107862327B (zh) 一种基于多特征的安全缺陷识别系统和方法
CN110543422B (zh) 一种用于fpr的软件包代码缺陷数据处理方法、系统及介质
CN113282513B (zh) 接口测试案例的生成方法、装置、计算机设备及存储介质
CN110990282B (zh) 一种自动化单元测试方法
CN117421217A (zh) 一种软件功能自动测试方法、系统、终端及介质
CN116541308B (zh) 一种回归测试方法及系统
CN117520148A (zh) 基于大型语言模型的测试用例生成系统
CN113515451A (zh) 一种联锁工具软件的自动化测试方法
CN111552641A (zh) 一种判断软件产品质量的方法、装置、设备及存储介质
CN113360388B (zh) 对无人机地面站软件的测试过程进行一体化管理的方法
CN113641573B (zh) 基于修订日志的程序分析软件自动化测试方法及系统
CN108763063B (zh) 一种无需缺陷标注数据的软件缺陷检测方法
CN111552639B (zh) 一种软件测试综合控制方法及系统
CN111667214B (zh) 基于二维码的货物信息获取方法、装置及电子设备
CN114661615A (zh) 一种fpga软件测试方法和设备
CN113284141A (zh) 用于缺陷检测的模型确定方法、装置和设备
CN113704093B (zh) 一种通用联锁软件测试用例生成方法
CN114791886B (zh) 一种软件问题跟踪方法和系统
CN113704093A (zh) 一种通用联锁软件测试用例生成方法
CN111427731B (zh) 一种自动化拆分码流及验证码流的测试方法和系统
CN115658463A (zh) 一种用例管理方法、装置、计算机设备以及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination