CN114168461A - 应用于国产操作系统的性能测试方法及测试系统 - Google Patents

应用于国产操作系统的性能测试方法及测试系统 Download PDF

Info

Publication number
CN114168461A
CN114168461A CN202111441186.0A CN202111441186A CN114168461A CN 114168461 A CN114168461 A CN 114168461A CN 202111441186 A CN202111441186 A CN 202111441186A CN 114168461 A CN114168461 A CN 114168461A
Authority
CN
China
Prior art keywords
test
report
performance
operating system
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111441186.0A
Other languages
English (en)
Inventor
夏欣悦
唐晓东
卢亮
楚铁新
陈妮
李金丽
张福媛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kirin Software Co Ltd
Original Assignee
Kirin Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kirin Software Co Ltd filed Critical Kirin Software Co Ltd
Priority to CN202111441186.0A priority Critical patent/CN114168461A/zh
Publication of CN114168461A publication Critical patent/CN114168461A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3684—Test management for test design, e.g. generating new test cases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3696—Methods or tools to render software testable

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明提供了一种应用于国产操作系统的性能测试方法及测试系统，属于软件性能测试技术领域。其中性能测试方法包括在国产操作系统中安装测试系统；选择测试工具，进行参数配置；根据参数进行性能测试；测试完成后，处理测试结果；以及根据测试结果生成测试报告等步骤。完成上述性能测试方法的测试系统包括测试模块、测试环境收集模块、数据处理模块和报告生成模块。使用本发明，测试人员能够更方便的执行测试、生成测试报告，解决性能测试不便、整理报告繁琐的问题。

Description

应用于国产操作系统的性能测试方法及测试系统
技术领域
本发明关于一种软件性能测试技术领域，尤其是一种应用于国产操作系统的性能测试方法及测试系统。
背景技术
性能测试是评估操作系统及硬件性能的测试类型。在实际测试过程中，首先由于性能测试使用的工具大多是开源的，依赖包、编译方式各不相同，需要测试人员花费长时间的学习成本来熟悉操作；其次各工具测试结果数据量大且具有很大的差异性，所以测试人员在测试完成后收集测试数据并生成测试报告需要花费大量的时间；第三为了便于区分测试数据以及确认测试数据有效性，需要记录测试环境信息和测试原始日志。
现有技术多数采用手动测试，人工收集整理数据并写入测试报告中，测试中容易因遗漏操作步骤导致测试失败、在整理测试报告时容易因数据量大导致出差错，总体来说并没有一套能够集测试、处理性能数据并生成测试报告的测试方案。
中国发明专利CN201711230584.1公开了一种操作系统性能自动化测试方法及装置，其中方法包括：接收执行系统性能测试的执行命令，基于执行命令解析与测试相关的参数信息，并根据所述参数信息确定测试所需的配置文件；获取预设的第一测试工具列表以及配置文件中的第二测试工具列表，基于参数信息在第二测试工具列表中筛选出符合预设条件的测试工具添加至第一测试工具列表；基于第一测试工具列表创建测试任务，并确定所述测试任务的配置文件；根据测试任务的配置文件执行测试任务。同时，该方法还可以自动生成测试报告和对比测试报告，且在测试方案定制的整个过程中不需要人工干预，可以在提高测试效率的同时降低人工成本，具体包括了创建测试任务、自动化测试和生成报告。但是在该发明技术中，测试报告的模板固定无法更改，缺少测试环境信息抓取。
发明内容
为解决上述问题，本发明的目的是提供一种应用于国产操作系统的性能测试方法，使得测试人员能够更方便的执行测试、生成测试报告，解决性能测试不便、整理报告繁琐的问题。
本发明的另一目的是提供一种测试系统，解决在国产操作系统中测试性能采用手动测试、手动收集数据、手动生成报告的问题。
为达到上述目的，本发明所采取的技术方案为：
一种应用于国产操作系统的性能测试方法，包括以下步骤：
S1、在国产操作系统中安装测试系统；
S2、选择测试工具，进行参数配置；
S3、根据参数进行性能测试；
S4、测试完成后，处理测试结果；
S5、根据测试结果生成测试报告。
进一步来说，步骤S2中，参数配置包括测试工具名称、测试路径、测试核心数。
步骤S3中，进行性能测试包括：
步骤S31：执行初始化操作，抓取测试日志；
步骤S32：安装测试工具所需的依赖包；
步骤S33：处理配置的参数信息；
步骤S34：抓取测试环境信息，并保存成用于查看的txt格式文档，以及用于生成测试报告的json格式文件；
步骤S35：根据参数编译测试工具；
步骤S36：根据参数信息执行测试。
步骤S4中，处理测试结果包括：
将原始的测试结果复制保存到results目录；以及
将到results目录的测试结果处理成json格式文件，用于生成测试报告。
步骤S5中，生成测试报告包括：
查看测试环境信息和results目录下的测试结果；
将测试环境信息和测试结果填写到测试报告文件模板的对应位置，测试环境信息json格式和测试结果json格式具有唯一key值，与测试报告文件中的key保持一一对应。
进一步来说，将测试结果处理成json格式文件后，进行清理测试环境步骤。
其中清理测试环境步骤包括：
执行清理操作，删除或卸载测试工具；
卸载依赖包；以及
在国产操作系统中保存系统日志，退出测试模块。
本发明还提供了一种用于完成上述性能测试方法的测试系统，包括：
测试模块：用于配置参数，并根据参数选择测试方法、调用测试环境收集模块和调用数据处理模块，进行性能测试；
测试环境收集模块，用于收集测试环境信息；
数据处理模块，用于接收测试模块传入的参数并进行数据处理；
报告生成模块，用于将数据处理模块处理后的数据生成报告。
其中，所述测试模块还用于对测试工具进行依赖包安装、抓取测试日志、编译测试工具。
本发明的有益效果是：
通过本发明所述的应用于国产操作系统的性能测试方法，能够顺利方便的完成系统的性能测试并迅速生成报告，可以有效提高时间利用率、节省整理报告时间。本发明的测试系统只需要配置少量信息就能实现性能测试的数据收集和生成报告，给性能测试带来了极大的便利，同时节约了时间、学习成本。
附图说明
图1：本发明的性能测试方法的总流程示意图；
图2：本发明的测试系统的组成框图；
图3：本发明的性能测试方法的流程图。
具体实施方式
本发明提供了一种应用于国产操作系统的性能测试方法，采用shell+python语言编码，满足了跨架构平台上的性能测试。参考图1所示，主要包括以下步骤：
S1、在国产操作系统中安装测试系统；
S2、选择测试工具，进行参数配置；
S3、根据参数进行性能测试；
S4、测试完成后，处理测试结果；
S5、根据测试结果生成测试报告。
本发明中，完成上述性能测试方法主要依靠测试系统进行，其测试系统的组成如图2所示，主要包括测试模块、测试环境收集模块、数据处理模块和报告生成模块。其中测试模块为进行测试的主体单元，能够调用测试环境收集模块和数据处理模块。
所述测试模块用于配置参数，对测试工具进行依赖包安装、抓取测试日志、选择编译测试工具。同时，测试模块还需要根据参数来选择测试方法、调用测试环境收集模块和调用数据处理模块，并进行性能测试。
所述测试环境收集模块用于收集测试环境信息，所述测试环境信息包括了国产操作系统的硬件设置和软件环境，测试环境收集模块将上述测试环境信息分别保存为txt和json两种格式的文件，txt格式文件方便测试人员查看了解相关信息，json格式文件可以用于生成测试报告的环境信息sheet文件页。
所述数据处理模块用于接收测试模块传入的参数并进行数据处理。此模块采用对应的测试工具的数据采集方法，通过测试模块传入测试工具名称、测试日志路径、采集后的数据保存位置、测试的cpu四个参数给到数据处理模块，数据处理模块接收上述参数并将测试得到的数据保存为json格式文件。
所述报告生成模块用于将数据处理模块处理后的数据生成报告。此模块包括报告模板、报告模板配置文件、测试报告生成脚本，用于对经过数据处理模块处理后的json格式文件进行生成报告的操作。
本发明所述的性能测试方法的具体流程如图3所示，包括以下步骤：
S1、在国产操作系统中安装测试系统；
S2、选择测试工具，进行参数配置。其中，参数配置包括测试工具名称、测试路径、测试核心数。
步骤S3、根据参数进行性能测试，该步骤为性能脚本中的操作，执行性能测试脚本。具体包括：
步骤S31：执行脚本开始测试后，先进行初始化操作，抓取测试日志；
步骤S32：安装测试工具所需的依赖包；
步骤S33：处理配置的参数信息；
步骤S34：根据参数信息调用测试环境收集模块抓取收集测试环境信息，包括硬件设置和软件环境信息，并将上述测试环境信息分别保存成用于查看的txt格式文档，以及用于生成测试报告的json格式文件；
步骤S35：根据参数选择好测试工具后，根据架构编译安装好测试工具；
步骤S36：根据参数信息执行测试。
S4、测试完成后，处理测试结果。具体包括：
首先将步骤S3得到的原始的测试结果复制保存到results目录下；之后调用数据处理模块将到results目录下的测试结果处理成json格式文件，用于生成测试报告。
将测试结果处理成json格式文件后，进行清理测试环境步骤。其中清理测试环境步骤包括：执行清理操作，可以删除或者卸载上述测试工具；之后卸载依赖包；以及在国产操作系统中保存系统日志，随后退出测试模块。
S5、根据测试结果生成测试报告。具体来说有：
测试人员可以查看测试环境信息和results目录下和json格式文件的测试结果，当检查确认无误时调用报告生成模块来生成测试报告。
将前面得到的测试环境信息和测试结果按照测试报告配置文件将数据填写到预存的测试报告文件模板的对应位置，测试环境信息json格式和测试结果json格式具有唯一key值，与测试报告文件中的key保持一一对应。
本发明所述的性能测试方法及测试系统与现有技术相比较，具有以下几点优势：
1、使国产操作系统从测试性能到生成报告更加简单便捷；
2、可以批量执行性能测试，并且能够自动保存测试结果；
3、测试完成后自动清理测试环境，避免影响其他测试项；
4、本发明采用shell+python语言编码，满足了跨架构平台上性能测试。

Claims (9)

1.一种应用于国产操作系统的性能测试方法，其特征在于，包括以下步骤：
S1、在国产操作系统中安装测试系统；
S2、选择测试工具，进行参数配置；
S3、根据参数进行性能测试；
S4、测试完成后，处理测试结果；
S5、根据测试结果生成测试报告。
2.根据权利要求1所述的应用于国产操作系统的性能测试方法，其特征在于：步骤S2中，参数配置包括测试工具名称、测试路径、测试核心数。
3.根据权利要求1所述的应用于国产操作系统的性能测试方法，其特征在于：步骤S3中，进行性能测试包括：
步骤S31：执行初始化操作，抓取测试日志；
步骤S32：安装测试工具所需的依赖包；
步骤S33：处理配置的参数信息；
步骤S34：抓取测试环境信息，并保存成用于查看的txt格式文档，以及用于生成测试报告的json格式文件；
步骤S35：根据参数编译测试工具；
步骤S36：根据参数信息执行测试。
4.根据权利要求3所述的应用于国产操作系统的性能测试方法，其特征在于：步骤S4中，处理测试结果包括：
将原始的测试结果复制保存到results目录；以及
将到results目录的测试结果处理成json格式文件，用于生成测试报告。
5.根据权利要求4所述的应用于国产操作系统的性能测试方法，其特征在于：步骤S5中，生成测试报告包括：
查看测试环境信息和results目录下的测试结果；
将测试环境信息和测试结果填写到测试报告文件模板的对应位置，测试环境信息json格式和测试结果json格式具有唯一key值，与测试报告文件中的key保持一一对应。
6.根据权利要求4所述的应用于国产操作系统的性能测试方法，其特征在于：将测试结果处理成json格式文件后，进行清理测试环境步骤。
7.根据权利要求6所述的应用于国产操作系统的性能测试方法，其特征在于：清理测试环境步骤包括
执行清理操作，删除或卸载测试工具；
卸载依赖包；以及
在国产操作系统中保存系统日志，退出测试模块。
8.一种用于完成如权利要求1-7任一项所述的性能测试方法的测试系统，其特征在于，包括：
测试模块：用于配置参数，并根据参数选择测试方法、调用测试环境收集模块和调用数据处理模块，进行性能测试；
测试环境收集模块，用于收集测试环境信息；
数据处理模块，用于接收测试模块传入的参数并进行数据处理；
报告生成模块，用于将数据处理模块处理后的数据生成报告。
9.根据权利要求8所述的测试系统，其特征在于：所述测试模块还用于对测试工具进行依赖包安装、抓取测试日志、编译测试工具。
CN202111441186.0A 2021-11-30 2021-11-30 应用于国产操作系统的性能测试方法及测试系统 Pending CN114168461A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111441186.0A CN114168461A (zh) 2021-11-30 2021-11-30 应用于国产操作系统的性能测试方法及测试系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111441186.0A CN114168461A (zh) 2021-11-30 2021-11-30 应用于国产操作系统的性能测试方法及测试系统

Publications (1)

Publication Number Publication Date
CN114168461A true CN114168461A (zh) 2022-03-11

Family

ID=80481665

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111441186.0A Pending CN114168461A (zh) 2021-11-30 2021-11-30 应用于国产操作系统的性能测试方法及测试系统

Country Status (1)

Country Link
CN (1) CN114168461A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116204399A (zh) * 2023-05-06 2023-06-02 麒麟软件有限公司 一种Linux系统性能自动化测试方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116204399A (zh) * 2023-05-06 2023-06-02 麒麟软件有限公司 一种Linux系统性能自动化测试方法及系统
CN116204399B (zh) * 2023-05-06 2023-08-08 麒麟软件有限公司 一种Linux系统性能自动化测试方法及系统

Similar Documents

Publication Publication Date Title
CN105094783B (zh) 安卓应用稳定性测试的方法及装置
CN101526919B (zh) 生成脚本文件对Web应用软件进行测试的方法及装置
CN101493793B (zh) 一种atm测试方法及装置
CN102567203A (zh) 一种测试分布式文件系统性能的方法及系统
CN101577923A (zh) 手机测试系统及方法
CN111475417A (zh) 自动化测试方法、装置、设备及存储介质
CN103488562B (zh) 自动化测试方法和装置
CN105204991A (zh) 一种物联设备测试方法及装置
CN101145984B (zh) 基于参数自适应的自动化测试方法
CN111026660A (zh) 一种基于专家系统知识库的渗透测试方法
CN114168461A (zh) 应用于国产操作系统的性能测试方法及测试系统
CN112749083A (zh) 一种测试脚本生成方法及装置
CN106972983B (zh) 网络接口的自动化测试装置及方法
KR20070104202A (ko) 휴대폰 소프트웨어 검증을 위한 자동화 테스트 서비스시스템 및 그 방법
CN115658460A (zh) 一种基于云端与车机端接口的自动化性能测试方法及系统
CN111382071A (zh) 一种用户行为数据测试方法及系统
CN116016270A (zh) 一种交换机测试管理方法、装置、电子设备和存储介质
CN112069062A (zh) 一种软件测试bug模块编辑生成的方法及装置
CN114064469A (zh) 接口自动化测试方法及存储介质
CN107085553B (zh) 一种输入框测试方法及装置
CN111163309A (zh) 基于行为模拟的测试方法、电视设备及存储介质
CN111078193A (zh) 一种面向数据分析系统的软件开发方法及系统
CN100442729C (zh) 网络协议一致性测试中被测系统的配置方法
CN110674036A (zh) 基于csg ii系统的跨平台协同功能接口测试系统
CN111026654A (zh) 一种基于接口自动化测试的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination