CN107229567A - 一种ipmi固件自动化测试系统 - Google Patents
一种ipmi固件自动化测试系统 Download PDFInfo
- Publication number
- CN107229567A CN107229567A CN201710432517.1A CN201710432517A CN107229567A CN 107229567 A CN107229567 A CN 107229567A CN 201710432517 A CN201710432517 A CN 201710432517A CN 107229567 A CN107229567 A CN 107229567A
- Authority
- CN
- China
- Prior art keywords
- test
- data
- module
- ipmi
- processing module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/36—Preventing errors by testing or debugging software
- G06F11/3668—Software testing
- G06F11/3672—Test management
- G06F11/3688—Test management for test execution, e.g. scheduling of test suites
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明公开一种IPMI固件自动化测试系统，涉及IPMI测试领域；包括控制中心模块、数据测试处理模块、解析模块、远程访问卡、BMC；控制中心模块，控制其他模块的正常运转；数据测试处理模块，处理测试信息和数据，以及把命令请求封装并通过接口传输到目标平台的远程访问卡，同时处理所有接口信息和分析处理结果；远程访问卡接收来自接口的命令请求，转发到BMC对命令进行响应，远程访问卡将应答通过接口发送回数据处理模块；解析模块，解析测试脚本的语法规则，语言无误时，执行测试脚本。
Description
技术领域
本发明公开一种自动化测试系统，涉及IPMI测试领域，具体地说是一种IPMI 固件自动化测试系统。
背景技术
IPMI技术标准随着其应用日益广泛，对基于IPMI技术的嵌入式软件的可靠性要求也越来越高，因此需要对IPMI 固件进行非常严格的测试。目前已有的IPMI技术功能的测试软件存在很多局限性，如常见的IPMItool工具，它只是适用于IPMI Firmware LAN Channel环境下的测试，并且测试人员需要具备相关的IPMI技术知识；ICTS（IPMI ConformanceTest Suite，IPMI一致性测试系统），主要针对的是Intel标准、相关IPMI命令集的自动化测试，不支持其他OEM厂商的平台以及相关IPMI特殊功能的测试验证，并且由于主机和目标机之间可能在操作系统、处理器等很多方面存在区别，这必然会增加IPMI Firmware 开发和测试的复杂性。而本发明提供一种IPMI 固件自动化测试系统，根据嵌入式软件测试的特点和IPMI技术标准的特点，在不同测试阶段，通过分析比较，设计出适合嵌入式软件的自动测试系统，确定适合在IPMI远程访问卡和BMC之间进行软件自动测试的测试脚本，实现基于IPMI嵌入式系统的自动化测试，满足IPMI Firmware 基本功能测试、同步测试、带外数据命令转发机制测试、OEM命令测试等需求。
发明内容
本发明针对现有技术存在的不足和问题，提供一种IPMI 固件自动化测试系统，本发明提出的具体方案是：
一种IPMI 固件自动化测试系统，包括控制中心模块、数据测试处理模块、解析模块、远程访问卡、BMC；
控制中心模块，控制其他模块的正常运转；
数据测试处理模块，处理测试信息和数据，以及把命令请求封装并通过接口传输到目标平台的远程访问卡，同时处理所有接口信息和分析处理结果；
远程访问卡接收来自接口的命令请求，转发到BMC对命令进行响应，远程访问卡将应答通过接口发送回数据处理模块；
解析模块，解析测试脚本的语法规则，语言无误时，执行测试脚本。
所述控制中心模块主要包括KFC。
所述数据测试处理模块主要包括ICTS。
进行功能测试时，所述数据测试处理模块发送单条命令来获取需要的信息。
进行单元测试时，所述数据测试处理模块在不同的测试阶段，应用不同的通道。
单元测试具体测试过程是：选择一个测试单元，执行相关的测试脚本并处理脚本的语法解析程序，将测试脚本的返回结果与IPMI技术说明书中给出的标准输出对比。
进行集成测试时，所述数据测试处理模块组合不同通道下各个测试单元，定义集成测试脚本进行测试。
定义集成测试脚本流程为：设置需要集成测试的模块；装载集成测试程序以及初始化数据；设置测试通道，测试次数以及测试结果保存相关参数；调用KFC脚本并依次执行；然后输出结果文件，生成测试报告。
进行压力测试时，所述数据测试处理模块选择测试单元中容易出错的IPMI命令组，在不同通道下持续进行压力测试或者选择测试单元中稳定可靠的IPMI命令组，通过不同的通道下持续进行压力测试。
本发明的有益之处是：
本发明提供一种IPMI 固件自动化测试系统，根据嵌入式软件测试的特点和IPMI技术标准的特点，在不同测试阶段，通过分析比较，设计出适合嵌入式软件的自动测试系统，确定适合在IPMI远程访问卡和BMC之间进行软件自动测试的测试脚本，实现基于IPMI嵌入式系统的自动化测试，满足IPMI Firmware 基本功能测试、同步测试、带外数据命令转发机制测试、OEM命令测试等需求。
附图说明
图1本发明系统的框架示意图。
具体实施方式
结合附图，以具体实施来进一步解释本发明内容。
本发明提供一种IPMI 固件自动化测试系统，可采用H测试模型，包括控制中心模块、数据测试处理模块、解析模块、远程访问卡、BMC；其中控制中心模块主要包括KFC（Kernel Firmware Checker，内核固件检验），数据测试处理模块主要包括ICTS框架，
控制中心模块，控制其他模块的正常运转；
数据测试处理模块，处理测试信息和数据，以及把命令请求封装并通过网络/串行接口传输到目标平台的远程访问卡，同时处理所有接口信息和分析处理结果；
远程访问卡接收来自网络/串行接口的命令请求，并将需要转发到BMC的命令转发至BMC，BMC对命令进行响应，远程访问卡将应答通过接口发送回数据处理模块；远程访问卡和BMC之间通过I2C进行通信；
解析模块，解析测试脚本的语法规则，语言无误时，执行测试脚本。
测试系统在运行过程中，用户通过写测试脚本来定制需要进行的测试，并需填写必要的配置参数。测试系统的输出结果需要和IPMI技术规范比较，一般来说，BMC 返回的补充码不是0x00的话，说明其测试用例是没通过的。反之，如果从BMC返回的应答数据与预期一致，则其测试用例通过。
测试系统主要针对IPMI命令功能测试、单元测试、集成测试和压力测试。
针对功能测试时，数据测试处理模块的ICTS自带了测试用例，用户可以利用命令行工具cmdtool来发送单条命令来获取需要的信息。如果命令的补充码不是0x00，则表示BMC处理这些命令有误，需进一步查找原因。
针对单元测试时，数据测试处理模块采用测试单元自动化功能和消息模块相关的一系列IPMI命令，对IPMI Firmware分别进行测试。在不同的测试阶段，应用不同的通道，测试结果会不同，从而通过多种方式验证了IPMI Firmware的可靠性。具体测试过程是：选择一个测试单元，执行相关的测试脚本并处理脚本的语法解析程序，将测试脚本的返回结果与IPMI技术说明书中给出的标准输出对比，将不符合的结果进行分析、记录、分类和通报。
针对集成测试时，数据测试处理模块组合不同通道下各个测试单元，编写集成测试程序脚本，通过集成测试程序对其进行测试，检查各单元之间的接口是否存在问题。具体集成过程如下：通过不同通道，将所有的测试单元通过集成自动化测试程序验证IPMI功能的正确性。其中集成测试程序流程如下：首先设置需要集成测试的模块；然后装载集成测试程序以及初始化数据；然后设置测试通道，测试次数以及测试结果保存相关参数；然后调用KFC脚本并依次执行；然后输出结果文件，生成测试报告。
针对压力测试时，选择单元测试中容易出错的IPMI命令组，在不同通道下持续进行压力测试，确保IPMI功能的准确性；选择单元测试中稳定可靠的IPMI命令组，通过不同的通道下持续进行压力测试，确保IPMI功能的稳定性。
测试系统将测试结果以log文件格式输出，文件中记录了发送消息的命令、BMC的应答数据，在每个测试模块后会有通道、模块、命令名、测试用例和测试结果等信息。
Claims (9)
1.一种IPMI 固件自动化测试系统，其特征是包括控制中心模块、数据测试处理模块、解析模块、远程访问卡、BMC；
控制中心模块，控制其他模块的正常运转；
数据测试处理模块，处理测试信息和数据，以及把命令请求封装并通过接口传输到目标平台的远程访问卡，同时处理所有接口信息和分析处理结果；
远程访问卡接收来自接口的命令请求，转发到BMC对命令进行响应，远程访问卡将应答通过接口发送回数据处理模块；
解析模块，解析测试脚本的语法规则，语言无误时，执行测试脚本。
2.根据权利要求1所述的系统，其特征是所述控制中心模块主要包括KFC。
3.根据权利要求1或2所述的系统，其特征是所述数据测试处理模块主要包括ICTS。
4.根据权利要求3所述的系统，其特征是进行功能测试时，所述数据测试处理模块发送单条命令来获取需要的信息。
5.根据权利要求3所述的系统，其特征是进行单元测试时，所述数据测试处理模块在不同的测试阶段，应用不同的通道。
6.根据权利要求5所述的系统，其特征是具体测试过程是：选择一个测试单元，执行相关的测试脚本并处理脚本的语法解析程序，将测试脚本的返回结果与IPMI技术说明书中给出的标准输出对比。
7.根据权利要求3所述的系统，其特征是进行集成测试时，所述数据测试处理模块组合不同通道下各个测试单元，定义集成测试脚本进行测试。
8.根据权利要求7所述的系统，其特征是定义集成测试脚本流程为：设置需要集成测试的模块；装载集成测试程序以及初始化数据；设置测试通道，测试次数以及测试结果保存相关参数；调用KFC脚本并依次执行；然后输出结果文件，生成测试报告。
9.根据权利要求3所述的系统，其特征是进行压力测试时，所述数据测试处理模块选择测试单元中容易出错的IPMI命令组，在不同通道下持续进行压力测试或者选择测试单元中稳定可靠的IPMI命令组，通过不同的通道下持续进行压力测试。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710432517.1A CN107229567A (zh) | 2017-06-09 | 2017-06-09 | 一种ipmi固件自动化测试系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710432517.1A CN107229567A (zh) | 2017-06-09 | 2017-06-09 | 一种ipmi固件自动化测试系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN107229567A true CN107229567A (zh) | 2017-10-03 |
Family
ID=59935845
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710432517.1A Pending CN107229567A (zh) | 2017-06-09 | 2017-06-09 | 一种ipmi固件自动化测试系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107229567A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113157594A (zh) * | 2021-05-24 | 2021-07-23 | 宁畅信息产业(北京)有限公司 | 一种用户权限测试方法、装置、电子设备及存储介质 |
| CN113220496A (zh) * | 2021-05-27 | 2021-08-06 | 山东英信计算机技术有限公司 | Bios与bmc之间ipmi命令交互次数异常检测方法、系统及状态机 |
| CN115934575A (zh) * | 2023-03-10 | 2023-04-07 | 北京全路通信信号研究设计院集团有限公司 | 一种产品测试方法、装置、设备及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1858719A (zh) * | 2005-12-27 | 2006-11-08 | 华为技术有限公司 | 一种自动化测试实现方法及其系统 |
| CN101291261A (zh) * | 2008-04-28 | 2008-10-22 | 华为技术有限公司 | 一种板内设备测试方法和系统 |
| CN104375910A (zh) * | 2014-11-24 | 2015-02-25 | 浪潮电子信息产业股份有限公司 | 一种自动化开关机测试方法 |
| CN106201812A (zh) * | 2016-07-15 | 2016-12-07 | 浪潮电子信息产业股份有限公司 | 一种基于IPMI服务的BMCSensor压力监控测试方法 |
-
2017
- 2017-06-09 CN CN201710432517.1A patent/CN107229567A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1858719A (zh) * | 2005-12-27 | 2006-11-08 | 华为技术有限公司 | 一种自动化测试实现方法及其系统 |
| CN100367235C (zh) * | 2005-12-27 | 2008-02-06 | 华为技术有限公司 | 一种自动化测试实现方法、装置及其系统 |
| CN101291261A (zh) * | 2008-04-28 | 2008-10-22 | 华为技术有限公司 | 一种板内设备测试方法和系统 |
| CN104375910A (zh) * | 2014-11-24 | 2015-02-25 | 浪潮电子信息产业股份有限公司 | 一种自动化开关机测试方法 |
| CN106201812A (zh) * | 2016-07-15 | 2016-12-07 | 浪潮电子信息产业股份有限公司 | 一种基于IPMI服务的BMCSensor压力监控测试方法 |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113157594A (zh) * | 2021-05-24 | 2021-07-23 | 宁畅信息产业(北京)有限公司 | 一种用户权限测试方法、装置、电子设备及存储介质 |
| CN113157594B (zh) * | 2021-05-24 | 2024-05-24 | 宁畅信息产业(北京)有限公司 | 一种用户权限测试方法、装置、电子设备及存储介质 |
| CN113220496A (zh) * | 2021-05-27 | 2021-08-06 | 山东英信计算机技术有限公司 | Bios与bmc之间ipmi命令交互次数异常检测方法、系统及状态机 |
| CN115934575A (zh) * | 2023-03-10 | 2023-04-07 | 北京全路通信信号研究设计院集团有限公司 | 一种产品测试方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109302522B (zh) | 测试方法、装置以及计算机系统和介质 | |
| CN104641673B (zh) | 用于自动配置测试仪的方法和测试系统 | |
| CN111459794A (zh) | 通信网络测试方法、装置、计算机设备和存储介质 | |
| CN109614313A (zh) | 自动化测试方法、装置及计算机可读存储介质 | |
| CN109446072A (zh) | 测试脚本的生成方法和装置 | |
| CN109408375B (zh) | 接口文档的生成方法和装置 | |
| US20150100296A1 (en) | Method and system for automated test and result comparison | |
| US11893331B2 (en) | Device verification method, UVM verification platform, electronic apparatus and storage medium | |
| CN112367680B (zh) | 基于智能电表的外部通信测试方法、装置和计算机设备 | |
| CN107229567A (zh) | 一种ipmi固件自动化测试系统 | |
| CN114064208A (zh) | 检测应用服务状态的方法、装置、电子设备及存储介质 | |
| US8307245B2 (en) | Scenario creating apparatus, scenario creating method, and storage medium storing scenario creating program | |
| CN105743725A (zh) | 一种测试应用程序的方法和装置 | |
| CN112363938A (zh) | 数据处理方法、装置、电子设备和存储介质 | |
| CN109656756A (zh) | 多核cpu板卡调试方法及装置、移动存储介质 | |
| CN111680463A (zh) | 一种文件检查方法和装置 | |
| CN105868100A (zh) | 基于Android系统的自动化测试方法及装置 | |
| CN113448608B (zh) | 一种基于区域切片技术的fpga增量升级方法及装置 | |
| CN109032874A (zh) | 一种内存压力测试方法、装置、终端及存储介质 | |
| CN112561690B (zh) | 信用卡分期业务接口的测试方法、系统、设备及存储介质 | |
| CN117370203A (zh) | 自动化测试方法、系统、电子设备及存储介质 | |
| CN117033212A (zh) | 自动生成接口测试用例的方法和测试用例生成装置 | |
| CN104678292B (zh) | 一种复杂可编程逻辑器件cpld测试方法和装置 | |
| CN116955040A (zh) | 一种芯片读写性能测试方法、系统、设备及存储介质 | |
| CN109656804A (zh) | 自动化测试方法、设备、存储介质及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171003 |
|
| RJ01 | Rejection of invention patent application after publication |