CN112612699B - 一种hid人机交互场景用例通用自动化测试设备 - Google Patents

一种hid人机交互场景用例通用自动化测试设备 Download PDF

Info

Publication number
CN112612699B
CN112612699B CN202011515250.0A CN202011515250A CN112612699B CN 112612699 B CN112612699 B CN 112612699B CN 202011515250 A CN202011515250 A CN 202011515250A CN 112612699 B CN112612699 B CN 112612699B
Authority
CN
China
Prior art keywords
mouse
test
keyboard
equipment
tested
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011515250.0A
Other languages
English (en)
Other versions
CN112612699A (zh
Inventor
朱娴
卫平青
李宣
许强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANGHAI JINTU INFORMATION TECHNOLOGY CO LTD
Original Assignee
SHANGHAI JINTU INFORMATION TECHNOLOGY CO LTD
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SHANGHAI JINTU INFORMATION TECHNOLOGY CO LTD filed Critical SHANGHAI JINTU INFORMATION TECHNOLOGY CO LTD
Priority to CN202011515250.0A priority Critical patent/CN112612699B/zh
Publication of CN112612699A publication Critical patent/CN112612699A/zh
Application granted granted Critical
Publication of CN112612699B publication Critical patent/CN112612699B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3664—Environments for testing or debugging software
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3684—Test management for test design, e.g. generating new test cases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/36—Preventing errors by testing or debugging software
    • G06F11/3668—Software testing
    • G06F11/3672—Test management
    • G06F11/3688—Test management for test execution, e.g. scheduling of test suites

Abstract

本发明提供一种HID人机交互场景用例通用自动化测试设备，包括：录制工具，用于捕获鼠标坐标，鼠标点击，键盘输入事件，生成python脚本；测试控制模块，用于接收录制工具录制生成的python脚本按照测试条件控制USB键鼠模拟设备，执行测试项；USB键鼠模拟设备，用于接收测试控制模块发送过来的键盘、鼠标的操作数据，转换后发送到待测设备，实现回放键盘、鼠标操作；测试控制模块在每项测试操作结束后，访问待测设备服务端的数据库，校验对应数据值，输出测试结果。本发明不依赖于指定平台，可覆盖windows，linux以及各种浏览器等运行平台；待测设备只需要接入专用设备，无需安装额外的软件；支持远端键盘鼠标仿真、同数据库通信，验证数据，自动输出测试结果。

Description

一种HID人机交互场景用例通用自动化测试设备
技术领域
本发明涉及HID设备模拟技术领域，具体为一种HID人机交互场景用例通用自动化测试设备。
背景技术
传统的IPKVM(Keyboard Video Mouse over IP)技术需要在主板BIOS(BasicInput Output System)及IPMI(Intelligent Platform Management Interface)的支持下，在局域网内，通过应用软件模拟键盘、鼠标事件，对待测设备进行测试、操作。
现有技术方案的缺点如下：
1、一套测试方案只能在指定的平台上运行：当待测设备或者待测软件需要切换平台运行时，则现有的键鼠模拟自动化测试软件无法兼容。
2、需要在待测设备上运行：
现有的键鼠模拟自动化测试软件需要在待测设备上安装并执行，不能远端控制。
3、只支持脚本回放，不能进行数据校验：
现有的键鼠模拟自动化测试软件只能进行脚本录制和脚本回放操作，至于脚本执行的结果则需要人工判断。
针对以上缺陷，本发明的目的，旨在提供一种“跨平台的、无设备依赖的、支持数据校验的”HID人机交互场景用例通用自动化测试技术方案。可广泛应用于人机交互测试、自动化测试等领域。
发明内容
本发明的目的在于提供一种HID人机交互场景用例通用自动化测试设备，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：
一种HID人机交互场景用例通用自动化测试设备，包括：
录制工具，安装在待测设备上，用于捕获鼠标坐标，鼠标点击，键盘输入事件，生成python脚本；
测试控制模块，用于接收录制工具录制生成的python脚本按照测试条件控制USB键鼠模拟设备，执行测试项；
USB键鼠模拟设备，用于接收测试控制模块发送过来的键盘、鼠标的操作数据，转换后发送到待测设备，实现回放键盘、鼠标操作；以及
所述测试控制模块在每项测试操作结束后，访问待测设备服务端的数据库，校验对应数据值，输出测试结果。
优选的，所述测试控制模块先同待测设备的数据库建立连接，再同USB键鼠模拟设备建立连接，然后将键盘、鼠标的数据以json串的格式通过http协议发给USB键鼠模拟设备，USB键鼠模拟设备收到数据包之后开始执行，等待执行完成后，查询数据库对应表值，通过与预期值是否一致输出测试结果。
优选的，所述USB键鼠模拟设备包括网卡以及USB芯片，其中所述USB芯片通过网卡与交换机网络通信连接，所述USB芯片通过OTG转换线与待测设备连接。
优选的，所述测试设备还包括交换机，用于所述测试控制模块分别与USB键鼠模拟设备、待测设备之间的数据包交换及数据转发。
优选的，所述录制工具包括但不限于HID Recorder，所述待测设备包括但不限于windows系统或ubuntu系统。
与现有技术相比，本发明的有益效果是：
1、不依赖于指定平台，可覆盖windows，linux以及各种浏览器等运行平台；
2、待测设备只需要接入专用设备，无需安装额外的软件；
3、支持远端键盘鼠标仿真；
4、支持同数据库通信，验证数据，自动输出测试结果。
附图说明
图1为本发明整体架构结构示意图；
图2为本发明USB键鼠模拟设备架构及与交换机和待测设备通信原理图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
实施例：
请参阅图1至图2，本发明提供一种技术方案：
一种HID人机交互场景用例通用自动化测试设备，包括：
录制工具，安装在待测设备上，用于捕获鼠标坐标，鼠标点击，键盘输入事件，生成python脚本；
测试控制模块，用于接收录制工具录制生成的python脚本按照测试条件控制USB键鼠模拟设备，执行测试项；
USB键鼠模拟设备，用于接收测试控制模块发送过来的键盘、鼠标的操作数据，转换后发送到待测设备，实现回放键盘、鼠标操作；
所述测试控制模块在每项测试操作结束后，访问待测设备服务端的数据库，校验对应数据值，输出测试结果。
下面结合具体实施例进行进一步说明：
各模块详细说明如下：
1、HID Recorder(HID记录器)
录制工具，安装在待测设备上(windows系统或ubuntu系统)，该工具运行后，可以捕获鼠标坐标，鼠标点击，键盘输入事件，生成python脚本。
2、专用设备(即USB键鼠模拟设备)
USB键鼠模拟设备，启动后，可以接收测试控制程序(即测试控制模块)发送过来的键盘、鼠标的操作数据，经过OTG线缆发送到待测设备，实现回放键盘、鼠标操作。
3、测试控制程序
1)将HID Recorder录制生成的python脚本按照测试条件修改后上传至测试控制程序，测试控制程序通过网络控制专用设备，执行这些测试项。
2)每项测试操作结束后，测试控制程序会通过网络访问待测设备服务端的数据库，校验对应数据值，输出测试结果。
所述试控制程序(即测试控制模块)工作流程具体为：
1.测试控制程序启动后，先同待测设备的数据库建立连接，再同专用设备建立连接；
2.然后将键盘鼠标的数据以json串的格式通过http协议发给专用设备；
3.专用设备收到数据包之后开始执行；
4.等待执行完成；
5.然后测试控制程序查询数据库对应表值，通过与预期值是否一致输出测试结果。
本发明，通过USB键鼠模拟设备，采用了专用设备USB外设模拟技术，解除了对BIOS及IPMI的依赖。同时支持键盘、鼠标功能的单个复合USB设备模拟技术。
本发明：
1、使用专用设备模拟USB键鼠，解除平台依赖性
基于一款专用的嵌入式设备，通过OTG线缆连接到待测设备(目标计算机)，以硬件的方式模拟USB键鼠。
2、键鼠事件生成python脚本技术，支持HID人机交互灵活定制
通过python pynput控制和监控输入设备，从而将键盘鼠标事件录制为python脚本。
3、数据库校验技术
使用python SQLAlchemy访问数据库，校验数据值，输出测试结果。
传统的键鼠模拟自动化测试技术是在待测设备上安装一款软件，通过软件录制键鼠操作脚本再执行回放操作。这种传统的方案，存在如下技术问题：
1、只支持指定平台，例如操作系统要求是windows，浏览器要求是Chrome等；
2、需要在待测设备上安装软件；
3、只能在待测设备上运行，不能远端控制；
4、只支持脚本回放，不能进行数据校验；
本发明解决的技术问题如下：
1、不依赖于指定平台，可覆盖windows，linux以及各种浏览器等运行平台；
2、待测设备只需要接入专用设备，无需安装额外的软件；
3、支持远端键盘鼠标仿真；
4、支持同数据库通信，验证数据，自动输出测试结果。
本发明实现了：
1、不依赖于指定平台，可在windows，linux以及各种浏览器等运行平台进行人机交互自动化测试；
2、待测设备只需要接入专用设备，无需安装额外的软件，最大程度地还原了人机交互测试场景且不受其他因素干扰；
3、支持远端键盘鼠标仿真，只要保证网络互连，可以随时随地进行测试，大大节约了测试的人力和资源；
4、支持同数据库通信，验证数据，自动输出测试结果，有效提升测试效率。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (2)

1.一种HID人机交互场景用例通用自动化测试设备，其特征在于，包括：
录制工具，安装在待测设备上，用于捕获鼠标坐标，鼠标点击，键盘输入事件，生成python脚本；
测试控制模块，用于接收录制工具录制生成的python脚本，控制USB键鼠模拟设备，执行测试项；
USB键鼠模拟设备，用于接收测试控制模块发送过来的键盘、鼠标的操作数据，转换后发送到待测设备，实现回放键盘、鼠标操作；以及
所述测试控制模块在每项测试操作结束后，访问待测设备服务端的数据库，校验对应数据值，输出测试结果；
所述测试控制模块先同待测设备的数据库建立连接，再同USB键鼠模拟设备建立连接，然后将键盘、鼠标的数据以json串的格式通过http协议发给USB键鼠模拟设备，USB键鼠模拟设备收到数据包之后开始执行，等待执行完成后，查询数据库对应表值，通过与预期值是否一致输出测试结果；
所述USB键鼠模拟设备包括网卡以及USB芯片，其中所述USB芯片通过网卡与交换机网络通信连接，所述USB芯片通过OTG转换线与待测设备连接；
所述测试设备还包括交换机，用于所述测试控制模块分别与USB键鼠模拟设备、待测设备之间的数据包交换及数据转发。
2.根据权利要求1所述的一种HID人机交互场景用例通用自动化测试设备，其特征在于，所述录制工具包括但不限于HID Recorder，所述待测设备包括但不限于windows系统或ubuntu系统。
CN202011515250.0A 2020-12-21 2020-12-21 一种hid人机交互场景用例通用自动化测试设备 Active CN112612699B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011515250.0A CN112612699B (zh) 2020-12-21 2020-12-21 一种hid人机交互场景用例通用自动化测试设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011515250.0A CN112612699B (zh) 2020-12-21 2020-12-21 一种hid人机交互场景用例通用自动化测试设备

Publications (2)

Publication Number Publication Date
CN112612699A CN112612699A (zh) 2021-04-06
CN112612699B true CN112612699B (zh) 2022-10-25

Family

ID=75244159

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011515250.0A Active CN112612699B (zh) 2020-12-21 2020-12-21 一种hid人机交互场景用例通用自动化测试设备

Country Status (1)

Country Link
CN (1) CN112612699B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113391964B (zh) * 2021-06-10 2024-02-27 英业达(重庆)有限公司 电脑测试仪
CN113923443A (zh) * 2021-09-27 2022-01-11 深圳市天视通视觉有限公司 一种网络录像机测试方法、装置及计算机可读存储介质
CN113835946B (zh) * 2021-10-26 2023-12-12 北京淳中科技股份有限公司 数据交换的压力测试方法
CN114584388B (zh) * 2022-03-16 2023-03-28 深圳市中顺和盈科技有限公司 一种基于人工智能的软件兼容性处理方法及云平台
CN116909260B (zh) * 2023-09-12 2023-12-01 常州星宇车灯股份有限公司 一种模拟hil台架的智能驾驶域控制器测试验证方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105988924A (zh) * 2015-02-10 2016-10-05 中国船舶工业综合技术经济研究院 一种非侵入式嵌入式软件图形用户界面自动化测试方法
CN106874206A (zh) * 2017-02-27 2017-06-20 网易（杭州）网络有限公司 用于跨平台自动测试的方法、装置及电子设备
CN109189519A (zh) * 2018-07-26 2019-01-11 哈尔滨工业大学（威海） 一种通用的用户桌面行为模拟系统及方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI533123B (zh) * 2013-10-03 2016-05-11 緯創資通股份有限公司 自動化測試及結果比對方法及系統
CN104572428A (zh) * 2013-10-16 2015-04-29 陆璐 基于windows操作系统下的复杂控件测试方法
CN105843734B (zh) * 2016-03-18 2019-03-15 厦门美图移动科技有限公司 一种自动化测试方法、装置及计算设备
US20170277614A1 (en) * 2016-03-25 2017-09-28 Adlink Technology Inc. Intelligent test robot system
CN107283423A (zh) * 2016-04-11 2017-10-24 凌华科技股份有限公司 智能型测试机器人系统
CN111078576A (zh) * 2019-12-30 2020-04-28 世纪恒通科技股份有限公司 一种基于USB网卡技术的独立Web服务测试设备
CN111611181A (zh) * 2020-05-28 2020-09-01 上海金途信息科技有限公司 基于广域网无需bios及ipmi支持的hid和cdrom复合usb仿真设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105988924A (zh) * 2015-02-10 2016-10-05 中国船舶工业综合技术经济研究院 一种非侵入式嵌入式软件图形用户界面自动化测试方法
CN106874206A (zh) * 2017-02-27 2017-06-20 网易（杭州）网络有限公司 用于跨平台自动测试的方法、装置及电子设备
CN109189519A (zh) * 2018-07-26 2019-01-11 哈尔滨工业大学（威海） 一种通用的用户桌面行为模拟系统及方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
RR技术在嵌入式软件自动测试中的应用;孔春辉等;《机电工程》;20091220(第12期);第62-65页 *
一种非侵入的GUI自动化测试系统设计;吴立金等;《计算机测量与控制》;20171225(第12期);第55-59页 *
基于Python的超声设备可靠性自动化测试系统;郑天等;《电脑知识与技术》;20200405(第10期);第71-72、81页 *

Also Published As

Publication number Publication date
CN112612699A (zh) 2021-04-06

Similar Documents

Publication Publication Date Title
CN112612699B (zh) 一种hid人机交互场景用例通用自动化测试设备
CN103995777A (zh) 嵌入式软件黑盒自动化测试系统及测试方法
CN204759403U (zh) 一种基于数据透传实现设备内部模块升级的系统
CN110955589A (zh) 基于浏览器的无头模式的测试方法、系统、设备及介质
CN111858336B (zh) 一种软件自动化测试方法以及系统
CN116089281A (zh) 一种芯片测试方法、测试平台和设备
CN112333057A (zh) 智能家居设备配网测试方法及装置、执行机、存储介质
CN103729293A (zh) 一种基于uml活动图的gui测试方法
CN112954257A (zh) 一种视频会议的自动化校验方法及其系统
CN111435227B (zh) 一种智能家居设备测试方法、装置、设备及介质
CN113849419B (zh) 芯片的测试向量生成方法、系统、设备及存储介质
CN107844486B (zh) 一种用于客户端的分析网页问题的方法和系统
CN113722164A (zh) 移动端自动化测试和远程真机调试方法、系统及存储介质
CN113709243A (zh) 设备远程控制方法及装置、电子设备和存储介质
CN109634856B (zh) 基于云服务的iOS智能终端远程真机调试系统及方法
CN113064618A (zh) 一种模拟新能源车辆符合性检测的系统及方法
CN104965741A (zh) 一种安装实时应用集群的方法和装置
CN116545891A (zh) 一种基于智能设备的自动化配网测试方法
CN112416747A (zh) 一种测试用例执行方法、装置、设备及介质
CN111836087A (zh) 基于手机抓取电视日志信息处理方法、装置
CN110795330A (zh) 一种Monkey压力测试的方法和装置
CN108804328A (zh) 一种安卓应用兼容性测试的方法
WO2021115314A1 (zh) 核电厂现场控制对象的逻辑仿真实现方法、装置及设备
CN113221111A (zh) 一种用于网络安全的渗透测试系统
CN113986263A (zh) 代码自动化测试方法、装置、电子设备、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant