CN118138749A - 一种多维度信息系统性能测试与分析工具及方法 - Google Patents

一种多维度信息系统性能测试与分析工具及方法 Download PDF

Info

Publication number
CN118138749A
CN118138749A CN202410540749.9A CN202410540749A CN118138749A CN 118138749 A CN118138749 A CN 118138749A CN 202410540749 A CN202410540749 A CN 202410540749A CN 118138749 A CN118138749 A CN 118138749A
Authority
CN
China
Prior art keywords
performance
data
real
score
running
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202410540749.9A
Other languages
English (en)
Inventor
李冬
张明娟
于子桐
吕生辉
张欢
杨华
严世坦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Electronic Product Reliability and Environmental Testing Research Institute
Original Assignee
China Electronic Product Reliability and Environmental Testing Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Electronic Product Reliability and Environmental Testing Research Institute filed Critical China Electronic Product Reliability and Environmental Testing Research Institute
Priority to CN202410540749.9A priority Critical patent/CN118138749A/zh
Publication of CN118138749A publication Critical patent/CN118138749A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明涉及音频系统测试技术领域,本发明公开了一种多维度信息系统性能测试与分析工具及方法,包括响应用户操作指令并生成实时性能数据,再获取系统老化数据,基于系统老化数据计算系统老化系数,将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级,最后基于测试跑分结果和性能等级生成性能评价结果,本发明将人工智能技术运用在音视频系统的测试领域,解决了软件测试相对于硬件测试不精确的问题,并且使得用户精确地了解音视频系统在相应价位的性能。

Description

一种多维度信息系统性能测试与分析工具及方法
技术领域
本发明涉及音频系统测试技术领域,更具体地说,本发明涉及一种多维度信息系统性能测试与分析工具及方法。
背景技术
随着信息化建设的加速发展,音视频系统作为最主要的信息支撑及服务平台被广泛应用,音频系统测试是对音频设备或系统进行验证和评估的过程,以确保其性能、质量和功能符合规格和用户需求,这种测试可以涵盖多个方面,包括硬件和软件的测试,以及音频输出的特性和性能的评估,但通常情况下,用户并没有专业的测试设备对音视频系统进行检测,只能通过软件的方式,在播放一段视频的过程中获取音视频系统的性能数据,再将性能数据输入到跑分软件中,获得跑分结果以此对音视频系统进行评估,但这样的方式存在较多问题;
例如,公开号为CN108289218A的中国专利提供了一种音视频测试方法和系统及音视频测试设备,该专利虽然根据预设的功能测试列表,生成测试指令;判断是否接收到音视频信号,若接收到所述音视频信号,根据所述测试指令进行测试,但是通常情况下,用户并没有专业的测试设备,也就不存在功能测试列表;
公开号为CN117459753A的专利提供了基于音视频融合的视频插帧方法及系统,该专利虽然运用了人工智能技术,但是该专利运用在音视频融合领域,因此,发明人认为,现有技术中较少出现将人工智能技术运用在音视频系统的测试领域,并且无法解决软件测试相对于硬件测试不精确的问题。
鉴于此,本发明提出一种多维度信息系统性能测试与分析工具及方法以解决上述问题。
发明内容
为了克服现有技术的上述缺陷,本发明提供一种多维度信息系统性能测试与分析工具及方法。
为实现上述目的,本发明提供如下技术方案:
一种多维度信息系统性能测试方法,包括:
S10:响应用户操作指令并获取待测试系统的初始性能数据,通过改变播放速度重复h次,获得初始性能数据集合,基于初始性能数据集合计算实时性能数据,初始性能数据集合包括h个初始性能数据,h为大于1的整数;
S20:获取系统老化数据,基于系统老化数据计算系统老化系数;
S30:将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果;
S40:获取待测试系统所对应的设备信息,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级;
S50:基于测试跑分结果和性能等级生成性能评价结果。
进一步地,基于初始性能数据集合计算实时性能数据的方法包括:
遍历h个初始性能数据,计算出对应的数据平均值,获取所有的数据平均值生成实时性能数据。
进一步地,系统老化数据包括实时信噪比、实时画面清晰度、实时响应时间和实时工作温度,基于系统老化数据计算系统老化系数的方法包括:
Saf=
式中,Saf为系统老化系数,为实时信噪比,/>为实时画面清晰度,为标准画面清晰度,/>为实时响应时间,/>为标准响应时间,/>为实时工作温度,/>为标准工作温度,/>、/>和/>均为权重系数。
进一步地,性能补偿模型的构建方法包括:
获取样本数据集,所述样本数据集中包括历史性能数据、历史系统老化系数和历史精确性能数据,将样本数据集划分为样本训练集和样本测试集,构建回归网络,以样本训练集中的历史性能数据和历史系统老化系数作为回归网络的输入数据,以样本训练集中的历史精确性能数据作为回归网络的输出数据,对回归网络进行训练,得到用于预测实时精确性能数据的初始回归网络,利用样本测试集对初始回归网络进行测试,输出满足小于预设误差值的回归网络作为性能补偿模型。
进一步地,性能等级包括第一等级、第二等级和第三等级,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级包括:
获取设备信息所对应的价格信息,当价格信息处于预设第一价格范围时,则性能等级为第一等级,当价格信息处于预设第二价格范围时,则性能等级为第二等级,当价格信息处于预设第三价格范围时,则性能等级为第三等级。
进一步地,性能数据库的构建方法包括:
通过互联网获取m个页面图片,遍历m个页面图片进行OCR处理得到对应的设备信息和跑分数据,基于跑分数据将m个页面图片进行剔除,以此获得n个页面图片,基于n个页面图片所对应的设备信息划分性能等级,计算性能等级所对应的跑分平均值,将跑分平均值与所对应的性能等级以及设备信息建立映射关系,以此建立性能数据库,m>n>0。
进一步地,基于跑分数据将m个页面图片进行剔除的方法包括:
获取设备信息所对应的价格信息,将价格信息与跑分数据进行拟合生成跑分曲线,计算每个点到跑分曲线的实时距离,将大于预设距离阈值的实时距离标记为目标距离,将目标距离所对应的跑分数据标记为目标跑分值,将目标跑分值所对应的页面图片进行剔除。
进一步地,性能评价结果包括优秀、良好和不及格,基于测试跑分结果和性能等级生成性能评价结果的方法包括:
将设备信息输入到预构建的性能数据库确定对应的性能等级,当测试跑分结果大于预设第一跑分阈值时,则性能评价结果为优秀,当测试跑分结果小于等于预设第一跑分阈值,且大于等于预设第二跑分阈值时,则性能评价结果为良好,当测试跑分结果小于预设第二跑分阈值时,则性能评价结果为不及格;第一跑分阈值大于第二跑分阈值。
进一步地,预设第一跑分阈值和预设第二跑分阈值的生成方法包括:
将性能等级所对应的跑分平均值分别除以和乘以常数S以此获得第一跑分阈值和第二跑分阈值,1>S>0。
一种多维度信息系统性能测试与分析工具,其用于实现上述的一种多维度信息系统性能测试方法,包括:
数据获取模块:用于响应用户操作指令并获取待测试系统的初始性能数据,通过改变播放速度重复h次,获得初始性能数据集合,基于初始性能数据集合计算实时性能数据,初始性能数据集合包括h个初始性能数据,h为大于1的整数;
系数生成模块:用于获取系统老化数据,基于系统老化数据计算系统老化系数;
补偿模块:用于将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果;
等级确定模块:用于获取待测试系统所对应的设备信息,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级;
测试评估模块:用于基于测试跑分结果和性能等级生成性能评价结果。
一种电子设备,包括电源、接口、键盘、存储器、中央处理器以及存储在存储器上并可在中央处理器上运行的计算机程序,所述处理器执行计算机程序时实现上述一种多维度信息系统性能测试方法,所述接口包括网络接口与数据接口,网络接口包括有线或无线接口,数据接口包括输入或输出接口。
一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被执行时实现上述一种多维度信息系统性能测试方法。
相比于现有技术,本发明的有益效果为:
本发明先是响应用户操作指令并生成实时性能数据,再获取系统老化数据,基于系统老化数据计算系统老化系数,将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级,最后基于测试跑分结果和性能等级生成性能评价结果,本发明将人工智能技术运用在音视频系统的测试领域,解决了软件测试相对于硬件测试不精确的问题,并且使得用户精确地了解音视频系统在相应价位的性能。
附图说明
图1为本发明中一种多维度信息系统性能测试方法的示意图;
图2为本发明中一种计算机可读存储介质的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1
请参阅图1所示,本实施例公开提供了一种多维度信息系统性能测试方法,包括:
S10:响应用户操作指令并获取待测试系统的初始性能数据,通过改变播放速度重复h次,获得初始性能数据集合,基于初始性能数据集合计算实时性能数据,初始性能数据集合包括h个初始性能数据,h为大于1的整数;
需要说明的是,用户操作指令可以是用户触摸测试控件生成,还可以是用户通过鼠标点击测试控件生成,测试控件是指用于控制和管理测试过程的软件工具,以测试电脑的音视频系统进行举例,通常情况下,是通过电脑播放一段已下载的视频,在视频播放的过程中获取音视频系统的性能数据,再通过跑分软件进行评价,但是播放速度会影响音视频系统的性能,改变播放速度会影响视频解码和音频解码的速度,更快或更慢的播放速度会影响音视频的同步性,因此本实施例通过不断改变播放速度,使得后续的实时性能数据能够更加的精确;
初始性能数据包括但不限于音频帧率、视频帧率、GPU利用率和音视频时间偏移量;基于初始性能数据集合计算实时性能数据的方法包括:
遍历h个初始性能数据,计算出对应的数据平均值,获取所有的数据平均值生成实时性能数据;
可以理解的是,以初始性能数据中的音频帧率为例,h个初始性能数据中包含了h个音频帧率,那么计算h个音频帧率的平均值,将计算出的平均值作为实时性能数据中的音频帧率;
S20:获取系统老化数据,基于系统老化数据计算系统老化系数;
在本发明的实施例中,系统老化数据包括实时信噪比、实时画面清晰度、实时响应时间和实时工作温度,信噪比指的是音频信号与背景噪声之间的比例,老化导致信噪比下降,画面清晰度指的是视频图像的清晰度和细节程度,老化导致图像模糊或失真,响应时间为音视频系统对输入信号的响应速度,老化导致响应时间延长,工作温度为在音视频系统测试过程中的环境温度,老化导致环境温度升高;
基于系统老化数据计算系统老化系数的方法包括:
Saf=
式中,Saf为系统老化系数,为实时信噪比,/>为实时画面清晰度,为标准画面清晰度,/>为实时响应时间,/>为标准响应时间,/>为实时工作温度,/>为标准工作温度,/>、/>和/>均为权重系数;
可以理解的是,上述中的标准画面清晰度和标准响应时间是与该音视频系统所对应的硬件型号相关,示例性的,承接上述还是以测试电脑的音视频系统进行举例,标准画面清晰度与电脑中的显示器型号相关,而标准响应时间则更多与电脑中的图形处理器型号相关,可以在电脑的系统直接获取显示器型号和图形处理器型号以及相对应的画面清晰度和响应时间,对于标准工作温度则可以由本领域技术人员根据实际情况进行确定,例如,可以将标准工作温度设置在35℃,本实施例不对此进行限制;
S30:将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果;
性能补偿模型的构建方法包括:
获取样本数据集,所述样本数据集中包括历史性能数据、历史系统老化系数和历史精确性能数据,将样本数据集划分为样本训练集和样本测试集,构建回归网络,以样本训练集中的历史性能数据和历史系统老化系数作为回归网络的输入数据,以样本训练集中的历史精确性能数据作为回归网络的输出数据,对回归网络进行训练,得到用于预测实时精确性能数据的初始回归网络,利用样本测试集对初始回归网络进行测试,输出满足小于预设误差值的回归网络作为性能补偿模型,回归网络优选为神经网络模型;
值得注意的是,上述中历史精确性能数据是通过硬件进行测试获得,可以理解的是,硬件测试指的是通过示波器、频谱分析仪等专业设备分析音视频系统的性能数据,承接上述,还是以测试电脑的音视频系统进行举例,在实验环境下获得一批同型号电脑,一批同型号电脑中使用时间不同,也就意味着对应的系统老化系数不同,还是播放同样的测试视频,通过计算机中的软件来进行测试获得性能数据当做模型训练用的历史性能数据,而通过硬件测试的获得性能数据当做模型训练用的历史精确性能数据,通过改变电脑型号以此生成模型训练用的样本数据集;
在本实施例中,跑分软件可以是Spek,还可以是AudioTester等,Spek是一款开源的音频频谱分析软件,可用于分析音频文件的频谱内容,AudioTester是一款专业的音视频测试软件,本实施例不对此进行限制;
S40:获取待测试系统所对应的设备信息,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级;
需要说明的是,上述中的设备信息可以为音视频系统所对应的型号信息,还是以测试电脑的音视频系统进行举例,可以理解的是,电脑中的音视频系统与其硬件信息是存在联系的,而电脑的型号信息与硬件信息是相对应的,通常情况下,用户测试音视频系统并且进行跑分,是想了解在相同区间的价格下,所测试音视频系统处于何种范围;
性能等级包括第一等级、第二等级和第三等级,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级包括:
获取设备信息所对应的价格信息,当价格信息处于预设第一价格范围时,则性能等级为第一等级,当价格信息处于预设第二价格范围时,则性能等级为第二等级,当价格信息处于预设第三价格范围时,则性能等级为第三等级;
需要说明的是,以测试电脑的音视频系统进行举例,电脑的设备信息对应价格信息,例如,本领域技术人员可以将3500-6000设置为第三价格范围,6000-8500设置为第二价格范围,8500-11000设置为第一价格范围,当然可以等步长进行设置,也可以不等步长进行设置,同时还可以进行细分,本实施例对比不进行过多的赘述;
性能数据库的构建方法包括:
通过互联网获取m个页面图片,遍历m个页面图片进行OCR处理得到对应的设备信息和跑分数据,基于跑分数据将m个页面图片进行剔除,以此获得n个页面图片,基于n个页面图片所对应的设备信息划分性能等级,计算性能等级所对应的跑分平均值,将跑分平均值与所对应的性能等级以及设备信息建立映射关系,以此建立性能数据库,m>n>0;
可以理解的是,以测试电脑的音视频系统进行举例,通过互联网获取m个页面图片,页面图片中至少包括电脑的设备信息,也就是型号信息,以及通过软件对音视频系统测试后的跑分数值,但是m个页面图片中存在虚假宣传图片,导致跑分数值不准确,因此需要将m个页面图片进行剔除,以此获得n个页面图片,再根据n个页面图片对应的设备信息进行划分性能等级,如上述内容所示,并且计算性能等级所对应的跑分平均值,为后续进行评价做铺垫;
基于跑分数据将m个页面图片进行剔除的方法包括:
获取设备信息所对应的价格信息,将价格信息与跑分数据进行拟合生成跑分曲线,计算每个点到跑分曲线的实时距离,将大于预设距离阈值的实时距离标记为目标距离,将目标距离所对应的跑分数据标记为目标跑分值,将目标跑分值所对应的页面图片进行剔除;
可以理解的是,价格信息与跑分数据之间成正比,相应地将价格信息与跑分数据作为数据点进行拟合以此获得跑分曲线,这样能够将偏离跑分曲线的数据点进行剔除;
S50:基于测试跑分结果和性能等级生成性能评价结果;
性能评价结果包括优秀、良好和不及格,基于测试跑分结果和性能等级生成性能评价结果的方法包括:
将设备信息输入到预构建的性能数据库确定对应的性能等级,当测试跑分结果大于预设第一跑分阈值时,则性能评价结果为优秀,当测试跑分结果小于等于预设第一跑分阈值,且大于等于预设第二跑分阈值时,则性能评价结果为良好,当测试跑分结果小于预设第二跑分阈值时,则性能评价结果为不及格;第一跑分阈值大于第二跑分阈值;
所述预设第一跑分阈值和预设第二跑分阈值的生成方法包括:
将性能等级所对应的跑分平均值分别除以和乘以常数S以此获得第一跑分阈值和第二跑分阈值,1>S>0;
可以理解的是,性能等级与跑分平均值是相对应的,性能等级越高相应的跑分平均值也就越高,因此预设第一跑分阈值和预设第二跑分阈值也就越大,常数S优选为,这样用户在进行测试的过程中,能够精确地了解音视频系统在相应价位的性能,使得音视频系统测试的结果也更加精确。
实施例2
本实施例在实施例1的基础之上,提供了一种多维度信息系统性能测试与分析工具,包括:
数据获取模块:用于响应用户操作指令并获取待测试系统的初始性能数据,通过改变播放速度重复h次,获得初始性能数据集合,基于初始性能数据集合计算实时性能数据,初始性能数据集合包括h个初始性能数据,h为大于1的整数;
需要说明的是,用户操作指令可以是用户触摸测试控件生成,还可以是用户通过鼠标点击测试控件生成,测试控件是指用于控制和管理测试过程的软件工具,以测试电脑的音视频系统进行举例,通常情况下,是通过电脑播放一段已下载的视频,在视频播放的过程中获取音视频系统的性能数据,再通过跑分软件进行评价,但是播放速度会影响音视频系统的性能,改变播放速度会影响视频解码和音频解码的速度,更快或更慢的播放速度会影响音视频的同步性,因此本实施例通过不断改变播放速度,使得后续的实时性能数据能够更加的精确;
初始性能数据包括但不限于音频帧率、视频帧率、GPU利用率和音视频时间偏移量;基于初始性能数据集合计算实时性能数据的方法包括:
遍历h个初始性能数据,计算出对应的数据平均值,获取所有的数据平均值生成实时性能数据;
可以理解的是,以初始性能数据中的音频帧率为例,h个初始性能数据中包含了h个音频帧率,那么计算h个音频帧率的平均值,将计算出的平均值作为实时性能数据中的音频帧率;
系数生成模块:用于获取系统老化数据,基于系统老化数据计算系统老化系数;
在本发明的实施例中,系统老化数据包括实时信噪比、实时画面清晰度、实时响应时间和实时工作温度,信噪比指的是音频信号与背景噪声之间的比例,老化导致信噪比下降,画面清晰度指的是视频图像的清晰度和细节程度,老化导致图像模糊或失真,响应时间为音视频系统对输入信号的响应速度,老化导致响应时间延长,工作温度为在音视频系统测试过程中的环境温度,老化导致环境温度升高;
基于系统老化数据计算系统老化系数的方法包括:
Saf=
式中,Saf为系统老化系数,为实时信噪比,/>为实时画面清晰度,为标准画面清晰度,/>为实时响应时间,/>为标准响应时间,/>为实时工作温度,/>为标准工作温度,/>、/>和/>均为权重系数;
可以理解的是,上述中的标准画面清晰度和标准响应时间是与该音视频系统所对应的硬件型号相关,示例性的,承接上述还是以测试电脑的音视频系统进行举例,标准画面清晰度与电脑中的显示器型号相关,而标准响应时间则更多与电脑中的图形处理器型号相关,可以在电脑的系统直接获取显示器型号和图形处理器型号以及相对应的画面清晰度和响应时间,对于标准工作温度则可以由本领域技术人员根据实际情况进行确定,例如,可以将标准工作温度设置在35℃,本实施例不对此进行限制;
补偿模块:用于将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果;
性能补偿模型的构建方法包括:
获取样本数据集,所述样本数据集中包括历史性能数据、历史系统老化系数和历史精确性能数据,将样本数据集划分为样本训练集和样本测试集,构建回归网络,以样本训练集中的历史性能数据和历史系统老化系数作为回归网络的输入数据,以样本训练集中的历史精确性能数据作为回归网络的输出数据,对回归网络进行训练,得到用于预测实时精确性能数据的初始回归网络,利用样本测试集对初始回归网络进行测试,输出满足小于预设误差值的回归网络作为性能补偿模型,回归网络优选为神经网络模型;
值得注意的是,上述中历史精确性能数据是通过硬件进行测试获得,可以理解的是,硬件测试指的是通过示波器、频谱分析仪等专业设备分析音视频系统的性能数据,承接上述,还是以测试电脑的音视频系统进行举例,在实验环境下获得一批同型号电脑,一批同型号电脑中使用时间不同,也就意味着对应的系统老化系数不同,还是播放同样的测试视频,通过计算机中的软件来进行测试获得性能数据当做模型训练用的历史性能数据,而通过硬件测试的获得性能数据当做模型训练用的历史精确性能数据,通过改变电脑型号以此生成模型训练用的样本数据集;
在本实施例中,跑分软件可以是Spek,还可以是AudioTester等,Spek是一款开源的音频频谱分析软件,可用于分析音频文件的频谱内容,AudioTester是一款专业的音视频测试软件,本实施例不对此进行限制;
等级确定模块:用于获取待测试系统所对应的设备信息,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级;
需要说明的是,上述中的设备信息可以为音视频系统所对应的型号信息,还是以测试电脑的音视频系统进行举例,可以理解的是,电脑中的音视频系统与其硬件信息是存在联系的,而电脑的型号信息与硬件信息是相对应的,通常情况下,用户测试音视频系统并且进行跑分,是想了解在相同区间的价格下,所测试音视频系统处于何种范围;
性能等级包括第一等级、第二等级和第三等级,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级包括:
获取设备信息所对应的价格信息,当价格信息处于预设第一价格范围时,则性能等级为第一等级,当价格信息处于预设第二价格范围时,则性能等级为第二等级,当价格信息处于预设第三价格范围时,则性能等级为第三等级;
需要说明的是,以测试电脑的音视频系统进行举例,电脑的设备信息对应价格信息,例如,本领域技术人员可以将3500-6000设置为第三价格范围,6000-8500设置为第二价格范围,8500-11000设置为第一价格范围,当然可以等步长进行设置,也可以不等步长进行设置,同时还可以进行细分,本实施例对比不进行过多的赘述;
性能数据库的构建方法包括:
通过互联网获取m个页面图片,遍历m个页面图片进行OCR处理得到对应的设备信息和跑分数据,基于跑分数据将m个页面图片进行剔除,以此获得n个页面图片,基于n个页面图片所对应的设备信息划分性能等级,计算性能等级所对应的跑分平均值,将跑分平均值与所对应的性能等级以及设备信息建立映射关系,以此建立性能数据库,m>n>0;
可以理解的是,以测试电脑的音视频系统进行举例,通过互联网获取m个页面图片,页面图片中至少包括电脑的设备信息,也就是型号信息,以及通过软件对音视频系统测试后的跑分数值,但是m个页面图片中存在虚假宣传图片,导致跑分数值不准确,因此需要将m个页面图片进行剔除,以此获得n个页面图片,再根据n个页面图片对应的设备信息进行划分性能等级,如上述内容所示,并且计算性能等级所对应的跑分平均值,为后续进行评价做铺垫;
基于跑分数据将m个页面图片进行剔除的方法包括:
获取设备信息所对应的价格信息,将价格信息与跑分数据进行拟合生成跑分曲线,计算每个点到跑分曲线的实时距离,将大于预设距离阈值的实时距离标记为目标距离,将目标距离所对应的跑分数据标记为目标跑分值,将目标跑分值所对应的页面图片进行剔除;
可以理解的是,价格信息与跑分数据之间成正比,相应地将价格信息与跑分数据作为数据点进行拟合以此获得跑分曲线,这样能够将偏离跑分曲线的数据点进行剔除;
测试评估模块:用于基于测试跑分结果和性能等级生成性能评价结果;
性能评价结果包括优秀、良好和不及格,基于测试跑分结果和性能等级生成性能评价结果的方法包括:
将设备信息输入到预构建的性能数据库确定对应的性能等级,当测试跑分结果大于预设第一跑分阈值时,则性能评价结果为优秀,当测试跑分结果小于等于预设第一跑分阈值,且大于等于预设第二跑分阈值时,则性能评价结果为良好,当测试跑分结果小于预设第二跑分阈值时,则性能评价结果为不及格;第一跑分阈值大于第二跑分阈值;
所述预设第一跑分阈值和预设第二跑分阈值的生成方法包括:
将性能等级所对应的跑分平均值分别除以和乘以常数S以此获得第一跑分阈值和第二跑分阈值,1>S>0;
可以理解的是,性能等级与跑分平均值是相对应的,性能等级越高相应的跑分平均值也就越高,因此预设第一跑分阈值和预设第二跑分阈值也就越大,常数S优选为,这样用户在进行测试的过程中,能够精确地了解音视频系统在相应价位的性能,使得音视频系统测试的结果也更加精确。
实施例3
本实施例公开提供了一种电子设备,包括电源、接口、键盘、存储器、中央处理器以及存储在存储器上并可在中央处理器上运行的计算机程序,所述中央处理器执行所述计算机程序时实现上述各方法所提供的一种多维度信息系统性能测试方法,所述接口包括网络接口与数据接口,网络接口包括有线或无线接口,数据接口包括输入或输出接口。
由于本实施例所介绍的电子设备为实施本申请实施例中一种多维度信息系统性能测试方法所采用的电子设备,故而基于本申请实施例中所介绍的一种多维度信息系统性能测试方法,本领域所属技术人员能够了解本实施例的电子设备的具体实施方式以及其各种变化形式,所以在此对于该电子设备如何实现本申请实施例中的方法不再详细介绍。只要本领域所属技术人员实施本申请实施例中一种多维度信息系统性能测试方法所采用的电子设备,都属于本申请所欲保护的范围。
实施例4
如图2所示,本实施例公开提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被执行时实现上述一种多维度信息系统性能测试方法。
上述公式均是去量纲取其数值计算,公式是由采集大量数据进行软件模拟得到最近真实情况的一个公式,公式中的预设参数、权重以及阈值选取由本领域的技术人员根据实际情况进行设置。
上述实施例,可以全部或部分地通过软件、硬件、固件或其他任意组合来实现。当使用软件实现时,上述实施例可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令或计算机程序。在计算机上加载或执行所述计算机指令或计算机程序时,全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以为通用计算机、专用计算机、计算机网络或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线网络或无线网络方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集合的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质(例如,软盘、硬盘、磁带)、光介质(例如,DVD)或者半导体介质。半导体介质可以是固态硬盘。
本领域普通技术人员可意识到,结合本发明中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其他的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其他的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。
最后:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (12)

1.一种多维度信息系统性能测试方法,其特征在于,包括:
S10:响应用户操作指令并获取待测试系统的初始性能数据,通过改变播放速度重复h次,获得初始性能数据集合,基于初始性能数据集合计算实时性能数据,初始性能数据集合包括h个初始性能数据,h为大于1的整数;
S20:获取系统老化数据,基于系统老化数据计算系统老化系数;
S30:将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果;
S40:获取待测试系统所对应的设备信息,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级;
S50:基于测试跑分结果和性能等级生成性能评价结果。
2.根据权利要求1所述的一种多维度信息系统性能测试方法,其特征在于,所述基于初始性能数据集合计算实时性能数据的方法包括:
遍历h个初始性能数据,计算出对应的数据平均值,获取所有的数据平均值生成实时性能数据。
3.根据权利要求1所述的一种多维度信息系统性能测试方法,其特征在于,所述系统老化数据包括实时信噪比、实时画面清晰度、实时响应时间和实时工作温度,基于系统老化数据计算系统老化系数的方法包括:
Saf=
式中,Saf为系统老化系数,为实时信噪比,/>为实时画面清晰度,/>为标准画面清晰度,/>为实时响应时间,/>为标准响应时间,/>为实时工作温度,/>为标准工作温度,/>、/>和/>均为权重系数。
4.根据权利要求1所述的一种多维度信息系统性能测试方法,其特征在于,所述性能补偿模型的构建方法包括:
获取样本数据集,所述样本数据集中包括历史性能数据、历史系统老化系数和历史精确性能数据,将样本数据集划分为样本训练集和样本测试集,构建回归网络,以样本训练集中的历史性能数据和历史系统老化系数作为回归网络的输入数据,以样本训练集中的历史精确性能数据作为回归网络的输出数据,对回归网络进行训练,得到用于预测实时精确性能数据的初始回归网络,利用样本测试集对初始回归网络进行测试,输出满足小于预设误差值的回归网络作为性能补偿模型。
5.根据权利要求1所述的一种多维度信息系统性能测试方法,其特征在于,所述性能等级包括第一等级、第二等级和第三等级,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级包括:
获取设备信息所对应的价格信息,当价格信息处于预设第一价格范围时,则性能等级为第一等级,当价格信息处于预设第二价格范围时,则性能等级为第二等级,当价格信息处于预设第三价格范围时,则性能等级为第三等级。
6.根据权利要求5所述的一种多维度信息系统性能测试方法,其特征在于,所述性能数据库的构建方法包括:
通过互联网获取m个页面图片,遍历m个页面图片进行OCR处理得到对应的设备信息和跑分数据,基于跑分数据将m个页面图片进行剔除,以此获得n个页面图片,基于n个页面图片所对应的设备信息划分性能等级,计算性能等级所对应的跑分平均值,将跑分平均值与所对应的性能等级以及设备信息建立映射关系,以此建立性能数据库,m>n>0。
7.根据权利要求6所述的一种多维度信息系统性能测试方法,其特征在于,所述基于跑分数据将m个页面图片进行剔除的方法包括:
获取设备信息所对应的价格信息,将价格信息与跑分数据进行拟合生成跑分曲线,计算每个点到跑分曲线的实时距离,将大于预设距离阈值的实时距离标记为目标距离,将目标距离所对应的跑分数据标记为目标跑分值,将目标跑分值所对应的页面图片进行剔除。
8.根据权利要求7所述的一种多维度信息系统性能测试方法,其特征在于,所述性能评价结果包括优秀、良好和不及格,基于测试跑分结果和性能等级生成性能评价结果的方法包括:
将设备信息输入到预构建的性能数据库确定对应的性能等级,当测试跑分结果大于预设第一跑分阈值时,则性能评价结果为优秀,当测试跑分结果小于等于预设第一跑分阈值,且大于等于预设第二跑分阈值时,则性能评价结果为良好,当测试跑分结果小于预设第二跑分阈值时,则性能评价结果为不及格;第一跑分阈值大于第二跑分阈值。
9.根据权利要求8所述的一种多维度信息系统性能测试方法,其特征在于,所述预设第一跑分阈值和预设第二跑分阈值的生成方法包括:
将性能等级所对应的跑分平均值分别除以和乘以常数S以此获得第一跑分阈值和第二跑分阈值,1>S>0。
10.一种多维度信息系统性能测试与分析工具,其用于实现权利要求1-9中任一项所述的一种多维度信息系统性能测试方法,其特征在于,包括:
数据获取模块:用于响应用户操作指令并获取待测试系统的初始性能数据,通过改变播放速度重复h次,获得初始性能数据集合,基于初始性能数据集合计算实时性能数据,初始性能数据集合包括h个初始性能数据,h为大于1的整数;
系数生成模块:用于获取系统老化数据,基于系统老化数据计算系统老化系数;
补偿模块:用于将实时性能数据和系统老化系数输入到预构建的性能补偿模型中,获得精确性能数据,将精确性能数据输入到跑分软件中,获得测试跑分结果;
等级确定模块:用于获取待测试系统所对应的设备信息,基于设备信息和预构建的性能数据库确定待测试系统所对应的性能等级;
测试评估模块:用于基于测试跑分结果和性能等级生成性能评价结果。
11.一种电子设备,包括电源、接口、键盘、存储器、中央处理器以及存储在存储器上并可在中央处理器上运行的计算机程序,其特征在于,所述中央处理器执行所述计算机程序时实现权利要求1至9任一项所述的一种多维度信息系统性能测试方法,所述接口包括网络接口与数据接口,网络接口包括有线或无线接口,数据接口包括输入或输出接口。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被执行时实现权利要求1至9任一项所述的一种多维度信息系统性能测试方法。
CN202410540749.9A 2024-04-30 2024-04-30 一种多维度信息系统性能测试与分析工具及方法 Pending CN118138749A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202410540749.9A CN118138749A (zh) 2024-04-30 2024-04-30 一种多维度信息系统性能测试与分析工具及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202410540749.9A CN118138749A (zh) 2024-04-30 2024-04-30 一种多维度信息系统性能测试与分析工具及方法

Publications (1)

Publication Number Publication Date
CN118138749A true CN118138749A (zh) 2024-06-04

Family

ID=91246824

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202410540749.9A Pending CN118138749A (zh) 2024-04-30 2024-04-30 一种多维度信息系统性能测试与分析工具及方法

Country Status (1)

Country Link
CN (1) CN118138749A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2241995A1 (en) * 2009-04-17 2010-10-20 Technology Currents LLC Usage metering based upon hardware aging
CN103995763A (zh) * 2014-06-06 2014-08-20 北京安兔兔科技有限公司 电子设备性能的测试方法及装置
CN108289218A (zh) * 2017-12-28 2018-07-17 深圳市九洲电器有限公司 一种音视频测试方法和系统及音视频测试设备
CN111326182A (zh) * 2018-12-14 2020-06-23 比亚迪股份有限公司 车载多媒体设备的老化测试方法和装置
WO2021263245A1 (en) * 2020-06-26 2021-12-30 Blancco Technology Group IP Oy System and method for extensible device assessment and dynamic policy configuration

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2241995A1 (en) * 2009-04-17 2010-10-20 Technology Currents LLC Usage metering based upon hardware aging
CN103995763A (zh) * 2014-06-06 2014-08-20 北京安兔兔科技有限公司 电子设备性能的测试方法及装置
CN108289218A (zh) * 2017-12-28 2018-07-17 深圳市九洲电器有限公司 一种音视频测试方法和系统及音视频测试设备
CN111326182A (zh) * 2018-12-14 2020-06-23 比亚迪股份有限公司 车载多媒体设备的老化测试方法和装置
WO2021263245A1 (en) * 2020-06-26 2021-12-30 Blancco Technology Group IP Oy System and method for extensible device assessment and dynamic policy configuration

Similar Documents

Publication Publication Date Title
CN109344908B (zh) 用于生成模型的方法和装置
CN108197652B (zh) 用于生成信息的方法和装置
EP3346428A1 (en) Sensor design support apparatus, sensor design support method and computer program
KR20070049833A (ko) 화질 평가 방법 및 시스템
CN107040535B (zh) 移动应用渠道登录监控方法、装置、系统及存储介质
JP2020126587A (ja) コミュニティ質問応答データの検証方法、装置、コンピュータ機器、及び記憶媒体
CN112037223B (zh) 图像缺陷检测方法、装置及电子设备
CN111340233B (zh) 机器学习模型的训练方法及装置、样本处理方法及装置
CN110070076B (zh) 用于选取训练用样本的方法和装置
CN109224444A (zh) 游戏人物识别方法、装置、存储介质和电子设备
CN109840212B (zh) 应用程序的功能测试方法、装置、设备及可读存储介质
CN110909005A (zh) 一种模型特征分析方法、装置、设备及介质
CN107027071B (zh) 一种视频播放的方法和装置
CN113822693A (zh) 用户购买力评价值的生成方法、装置、设备及存储介质
CN118138749A (zh) 一种多维度信息系统性能测试与分析工具及方法
CN113420809A (zh) 视频质量评价方法、装置和电子设备
JP2009516974A (ja) 端末経由で通信ネットワークをテストする方法
CN111949860B (zh) 用于生成相关度确定模型的方法和装置
KR20130086083A (ko) 리스크-프로파일 생성 장치
CN112819079A (zh) 模型的采样算法匹配方法、装置和电子设备
CN111062468A (zh) 生成网络的训练方法和系统、以及图像生成方法及设备
Lin et al. Benchmarking handheld graphical user interface: Smoothness quality of experience
CN113747189B (zh) 直播信息的显示控制方法、装置、电子设备及计算机介质
CN117370215B (zh) 寻优抽样方法、装置、电子设备及存储介质
CN111507639B (zh) 理财风险分析方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination