CN116909861A - 服务器性能评估方法及系统 - Google Patents
服务器性能评估方法及系统 Download PDFInfo
- Publication number
- CN116909861A CN116909861A CN202310868576.9A CN202310868576A CN116909861A CN 116909861 A CN116909861 A CN 116909861A CN 202310868576 A CN202310868576 A CN 202310868576A CN 116909861 A CN116909861 A CN 116909861A
- Authority
- CN
- China
- Prior art keywords
- test data
- performance
- server
- performance evaluation
- component
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000011156 evaluation Methods 0.000 title claims abstract description 196
- 238000012360 testing method Methods 0.000 claims abstract description 308
- 238000000034 method Methods 0.000 claims abstract description 33
- 238000011056 performance test Methods 0.000 claims abstract description 25
- 238000004590 computer program Methods 0.000 claims description 10
- 238000013461 design Methods 0.000 claims description 10
- 230000010354 integration Effects 0.000 claims description 6
- 238000012423 maintenance Methods 0.000 claims description 6
- 238000012942 design verification Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 claims description 5
- 238000012384 transportation and delivery Methods 0.000 claims description 5
- 238000012790 confirmation Methods 0.000 claims description 4
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 239000000047 product Substances 0.000 description 4
- 238000012854 evaluation process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000010276 construction Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 208000025174 PANDAS Diseases 0.000 description 1
- 208000021155 Paediatric autoimmune neuropsychiatric disorders associated with streptococcal infection Diseases 0.000 description 1
- 240000000220 Panda oleosa Species 0.000 description 1
- 235000016496 Panda oleosa Nutrition 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000011157 data evaluation Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000000275 quality assurance Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
- G06F11/3414—Workload generation, e.g. scripts, playback
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本发明提供一种服务器性能评估方法及系统，该方法包括：获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。本发明提高了服务器性能评估的准确性和效率。
Description
技术领域
本发明涉及服务器性能测试技术领域，尤其涉及一种服务器性能评估方法及系统。
背景技术
服务器质量的保证离不开测试，一台服务器从设计到生产的过程中，需要对服务器中各类部件，例如，中央处理器(Central Processing Unit，简称CPU)、图形处理器(Graphics Processing Unit，简称GPU)和网卡等，进行性能测试和评估，完善的性能评估方法对于提高测试的效率和产品的质量起着非常重要的作用。
在现有服务器部件测试性能评估过程中，通常是由测试人员将获取到的测试数据与部件厂商提供的性能标准数据相比较，对于测试人员的能力有一定的要求；并且，部件厂商提供的性能标准数据主要是按照出厂标准设置的，其标准要求较低，无法准确评估部件的性能，导致现有服务器的部件性能评估的准确性和效率较低。
因此，现在亟需一种服务器性能评估方法及系统来解决上述问题。
发明内容
针对现有技术存在的问题，本发明提供一种服务器性能评估方法及系统。
本发明提供一种服务器性能评估方法，包括：
获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；
根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；
根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
根据本发明提供的一种服务器性能评估方法，所述根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果，包括：
接收第一输入，所述第一输入包括选取一种或多种性能评估组合条件的操作；
响应于所述第一输入，确定目标性能评估组合条件，并将所述目标性能评估组合条件对应的所述标准测试数据与所述待评估测试数据进行对比，确定所述目标部件的性能评估结果。
根据本发明提供的一种服务器性能评估方法，所述性能数据库通过以下步骤构建得到：
获取不同类型的服务器中各个部件的基础性能标准数据和历史测试数据，其中，所述基础性能标准数据为部件在出厂测试通过时对应的性能标准数据，所述历史测试数据为服务器中的部件在历史时段通过性能评估测试时对应的测试数据；
根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据；
基于各个服务器的类型信息，根据所述基础性能标准数据和所述标准测试数据，构建所述性能数据库，其中，所述类型信息至少包括服务器平台类型信息、服务器机型类型信息和服务器版本类型信息。
根据本发明提供的一种服务器性能评估方法，在所述根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据之前，所述方法还包括：
获取服务器中各个部件对应的部件类型和部件编码；
确定服务器中各个部件的所述历史测试数据对应的测试阶段，其中，所述测试阶段至少包括系统设计验证阶段、系统集成设计阶段、系统确认设计阶段和本地维护终端阶段；
在相同的所述测试阶段中，通过以下步骤构建多种所述性能评估组合条件：
根据相同的所述服务器机型类型信息和相同的所述部件编码，构建第一性能评估组合条件；
根据不同的所述服务器机型类型信息和相同的所述部件编码，构建第二性能评估组合条件；
根据不同的所述服务器平台类型信息和相同的所述部件编码，构建第三性能评估组合条件；
根据相同的所述服务器机型类型信息、不同的所述服务器版本类型信息以及相同的所述部件编码，构建第四性能评估组合条件；
根据相同的所述服务器机型类型信息、相同的所述服务器版本类型信息、相同的所述部件类型以及不同的所述部件编码，构建第五性能评估组合条件。
根据本发明提供的一种服务器性能评估方法，所述根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据，包括：
根据所述性能评估组合条件对应的多个所述历史测试数据的平均值，确定所述标准测试数据；
或，将所述性能评估组合条件对应的多个所述历史测试数据进行排序，并根据排序结果和预设标准条件，从多个所述历史测试数据中选取所述标准测试数据。
根据本发明提供的一种服务器性能评估方法，在所述获取目标服务器的类型信息和目标部件的待评估测试数据之后，所述方法还包括：
若根据所述类型信息，确定所述性能数据库中未存储有所述目标服务器对应的所述标准测试数据，则根据所述目标部件的部件类型，从所述性能数据库中获取对应的所述基础性能标准数据，并在确定所述目标部件的所述待评估测试数据满足对应的所述基础性能标准数据的情况下，将所述待评估测试数据作为所述标准测试数据存储至所述性能数据库。
根据本发明提供的一种服务器性能评估方法，所述根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果，包括：
基于不同的所述性能评估组合条件，根据待评估测试数据和所述标准测试数据，构建对应的性能指标评估图，以通过所述性能指标评估图展示所述性能评估结果。
本发明还提供一种服务器性能评估系统，包括：
待评估数据获取模块，用于获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；
评估标准数据生成模块，用于根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；
性能评估模块，用于根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述服务器性能评估方法。
本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述服务器性能评估方法。
本发明提供的服务器性能评估方法及系统，基于不同类型的服务器中各个部件的历史测试数据构建性能数据库，进而根据目标服务器的类型信息，从性能数据库中获取标准测试数据，再根据目标服务器中各个部件的待评估测试数据与对应的标准侧数据，评估部件的性能，从而提高了服务器性能评估的准确性和效率。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图进行简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明提供的服务器性能评估方法的流程示意图；
图2为本发明提供的服务器性能评估的整体流程示意图；
图3为本发明提供的服务器性能评估系统的结构示意图；
图4为本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
随着服务器的快速发展，服务器质量也越来越受到重视，其中，部件性能作为评测服务器质量的重要方面，决定了服务器的优劣。然而，现有服务器的部件性能测试评估过程非常单一，往往只是与厂商提供的性能标准相比较，或者，通过计算的方式得出一种部件的理论性能，再进行相应的比较；同时，针对测试过程中产生的性能数据，也没有明确的管理方式，通常是将测试产生的性能数据上传到相应的任务中，对于各类部件的性能数据没有进行汇总和收集。当完成一项部件的性能测试后，往往还需要花费一定的时间去寻找该部件的性能标准和信息。
本发明提供的服务器性能评估方法，针对历代服务器测试过程，将不同平台、不同机型以及不同版本的服务器经历过的多次性能历史测试结果存储，从而构建一个性能数据库，进而为后续新的服务器的部件测试提供质量和性能等方面的评估，提高了服务器性能评估的准确性和效率。
图1为本发明提供的服务器性能评估方法的流程示意图，如图1所示，本发明提供了一种服务器性能评估方法，包括：
步骤101，获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件。
在本发明中，以服务器中CPU的测试过程为例进行说明，通过Speccpu测试工具对CPU进行性能测试，以获取到对应的测试数据。具体地，在本发明中，首先需要确定目标服务器的类型信息，例如，服务器所属平台(如Intel平台、AMD平台和ARM平台)、服务器机型(不同机型具有不同的配置)和服务器版本(如每种服务器机型会随着技术进步进行更新迭代，形成新的版本)；进一步地，针对该类型服务器中，采用相应的测试工具对各个部件进行测试，从而获取到服务器中每个部件对应的测试数据，即待评估测试数据，以用于后续根据待评估测试数据作出相应的性能评估。
步骤102，根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的。
在本发明中，性能数据库中存储有标准测试数据，而标准测试数据是基于各种类型的服务器的历史测试数据生成的，例如，将相同机型服务器中同一部件的历史测试数据(如CPU主频测试)进行汇总，这些历史测试数据已满足出厂测试标准，且在不同的测试条件或测试阶段下，其测试结果均超过出厂测试标准。因此，在一实施例中，通过计算多个相同机型服务器中同一部件的历史测试数据的平均值，从而生成标准测试数据，进而通过这些标准测试数据构建性能数据库。
进一步地，在本发明中，根据目标服务器的类型信息，可直接从性能数据库中匹配对应的标准测试数据，即根据目标服务器的平台类型、机型类型和版本类型等信息，从性能数据库中获取与之对应的部件标准测试数据。在另一实施例中，也可基于用户端输入的性能评估组合配置，获取更多的标准测试数据，以对待评估测试数据进行更为全面的评估，例如，从性能数据库中获取与目标服务器机型不同的标准测试数据，即该标准测试数据所对应服务器的类型信息，除了机型不同以外，其它各项类型均相同，从而评估目标服务器中的目标部件与其它机型中的相同部件之间的性能差异。
步骤103，根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
在本发明中，将待评估测试数据与标准测试数据进行对比，通过分析待评估测试数据是否接近标准测试数据，或超过标准测试数据，进而确定目标部件的性能结果，例如，超过标准测试数据，可判断目标部件的性能等级为优品；如接近标准测试数据(可设置一个阈值，以更好分析待评估测试数据与标准测试数据之间的差距)，可判断目标部件的性能等级为良品。优选地，在一实施例中，通过绘制待评估测试数据与标准测试数据的性能曲线图，其中，横坐标可以为测试时长，纵坐标为测试数据，从而更方便测试人员查看待评估测试数据与标准测试数据之间的差异，为服务器性能评估提供更为直观的图形数据支持。
本发明提供的服务器性能评估方法，基于不同类型的服务器中各个部件的历史测试数据构建性能数据库，进而根据目标服务器的类型信息，从性能数据库中获取标准测试数据，再根据目标服务器中各个部件的待评估测试数据与对应的标准侧数据，评估部件的性能，从而提高了服务器性能评估的准确性和效率。
在上述实施例的基础上，所述根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果，包括：
接收第一输入，所述第一输入包括选取一种或多种性能评估组合条件的操作；
响应于所述第一输入，确定目标性能评估组合条件，并将所述目标性能评估组合条件对应的所述标准测试数据与所述待评估测试数据进行对比，确定所述目标部件的性能评估结果。
在本发明中，可根据用户端的输入操作，确定性能评估组合条件，具体地，性能评估组合条件是基于服务器的类型信息，将性能数据库中的标准测试数据进行了相应分类得到的，其中，服务器按照平台分类，可分为Intel平台、AMD平台和ARM平台；服务器机型可按照同一平台的不同机型进行分类，例如，在一服务器厂商的机型中，Intel平台的机型有NF5468M6、NF5488M6和NF5688M6等，AMD平台的机型有NF5468A5、NF5488A6和NF5448A5等；服务器代数，即服务器版本也可进行分类，例如，NF5468M5、NF5468M6和NF5468M7，分别表示的第五代版本的服务器、第六代版本的服务器和第七代版本的服务器。
在本发明中，根据用户端输入的服务器类型信息进行快速分类，形成对应的性能评估组合条件，例如，将目标服务器与相同平台中各类机型的同一种部件的性能测试结果进行横向对比(如目标服务器的型号为NF5468M6，属于Intel平台，与NF5688M6以及NF5488M6等M6机型中同一部件性能结果进行横向对比)；将目标服务器与历代平台中不同版本的同一种部件的性能测试结果进行纵向对比(如目标服务器的型号为NF5468M5，属于第五代版本的机型，与NF5468M6以及NF5468M7机型中同一部件的性能结果进行纵向对比)；还可以对比同一种机型中同一类部件的不同部件型号的性能，如NF5468M6机型中的GPU，具有A10、A30、A40和A100等多种部件型号，进而根据这个性能评估组合条件，进行性能结果的相互对比。本发明实现了对目标服务器中的目标部件进行综合性能评估，从而得到更为全面的评估结果。
在上述实施例的基础上，所述性能数据库通过以下步骤构建得到：
获取不同类型的服务器中各个部件的基础性能标准数据和历史测试数据，其中，所述基础性能标准数据为部件在出厂测试通过时对应的性能标准数据，所述历史测试数据为服务器中的部件在历史时段通过性能评估测试时对应的测试数据；
根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据；
基于各个服务器的类型信息，根据所述基础性能标准数据和所述标准测试数据，构建所述性能数据库，其中，所述类型信息至少包括服务器平台类型信息、服务器机型类型信息和服务器版本类型信息。
结构化查询语言(Structured Query Language，简称SQL)是具有数据操纵和数据定义等多种功能的数据库语言，这种语言具有交互性特点，能为用户提供极大的便利。在本发明中，通过数据库SQL语言建立起基本的性能数据库，使用数据库模式定义语言(DataDefinition Language，简称DDL)，定义数据库的逻辑结构，包括定义数据库、基本表、视图和索引4部分。进一步地，通过数据操作语言(Data Manipulation Language，简称DML)，将服务器中各类部件的基本信息和性能标准维护到数据库中，同时，将后续得到的各种类型的服务器的历史测试数据也维护到数据库中，从而不断对数据库进行更新。
在本发明中，通过SQL数据库统一管理服务器中各类部件信息、性能标准，再通过脚本自动对性能测试结果和数据库中的性能标准进行对比和评估；同时，脚本会自动收集每次的性能测试结果，基于不同的类型信息，对获取到的历史测试数据进行分类，并完善到性能数据库中，随着数据库越来越充实，在后续进行性能评估过程时，当前性能测试结果不仅仅会和厂商性能标准对比，还会将历史测试数据按照不同的性能评估组合条件，生成相应的标准测试数据，进而实现目标服务器中各个目标部件按照服务器类型信息进行横向或纵向等方式的全面性能评估。
在本发明中，随着性能数据库的不断更新，性能数据库会由最基本的性能标准数据库(即只包括部件出厂测试标准的相关数据)，逐渐补充完善成为包含有多平台、多种机型的性能测试数据的数据库，这些日渐庞大的数据将会运用到之后的性能评估操作中，在提高服务器评估准确性的同时，也能更加完善性能评估结果。
在上述实施例的基础上，在所述根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据之前，所述方法还包括：
获取服务器中各个部件对应的部件类型和部件编码；
确定服务器中各个部件的所述历史测试数据对应的测试阶段，其中，所述测试阶段至少包括系统设计验证阶段、系统集成设计阶段、系统确认设计阶段和本地维护终端阶段；
在相同的所述测试阶段中，通过以下步骤构建多种所述性能评估组合条件：
根据相同的所述服务器机型类型信息和相同的所述部件编码，构建第一性能评估组合条件；
根据不同的所述服务器机型类型信息和相同的所述部件编码，构建第二性能评估组合条件；
根据不同的所述服务器平台类型信息和相同的所述部件编码，构建第三性能评估组合条件；
根据相同的所述服务器机型类型信息、不同的所述服务器版本类型信息以及相同的所述部件编码，构建第四性能评估组合条件；
根据相同的所述服务器机型类型信息、相同的所述服务器版本类型信息、相同的所述部件类型以及不同的所述部件编码，构建第五性能评估组合条件。
在本发明中，在执行服务器的自动化性能评估操作时，首先需要通过用户端获取到被测服务器(即目标服务器)的基本信息，如测试机型、平台和部件编码等；进一步地，脚本(前期构建的脚本，可根据获取到的服务器类型信息，执行相应的操作)会通过数据查询语言(Data Query Language，简称DQL)，从性能数据库中查询目标部件的基本性能标准数据，并将目标部件的待评估数据与基本性能标准数据进行对比。
在确定待评估数据已满足基本性能标准数据后，脚本会根据性能评估组合条件，通过DQL语言查询对应的标准测试数据，进行全面对比和评估。具体地，在一实施例中，采用不同的性能评估组合条件，对目标部件进行性能评估，首先，获取目标部件的部件类型(如CPU、GPU等)以及部件编码(同一部件类型的不同型号的两种部件，两者的部件编码是不同的，如GPU，分别有A10、A30和A40这几种型号，这几个部件属于同一部件类型，但是对应的部件编码是存在区别的)；进一步地，基于目标服务器的类型信息和第一性能评估组合条件，从性能数据库中获取对应的标准测试数据，并与待评估测试数据进行对比评估，优选地，在一实施例中，在第一性能评估组合条件的基础上，添加测试阶段的组合条件，从性能数据库中获取更为全面的标准测试数据，例如，目标服务器的类型为NF5468M6，通过查询性能数据库，获取性能数据库中的该机型在系统设计验证(System design Verify，简称SDV)阶段、系统集成测试(System Integration Testing，简称SIT)阶段、系统模拟测试(SystemVerification Test，简称SVT)阶段以及本地维护终端(Local Maintenance Terminal，简称LMT)阶段中，同一编码部件测试得到的历史测试数据和目标服务器中对应部件当前性能数据进行对比。在一实施例中，还可根据上述各个测试阶段的历史测试数据，计算各测试阶段中所有历史测试数据的平均值，形成标准测试数据，从而评估目标服务器中部件的待评估测试数据是否达到该平均值，以进行相应的性能评估。
进一步地，对于第二性能评估组合条件，则是基于目标服务器的类型信息，从性能数据库中获取不同机型类型且同一部件编码的历史测试数据(标准测试数据)进行对比评估。
对于第三性能评估组合条件，则是基于目标服务器的类型信息，从性能数据库中获取不同平台且同一部件的标准测试数据进行对比评估，例如，目标服务器的类型为NF5468M6，属于Intel平台，获取性能数据库中NF5468A6(属于AMD平台)以及ARM平台的相同机型中同一编码部件的标准测试数据进行评估。
对于第四性能评估组合条件，则是基于目标服务器的类型信息，从性能数据库中获取同一机型、不同版本且同一部件编码的标准测试数据进行对比评估，例如，目标服务器的类型为NF5468M5，属于第五代Intel平台，获取性能数据库中NF5468M6(第六代Intel平台)、NF5468M7(第七代Intel平台)相同机型同一部件编码的标准测试数据进行纵向对比。
对于第五性能评估组合条件，则是基于目标服务器的类型信息，从性能数据库中获取同一机型同一版本同一类型部件且部件编码不同的标准测试数据进行对比评估，例如，目标服务器NF5468M6机型中的目标部件为GPU，且部件编码为A10，基于目标服务器的类型信息，获取性能数据库中其它GPU型号(如A30、A40和A100)的标准测试数据性相互对比，以评估其性能。
需要说明的是，在本发明中，也可根据用户端的操作或性能测试要求，选取上述的一种或几种性能评估组合条件进行性能评估，以提高测试效率。
在上述实施例的基础上，所述根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据，包括：
根据所述性能评估组合条件对应的多个所述历史测试数据的平均值，确定所述标准测试数据；
或，将所述性能评估组合条件对应的多个所述历史测试数据进行排序，并根据排序结果和预设标准条件，从多个所述历史测试数据中选取所述标准测试数据。
在本发明中，通过设置不同的性能评估组合条件，计算相同组合条件下的多个历史测试数据的平均值，从而生成对应的标准测试数据；也可以基于相同的组合条件，将多个历史测试数据从低到高的顺序进行排序，构建一个历史测试数据曲线图，例如，CPU主频测试数据，横坐标为测试时间，纵坐标为测试指令数量，通过该曲线图，根据CPU在一个时钟周期内完成的指令数量，将历史测试数据进行排序，进一步地，根据预设标准条件(如选取排序从低到高的第5个)选取对应的历史测试数据作为标准测试数据，从而较为准确的确定标准测试数据，避免人为主观选取造成的影响。
在上述实施例的基础上，在所述获取目标服务器的类型信息和目标部件的待评估测试数据之后，所述方法还包括：
若根据所述类型信息，确定所述性能数据库中未存储有所述目标服务器对应的所述标准测试数据，则根据所述目标部件的部件类型，从所述性能数据库中获取对应的所述基础性能标准数据，并在确定所述目标部件的所述待评估测试数据满足对应的所述基础性能标准数据的情况下，将所述待评估测试数据作为所述标准测试数据存储至所述性能数据库。
在本发明中，通过脚本或网页访问性能数据库，进行自动化性能评估判断的同时，通过用户端获取目标服务器的机型、平台和部件编码等信息，脚本会使用DML语言将本次对比的性能数据补充到性能数据库中。具体地，首先，脚本会判断目标服务器的类型信息是否在性能数据库中已存，如不存在，脚本会使用DDL语言，自动建立对应该类型项目的数据库，再使用DML语言将本次性能数据(即待评估测试数据)及其对应的部件信息维护到该类型项目的数据库下；若存在，脚本会直接使用DML语言将本次性能数据及其对应的部件信息维护到已有类型项目的数据库下。随着不断对性能数据库进行更新完善，使得服务器性能评估的测试质量和评估效率有着极大的改善。
在上述实施例的基础上，所述根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果，包括：
基于不同的所述性能评估组合条件，根据待评估测试数据和所述标准测试数据，构建对应的性能指标评估图，以通过所述性能指标评估图展示所述性能评估结果。
在本发明中，通过目标服务器中部件的待评估测试数据与标准测试数据，绘制对应的性能指标评估图，从而更加直观的对目标服务器进行性能评估。具体地，在本发明中，可通过Python这种计算机程序设计语言，基于待评估测试数据和标准测试数据，采用Pandas工具中的read_sql函数方法，直接获取到整张数据表(包括表结构)；然后，对得到的结果集列表进行编辑，并结合Matplotlib绘制所需的图表；最后，使用Seaborn模块的Factorplot函数进行绘图。
本发明通过收集并管理服务器测试过程中各个部件产生的测试数据，将这些测试数据与基础性能标准以及其它性能数据进行对比，再通过进行绘图，获取到更为直观的性能评估报告，提高测试的效率。
图2为本发明提供的服务器性能评估的整体流程示意图，可参考图2所示，具体步骤为：初始化性能评估程序后，输入目标服务器的类型信息和部件的性能数据(即待评估测试数据)，对于性能数据库中不存在的类型信息，需要通过DDL语言创建新的类型项目，并将本次的待评估测试数据(需确定该测试数据已通过出厂测试标准)存储至该类型项目下，对于性能数据库中已存在的类型信息，则通过DML语言直接将该测试数据补充到对应的类型项目中，从而更新性能数据库；进一步地，通过DQL语言从性能数据库中查询与目标服务器相关的标准测试数据，也可根据不同的性能评估组合条件，获取对应的标准测试数据，进而通过Python脚本，根据得到的标准测试数据和待评估数据绘制性能评估图，最后输出相应的评估报告。
本发明基于SQL数据库的性能数据收集、管理和评估方案，首先建立一个基础性能标准数据库，通过性能评估脚本将每一次性能测试产生的性能数据维护到该数据库当中，再通过基础性能标准数据库和逐渐积累的历史测试数据，对后续测试过程中的性能结果进行评估，从而提高服务器性能测试评估的效率，改善产品的质量。
下面对本发明提供的服务器性能评估系统进行描述，下文描述的服务器性能评估系统与上文描述的服务器性能评估方法可相互对应参照。
图3为本发明提供的服务器性能评估系统的结构示意图，如图3所示，本发明提供了一种服务器性能评估系统，包括待评估数据获取模块301、评估标准数据生成模块302和性能评估模块303，其中，待评估数据获取模块301用于获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；评估标准数据生成模块302用于根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；性能评估模块303用于根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
本发明提供的服务器性能评估系统，基于不同类型的服务器中各个部件的历史测试数据构建性能数据库，进而根据目标服务器的类型信息，从性能数据库中获取标准测试数据，再根据目标服务器中各个部件的待评估测试数据与对应的标准侧数据，评估部件的性能，从而提高了服务器性能评估的准确性和效率。
在上述实施例的基础上，所述性能评估模块包括性能评估条件输入单元和评估执行单元，其中，性能评估条件输入单元用于接收第一输入，所述第一输入包括选取一种或多种性能评估组合条件的操作；评估执行单元用于响应于所述第一输入，确定目标性能评估组合条件，并将所述目标性能评估组合条件对应的所述标准测试数据与所述待评估测试数据进行对比，确定所述目标部件的性能评估结果。
在上述实施例的基础上，所述系统还包括历史测试数据采集模块、标准测试数据生成模块和数据库构建模块，其中，历史测试数据采集模块用于获取不同类型的服务器中各个部件的基础性能标准数据和历史测试数据，其中，所述基础性能标准数据为部件在出厂测试通过时对应的性能标准数据，所述历史测试数据为服务器中的部件在历史时段通过性能评估测试时对应的测试数据；标准测试数据生成模块用于根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据；数据库构建模块用于基于各个服务器的类型信息，根据所述基础性能标准数据和所述标准测试数据，构建所述性能数据库，其中，所述类型信息至少包括服务器平台类型信息、服务器机型类型信息和服务器版本类型信息。
在上述实施例的基础上，所述系统还用于：
获取服务器中各个部件对应的部件类型和部件编码；
确定服务器中各个部件的所述历史测试数据对应的测试阶段，其中，所述测试阶段至少包括系统设计验证阶段、系统集成设计阶段、系统确认设计阶段和本地维护终端阶段；
在相同的所述测试阶段中，所述系统通过以下步骤构建多种所述性能评估组合条件：
根据相同的所述服务器机型类型信息和相同的所述部件编码，构建第一性能评估组合条件；
根据不同的所述服务器机型类型信息和相同的所述部件编码，构建第二性能评估组合条件；
根据不同的所述服务器平台类型信息和相同的所述部件编码，构建第三性能评估组合条件；
根据相同的所述服务器机型类型信息、不同的所述服务器版本类型信息以及相同的所述部件编码，构建第四性能评估组合条件；
根据相同的所述服务器机型类型信息、相同的所述服务器版本类型信息、相同的所述部件类型以及不同的所述部件编码，构建第五性能评估组合条件。
在上述实施例的基础上，所述标准测试数据生成模块具体用于，根据所述性能评估组合条件对应的多个所述历史测试数据的平均值，确定所述标准测试数据；或，将所述性能评估组合条件对应的多个所述历史测试数据进行排序，并根据排序结果和预设标准条件，从多个所述历史测试数据中选取所述标准测试数据。
在上述实施例的基础上，所述系统还包括数据库更新模块，用于若根据所述类型信息，确定所述性能数据库中未存储有所述目标服务器对应的所述标准测试数据，则根据所述目标部件的部件类型，从所述性能数据库中获取对应的所述基础性能标准数据，并在确定所述目标部件的所述待评估测试数据满足对应的所述基础性能标准数据的情况下，将所述待评估测试数据作为所述标准测试数据存储至所述性能数据库。
在上述实施例的基础上，所述性能评估模块包括图像展示单元，用于基于不同的所述性能评估组合条件，根据待评估测试数据和所述标准测试数据，构建对应的性能指标评估图，以通过所述性能指标评估图展示所述性能评估结果。
本发明提供的系统是用于执行上述各方法实施例的，具体流程和详细内容请参照上述实施例，此处不再赘述。
图4为本发明提供的电子设备的结构示意图，如图4所示，该电子设备可以包括：处理器(Processor)401、通信接口(Communications Interface)402、存储器(Memory)403和通信总线404，其中，处理器401，通信接口402，存储器403通过通信总线404完成相互间的通信。处理器401可以调用存储器403中的逻辑指令，以执行服务器性能评估方法，该方法包括：获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
此外，上述的存储器403中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法所提供的服务器性能评估方法，该方法包括：获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各实施例提供的服务器性能评估方法，该方法包括：获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种服务器性能评估方法，其特征在于，包括：
获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；
根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；
根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
2.根据权利要求1所述的服务器性能评估方法，其特征在于，所述根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果，包括：
接收第一输入，所述第一输入包括选取一种或多种性能评估组合条件的操作；
响应于所述第一输入，确定目标性能评估组合条件，并将所述目标性能评估组合条件对应的所述标准测试数据与所述待评估测试数据进行对比，确定所述目标部件的性能评估结果。
3.根据权利要求2所述的服务器性能评估方法，其特征在于，所述性能数据库通过以下步骤构建得到：
获取不同类型的服务器中各个部件的基础性能标准数据和历史测试数据，其中，所述基础性能标准数据为部件在出厂测试通过时对应的性能标准数据，所述历史测试数据为服务器中的部件在历史时段通过性能评估测试时对应的测试数据；
根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据；
基于各个服务器的类型信息，根据所述基础性能标准数据和所述标准测试数据，构建所述性能数据库，其中，所述类型信息至少包括服务器平台类型信息、服务器机型类型信息和服务器版本类型信息。
4.根据权利要求3所述的服务器性能评估方法，其特征在于，在所述根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据之前，所述方法还包括：
获取服务器中各个部件对应的部件类型和部件编码；
确定服务器中各个部件的所述历史测试数据对应的测试阶段，其中，所述测试阶段至少包括系统设计验证阶段、系统集成设计阶段、系统确认设计阶段和本地维护终端阶段；
在相同的所述测试阶段中，通过以下步骤构建多种所述性能评估组合条件：
根据相同的所述服务器机型类型信息和相同的所述部件编码，构建第一性能评估组合条件；
根据不同的所述服务器机型类型信息和相同的所述部件编码，构建第二性能评估组合条件；
根据不同的所述服务器平台类型信息和相同的所述部件编码，构建第三性能评估组合条件；
根据相同的所述服务器机型类型信息、不同的所述服务器版本类型信息以及相同的所述部件编码，构建第四性能评估组合条件；
根据相同的所述服务器机型类型信息、相同的所述服务器版本类型信息、相同的所述部件类型以及不同的所述部件编码，构建第五性能评估组合条件。
5.根据权利要求3所述的服务器性能评估方法，其特征在于，所述根据所述历史测试数据，确定各种所述性能评估组合条件对应的所述标准测试数据，包括：
根据所述性能评估组合条件对应的多个所述历史测试数据的平均值，确定所述标准测试数据；
或，将所述性能评估组合条件对应的多个所述历史测试数据进行排序，并根据排序结果和预设标准条件，从多个所述历史测试数据中选取所述标准测试数据。
6.根据权利要求3所述的服务器性能评估方法，其特征在于，在所述获取目标服务器的类型信息和目标部件的待评估测试数据之后，所述方法还包括：
若根据所述类型信息，确定所述性能数据库中未存储有所述目标服务器对应的所述标准测试数据，则根据所述目标部件的部件类型，从所述性能数据库中获取对应的所述基础性能标准数据，并在确定所述目标部件的所述待评估测试数据满足对应的所述基础性能标准数据的情况下，将所述待评估测试数据作为所述标准测试数据存储至所述性能数据库。
7.根据权利要求2至6任一项所述的服务器性能评估方法，其特征在于，所述根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果，包括：
基于不同的所述性能评估组合条件，根据待评估测试数据和所述标准测试数据，构建对应的性能指标评估图，以通过所述性能指标评估图展示所述性能评估结果。
8.一种服务器性能评估系统，其特征在于，包括：
待评估数据获取模块，用于获取目标服务器的类型信息和目标部件的待评估测试数据，其中，所述目标部件为所述目标服务器中进行性能测试的部件；
评估标准数据生成模块，用于根据所述类型信息，从性能数据库中获取对应的标准测试数据，其中，所述性能数据库是基于不同类型的服务器中各个部件的历史测试数据构建得到的；
性能评估模块，用于根据所述待评估测试数据和所述标准测试数据，确定所述目标部件的性能评估结果。
9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述服务器性能评估方法。
10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述服务器性能评估方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310868576.9A CN116909861A (zh) | 2023-07-14 | 2023-07-14 | 服务器性能评估方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310868576.9A CN116909861A (zh) | 2023-07-14 | 2023-07-14 | 服务器性能评估方法及系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116909861A true CN116909861A (zh) | 2023-10-20 |
Family
ID=88357687
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310868576.9A Pending CN116909861A (zh) | 2023-07-14 | 2023-07-14 | 服务器性能评估方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116909861A (zh) |
-
2023
- 2023-07-14 CN CN202310868576.9A patent/CN116909861A/zh active Pending
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111401722B (zh) | 智能决策方法和智能决策系统 | |
| CN105224458A (zh) | 一种数据库测试方法及系统 | |
| CN111459698A (zh) | 一种数据库集群故障自愈方法及装置 | |
| CN113010389A (zh) | 一种训练方法、故障预测方法、相关装置及设备 | |
| CN113177732A (zh) | 一种工艺流程管理方法、装置、介质及终端设备 | |
| CN109242363B (zh) | 一种基于多种质量控制模型的全生命周期测试管理平台 | |
| CN105868956A (zh) | 一种数据处理方法及装置 | |
| CN111582488A (zh) | 一种事件推演方法及装置 | |
| US20050278301A1 (en) | System and method for determining an optimized process configuration | |
| CN113569988B (zh) | 一种算法模型评测方法及系统 | |
| US20220091818A1 (en) | Data feature processing method and data feature processing apparatus | |
| CN111367782A (zh) | 回归测试数据自动生成的方法及装置 | |
| CN112784273A (zh) | 一种sql风险识别方法、装置及设备 | |
| LU505740B1 (en) | Data monitoring method and system | |
| CN115759885A (zh) | 一种基于分布式物资供应下的物资抽检方法和装置 | |
| CN116090349A (zh) | 一种光学薄膜生产工艺优化方法、设备及存储介质 | |
| CN116909861A (zh) | 服务器性能评估方法及系统 | |
| CN116467219A (zh) | 一种测试处理方法及装置 | |
| CN113570070B (zh) | 流式数据采样与模型更新方法、装置、系统与存储介质 | |
| CN112785418B (zh) | 信贷风险建模方法、装置、设备及计算机可读存储介质 | |
| CN113610225A (zh) | 质量评估模型训练方法、装置、电子设备及存储介质 | |
| CN113628077A (zh) | 生成不重复考题的方法、终端及可读存储介质 | |
| CN110716855B (zh) | 处理器指令集测试方法及装置 | |
| CN115809285A (zh) | 一种基于业务数据的资源用量预测方法及装置 | |
| CN116910274B (zh) | 基于知识图谱和预测模型的试题生成方法及系统 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |