CN115113825A - 一种性能数据获取方法、装置、设备及可读存储介质 - Google Patents

一种性能数据获取方法、装置、设备及可读存储介质 Download PDF

Info

Publication number
CN115113825A
CN115113825A CN202210870838.0A CN202210870838A CN115113825A CN 115113825 A CN115113825 A CN 115113825A CN 202210870838 A CN202210870838 A CN 202210870838A CN 115113825 A CN115113825 A CN 115113825A
Authority
CN
China
Prior art keywords
data
performance
increment
queue
performance data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210870838.0A
Other languages
English (en)
Inventor
孙润宇
孟祥瑞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Jinan data Technology Co ltd
Original Assignee
Inspur Jinan data Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Jinan data Technology Co ltd filed Critical Inspur Jinan data Technology Co ltd
Priority to CN202210870838.0A priority Critical patent/CN115113825A/zh
Publication of CN115113825A publication Critical patent/CN115113825A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0638—Organizing or formatting or addressing of data
    • G06F3/0644—Management of space entities, e.g. partitions, extents, pools
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0602—Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/061—Improving I/O performance
    • G06F3/0613—Improving I/O performance in relation to throughput
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请公开了一种性能数据获取方法、装置、设备及可读存储介质，获取PG数据；PG数据包括累计性能值和时间；利用PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；性能增量数据包括性能增值和时长增值；将性能增量数据写入先进先出的性能数据队列；对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。本申请属于存储技术领域，本申请所得存储池性能数据是多轮议案时间对应的PG数据的整合，可以更加准确的表征存储池真实性能。

Description

一种性能数据获取方法、装置、设备及可读存储介质
技术领域
本申请涉及存储技术领域，特别是涉及一种性能数据获取方法、装置、设备及可读存储介质。
背景技术
在分布式存储系统中，存储池就是PG(Placement Group，放置组，用于放置对象的一个载体)的聚合。
对于存储集群来说，性能统计即存储集群的读写带宽，读写IOPS是反应集群性能和状态的重要指标。和利用工具压测存储集群时，工具反应出的性能信息不同，压测工具是从客户端的角度反应的性能，而存储集群也应有自己的性能统计方法和展示。
现有的集群性能统计方案包括：OSD统计一段时间内的数据量和读写操作次数；各个OSD将这些统计信息发送给主MON；主MON在和备MON议案时将统计信息同步并进行计算和展示。该方案存在问题：由于存储池内OSD个数较多，每个OSD发送给MON数据的时间是不一定的，导致MON在计算时不一定是存储池内所有OSD该段时间的数据量和读写操作次数。
综上所述，如何有效地解决如何准确统计存储池性能等问题，是目前本领域技术人员急需解决的技术问题。
发明内容
本申请的目的是提供一种性能数据获取方法、装置、设备及可读存储介质，通过性能数据队列缓存近期的性能数据使得存储池性能统计更加准确，波动更加平缓，更能反应产品真实的性能，提高产品的易用性，提高了产品竞争力。
为解决上述技术问题，本申请提供如下技术方案：
一种性能数据统计方法，包括：
获取PG数据；所述PG数据包括累计性能值和时间；
利用所述PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；所述性能增量数据包括性能增值和时长增值；
将所述性能增量数据写入先进先出的性能数据队列；
对所述性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
优选地，将所述性能增量数据写入先进先出的性能数据队列，包括：
对所述性能数据队列中的时长增值进行累加，得到总时长增量；
判断所述总时长增量是否大于预设时长阈值；
如果是，则在保障所述性能数据队列的数据条数小于固定条数的情况下，将所述性能增量数据写入所述性能数据队列；
如果否，则直接将所述性能增量数据写入所述性能数据队列。
优选地，所述在保障所述性能数据队列深度固定的情况下，将所述性能增量数据写入所述性能数据队列，包括：
获取所述性能数据队列的数据条数；
判断所述数据条数是否大于固定条数；
如果是，则将最先进入所述性能数据队列的性能增量数据踢出后，将所述性能增量数据所述性能数据队列；
如果否，则将所述性能增量数据写入所述性能数据队列。
优选地，对所述性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据，包括：
对所述性能数据队列中的性能增量数据进行累加，得到读数据总增量，写数据总增量，读次数总增量和写次数总增量；
对所述性能数据队列中的时长增值进行累加，得到总时长增量；
将所述读数据总增量，写数据总增量，读次数总增量和写次数总增量分别与所述总时长增量做比，得到读带宽、写带宽、每秒读次数和每秒写次数；
将所述读带宽、所述写带宽、所述每秒读次数和所述每秒写次数确定为所述存储池性能数据。
优选地，利用所述PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据，包括：
按照数据种类，对所述PG数据和所述上轮议案PG数据做差，得到本轮议案对应性能增量数据。
优选地，所述获取PG数据，包括：
接收OSD发送的所述PG数据。
优选地，还包括：
绘制所述存储池性能数据和历史存储池性能数据对应的性能趋势图；
在所述可视化界面显示所述性能趋势图。
一种性能数据获取装置，包括：
PG数据获取模块，用于获取PG数据；所述PG数据包括累计性能值和时间；
议案模块，用于利用所述PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；所述性能增量数据包括性能增值和时长增值；
数据缓存模块，用于将所述性能增量数据写入先进先出的性能数据队列；
性能统计模块，用于对所述性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现上述性能数据获取方法的步骤。
一种可读存储介质，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现上述性能数据获取方法的步骤。
应用本申请实施例所提供的方法，获取PG数据；PG数据包括累计性能值和时间；利用PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；性能增量数据包括性能增值和时长增值；将性能增量数据写入先进先出的性能数据队列；对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
在本申请中，由于存储池即PG的聚合，因而首先获取PG数据。需要注意的是，在本申请中，该PG数据为累计性能值和时间，而并非一段时间内的数据量和读写操作次数。得到PG数据后，基于该PG数据与上轮议案PG数据，可确定本轮议案对应的性能增量数据。该性能增量数据包括性能增量值和时长增值。为了使得到的存储池性能数据更加精准，在本申请还将该性能增量数据存入性能数据队列，基于性能数据队列可以对多轮议案对应的性能增量数据进行统计计算，最终得到存储池性能数据。即该存储池性能数据是多轮议案时间对应的PG数据的整合，可以更加准确的表征存储池真实性能。即该存储池性能数据更加精准。
相应地，本申请实施例还提供了与上述性能数据获取方法相对应的性能数据获取装置、设备和可读存储介质，具有上述技术效果，在此不再赘述。
附图说明
为了更清楚地说明本申请实施例或相关技术中的技术方案，下面将对实施例或相关技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例中一种性能数据获取方法的实施流程图；
图2为本申请实施例中一种数据累加统计示意图；
图3为本申请实施例中一种性能数据的统计示意图；
图4为本申请实施例中一种性能数据队列示意图；
图5为本申请实施例中另一种性能数据队列示意图；
图6为本申请实施例中一种性能数据获取装置的结构示意图；
图7为本申请实施例中一种电子设备的结构示意图；
图8为本申请实施例中一种电子设备的具体结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面结合附图和具体实施方式对本申请作进一步的详细说明。显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
为便于理解，下面将本申请所涉及相关术语进行说明和解释：
OSD，Object-based Storage Device，对象存储设备；
MON，Monitor，监控模块；
PG，Placement Group，放置组，用于放置对象的一个载体；
SSD，Solid State Disk，固态电子存储阵列硬盘；
HDD，Hard Disk Drive，硬盘驱动器；
IOPS，Input/Output Operations Per Second，每秒的读写操作次数。
请参考图1，图1为本申请实施例中一种性能数据获取方法的流程图，该方法可应用于MON中，该方法包括以下步骤：
S101、获取PG数据。
其中，PG数据包括累计性能值和时间。累计性能值可具体包括读数据总量，写数据总量，读次数总量和写次数总量；时间即为确定出该累计性能值的时间，如2022-7-10-13:52:25。
具体的，MON可以通过接收其他模块或设备发送数据的方式获得PG数据，也可以通过读取数据库或其他形式存在于可读存储介质中的数据的方式获取该PG数据。在本申请中，PG数据包括累计性能值和时间。
在分布式文件系统中，存储的内容按照固定大小切割，这一块固定大小的数据称为一个对象，PG就是多个对象的聚合，是一个逻辑上的概念。而PG和对象之间通过一致性哈希算法对应起来，一个PG对应于多个对象。而每个PG与OSD的对应是通过数据分布算法对应起来的，一个PG对应于多个OSD。OSD可以简单理解为物理上的磁盘，一个OSD上可以有多个PG，这样想要存储的内容就放置在了磁盘上。
客户端总是先将数据对象映射到PG上，然后发送给PG的主(OSD)上，所以所有数据的读写操作均需通过PG的主。因而，在本申请中的一种具体实施方式中，步骤S101获取PG数据，可以具体包括：接收OSD发送的PG数据。也就是说，OSD以PG为单位，对进行性能统计，从而得到累计性能值和时间，并反馈给MON。具体的，当OSD在处理读写操作时对数据读写带宽和读写操作次数进行统计，且采用累加方式并将性能数据存入数据库中(MON可从数据库中读取获得)。即存储池创建后，该存储池内的性能统计数据只增不减。如图2所示，客户端要写5M数据到pg1.1上，该pg的主是osd.0，那么该osd统计pg1.1的写带宽就会加5M，下次如果再写4M，那么写带宽就是继续加4M，也就是9M，其他统计以此类推，在此不再一一赘述。
OSD可以按照固定的时间向MON发送PG数据，MON每接收到一次PG数据，即可对已存的PG数据进行更新，直到达到议案时间。
S102、利用PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据。
其中，性能增量数据包括性能增值和时长增值。
需要注意的是，在本申请中，PG数据即最新的得到的数据，而上轮议案PG数据即为上轮议案时，所对应的最新PG数据。在本申请中，对于两次议案之间，MON获取PG数据的次数不做限定。也就是说，在下一次议案之前，可不断的基于OSD发送的PG数据不断进行更新。对于不同的OSD发送的PG数据，以PG为单位，对PG数据进行累加统计。
在抵达议案时间后，直接基于当前的PG数据和上轮议案PG数据，可以去掉本轮议案所对应的性能增量数据。即该性能增量数据即对应本次议案与上一次议案之间对应的性能增量数据。
在本申请中的一种具体实施方式中，步骤S102利用PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据，具体包括：按照数据种类，对PG数据和上轮议案PG数据做差，得到本轮议案对应性能增量数据。也就是说，直接将本次议案的PG数据与上轮议案PG数据中对应数据种类进行做差，从而得到本轮议案对应性能增量数据。例如，本次议案的PG数据包括：写数据总量30M，读数据总量10M，写次数150，读次数60，时间：2022-6-24-09:51:05；上轮议案对应的PG数据包括：写数据总量10M，读数据总量5M，写次数50，读次数300，时间：2022-6-24-09:51:00。请参照下表，对应种类进行做差计算，得到本轮议案对应性能增量数据包括：写数据增量20M，读数据增量5M，写次数增量30，读次数增量60，时长增量：5秒。
Figure BDA0003761176750000061
需要注意的是，当为首次议案，则可将上轮议案对应的写数据总量、读数据总量、写次数和读次数均初始化为零；将本轮议案对应的PG数据的首次统计时间为为上一轮议案的时间。
S103、将性能增量数据写入先进先出的性能数据队列。
得到性能增量数据之后，将其写入先进先出的性能数据队列。
性能增量数据包括了写数据增量，读数据增量，写次数增量，读次数增量，时长增量，基于这些数据，可直接计算出本轮议案与上轮议案对应的时间内的存储池的读带宽、写带宽和IOPS。为避免直接基于本轮议案与上轮议案对应的时间内，对存储池进行性能统计，导致数据不精准，可统计多轮议案对应的性能统计，从而避免单轮时间对应的性能波动所带来的不精准问题。
基于此，在本申请中，设置了性能数据队列，在该队列中缓存性能增量数据，以便后续得到更为精准的存储池性能数据。
在实际应用中，该性能数据队列的深度(即队列中的数据条数)可固定也可不固定，具体情况可根据实际需要而设定，在此不再一一赘述。
S104、对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
在本申请中，对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据，即该存储池性能数据是性能数据队列中多次议案对应的性能数据的有效统计。也就是说，该存储池性能数据并不会因存储池内OSD个数较多，每个OSD发送给MON数据的时间是不一定的，导致MON在计算时不一定是存储池内所有OSD该段时间的数据量和读写操作次数。即，本申请UO得到的存储池性能数据，是存储池内所有OSD在这多轮议案时间范围内的数据量和读写操作次数。
在本申请中的一种具体实施方式中，步骤S104对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据，包括：
步骤一、对性能数据队列中的性能增量数据进行累加，得到读数据总增量，写数据总增量，读次数总增量和写次数总增量；
步骤二、对性能数据队列中的时长增值进行累加，得到总时长增量；
步骤三、将读数据总增量，写数据总增量，读次数总增量和写次数总增量分别与总时长增量做比，得到读带宽、写带宽、每秒读次数和每秒写次数；
步骤四、将读带宽、写带宽、每秒读次数和每秒写次数确定为存储池性能数据。
为便于描述，下面将上述四个步骤结合起来进行说明。
请参考图3，图3为本申请实施例中性能数据的统计示意图。针对性能数据队列中的各种性能增量数据进行累加，从而得到读数据总增量，写数据总增量，读次数总增量和写次数总增量；相应地，对性能数据队列中的时长增值进行累加，得到总时长增量。即，性能数据队列存在多少组性能增量数据，则均将这些性能增量数据中的各类数据分别进行累加，得到读数据总增量，写数据总增量，读次数总增量、写次数总增量和总时长增量，然后将读数据总增量，写数据总增量，读次数总增量和写次数总增量分别与总时长增量做比，从而得到读带宽、写带宽、每秒读次数和每秒写次数；即，该存储池性能数据为该读带宽、写带宽、每秒读次数和每秒写次数。
在得到该存储池性能数据之后，可绘制存储池性能数据和历史存储池性能数据对应的性能趋势图；在可视化界面显示性能趋势图。如此，用户便可在可视化界面中看到精准的存储性能的变化趋势，从而决定是否增减对应的服务以及连接存储池的真实性能状态。该性能趋势图可具体为折线图、柱状图等形式。
应用本申请实施例所提供的方法，获取PG数据；PG数据包括累计性能值和时间；利用PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；性能增量数据包括性能增值和时长增值；将性能增量数据写入先进先出的性能数据队列；对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
在本申请中，由于存储池即PG的聚合，因而首先获取PG数据。需要注意的是，在本申请中，该PG数据为累计性能值和时间，而并非一段时间内的数据量和读写操作次数。得到PG数据后，基于该PG数据与上轮议案PG数据，可确定本轮议案对应的性能增量数据。该性能增量数据包括性能增量值和时长增值。为了使得到的存储池性能数据更加精准，在本申请还将该性能增量数据存入性能数据队列，基于性能数据队列可以对多轮议案对应的性能增量数据进行统计计算，最终得到存储池性能数据。即该存储池性能数据是多轮议案时间对应的PG数据的整合，可以更加准确的表征存储池真实性能。即该存储池性能数据更加精准。
需要说明的是，基于上述实施例，本申请实施例还提供了相应的改进方案。在优选/改进实施例中涉及与上述实施例中相同步骤或相应步骤之间可相互参考，相应的有益效果也可相互参照，在本文的优选/改进实施例中不再一一赘述。
由于MON的计算依赖MON的议案(通常为5s一次)，在集群正常时MON的议案时间相对固定，但在集群发生故障场景时议案时间会大幅度缩短(如0.1秒到1秒左右)，导致该段时间内计算出的性能波动较大。为解决这一问题，本申请提出动态调整性能数据队列的深度来适应故障场景与正常运行场景。具体的，在执行步骤S103将性能增量数据写入先进先出的性能数据队列，包括：
步骤一、对性能数据队列中的时长增值进行累加，得到总时长增量；
步骤二、判断总时长增量是否大于预设时长阈值；
步骤三、如果是，则在保障性能数据队列的数据条数小于固定条数的情况下，将性能增量数据写入性能数据队列；
步骤四、如果否，则直接将性能增量数据写入性能数据队列。
为便于理解，下面将上述四个步骤结合起来进行说明。
通过读取性能数据队列中的时长增值，并进行累加，可以得到该性能数据队列对应的总时长增量，也是该性能数据队列所存数据对应的时长。当该总时长增量大于预设时长阈值，则表明此时性能数据队列能够满足统计需求，因而此时可固定性能数据队列的长度。即，此时可在保障性能数据队列的数据条数小于固定条数的情况下，将性能增量数据写入性能数据队列。在本申请中的一种具体实施方式中，上述步骤三、在保障性能数据队列深度固定的情况下，将性能增量数据写入性能数据队列，包括：
步骤1、获取性能数据队列的数据条数；
步骤2、判断数据条数是否大于固定条数；
步骤3、如果是，则将最先进入性能数据队列的性能增量数据踢出后，将性能增量数据性能数据队列；
步骤4、如果否，则将性能增量数据写入性能数据队列。
请参考图4，图4为本申请实施例中一种性能数据队列示意图。即，直接按照先入先出的规则，在数据条数大于固定条数(如10条，当然还可根据议案时间的长短，设置为其他能够进行有效统计的数值)时，先踢出最先进入性能数据队列的性能增量数据后，再将性能增量数据性能数据队列，从而保障性能数据队列的深度固定；而在数据条数不大于固定条数时，则可直接将性能增量数据写入性能数据队列。
若总时长增量不大于预设时长阈值，则表明此时议案时间缩短，处于故障场景下，此时需要统计更多此的议案对应的性能数据才能更准确表达真实的存储池性能，因而此时可对性能数据队列进行加深，即，此时可直接将性能增量数据写入性能数据队列。请参考图5，图5为本申请实施例中另一种性能数据队列示意图；即此时对性能数据队列的深度不做限定，但对该性能数据队列对应记录的数据的时间进行限定，即不超过预设时长阈值，如40S。当然，该数值大小可具体根据常规议案时间的长短以及故障场景下议案时间的长度，以及各个OSD上报数据的时长，保障最终所得的存储池性能数据能够对应真实情况即可。
也就是说，利用时间调控队列深度，可防止故障场景时MON议案时间缩短的场景，给OSD更多的时间将更多的统计数据上报上来，避免数据量不足导致计算不准和波动大的问题出现。
相应于上面的方法实施例，本申请实施例还提供了一种性能数据获取装置，下文描述的性能数据获取装置与上文描述的性能数据获取方法可相互对应参照。
参见图6所示，该装置包括以下模块：
PG数据获取模块101，用于获取PG数据；PG数据包括累计性能值和时间；
议案模块102，用于利用PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；性能增量数据包括性能增值和时长增值；
数据缓存模块103，用于将性能增量数据写入先进先出的性能数据队列；
性能统计模块104，用于对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
应用本申请实施例所提供的装置，获取PG数据；PG数据包括累计性能值和时间；利用PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；性能增量数据包括性能增值和时长增值；将性能增量数据写入先进先出的性能数据队列；对性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
在本申请中，由于存储池即PG的聚合，因而首先获取PG数据。需要注意的是，在本申请中，该PG数据为累计性能值和时间，而并非一段时间内的数据量和读写操作次数。得到PG数据后，基于该PG数据与上轮议案PG数据，可确定本轮议案对应的性能增量数据。该性能增量数据包括性能增量值和时长增值。为了使得到的存储池性能数据更加精准，在本申请还将该性能增量数据存入性能数据队列，基于性能数据队列可以对多轮议案对应的性能增量数据进行统计计算，最终得到存储池性能数据。即该存储池性能数据是多轮议案时间对应的PG数据的整合，可以更加准确的表征存储池真实性能。即该存储池性能数据更加精准。
在本申请的一种具体实施方式中，数据缓存模块103，具体用于对性能数据队列中的时长增值进行累加，得到总时长增量；
判断总时长增量是否大于预设时长阈值；
如果是，则在保障性能数据队列的数据条数小于固定条数的情况下，将性能增量数据写入性能数据队列；
如果否，则直接将性能增量数据写入性能数据队列。
在本申请的一种具体实施方式中，数据缓存模块103，具体用于获取性能数据队列的数据条数；
判断数据条数是否大于固定条数；
如果是，则将最先进入性能数据队列的性能增量数据踢出后，将性能增量数据性能数据队列；
如果否，则将性能增量数据写入性能数据队列。
在本申请的一种具体实施方式中，性能统计模块104，具体用于对性能数据队列中的性能增量数据进行累加，得到读数据总增量，写数据总增量，读次数总增量和写次数总增量；
对性能数据队列中的时长增值进行累加，得到总时长增量；
将读数据总增量，写数据总增量，读次数总增量和写次数总增量分别与总时长增量做比，得到读带宽、写带宽、每秒读次数和每秒写次数；
将读带宽、写带宽、每秒读次数和每秒写次数确定为存储池性能数据。
在本申请的一种具体实施方式中，议案模块102，具体用于按照数据种类，对PG数据和上轮议案PG数据做差，得到本轮议案对应性能增量数据。
在本申请的一种具体实施方式中，PG数据获取模块101，具体用于接收OSD发送的PG数据。
在本申请的一种具体实施方式中，还包括：
显示模块，用于绘制存储池性能数据和历史存储池性能数据对应的性能趋势图；
在可视化界面显示性能趋势图。
相应于上面的方法实施例，本申请实施例还提供了一种电子设备，下文描述的一种电子设备与上文描述的一种性能数据获取方法可相互对应参照。
参见图7所示，该电子设备包括：
存储器332，用于存储计算机程序；
处理器322，用于执行计算机程序时实现上述方法实施例的性能数据获取方法的步骤。
具体的，请参考图8，图8为本实施例提供的一种电子设备的具体结构示意图，该电子设备可因配置或性能不同而产生比较大的差异，可以包括一个或一个以上处理器(central processing units，CPU)322(例如，一个或一个以上处理器)和存储器332，存储器332存储有一个或一个以上的计算机应用程序342或数据344。其中，存储器332可以是短暂存储或持久存储。存储在存储器332的程序可以包括一个或一个以上模块(图示没标出)，每个模块可以包括对数据处理设备中的一系列指令操作。更进一步地，中央处理器322可以设置为与存储器332通信，在电子设备301上执行存储器332中的一系列指令操作。
电子设备301还可以包括一个或一个以上电源326，一个或一个以上有线或无线网络接口350，一个或一个以上输入输出接口358，和/或，一个或一个以上操作系统341。
上文所描述的性能数据获取方法中的步骤可以由电子设备的结构实现。
相应于上面的方法实施例，本申请实施例还提供了一种可读存储介质，下文描述的一种可读存储介质与上文描述的一种性能数据获取方法可相互对应参照。
一种可读存储介质，可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述方法实施例的性能数据获取方法的步骤。
该可读存储介质具体可以为U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可存储程序代码的可读存储介质。
本领域技术人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。本领域技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

Claims (10)

1.一种性能数据获取方法，其特征在于，包括：
获取PG数据；所述PG数据包括累计性能值和时间；
利用所述PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；所述性能增量数据包括性能增值和时长增值；
将所述性能增量数据写入先进先出的性能数据队列；
对所述性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
2.根据权利要求1所述的性能数据获取方法，其特征在于，将所述性能增量数据写入先进先出的性能数据队列，包括：
对所述性能数据队列中的时长增值进行累加，得到总时长增量；
判断所述总时长增量是否大于预设时长阈值；
如果是，则在保障所述性能数据队列的数据条数小于固定条数的情况下，将所述性能增量数据写入所述性能数据队列；
如果否，则直接将所述性能增量数据写入所述性能数据队列。
3.根据权利要求2所述的性能数据获取方法，其特征在于，所述在保障所述性能数据队列深度固定的情况下，将所述性能增量数据写入所述性能数据队列，包括：
获取所述性能数据队列的数据条数；
判断所述数据条数是否大于固定条数；
如果是，则将最先进入所述性能数据队列的性能增量数据踢出后，将所述性能增量数据所述性能数据队列；
如果否，则将所述性能增量数据写入所述性能数据队列。
4.根据权利要求1所述的性能数据获取方法，其特征在于，对所述性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据，包括：
对所述性能数据队列中的性能增量数据进行累加，得到读数据总增量，写数据总增量，读次数总增量和写次数总增量；
对所述性能数据队列中的时长增值进行累加，得到总时长增量；
将所述读数据总增量，写数据总增量，读次数总增量和写次数总增量分别与所述总时长增量做比，得到读带宽、写带宽、每秒读次数和每秒写次数；
将所述读带宽、所述写带宽、所述每秒读次数和所述每秒写次数确定为所述存储池性能数据。
5.根据权利要求1所述的性能数据获取方法，其特征在于，利用所述PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据，包括：
按照数据种类，对所述PG数据和所述上轮议案PG数据做差，得到本轮议案对应性能增量数据。
6.根据权利要求1所述的性能数据获取方法，其特征在于，所述获取PG数据，包括：
接收OSD发送的所述PG数据。
7.根据权利要求1至6任一项所述的性能数据获取方法，其特征在于，还包括：
绘制所述存储池性能数据和历史存储池性能数据对应的性能趋势图；
在所述可视化界面显示所述性能趋势图。
8.一种性能数据获取装置，其特征在于，包括：
PG数据获取模块，用于获取PG数据；所述PG数据包括累计性能值和时间；
议案模块，用于利用所述PG数据和上轮议案PG数据，确定本轮议案对应性能增量数据；所述性能增量数据包括性能增值和时长增值；
数据缓存模块，用于将所述性能增量数据写入先进先出的性能数据队列；
性能统计模块，用于对所述性能数据队列中各轮议案的性能增量数据进行统计计算，得到存储池性能数据。
9.一种电子设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至7任一项所述性能数据获取方法的步骤。
10.一种可读存储介质，其特征在于，所述可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述性能数据获取方法的步骤。
CN202210870838.0A 2022-07-22 2022-07-22 一种性能数据获取方法、装置、设备及可读存储介质 Pending CN115113825A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210870838.0A CN115113825A (zh) 2022-07-22 2022-07-22 一种性能数据获取方法、装置、设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210870838.0A CN115113825A (zh) 2022-07-22 2022-07-22 一种性能数据获取方法、装置、设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN115113825A true CN115113825A (zh) 2022-09-27

Family

ID=83335015

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210870838.0A Pending CN115113825A (zh) 2022-07-22 2022-07-22 一种性能数据获取方法、装置、设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN115113825A (zh)

Similar Documents

Publication Publication Date Title
US9229871B2 (en) Cache device, communication apparatus, and computer program product
US7937257B2 (en) Estimating performance of application based on automatic resizing of shared memory for messaging
US11449479B2 (en) Data migration methods and system
US6785792B2 (en) Storage system and data relocation method
CN115129572B (zh) 一种性能测试方法、装置、设备及介质
JP2015191324A (ja) ストレージ管理装置、性能調整方法及び性能調整プログラム
CN112511839A (zh) 一种视频传输控制方法、装置、设备及可读存储介质
JP5471822B2 (ja) 入出力制御プログラム、情報処理装置および入出力制御方法
CN109428786A (zh) 网络性能监控方法和装置
CN100552613C (zh) 一种scsi数据读写方法、系统和装置
EP1970815A1 (en) Data transfering apparatus and information processing system
CN115113825A (zh) 一种性能数据获取方法、装置、设备及可读存储介质
CN112988039B (zh) 数据上传方法和装置、云存储网关和系统以及存储介质
US11064259B2 (en) Interaction data distribution control method, apparatus, electronic device, and storage medium
US7890958B2 (en) Automatic adjustment of time a consumer waits to access data from queue during a waiting phase and transmission phase at the queue
CN105929851B (zh) 一种采用摇杆设备控制云台方法和装置
JP7010185B2 (ja) マスタ装置、マスタ装置の制御方法、情報処理プログラム、および記録媒体
US20150112929A1 (en) Parallel Truncation Point Management for Log Based Replication
JP2020154391A (ja) 情報処理システムおよびプログラム
CN112367540B (zh) 在线直播推流数监控的方法、装置
EP3166027B1 (en) Method and apparatus for determining hot page in database
US20140280386A1 (en) Persisting Large Volumes of Data in an Efficient, Unobtrusive Manner
CN109246033B (zh) 一种请求处理方法、装置、设备及可读存储介质
CN113886283A (zh) 事件流处理方法、电子设备和计算机可读介质
CN111352868A (zh) 串口访问方法、装置及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination