CN110046082A - 一种io特征信息处理方法、获取方法及相关装置 - Google Patents
一种io特征信息处理方法、获取方法及相关装置 Download PDFInfo
- Publication number
- CN110046082A CN110046082A CN201910299757.8A CN201910299757A CN110046082A CN 110046082 A CN110046082 A CN 110046082A CN 201910299757 A CN201910299757 A CN 201910299757A CN 110046082 A CN110046082 A CN 110046082A
- Authority
- CN
- China
- Prior art keywords
- characteristic information
- request instruction
- information
- feature
- obtains
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 46
- 230000010365 information processing Effects 0.000 title claims abstract description 35
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 230000005540 biological transmission Effects 0.000 claims abstract description 28
- 238000004590 computer program Methods 0.000 claims description 10
- 238000012545 processing Methods 0.000 claims description 7
- 239000004744 fabric Substances 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 14
- 238000011017 operating method Methods 0.000 abstract description 4
- 230000009286 beneficial effect Effects 0.000 abstract description 2
- 230000006870 function Effects 0.000 description 11
- 238000004364 calculation method Methods 0.000 description 4
- 238000011161 development Methods 0.000 description 4
- 238000012216 screening Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 102100037060 Forkhead box protein D3 Human genes 0.000 description 1
- 101001029308 Homo sapiens Forkhead box protein D3 Proteins 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Computer Hardware Design (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请公开了一种IO特征信息处理方法,包括:按照预设规则进行IO信息记录,得到IO统计列表;当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息;向所述模块发送所述IO特征信息。通过统一IO特征的计算过程,减少了不同模块之间执行的冗余的操作步骤,减少性能浪费,提高性能利用率。本申请还公开了一种IO特征信息处理装置、IO特征信息获取方法、IO特征信息获取装置、服务器以及计算机可读存储介质,具有以上有益效果。
Description
技术领域
本申请涉及计算机技术领域,特别涉及一种IO特征信息处理方法、IO特征信息处理装置、IO特征信息获取方法、IO特征信息获取装置、服务器以及计算机可读存储介质。
背景技术
随着信息技术的不断发展,出现了专用于存储功能的存储服务器,其相比于一般的服务器,拥有巨大的IO处理能力。因此,为了保证存储服务器中每个模块均对IO处理过程进行监控,每个模块需要实时获取到IO特征信息,用于表示目前的IO状态。
由于现有技术中存在不同类型的IO特征信息,每种类型的IO特征信息适用于不同的场景判断,也就对应了不同的应用模块。因此,存储装置中的不同模块需要获取不同的IO特征信息。而现有技术中,由于不同的模块,不同的协议层一般由不同的技术人员,或不同的技术思想进行实现,导致不同的模块想要获取到IO特征信息时,需要单独实现。每种模块,每层处理装置单独进行统计获取到对应的IO特征信息。而每种IO特征信息获取的过程中存在冗余的步骤,或者可以简化的步骤,而由于单独进行实现,造成性能的浪费。并且,由于单独实现IO信息统计的功能,提高了每个模块实现的难度和复杂程度。
因此,如何降低IO特征信息获取过程中的性能浪费,是本领域技术人员关注的重点问题。
发明内容
本申请的目的是提供一种IO特征信息处理方法、IO特征信息处理装置、IO特征信息获取方法、IO特征信息获取装置、服务器以及计算机可读存储介质,通过统一IO特征的计算过程,减少了不同模块之间执行的冗余的操作步骤,减少性能浪费,提高性能利用率。
为解决上述技术问题,本申请提供一种IO特征信息处理方法,包括:
按照预设规则进行IO信息记录,得到IO统计列表;
当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息;
向所述模块发送所述IO特征信息。
可选的,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征信息请求指令的类型为顺序读特征时,判断所述IO统计列表中预设范围内的请求是否具有顺序性特征;
若是,则对当前读请求进行顺延处理,得到目标读请求;
将所述目标读请求的信息作为所述IO特征信息。
可选的,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征请求指令的类型为请求分布特征时,按照预设范围将所述IO统计列表分为多个区间;
对每个区间进行分布比例统计,得到请求分布信息;
将所述请求分布信息作为所述IO特征信息。
可选的,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征请求指令的类型为IO比例特征时,对所述IO统计列表执行IO比例统计操作,得到IO比例信息;
将所述IO比例信息作为所述IO特征信息。
可选的,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征请求指令的类型为读写带宽比例特征时,对所述IO统计列表执行读写带宽比例统计操作,得到读写带宽比例信息;
将所述读写带宽比例信息作为所述IO特征信息。
本申请还提供一种IO特征信息处理装置,包括:
IO信息记录模块,用于按照预设规则进行IO信息记录,得到IO统计列表;
IO信息统计模块,用于当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息;
IO特征信息发送模块,用于向所述模块发送所述IO特征信息。
本申请还提供一种IO特征信息获取方法,包括:
当获取IO特征信息时,根据IO场景的类型生成IO特征信息请求指令;
发送所述IO特征信息请求指令,以便服务器根据所述IO特征信息请求指令对IO统计列表进行统计操作,得到IO特征信息,并返回所述IO特征信息。
本申请还提供一种IO特征信息获取装置,包括:
请求指令生成模块,用于当获取IO特征信息时,根据IO场景的类型生成IO特征信息请求指令;
请求指令发送模块,用于发送所述IO特征信息请求指令,以便服务器根据所述IO特征信息请求指令对IO统计列表进行统计操作,得到IO特征信息,并返回所述IO特征信息。
本申请还提供一种服务器,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如上所述的IO特征信息处理方法的步骤和/或如上所述的IO特征信息获取方法的步骤。
本申请还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上所述的IO特征信息处理方法的步骤和/或如上所述的IO特征信息获取方法的步骤。
本申请所提供的一种IO特征信息处理方法,包括:按照预设规则进行IO信息记录,得到IO统计列表;当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息;向所述模块发送所述IO特征信息。
可见,本申请技术方案在每个模块之外通过预设规则获取到可以统一调用的IO统计列表,再通过该IO统计列表根据各个模块的不同请求执行计算出不同的IO特征信息,以满足各个模块对IO特征信息的需求,避免各个模块单独实现IO信息的统计功能,减少多个模块之间的操作冗余,降低性能浪费。并且,由于各个模块不再需要实现IO特征信息的统计功能,降低模块的开发难度。此外,统一进行IO特征信息获取,模块可以根据自身需求获取到丰富的IO特征信息,提高IO特征信息获取的效率。
本申请还提供一种IO特征信息处理装置、IO特征信息获取方法、IO特征信息获取装置、服务器以及计算机可读存储介质,具有以上有益效果,在此不做赘述。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例所提供的一种IO特征信息处理方法的流程图;
图2为本申请实施例所提供的一种IO特征信息获取方法的流程图;
图3为本申请实施例所提供的一种IO特征信息处理装置的结构示意图;
图4为本申请实施例所提供的一种IO特征信息获取装置的结构示意图。
具体实施方式
本申请的核心是提供一种IO特征信息处理方法、IO特征信息处理装置、IO特征信息获取方法、IO特征信息获取装置、服务器以及计算机可读存储介质,通过统一IO特征的计算过程,减少了不同模块之间执行的冗余的操作步骤,减少性能浪费,提高性能利用率。
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
现有技术中,由于存在不同类型的IO特征信息,每种类型的IO特征信息适用于不同的场景判断,也就对应了不同的应用模块。因此,存储装置中的不同模块需要获取不同的IO特征信息。而现有技术中,由于不同的模块,不同的协议层一般由不同的技术人员,或不同的技术思想进行实现,导致不同的模块想要获取到IO特征信息时,需要单独实现。每种模块,每层处理装置单独进行统计获取到对应的IO特征信息。而每种IO特征信息获取的过程中存在冗余的步骤,或者可以简化的步骤,而由于单独进行实现,造成性能的浪费,提高了每个模块实现的难度和复杂程度。并且,还由于每个模块中实现的IO特征信息统计方式不全面,使得每种模块可以获取到的IO特征信息不够完善,降低了可用性。
因此,本申请提供一种IO特征信息处理方法,在每个模块之外通过预设规则获取到可以统一调用的IO统计列表,再通过该IO统计列表根据各个模块的不同请求执行计算出不同的IO特征信息,以满足各个模块对IO特征信息的需求,避免各个模块单独实现IO信息的统计功能,减少多个模块之间的操作冗余,降低性能浪费。并且,由于各个模块不再需要实现IO特征信息的统计功能,降低模块的开发难度。此外,统一进行IO特征信息获取,模块可以根据自身需求获取到丰富的IO特征信息,提高IO特征信息获取的效率。
请参考图1,图1为本申请实施例所提供的一种IO特征信息处理方法的流程图。
本实施例中,该方法可以包括:
S101,按照预设规则进行IO信息记录,得到IO统计列表;
本步骤旨在获取到IO历史记录,即获取到IO统计列表。具体的,本步骤是按照预设规则进行IO信息记录,得到的IO统计列表。
一般在分布式存储集群中或者在存储服务器中处理IO的数量巨大。在海量的IO信息中,一般情况只采用部分的IO信息进行处理再获取想要的IO特征信息。因此,就需要通过预设规则确定哪些IO信息不被记录,而哪些IO信息需要被记录。可见,预设规则是对IO信息进行筛选的规则。其中,筛选的方式不限于根据时间筛选,IO执行主体的筛选,IO长度的筛选,IO处理时长的筛选,以及对IO信息条数的限制。
例如,可以限定获取IO处理时长不小于2秒,IO信息条数不少于500条的IO,最近处理的满足以上条件的IO信息记录于IO统计列表中。另外,还可以将该IO统计列表设置为实时更新。
S102,当接收到模块发送的IO特征信息请求指令时,根据IO特征信息请求指令的类型确定对应的统计操作,对IO统计列表执行统计操作,得到IO特征信息;
在S101的基础上,本步骤旨在当接收到IO特征信息请求指令时,对IO统计列表执行对应的统计操作,得到IO特征信息。
可见,本实施例中的模块不需要自己进行相应的IO特征信息获取操作,而是发送IO特征信息请求指令,以便本步骤执行对应的统计操作,得到对应的IO特征信息。减少了不同模块之间重复进行的冗余操作,提高了性能利用率。
需要说明的是,本实施例中的模块可以是指与本实施例中相同处理器执行的不同的程序,还可以是指与本实施例同一个服务器中的不同执行装置,也可以是指分布式存储集群系统中的不同服务器。但无论本步骤中的模块具体形态是什么,在现有技术中不同的模块之间的IO特征处理方式之间均有冗余的步骤,例如,重复获取某个IO记录,造成多余的性能浪费,降低性能利用率。可见,在本步骤的基础上,无论模块的形态如何,均可以简化IO特征信息获取的步骤,提高性能利用率。
本步骤中可以采用现有技术提供的任意一种统计操作,也可以采用下述实施例中提到的统计操作,具体的,在本实施例中不做限定。
S103,向模块发送IO特征信息。
在S102的基础上,本步骤旨在向模块发送得到的IO特征信息,使模块获取到对应的IO特征信息。
相应的,在模块端只需要按照正常获取信息的方式获取到IO特征信息,不需要做额外的操作。对于模块来说,当模块执行相应的IO操作,需要IO特征信息进行进一步的判断的时候,只需要向本实施例中的方法发送IO特征信息请求指令,即可获取到对应的IO特征信息。可见,本实施例中对于每个单独的模块来说,不需要自己执行相应的步骤实现IO特征信息的处理操作,减少了不同模块之间的冗余的操作步骤,提高了性能利用。
综上,本实施例在每个模块之外通过预设规则获取到可以统一调用的IO统计列表,再通过该IO统计列表根据各个模块的不同请求执行计算出不同的IO特征信息,以满足各个模块对IO特征信息的需求,避免各个模块单独实现IO信息的统计功能,减少多个模块之间的操作冗余,降低性能浪费。并且,由于各个模块不再需要实现IO特征信息的统计功能,降低模块的开发难度。此外,统一进行IO特征信息获取,模块可以根据自身需求获取到丰富的IO特征信息,提高IO特征信息获取的效率。
以下通过四个实施例,来说明对IO特征信息执行统计操作的过程。
一种实施例:
当接收到模块发送的IO特征信息请求指令,并且IO特征信息请求指令的类型为顺序读特征时,首先判断IO统计列表中预设范围内的请求是否具有顺序性特征;
若是,则对当前读请求进行顺延处理,得到目标读请求;
将目标读请求的信息作为IO特征信息。
换句话说,也就是根据近期的读请求记录及每个请求对应的主体、偏移量和长度,获取近期的读请求是否具有顺序性特征;如果具有顺序性特征,则将相应的偏移量和长度向后顺延,即可获取下一步可能要读的偏移量和长度,也就是获取到目标读请求的信息。
可见,本实施例中主要是当模块的IO特征信息请求指令的类型为顺序读特征时,获取IO特征信息,也即获取目标读请求的过程。
另一种实施例:
当接收到模块发送的IO特征信息请求指令,并且IO特征请求指令的类型为请求分布特征时,首先按照预设范围将IO统计列表分为多个区间;
然后对每个区间进行分布比例统计,得到请求分布信息;
最后将请求分布信息作为IO特征信息。
换句话说,也就是将IO大小按照由小到大,设置若干IO大小区间,如0k到32k,32k到256k以及大于256k三个区间,分别称为小IO,中等IO,大IO;然后再根据上述配置和记录的最近IO列表io_list,可以统计出小IO读写请求比例、中等IO读写请求比例、大IO读写请求比例等IO特征信息。
还一种实施例:
当接收到模块发送的IO特征信息请求指令,并且IO特征请求指令的类型为IO比例特征时,先对IO统计列表执行IO比例统计操作,得到IO比例信息;
最后将IO比例信息作为IO特征信息。
本实施例可以采用如下计算方法:
根据近期请求的IO统计列表,获取读请求数目n_read、写请求数目n_write,计算得到读写IO比例信息:t1=n_read/n_write。
又一种实施例:
当接收到模块发送的IO特征信息请求指令,并且IO特征请求指令的类型为读写带宽比例特征时,对IO统计列表执行读写带宽比例统计操作,得到读写带宽比例信息;
将读写带宽比例信息作为IO特征信息。
本实施例可以采用如下计算方法:
根据近期请求的IO统计列表,读请求总长度l_read、写请求总长度l_write,计算得到读写带宽比例信息:t2=l_read/l_write。
本申请实施例还提供一种以模块为角度进行说明的实施例,该实施例提供了一种IO特征信息获取方法。
请参考图2,图2为本申请实施例所提供的一种IO特征信息获取方法的流程图。
本实施例中,该方法可以包括:
S201,当获取IO特征信息时,根据IO场景的类型生成IO特征信息请求指令;
本步骤旨在当系统需要获取IO特征信息时,生成IO特征信息请求指令,以便请求到对应的IO特征信息。
其中,进行请求的方式主要是根据IO场景进行请求。例如,当IO场景为需要判断IO顺序读的场景时,那么就生成顺序读特征类型的IO特征信息请求指令。
S202,发送IO特征信息请求指令,以便服务器根据IO特征信息请求指令对IO统计列表进行统计操作,得到IO特征信息,并返回IO特征信息。
在S201的基础上,本步骤旨在发送生成得到的IO特征信息请求指令,以便请求到对应的IO特征信息。其中,服务器执行的步骤可以参考第一个实施例,在此不作赘述。
可见,本实施例通过先进行IO信息记录,得到IO统计列表,再通过该IO统计列表可以根据模块的请求执行计算出多种IO特征信息,当不同的模块请求不同的IO特征信息时,均可以返回对应的IO特征信息,避免模块进行冗余的IO特征信息处理,降低性能浪费,并且,统一进行IO特征信息获取,模块可以根据自身需求获取到丰富的IO特征信息,提高IO特征信息获取的效率。
下面对本申请实施例提供的一种IO特征信息处理装置进行介绍,下文描述的一种IO特征信息处理装置与上文描述的一种IO特征信息处理方法可相互对应参照。
请参考图3,图3为本申请实施例所提供的一种IO特征信息处理装置的结构示意图。
本实施例中,该装置可以包括:
IO信息记录模块110,用于按照预设规则进行IO信息记录,得到IO统计列表;
IO信息统计模块120,用于当接收到模块发送的IO特征信息请求指令时,根据IO特征信息请求指令的类型确定对应的统计操作,对IO统计列表执行统计操作,得到IO特征信息;
IO特征信息发送模块130,用于向模块发送IO特征信息。
下面对本申请实施例提供的一种IO特征信息获取装置进行介绍,下文描述的一种IO特征信息获取装置与上文描述的一种IO特征信息获取方法可相互对应参照。
请参考图4,图4为本申请实施例所提供的一种IO特征信息获取装置的结构示意图。
本实施例中,该装置可以包括:
请求指令生成模块210,用于当获取IO特征信息时,根据IO场景的类型生成IO特征信息请求指令;
请求指令发送模块220,用于发送IO特征信息请求指令,以便服务器根据IO特征信息请求指令对IO统计列表进行统计操作,得到IO特征信息,并返回IO特征信息。
本申请实施例还提供一种服务器,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如以上实施例所述的IO特征信息处理方法的步骤和/或如以上实施例所述的IO特征信息获取方法的步骤。
本申请实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如以上实施例所述的IO特征信息处理方法的步骤和/或如以上实施例所述的IO特征信息获取方法的步骤。
该计算机可读存储介质可以包括:U盘、移动硬盘、只读存储器(Read-OnlyMemory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。
专业人员还可以进一步意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块,或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本申请所提供的一种IO特征信息处理方法、IO特征信息处理装置、IO特征信息获取方法、IO特征信息获取装置、服务器以及计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。
Claims (10)
1.一种IO特征信息处理方法,其特征在于,包括:
按照预设规则进行IO信息记录,得到IO统计列表;
当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息;
向所述模块发送所述IO特征信息。
2.根据权利要求1所述的IO特征信息处理方法,其特征在于,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征信息请求指令的类型为顺序读特征时,判断所述IO统计列表中预设范围内的请求是否具有顺序性特征;
若是,则对当前读请求进行顺延处理,得到目标读请求;
将所述目标读请求的信息作为所述IO特征信息。
3.根据权利要求1所述的IO特征信息处理方法,其特征在于,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征请求指令的类型为请求分布特征时,按照预设范围将所述IO统计列表分为多个区间;
对每个区间进行分布比例统计,得到请求分布信息;
将所述请求分布信息作为所述IO特征信息。
4.根据权利要求1所述的IO特征信息处理方法,其特征在于,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征请求指令的类型为IO比例特征时,对所述IO统计列表执行IO比例统计操作,得到IO比例信息;
将所述IO比例信息作为所述IO特征信息。
5.根据权利要求1所述的IO特征信息处理方法,其特征在于,当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息,包括:
当接收到模块发送的IO特征信息请求指令,并且所述IO特征请求指令的类型为读写带宽比例特征时,对所述IO统计列表执行读写带宽比例统计操作,得到读写带宽比例信息;
将所述读写带宽比例信息作为所述IO特征信息。
6.一种IO特征信息处理装置,其特征在于,包括:
IO信息记录模块,用于按照预设规则进行IO信息记录,得到IO统计列表;
IO信息统计模块,用于当接收到模块发送的IO特征信息请求指令时,根据所述IO特征信息请求指令的类型确定对应的统计操作,对所述IO统计列表执行所述统计操作,得到IO特征信息;
IO特征信息发送模块,用于向所述模块发送所述IO特征信息。
7.一种IO特征信息获取方法,其特征在于,包括:
当获取IO特征信息时,根据IO场景的类型生成IO特征信息请求指令;
发送所述IO特征信息请求指令,以便服务器根据所述IO特征信息请求指令对IO统计列表进行统计操作,得到IO特征信息,并返回所述IO特征信息。
8.一种IO特征信息获取装置,其特征在于,包括:
请求指令生成模块,用于当获取IO特征信息时,根据IO场景的类型生成IO特征信息请求指令;
请求指令发送模块,用于发送所述IO特征信息请求指令,以便服务器根据所述IO特征信息请求指令对IO统计列表进行统计操作,得到IO特征信息,并返回所述IO特征信息。
9.一种服务器,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至5任一项所述的IO特征信息处理方法的步骤和/或如权利要求7所述的IO特征信息获取方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至5任一项所述的IO特征信息处理方法的步骤和/或如权利要求7所述的IO特征信息获取方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910299757.8A CN110046082B (zh) | 2019-04-15 | 2019-04-15 | 一种io特征信息处理方法、获取方法及相关装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910299757.8A CN110046082B (zh) | 2019-04-15 | 2019-04-15 | 一种io特征信息处理方法、获取方法及相关装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110046082A true CN110046082A (zh) | 2019-07-23 |
CN110046082B CN110046082B (zh) | 2020-05-29 |
Family
ID=67277156
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910299757.8A Active CN110046082B (zh) | 2019-04-15 | 2019-04-15 | 一种io特征信息处理方法、获取方法及相关装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110046082B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112379641A (zh) * | 2020-10-09 | 2021-02-19 | 爱普(福建)科技有限公司 | 一种工艺io点选择及关联方法、装置、设备和介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020087752A1 (en) * | 2000-12-28 | 2002-07-04 | Connor Patrick L. | Method of real time statistical collection for I/O controllers |
CN101963970A (zh) * | 2010-01-12 | 2011-02-02 | 浪潮(山东)电子信息有限公司 | 一种高效率低维护的数据统计方法 |
CN103500143A (zh) * | 2013-09-27 | 2014-01-08 | 华为技术有限公司 | 硬盘参数调整方法及装置 |
CN104461914A (zh) * | 2014-11-10 | 2015-03-25 | 浪潮电子信息产业股份有限公司 | 一种自动精简配置的自适应优化方法 |
CN104598495A (zh) * | 2013-10-31 | 2015-05-06 | 南京中兴新软件有限责任公司 | 基于分布式文件系统的分级存储方法及系统 |
WO2015139199A1 (zh) * | 2014-03-18 | 2015-09-24 | 华为技术有限公司 | 统计信息上报方法及装置 |
CN105068917A (zh) * | 2015-08-11 | 2015-11-18 | 浪潮(北京)电子信息产业有限公司 | 一种输入输出io特性分析方法和系统 |
CN109144862A (zh) * | 2018-08-10 | 2019-01-04 | 深圳市小牛在线互联网信息咨询有限公司 | 测试数据的统计方法、装置、计算机设备及存储介质 |
-
2019
- 2019-04-15 CN CN201910299757.8A patent/CN110046082B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020087752A1 (en) * | 2000-12-28 | 2002-07-04 | Connor Patrick L. | Method of real time statistical collection for I/O controllers |
CN101963970A (zh) * | 2010-01-12 | 2011-02-02 | 浪潮(山东)电子信息有限公司 | 一种高效率低维护的数据统计方法 |
CN103500143A (zh) * | 2013-09-27 | 2014-01-08 | 华为技术有限公司 | 硬盘参数调整方法及装置 |
CN104598495A (zh) * | 2013-10-31 | 2015-05-06 | 南京中兴新软件有限责任公司 | 基于分布式文件系统的分级存储方法及系统 |
WO2015139199A1 (zh) * | 2014-03-18 | 2015-09-24 | 华为技术有限公司 | 统计信息上报方法及装置 |
CN104461914A (zh) * | 2014-11-10 | 2015-03-25 | 浪潮电子信息产业股份有限公司 | 一种自动精简配置的自适应优化方法 |
CN105068917A (zh) * | 2015-08-11 | 2015-11-18 | 浪潮(北京)电子信息产业有限公司 | 一种输入输出io特性分析方法和系统 |
CN109144862A (zh) * | 2018-08-10 | 2019-01-04 | 深圳市小牛在线互联网信息咨询有限公司 | 测试数据的统计方法、装置、计算机设备及存储介质 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112379641A (zh) * | 2020-10-09 | 2021-02-19 | 爱普(福建)科技有限公司 | 一种工艺io点选择及关联方法、装置、设备和介质 |
Also Published As
Publication number | Publication date |
---|---|
CN110046082B (zh) | 2020-05-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10191808B2 (en) | Systems and methods for storing, maintaining, and accessing objects in storage system clusters | |
CN104751359B (zh) | 用于支付清算的系统及方法 | |
CN107943421A (zh) | 一种基于分布式存储系统的分区划分方法及装置 | |
CN109144731A (zh) | 数据处理方法、装置、计算机设备及存储介质 | |
CN107608773B (zh) | 任务并发处理方法、装置及计算设备 | |
US10956990B2 (en) | Methods and apparatuses for adjusting the distribution of partitioned data | |
CN106844108B (zh) | 一种数据存储方法、服务器以及存储系统 | |
US10007587B2 (en) | Systems and methods for pre-generation and pre-storage of repair fragments in storage systems | |
CN104317736B (zh) | 一种分布式文件系统多级缓存实现方法 | |
CN108255429A (zh) | 一种写操作控制方法、系统、装置及计算机可读存储介质 | |
CN111538586A (zh) | 集群gpu资源管理调度系统、方法以及计算机可读存储介质 | |
CN108491255B (zh) | 自助式MapReduce数据优化分配方法及系统 | |
CN109213420A (zh) | 数据存储方法、装置及系统 | |
CN102111438B (zh) | 参数调整方法、装置和分布式计算平台系统 | |
CN109582213A (zh) | 数据重构方法及装置、数据存储系统 | |
CN108173715A (zh) | 一种获取分布式存储服务器硬件信息的方法、装置及设备 | |
US20210216231A1 (en) | Method, electronic device and computer program product for rebuilding disk array | |
CN108924202A (zh) | 一种分布式集群的数据容灾方法以及相关装置 | |
CN108574645A (zh) | 一种队列调度方法及装置 | |
CN110389710A (zh) | 分配存储资源的方法和装置 | |
KR20190108020A (ko) | 블록체인을 이용한 트랜잭션 처리 방법 및 이를 이용한 트랜잭션 서버 | |
CN109597800A (zh) | 一种日志分发方法及装置 | |
US8443369B1 (en) | Method and system for dynamically selecting a best resource from each resource collection based on resources dependencies, prior selections and statistics to implement an allocation policy | |
CN110046082A (zh) | 一种io特征信息处理方法、获取方法及相关装置 | |
CN107704336A (zh) | 一种数据存储方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |