CN109858632B - 一种确定阈值的方法及装置 - Google Patents
一种确定阈值的方法及装置 Download PDFInfo
- Publication number
- CN109858632B CN109858632B CN201910118081.8A CN201910118081A CN109858632B CN 109858632 B CN109858632 B CN 109858632B CN 201910118081 A CN201910118081 A CN 201910118081A CN 109858632 B CN109858632 B CN 109858632B
- Authority
- CN
- China
- Prior art keywords
- detection
- value
- threshold
- effective
- detection device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000001514 detection method Methods 0.000 claims abstract description 605
- 230000002159 abnormal effect Effects 0.000 claims description 45
- 238000012163 sequencing technique Methods 0.000 claims description 4
- 230000008569 process Effects 0.000 description 17
- 238000012360 testing method Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 12
- 238000012545 processing Methods 0.000 description 11
- 238000004590 computer program Methods 0.000 description 7
- 230000004044 response Effects 0.000 description 6
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000002474 experimental method Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012806 monitoring device Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
Images
Landscapes
- Debugging And Monitoring (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明实施例提供了一种确定阈值的方法及装置,其中方法包括:获取历史数据,并根据历史数据,确定历史数据对应的阈值,进而可以使用历史数据对应的阈值用于对第二预设时间段内生成的数据进行检测,其中,历史数据为第一预设时间段内生成的数据,第一预设时间段位于第二预设时间段之前。本发明实施例中,通过使用在第二预设时间段之前生成的数据确定得到的阈值(即根据历史检测值确定阈值)来对第二预设时间段内生成的数据进行检测,可以使得阈值更加准确,从而提高检测结果的准确性。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种确定阈值的方法及装置。
背景技术
在数据处理技术领域中,通常需要使用阈值对数据进行检测,比如,通过使用阈值来分析日志的生成时间,可以准确确定出异常日志的生成时间,从而可以对系统进行排查,维护系统的正常运行。在一个示例中,若阈值设置的较为准确,则通过阈值检测得到的检测结果也可以为准确的,若阈值设置的不准确,则通过阈值检测得到的检测结果通常准确性也较差。由此可知,阈值设定的准确程度会对检测结果的准确程度造成比较大的影响。
在实际操作过程中,设置阈值的一种最常用的方法为:通过人为设定一个经验阈值来对数据进行检测,其中,人为设定的经验阈值是固定的;也就是说,现有的实现方式中,通常是采用一个固定的经验阈值对数据进行检测,这个经验阈值的值是固定的,无论对数据的检测效果如何,均不会对该经验阈值的值进行修正。在一种可能的场景中,检测数据大于阈值时确定该检测数据时异常的,检测数据小于或等于阈值时确定该检测数据时正常的,若人为设定的经验阈值较大,则可能会使得检测确定的异常数据较少,若人为设定的经验阈值较小,则可能会使得检测确定的异常数据较多。因此,采用现有技术的方式,经验阈值是固定的,因此可能会使得基于该经验阈值进行检测得到的检测结果不准确。
综上,目前亟需一种确定阈值的方法,用以提高阈值的准确性,进而提高使用阈值确定的检测结果的准确性。
发明内容
本发明实施例提供一种确定阈值的方法及装置,用以提高阈值的准确性,进而提高使用阈值确定的检测结果的准确性。
本发明实施例提供的一种确定阈值的方法,所述方法包括:
获取历史数据;所述历史数据为第一预设时间段内生成的数据;
根据所述历史数据,确定所述历史数据对应的阈值;所述历史数据对应的阈值用于对第二预设时间段内生成的数据进行检测,所述第一预设时间段位于所述第二预设时间段之前。
可选地,所述历史数据包括至少一个检测设备在所述第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值;
所述根据所述历史数据,确定所述历史数据对应的阈值,包括:
根据所述多个检测值的大小,从所述多个检测值中确定有效检测值;
根据所述至少一个检测设备中每个检测设备对应的有效检测值,确定所述每个检测设备对应的阈值;
其中,所述每个检测设备对应的阈值用于确定所述每个检测设备在第二预设时间段内通过检测所述被检测设备的第一性能指标而生成的检测值是否异常。
可选地,根据所述多个检测值的大小,从所述多个检测值中确定有效检测值,包括:
根据所述多个检测值的生成时间,将所述多个检测值划分到多个分组中;
针对于第一分组,若所述第一分组中大小超出预设范围的检测值均为第一检测设备生成的检测值,则从所述第一分组中删除所述第一检测设备生成的检测值,得到所述第一分组中的有效检测值;所述第一分组为所述多个分组中的任一分组。
可选地,根据所述至少一个检测设备中每个检测设备对应的有效检测值,确定所述每个检测设备对应的阈值,包括:
根据第二检测设备对应的有效检测值的大小,按照从小到大的顺序对所述第二检测设备对应的有效检测值进行排序,得到所述第二检测设备对应的序列;所述第二检测设备为所述至少一个检测设备中的任一检测设备;
从所述序列中确定出第一有效检测值和第二有效检测值;所述第一有效检测值大于位于序列首部的有效检测值,且小于位于序列中部的有效检测值;所述第二有效检测值大于位于序列中部的有效检测值,且小于位于序列尾部的有效检测值;
根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值。
可选地,所述根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值,符合如下公式:
P=M+R(M-N)
其中,P为所述第二检测设备对应的阈值,N为第一有效检测值,M为第二有效检测值,R为阈值参数;R(M-N)为所述第二检测设备对应的阈值的容忍值。
可选地,若所述第二有效检测值小于第一阈值,且所述第二检测设备对应的阈值的容忍值小于第二阈值,则所述第二检测设备对应的阈值为所述第二有效检测值与第二阈值的和;或者,
若所述第二检测设备对应的阈值大于第三阈值,则所述第二检测设备对应的阈值等于第三阈值。
本发明实施例提供的一种装置,所述装置包括:
获取模块,用于获取历史数据;所述历史数据为第一预设时间段内生成的数据;
确定模块,用于根据所述历史数据,确定所述历史数据对应的阈值;所述历史数据对应的阈值用于对第二预设时间段内生成的数据进行检测,所述第一预设时间段位于所述第二预设时间段之前。
可选地,所述历史数据包括至少一个检测设备在所述第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值;所述确定模块,具体用于:
获取至少一个检测设备在第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值;
根据所述多个检测值的大小,从所述多个检测值中确定有效检测值;以及,根据所述至少一个检测设备中每个检测设备对应的有效检测值,确定所述每个检测设备对应的阈值;其中,所述每个检测设备对应的阈值用于确定所述每个检测设备在第二预设时间段内通过检测所述被检测设备的第一性能指标而生成的检测值是否异常。
可选地,所述确定模块用于:根据所述多个检测值的生成时间,将所述多个检测值划分到多个分组中;
针对于第一分组,若所述第一分组中大小超出预设范围的检测值均为第一检测设备生成的检测值,则从所述第一分组中删除所述第一检测设备生成的检测值,得到所述第一分组中的有效检测值;所述第一分组为所述多个分组中的任一分组。
可选地,所述确定模块用于:根据第二检测设备对应的有效检测值的大小,按照从小到大的顺序对所述第二检测设备对应的有效检测值进行排序,得到所述第二检测设备对应的序列;所述第二检测设备为所述至少一个检测设备中的任一检测设备;
从所述序列中确定出第一有效检测值和第二有效检测值;所述第一有效检测值大于位于序列首部的有效检测值,且小于位于序列中部的有效检测值;所述第二有效检测值大于位于序列中部的有效检测值,且小于位于序列尾部的有效检测值;
根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值。
可选地,所述根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值,符合如下公式:
P=M+R(M-N)
其中,P为所述第二检测设备对应的阈值,N为第一有效检测值,M为第二有效检测值,R为阈值参数;R(M-N)为所述第二检测设备对应的阈值的容忍值。
可选地,若所述第二有效检测值小于第一阈值,且所述第二检测设备对应的阈值的容忍值小于第二阈值,则所述第二检测设备对应的阈值为所述第二有效检测值与第二阈值的和;或者,
若所述第二检测设备对应的阈值大于第三阈值,则所述第二检测设备对应的阈值等于第三阈值。
本发明的上述实施例中,获取历史数据,并根据历史数据,确定历史数据对应的阈值,进而可以使用历史数据对应的阈值用于对第二预设时间段内生成的数据进行检测,其中,历史数据为第一预设时间段内生成的数据,第一预设时间段位于第二预设时间段之前。本发明实施例中,通过使用在第二预设时间段之前生成的数据确定得到的阈值(即根据历史检测值确定阈值)来对第二预设时间段内生成的数据进行检测,可以使得阈值更加准确,从而提高检测结果的准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种可能的系统架构示意图;
图2为本发明实施例提供的一种确定阈值的方法对应的流程示意图;
图3为本发明实施例提供的一种确定阈值的方法对应的流程示意图;
图4为本发明实施例中提供的一种装置的结构示意图。
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明作进一步地详细描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
图1为本发明实施例提供的一种确定阈值的方法对应的流程示意图,该方法包括:
步骤101,获取历史数据,。
此处,历史数据可以为第一预设时间段内生成的数据。
步骤102,根据所述历史数据,确定所述历史数据对应的阈值。
此处,历史数据对应的阈值可以用于对第二预设时间段内生成的数据进行检测,所述第一预设时间段位于所述第二预设时间段之前。
本发明的上述实施例中,获取历史数据,并根据历史数据,确定历史数据对应的阈值,进而可以使用历史数据对应的阈值用于对第二预设时间段内生成的数据进行检测,其中,历史数据为第一预设时间段内生成的数据,第一预设时间段位于第二预设时间段之前。本发明实施例中,通过使用在第二预设时间段之前生成的数据确定得到的阈值(即根据历史检测值确定阈值)来对第二预设时间段内生成的数据进行检测,可以使得阈值更加准确,从而提高检测结果的准确性。
下面结合具体的应用场景对本发明实施例中提供的方法进行描述。
在一种可能的应用场景中,为了确定服务器是否具有较好的性能指标,通常可以获取与服务器的性能指标相关的多个检测值,并根据多个检测值中包括的异常检测值的数量,确定服务器是否具有较好的性能指标。以确定服务器的下载性能指标为例,可以使用多台检测设备分别下载服务器上存储的文件(比如文件A),记录每台检测设备下载文件A所需的时间,并将多台检测设备下载文件A所需的多个时间作为多个检测值。进一步地,若多个检测值中包括的异常检测值(下载文件A所需时间较长的数据)较多,则可以确定服务器的下载性能指标较差,若多个检测值中包括的异常检测值较少,则可以确定服务器的下载性能指标较好。
具体实施中,在判断检测值是否为异常检测值时,可以设置一个阈值,并将多个检测值中的每一个检测值与该阈值进行比较,确定该检测值是否为异常检测值。举例来说明,针对于服务器的下载性能指标对应的多个检测值中的每一个检测值,若该检测值大于阈值,则可以确定该检测值为异常检测值;若该检测值小于阈值,则可以确定该检测值为正常检测值。实际操作中,若设置的阈值较低,可能会使得异常检测值较多,从而很大程度上确定服务器的下载性能指标较差;相应地,若设置的阈值较高,可能会使得异常检测值较少,从而很大程度上确定服务器的下载性能指标较好。由此可知,在对服务器的性能指标进行检测时,确定阈值是一个很重要的过程,若阈值设置不合适,则可能会使得检测结果不准确。
为了实现对被检测设备的性能指标进行准确的检测,在一种可能的检测方法中,可以由本领域技术人员根据经验预先设定一个固定的阈值(简称为经验阈值),如此,在检测过程中,可将检测值与经验阈值进行对比,确定检测值是否为异常检测值。举个例子,经验阈值为200,若检测值大于200,确定检测值为异常检测值,若检测值小于200,确定检测值为正常检测值;或者,若检测值小于200,确定检测值为异常检测值,若检测值大于200,确定检测值为正常检测值。
以大于经验阈值的检测值为异常检测值为例,通过设置经验阈值,可以使用经验阈值对每个检测设备生成的检测值进行检测,从而确定每个检测设备生成的检测值是否为异常检测值。然而,经验阈值一般具有不确定性,一方面,若设置的经验阈值较小,通过较小的经验阈值对检测值进行检测,可能会使得确定得到的异常检测值较多,从而使得被检测设备的性能指标很大程度上是异常的;相应地,若设置的经验阈值较大,通过较大的经验阈值对检测值进行检测,可能会使得确定得到的异常检测值较少,从而使得被检测设备的性能指标很大程度上是正常的。由此可知,设置经验阈值的方式可能是不合理的,无法满足实际情况的需要,从而使得检测结果不准确。另一方面,不同的检测设备生成的检测值通常具有不同的特性,比如,处理性能较强的检测设备生成的检测值可能比较小,而处理性能较弱的检测设备生成的检测值可能比较大。因此,同一个经验阈值可能并不能满足每个检测设备的需要,若采用同一个经验阈值对每个检测设备生成的检测值进行检测,可能会使得存在较多误判的检测结果,从而使得检测结果更加不准确。
图2为本发明实施例提供的一种可能的系统架构示意图,如图2所示,该系统架构可以包括被检测设备100和至少一个检测设备(如图2所示意出的检测设备210~检测设备230)。其中,至少一个检测设备中的任一检测设备可以通过有线方式(比如网线、光纤等)与被检测设备100通信连接,或者也可以通过无线方式与被检测设备100通信连接,具体不作限定。
本发明实施例中提到的设备(包括被检测设备100和检测设备210~检测设备230)可以为移动终端,或者也可以为家用电子设备,或者还可以为工业设备,被检测设备100和至少一个检测设备可以为同一类型的设备,或者也可以为不同类型的设备,具体不作限定。在一个示例中,被检测设备100、检测设备210~检测设备230可以均为移动终端,比如服务器、手机、台式机、笔记本电脑(如图1所示)等;在另一个示例中,被检测设备100可以为移动终端,检测设备210~检测设备230可以为家用电子设备,比如空调、液晶电视、净化器等;在又一个示例中,被检测设备100可以为工业设备,比如机床、工业机器人等,检测设备210~检测设备230可以为移动终端。
本发明实施例中对被检测设备的性能指标进行检测的具体实现过程可以包括确定阈值的过程(确定过程)和使用阈值对被检测设备的性能指标进行检测的过程(检测过程),或者还可以包括其他的过程,比如,对被检测设备的性能指标进行校验的过程等,具体不作限定。
基于图2所示意的系统架构,图3为本发明实施例提供的一种确定阈值的方法(即确定过程)对应的流程示意图,该方法包括:
步骤301,获取至少一个检测设备在第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值。
本发明实施例中,被检测设备可以具有多种性能指标,比如响应时间、吞吐量、资源使用率、点击数或并发用户数。具体地说,响应时间可以是指被检测设备为检测设备服务所耗费的时间,比如可以为检测设备从被检测设备上下载资源所需的时间,或者也可以为检测设备将检测设备中存储的数据传输给被检测设备所需的时间,具体不作限定。吞吐量可以是指被检测设备在预设单位时间内所能处理的请求信息量、事务数据量或单位数据量等,比如可以为被检测设备在1分钟内处理检测设备发送的请求的数量。资源使用率可以是指被检测设备中已经占用的空间与预设空间的比值,包括中央处理器(CentralProcessing Unit,CPU)占用率、内存使用率、磁盘的输入与输出(Input/Output,I/O)、网络I/O等。点击数可以是指检测设备在预设单位时间内响应客户端请求的次数,若点击数较多,则说明检测设备的处理能力较强,相应地,若点击数较少,则说明检测设备的处理能力较弱。并发用户数可以是指检测设备在同一时间或同一空间索恩能够处理的用户(比如客户端)的数量,能够用于衡量检测设备的并发容量和同步协调能力,若并发用户数较多,则说明检测设备的并发容量大、同步协调能力强;若并发用户数较少,则说明检测设备的并发容量小、同步协调能力弱。
第一性能指标可以为被检测设备的任一性能指标,本发明实施例中以第一性能指标为响应时间为例描述对被检测设备的响应时间进行检测的过程,对被检测设备的其它性能指标进行检测的过程可以参照处理,具体不再赘述。
具体实施中,第一预设时间段可以由本领域技术人员根据实际需要进行设定,比如可以为一个月、7天、3天,或者也可以为12小时、30分钟等,具体不做限定。本发明实施例中仅以第一预设时间段为7天为例进行描述,如此,通过获取至少一个检测设备在7天内通过检测被检测设备的第一性能指标而生成的多个检测值,可以确定至少一个检测设备对应的阈值。
进一步地,多个检测值的生成方式可以有多种,在一种可能的实现方式中,可以设置至少一个检测设备中的每一个检测设备按照预设周期获取被检测设备中存储的同一设备资源,相应地,检测值可以为检测设备获取到该设备资源的时间。举例来说明(为便于描述,简称为示例1),基于图1所示意的系统架构,被检测设备100上存储有测试文件a,设定检测设备210~检测设备230中的每一个检测设备均执行每隔15分钟去被检测设备100中下载一次测试文件a的任务;则针对于检测设备210来说,检测设备210在第一预设时间段内(7天)可以生成672个检测值;也就是说,可以获取到的检测设备210~检测设备230生成的2016个检测值。
步骤301,根据多个检测值的大小,从多个检测值中确定有效检测值。
本发明实施例中,在获取到多个检测值后,可以将多个检测值中包括的在某一时间段内异常的检测设备所生成的数据剔除掉,从而得到有效检测值。具体地说,可以根据多个检测值的生成时间,将多个检测值划分到多个分组中;针对于每个分组(比如第一分组,第一分组可以为多个分组中的任一分组),若第一分组中大小超出预设范围的检测值均为同一个检测设备生成的检测值,则可以从第一分组中删除该检测设备生成的检测值,得到第一分组中的有效检测值。其中,多个分组的数量可以由本领域技术人员根据实际需要进行设置,具体不做限定。
举例来说明(为便于描述,简称为示例2),可以将示例1中获取到的2016个检测值按照生成的时间分类,得到第一分组至第七分组,其中,第一分组中包括检测设备210~检测设备230在第一天生成的288个检测值,第二分组中包括检测设备210~检测设备230在第二天生成的288个检测值,……,第七分组中包括检测设备210~检测设备230在第七天生成的288个检测值。以第一分组为例,将第一分组中的288个检测值按照从大到小的顺序排序,在一种可能的实现方式中,若前R个检测值均为同一个检测设备(比如,检测设备210)生成的检测值,则可以从第一分组中将检测设备210生成的多个检测值删除,得到第一分组中的有效检测值;其中,R可以由本领域技术人员根据实际需要进行设置,或者也可以根据实验进行设置,具体不作限定。在另一种可能的实现方式中,可以设置检测值的预设范围(比如0.06s~0.3s),若第一分组中检测值小于0.06s和检测值大于0.3s的一个或多个检测值均为同一个检测设备(比如,检测设备220)生成的,则可以从第一分组中将检测设备220生成的多个检测值删除,得到第一分组中的有效检测值;其中,检测值的预设范围可以由本领域技术人员根据实际需要进行设置,或者也可以根据实验进行设置,具体不作限定。
进一步地,对第一分组至第七分组中的每个分组均执行上述操作后,若第一分组中剩余192个检测值,第二分组中剩余288个检测值,第三分组中剩余192个检测值,第四分组中剩余192个检测值,第五分组中剩余288个检测值,第六分组中剩余288个检测值,第七分组中剩余192个检测值,则可以确定有效检测值的数量为1632个。
本发明实施例中,通过从多个检测值中确定有效检测值,可以将多个检测值中包括的在某一时间段内异常的检测设备所生成的数据删除,使得后续使用有效检测值确定的阈值更加符合实际要求,并能提高检测的准确性。
步骤303,根据至少一个检测设备中每个检测设备对应的有效检测值,确定每个检测设备对应的阈值。
本发明实施例中,有效检测值中可以包括每一个检测设备对应的有效检测值,根据每个检测设备对应的有效检测值,可以确定每个检测设备对应的阈值。举例来说明,基于示例2,若1632个有效检测值中包括检测设备210生成的528个检测值、检测设备220生成的576个检测值和监测设备230生成的528个检测值,则可以根据检测设备210生成的528个检测值,确定检测设备210对应的阈值,并根据检测设备220生成的576个检测值,确定检测设备220对应的阈值,以及根据检测设备230生成的528个检测值,确定检测设备230对应的阈值。
以检测设备210为例,在一种可能的实现方式中,可以按照从小到大的顺序对检测设备210对应的有效检测值进行排序,得到序列b,其中,序列b中可以包括值逐渐增大的528个有效检测值。进一步地,可以从序列b中确定出第一有效检测值和第二有效检测值,第一有效检测值可以为大于位于序列b首部的有效检测值,且小于位于序列b中部的有效检测值,比如0分位值至50分位值之间的任一分位值。优选的,本发明实施例中的第一有效检测值可以设置为25分位值(即序列b中的第132个有效检测值)。第二有效检测值可以为大于位于序列b中部的有效检测值,且小于位于序列b尾部的有效检测值,比如50分位值至100分位值之间的任一分位值。优选的,本发明实施例中的第二有效检测值可以设置为75分位值(即序列b中的第396个有效检测值)。
进一步地,可以根据第一有效检测值和第二有效检测值,得到检测设备210对应的阈值。在一个示例中,检测设备210对应的阈值可以为:
P=M+R(M-N)
其中,P为检测设备210对应的阈值,N为第一有效检测值,M为第二有效检测值,R为阈值参数。
由此可知,检测设备210对应的阈值P可以包括第一部分和第二部分,第一部分可以为第二分位值M,第二部分可以为由阈值参数R、第一检测值N和第二检测值M确定的阈值的容忍值(即R(M-N)),用于标识检测设备210对应的阈值的可调范围。
本发明实施例中,阈值参数R可以由本领域技术人员根据实际需要进行设置,或者也可以根据实验确定,或者还可以根据应用场景进行调整,具体不作限定。优选地,阈值参数R可以设置为3或1.5;相应地,检测设备210对应的阈值可以为第二有效检测值+3(第二有效检测值-第一有效检测值),或者可以为第二有效检测值+3(第二有效检测值-第一有效检测值)。
本发明实施例中,还可以对检测设备210对应的阈值进行修正。在一个示例中,可以对检测设备210对应的阈值的下限值进行修正,比如,若第二有效检测值小于第一阈值,且检测设备210对应的阈值的容忍值小于第二阈值,则检测设备210对应的阈值可以为第二有效检测值与第二阈值的和。在又一个示例中,还可以对检测设备210对应的阈值的上限值进行修正,比如,若检测设备210对应的阈值大于第三阈值,则检测设备210对应的阈值可以为第三阈值。其中,第一阈值、第二阈值和第三阈值可以由本领域技术人员根据实际需要进行设置,也就是说,不同的应用场景可以对应有不同的第一阈值、第二阈值和第三阈值。举例来说明,第一阈值为100,第二阈值为200,第三阈值为300,若序列b的75分位值小于100,且阈值的容忍值小于200,则检测设备210对应的阈值可以为序列b的75分位值与200的和;若检测设备210对应的阈值大于1000,则检测设备210对应的阈值可以为1000。
本发明实施例中,通过对每个检测设备对应的阈值进行修正,可以使得阈值更加符合实际的应用场景,从而使得确定出的阈值更加准确,保证检测结果的准确性。
上述步骤301至步骤303具体描述了确定检测设备对应的阈值的实现过程(即确定过程),步骤304~步骤305具体针对于使用检测设备对应的阈值对被检测设备的第一性能指标进行检测的实现过程(即检测过程)进行说明。
步骤304,获取至少一个检测设备在第二预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值,使用每个检测设备对应的阈值确定多个检测值是否异常。
此处,第一预设时间段可以位于第二预设时间段之前。也就是说,针对于每个检测设备来说,本发明实施例采用检测设备在第二预设时间段之前生成的历史检测值确定检测设备对应的阈值,并使用检测设备对应的阈值对检测设备在第二预设时间段内生成的检测值进行检测。其中,第二预设时间段可以由本领域技术人员根据实际需要进行设置,第二预设时间段可以与第一预设时间段相同,或者也可以不同,具体不作限定。以第二预设时间段为1天为例,基于示例1,检测设备210~检测设备230每隔15秒可以去被检测设备100上下载被检测设备上存储的测试文件a,则检测设备210、检测设备220和检测设备230可以均对应有96个检测值。
在一个示例中,可以使用每个检测设备对应的阈值对每个检测设备对应的检测值进行分析,确定每个检测设备对应的检测值中正常检测值的数量和异常检测值的数量。以检测设备210为例,若检测设备210对应的阈值为600,则可以使用600对检测设备210对应的96个检测值中的每一个检测值进行分析,针对于检测值c来说(检测值c可以为检测设备210对应的96个检测值中的任一检测值),若检测值c大于600,则可以确定检测值c为异常检测值;若检测值c小于600,则可以确定检测值c为正常检测值。
需要说明的是,本发明实施例是以被检测设备的第一性能指标为被检测设备的响应时间来确定检测值是否为异常检测值,容易理解的,被检测设备的响应时间越短,则被检测设备第一性能指标越好;因此,可以确定比阈值大的检测值为异常检测值。在其它可能的实施例中,比如,被检测设备的第一性能指标为被检测设备的吞吐量、点击数或用户并发数时,容易理解的,被检测设备的吞吐量越大、点击数越多、用户并发数越多,则被检测设备第一性能指标越好;因此,可以确定比阈值小的检测值为异常检测值。
步骤305,根据至少一个检测设备中每个检测设备对应的异常检测值的数量,确定被检测设备的第一性能指标是否异常。
具体实施中,可以根据至少一个检测设备对应的异常检测值的数量与至少一个检测设备对应的检测值的数量,确定检测分值,若检测分值大于第四阈值,则可以确定被检测设备的第一性能指标异常;若检测分值小于第四阈值,则可以确定被检测设备的第一性能指标正常。其中,第四阈值可以由本领域技术人员根据实际需要进行设置,或者也可以根据实验进行确定,具体不作限定。
在一个示例中,检测分值可以为至少一个检测设备对应的异常检测值的总数量与至少一个检测设备对应的检测值的总数量的比值。举例来说明,第四阈值为0.05,通过步骤204确定检测设备210对应的96个检测值中包括6个异常检测值、检测设备220对应的96个检测值中包括个5异常检测值、检测设备230对应的96个检测值中包括8个异常检测值。可以确定,检测设备210~检测设备230对应的检测值的总数量为288,检测设备210~检测设备230对应的异常检测值的总数量为19,则检测分值为0.066,由于0.066大于0.05,即检测分值大于第四阈值,则可以确定被检测设备的第一性能指标异常。
本发明的上述实施例中,获取至少一个检测设备在第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值,并根据多个检测值的大小,从多个检测值中确定有效检测值,进而根据至少一个检测设备中每个检测设备对应的有效检测值,确定每个检测设备对应的阈值,其中,每个检测设备对应的阈值用于确定每个检测设备在第二预设时间段内通过检测被检测设备的第一性能指标而生成的检测值是否异常,且第一预设时间段位于第二预设时间段之前。本发明实施例中,通过确定每个检测设备对应的阈值,并使用每个检测设备对应的阈值对每个检测设备生成的检测值进行检测,可以更加贴近每个检测设备的实际情况,从而使得检测结果更加准确;且,针对于每一个检测设备来说,通过使用在第二预设时间段之前生成的检测值确定得到的阈值(即根据历史检测值确定阈值)来对第二预设时间段内生成的检测值进行检测,可以使得阈值更加准确,从而进一步提高检测结果的准确性;也就是说,本发明实施例可以实现对被检测设备的性能指标的准确检测。
针对上述方法流程,本发明实施例还提供一种装置,该装置的具体内容可以参照上述方法实施。
图4为本发明实施例提供的一种装置的结构示意图,包括:
获取模块401,用于获取至少一个检测设备在第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值;
确定模块402,用于根据所述多个检测值的大小,从所述多个检测值中确定有效检测值;以及,根据所述至少一个检测设备中每个检测设备对应的有效检测值,确定所述每个检测设备对应的阈值;
其中,所述每个检测设备对应的阈值用于确定所述每个检测设备在第二预设时间段内通过检测所述被检测设备的第一性能指标而生成的检测值是否异常;所述第一预设时间段位于所述第二预设时间段之前。
可选地,所述确定模块402用于:
根据所述多个检测值的生成时间,将所述多个检测值划分到多个分组中;
针对于第一分组,若所述第一分组中大小超出预设范围的检测值均为第一检测设备生成的检测值,则从所述第一分组中删除所述第一检测设备生成的检测值,得到所述第一分组中的有效检测值;所述第一分组为所述多个分组中的任一分组。
可选地,所述确定模块402用于:
根据第二检测设备对应的有效检测值的大小,按照从小到大的顺序对所述第二检测设备对应的有效检测值进行排序,得到所述第二检测设备对应的序列;所述第二检测设备为所述至少一个检测设备中的任一检测设备;
从所述序列中确定出第一有效检测值和第二有效检测值;所述第一有效检测值大于位于序列首部的有效检测值,且小于位于序列中部的有效检测值;所述第二有效检测值大于位于序列中部的有效检测值,且小于位于序列尾部的有效检测值;
根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值。
可选地,所述根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值,符合如下公式:
P=M+R(M-N)
其中,P为所述第二检测设备对应的阈值,N为第一有效检测值,M为第二有效检测值,R为阈值参数;R(M-N)为所述第二检测设备对应的阈值的容忍值。
可选地,若所述第二有效检测值小于第一阈值,且所述第二检测设备对应的阈值的容忍值小于第二阈值,则所述第二检测设备对应的阈值为所述第二有效检测值与第二阈值的和;或者,
若所述第二检测设备对应的阈值大于第三阈值,则所述第二检测设备对应的阈值等于第三阈值。
从上述内容可以看出:本发明的上述实施例中,获取至少一个检测设备在第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值,并根据多个检测值的大小,从多个检测值中确定有效检测值,进而根据至少一个检测设备中每个检测设备对应的有效检测值,确定每个检测设备对应的阈值,其中,每个检测设备对应的阈值用于确定每个检测设备在第二预设时间段内通过检测被检测设备的第一性能指标而生成的检测值是否异常,且第一预设时间段位于第二预设时间段之前。本发明实施例中,通过确定每个检测设备对应的阈值,并使用每个检测设备对应的阈值对每个检测设备生成的检测值进行检测,可以更加贴近每个检测设备的实际情况,从而使得检测结果更加准确;且,针对于每一个检测设备来说,通过使用在第二预设时间段之前生成的检测值确定得到的阈值(即根据历史检测值确定阈值)来对第二预设时间段内生成的检测值进行检测,可以使得阈值更加准确,从而进一步提高检测结果的准确性;也就是说,本发明实施例可以实现对被检测设备的性能指标的准确检测。
本领域内的技术人员应明白,本发明的实施例可提供为方法、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的优选实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (8)
1.一种确定阈值的方法,其特征在于,所述方法包括:
获取至少一个检测设备在第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值;
根据所述多个检测值的大小,从所述多个检测值中确定有效检测值;
根据第二检测设备对应的有效检测值的大小,按照从小到大的顺序对所述第二检测设备对应的有效检测值进行排序,得到所述第二检测设备对应的序列;所述第二检测设备为所述至少一个检测设备中的任一检测设备;
从所述序列中确定出第一有效检测值和第二有效检测值;所述第一有效检测值大于位于序列首部的有效检测值,且小于位于序列中部的有效检测值;所述第二有效检测值大于位于序列中部的有效检测值,且小于位于序列尾部的有效检测值;
根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值;
其中,每个所述 检测设备对应的阈值用于确定每个所述 检测设备在第二预设时间段内通过检测所述被检测设备的第一性能指标而生成的检测值是否异常;所述第一预设时间段位于所述第二预设时间段之前。
2.根据权利要求1所述的方法,其特征在于,根据所述多个检测值的大小,从所述多个检测值中确定有效检测值,包括:
根据所述多个检测值的生成时间,将所述多个检测值划分到多个分组中;
针对于第一分组,若所述第一分组中大小超出预设范围的检测值均为第一检测设备生成的检测值,则从所述第一分组中删除所述第一检测设备生成的检测值,得到所述第一分组中的有效检测值;所述第一分组为所述多个分组中的任一分组。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值,符合如下公式:
P=M+R(M-N)
其中,P为所述第二检测设备对应的阈值,N为第一有效检测值,M为第二有效检测值,R为阈值参数;R(M-N)为所述第二检测设备对应的阈值的容忍值。
4.根据权利要求3所述的方法,其特征在于:
若所述第二有效检测值小于第一阈值,且所述第二检测设备对应的阈值的容忍值小于第二阈值,则所述第二检测设备对应的阈值为所述第二有效检测值与第二阈值的和;或者,
若所述第二检测设备对应的阈值大于第三阈值,则所述第二检测设备对应的阈值等于第三阈值。
5.一种装置,其特征在于,所述装置包括:
获取模块,用于获取至少一个检测设备在第一预设时间段内通过检测被检测设备的第一性能指标而生成的多个检测值;
确定模块,用于根据所述多个检测值的大小,从所述多个检测值中确定有效检测值,根据第二检测设备对应的有效检测值的大小,按照从小到大的顺序对所述第二检测设备对应的有效检测值进行排序,得到所述第二检测设备对应的序列;所述第二检测设备为所述至少一个检测设备中的任一检测设备;从所述序列中确定出第一有效检测值和第二有效检测值;所述第一有效检测值大于位于序列首部的有效检测值,且小于位于序列中部的有效检测值;所述第二有效检测值大于位于序列中部的有效检测值,且小于位于序列尾部的有效检测值;根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值;
其中,每个所述 检测设备对应的阈值用于确定每个所述 检测设备在第二预设时间段内通过检测所述被检测设备的第一性能指标而生成的检测值是否异常;所述第一预设时间段位于所述第二预设时间段之前。
6.根据权利要求5所述的装置,其特征在于,所述确定模块用于:
根据所述多个检测值的生成时间,将所述多个检测值划分到多个分组中;
针对于第一分组,若所述第一分组中大小超出预设范围的检测值均为第一检测设备生成的检测值,则从所述第一分组中删除所述第一检测设备生成的检测值,得到所述第一分组中的有效检测值;所述第一分组为所述多个分组中的任一分组。
7.根据权利要求5或6所述的装置,其特征在于,所述根据所述第一有效检测值和所述第二有效检测值,得到所述第二检测设备对应的阈值,符合如下公式:
P=M+R(M-N)
其中,P为所述第二检测设备对应的阈值,N为第一有效检测值,M为第二有效检测值,R为阈值参数;R(M-N)为所述第二检测设备对应的阈值的容忍值。
8.根据权利要求7所述的装置,其特征在于,
若所述第二有效检测值小于第一阈值,且所述第二检测设备对应的阈值的容忍值小于第二阈值,则所述第二检测设备对应的阈值为所述第二有效检测值与第二阈值的和;或者,
若所述第二检测设备对应的阈值大于第三阈值,则所述第二检测设备对应的阈值等于第三阈值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910118081.8A CN109858632B (zh) | 2019-02-15 | 2019-02-15 | 一种确定阈值的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910118081.8A CN109858632B (zh) | 2019-02-15 | 2019-02-15 | 一种确定阈值的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109858632A CN109858632A (zh) | 2019-06-07 |
CN109858632B true CN109858632B (zh) | 2021-06-04 |
Family
ID=66898050
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910118081.8A Expired - Fee Related CN109858632B (zh) | 2019-02-15 | 2019-02-15 | 一种确定阈值的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109858632B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111459743B (zh) * | 2020-04-03 | 2021-03-26 | 成都安易迅科技有限公司 | 一种数据处理方法及装置、可读存储介质 |
CN113253499B (zh) * | 2021-06-18 | 2021-09-28 | 深圳市泰科盛自动化系统有限公司 | 基于液晶屏检测的液晶屏自调节组装系统 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1614997A (zh) * | 2003-11-06 | 2005-05-11 | 华楠 | 运动跟踪技术 |
CN102725619A (zh) * | 2009-06-11 | 2012-10-10 | 伊顿公司 | 混合动力驱动系统中的故障检测和减轻 |
CN104519271A (zh) * | 2013-09-27 | 2015-04-15 | 索尼公司 | 图像处理设备和方法和程序 |
CN104615986A (zh) * | 2015-01-30 | 2015-05-13 | 中国科学院深圳先进技术研究院 | 利用多检测器对场景变化的视频图像进行行人检测的方法 |
CN105512994A (zh) * | 2016-01-04 | 2016-04-20 | 浙江大学 | 一种可容错周界入侵探测方法 |
CN106095655A (zh) * | 2016-05-31 | 2016-11-09 | 北京蓝海讯通科技股份有限公司 | 一种异常检测方法、应用和监控设备 |
CN107340014A (zh) * | 2017-08-31 | 2017-11-10 | 广东美的制冷设备有限公司 | 多传感器的检测方法、装置及计算机可读存储介质 |
CN108696446A (zh) * | 2018-07-30 | 2018-10-23 | 网宿科技股份有限公司 | 一种流量特征信息的更新方法、装置及中心节点服务器 |
CN109120527A (zh) * | 2018-10-12 | 2019-01-01 | 网宿科技股份有限公司 | 一种传输业务流量的方法和系统 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8850262B2 (en) * | 2010-10-12 | 2014-09-30 | International Business Machines Corporation | Inter-processor failure detection and recovery |
-
2019
- 2019-02-15 CN CN201910118081.8A patent/CN109858632B/zh not_active Expired - Fee Related
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1614997A (zh) * | 2003-11-06 | 2005-05-11 | 华楠 | 运动跟踪技术 |
CN102725619A (zh) * | 2009-06-11 | 2012-10-10 | 伊顿公司 | 混合动力驱动系统中的故障检测和减轻 |
CN104519271A (zh) * | 2013-09-27 | 2015-04-15 | 索尼公司 | 图像处理设备和方法和程序 |
CN104615986A (zh) * | 2015-01-30 | 2015-05-13 | 中国科学院深圳先进技术研究院 | 利用多检测器对场景变化的视频图像进行行人检测的方法 |
CN105512994A (zh) * | 2016-01-04 | 2016-04-20 | 浙江大学 | 一种可容错周界入侵探测方法 |
CN106095655A (zh) * | 2016-05-31 | 2016-11-09 | 北京蓝海讯通科技股份有限公司 | 一种异常检测方法、应用和监控设备 |
CN107340014A (zh) * | 2017-08-31 | 2017-11-10 | 广东美的制冷设备有限公司 | 多传感器的检测方法、装置及计算机可读存储介质 |
CN108696446A (zh) * | 2018-07-30 | 2018-10-23 | 网宿科技股份有限公司 | 一种流量特征信息的更新方法、装置及中心节点服务器 |
CN109120527A (zh) * | 2018-10-12 | 2019-01-01 | 网宿科技股份有限公司 | 一种传输业务流量的方法和系统 |
Non-Patent Citations (1)
Title |
---|
《基于Linux的RTP流检测识别算法研究》;杨瑞光 等;《计算机工程与设计》;20130116;第81-85页 * |
Also Published As
Publication number | Publication date |
---|---|
CN109858632A (zh) | 2019-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106294120B (zh) | 测试代码的方法、设备和计算机程序产品 | |
CN108833458B (zh) | 一种应用推荐方法、装置、介质及设备 | |
US8560667B2 (en) | Analysis method and apparatus | |
CN106933709B (zh) | 一种测试方法及装置 | |
CN110471821B (zh) | 异常变更检测方法、服务器及计算机可读存储介质 | |
CN110221953A (zh) | 测试结果分析方法、装置、服务器及存储介质 | |
CN112235326A (zh) | 物联网设备数据的解析方法、装置和电子设备 | |
CN109858632B (zh) | 一种确定阈值的方法及装置 | |
CN112486535B (zh) | 一种用于NB-IoT设备的远程升级方法及系统 | |
CN113485931B (zh) | 测试方法、装置、电子设备及计算机可读存储介质 | |
CN111475267A (zh) | 系统任务自动调度方法、装置、计算机设备及存储介质 | |
CN111209998B (zh) | 基于数据类型的机器学习模型的训练方法及装置 | |
CN112596985B (zh) | 一种it资产探测方法、装置、设备和介质 | |
CN109815067B (zh) | 压力测试方法、装置、计算机设备及计算机可读存储介质 | |
CN110888811A (zh) | 代码覆盖率信息处理方法、装置、电子设备及介质 | |
CN107846586B (zh) | 视频流质量的监测方法、装置和服务端 | |
CN112231194B (zh) | 一种指标异常根源分析方法、装置及计算机可读存储介质 | |
CN113791961B (zh) | 基于微服务的数据采集方法、装置、设备及存储介质 | |
CN110865913B (zh) | 一种压力测试的方法及装置 | |
CN109726086A (zh) | 测试服务器性能的方法和装置 | |
CN113849484A (zh) | 一种大数据组件升级方法、装置、电子设备及存储介质 | |
CN109413685B (zh) | 语音质量确定方法、装置和计算机可读存储介质 | |
EP4064150A1 (en) | Method for adjusting work unit price according to work progress speed of crowdsourcing-based project | |
CN113610644B (zh) | 一种系统交易筛选方法及装置 | |
CN112866044B (zh) | 网络设备状态信息采集方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210604 Termination date: 20220215 |
|
CF01 | Termination of patent right due to non-payment of annual fee |