CN103154904B - 操作管理设备、操作管理方法和程序 - Google Patents

操作管理设备、操作管理方法和程序 Download PDF

Info

Publication number
CN103154904B
CN103154904B CN201180048941.7A CN201180048941A CN103154904B CN 103154904 B CN103154904 B CN 103154904B CN 201180048941 A CN201180048941 A CN 201180048941A CN 103154904 B CN103154904 B CN 103154904B
Authority
CN
China
Prior art keywords
model
period
correlation models
particular model
time slot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180048941.7A
Other languages
English (en)
Other versions
CN103154904A (zh
Inventor
长谷川英男
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN103154904A publication Critical patent/CN103154904A/zh
Application granted granted Critical
Publication of CN103154904B publication Critical patent/CN103154904B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3447Performance evaluation by modeling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/34Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/81Threshold

Abstract

本发明即使在没关于用于系统特性的有关建模期间的信息时,仍产生适于每个特定期间(诸如用于系统分析的日)的分析的相关性模型。在特定时期中,相关性模型生成单元(102)生成多个相关性模型(122),所述多个相关性模型每个均指示在性能信息存储器(111)中存储的不同类型的性能值之间的相关性。模型设置单元(103)基于在用于预定期间中的性能信息的每个相关性模型(122)的适合度,从由相关性模型生成单元(102)生成的多个相关性模型(122)之中,选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型(122),以及所述一个或多个特定模型为所述基本模型以外的相关性模型(122),并且设置在其上将基本模型和特定模型分别应用于故障检测的时段。

Description

操作管理设备、操作管理方法和程序
技术领域
本发明涉及操作管理设备、操作管理方法和程序,并且具体地涉及通过使用有关系统性能的时间序列信息来执行系统建模的操作管理设备、操作管理方法和程序。
背景技术
专利文献1公开了操作管理系统的示例,其通过使用关于系统性能的时间序列信息来执行系统建模并且通过使用所生成的模型检测该系统的故障。
专利文献1中公开的操作管理系统通过基于有关多种系统性能类型的性能信息的时间序列信息,导出关于有关多个性能项目的多条性能信息之间的每一对的相关性函数,来生成包括多个相关性函数的相关性模型。随后,操作管理系统通过使用所生成的相关性模型,关于性能信息的实际测量值确定相关性是否被破坏,并且基于相关性破坏的出现数量来检测系统的异常。
在专利文献1公开的操作管理系统中,当生成相关性模型时,输入在预定时段期间有关性能信息的时间序列信息,并且基于该期间中的时间序列信息提取相关性。
顺便指出,在许多系统中,因为处理服务器和被执行的应用的数量根据系统操作的时隙而改变,所以系统特性也改变,并且多条性能信息之间的相关性根据所述特性而改变。由于此原因,用于生成相关性模型的时间序列信息的时段(建模期间)需要根据系统特性改变的时间而适当地设置。另外,当分析系统时,需要根据在其间执行该分析的那个时隙的系统特性来使用相关性模型。
例如,会计系统执行的处理的类型在白天和夜间之间改变,诸如它们在白天执行在线交易处理并且在夜晚执行批处理。就这种会计系统而言,需要基于针对白天和夜间的相应性能信息序列而生成用于白天和夜间的相应相关性模型,以及在白天和夜间之间改变将在系统分析中使用的相关性模型。
因而,为了根据系统特性执行建模和分析,需要具备关于该系统所具有的多个系统特性的每一个的有关建模期间的信息。
这种有关建模期间的信息例如由具有有关系统的充足知识的管理员掌握,并且管理员设置生成相关性模型的建模期间。
然而,当由于诸如并不存在具有关于系统的充足知识的管理员的原因而使得有关建模期间的这种信息不可用,例如,并且由此生成关于不准确建模期间的相关性模型并将其应用到系统分析时,由于多条性能信息之间的相关性根据时隙改变,因而不准确地检测到系统的异常(为误报),尽管该系统处于正常操作中。
此外,当使用相关性模型执行系统分析时,在系统特性不同于相关性模型的建模期间中的系统特性的这种时隙期间,由于在该分析的时隙中多条性能信息之间的相关性不同于建模期间中的相关性,因而类似地不准确地检测到系统的异常(为误报)。
例如,关于上述会计系统,当基于在白天的性能信息序列而生成的相关性模型被应用到在夜间的系统分析中时,由于在系统中建立的相关性变化,所以向管理员报告系统的异常(误报),即使批处理被正常地执行。
如上所述,当关于系统所具备的多个系统特性的每一个的有关关于建模期间的信息不可用时,可能生成不精确的模型,或可能应用不适于系统分析的时隙的模型。因此,存在出现分析精度下降、分析中故障的遗漏或者关于故障的误报的可能性。
作为相关技术,专利文献2公开一种操作信息管理系统,其中计算在被监视目标的性能信息和模型数据之间的相关性系数,并且仅仅关于表现出强相关性的性能信息存储相关性系数。
[引文列表]
[专利文献]
[专利文献1]日本专利申请公开2009-199533
[专利文献2]日本专利申请公开2008-108154
发明内容
[技术问题]
当在类似于在上述专利文献1公开的建模技术中,基于有关系统性能的时间序列信息而生成用于系统分析的相关性模型时,存在这样的问题:需要关于该系统所具备的多个系统特性的每一个的有关建模期间的信息。
本发明的目的是解决上述问题,并且因此提供这样的操作管理设备、操作管理方法和程序:即使关于系统特性的有关建模期间的信息不可用,其仍生成关于每个固定期间(诸如系统分析被执行的日期)的适于系统分析的相关性模型。
[问题的解决方案]
根据本发明的示例性方面的操作管理设备包括:性能信息存储装置,其用于按照时间顺序在系统中存储包括多种类型的性能值的性能信息;相关性模型生成装置,其用于生成多个相关性模型,所述多个相关性模型每个均包括在预定期间中不同类型的性能值之间的相关性,所述性能值存储于所述性能信息存储装置中;以及模型设置装置,其用于基于用于在所述预定期间中的所述性能信息的每个相关性模型的适合度,从由所述相关性模型生成装置生成的多个相关性模型之中选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型,所述一个或多个特定模型为所述基本模型以外的相关性模型,并且用于设置在其上将所述基本模型以及所述一个或多个特定模型分别应用于故障检测的时段。
根据本发明的示例性方面的操作管理方法包括:按照时间顺序在系统中存储包括多种类型的性能值的性能信息;生成多个相关性模型,所述多个相关性模型每个均包括在预定期间中在不同类型的性能值之间的相关性;基于用于在所述预定期间中的性能信息的每个相关性模型的适合度,从所述多个相关性模型之中,选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型,所述一个或多个特定模型为所述基本模型以外的相关性模型;以及设置在其上将所述基本模型以及所述一个或多个特定模型分别应用与故障检测的时段。
根据本发明的示例性方面的计算机可读存储介质在其上记录有操作管理程序,该计算机可读存储介质致使计算机执行包括下述操作的方法:按照时间顺序在系统中存储包括多种类型的性能值的性能信息;生成多个相关性模型,所述多个相关性模型每个均包括在预定期间中在不同类型的性能值之间的相关性;基于用于在预定期间中的性能信息的每个相关性模型的适合度,从所述多个相关性模型之中选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型,所述一个或多个特定模型为基本模型以外的相关性模型;以及设置在其上应用所述基本模型以及所述一个或多个特定模型分别应用于故障检测的时段。
[本发明的有利效果]
本发明的有利效果在于,即使关于系统特性的有关建模期间的信息不可用,仍可以关于每个固定期间(诸如执行系统分析的日期)生成适于系统分析的相关性模型。
附图说明
[图1]示出本发明的第一示例性实施方式的特征配置的框图。
[图2]示出对其应用本发明第一示例性实施方式中的操作管理设备的操作管理系统的配置的框图。
[图3]示出对其应用本发明第一示例性实施方式中的操作管理设备的操作管理系统的示例的图示。
[图4]示出在本发明第一示例性实施方式中的性能序列信息121的示例的表格。
[图5]示出在本发明第一示例性实施方式中的操作管理设备100的一般性过程的流程图。
[图6]示出在本发明第一示例性实施方式中的操作管理设备100的模型提取过程的流程图。
[图7]示出在本发明第一示例性实施方式中的相关性模型122的示例的图示。
[图8]示出在本发明第一示例性实施方式中的平均相关性破坏率的计算结果的图示。
[图9]示出本在发明第一示例性实施方式中的模型信息123的示例的表格。
[图10]示出在本发明第一示例性实施方式中的操作管理设备100的时间安排生成过程的流程图。
[图11]示出在本发明第一示例性实施方式中的时间安排候选信息124的示例的表格。
[图12]示出在本发明第一示例性实施方式中的一致度计算结果的示例的图示。
[图13]示出在本发明第二示例性实施方式中的操作管理系统的配置的框图。
[图14]示出在本发明第二示例性实施方式中的操作管理设备100的例外模型生成过程的流程图。
[图15]示出在本发明第二示例性实施方式中的相关性破坏检测的结果的示例的图示。
[图16]示出在本发明第二示例性实施方式中模型信息123的示例的表格。
具体实施方式
(第一示例性实施方式)
接着,将描述本发明的第一示例性实施方式。
首先,将描述本发明的第一示例性实施方式的配置。图2为示出向其应用本发明第一示例性实施方式中的操作管理设备的操作管理系统的配置的框图。
如图2所示,在本发明第一示例性实施方式中的操作管理系统包括操作管理设备(监视和控制设备)100、被监视设备200(200a和200b)以及监视终端300。
此处,基于从被监视设备200(其为监视对象)收集的性能信息,操作管理设备100生成关于被监视设备200的相关性模型122,并且利用所生成的相关性模型122执行关于被监视设备200的故障检测。
被监视设备200为由操作管理设备100建模和监视的设备(系统),诸如网络服务器和数据库服务器。
监视终端300为供管理员等命令操作管理设备100生成相关性模型122并且检测关于被监视设备200的故障的终端。
操作管理设备100包括信息收集单元101、相关性模型生成单元102、模型设置单元103、时间安排生成单元104、异常检测单元105、性能信息存储单元111、相关性模型存储单元112、模型信息存储单元113和时间安排候选信息存储单元114。
此处,信息收集单元101从被监视设备200收集性能序列信息121,该性能序列信息指示被监视设备200的性能信息的按时间顺序的变化。性能信息存储单元111存储由信息收集单元101收集的性能序列信息121。此处,性能序列信息121包括定期地对被监视设备200进行测量的性能项目的值(性能值)以作为性能信息,诸如CPU使用率、存储器使用情况以及磁盘访问的次数。
此处,每个被监视设备200与性能项目的组合被定义为性能信息中的性能类型(或仅仅类型)。
图4为示出本发明第一示例性实施方式中的性能序列信息121的示例的表格。在图4所示的示例中,性能序列信息121包括下述各项作为性能类型:被监视设备200a的CPU使用率、被监视设备200b的磁盘访问的次数以及被监视设备200b的CPU使用率。
相关性模型生成单元102参照性能序列信息121并且生成关于性能序列信息121中包括的每个日期的相关性模型122。此处,关于性能序列信息121中包括的每个日期,相关性模型生成单元102导出用于任意两个性能类型的性能值之间的相关性函数,并且生成包括关于每对性能类型的相关性函数的相关性模型122。相关性模型存储单元112存储由相关性模型生成单元102生成的相关性模型122。
此处,相关性函数为从一种性能类型的性能值的时间序列预测另一性能类型的性能值的时间序列的变换函数,并且如专利文献1所指示,由系统识别过程关于用于上述任意两种性能类型的关于性能值的时间序列而导出。
图7为示出在本发明第一示例性实施方式中的相关性模型122的示例的图示。在图7所示示例中,生成关于每个日期的相关性模型122。在相应相关性模型122中,已经计算了关于三种性能类型之中的各对性能类型的性能值的相关性函数,所述三种性能类型为web服务器的CPU使用率、数据库服务器的磁盘访问的次数以及数据库服务器的CPU使用率。另外,采用诸如y=Ax的变换函数作为相关性函数。
此外,历法的日被设置为在本发明的第一示例性实施方式中生成相关性模型12的时间单位(在下文中称为固定期间),但是历法的星期或月份也可以被设置为该固定期间。另外,固定期间不限于诸如日、星期和月份的周期性期间,而可以是由管理员预定义的特定时隙。
模型设置单元103从由相关性模型生成单元102生成的多个相关性模型122之中,提取基本模型和特定模型,所述基本模型适合于在性能序列信息121的预定期间内的性能信息,并且所述特定模型适合于针对在性能序列信息121的预定期间中的特定日期的性能信息,以及确定将基本模型和特定模型中每个应用于系统分析(故障检测)的日期。
此处,在本发明的第一示例性实施方式中,基于相关性模型122关于性能信息的适合度,确定相关性模型122是否适合于性能信息。
模型设置单元103选择在预定期间中表现出最高适合度的相关性模型122作为基本模型,并且选择在预定期间中表现出最低适合度的预定数目的相关性模型122作为特定模型。随后,模型设置单元103将该预定期间中的、特定模型的适合度高于基本模型的适合度和每个其它特定模型的适合度的日期指定为应用该特定模型的日期。
以此方式,由于在正常时间内执行采用在预定期间上表现出高适合度的基本模型的故障检测过程,并且在特定日期执行采用表现出的适合度高于基本模型的模型的故障检测过程,因此与在预定期间上采用单个模型的情形相比,有可能减小在系统特性不同于正常状态时系统特性的这种特定日期上的故障不准确检测(误报)的频率。
注意,在本发明的第一示例性实施方式中,假设根据在将相关性模型122应用于性能信息的相关性破坏率来确定所述适合度。此外,假设相关性破坏率越小,适合度越高。
模型信息存储单元113存储关于由模型设置单元103生成的每个基本模型和特定模型的模型信息123,所述模型信息表示模型名称和应用所述模型的日期。
图9为示出在本发明第一示例性实施方式中的模型信息123的示例的表格。模型信息123包括模型名称、模型类型、应用日期和应用时间安排。此处,模型名称指示识别相关性模型122的标识符。模型类型指示模型122为基本模型还是特定模型。应用日期和应用时间安排分别指示应用模型的日期和时间安排。
时间安排候选信息存储单元114存储时间安排候选信息124,该时间安排候选信息为分类规则的列表,用以根据历法属性(时间属性)对应用基本模型和特定模型中每个的应用日期(应用基本模型和特定模型中每个的固定期间)进行分类。
图11为示出在本发明第一示例性实施方式中的时间安排候选信息124的示例的表格。在图11所示示例中的时间安排候选信息124中,一周的预定日(诸如″周一″和″周日″)、每个月的预定日(诸如″5的倍数的日″和″每个月的最后一个工作日″)、以及每年的预定月日(诸如″3月20日″)被设置为分类规则。支持对影响被监视系统的系统特性的特定日期进行分类的规则被设置为这些分类规则。
基于由模型设置单元103和时间安排候选信息124确定的特定模型的应用日期,时间安排生成单元104确定用于特定模型的应用时间安排。
异常检测单元105根据相应应用日期或应用时间安排将由模型设置单元103确定的基本模型和特定模型中的每个应用于性能序列信息121中包括的性能信息,并且通过将性能信息与那些模型预测的性能性息比较,对系统执行故障检测并且将结果输出到监视终端300。
注意,操作管理设备100可以是计算机,其包括CPU(中央处理单元)和存储程序的存储介质,并且在根据该程序的控制下操作。另外,性能信息存储单元111、相关性模型存储单元112、模型信息存储单元113和时间安排候选信息存储单元114可以被配置成独立存储介质或者配置在单个存储介质中。
接着,将描述本发明第一示例性实施方式中的操作管理设备100的操作。
图3为示出向其应用本发明第一示例性实施方式中的操作管理设备100的操作管理系统的示例的图示。在图3所示示例中,被监视设备200a和200b分别为web服务器和数据库服务器。
在每个被监视设备200a和200b中,监视和控制代理每5分钟进行操作并采集性能信息,而且定期将其发送到操作管理设备(监视和控制设备)100的信息收集单元101。因此,诸如图4所示的性能序列信息121被存储于操作管理设备100的性能信息存储单元111中。
此处,在工作日,web服务器和数据库服务器响应于经由防火墙的来自客户端的访问而执行在线交易。在假日,来自客户端的访问被防火墙阻挡,并且每个网络服务器和数据库服务器例如执行批处理,诸如备份和计算。由于此原因,在图4所示的性能序列信息121中,6月1日周二(其为工作日)的性能信息在其趋势上不同于6月6日周日(其为假日)的性能信息。
图5为示出在本发明第一示例性实施方式中的操作管理设备100的一般性过程的流程图。
首先,操作管理设备100从监视终端300接收针对模型生成的请求(步骤S 101)。此处,监视终端300从性能序列信息121中包括的性能信息之中指定将把性能信息用于生成模型的期间(预定期间),以及将要生成的特定模型的数目(预定的模型数目)。
例如,监视终端300指定6月1至30日为将把性能信息用于生成模型的期间,并且将1指定为将要生成的特定模型的数目。
相关性模型生成单元102参照存储于性能信息存储单元111中的性能序列信息121,基于针对性能序列信息121中包括的日期的性能信息,生成关于所指定期间中每个日期(固定期间)的相关性模型122;并且将所述模型存储于相关性模型存储单元112中(步骤S102)(相关性模型生成过程)。
例如,使用针对图4所示性能序列信息121中从6月1日到6月30日的每个日期的从0:00到23:55的性能信息,相关性模型生成单元102生成图7所示的相关性模型122,并且将所述模型存储于相关性模型存储单元112中。此处,针对相应日期的相关性模型122的模型名称被指定为M1、M2…和M30。
在图7,具有模型名称M1的相关性模型122为在工作日执行在线交易的上述情形中的相关性模型122的示例。具有模型名称M6的相关性模型122为在假日执行批处理的情形中的相关性模型122的示例。
接着,模型设置单元103从存储于相关性模型存储单元112中的相关性模型122之中,提取基本模型和特定模型中每一个,并且确定相应模型的应用日期(步骤S103)(模型提取过程)。
图6为示出在本发明第一示例性实施方式中的操作管理设备100的模型提取过程(步骤S103的细节)的流程图。
基于存储于性能信息存储单元111中的性能序列信息121中所包括的针对所指定期间的性能信息,模型设置单元103关于在步骤S102中生成的每个相关性模型122计算指定期间中的相关性模型的平均相关性破坏率(步骤S201)。
此处,模型设置单元103例如借助与专利文献1中相同的方法,计算相关性破坏率。
也就是说,模型设置单元103将相关性模型122中包括的相关性函数应用到性能序列信息121中包括的两种性能类型其中之一的性能值,计算另一性能类型的预测性能值,并且通过将该另一性能类型的实际性能值与计算的预测性能值比较来计算预测误差。如果所计算的预测误差超过由管理员等预先设置的值(预定值),则模型设置单元103将其检测为相关性破坏。
随后,模型设置单元103检测关于相关性模型103中包括的每一相关性函数(相关性)的相关性破坏的存在或不存在,并且基于被破坏的相关性的数目相对于相关性模型122中包括的整个相关性的数目,计算相关性破坏率。
另外,模型设置单元103通过计算指定期间中的计算的相关性破坏率的平均值,来计算指定期间的平均相关性破坏率。
接着,模型设置单元103从在步骤S102中生成的相关性模型122提取在指定期间中表现出最小平均相关性破坏率的相关性模型122(在指定期间中具有最高平均适合度的相关性模型)作为基本模型(步骤S202)。
模型设置单元103将被提取为基本模型的相关性模型122的模型名称登记在存储于模型信息存储单元113中的模型信息123中(步骤S203)。
模型设置单元103将指定期间中的所有日期设置为基本模型的应用日期(步骤S204)。
图8为示出在本发明第一示例性实施方式中的平均相关性破坏率的计算结果的图示。此处,例如,当在期间6月1日至30日中具有模型名称M1的相关性模型122的平均相关性破坏率的值10%在每一相关性模型122(模型名称M1至M30)的值中是最小时,模型设置单元103将具有模型名称M1的相关性模型122提取为基本模型并且将其登记在模型信息123中,如图9所示。模型设置单元103将期间6月1日至30日中的每个日期设置为基本模型的应用日期。
接着,模型设置单元103从在步骤S102中生成并且尚未被提取为基本模型或特定模型的相关性模型122之中,提取在指定期间中表现出最大平均相关性破坏率的相关性模型122(在指定期间中具有最低平均适合度的相关性模型)作为特定模型(步骤S205)。
模型设置单元103将被提取为特定模型的相关性模型122的模型名称登记在存储于模型信息存储单元113的模型信息123中(步骤S206)。
接着,基于存储于性能信息存储单元111中的性能序列信息121中包括的针对每个日期的性能信息,模型设置单元103关于提取的基本模型和特定模型中每个,计算针对在指定期间中包括的每个日期的平均相关性破坏率。随后,模型设置单元103从指定期间中包括的日期之中,将在步骤S205中被提取的特定模型的平均相关性破坏率小于基本模型的平均相关性破坏率以及每个其它特定模型的平均相关性破坏率的日期(特定模型的平均适合度高于基本模型的平均适合度以及每个其它特定模型的平均适合度的日期)确定为用于特定模型的应用日期(步骤S207)。
此处,模型设置单元103通过针对每个日期计算由前述方法计算的相关性破坏率的平均值,计算针对每个日期的平均相关性破坏率。
模型设置单元103在模型信息123中设置该特定模型的确定的应用日期,并且从应用日期移除已经被设置用于基本模型或其它特定模型的日期(步骤S208)。
模型设置单元103重复步骤S205至S208,直至提取到指定数目的特定模型(步骤S209)。
例如,当在期间6月1日至30日中具有模型名称M6的相关性模型122的平均相关性破坏率的值40%在尚未被提取的相关性模型122(模型名称M2至M30)的值中是最大时,模型设置单元103提取具有模型名称M6的相关性模型122作为特定模型,并且将其登记在模型信息123中,如图9所示。
当关于日期6月6日、13日、20日和27日,具有模型名称M6的相关性模型的平均相关性破坏率小于基本模型的平均相关性破坏率时,模型设置单元103将这些日期在模型信息123中设置为用于具有模型名称M6的特定模型的应用日期,如图9所示。另外,如图9所示,模型设置单元103从基本模型的应用日期(6月1日至30日)移除这些日期。
因此,如图9所示,在模型信息123中设置基本模型(模型名称M1)和特定模型(模型名称M6)以及用于相应模型的应用日期。
结果,关于在用于模型生成的期间中的性能信息,异常检测单元105可以通过将模型信息123中设置的基本模型和特定模型应用到相应应用日期,而对系统执行故障检测。
接着,基于应用日期和时间安排候选信息124,时间安排生成单元104确定用于特定模型的应用时间安排(步骤S104)(时间安排生成过程)。
图10为示出在本发明第一示例性实施方式中的操作管理设备100的时间安排生成过程(步骤S104的细节)的流程图。
此处,诸如图11中的时间安排候选信息124存储于时间安排候选信息存储单元114。
参考存储于模型信息存储单元113中的模型信息113,时间安排生成单元104获取所述特定模型其中之一及其应用日期(步骤S301)。
参考存储于时间安排候选信息存储单元114的时间安排候选信息124,时间安排生成单元104计算针对特定模型的应用日期和在时间安排候选信息124中包括的每个分类规则之间的一致度,并且提取所计算一致度是最大的那个分类规则(步骤S302)。
此处,时间安排生成单元104借助例如下述式子计算一致度。
一致度=n(|A∩B|)/n(|AUB|)
此处,A、B和n()分别表达针对特定模型的应用日期的集合,对应于指定期间的分类规则的日期的集合,以及在()中的集合中包括的元素的数目。
时间安排生成单元104将所提取的分类规则设置到存储于模型信息存储单元113的模型信息123中,以作为针对该特定模型的应用时间安排(步骤S303)。
对于在步骤S103中提取的每一特定模型,时间安排生成单元104重复步骤S302和S303(步骤S304)。
图12为示出在本发明第一示例性实施方式中的一致度计算结果的示例的图示。
例如,关于图9中的模型信息123中包括的具有模型名称M6的特定模型,时间安排生成单元104计算针对此特定模型的应用日期(6月6日、13日、20日和27日)和图11所示时间安排候选信息124中包括的每个分类规则(规则编号1、2…)之间的一致度。
这种情况下,如图12所示,针对特定模型的应用日期和具有规则编号7″周日″的分类规则之间的一致度被计算为1.0。另外,针对该特定模型的应用日期和具有规则编号8″周六和周日″的分类规则之间的一致度被计算为0.5。时间安排生成单元104提取表现出最高一致度的分类规则″周日″,并且将其设置为针对此特定模型的应用时间安排,如图9所示。
因此,如图9所示,在模型信息123中设置基本模型(模型名称M1)和特定模型(模型名称M6)以及针对相应模型的应用时间安排。
结果,异常检测单元105可以对系统执行故障检测,关于在用于模型生成的期间以外的期间中的性能信息,诸如新采集的性能信息,根据相应应用时间安排来应用在模型信息123中设置的基本模型和特定模型。
注意,异常检测单元105可以检查模型信息123中的每个特定模型的应用时间安排是否与执行故障分析的日期和时间一致,以及如果一致则用于该特定模型,并且如果不一致则应用该基本模型。
例如,当对用于7月4(周日)的新采集的性能信息执行故障分析时,异常检测单元105参照图9所示模型信息123,并且使用应用时间安排为周日的特定模型(模型名称M6)对系统执行故障分析。当对用于7月5(周一)的新采集的性能信息执行故障分析时,异常检测单元105使用基本模型(模型名称M1)对系统执行故障分析。
以此方式,有可能防止使用与故障分析日期的系统特性不一致的模型而出现误报,并且由此执行稳定的故障分析。
藉此,完成本发明的第一示例性实施方式的操作。
接着,将描述本发明的第一示例性实施方式的特征配置。图1为示出本发明的第一示例性实施方式的特征配置的框图。
参考图1,操作管理设备100包括性能信息存储单元111、相关性模型生成单元102和模型设置单元103。
此处,性能信息存储单元111在系统中分别按照时间顺序来存储多条性能信息。
相关性模型生成单元102生成多个相关性模型122,所述多个相关性模型中每个均表示性能信息单元111中存储的预定期间中不同类型的性能值之间的相关性。
基于针对预定期间中的性能信息的每个相关性模型122的适合度,模型设置单元103从由相关性模型生成单元102生成的多个相关性模型122之中选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型122,所述一个或多个特定模型为所述基本模型以外的相关性模型122,并且设置在其上将基本模型和特定模型分别应用于故障检测的时段。
根据本发明的第一示例性实施方式,即使关于系统特性的有关建模期间的信息不可用,有可能生成关于每个固定期间(诸如执行系统分析的日期)的适于故障分析的相关性模型。
原因在于,模型设置单元103基于用于预定期间中的性能信息的每个相关性模型的适合度,从由相关性模型生成单元102生成的多个相关性模型122之中选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型122,所述一个或多个特定模型为基本模型以外的相关性模型122,并且设置在其上将基本模型和特定模型分别应用于故障检测的时段。
另外,根据本发明的第一示例性实施方式,通过关于诸如执行系统分析的日期的每个固定期间,使用适于故障分析的相关性模型,也可以对新采集的性能信息执行系统分析。
原因在于,时间安排生成单元104基于应用特定模型的每个固定期间与时间安排候选信息124中包括的分类规则之间的一致度,计算应用特定模型的固定期间和每个分类规则之间的一致度,并且基于具有最大一致度的分类规则,生成应用特定模型的应用时间安排。
另外,根据本发明的第一示例性实施方式,即使不掌握对于系统特定的信息(诸如系统特性)的管理员也可以执行稳定的系统分析。
原因在于,因为时间安排生成单元104生成应用时间安排从而将基本模型和特定模型中每个分别应用到适当的固定期间,因此由于应用与系统特性不一致的模型而引起的系统异常的不准确检测不会发生。
(第二示例性实施方式)
接着,将描述本发明的第二示例性实施方式。
在本发明的第一示例性实施方式中,相关性模型生成单元102生成关于每个日期(关于每个固定期间)的相关性模型122,并且模型设置单元103从相关性模型122之中确定适合于性能信息的基本模型和特定模型,以及确定针对基本模型和特定模型的相应应用日期和应用时间安排。
然而,在实际系统中,系统特性可能在一天内的特定时隙中变化。这种情况下,即使由模型设置单元103生成的基本模型或特定模型根据它们的应用日期和应用时间安排来应用,仍然存在在特定时隙中出现误报的可能性。
为了应对这种问题,在本发明的第二示例性实施方式中,操作管理设备100关于由模型设置单元103输出的基本模型或特定模型生成将在特定时隙中应用的例外模型。
接着,将描述本发明的第二示例性实施方式的配置。图13为示出本发明的第二示例性实施方式中的操作管理系统的配置的框图。
参考图13,除了在本发明第一示例性实施方式中的操作管理设备100的配置之外,在本发明第二示例性实施方式中的操作管理系统的操作管理设备100还包括例外模型生成单元106。
例外模型生成单元106提取一天中所应用的模型不适合的特定时隙,并且当基本模型或特定模型在它们应用日期其中之一上被应用时,生成关于所提取的特定时隙的例外模型。
图16为示出在本发明第二示例性实施方式中的模型信息123的示例的表格。模型信息123包括模型名称、模型类型、应用日期、应用时间安排和应用时间。此处,模型类型指示相关性模型122为基本模型、特定模型或例外模型中的任何一种。应用时间指示应用模型的时间。
接着,将描述在本发明第二示例性实施方式中的操作管理设备100的操作。
由本发明第二示例性实施方式中的操作管理设备100执行的相关性模型生成过程、模型提取过程和时间安排生成过程与本发明第一示例性实施方式中的那些相同。
接着,将描述在本发明第二示例性实施方式中的由操作管理设备100执行的例外模型生成过程。图14为示出在本发明第二示例性实施方式中的操作管理设备100的例外模型生成过程的流程图。
此处,作为在本发明第二示例性实施方式中的时间安排生成过程的结果,将诸如图9所示的模型信息123存储于模型信息存储单元113。
例外模型生成单元106参考存储于模型信息存储单元113中的模型信息123,获取基本模型和特定模型其中之一以及将被获取的模型的应用日期(步骤S401)。
例外模型生成单元106从所获取的应用日期之中提取任意两个日期(步骤S402)。
例如,参考图9所示模型信息,例外模型生成单元106获取基本模型(模型名称M1)及其应用日期,并且从所获取的应用日期提取6月1日和2日。
例外模型生成单元106参考存储于性能信息存储单元111中的性能序列信息121,将步骤S401中获取的基本模型或特定模型应用于在性能序列信息121中包括的、在步骤S402中提取的每个应用日期的性能信息,并且计算针对该基本模型或特定模型的相关性破坏率(步骤S403)。
图15为示出在本发明第二示例性实施方式中的相关性破坏率的计算结果的示例的图示。
例如,例外模型生成单元106将基本模型(模型名称M1)应用到用于6月1日的性能信息以及用于6月2日的性能信息,计算相关性破坏率并且获得图15所示的计算结果。
例外模型生成单元106关于在步骤S402中提取的每个应用日期,检测其中相关性破坏率超过由管理员等预设的阈值(预定阈值)的时隙(适合度小于预定阈值的时隙)(步骤S404)。例如异常检测单元105检测系统故障所利用的相关性破坏率阈值被设置为上述阈值。
例外模型生成单元106从每个均针对每个应用日期而检测的所述时隙之中,提取共有时隙,以作为生成例外模型的例外时隙(步骤S405)。
例如,例外模型生成单元106对于6月1日和2日提取相关性破坏率超过阈值的相应时隙所共有的从6:00到8:00的时隙作为例外时隙。
例外模型生成单元106基于性能序列信息121中包括的、在步骤S402中提取的每个应用日期的例外时隙中的性能信息,生成相关性模型122,并且将其存储于相关性模型存储单元112中(步骤S406)。
例如,例外模型生成单元106基于6月1日以及6月2日的从6:00到8:00的性能信息,生成具有模型名称M1.1的相关性模型122,并且将其存储于相关性模型存储单元112中。
例外模型生成单元106在存储于模型信息存储单元113中的模型信息123中,将所生成的相关性模型122的模型名称登记为关于在步骤S401中获取的基本模型或特定模型的例外模型(步骤S407)。
例外模型生成单元106将模型信息123中的在步骤S405中提取的例外时隙设置为针对例外模型的应用时间(步骤S408)。
例如,例外模型生成单元106将具有模型名称M1.1的相关性模型122登记在模型信息123中,如图16所示。另外,例外模型生成单元106在模型信息123中将从6:00到8:00的时隙登记为具有模型名称M1.1的例外模型的应用时间,如图16所示。
因此,如图16所示,在模型信息123中设置基本模型(模型名称M1)、例外模型(模型名称M1.1)以及相应模型的应用时间。
结果,当根据相应应用时间安排应用在模型信息123中设置的基本模型和特定模型时,异常检测单元105可以执行仅仅在针对例外模型的应用时间中指定的特定时隙中应用该例外模型的系统故障分析。
注意,当应用存储于模型信息123的基本模型或特定模型时,异常检测单元105检查所应用模型是否具有例外模型。如果所应用模型带有例外模型,则异常检测模型105检查例外模型的应用时间是否与执行分析的时间一致,并且在一致情况下应用例外模型,以及在不一致情况下,应用与该例外模型关联的基本模型或特定模型。
例如,异常检测单元105参照图16所示模型信息123,并且当对7月1日周四7:00新采集的性能信息执行故障分析时,使用与基本模型(模型名称M1)关联的例外模型(模型名称M1.1)执行系统故障分析。
以此方式,有可能防止由于使用与执行故障分析的特定时隙中的系统特性不一致的模型而出现误报,并且由此执行稳定的故障分析。
藉此完成本发明的第二示例性实施方式的操作。
在本发明的第二示例性实施方式中,在步骤S402中从用于基本模型或特定模型的应用日期之中提取任意两个日期,并且将关于这两个所提取日期的、相关性破坏率超过阈值的时隙提取为例外时隙。然而,用于提取例外时隙的应用日期的数目可以是等于或大于1并且不超过相应模型的应用日期的数目的任何其它数目。此处,当用于提取的应用日期的数目为1时,将在该日相关性破坏率超过阈值的时隙指定为例外时隙。
根据本发明的第二示例性实施方式,即使在系统特性在固定期间中是例外的时隙中,使用适合于分析的相关性模型的系统分析仍是可能的。
原因在于,例外模型生成单元106关于应用基本模型或特定模型的多个固定期间,将基本模型或特定模型的适合度小于预定阈值的时隙提取为例外时隙,基于所提取的时隙中的性能信息生成相关性模型122,并且将其作为例外模型输出。
尽管已经参考本发明的示例性实施方式具体示出和描述了本发明,但是本发明并不限于这些实施方式。本领域普通技术人员将理解,可以在其中进行形式和细节上的各种变化而不背离由权利要求限定的本发明的精神和范围。
例如,在本发明的实施方式中,用于判断相关性模型122是否适合性能信息的适合度是基于相关性破坏率来确定。然而,适合度可以基于可以判断相关性模型122是否适合性能信息的任何基准来确定。
例如,模型设置单元103和例外模型生成单元106可以根据被破坏的相关性的数目来确定适合度。这种情况下,模型设置单元103和例外模型生成单元106借助步骤S201中描述的方法来计算被破坏的相关性的数目。因此,在步骤S202中提取基本模型时,在步骤S205中提取特定模型时,以及在步骤S207中确定针对特定模型的应用日期时,模型设置单元103利用被破坏的相关性的数目而不是相关性破坏率。另外,在步骤S404中检测所述模型不适合的时隙时,例外模型生成单元106利用被破坏的相关性的数目而不是相关性破坏率。
类似地,模型设置单元103和例外模型生成单元106可以根据相关性模型122的预测误差来确定适合度。这种情况下,模型设置单元103和例外模型生成单元106借助步骤S201中描述的方法来计算预测误差,并且计算关于相关性模型122中包括的相关性函数的预测误差的总值。因此,在上述相应步骤中,模型设置单元103利用预测误差的总值而不是相关性破坏率。
本申请是基于2010年9月1日提交的日本专利申请No.2010-195761并且主张其优先权,该日本专利申请的全部公开内容通过引用结合于此。
工业应用性
本发明可以应用到管理系统的性能信息的操作管理系统。
附图标记列表

Claims (28)

1.一种操作管理设备,包括:
性能信息存储单元,所述性能信息存储单元按照时间顺序在系统中存储包括多种类型的性能值的性能信息;
相关性模型生成单元,所述相关性模型生成单元生成多个相关性模型,所述多个相关性模型的每个均包括在预定期间中在不同类型的性能值之间的相关性,所述性能值存储于所述性能信息存储单元中;以及
模型设置单元,所述模型设置单元基于用于在所述预定期间中的所述性能信息的每个所述相关性模型的适合度,从由所述相关性模型生成单元生成的所述多个相关性模型之中,选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型,所述一个或多个特定模型为所述基本模型以外的相关性模型,以及用于设置在其上将所述基本模型以及所述一个或多个特定模型分别应用于故障检测的时段。
2.根据权利要求1所述的操作管理设备,其中
所述预定期间由多个固定期间的集合组成,
并且所述相关性模型生成单元基于在相应所述固定期间中的所述性能信息,生成用于所述相应所述固定期间的单独的所述相关性模型。
3.根据权利要求2所述的操作管理设备,其中
用于所述性能信息的每个所述相关性模型的所述适合度基于以下至少一个来计算:通过向所述性能信息应用所述相关性模型而获得的所述相关性的破坏率、被破坏的相关性的数目以及与每个所述相关性模型的差异。
4.根据权利要求2所述的操作管理设备,其中
所述模型设置单元选择在所述预定期间中表现出最低适合度的预定数目的相关性模型作为所述特定模型,所述预定数目为一个或多个。
5.根据权利要求2所述的操作管理设备,其中
所述模型设置单元针对每个所述固定期间计算所述基本模型和所述特定模型中每个的所述适合度,在用于所述固定期间中的一个固定期间的所述特定模型中的一个特定模型的所述适合度高于用于所述固定期间中的所述一个固定期间的所述基本模型的所述适合度以及每个其它所述特定模型的所述适合度时,将所述固定期间中的所述一个固定期间设置为在其上应用所述特定模型中所述一个特定模型的时段,以及将所述多个固定期间的集合之中的、在其上分别应用所述特定模型的时段以外的固定期间设置为在其上应用所述基本模型的时段。
6.根据权利要求5所述的操作管理设备,还包括:
时间安排候选信息存储单元,所述时间安排候选信息存储单元存储时间安排候选信息,所述时间安排候选信息包括用以对在其上分别应用所述特定模型的所述固定期间进行分类的分类规则;以及
时间安排生成单元,所述时间安排生成单元基于在其上应用每个所述特定模型的每个所述固定期间与所述时间安排候选信息中包括的每个所述分类规则一致的情形的数目,针对所述每个所述特定模型,计算在其上应用所述每个所述特定模型的所述固定期间与所述每个所述分类规则所指示的每个固定期间之间的一致度,并且基于具有最大所述一致度的所述分类规则,设置在其上应用所述每个特定模型的时段。
7.根据权利要求5所述的操作管理设备,还包括:
例外模型生成单元,所述例外模型生成单元在所述固定期间中的一个固定期间中提取例外时隙,所述基本模型或所述特定模型中的一个特定模型在所述固定期间中的所述一个固定期间被应用,所述例外时隙为其中所述基本模型或所述特定模型中的所述一个特定模型的适合度小于预定阈值的时隙;基于在所述固定期间中的所述一个固定期间中的所述例外时隙中的所述性能信息,生成用于所述例外时隙的所述相关性模型,以作为用于所述基本模型或所述特定模型中的所述一个特定模型的例外模型;以及将所述例外时隙设置为在其上应用所述例外模型的时隙。
8.根据权利要求7所述的操作管理设备,其中,
所述例外模型生成单元在相应所述固定期间中提取单独时隙,所述基本模型或所述特定模型中的一个特定模型在所述相应所述固定期间被应用,所述基本模型或所述特定模型中的所述一个特定模型的适合度在所述单独时隙中小于所述预定阈值;将所述单独时隙共有的时隙作提取为所述例外时隙;以及基于在所述例外时隙中的所述性能信息,生成用于所述例外时隙的所述相关性模型。
9.根据权利要求3所述的操作管理设备,其中
所述适合度基于所述相关性的所述破坏率来计算,以及
所述相关性的所述破坏率基于被破坏的相关性的数目来计算,所述被破坏的相关性的数目通过以下获得:将所述相关性模型中包括的相关性函数应用到存储于所述性能信息存储单元中的所述多种类型之中的第一类型的性能值,以便计算用于所述多种类型之中的第二类型的性能值的预测性能值;基于所述第二类型的所述性能值和所述预测性能值,计算预测误差;以及检测具有大于预定值的所述预测误差的相关性破坏。
10.一种操作管理方法,包括:
按照时间顺序在系统中存储包括多种类型的性能值的性能信息;
生成多个相关性模型,所述多个相关性模型的每个均包括在预定期间中在不同类型的性能值之间的相关性;
基于用于在所述预定期间中的所述性能信息的每个所述相关性模型的适合度,从所述多个相关性模型之中,选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型,所述一个或多个特定模型为所述基本模型以外的相关性模型;以及
设置在其上将所述基本模型以及所述一个或多个特定模型分别应用于故障检测的时段。
11.根据权利要求10所述的操作管理方法,其中
所述预定期间由多个固定时期的集合组成,
并且基于在相应所述固定期间中的所述性能信息,所述生成多个相关性模型生成用于所述相应所述固定期间的单独的所述相关性模型。
12.根据权利要求11所述的操作管理方法,其中
用于所述性能信息的每个所述相关性模型的所述适合度基于以下其中至少一个来计算:通过向所述性能信息应用所述相关性模型而获得的所述相关性的破坏率、被破坏的相关性的数目以及与每个所述相关性模型的差异。
13.根据权利要求11所述的操作管理方法,其中
所述选择一个或多个特定模型选择在所述预定期间中表现出最低适合度的预定数目的相关性模型作为所述特定模型,所述预定数目为一个或多个。
14.根据权利要求11所述的操作管理方法,其中
所述设置在其上应用所述基本模型以及所述一个或多个特定模型的时段针对每个所述固定期间计算所述基本模型和所述特定模型中每个的所述适合度;当用于所述固定期间中的一个固定期间的所述特定模型中的一个特定模型的所述适合度高于用于所述固定期间中的所述一个固定期间的所述基本模型的所述适合度以及每个其它所述特定模型的所述适合度时,将所述固定期间中的所述一个固定期间设置为在其上应用所述特定模型中的所述一个特定模型的时段;以及将所述多个固定期间的集合之中的、在其上分别应用所述特定模型的时段以外的固定期间设置为在其上应用所述基本模型的时段。
15.根据权利要求14所述的操作管理方法,还包括:
存储时间安排候选信息,所述时间安排候选信息包括用以对在其上分别应用所述特定模型的所述固定期间进行分类的分类规则;
基于在其上应用每个所述特定模型的每个所述固定期间与在所述时间安排候选信息中包括的每个分类规则一致的情形的数目,针对所述每个所述特定模型,计算在其上应用所述每个所述特定模型的所述固定期间与所述每个所述分类规则所指示的每个固定期间之间的一致度;以及
基于具有最大所述一致度的所述分类规则,设置在其上应用所述每个特定模型的时段。
16.根据权利要求14所述的操作管理方法,还包括:
在所述固定期间中的一个固定期间中提取例外时隙,所述基本模型或所述特定模型中的一个特定模型在所述固定期间中的所述一个固定期间中被应用,所述例外时隙为其中所述基本模型或所述特定模型中的所述一个特定模型的适合度小于预定阈值的时隙;
基于在所述固定期间中的所述一个固定期间中的所述例外时隙中的所述性能信息,生成用于所述例外时隙的所述相关性模型,以作为用于所述基本模型或所述特定模型中的所述一个特定模型的例外模型;以及
将所述例外时隙设置为在其上应用所述例外模型的时隙。
17.根据权利要求16所述的操作管理方法,其中,
所述生成例外模型在其上应用所述基本模型或所述特定模型中的一个特定模型的相应所述固定期间中提取单独时隙,所述基本模型或所述特定模型中的所述一个特定模型的所述适合度小于所述单独时隙中的所述预定阈值;将所述单独时隙共有的时隙提取为所述例外时隙;以及基于在所述例外时隙中的所述性能信息,生成用于所述例外时隙的所述相关性模型。
18.根据权利要求12所述的操作管理方法,其中
所述适合度基于所述相关性的所述破坏率来计算,以及
所述相关性的所述破坏率基于被破坏的相关性的数目来计算,所述被破坏的相关性的数目通过以下获得:将所述相关性模型中包括的相关性函数应用到所述多种类型中的第一类型的性能值,以便计算用于所述多种类型中的第二类型的性能值的预测性能值;基于所述第二类型的所述性能值和所述预测性能值,计算预测误差;以及检测具有大于预定值的所述预测误差的相关性破坏。
19.一种用于操作管理的设备,包括:
用于按照时间顺序在系统中存储包括多种类型的性能值的性能信息的装置;
用于生成多个相关性模型的装置,所述多个相关性模型的每个均包括在预定期间中在不同类型的性能值之间的相关性;
用于基于用于在所述预定期间中的所述性能信息的每个所述相关性模型的适合度,从所述多个相关性模型之中,选择基本模型以及一个或多个特定模型的装置,所述基本模型为表现出最高适合度的相关性模型,所述一个或多个特定模型为所述基本模型以外的相关性模型;以及
用于设置在其上将所述基本模型以及所述一个或多个特定模型分别应用到故障检测时段的装置。
20.根据权利要求19所述的设备,其中
所述预定期间由多个固定期间的集合组成,
并且基于在相应所述固定期间中的所述性能信息,所述生成多个相关性模型生成用于所述相应所述固定期间的单独的所述相关性模型。
21.根据权利要求20所述的设备,其中
用于所述性能信息的每个所述相关性模型的所述适合度基于以下其中至少一个来计算:通过向所述相关性模型应用所述性能信息而获得的所述相关性的破坏率、被破坏的相关性的数目、以及与每个所述相关性模型的差异。
22.根据权利要求20所述的设备,其中
所述选择一个或多个特定模型选择在所述预定期间中表现出最低适合度的预定数目的相关性模型作为所述特定模型,所述预定数目为一个或多个。
23.根据权利要求20所述的设备,其中
所述设置在其上应用所述基本模型以及所述一个或多个特定模型的时段针对每个所述固定期间计算所述基本模型和所述特定模型中每个的所述适合度;当用于所述固定期间中的一个固定期间的所述特定模型中的一个特定模型的适合度高于用于所述固定期间中的所述一个固定期间的所述基本模型的所述适合度以及每个其它所述特定模型的所述适合度时,将所述固定期间中的所述一个所述固定期间设置为在其上应用所述特定模型中的所述一个特定模型的时段;以及将所述多个固定期间的集合之中的、在其上分别应用所述特定模型的时段以外的固定期间设置为在其上应用所述基本模型的时段。
24.根据权利要求23所述的设备,还包括:
用于存储时间安排候选信息的装置,所述时间安排候选信息包括用以对在其上分别应用所述特定模型的所述固定期间进行分类的分类规则;
用于基于在其上应用每个所述特定模型的每个所述固定期间与在所述时间安排候选信息中包括的每个分类规则一致的情形的数目,针对所述每个所述特定模型,计算在其上应用所述每个所述特定模型的所述固定期间与所述每个所述分类规则所指示的每个固定期间之间的一致度的装置;以及
用于基于具有最大所述一致度的所述分类规则,设置在其上应用所述每个特定模型的时段的装置。
25.根据权利要求23所述的设备,还包括:
用于在所述固定期间中的一个固定期间中提取例外时隙的装置,所述基本模型或所述特定模型中的一个特定模型在所述固定期间中的所述一个固定期间中被应用,所述例外时隙为其中所述基本模型或所述特定模型中的一个特定模型的适合度小于预定阈值的时隙;
用于基于在所述固定期间中的所述一个固定时隙中的所述例外时隙中的所述性能信息,生成用于所述例外时隙的所述相关性模型,以作为用于所述基本模型或所述特定模型中的所述一个特定模型的例外模型的装置;以及
用于将所述例外时隙设置为在其上应用所述例外模型的时隙的装置。
26.根据权利要求25所述的设备,其中,
所述生成例外模型在其上应用所述基本模型或所述特定模型中的一个特定模型的相应所述固定期间中提取单独时隙,所述基本模型或所述特定模型中的所述一个特定模型的所述适合度小于所述单独时隙中的所述预定阈值;将所述单独时隙共有的时隙提取为所述例外时隙;以及基于在所述例外时隙中的所述性能信息,生成用于所述例外时隙的所述相关性模型。
27.根据权利要求21所述的设备,其中
所述适合度基于所述相关性的所述破坏率来计算,以及
所述相关性的所述破坏率基于被破坏的相关性的数目来计算,所述被破坏的相关性的数目通过以下获得:将所述相关性模型中包括的相关性函数应用到所述多种类型中的第一类型的性能值,以便计算用于所述多种类型中的第二类型的性能值的预测性能值;基于所述第二类型的所述性能值和所述预测性能值,计算预测误差;以及检测具有大于预定值的所述预测误差的相关性破坏。
28.一种操作管理设备,包括:
性能信息存储装置,用于按照时间顺序在系统中存储包括多种类型的性能值的性能信息;
相关性模型生成装置,用于生成多个相关性模型,所述多个相关性模型的每个均包括在预定期间中在不同类型的性能值之间的相关性,所述性能值存储于所述性能信息存储装置中;以及
模型设置装置,用于基于用于在所述预定期间中的所述性能信息的每个所述相关性模型的适合度,从由所述相关性模型生成装置生成的所述多个相关性模型之中,选择基本模型以及一个或多个特定模型,所述基本模型为表现出最高适合度的相关性模型,所述一个或多个特定模型为所述基本模型以外的相关性模型,以及用于设置在其上将所述基本模型以及所述一个或多个特定模型分别应用于故障检测的时段。
CN201180048941.7A 2010-09-01 2011-08-02 操作管理设备、操作管理方法和程序 Active CN103154904B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010195761 2010-09-01
JP2010-195761 2010-09-01
PCT/JP2011/068007 WO2012029500A1 (ja) 2010-09-01 2011-08-02 運用管理装置、運用管理方法、及びプログラム

Publications (2)

Publication Number Publication Date
CN103154904A CN103154904A (zh) 2013-06-12
CN103154904B true CN103154904B (zh) 2015-09-02

Family

ID=45772605

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180048941.7A Active CN103154904B (zh) 2010-09-01 2011-08-02 操作管理设备、操作管理方法和程序

Country Status (5)

Country Link
US (1) US9600391B2 (zh)
EP (1) EP2613263B1 (zh)
JP (1) JP5387779B2 (zh)
CN (1) CN103154904B (zh)
WO (1) WO2012029500A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160004620A1 (en) * 2013-05-16 2016-01-07 Hitachi, Ltd. Detection apparatus, detection method, and recording medium
JPWO2015174063A1 (ja) 2014-05-16 2017-04-20 日本電気株式会社 情報処理装置、分析方法、及び、記録媒体
US20170286841A1 (en) * 2014-09-03 2017-10-05 Nec Corporation Monitoring device and monitoring method thereof, monitoring system, and recording medium in which computer program is stored
WO2016038803A1 (ja) * 2014-09-11 2016-03-17 日本電気株式会社 情報処理装置、情報処理方法、及び、記録媒体
US10733331B2 (en) 2015-03-11 2020-08-04 Nec Corporation Information processing apparatus, information processing method, and recording medium
JP6451483B2 (ja) 2015-05-11 2019-01-16 富士通株式会社 予兆検知プログラム、装置、及び方法
JP6636883B2 (ja) 2016-09-06 2020-01-29 株式会社東芝 評価装置、評価方法、および評価プログラム
KR101995112B1 (ko) 2017-06-14 2019-09-30 에스케이 주식회사 장비신뢰지수에 기초한 Lot 리스크 스코어 기반의 동적 Lot 계측 제어방법 및 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008108154A (ja) * 2006-10-27 2008-05-08 Hitachi Ltd 稼働性能情報の管理システム
JP2009199533A (ja) * 2008-02-25 2009-09-03 Nec Corp 運用管理装置、運用管理システム、情報処理方法、及び運用管理プログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6704691B2 (en) * 2001-07-18 2004-03-09 Promos Technologies, Inc. Method and system for in-line monitoring process performance using measurable equipment signals
US7457732B2 (en) * 2001-08-17 2008-11-25 General Electric Company System and method for measuring quality of baseline modeling techniques
US7280988B2 (en) * 2001-12-19 2007-10-09 Netuitive, Inc. Method and system for analyzing and predicting the performance of computer network using time series measurements
US7444263B2 (en) * 2002-07-01 2008-10-28 Opnet Technologies, Inc. Performance metric collection and automated analysis
JP2005018689A (ja) * 2003-06-30 2005-01-20 Web Intelligence Lab:Kk データマイニング方法
JP4980581B2 (ja) 2004-04-16 2012-07-18 新日鉄ソリューションズ株式会社 性能監視装置、性能監視方法及びプログラム
JP4756675B2 (ja) * 2004-07-08 2011-08-24 インターナショナル・ビジネス・マシーンズ・コーポレーション コンピュータ資源のキャパシティを予測するためのシステム、方法およびプログラム
US7246043B2 (en) * 2005-06-30 2007-07-17 Oracle International Corporation Graphical display and correlation of severity scores of system metrics
EP1895416B1 (en) * 2006-08-25 2011-07-06 Accenture Global Services Limited Data visualization for diagnosing computing systems
US8175863B1 (en) * 2008-02-13 2012-05-08 Quest Software, Inc. Systems and methods for analyzing performance of virtual environments
JP5620647B2 (ja) 2009-01-30 2014-11-05 ハウス食品グループ本社株式会社 眠気覚まし用組成物
JP5428372B2 (ja) 2009-02-12 2014-02-26 日本電気株式会社 運用管理装置および運用管理方法ならびにそのプログラム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008108154A (ja) * 2006-10-27 2008-05-08 Hitachi Ltd 稼働性能情報の管理システム
JP2009199533A (ja) * 2008-02-25 2009-09-03 Nec Corp 運用管理装置、運用管理システム、情報処理方法、及び運用管理プログラム

Also Published As

Publication number Publication date
US9600391B2 (en) 2017-03-21
JPWO2012029500A1 (ja) 2013-10-28
EP2613263B1 (en) 2020-01-08
WO2012029500A1 (ja) 2012-03-08
US20120191442A1 (en) 2012-07-26
CN103154904A (zh) 2013-06-12
EP2613263A4 (en) 2015-08-12
EP2613263A1 (en) 2013-07-10
JP5387779B2 (ja) 2014-01-15

Similar Documents

Publication Publication Date Title
CN103154904B (zh) 操作管理设备、操作管理方法和程序
US10496465B2 (en) System operations management apparatus, system operations management method and program storage medium
CN108375715B (zh) 一种配电网线路故障风险日预测方法及系统
CN106896779B (zh) 维护时期预测系统以及维护时期预测装置
US20030028350A1 (en) Method of intelligent data analysis to detect abnormal use of utilities in buildings
CN102257520A (zh) 应用的性能分析
JP2009289134A (ja) 作業分析装置、生産管理方法及び生産管理システム
US10430268B2 (en) Operations management system, operations management method and program thereof
JP6427357B2 (ja) 診断支援システム及び診断支援方法
CN103189857A (zh) 执行“如果...将会怎样”分析
US9734034B2 (en) System and method for processing data
CN110363381A (zh) 一种信息处理方法和装置
CN111737233A (zh) 数据监控方法及装置
JP2005071136A (ja) 納期管理支援システム、そのプログラム、そのプログラムを記録した記録媒体および製品の納期管理方法
JP7411724B2 (ja) システム分析装置及びシステム分析方法
JP6920235B2 (ja) 障害影響調査装置および障害影響調査方法
CN114116286A (zh) 物联网设备离线故障诊断方法、装置及电子设备
CN116051262A (zh) 风险预测模型的训练方法、风险预测方法及装置
CN116974853A (zh) 设备信息处理方法和装置
JP2020119110A (ja) データアセット分析支援システムおよびデータ分析方法
CN113591319A (zh) 电网中计量分路告警故障研判方法与装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant