WO2013027562A1 - 運用管理装置、運用管理方法、及びプログラム - Google Patents

運用管理装置、運用管理方法、及びプログラム Download PDF

Info

Publication number
WO2013027562A1
WO2013027562A1 PCT/JP2012/069931 JP2012069931W WO2013027562A1 WO 2013027562 A1 WO2013027562 A1 WO 2013027562A1 JP 2012069931 W JP2012069931 W JP 2012069931W WO 2013027562 A1 WO2013027562 A1 WO 2013027562A1
Authority
WO
WIPO (PCT)
Prior art keywords
abnormality
score
metrics
metric
operation management
Prior art date
Application number
PCT/JP2012/069931
Other languages
English (en)
French (fr)
Inventor
英男 長谷川
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to EP12825909.0A priority Critical patent/EP2750041A4/en
Priority to US14/238,241 priority patent/US9778972B2/en
Publication of WO2013027562A1 publication Critical patent/WO2013027562A1/ja
Priority to US15/340,487 priority patent/US20170046215A1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0766—Error or fault reporting or storing
    • G06F11/0769—Readable error formats, e.g. cross-platform generic formats, human understandable formats
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751—Error or fault detection not based on redundancy
    • G06F11/0754—Error or fault detection not based on redundancy by exceeding limits
    • G06F11/076—Error or fault detection not based on redundancy by exceeding limits by exceeding a count or rate limit, e.g. word- or bit count limit
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
    • G06F11/0736—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment in functional embedded systems, i.e. in a data processing system designed as a combination of hardware and software dedicated to performing a certain function
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/0751—Error or fault detection not based on redundancy
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/079—Root cause analysis, i.e. error or fault diagnosis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/32—Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324—Display of status information
    • G06F11/327—Alarm or error message display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3466—Performance evaluation by tracing or monitoring
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3447—Performance evaluation by modeling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
    • G06F2201/81—Threshold

Definitions

  • the present invention relates to an operation management apparatus, an operation management method, and a program, and more particularly to an operation management apparatus, an operation management method, and a program that detect a system abnormality.
  • Patent Documents 1 and 2 An example of an operation management system that detects such an abnormality in the IT system is described in Patent Documents 1 and 2.
  • the operation management systems described in Patent Documents 1 and 2 detect a correlation for each combination of metrics based on measurement values of a plurality of metrics (performance indicators) of the system, and generate a correlation model.
  • the operation management system uses the generated correlation model to determine whether or not a correlation is broken with respect to the input metric measurement value, and detects an abnormality in the system.
  • Patent Document 3 discloses a monitoring device that detects a monitoring item and a threshold value using a statistical method from among resource items of the system.
  • the anomaly metrics include metrics that have anomalies of low importance (emergency) that the administrator does not need to pay attention to, such as an anomaly that ends in a short time due to background processing, etc.
  • an object of the present invention is to provide an operation management apparatus, an operation management method, and a program that can solve the above-described problems and can easily grasp a metric in which a continuity abnormality occurs in a system.
  • An operation management apparatus includes a metric collecting unit that collects measurement values of a plurality of metrics in a system in time series, and a continuity level indicating a degree of abnormality continuation at each time of the measurement values of the plurality of metrics. And an abnormal score calculating means for calculating and outputting an abnormal score of the metric.
  • the operation management method collects measurement values of a plurality of metrics in the system in time series, and based on the continuity indicating the degree of abnormality continuity at each time of the measurement values of the plurality of metrics. The abnormal score of the metric is calculated and output.
  • the computer-readable recording medium is a computer-readable recording medium that collects measurement values of a plurality of metrics in the system in time series, and determines the continuity of abnormality at each time of the measurement values of the plurality of metrics. Based on the degree of continuity shown, a program for calculating an abnormality score for the metric and outputting it is stored.
  • the effect of the present invention is that a continuous metric abnormality can be easily grasped in the system.
  • FIG. 2 is a block diagram showing a configuration of an operation management system to which the operation management apparatus 100 according to the first embodiment of the present invention is applied.
  • the operation management system in the first exemplary embodiment of the present invention includes an operation management device 100, one or more monitored devices 200, and a monitoring terminal 300.
  • the operation management apparatus 100 and the monitored apparatus 200 are connected by a network.
  • the operation management apparatus 100 and the monitoring terminal 300 are also connected by a network.
  • the monitored device 200 is a device that constitutes a system, such as a Web server or a Database server.
  • Each monitored device 200 includes a monitoring agent 201.
  • the monitoring agent 201 of the monitored apparatus 200 measures actual measurement data (measured values) of a plurality of types of performance values of the monitored apparatus 200 at regular intervals and transmits them to the operation management apparatus 100.
  • the performance value item for example, the usage rate and usage amount of a computer resource such as a CPU (Central Processing Unit) usage rate, a memory usage rate, and a disk access frequency are used.
  • a combination of the monitored device 200 and the item of performance value is a metric (performance index), and a set of a plurality of metric values measured at the same time is performance information.
  • Metrics are represented by integers and decimal numbers. The metric corresponds to an element in Patent Document 1.
  • the operation management apparatus 100 generates a correlation model 122 for the monitored apparatus 200 based on the performance information collected from the monitored apparatus 200 to be monitored, and uses the generated correlation model 122 to monitor the monitored apparatus 200. Detect faults and abnormalities.
  • the operation management apparatus 100 includes a metric collection unit 101, a correlation model generation unit 102, a correlation change analysis unit 103, an abnormal score calculation unit 104, a metric storage unit 111, a correlation model storage unit 112, and a correlation change storage unit 113.
  • the metric collection unit 101 collects performance information from the monitored apparatus 200 and stores the time series change in the metric storage unit 111 as performance series information 121.
  • the correlation model generation unit 102 generates a correlation model 122 of a system configured by the monitored device 200 based on the performance series information 121.
  • the correlation model storage unit 112 stores the correlation model 122 generated by the correlation model generation unit 102.
  • the correlation change analysis unit 103 detects an abnormality in the correlation with respect to a combination of metrics included in the correlation model 122 with respect to newly input performance information.
  • the correlation change storage unit 113 stores a correlation abnormality detection result by the correlation change analysis unit 103 as correlation change information 123.
  • the abnormal score calculation unit 104 calculates an abnormal score for each metric based on the correlation change information 123 and outputs the abnormal score to the monitoring terminal 300.
  • the monitoring terminal 300 is a terminal for the operation management apparatus 100 to receive an instruction to detect a failure or abnormality of the monitored apparatus 200 from an administrator or the like and output the detection result.
  • the monitoring terminal 300 includes a display unit 301.
  • the display unit 301 of the monitoring terminal 300 is a display device such as a display, for example, and outputs (displays) the abnormality score output by the operation management apparatus 100 to an administrator or the like on a display screen.
  • the operation management apparatus 100 may be a computer that includes a CPU and a storage medium that stores a program and that operates by control based on the program.
  • the metric storage unit 111, the correlation model storage unit 112, and the correlation change storage unit 113 may be configured as individual storage media or a single storage medium.
  • FIG. 3 is a flowchart showing processing of the operation management apparatus 100 according to the first embodiment of this invention.
  • the metric collection unit 101 of the operation management apparatus 100 collects performance information measured by the monitoring agent 201 on the monitored apparatus 200 and stores it in the metric storage unit 111 (step S101).
  • FIG. 4 is a diagram illustrating an example of the performance sequence information 121 according to the first embodiment of this invention.
  • the performance series information 121 includes time-series changes in measured values of metrics x_1, x_2, x_3... (Hereinafter, the characters following “_” indicate subscripts).
  • the metric collection unit 101 stores the performance sequence information 121 of FIG.
  • the correlation model generation unit 102 refers to the performance series information 121 of the metric storage unit 111 and generates a correlation model 122 based on the performance information of a predetermined modeling period specified by the administrator or the like. And stored in the correlation model storage unit 112 (step S102).
  • the correlation model 122 includes a correlation function (or conversion function) and a threshold value for each of all combinations of two metrics among the plurality of metrics.
  • the correlation function describes a correlation that holds for time-series data of measured values in a predetermined modeling period (t_s ⁇ t ⁇ t_e, t is time) for each metric combination by a predetermined approximate expression. is there.
  • the correlation model generation unit 102 determines a coefficient of a correlation function for each metric combination based on the performance series information 121 for a predetermined modeling period. Similar to Patent Document 1, the coefficient of the correlation function is determined by the system identification process for the time series of the measurement values of the metric described above.
  • the threshold is the maximum value of the residual (conversion error or prediction error) due to the correlation function in a predetermined modeling period for each metric combination.
  • the residual is the absolute value of the difference between the estimated value of the metric calculated using the correlation function and the measured value of the metric.
  • the threshold Th_i, j and the residual d_i, j (t) for the correlation from the metric x_i to the metric x_j are expressed by the following equation (2). Note that abs () indicates the absolute value of the value in parentheses.
  • the value of the residual d_i, j (t) is extremely small and does not exceed the threshold Th_i, j.
  • FIG. 5 is a diagram illustrating an example of the correlation model 122 according to the first embodiment of this invention.
  • the correlation model 122 includes a correlation function and a threshold value between metrics x_1, x_2, x_3,.
  • the correlation model generation unit 102 generates a correlation model 122 as shown in FIG. 5 based on the performance sequence information 121 of FIG.
  • the correlation change analysis unit 103 detects an abnormality in the correlation included in the correlation model 122 with respect to the performance information newly collected by the metric collection unit 101 at each time, and correlates the correlation change information 123.
  • the change is stored in the change storage unit 113 (step S103).
  • the correlation change analysis unit 103 determines whether there is an abnormality (correlation destruction) for each correlation included in the correlation model 122 with respect to newly input performance information.
  • the degree of abnormality indicating the degree of abnormality of the correlation is indicated by a residual calculated using newly input performance information and the correlation model 122.
  • the correlation change analysis unit 103 determines whether or not there is an abnormality in the correlation from the metric x_i to the metric x_j using the residual and the threshold, using Equation 3.
  • FIG. 6 is a diagram illustrating an example of a residual in the first embodiment of the present invention. In the example of FIG. 6, when the ratio of the estimated value of the metric x_j and the residual difference regarding the measured value is greater than 1, it is determined that there is an abnormality in the correlation from the metric x_i to the metric x_j.
  • FIG. 7 is a diagram illustrating an example of the correlation change information 123 according to the first embodiment of this invention.
  • the correlation change information 123 includes, for each metric combination, a ratio (d_i, j (t) / Th_i, j) with respect to a residual threshold value at each time, and presence / absence of abnormality.
  • the correlation model generation unit 102 detects an abnormality in the correlation included in the correlation model 122 shown in FIG. 5 for the newly collected performance information, and stores the correlation change information 123 as shown in FIG. .
  • the abnormal score calculation unit 104 calculates an abnormal score for each metric based on the correlation change information 123 at each time (step S104).
  • the abnormality score is calculated based on the degree of abnormality (residual) of the correlation regarding each metric and the degree of continuity of the abnormality.
  • the abnormality score calculation unit 104 calculates the abnormality score S_i (t) of the metric x_i using Equation 4.
  • average_i () indicates that values in parentheses are calculated for all the correlations with other metrics having a correlation from the metric x_i, and the average value is obtained. For example, when there is a correlation between metrics x_1 to x_2, x_3, and x_4, an average value of the values in parentheses is calculated for these correlations.
  • c_i, j (t) is an abnormality continuation degree indicating the continuation degree of the abnormality, and indicates a ratio of a period in which an abnormality is detected in the correlation in a predetermined period before time t.
  • step (y) is a step function, and is 0 when the ratio of the residual calculated by Equation 3 to the threshold is less than 1, that is, the correlation is normal. Therefore, when all the correlations from the metric x_i to other correlated metrics are normal, the abnormal score S_i (t) is zero.
  • FIG. 8 is a diagram showing a process of calculating an abnormality score in the first embodiment of the present invention.
  • FIG. 9 is a diagram showing a calculation result of the abnormality score in the first embodiment of the present invention.
  • the abnormality score calculation unit 104 calculates the abnormality continuity as shown in FIG. 8 and calculates the abnormality score as shown in FIG. 9 based on the correlation change information 123 of FIG. 7 at each time.
  • the abnormality score calculation unit 104 generates an analysis result 130 including an abnormality score of each metric at each time, and outputs the analysis result 130 to the monitoring device 300 (step S105).
  • the display unit 301 of the monitoring terminal 300 displays the analysis result 130 to an administrator or the like.
  • FIG. 10 is a diagram illustrating an example of the analysis result 130 according to the first embodiment of this invention. In the example of FIG.
  • the analysis result 130 includes an abnormal correlation rate display unit 131, an abnormal correlation display unit 132, and an abnormal score display unit 133.
  • the abnormality score calculation unit 104 transmits the analysis result 130 in FIG. 10 to the monitoring terminal 300.
  • the abnormal correlation rate display unit 131 indicates a change over time in the ratio of the correlation determined to be abnormal among the correlations included in the correlation model 122.
  • the administrator or the like can refer to the abnormal correlation rate display unit 131 and grasp the time when the abnormalities of the correlation frequently occur in the monitored apparatus 200.
  • the abnormal correlation display unit 132 indicates the correlation determined to be abnormal on the correlation model 122.
  • each metric of the correlation model 122 is indicated by a circle together with the identifier (name) of the metric, and the correlation determined to be abnormal is indicated by a solid line connecting the circle and the circle.
  • the abnormal correlation display unit 132 displays the correlation determined to be abnormal with respect to the time designated by the administrator or the like on the abnormal correlation rate display unit 131.
  • the abnormal correlation display unit 132 may display the correlation determined to be abnormal with respect to the latest collection time every time new performance information is collected.
  • An administrator or the like can refer to the abnormality correlation display unit 132 and grasp a metric in which abnormalities are concentrated in the monitored apparatus 200.
  • the abnormal score display part 133 shows the abnormal score of each metric.
  • Each metric is indicated by a circle together with an identifier of the metric in a predetermined rectangular area.
  • the larger the abnormal score the larger the circle (radius).
  • the larger the abnormal score the more the circle is displayed at the top of the rectangular area.
  • the abnormality score calculation unit 104 determines the size of the circle that increases according to the abnormality score, and the height from the bottom on the vertical axis with respect to the bottom of the rectangular region that increases according to the abnormality score.
  • the data displayed as the abnormal score display part 133 are produced
  • the abnormal score display unit 133 may display an abnormal score for the time designated by the administrator or the like on the abnormal correlation rate display unit 131.
  • the abnormal score display unit 133 may display an abnormal score for the latest collection time each time new performance information is collected. Further, the abnormality score is calculated by multiplying the abnormality degree (residual) of the correlation by the abnormality continuation degree as shown in Equation 4.
  • the abnormality continuity is the ratio of the period in which an abnormality is detected in a predetermined period before the time when the abnormality score is calculated. If the abnormality continues, the abnormality score gradually increases with the passage of time. When stops, the abnormal score gradually decreases with time. For this reason, in the abnormality score display unit 133, when an abnormality relating to a metric continues, the circle of the metric gradually increases while rising in the rectangular area, and when the abnormality stops, the circle of the metric gradually decreases.
  • the abnormal score display unit 133 While descending, descend in the rectangular area. That is, in the abnormal score display unit 133, the abnormal score of each metric is displayed by movement similar to the movement of an object having buoyancy such as a balloon or a bubble. Note that the rising and lowering of the circle in the rectangular area may follow the well-known Archimedes principle.
  • the circle indicating the metric x_1 is larger than the circles of other metrics and is displayed at the top. Accordingly, the administrator or the like can easily grasp that the degree of abnormality of the metric x_1 is large or that the abnormality is highly likely to continue. Further, in the calculation result of the abnormality score in FIG.
  • FIG. 1 is a block diagram showing a characteristic configuration of the first embodiment of the present invention. Referring to FIG.
  • the operation management apparatus 100 includes a metric collection unit 101 and an abnormal score calculation unit 104.
  • the metric collection unit 101 collects measurement values of a plurality of metrics in the system in time series.
  • the abnormality score calculation unit 104 calculates and outputs an abnormality score of the metric based on the continuity indicating the continuity of the abnormality at each time of the measurement values of the plurality of metrics.
  • the abnormal score of a metric x_i at a certain time is calculated based on the number of correlations determined to be abnormal at that time among the correlations from the metric x_i to other metrics.
  • a list of anomaly metrics is displayed with an anomaly score.
  • the administrator or the like preferentially deals with an abnormality of a metric having a high abnormality score based on the abnormality metric list.
  • the administrator or the like cannot grasp whether the abnormality of the metric is continuous or temporary, there is a possibility of preferentially dealing with the abnormality even if the abnormality of the metric is temporary.
  • the administrator or the like needs to compare, for example, a list of abnormality metrics with times before and after the time. According to the first embodiment of the present invention, it is possible to easily grasp a continuity metric abnormality in a system.
  • the reason is that the abnormality score calculation unit 104 calculates the abnormality score of the metric based on the continuity indicating the continuity of the abnormality at each time of the metric. Further, the abnormal score calculation unit 104 displays the abnormal score of each metric as a graphic having a size corresponding to the abnormal score and a display position.
  • the administrator or the like can preferentially deal with metric abnormalities that occur continuously, and can expect stable operation of the system as compared to the case where only the technique of Patent Document 1 is used. .
  • this makes it unnecessary for an administrator or the like to compare the list of abnormal metrics at each time in order to check whether or not the abnormality of a metric is continuous. It can be expected to reduce the burden and prevent oversight.
  • the abnormality score calculation unit 104 displays the abnormality score of each metric as a graphic having a size corresponding to the abnormality score and a display position.
  • the abnormality score calculation unit 104 groups metrics having the same abnormality detection start time.
  • the configuration of the second embodiment of the present invention is the same as that of the first embodiment of the present invention.
  • FIG. 11 is a flowchart showing a process of the operation management apparatus 100 according to the second embodiment of the present invention.
  • the operations (steps S201 to S204) from when the metric collecting unit 101 collects performance information until the abnormal score calculating unit 104 calculates the abnormal score of each metric are the same as in the first embodiment of the present invention. This is the same as the operation of the form (steps S101 to S104).
  • the abnormal score calculation unit 104 refers to the calculated abnormal score of each metric in step S104 described above, and groups metrics having the same abnormality detection start time (step S205).
  • a metric having the same abnormality detection start time is a metric having the same time when the abnormality score is changed from 0 to a value larger than 0.
  • the abnormal score calculation unit 104 calculates a group abnormal score that is an abnormal score of each group by summing up the abnormal scores of the grouped metrics (step S206).
  • FIG. 12 is a diagram illustrating a calculation result of the group abnormality score according to the second embodiment of the present invention.
  • the abnormality score calculation unit 104 calculates the group abnormality score of FIG. 12 based on the abnormality score of FIG. 9 at each time.
  • the abnormality score calculation unit 104 generates a group A including only the metric x_1 for which abnormality detection is started at the time based on the abnormality score at time 12:20. Group A continues until time 12:40.
  • the abnormality score calculation unit 104 generates a group B including metrics x_2 and x_3 for which abnormality detection is started at the time based on the abnormality score at the time 12:30. Group B ends at time 12:30. Then, the abnormal score calculation unit 104 calculates a group abnormal score as shown in FIG. 12 based on the abnormal score of the metric included in each group. In the calculation result of the group abnormality score of FIG. 12, the abnormality detection start time of the metric x_2 and the abnormality detection start time of the x_3 are the same, and the abnormality of the metric x_2 and the abnormality of the x_3 are abnormalities caused by a common abnormal event. This indicates that there is a high degree of relevance.
  • FIG. 13 is a diagram illustrating an example of the analysis result 140 according to the second embodiment of the present invention.
  • the analysis result 140 includes an abnormal correlation rate display unit 141, an abnormal correlation display unit 142, and an abnormal score display unit 143.
  • the abnormal correlation rate display unit 141 and the abnormal correlation display unit 142 are similar to the abnormal correlation rate display unit 131 and the abnormal correlation display unit 132 according to the first embodiment of the present invention, respectively.
  • the abnormal score display part 143 shows the group abnormal score of each group.
  • Each group is indicated by a circle together with an identifier of the metric included in the group within a predetermined rectangular area.
  • the larger the abnormal score is the larger the size of the circle is. Displayed at the top of the rectangular area.
  • the metrics x_2 and x_3 have no abnormality continuity, and the abnormality score is lower than the metric x_1.
  • the circles indicating the metrics x_2 and x_3 are each displayed small in the lower part of the abnormality score display unit 133.
  • a circle indicating a group consisting of metrics x_2 and x_3 is displayed, similarly to a circle indicating a group consisting of metrics x_1. It is larger than the circles of other groups and is displayed at the top of the abnormal score display portion 143.
  • the administrator or the like easily grasps that the relevance of the metrics x_2 and x_3 is high and that the sum of the abnormalities is large or that the abnormalities are likely to continue. be able to.
  • the operation of the second exemplary embodiment of the present invention is completed.
  • effects of the second exemplary embodiment of the present invention will be described.
  • the abnormality of the plurality of metrics may occur at the same time.
  • the administrator or the like confirms temporal relationships between abnormal metrics based on, for example, temporal changes in the abnormal metric list in order to grasp such abnormal events.
  • a method of applying signature matching with respect to a correlation in which an abnormality has occurred has been proposed.
  • signature matching for unknown abnormal events, there is no accumulation of signatures related to correlation, and signature matching cannot be applied. According to the second embodiment of the present invention, it is possible to easily grasp an abnormal metric that occurs at the same time.
  • the abnormality score calculation unit 104 groups metrics having the same abnormality detection start time, and calculates a group abnormality score for each group. Thereby, the administrator etc. can grasp
  • the present invention has been described with reference to the embodiment, the present invention is not limited to the above embodiment. Various changes that can be understood by those skilled in the art can be made to the configuration and details of the present invention within the scope of the present invention. For example, in the embodiment of the present invention, the performance index in the system is used as a metric, and the abnormal score of the metric is calculated.
  • the degree of abnormality of correlation (correlation destruction) related to the metric is used as the degree of abnormality of the metric.
  • the degree of abnormality of the metric is not limited to this.
  • Other abnormalities such as an excess (threshold abnormality) with respect to a predetermined threshold may be used.
  • the threshold value in the correlation model 122 is calculated based on the maximum value of the residual by the correlation function for each metric combination.
  • the threshold value is defined for each metric combination.
  • a predetermined value defined for the correlation model 122 is used as a predetermined value defined for the correlation model 122.
  • the abnormality score is calculated by the equation (4).
  • the abnormality score may be calculated using only the abnormality continuity degree of the correlation related to the metric without using the abnormality degree (residual) of the correlation related to the metric.
  • the magnitude of the abnormal score is indicated by the size of the circle representing the metric and the height at which the circle is displayed within a predetermined rectangular area.
  • the present invention is not limited to this, and may be indicated by a figure of another shape or another display position as long as the magnitude of the abnormality score can be indicated.
  • the magnitude of the abnormal score may be displayed by the size of a figure other than a circle such as an ellipse or a sphere.
  • the magnitude of the abnormal score may be indicated by a height from a predetermined reference point on the vertical axis defined in a predetermined shape other than a rectangle such as a circle or a trapezoid.
  • the magnitude of the abnormal score may be indicated by a height from a predetermined reference point on the vertical axis with respect to the ground plane.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Debugging And Monitoring (AREA)

Abstract

システムにおいて継続性のある異常が発生しているメトリックを容易に把握できる運用管理装置を提供する。　運用管理装置１００は、メトリック収集部１０１と異常スコア算出部１０４とを含む。メトリック収集部１０１は、システムにおける複数メトリックの計測値をそれぞれ時系列に記憶する。また、異常スコア算出部１０４は、複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する。

Description

運用管理装置、運用管理方法、及びプログラム
　本発明は、運用管理装置、運用管理方法、及びプログラムに関し、特にシステムの異常を検出する運用管理装置、運用管理方法、及びプログラムに関する。
　ＩＴ（Ｉｎｆｏｒｍａｔｉｏｎ　Ｔｅｃｈｎｏｌｏｇｙ）システムでは、管理者がシステムを監視し、システムに異常が発生したと認められる場合には、検出された異常に優先順位をつけて対処することにより、システム停止などの致命的な状態を回避する。
　このようなＩＴシステムの異常を検出する運用管理システムの一例が、特許文献１及び２に記載されている。特許文献１及び２記載の運用管理システムは、システムの複数のメトリック（性能指標）の計測値をもとに、メトリックの組み合わせの各々に対して相関関係を検出し、相関モデルを生成する。そして、この運用管理システムは、生成された相関モデルを用いて、入力されたメトリックの計測値に対して相関関係の破壊が発生しているかどうかを判定し、システムの異常を検出する。
　この運用管理システムでは、管理者がシステムの異常有無を判別するため、相関破壊数の時間経過を示すグラフを出力する。また、ある時刻における異常の詳細として、異常が検出されたメトリック（異常メトリック）のリストを、異常スコアとともに出力する。
　なお、関連技術として、特許文献３には、システムのリソース項目の中から、統計手法を用いて監視項目、及び、閾値を検出する監視装置が開示されている。
特開２００９−１９９５３３号公報 特開２０１０−１８６３１０号公報 特開２００３−２６３３４２号公報
　上述の特許文献１及び２に記載の運用管理システムでは、システムの規模が大きくなるとメトリックの数が増え、異常メトリックも大量に提示される。異常メトリックには、バックグラウンド処理等に起因した短時間で終了する異常のように、本来管理者が注目する必要がない重要度（緊急度）の低い異常が発生しているメトリックも含まれるが、このように大量の異常メトリックが発生した場合、長時間継続して発生している異常のように、重要度（緊急度）の高い異常が発生しているメトリックを把握することが難しくなるという問題がある。
　本発明の目的は、上述の課題を解決し、システムにおける継続性のある異常が発生しているメトリックを容易に把握できる運用管理装置、運用管理方法、及びプログラムを提供することである。
　本発明の一態様における運用管理装置は、システムにおける複数メトリックの計測値をそれぞれ時系列に収集するメトリック収集手段と、前記複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する異常スコア算出手段と、を含む。
　本発明の一態様における運用管理方法は、システムにおける複数メトリックの計測値をそれぞれ時系列に収集し、前記複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する。
　本発明の一態様におけるコンピュータが読み取り可能な記録媒体は、コンピュータに、システムにおける複数メトリックの計測値をそれぞれ時系列に収集し、前記複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する処理を実行させるプログラムを格納する。
　本発明の効果は、システムにおける継続性のあるメトリックの異常を容易に把握できることである。
本発明の第１の実施の形態の特徴的な構成を示すブロック図である。 本発明の第１の実施の形態における運用管理装置１００を適用した運用管理システムの構成を示すブロック図である。 本発明の第１の実施の形態における運用管理装置１００の処理を示すフローチャートである 本発明の第１の実施の形態における性能系列情報１２１の例を示す図である。 本発明の第１の実施の形態における相関モデル１２２の例を示す図である。 本発明の第１の実施の形態における残差の例を示す図である。 本発明の第１の実施の形態における相関変化情報１２３の例を示す図である。 本発明の第１の実施の形態における異常スコアの算出過程を示す図である。 本発明の第１の実施の形態における異常スコアの算出結果を示す図である。 本発明の第１の実施の形態における解析結果１３０の例を示す図である。 本発明の第２の実施の形態における運用管理装置１００の処理を示すフローチャートである。 本発明の第２の実施の形態におけるグループ異常スコアの算出結果を示す図である。 本発明の第２の実施の形態における解析結果１４０の例を示す図である。
　（第１の実施の形態）
　次に、本発明の第１の実施の形態について説明する。
　はじめに、本発明の第１の実施の形態の構成について説明する。図２は、本発明の第１の実施の形態における運用管理装置１００を適用した運用管理システムの構成を示すブロック図である。
　図２を参照すると、本発明の第１の実施の形態における運用管理システムは、運用管理装置１００、１以上の被監視装置２００、及び、監視端末３００を含む。運用管理装置１００と被監視装置２００は、ネットワークにより接続される。また、運用管理装置１００と監視端末３００も、ネットワークにより接続される。
　被監視装置２００は、ＷｅｂサーバやＤａｔａｂａｓｅサーバ等、システムを構成する装置である。被監視装置２００の各々は、監視エージェント２０１を含む。
　被監視装置２００の監視エージェント２０１は、被監視装置２００の複数種目の性能値の実測データ（計測値）を一定間隔毎に計測し、運用管理装置１００へ送信する。性能値の種目として、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）使用率、メモリ使用率、ディスクアクセス頻度等、コンピュータリソースの使用率や使用量用いられる。
　ここで、被監視装置２００と性能値の種目の組をメトリック（性能指標）とし、同一時刻に計測された複数のメトリックの値の組を性能情報とする。メトリックは、整数や小数の数値より表される。また、メトリックは、特許文献１における要素に相当する。
　運用管理装置１００は、監視対象である被監視装置２００から収集した性能情報をもとに、被監視装置２００についての相関モデル１２２を生成し、生成した相関モデル１２２を用いて、被監視装置２００の障害や異常の検出を行う。
　運用管理装置１００は、メトリック収集部１０１、相関モデル生成部１０２、相関変化分析部１０３、異常スコア算出部１０４、メトリック記憶部１１１、相関モデル記憶部１１２、及び、相関変化記憶部１１３を含む。
　メトリック収集部１０１は、被監視装置２００から性能情報を収集し、その時系列変化を性能系列情報１２１としてメトリック記憶部１１１に保存する。
　相関モデル生成部１０２は、性能系列情報１２１をもとに、被監視装置２００により構成されるシステムの相関モデル１２２を生成する。
　相関モデル記憶部１１２は、相関モデル生成部１０２が生成した相関モデル１２２を記憶する。
　相関変化分析部１０３は、特許文献１と同様に、新たに入力された性能情報について、相関モデル１２２に含まれる各メトリックの組み合わせに対する相関関係の異常を検出する。
　相関変化記憶部１１３は、相関変化分析部１０３による相関関係の異常の検出結果を相関変化情報１２３として記憶する。
　異常スコア算出部１０４は、相関変化情報１２３をもとに、各メトリックの異常スコアを算出し、監視端末３００に出力する。
　監視端末３００は、運用管理装置１００が、管理者等から被監視装置２００の障害や異常の検出指示を受け付け、その検出結果を出力するための端末である。監視端末３００は、表示部３０１を含む。
　監視端末３００の表示部３０１は、例えば、ディスプレイ等の表示デバイスであり、運用管理装置１００により出力された異常スコアを、表示画面により、管理者等に出力（表示）する。
　なお、運用管理装置１００は、ＣＰＵとプログラムを記憶した記憶媒体を含み、プログラムに基づく制御によって動作するコンピュータであってもよい。また、メトリック記憶部１１１、相関モデル記憶部１１２、及び、相関変化記憶部１１３は、それぞれ個別の記憶媒体でも、一つの記憶媒体によって構成されてもよい。
　次に、本発明の第１の実施の形態における運用管理装置１００の動作について説明する。
　図３は、本発明の第１の実施の形態における運用管理装置１００の処理を示すフローチャートである。
　はじめに、運用管理装置１００のメトリック収集部１０１は、被監視装置２００上の監視エージェント２０１により計測された性能情報を収集し、メトリック記憶部１１１に保存する（ステップＳ１０１）。
　図４は、本発明の第１の実施の形態における性能系列情報１２１の例を示す図である。図４の例では、性能系列情報１２１は、メトリックｘ＿１、ｘ＿２、ｘ＿３…（以下、″＿″に続く文字は、添え字を示す）の計測値の時系列変化を含む。
　例えば、メトリック収集部１０１は、図４の性能系列情報１２１を保存する。
　次に、相関モデル生成部１０２は、メトリック記憶部１１１の性能系列情報１２１を参照し、管理者等により指定された、所定のモデル化期間の性能情報をもとに、相関モデル１２２を生成し、相関モデル記憶部１１２に保存する（ステップＳ１０２）。
　ここで、相関モデル１２２は、複数のメトリックの内の２つのメトリックの全組み合わせの各々についての、相関関数（または、変換関数）と閾値とを含む。
　相関関数は、各メトリックの組み合わせについて、所定のモデル化期間（ｔ＿ｓ≦ｔ≦ｔ＿ｅ、ｔは時刻）の計測値の時系列データに対して成り立つ相関関係を、所定の近似式で記述したものである。メトリックｘ＿ｉからメトリックｘ＿ｊへの相関関係についての相関関数をｆ＿ｉ，ｊとした場合、メトリックの組み合わせの内の一方のメトリックｘ＿ｊの推定値は、他方のメトリックｘ＿ｉの計測値から、相関関数ｆ＿ｉ，ｊを用いて、数１式のように表される。
Figure JPOXMLDOC01-appb-M000001
 　相関モデル生成部１０２は、所定のモデル化期間の性能系列情報１２１に基づいて、各メトリックの組み合わせについて、相関関数の係数を決定する。相関関数の係数は、特許文献１と同様に、上述のメトリックの計測値の時系列に対する、システム同定処理によって決定される。
　閾値は、各メトリックの組み合わせについて、所定のモデル化期間における、相関関数による残差（変換誤差、または、予測誤差）の最大値である。ここで、残差は、相関関数用いて算出されたメトリックの推定値と、当該メトリックの計測値との差分の絶対値である。
　メトリックｘ＿ｉからメトリックｘ＿ｊへの相関関係についての閾値Ｔｈ＿ｉ，ｊ、残差ｄ＿ｉ，ｊ（ｔ）は、数２式により表現される。
Figure JPOXMLDOC01-appb-M000002
 　なお、ａｂｓ（）は、括弧内の値の絶対値を示す。
　ここで、被監視装置２００が正常である限り、残差ｄ＿ｉ，ｊ（ｔ）の値は極めて小さく、閾値Ｔｈ＿ｉ，ｊを超えないものと仮定する。
　相関モデル生成部１０２は、特許文献１と同様に、所定のモデル化期間の残差をもとに、各メトリックの組み合わせについて、相関関数の重みを算出し、重みが所定値以上の相関関数とその閾値の集合を相関モデル１２２としてもよい。
　図５は、本発明の第１の実施の形態における相関モデル１２２の例を示す図である。図５の例では、相関モデル１２２は、メトリックｘ＿１、ｘ＿２、ｘ＿３、…の間の相関関数と閾値を含む。
　例えば、相関モデル生成部１０２は、図４の性能系列情報１２１をもとに、図５に示すような相関モデル１２２を生成する。
　次に、相関変化分析部１０３は、各時刻において、メトリック収集部１０１により新たに収集された性能情報に対して、相関モデル１２２に含まれる相関関係の異常を検出し、相関変化情報１２３を相関変化記憶部１１３に保存する（ステップＳ１０３）。
　ここで、相関変化分析部１０３は、特許文献１と同様に、新たに入力された性能情報について、相関モデル１２２に含まれる各相関関係に関し、異常（相関破壊）の有無を判定する。
　相関関係の異常の度合いを示す異常度は、新たに入力された性能情報と相関モデル１２２とを用いて算出される残差により示される。相関変化分析部１０３は、残差、及び、閾値を用いて、メトリックｘ＿ｉからメトリックｘ＿ｊへの相関関係についての異常の有無を、数３式により判定する。
Figure JPOXMLDOC01-appb-M000003
 　図６は、本発明の第１の実施の形態における残差の例を示す図である。図６の例では、メトリックｘ＿ｊの推定値と計測値に関する残差の閾値に対する割合が１を超えている場合、メトリックｘ＿ｉからメトリックｘ＿ｊへの相関関係に異常があると判定されている。
　図７は、本発明の第１の実施の形態における相関変化情報１２３の例を示す図である。相関変化情報１２３は、各メトリックの組み合わせについて、各時刻における残差の閾値に対する割合（ｄ＿ｉ，ｊ（ｔ）／Ｔｈ＿ｉ，ｊ）、及び、異常の有無を含む。
　例えば、相関モデル生成部１０２は、新たに収集された性能情報に対して、図５に示す相関モデル１２２に含まれる相関関係の異常を検出し、図７のような相関変化情報１２３を保存する。
　次に、異常スコア算出部１０４は、各時刻において、相関変化情報１２３をもとに、各メトリックの異常スコアを算出する（ステップＳ１０４）。
　ここで、異常スコアは、各メトリックに関する相関関係の異常の度合い（残差）、及び、異常の継続度合いをもとに算出される。異常スコア算出部１０４は、メトリックｘ＿ｉの異常スコアＳ＿ｉ（ｔ）を、数４式により算出する。
Figure JPOXMLDOC01-appb-M000004
 　ここで、ａｖｅｒａｇｅ＿ｉ（）は、メトリックｘ＿ｉから相関関係がある他のメトリックとの間の相関関係のすべてに対して括弧内の値を算出し、その平均値を求めることを示す。例えば、メトリックｘ＿１からｘ＿２、ｘ＿３、ｘ＿４との間に相関関係がある場合、括弧内の値の、これらの相関関係についての平均値が算出される。
　また、ｃ＿ｉ，ｊ（ｔ）は、異常の継続度合いを示す異常継続度であり、時刻ｔ以前の所定期間において、相関関係に異常が検出された期間の割合を示す。
　ｓｔｅｐ（ｙ）は、ステップ関数であり、数３式により算出される残差の閾値に対する割合が１未満、すなわち、相関関係が正常な場合、０である。したがって、メトリックｘ＿ｉから相関関係がある他のメトリックとの間の相関関係のすべてが正常な場合、異常スコアＳ＿ｉ（ｔ）は０である。
　図８は、本発明の第１の実施の形態における異常スコアの算出過程を示す図である。図９は、本発明の第１の実施の形態における異常スコアの算出結果を示す図である。
　例えば、異常スコア算出部１０４は、各時刻において、図７の相関変化情報１２３をもとに、図８のように異常継続度を算出し、図９のように異常スコアを算出する。
　図９の異常スコアの算出結果では、例えば、時刻１２：３０において、メトリックｘ＿１の異常スコアが、メトリックｘ＿２、ｘ＿３の異常スコアよりも大きく、メトリックｘ＿１の異常度が大きい、あるいは、異常が継続している可能性が高いことを示している。
　次に、異常スコア算出部１０４は、各時刻において、各メトリックの異常スコアを含む解析結果１３０を生成し、監視装置３００に出力する（ステップＳ１０５）。監視端末３００の表示部３０１は、解析結果１３０を管理者等に表示する。
　図１０は、本発明の第１の実施の形態における解析結果１３０の例を示す図である。図１０の例では、解析結果１３０は、異常相関率表示部１３１、異常相関表示部１３２、及び、異常スコア表示部１３３を含む。
　例えば、異常スコア算出部１０４は、図１０の解析結果１３０を監視端末３００に送信する。
　異常相関率表示部１３１は、相関モデル１２２に含まれる相関関係の内、異常と判定された相関関係の割合の経時変化を示す。管理者等は、異常相関率表示部１３１を参照し、被監視装置２００において、相関関係の異常が多発した時刻を把握することができる。
　異常相関表示部１３２は、相関モデル１２２上で異常と判定された相関関係を示す。異常相関表示部１３２では、相関モデル１２２の各メトリックが、当該メトリックの識別子（名前）とともに円で示され、異常と判定された相関関係は、円と円を結ぶ実線で示される。異常相関表示部１３２は、例えば、異常相関率表示部１３１上で管理者等により指定された時刻に関して、異常と判定された相関関係を表示する。また、異常相関表示部１３２は、新たな性能情報が収集される度に、最新の収集時刻に関して、異常と判定された相関関係を表示してもよい。管理者等は、異常相関表示部１３２を参照し、被監視装置２００において、異常が集中するメトリックを把握することができる。
　異常スコア表示部１３３は、各メトリックの異常スコアを示す。各メトリックは、所定の矩形領域内に、当該メトリックの識別子とともに円で示され、異常スコアが大きいほど、円の大きさ（半径）は大きくなる。また、異常スコアが大きいほど、円は、矩形領域の上部に表示される。
　異常スコア算出部１０４は、このように、異常スコアに応じて大きくなる円の大きさ、及び、前記異常スコアに応じて高くなる、矩形領域の底辺に対する垂直軸上の底辺からの高さを決定し、当該円が、当該大きさで、当該高さに表示されるように、異常スコア表示部１３３として表示されるデータを生成する。
　異常スコア表示部１３３は、例えば、異常相関率表示部１３１上で管理者等により指定された時刻に関して、異常スコアを表示してもよい。また、異常スコア表示部１３３は、新たな性能情報が収集される度に、最新の収集時刻に関して、異常スコアを表示してもよい。
　また、異常スコアは、数４式に示したように、相関関係の異常度（残差）に異常継続度を乗じることにより算出される。異常継続度は、異常スコアを算出する時刻以前の所定期間において、異常が検出された期間の割合であるため、異常の発生が続くと、時間の経過とともに異常スコアが次第に大きくなり、異常の発生が止まると、時間の経過とともに異常スコアが次第に小さくなる。このため、異常スコア表示部１３３では、メトリックに関する異常の発生が続くと、当該メトリックの円が次第に大きくなりつつ矩形領域の中を上昇し、異常の発生が止まると、当該メトリックの円が次第に小さくなりつつ矩形領域の中を下降する。すなわち、異常スコア表示部１３３では、各メトリックの異常スコアが、風船や泡のような浮力を得た物体の移動と同様な移動で表示される。なお、矩形領域中の円の上昇、下降は、よく知られるアルキメデスの原理に従っていてもよい。
　図１０の解析結果１３０では、時刻１２：３０において、メトリックｘ＿１を示す円が、他のメトリックの円より大きく、上部に表示されている。これにより、管理者等は、メトリックｘ＿１の異常度が大きい、あるいは、異常が継続している可能性が高いことを容易に把握することができる。
　また、図９の異常スコアの算出結果では、メトリックｘ＿１の異常は、時刻１２：２０から時刻１２：４０の間継続し、異常スコアは時刻１２：３０において最大となる。この場合、異常スコア表示部１３３では、メトリックｘ＿１を示す円が、時刻１２：２０から時刻１２：３０に大きくなりつつ上昇し、時刻１２：３０から時刻１２：４０に小さくなりつつ下降する。これにより、管理者等は、メトリックｘ＿１の異常の継続が開始された、あるいは、継続が停止した可能性を容易に把握することができる。
　以上により、本発明の第１の実施の形態の動作が完了する。
　次に、本発明の第１の実施の形態の特徴的な構成を説明する。図１は、本発明の第１の実施の形態の特徴的な構成を示すブロック図である。
　図１を参照すると、本発明の第１の実施の形態の運用管理装置１００は、メトリック収集部１０１と異常スコア算出部１０４とを含む。
　ここで、メトリック収集部１０１は、システムにおける複数メトリックの計測値をそれぞれ時系列に収集する。また、異常スコア算出部１０４は、複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する。
　次に、本発明の第１の実施の形態の効果を記載する。
　特許文献１に記載された技術では、ある時刻におけるメトリックｘ＿ｉの異常スコアは、メトリックｘ＿ｉから他のメトリックへの相関関係の内、当該時刻において異常と判定された相関関係の数をもとに算出され、異常メトリックのリストが異常スコアとともに表示される。管理者等は、異常メトリックのリストをもとに、異常スコアの高いメトリックの異常に対する対処を優先的に行う。この場合、管理者等は、当該メトリックの異常が継続的であるか、一時的であるかを把握できないため、当該メトリックの異常が一時的であっても優先的に対処する可能性がある。また、管理者等は、当該メトリックの異常が継続的であるか、一時的であるかを把握するために、例えば、異常メトリックのリストを、当該時刻の前後の時刻と比較する必要がある。
　本発明の本発明の第１の実施の形態によれば、システムにおける継続性のあるメトリックの異常を容易に把握できる。その理由は、異常スコア算出部１０４が、メトリックの各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出するためである。また、異常スコア算出部１０４が、各メトリックの異常スコアを、異常スコアに応じた大きさ、及び、表示位置を有する図形で表示するためである。
　これにより、管理者等は、継続的に発生しているメトリックの異常に対する対処を優先的に行うことができ、特許文献１の技術のみを用いる場合に比べ、システムの安定的な運用が期待できる。
　また、これにより、管理者等は、メトリックの異常が継続的であるかどうかを調べるために、各時刻における異常メトリックのリストを比較する必要はなく、継続的な異常の把握における管理者等の負担軽減や、見逃しの防止が期待できる。
　また、本発明の第１の実施の形態によれば、メトリックの異常の継続が開始された、あるいは、停止したことを容易に把握できる。その理由は、上述のように、異常スコア算出部１０４が、各メトリックの異常スコアを、異常スコアに応じた大きさ、及び、表示位置を有する図形で表示するためである。
　（第２の実施の形態）
　次に、本発明の第２の実施の形態について説明する。
　本発明の第２の実施の形態においては、異常スコア算出部１０４が、異常検出の開始時刻が同一であるメトリックをグループ化する点において、本発明の第１の実施の形態と異なる。
　本発明の第２の実施の形態の構成は、本発明の第１の実施の形態と同様となる。
　次に、本発明の第２の実施の形態における運用管理装置１００の動作について説明する。
　図１１は、本発明の第２の実施の形態における運用管理装置１００の処理を示すフローチャートである。ここで、メトリック収集部１０１が性能情報を収集してから、異常スコア算出部１０４が、各メトリックの異常スコアを算出するまでの動作（ステップＳ２０１~Ｓ２０４）は、本発明の第１の実施の形態の動作（ステップＳ１０１~Ｓ１０４）と同様となる。
　異常スコア算出部１０４は、上述のステップＳ１０４で、算出された各メトリックの異常スコアを参照し、異常検出の開始時刻が同一であるメトリックをグループ化する（ステップＳ２０５）。ここで、異常検出の開始時刻が同一であるメトリックとは、異常スコアが０から０より大きい値に変わった時刻が同一のメトリックである。そして、異常スコア算出部１０４は、グループ化されたメトリックの異常スコアを合計することにより、各グループの異常スコアであるグループ異常スコアを算出する（ステップＳ２０６）。
　図１２は、本発明の第２の実施の形態におけるグループ異常スコアの算出結果を示す図である。
　例えば、異常スコア算出部１０４は、各時刻において、図９の異常スコアをもとに、図１２のグループ異常スコアを算出する。
　この場合、異常スコア算出部１０４は、時刻１２：２０の異常スコアをもとに、当該時刻に異常検出が開始されたメトリックｘ＿１のみからなるグループＡを生成する。グループＡは、時刻１２：４０まで継続する。また、異常スコア算出部１０４は、時刻１２：３０の異常スコアをもとに、当該時刻に異常検出が開始されたメトリックｘ＿２とｘ＿３からなるグループＢを生成する。グループＢは、時刻１２：３０で終了する。そして、異常スコア算出部１０４は、各グループに含まれるメトリックの異常スコアをもとに、図１２のようにグループ異常スコアを算出する。
　図１２のグループ異常スコアの算出結果では、メトリックｘ＿２の異常検出開始時刻とｘ＿３の異常検出開始時刻とが同一であり、メトリックｘ＿２の異常とｘ＿３の異常とは、共通の異常事象に起因した異常の可能性があり、関連性が高いことを示している。また、メトリックｘ＿１の異常検出開始時刻とメトリックｘ＿２、ｘ＿３の異常検出開始時刻とは異なることを示している。
　異常スコア算出部１０４は、各時刻において、各グループのグループ異常スコアを含む解析結果１４０を生成し、監視装置３００に出力する（ステップＳ２０７）。
　図１３は、本発明の第２の実施の形態における解析結果１４０の例を示す図である。図１３の例では、解析結果１４０は、異常相関率表示部１４１、異常相関表示部１４２、及び、異常スコア表示部１４３を含む。
　異常相関率表示部１４１、異常相関表示部１４２は、本発明の第１の実施の形態の異常相関率表示部１３１、異常相関表示部１３２と同様に、それぞれ、異常と判定された相関関係の割合、相関モデル１２２上での異常と判定された相関関係を示す。
　異常スコア表示部１４３は、各グループのグループ異常スコアを示す。各グループは、所定の矩形領域内に、当該グループに含まれるメトリックの識別子とともに円で示され、本発明の第１の実施の形態と同様に、異常スコアが大きいほど、円の大きさは大きくなり、矩形領域の上部に表示される。
　本発明の第１の実施の形態における、図１０の解析結果１３０では、時刻１２：３０において、メトリックｘ＿２、ｘ＿３は、それぞれ異常の継続性がなく、異常スコアがメトリックｘ＿１に比べて低いため、メトリックｘ＿２、ｘ＿３を示す円は、それぞれ、異常スコア表示部１３３の下部に小さく表示される。
　一方、本発明の第２の実施の形態における、図１３の解析結果１４０では、時刻１２：３０において、メトリックｘ＿１からなるグループを示す円と同様に、メトリックｘ＿２、ｘ＿３からなるグループを示す円が、他のグループの円より大きく、異常スコア表示部１４３の上部に表示される。
　これにより、管理者等は、メトリックｘ＿２、ｘ＿３の関連性が高いことと、それらの異常度の総和が大きい、あるいは、それらの異常が継続している可能性が高いこととを容易に把握することができる。
　以上により、本発明の第２の実施の形態の動作が完了する。
　次に、本発明の第２の実施の形態の効果を記載する。
　ある一つの異常事象により複数のメトリックが異常な値となった場合、当該複数のメトリックの異常が同じ時刻に発生することがある。特許文献１の技術では、管理者等は、このような異常事象を把握するために、例えば、異常メトリックのリストの時間的な変化をもとに、異常メトリック間の時間的な関連性を確認し、同じ時刻に発生する異常メトリックを抽出する必要がある。また、異常事象を特定するために、異常が発生した相関関係に関してシグネチャマッチングを適用する方法も提案されている。しかしながら、未知の異常事象に対しては、相関関係に関するシグネチャの蓄積が無く、シグネチャマッチングを適用することはできない。
　本発明の本発明の第２の実施の形態によれば、同じ時刻に発生する異常メトリックを容易に把握できる。その理由は、異常スコア算出部１０４が、異常検出の開始時刻が同一であるメトリックをグループ化し、各グループのグループ異常スコアを算出するためである。
　これにより、管理者等は、共通の異常事象に起因した異常を、迅速に把握でき、システムのより安定的な運用が期待できる。
　以上、実施の形態を参照して本願発明を説明したが、本願発明は上記実施の形態に限定されない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
　例えば、本発明の実施の形態では、システムにおける性能指標をメトリックとし、メトリックの異常スコアを算出しているが、これに限らず、メトリックは、システムにおけるクライアントコンピュータからの要求量や、システムを介して単位時間あたりに処理される貨物の数等、システムに関して時系列で表される指標であれば、どのような指標でもよい。
　また、本発明の実施の形態では、メトリックの異常度合いとして、当該メトリックに関する相関関係の異常（相関破壊）の度合いを用いているが、これに限らず、メトリックの異常度合いは、メトリックの値の所定の閾値に対する超過（閾値異常）の度合い等、他の異常度を用いてもよい。
　また、本発明の実施の形態では、相関モデル１２２における閾値を、各メトリックの組み合わせについて、相関関数による残差の最大値をもとに算出しているが、閾値は、各メトリックの組み合わせについて定義された所定値、または、相関モデル１２２について定義された所定値でもよい。
　また、本発明の実施の形態では、異常スコアを数４式により算出しているが、異常スコアが、メトリックの異常の継続度合いに応じて増加するのであれば、他の数式を用いて異常スコアを算出してもよい。例えば、数４式において、メトリックに関する相関関係の異常度（残差）を用いずに、当該メトリックに関する相関関係の異常継続度のみを用いて、異常スコアを算出してもよい。
　また、本発明の実施の形態では、解析結果１３０、１４０において、異常スコアの大きさをメトリックを表す円の大きさ、及び、所定の矩形領域内での当該円が表示される高さで示しているが、これに限らず、異常スコアの大きさを示すことができれば、他の形状の図形や、他の表示位置により示してもよい。例えば、異常スコアの大きさを楕円や球等、円以外の図形の大きさにより表示してもよい。また、異常スコアの大きさを、円や台形等、矩形以外の所定の形状において定義された垂直軸上の所定の基準点からの高さで示してもよい。
　また、異常スコアの大きさを、地平面に対する垂直軸上の、所定の基準点からの高さで示してもよい。この場合、表示部３０１が地平面に対して傾いて配置されていても、各メトリックを表す図形は、異常スコアに応じて、地平面に対して垂直方向に上昇または下降する。すなわち、各メトリックを表す図形の移動は、実際の浮力を得た物体の移動により近くなる。これにより、管理者等は、各メトリックの異常スコアの変化を、より容易に把握することができる。
　この出願は、２０１１年８月２４日に出願された日本出願特願２０１１−１８２２６１を基礎とする優先権を主張し、その開示の全てをここに取り込む。
　１００　運用管理装置
　１０１　メトリック収集部
　１０２　相関モデル生成部
　１０３　相関変化分析部
　１０４　異常スコア算出部
　１１１　メトリック記憶部
　１１２　相関モデル記憶部
　１１３　相関変化記憶部
　１２１　性能系列情報
　１２２　相関モデル
　１２３　相関変化情報
　１３０　解析結果
　１３１　異常相関率表示部
　１３２　異常相関表示部
　１３３　異常スコア表示部
　１４０　解析結果
　１４１　異常相関率表示部
　１４２　異常相関表示部
　１４３　異常スコア表示部
　２００　被監視装置
　２０１　監視エージェント
　３００　監視端末

Claims (21)

  1. 　システムにおける複数メトリックの計測値をそれぞれ時系列に収集するメトリック収集手段と、
    　前記複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する異常スコア算出手段と、
    を含む運用管理装置。
  2. 　前記異常スコア算出手段は、前記異常スコアに応じて、所定の図形の大きさ、及び、表示手段の表示画面上の位置を決定し、当該図形を、当該大きさで、当該位置に表示する
    請求項１に記載の運用管理装置。
  3. 　前記異常スコア算出手段は、前記異常スコアに応じて大きくなる概略円形の図形の大きさ、及び、前記異常スコアに応じて高くなる、所定の垂直軸上の設定された基準点からの高さを決定し、当該図形を、当該大きさで、当該基準点からの高さに表示する
    請求項２に記載の運用管理装置。
  4. 　前記異常スコア算出手段は、前記異常の検出の開始時刻が同一である前記メトリックからなるグループを生成し、当該グループに含まれる前記メトリックの異常スコアの合計値を当該グループの異常スコアとして算出し、出力する
    請求項１乃至３のいずれかに記載の運用管理装置。
  5. 　前記異常スコア算出手段は、前記複数メトリックの計測値の各々の各時刻における異常の度合いを示す異常度と前記継続度とをもとに、当該メトリックの前記異常スコアを算出する
    請求項１乃至４のいずれかに記載の運用管理装置。
  6. 　さらに、前記複数のメトリックの内の異なる２つのメトリック間の相関関係を示す相関関数を１以上含む相関モデルを記憶する相関モデル記憶手段を含み、
    　前記異常度は、前記複数メトリックの計測値の各々を前記相関関数に適用したときの変換誤差をもとに算出される
    請求項５に記載の運用管理装置。
  7. 　前記継続度は、各時刻以前の所定期間における、前記異常が検出された期間の割合である
    請求項１乃至６のいずれかにに記載の運用管理装置。
  8. 　システムにおける複数メトリックの計測値をそれぞれ時系列に収集し、
    　前記複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する
    運用管理方法。
  9. 　前記異常スコアを出力する場合、前記異常スコアに応じて、所定の図形の大きさ、及び、表示手段の表示画面上の位置を決定し、当該図形を、当該大きさで、当該位置に表示する
    請求項８に記載の運用管理方法。
  10. 　前記異常スコアを出力する場合、前記異常スコアに応じて大きくなる概略円形の図形の大きさ、及び、前記異常スコアに応じて高くなる、所定の垂直軸上の設定された基準点からの高さを決定し、当該図形を、当該大きさで、当該基準点からの高さに表示する
    請求項９に記載の運用管理方法。
  11. 　さらに、前記異常の検出の開始時刻が同一である前記メトリックからなるグループを生成し、当該グループに含まれる前記メトリックの異常スコアの合計値を当該グループの異常スコアとして算出し、出力する
    請求項８乃至１０のいずれかに記載の運用管理方法。
  12. 　前記異常スコアを算出する場合、前記複数メトリックの計測値の各々の各時刻における異常の度合いを示す異常度と前記継続度とをもとに、当該メトリックの前記異常スコアを算出する
    請求項８乃至１１のいずれかに記載の運用管理方法。
  13. 　さらに、前記複数のメトリックの内の異なる２つのメトリック間の相関関係を示す相関関数を１以上含む相関モデルを記憶し、
    　前記異常度は、前記複数メトリックの計測値の各々を前記相関関数に適用したときの変換誤差をもとに算出される
    請求項１２に記載の運用管理方法。
  14. 　前記継続度は、各時刻以前の所定期間における、前記異常が検出された期間の割合である
    請求項８乃至１３のいずれかにに記載の運用管理方法。
  15. 　コンピュータに、
    　システムにおける複数メトリックの計測値をそれぞれ時系列に収集し、
    　前記複数メトリックの計測値の各々の各時刻における異常の継続度合いを示す継続度をもとに、当該メトリックの異常スコアを算出し、出力する処理を実行させるプログラムを格納する、
    コンピュータが読み取り可能な記録媒体。
  16. 　前記異常スコアを出力する場合、前記異常スコアに応じて、所定の図形の大きさ、及び、表示手段の表示画面上の位置を決定し、当該図形を、当該大きさで、当該位置に表示する処理を実行させる前記プログラムを格納する、
    請求項１５に記載のコンピュータが読み取り可能な記録媒体。
  17. 　前記異常スコアを出力する場合、前記異常スコアに応じて大きくなる概略円形の図形の大きさ、及び、前記異常スコアに応じて高くなる、所定の垂直軸上の設定された基準点からの高さを決定し、当該図形を、当該大きさで、当該基準点からの高さに表示する処理を実行させる前記プログラムを格納する、
    請求項１６に記載のコンピュータが読み取り可能な記録媒体。
  18. 　さらに、前記異常の検出の開始時刻が同一である前記メトリックからなるグループを生成し、当該グループに含まれる前記メトリックの異常スコアの合計値を当該グループの異常スコアとして算出し、出力する処理を実行させる前記プログラムを格納する、
    請求項１５乃至１７のいずれかに記載のコンピュータが読み取り可能な記録媒体。
  19. 　前記異常スコアを算出する場合、前記複数メトリックの計測値の各々の各時刻における異常の度合いを示す異常度と前記継続度とをもとに、当該メトリックの前記異常スコアを算出する処理を実行させる前記プログラムを格納する、
    請求項１５乃至１８のいずれかに記載のコンピュータが読み取り可能な記録媒体。
  20. 　さらに、前記複数のメトリックの内の異なる２つのメトリック間の相関関係を示す相関関数を１以上含む相関モデルを記憶する処理を実行させ、
    　前記異常度は、前記複数メトリックの計測値の各々を前記相関関数に適用したときの変換誤差をもとに算出される前記プログラムを格納する、
    請求項１９に記載のコンピュータが読み取り可能な記録媒体。
  21. 　前記継続度は、各時刻以前の所定期間における、前記異常が検出された期間の割合である前記プログラムを格納する、
    請求項１５乃至２０のいずれかにに記載のコンピュータが読み取り可能な記録媒体。
PCT/JP2012/069931 2011-08-24 2012-07-31 運用管理装置、運用管理方法、及びプログラム WO2013027562A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP12825909.0A EP2750041A4 (en) 2011-08-24 2012-07-31 OPERATING MANAGEMENT DEVICE, OPERATING MANAGEMENT PROCESS AND PROGRAM THEREFOR
US14/238,241 US9778972B2 (en) 2011-08-24 2012-07-31 Operation management device, operation management method
US15/340,487 US20170046215A1 (en) 2011-08-24 2016-11-01 Operation management device, operation management method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011182261 2011-08-24
JP2011-182261 2011-08-24

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US14/238,241 A-371-Of-International US9778972B2 (en) 2011-08-24 2012-07-31 Operation management device, operation management method
US15/340,487 Continuation US20170046215A1 (en) 2011-08-24 2016-11-01 Operation management device, operation management method

Publications (1)

Publication Number Publication Date
WO2013027562A1 true WO2013027562A1 (ja) 2013-02-28

Family

ID=47746312

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2012/069931 WO2013027562A1 (ja) 2011-08-24 2012-07-31 運用管理装置、運用管理方法、及びプログラム

Country Status (4)

Country Link
US (2) US9778972B2 (ja)
EP (1) EP2750041A4 (ja)
JP (1) JP5621937B2 (ja)
WO (1) WO2013027562A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2017164368A1 (ja) * 2016-03-24 2018-11-15 三菱重工業株式会社 監視装置、監視方法、プログラム
KR20200029794A (ko) * 2018-09-11 2020-03-19 아토리서치(주) 실시간 다중 메트릭 모니터링 방법 및 시스템
US10719380B2 (en) 2014-12-22 2020-07-21 Nec Corporation Operation management apparatus, operation management method, and storage medium
JP2022541875A (ja) * 2019-06-14 2022-09-28 ボルボトラックコーポレーション 車両モデルの正しさを定量化するための方法

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016095751A (ja) * 2014-11-17 2016-05-26 富士通株式会社 異常機器特定プログラム、異常機器特定方法、及び、異常機器特定装置
US10061632B2 (en) * 2014-11-24 2018-08-28 Anodot Ltd. System and method for transforming observed metrics into detected and scored anomalies
US10318367B1 (en) 2015-05-15 2019-06-11 United Services Automobile Association (Usaa) Systems and methods for computer infrastructure monitoring and maintenance
EP3309682B1 (en) * 2015-06-09 2020-04-01 Hitachi, Ltd. Data collection system and method, and method for reducing the quantity of measurement data
JP5875726B1 (ja) * 2015-06-22 2016-03-02 株式会社日立パワーソリューションズ 異常予兆診断装置のプリプロセッサ及びその処理方法
US10754719B2 (en) * 2015-12-09 2020-08-25 Nec Corporation Diagnosis device, diagnosis method, and non-volatile recording medium
US20170315855A1 (en) * 2016-05-02 2017-11-02 Agt International Gmbh Method of detecting anomalies on appliances and system thereof
US11632304B2 (en) * 2016-10-31 2023-04-18 Hewlett Packard Enterprise Development Lp Methods and systems for characterizing computing system performance using peer-derived performance severity and symptom severity models
ES2907775T3 (es) * 2017-03-17 2022-04-26 Nec Corp Dispositivo de tratamiento de información, método de tratamiento de información y soporte de registro en el que se graba el programa de tratamiento de información
JP6824121B2 (ja) * 2017-07-14 2021-02-03 株式会社東芝 状態検知装置、状態検知方法及びプログラム
CN114070397A (zh) * 2018-08-16 2022-02-18 华为技术有限公司 一种实现光链路故障识别的方法、装置及系统
FR3098940B1 (fr) * 2019-07-15 2021-11-05 Bull Sas Procédé et dispositif de détermination d’une valeur de risque d’incident technique dans une infrastructure informatique à partir de valeurs d’indicateurs de performance

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06243064A (ja) * 1993-02-12 1994-09-02 Honda Motor Co Ltd コンピュータネットワークの障害検出システム
JP2002132340A (ja) * 2000-10-19 2002-05-10 Nec Eng Ltd 状態表示装置及びその方法
JP2003263342A (ja) 2002-03-07 2003-09-19 Telecommunication Advancement Organization Of Japan 情報処理装置の監視装置および監視方法並びにそのプログラム
JP2005101854A (ja) * 2003-09-24 2005-04-14 Intelligent Cosmos Research Institute パケット追跡装置、パケット追跡システム、パケット追跡方法およびパケット追跡プログラム
JP2009076056A (ja) * 2007-07-27 2009-04-09 General Electric Co <Ge> 異常集約方法
JP2009199533A (ja) 2008-02-25 2009-09-03 Nec Corp 運用管理装置、運用管理システム、情報処理方法、及び運用管理プログラム
WO2010032701A1 (ja) * 2008-09-18 2010-03-25 日本電気株式会社 運用管理装置、運用管理方法、および運用管理プログラム
JP2010186310A (ja) 2009-02-12 2010-08-26 Nec Corp 運用管理装置および運用管理方法ならびにそのプログラム
WO2011065196A1 (ja) * 2009-11-27 2011-06-03 日本電気株式会社 監視状況表示装置、監視状況表示方法および監視状況表示プログラム
JP2011230634A (ja) * 2010-04-27 2011-11-17 Denso Corp 故障予兆検出装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7246043B2 (en) * 2005-06-30 2007-07-17 Oracle International Corporation Graphical display and correlation of severity scores of system metrics
EP1895416B1 (en) * 2006-08-25 2011-07-06 Accenture Global Services Limited Data visualization for diagnosing computing systems
JP5347997B2 (ja) * 2010-02-04 2013-11-20 株式会社デンソー 故障診断用情報収集装置

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06243064A (ja) * 1993-02-12 1994-09-02 Honda Motor Co Ltd コンピュータネットワークの障害検出システム
JP2002132340A (ja) * 2000-10-19 2002-05-10 Nec Eng Ltd 状態表示装置及びその方法
JP2003263342A (ja) 2002-03-07 2003-09-19 Telecommunication Advancement Organization Of Japan 情報処理装置の監視装置および監視方法並びにそのプログラム
JP2005101854A (ja) * 2003-09-24 2005-04-14 Intelligent Cosmos Research Institute パケット追跡装置、パケット追跡システム、パケット追跡方法およびパケット追跡プログラム
JP2009076056A (ja) * 2007-07-27 2009-04-09 General Electric Co <Ge> 異常集約方法
JP2009199533A (ja) 2008-02-25 2009-09-03 Nec Corp 運用管理装置、運用管理システム、情報処理方法、及び運用管理プログラム
WO2010032701A1 (ja) * 2008-09-18 2010-03-25 日本電気株式会社 運用管理装置、運用管理方法、および運用管理プログラム
JP2010186310A (ja) 2009-02-12 2010-08-26 Nec Corp 運用管理装置および運用管理方法ならびにそのプログラム
WO2011065196A1 (ja) * 2009-11-27 2011-06-03 日本電気株式会社 監視状況表示装置、監視状況表示方法および監視状況表示プログラム
JP2011230634A (ja) * 2010-04-27 2011-11-17 Denso Corp 故障予兆検出装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
HIROAKI MEGURO ET AL.: "Network Anomaly Detection Based on Anomaly Duration", PROCEEDINGS OF THE 2007 IEICE GENERAL CONFERENCE TSUSHIN 2, THE INSTITUTE OF ELECTRONICS, INFORMATION AND COMMUNICATION ENGINEERS, 7 March 2007 (2007-03-07), pages 160, XP008172593 *
See also references of EP2750041A4

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10719380B2 (en) 2014-12-22 2020-07-21 Nec Corporation Operation management apparatus, operation management method, and storage medium
JPWO2017164368A1 (ja) * 2016-03-24 2018-11-15 三菱重工業株式会社 監視装置、監視方法、プログラム
US10866163B2 (en) 2016-03-24 2020-12-15 Mitsubishi Heavy Industries, Ltd. Anomaly monitoring device and method for producing anomaly signs according to combinations of sensors based on relationship of sensor fluctuations
KR20200029794A (ko) * 2018-09-11 2020-03-19 아토리서치(주) 실시간 다중 메트릭 모니터링 방법 및 시스템
KR102092093B1 (ko) * 2018-09-11 2020-03-23 아토리서치(주) 실시간 다중 메트릭 모니터링 방법 및 시스템
JP2022541875A (ja) * 2019-06-14 2022-09-28 ボルボトラックコーポレーション 車両モデルの正しさを定量化するための方法

Also Published As

Publication number Publication date
EP2750041A4 (en) 2015-04-22
US20170046215A1 (en) 2017-02-16
JP5621937B2 (ja) 2014-11-12
EP2750041A1 (en) 2014-07-02
US9778972B2 (en) 2017-10-03
US20140195868A1 (en) 2014-07-10
JPWO2013027562A1 (ja) 2015-03-19

Similar Documents

Publication Publication Date Title
JP5621937B2 (ja) 運用管理装置、運用管理方法、及びプログラム
US10747188B2 (en) Information processing apparatus, information processing method, and, recording medium
US9367382B2 (en) Apparatus, method, and program product for calculating abnormality based on degree of correlation destruction
JP5418610B2 (ja) 障害原因抽出装置、障害原因抽出方法およびプログラム記憶媒体
JP5428372B2 (ja) 運用管理装置および運用管理方法ならびにそのプログラム
EP2963553B1 (en) System analysis device and system analysis method
WO2011155621A1 (ja) 障害検出装置、障害検出方法およびプログラム記録媒体
JP5768983B2 (ja) 契約違反予測システム、契約違反予測方法および契約違反予測プログラム
JP6708203B2 (ja) 情報処理装置、情報処理方法、及び、プログラム
JP5827425B1 (ja) 予兆診断システム及び予兆診断方法
JP5827426B1 (ja) 予兆診断システム及び予兆診断方法
JP6521096B2 (ja) 表示方法、表示装置、および、プログラム
JP2012242159A (ja) システムの高い可用性のためにセンサデータを補間する方法、コンピュータプログラム、システム。
WO2016136198A1 (ja) システム監視装置、システム監視方法、及び、システム監視プログラムが記録された記録媒体
JP6164311B1 (ja) 情報処理装置、情報処理方法、及び、プログラム
JP5771317B1 (ja) 異常診断装置及び異常診断方法
WO2012128388A1 (ja) 運用管理システム、運用管理方法、及びプログラム
US20190265088A1 (en) System analysis method, system analysis apparatus, and program
JP5368388B2 (ja) 災害危機管理装置、被害レベル計算方法、およびプログラム
US10157113B2 (en) Information processing device, analysis method, and recording medium
JP5771318B1 (ja) 異常診断装置及び異常診断方法
CN109766243B (zh) 一种基于幂函数的多核主机性能监控方法
JP2023168693A (ja) 誤検知判別装置、誤検知判別方法及びプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12825909

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012825909

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 14238241

Country of ref document: US

ENP Entry into the national phase

Ref document number: 2013529952

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE