DE102005050315B4 - Verfahren zum Implementieren von Topn-Messungen bei Betriebsunterstützungssystemen - Google Patents
Verfahren zum Implementieren von Topn-Messungen bei Betriebsunterstützungssystemen Download PDFInfo
- Publication number
- DE102005050315B4 DE102005050315B4 DE102005050315A DE102005050315A DE102005050315B4 DE 102005050315 B4 DE102005050315 B4 DE 102005050315B4 DE 102005050315 A DE102005050315 A DE 102005050315A DE 102005050315 A DE102005050315 A DE 102005050315A DE 102005050315 B4 DE102005050315 B4 DE 102005050315B4
- Authority
- DE
- Germany
- Prior art keywords
- measurements
- value
- agent
- time period
- subset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/12—Discovery or management of network topologies
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
- G06F11/3419—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment by assessing time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3476—Data logging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
- G06F11/3466—Performance evaluation by tracing or monitoring
- G06F11/3495—Performance evaluation by tracing or monitoring for systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/02—Capturing of monitoring data
- H04L43/022—Capturing of monitoring data by sampling
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/04—Processing captured monitoring data, e.g. for logfile generation
- H04L43/045—Processing captured monitoring data, e.g. for logfile generation for graphical visualisation of monitoring data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/08—Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
- H04L43/0852—Delays
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/805—Real-time
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/86—Event-based monitoring
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Computer Hardware Design (AREA)
- Data Mining & Analysis (AREA)
- Environmental & Geological Engineering (AREA)
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
Description
- Der Ausdruck Betriebsunterstützungssystem (OSS = Operations Support System) bezieht sich allgemein auf ein System (oder Systeme), das Verwaltungs-, Bestands-, Konstruktions-, Planungs- und Reparaturfunktionen für Kommunikationsdienstanbieter und die Netzwerke derselben durchführt. Ursprünglich waren OSSe großrechnerbasierte, alleinstehende Systeme, die entworfen waren, um Mitglieder von Telefongesellschaftsbelegschaften bei den täglichen Arbeiten derselben durch ein Automatisieren manueller Prozesse zu unterstützen, wobei ein Betrieb des Netzwerks fehlerfreier und effizienter gemacht wurde. Heutige OSSe verwalten einen zunehmend komplexen Satz von Produkten und Diensten in einem dynamischen, wettbewerbsfähigen Marktplatz, wobei Dienstanbietern geholfen wird, die Rendite (ROI = return of investment) in einem der Schlüsselvermögenswerte derselben – Informationen – zu maximieren. Das letztendliche Ziel von OSSen besteht darin, zu ermöglichen, dass Dienstanbieter Kosten reduzieren, einen hervorragenden Kundendienst liefern und die Vermarktungszeit derselben für neue Produkte und Dienste beschleunigen.
- Als ein Beispiel sei die
US 2004/0221202 A1 WO 00/67 507 A1 - Typische OSSe, wie beispielsweise der QoS-Manager von AGILENT, modellieren die Topografie des Testsystems und sammeln eine Vielfalt von Daten, die den Zustand und eine Aktivität des Testsystems beschreiben. Zum Beispiel können Daten von einzelnen Anwendungen, Servern, Netzwerkverbindungen und einer Vernetzungsausrüstung gesammelt werden. Allgemein weisen die Daten einen Strom von Skalarwerten auf. OSSe empfangen und speichern die Ströme von Werten. Die Werte werden verwendet, um Grafiken zu erzeugen, die den Betrieb des Testsystems beschreiben. Derartige Grafiken können Graphen und Diagramme bzw. Tabellen umfassen, aus denen ein geübter Benutzer eine End-Zu-End-Dienstleistungsfähigkeit bewerten kann. Zum Beispiel können Anzeigen formuliert sein, die eine Angabe dessen liefern, ob der Dienstanbieter sich an Dienstpegelvereinbarungen mit Teilnehmern hält.
- Ein Typ einer Anzeige, der an Beliebtheit gewonnen hat, ist TopN bzw. ObereN. TopN bezieht sich auf eine ausgewählte Anzahl „M” (wobei n typischerweise ein kleiner Wert ist, wie beispielsweise 5 oder 10) von Messungen, die aus einem Abtastwertraum ausgewählt sind, wobei jede ausgewählte Messung sich in den oberen oder unteren „M” geordneten Messungen in dem Abtastwertraum befindet. Der Abtastwertraum weist allgemein alle Messungen auf, die über eine vorbestimmte Zeitdauer genommen werden. Ein Beispiel einer TopN-Messung sind die oberen 10 Antwortzeiten für einen speziellen Webserver. In diesem Fall sind die oberen 10 Antworten typischerweise die 10 langsamsten Antworten, doch dieselben können die 10 schnellsten Antworten darstellen.
- Eine aktuelle Verwendung von TopN-Messungen besteht typischerweise aus der statischen Präsentation der einzelnen Messungen innerhalb des TopN-Satzes von Messungen. Aufgrund der Beschaffenheit der Messungen unterliegen TopN-Messungen nicht den gleichen Analyseverfahren wie andere Messungen, einschließlich derartiger herkömmlicher OSS-Stärken wie einer Basislinienerzeugung und Schwellenwertbestimmung. Ein Grund liegt darin, dass existierende OSSe programmiert wurden, um einen Skalarwert zu einer Zeit zu verarbeiten, und nicht geschickt bei einem Verarbeiten einer Menge von Messungen sind, wie dieselben durch eine TopN-Messung präsentiert werden.
- Folglich haben die vorliegenden Erfinder einen Bedarf nach neuen Verfahren zum Handhaben von TopN-Messungen erkannt, die zusätzliche Verwendung für TopN-Messungen innerhalb des Rahmenwerks von OSSen ermöglichen.
- Es ist die Aufgabe der vorliegenden Erfindung, ein Verfahren zum Betreiben eines Computersystems und ein OSS-System mit verbesserten Charakteristika zu schaffen.
- Diese Aufgabe wird durch ein Verfahren gemäß Anspruch 1 und ein OSS-System gemäß Anspruch 14 gelöst.
- Ein Verständnis einiger Ausführungsbeispiele der vorliegenden Erfindung kann aus der folgenden detaillierten Beschreibung in Verbindung mit den zugehörigen Zeichnungen gewonnen werden.
- Bevorzugte Ausführungsbeispiele der vorliegenden Erfindung werden nachfolgend Bezug nehmend auf die beiliegenden Zeichnungen näher erläutert. Es zeigen:
-
1 ein Blockdiagramm eines OSS-Systems; -
2 ein Flussdiagramm eines Verfahrens gemäß einem Ausführungsbeispiel der vorliegenden Erfindung; -
3 ein Flussdiagramm eines Verfahrens gemäß einem Ausführungsbeispiel der vorliegenden Erfindung; -
4 eine Darstellung eines Bildschirms, der einen Graphen gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt; -
5 eine Darstellung eines Bildschirms, der einen Graphen gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt; -
6 eine Darstellung eines Bildschirms, der einen Graphen gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt; und -
7 eine Darstellung eines Bildschirms, der einen Graphen gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt. - Nun wird detailliert auf Ausführungsbeispiele der vorliegenden Erfindung Bezug genommen, von denen einige in den zugehörigen Zeichnungen dargestellt sind, wobei sich gleiche Bezugszeichen auf gleiche Elemente überall beziehen. Die detaillierte Beschreibung, die folgt, stellt Verfahren vor, die durch Routinen und symbolische Darstellungen von Operationen von Datenbits innerhalb eines computerlesbaren Mediums, zugeordneten Prozessoren, allgemeinen Personalcomputern und dergleichen verkörpern sein können. Diese Beschreibungen und Darstellungen sind die Einrichtungen, die durch Fachleute auf dem Gebiet verwendet werden, um das Wesentliche der Arbeit derselben anderen Fachleuten auf dem Gebiet zu vermitteln.
- Ein Verfahren wird hier und allgemein als eine Sequenz von Schritten oder Handlungen begriffen, die zu einem erwünschten Ergebnis führen, und umschließt als solches derartige Ausdrücke des Gebiets, wie „Routine”, „Programm”, „Objekte”, „Funktionen”, „Subroutinen” und „Prozeduren”. Die hierin dargelegten Verfahren können auf einem allgemeinen Computer oder einer anderen Netzwerkvorrichtung wirksam sein, die selektiv durch eine Routine aktiviert oder rekonfiguriert wird, die in dem Computer gespeichert ist, und bilden eine Schnittstelle mit den notwendigen Signalverarbeitungsfähigkeiten. Genauer gesagt sind die hierin präsentierten Verfahren nicht inhärent auf irgendeine spezielle Vorrichtung bezogen; vielmehr können verschiedene Vorrichtungen verwendet werden, um die beanspruchten Verfahren zu implementieren. Maschinen, die für eine Implementierung der beschriebenen Ausführungsbeispiele nützlich sind, umfassen dieselben, die durch derartige Firmen, wie AGILENT TECHNOLOGIES, INC. und HEWLETT-PACKARD sowie andere Hersteller einer Computer- und Netzwerkausrüstung hergestellt werden.
- Mit Bezug auf die hierin beschriebene Software ist Durchschnittsfachleuten auf dem Gebiet ersichtlich, dass es eine Vielfalt von Plattformen und Sprachen zum Erzeugen einer Software zum Durchführen der hierin umrissenen Verfahren gibt. Ausführungsbeispiele der vorliegenden Erfindung können unter Verwendung irgendeiner einer Anzahl von Varietäten von JAVA implementiert sein, doch Durchschnittsfachleute auf dem Gebiet erkennen auch, dass die Wahl der exakten Plattform und Sprache häufig durch die Spezifika des tatsächlichen aufgebauten Systems diktiert ist, derart, dass das, was für einen Typ eines Systems funktioniert, eventuell auf einem anderen System nicht effizient ist. Es ist ferner klar, dass die hierin beschriebenen Verfahren nicht auf ein Ausgeführtwerden als Software auf einem Mikroprozessor begrenzt sind, sondern auch in anderen Typen von Prozessoren implementiert werden können. Zum Beispiel könnten die Verfahren mit HDL (Hardware Design Language) in einer ASIC (application specific integrated circuits = anwendungsspezifische integrierte Schaltung) integriert sein.
- Bei zumindest einem Ausführungsbeispiel der vorliegenden Erfindung wird eine TopN-Datenstruktur gebildet durch: ein Auswählen einer Anzahl „M” von ,Name-Wert'-Paaren aus dem gesamten Abtastwertraum; ein Berechnen eines Restwerts; ein Berechnen eines repräsentativen Werts; und ein Erzeugen einer Datenstruktur, wie beispielsweise eines Objekts, wobei die „M” Name-Wert-Paare (einschließlich der „M” Name-Wert-Paare), der Restwert und der repräsentative Wert eingekapselt sind.
-
1 ist ein Blockdiagramm eines OSS-Systems100 , auf dem beschriebene Ausführungsbeispiele der vorliegenden Erfindung praktiziert werden können. Genauer gesagt basiert das OSS-System100 auf dem im Handel erhältlichen AGILENT QOS MANAGER OSS 5.5.0 (das hierin im Folgenden als das AGILENT-System bezeichnet wird). Ein allgemeiner Betrieb des AGILENT-Systems ist in dem AGILENT OSS QOS MANAGER 5.5.0 CONCEPTS GUIDE (Teile Nr. 5188–3724, veröffentlicht im Juli 2004) präsentiert, der hierin durch Bezugnahme aufgenommen ist. Es ist zu erkennen, dass das OSS-System100 lediglich ein Beispiel eines OSS ist, auf dem die vorliegende Erfindung implementiert sein kann. Während ferner die folgende Beschreibung die Nomenklatur des AGILENT-Systems übernimmt, soll dies in keiner Weise die vorliegende Erfindung auf das AGILENT-System begrenzen, sondern die vorliegende Erfindung ist systemunabhängig. - Der Kern des OSS
100 ist einer oder mehrere Diagnosemessungsserver (DMS = diagnostic measurement servers)102 . Die primäre Funktion des DMS102 besteht darin, Daten zu verwalten und zu analysieren, die durch Agenten104n gesammelt werden. Einige der typischen Funktionen des DMS102 umfassen: ein Speichern und Beibehalten aller Messungsdaten; ein Berechnen einer Basislinie und von Schwellen; ein Bestimmen der Unversehrtheit bzw. Gesundheit von Elementen des Testsystems; ein Implementieren von Handlungen, wenn eine Schwelle überschritten wird oder sich ein Gesundheitszustand verändert; und ein Konfigurieren von Agenten. - Die Agenten
104n sind für ein Durchführen von Tests, Sammeln von Messungen und Weiterleiten von Messungsdaten zu dem DMS102 verantwortlich. Typischerweise ist zumindest ein Agent104n auf dem DMS102 installiert. Andere Agenten104n können auf Elementen des Testsystems installiert sein, wie beispielsweise einem FTP-Server104 , einem SMTP-Server108 und einem HTML-Server110 . Die Agenten104n laufen unabhängig von dem DMS102 , in anderen Worten beeinflusst die Verfügbarkeit des DMS102 den Betrieb der Agenten104n nicht. Die Agenten104n sind konfiguriert, um mit den Elementen, die dieselben messen, in Wechselwirkung zu treten, beispielsweise verwendet der Agent104b das Simple Mail Transfer Protocol, um mit dem SMTP-Server108 zu kommunizieren. - Gemäß zumindest einem Ausführungsbeispiel der vorliegenden Erfindung sind die Agenten
104n konfiguriert, um Messungen zu erzeugen, die eine Sammlung von Name-Wert-Paaren aufweisen, die während eines Messungsintervalls gesammelt werden. Der Name ist typischerweise eine beliebige Zeichenfolge, die gewisse Informationen hinsichtlich der Daten liefert, wie beispielsweise eine Beschreibung oder eine Zeit und/oder Position, zu der die Daten erhalten wurden. Der Wert ist typischerweise ein Skalarwert. Beispielsweise kann der Wert eine verstrichene Zeit oder eine Anzahl aufweisen, die eine Menge quantifiziert, in der eine gewisse Aktivität aufgetreten ist (z. B. Handshakes bzw. Quittungsaustausche, fehlgeschlagene Verbindungen, etc. ...). Bei einem Ausführungsbeispiel ist die Sammlung von Name-Wert-Paaren in einem Objekt eingekapselt, doch Durchschnittsfachleute auf dem Gebiet erkennen, dass andere Datenstrukturen verwendet werden können. - Der DMS
102 verwendet das Dienstmodell114 , um Elemente des Testsystems zu identifizieren. Das Dienstmodell114 integriert Elemente des Testsystems in eine hierarchische Baumstruktur, die die Visualisierung von Elementen und der gegenseitigen Abhängigkeiten derselben gestattet. Das Dienstmodell ist in demUS-Patent Nr. 6,336,138 mit dem Titel Template-Driven Approach For Generating Models of Network Services, erteilt am 1. Januar 2002 und hierin durch Bezugnahme aufgenommen, vollständiger erläutert. Der DMS102 speichert Informationen, einschließlich Name-Wert-Paaren, in zumindest einer Datenbank, wie beispielsweise der Datenbank112 . Die Datenbank könnte beispielsweise eine ORACLE-Datenbank aufweisen. - Grafische Benutzerschnittstellen bzw. grafische Benutzeroberflächen
116n treten mit dem DMS102 in Wechselwirkung, um einen Benutzer mit Anzeigen zu versehen, die eine Wechselwirkung mit dem DMS102 und den Agenten104n erleichtern. Funktionen der Benutzerschnittstelle umfassen ein Aufbauen und Verwalten des Dienstmodells114 ; ein Definieren von Schwellen; ein Definieren von Ereignisauslösern; ein Betrachten von Ereignissen und ein Betrachten von Graphen, Berichten und Dienstpegelerfüllungsvereinbarungen. -
2 ist ein Flussdiagramm eines Verfahrens gemäß zumindest einem Ausführungsbeispiel der vorliegenden Erfindung. - Genauer gesagt ist das in
2 gezeigte Ausführungsbeispiel ein Verfahren zum Bilden einer Datenstruktur, die eine Sammlung von Name-Wert-Paaren enthält. Während andere Datenstrukturen verwendet werden können, übernimmt die folgende Erörterung eine Nomenklatur, die Objekten zugeordnet ist. Das in2 gezeigte Verfahren erzeugt ein Objekt, das hierin ein TopN-Objekt genannt wird, das einen Datensatz enthält, der den gesamten Abtastwertraum darstellt. Der Ausdruck TopN bezieht sich allgemein auf das Konzept, dass, wenn eine Anzeige erzeugt wird, lediglich benutzerausgewählte „N” (wobei „N” ≤ „M”) Name-Wert-Paare einzeln gezeigt werden. Der Datensatz weist allgemein „M” Name-Wert-Paare, einen repräsentativen Wert und einen Restwert auf. - Tabelle 1 stellt mehrere TopN-Messungen dar, die gemäß Ausführungsbeispielen der vorliegenden Erfindung verwendet werden können. TABELLE 1
Dienst Beispielhafte TopN-Messungen Web-Dienst Gesamt-Http-Antwortzeit Zeitdienst Gesamt-Ntp-Antwortzeit Nachrichtendienst Gesamt-Nntp-Antwortzeit Email-Dienst Gesamt-Senden-Antwortzeit Email-Dienst Gesamt-Empfangen-Antwortzeit Email-Dienst Max. Umlaufzeit Netzwerkdienste SA-Agent-Icmp-Echo-Antwortzeit Netzwerkdienste SA-Agent-Udp-Echo-Antwortzeit Netzwerkdienste SA-Agent-Tcp-Verbindungszeit Netzwerkdienste SA-Agent-Dns-Antwortzeit Netzwerkdienste SA-Agent-Dhcp-Antwortzeit Netzwerkdienste SA-Agent-Gesamt-Http-Antwortzeit Netzwerkdienste SA-Agent-Gesamt-Ftp-Antwortzeit Netzwerkdienste absolutes SA-Agent-Quelle-zu-Bestimmungsort-Zittern Netzwerkdienste absolutes SA-Agent-Bestimmungsort-zu-Quelle-Zittern Netzwerkdienste durchschnittliche Icmp-Verzögerung Netzwerkdienste Durchsatz-Paketverlust Namensgebungsdienst Dns-Cache-Nachschlagzeit Namensgebungsdienst Dns-Nicht-Gecached-Nachschlagzeit Datenbankdienst Gesamt-DB-Antwortzeit Dateitransferdienst Gesamt-Ftp-Antwortzeit Dateitransferdienst Ftp-Put-Rate Dateitransferdienst Ftp-Get-Rate Sicherheitsdienst Radius-Authentifizierungszeit - Das Verfahren beginnt bei einem Schritt
200 . Bei einem Schritt202 wird ein Test definiert, der durch einen Agenten104n durchgeführt werden soll. Typischerweise definiert ein Benutzer den Test unter Verwendung einer GUI116n . Eine Testdefinition weist allgemein Angaben des Folgenden auf: 1) was abzutasten ist; 2) wie oft abzutasten ist; 3) eine Angabe der Anzahl von Name-Wert-Paaren („M”), die mit der Datenstruktur gespeichert werden sollen; und 4) einen Algorithmus, um einen repräsentativen Wert und einen Restwert auszuwählen. - „Was abzutasten ist”, auch die „Quelle” genannt, weist allgemein einen gewissen Dienst, oder (ein) Element(e), das (die) zu dem Dienst beiträgt (beitragen), auf, der in dem Dienstmodell
114 abgebildet ist. Die Quelle könnte jedoch auch Datenbanken sein, wie beispielsweise die Datenbank112 , die Daten oder Informationen hinsichtlich des Testsystems enthalten. Es ist ferner möglich, dass die Quelle ein anderer Prozess ist, der nach Informationen schürft. Ein Prozess könnte beispielsweise entworfen sein, um eine Vielfalt von Systemen auf Fehlerbedingungen hin zu überwachen und die Auftretensfälle aufgezählter Fehler für jeden Benutzer zusammenzufassen. - „Wie oft abzutasten ist” kann eine Frequenz bzw. Häufigkeit umfassen, die die „Messungsfrequenz” genannt wird, z. B. 5 Minuten. In diesem Fall würde der Test Daten von der Quelle in fünfminütigen Intervallen abtasten. Allgemein würde ein TopN-Objekt für jedes Datenabtastintervall gebildet.
- Gemäß zumindest einem Ausführungsbeispiel der vorliegenden Erfindung werden „M” Name-Wert-Paare aus dem Gesamtabtastwertraum ausgewählt und in dem TopN-Objekt gespeichert. Die „M” Name-Wert-Paare sind typischerweise ausgewählt, um die „oberen” Name-Wert-Paare zu sein. Die Bestimmung der oberen „M” Name-Wert-Paare kann in Echtzeit oder offline unter Verwendung einer gespeicherten Version des Abtastwertraums vorgenommen werden. Aufgrund des Datenvolumens für viele Name-Wert-Paare ist eventuell Echtzeit die einzige Option. Der Ausdruck ,obere „M” Name-Wert-Paare' kann irgendeine erforderliche Definition annehmen, aber bezieht sich allgemein auf die Name-Wert-Paare, bei denen der Wert unter den M größten oder geringsten Beträgen des Abtastwertraums ist. Durch lediglich ein Speichern von „M” Name-Wert-Paaren kann ein Speicherplatz wesentlich reduziert werden, was die Option eines Beibehaltens der TopN-Objekte für Zeitdauern von Monaten oder sogar Jahren liefert.
- Der repräsentative Wert ist ein Wert, der die Werte in dem gesamten Abtastwertraum darstellt. Während die Auswahl eines geeigneten Algorithmus automatisiert sein kann, kann es sich als bevorzugt erweisen, zu ermöglichen, dass der Endbenutzer den Prozess zum Bestimmen des repräsentativen Werts für jedes Objekt definiert. In einigen Situationen beispielsweise kann sich ein Durchschnitt der Werte in dem TopN-Satz als ein bevorzugter repräsentativer Wert erweisen, während in anderen Situationen der Maximal- oder Minimalwert in dem TopN-Satz sich als bevorzugt erweisen kann. In noch anderen Situationen können sich andere Verfahren als vorteilhaft erweisen, wie beispielsweise der Median oder die Standardabweichung der Werte in dem Gesamtabtastwertraum. Die Berechnung eines repräsentativen Werts liefert eine Anzahl von Vorteilen, einschließlich der Fähigkeit, TopN-Objekte unter Verwendung irgendeiner, anderen Messungstypen verfügbaren Funktion zu verarbeiten, wie beispielsweise einer Schwellenwertbestimmung, einer Erzeugung von Basislinien, einer Aggregation und einer Intervallbildung.
- Der Restwert ist ein einziger numerischer Wert, der die Abtastwerte in dem Gesamtabtastwertraum darstellt, die nicht in der Gruppe von „M” Name-Wert-Paaren gespeichert sind. Der Restwert kann, aber muss nicht notwendigerweise unter Verwendung des gleichen Verfahrens berechnet werden, das verwendet wird, um den repräsentativen Wert zu berechnen. Der Restwert liefert eine Vorstellung einer Skala für die TopN Name-Wert-Paare und den repräsentativen Wert.
- Als Nächstes werden bei einem Schritt
204 die Testdefinitionen dem geeigneten Agenten (den geeigneten Agenten)104n gesendet. Bei einem Schritt206 sammeln die Agenten den Gesamtabtastwertraum oder greifen anderweitig auf denselben zu und führen den Test durch. Allgemein wird ein einziges TopN-Objekt für jede Messungsfrequenz erzeugt. Abhängig von der Beschaffenheit des Tests jedoch ist es möglich, ein einziges Objekt für den gesamten Test oder sogar einige mehrere Intervalle zu erzeugen. Es ist zu beachten, dass sogar einfache Tests ein Objekt erzeugen können, das mehrere Tausend Name-Wert-Paare für jede Messungsfrequenz enthält. Als Nächstes wird bei einem Schritt208 das TopN-Objekt mit einem Zeitstempel versehen. Danach wird bei einem Schritt210 ein repräsentativer Wert für den gesamten Testraum gemäß einem bei dem Schritt204 ausgewählten Verfahren berechnet. Als Nächstes wird bei einem Schritt212 ein Restwert gemäß einem bei dem Schritt204 ausgewählten Verfahren berechnet. - Bei einem Schritt
214 werden die oberen „M” Name-Wert-Paare in dem TopN-Objekt gespeichert. Als Nächstes wird bei einem Schritt216 das TopN-Objekt zu dem DMS übertragen. Bei einem Schritt218 wird eine Bestimmung dessen vorgenommen, ob das Verfahren durch den Benutzer angehalten wurde. Falls das Verfahren nicht angehalten wurde, wird eine Rückkehr zu dem Schritt206 vorgenommen. Wenn der Test einmal angehalten ist, endet das Verfahren bei einem Schritt220 . - Tabelle 2 ist eine Darstellung möglicher Inhalte eines TopN-Objekts. TABELLE 2
repräsentativer Wert 12 Restwert 2 Name Wert Login-Fehler – Joe 12 Login-Fehler – Sue 5 Systemfehler – Sally 2 I/O-Fehler – Bill 1 Verfahren Zeitstempel erlangen repräsentativen Wert erlangen Restwert erlangen Name-Wert-Paare erlangen geordnete Name-Wert-Paare erlangen anderen Wert erlangen Intervalle bilden - Das in Tabelle 2 gezeigte TopN-Objekt beginnt mit dem repräsentativen Wert und dem Restwert. Es ist zu beachten, dass, während der Rest während der Bildung des TopN-Objekts berechnet werden sollte, abhängig von dem ausgewählten Verfahren der repräsentative Wert nicht berechnet werden muss und nicht einmal mit dem TopN-Objekt gespeichert sein muss, solange die Anzahl von Name-Wert-Paaren bekannt ist (kann als ein Teil des TopN-Objekts gespeichert sein). Nach dem repräsentativen und dem Restwert kommen die „M” Name-Wert-Paare. Wie es angemerkt ist, kann der Name irgendeine beliebige Textzeichenfolge sein, während der Wert typischerweise ein Skalarwert ist. Danach kommt ein Satz von Verfahren, die durch das TopN-Objekt vorgesehen sind.
- Tabelle 3 enthält ein Segment eines selbstdokumentierten JAVA-Code, der die Schnittstelle mit den in Tabelle 2 dargelegten Verfahren beschreibt.
-
3 ist ein Flussdiagramm eines Verfahrens gemäß einem Ausführungsbeispiel der vorliegenden Erfindung. Genauer gesagt stellt3 ein Verfahren dar, das durch einen DMS (wie beispielsweise den DMS102 ) verwendet werden kann, um TopN-Objekte zu verarbeiten, die von einem Agenten (von Agenten)104n empfangen werden. Ein Vorteil von Ausführungsbeispielen der vorliegenden Erfindung ist die begrenzte Menge an Codeänderungen, die an existierenden DMSs und Agenten notwendig sind, um zu ermöglichen, dass dieselben TopN-Objekte handhaben. Durch ein Verwenden des repräsentativen Werts, der dem TopN-Objekt zugeordnet ist, als einen Skalarwert können existierende Prozesse, wie beispielsweise eine Graphenbildung, eine Schwellenwertbestimmung und eine Basislinienerzeugung an TopN-Objekten ohne eine erhebliche Modifikation existierender Prozesse durchgeführt werden. - Das Verfahren beginnt bei einem Schritt
300 . Bei einem Schritt302 empfängt der DMS ein TopN-Objekt von einem Agenten. Als Nächstes aktualisiert bei einem Schritt304 der DMS Basislinien, die für den Test definiert sind, der ein TopN-Objekt erzeugte. Die Basislinie kann unter. Verwendung eines repräsentativen Werts aktualisiert werden, was die Verwendung existierender Basislinienerzeugungsverfahren gestattet. Der DMS kann ferner eine Aktualisierung zu irgendeiner GUI schieben, die gegenwärtig eine Anzeige aufweist, die der Basislinie zugeordnet ist. - Als Nächstes wird bei einem Schritt
306 eine Bestimmung dahingehend vorgenommen, ob der repräsentative Wert eine voreingestellte Schwelle überschritten hat. Falls eine Schwelle überschritten wurde, geht das Verfahren zu einem Schritt308 über, andernfalls geht das Verfahren zu einem Schritt312 über. Bei dem Schritt308 wird ein Ereignis ausgelöst. Als Nächstes wird der Gesundheitszustand der geeigneten Elemente in dem Dienstmodell bei einem Schritt310 aktualisiert. Der DMS kann ferner eine Aktualisierung zu irgendeiner GUI schieben, die gegenwärtig eine Anzeige aufweist, die dem Gesundheitszustand zugeordnet ist. Danach geht das Verfahren zu dem Schritt312 über. Bei dem Schritt312 wird das TopN-Objekt zu einer Speicherung gesendet, wie beispielsweise der Datenbank112 . Das Verfahren endet dann bei einem Schritt314 . - Ein Vorteil bestimmter Ausführungsbeispiele der vorliegenden Erfindung ist die Bildung von Werten, die den Datenraum darstellen, der durch das TopN-Objekt zusammengefasst ist, wie beispielsweise der repräsentative Wert und der Rest. Ein dritter Wert, der sich als nützlich erweisen kann, ist der „andere” Wert. Wie es hierin verwendet wird, bezieht sich der „andere” Wert auf einen Wert, der Werte in dem Abtastwertraum, aber nicht in den angezeigten Werten (gewöhnlich den oberen „N”) enthalten darstellt. Tabelle 4 liefert eine Zusammenfassung der Beziehung unter den verschiedenen hierin erörterten Werten.
- Die Berechnung eines repräsentativen Werts, eines Restwerts und eines anderen Werts erleichtert die Verwendung einer existierenden OSS-Funktionalität, um TopN-Objekte zu analysieren und auf dieselben zu reagieren. In vielen Fällen werden repräsentative Werte einfach zu existierenden Routinen zum Verarbeiten geleitet, als ob dieselben anderweitig normale Messungen wären. Der andere Wert kann in Zuordnung mit den oberen „M” Name-Wert-Paaren angezeigt werden, um eine Vorstellung eines Maßstabs zu liefern. In vielen Situationen, selbst wenn der Abtastwertraum Tausende von Name-Wert-Paaren umfasst, weist eine kleine Anzahl von Name-Wert-Paaren (z. B. drei oder fünf) einen Wert auf, der erheblich außerhalb der verbleibenden Werte liegt. Durch ein Anzeigen einer Darstellung des anderen Werts können Benutzer feststellen, ob dieselben einen geeigneten Wert für „N” ausgewählt haben, d. h. dass dieselben diese Name-Wert-Paare betrachten, die eine Betrachtung am meisten verdienen.
- Wenn einmal ein TopN-Objekt gebildet wurde, können zusätzliche Operationen unternommen werden, wie beispielsweise eine Aggregation und eine Intervallbildung.
- Eine Aggregation ist die Erzeugung eines einzigen TopN-Messungsobjekts, das eine Reihe von TopN-Messungsobjekten darstellt. Im Allgemeinen betrifft dies ein Bestücken des angehäuften Objekts mit Name-Wert-Paaren mit den Objektnamen und einem repräsentativen Wert aus jedem der Objekte, die angehäuft werden. Der repräsentative und der Restwert würden basierend auf einem ausgewählten Algorithmus berechnet. TABELLE 5 stellt beispielsweise vier Objekte dar, die angehäuft werden, und TABELLE 6 stellt das angehäufte Objekt dar, wobei der repräsentative Wert durch ein Auswählen des Maximalwerts aus den Name-Wert-Paaren berechnet ist. TABELLE 5
Objekt 1 Objekt 2 repräsentativ 0,7 repräsentativ 0,6 schlechter Käse 3 schlechter Tee 2 schlechter Bagel 2 schlechter Bagel 1 schlechter Kaffee 2 Rest 2 Rest 2 Objekt 3 Objekt 4 repräsentativ 0,5 repräsentativ 0,75 schlechte Donuts 7 schlechter Käse 9 schlechter Tee 3 schlechte Bagel 4 Rest 10 schlechte Scones 2 Rest 5 angehäuftes Objekt repräsentativer Wert 0,75 Objekt 4 0,75 Objekt 1 0,7 Objekt 2 0,6 Objekt 3 0,5 Rest (kein) - Intervallbildung ist die Erzeugung eines einzigen TopN-Messungsobjekts aus einem Satz von TopN-Objekten. Bei einer Intervallbildung jedoch werden die Name-Wert-Paare unter Verwendung des TopN-Algorithmus bewahrt und kombiniert. Dies erleichtert das Anzeigen von Daten unter Verwendung unterschiedlicher Messungsintervalle, z. B. ein Nehmen von 3 fünfminütigen TopN-Objekten und ein Erzeugen eines einzigen 15-minütigen TopN-Objekts. TABELLEN 7 und 8 stellen eine Intervallbildung dar. In diesem Fall stellen Objekt 1 und Objekt 2 10 Abtastwerte dar, während Objekt 3 20 Abtastwerte darstellt. Die Objekte sind entworfen, um die Fehlerrate aufzunehmen bzw. zu erfassen, z. B. die Anzahl von schlechten Posten in dem Abtastwertraum. Die repräsentativen Werte kann man sich als eine Fehlerrate vorstellen. Unter Verwendung von Objekt 1 als ein Beispiel wird der repräsentative Wert durch ein Dividieren von 7 (der Gesamtanzahl schlechter Posten (Fehler)) durch 10 (den gesamten Abtastwertraum) berechnet. Der repräsentative Wert des neuen Objekts wird durch ein Mitteln der repräsentativen Werte der Gewichtung der einzelnen Objekte basierend auf der Anzahl von Abtastwerten in jedem Objekt berechnet. TABELLE 7
Objekt 1 Objekt 2 repräsentativer Wert 0,7 repräsentativer Wert 0,9 schlechter Käse 3 schlechter Tee 5 schlechte Bagel 2 schlechte Bagel 4 schlechter Kaffee 2 Rest 0 Rest 0 Objekt 3 repräsentativer Wert 0,6 schlechte Donuts 7 schlechter Tee 3 schlechte Scones 2 Rest 0 mit Intervallen versehenes Objekt repräsentativer Wert 0,7 schlechter Tee 8 schlechte Donuts 7 schlechte Bagel 6 schlechter Käse 3 schlechter Kaffee 2 schlechtre Scones 2 Rest (kein) - Wenn TopN-Objekte einmal gebildet (und möglicherweise angehäuft und mit Intervallen versehen) wurden, können Anzeigen erzeugt werden, um den Benutzer mit nützlichen Informationen basierend auf den Name-Wert-Paaren und Daten, die in den Objekten enthalten sind, zu versehen.
4 bis7 enthalten ein Beispiel von Anzeigen, die unter Verwendung von TopN-Daten präsentiert werden können, die gemäß dem in2 gezeigten Verfahren gebildet werden.4 bis8 wurden unter Verwendung des QOS MANAGER von AGILENT erzeugt, doch Durchschnittsfachleute auf dem Gebiet erkennen die Anwendbarkeit von Ausführungsbeispielen der vorliegenden Erfindung auf andere Messungssysteme, einschließlich vieler, wenn nicht aller konkurrierender OSSe. -
4 ist eine Darstellung eines Bildschirms400 , der einen Graphen406 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt. In4 hat der Benutzer einen TopN-Aggregat-Messungsknoten404 in der Diensteansicht402 ausgewählt, der in einem Graph406 der Name-Wert-Paare eines TopN-Messungsobjekts resultierte. Der Graph406 ist einer von einer Vielfalt möglicher Graphentypen, die für die Anzeige von TopN-Daten geeignet sind. Genauer gesagt ist der Graph406 ein Histogrammgraph von ,Name-Wert'-Paaren, die in dem TopN-Messungsobjekt gespeichert sind. Der Benutzer kann die Anzahl (d. h. das „N”) von Paaren auswählen, die angezeigt werden sollen. Balken408a bis408i liefern die Gesamtantwortzeit für Http-Server, die die oberen Antwortzeiten zeigen (was sich in diesem Fall in die schlechteste Leistungsfähigkeit übersetzt). Der Balken410 entspricht einem „anderen” Wert, der die Antwortzeiten in dem Gesamtabtastwertraum darstellt, die aber nicht einzeln in der Anzeige gezeigt sind. Der andere Wert kann basierend auf dem gleichen Algorithmus wie der repräsentative Wert berechnet sein. In4 stellt der andere Wert die Summe der Antwortzeiten in dem Gesamtabtastwertraum dar, die nicht einzeln in der Anzeige gezeigt sind. -
5 ist eine Darstellung eines Bildschirms500 , der einen Graphen506 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt. In5 hat der Benutzer einen TopN-Messungsknoten504 in der Diensteansicht502 ausgewählt, der in einem Graph506 mehrerer TopN-Messungsobjekte resultierte. Jeder Balken508n stellt die ,Name-Wert'-Paare in einem einzigen TopN-Messungsobjekt dar. Der Graph506 ist ein Zeitreihengraph der ,Name-Wert'-Paare, die als ein gestapelter Balken für jeden Zeitpunkt in dem Graphen angezeigt sind. Um ein Wirrwarr zu reduzieren, kann das Auswahlverfahren eingesetzt werden, um die Anzahl von Name-Wert-Paaren zu begrenzen, die über den Graphen hinweg gezeigt sind. In diesem Fall hat der Benutzer ein Auswahlverfahren angefordert, das die oberen zwei (z. B. N = 2) Server (z. B. die zwei Server, die die schlechteste Antwort zeigen) aus dem letzten Zeitintervall auswählt. Für jedes der vorhergehenden Intervalle sind die Werte für eine Anzeige ausgewählt, die den zwei identifizierten Servern entsprechen (wie es durch den „Namen” des Name-Wert-Paars beschrieben ist) – ungeachtet dessen, ob dieselben bei den oberen „M” für dieses Intervall sind. In diesem Fall betrug das Anzeigeintervall für die Name-Wert-Paare fünf Minuten, was insgesamt 13 Balken ergibt. - Das Auswahlverfahren, um zu wählen, welche Name-Wert-Paare aus den verschiedenen Objekten anzuzeigen sind, kann entweder durch den Benutzer oder den Programmierer kundenspezifisch gemacht werden. Andere Auswahlverfahren können mit Bezug auf den in
5 gezeigten Graphen verwendet werden. Zum Beispiel können die oberen „M” aus dem ersten Objekt ausgewählt werden. Alternativ können die oberen „M” aus jedem Objekt ausgewählt und entweder als eine Gruppe für jeden Balken in dem Graphen oder nur in dem Balken des zugehörigen Objekts angezeigt werden. Die oberen „M” aus dem Objekt, das den größten oder kleinsten repräsentativen Wert aufweist, ist noch ein anderer Auswahlmechanismus. Noch ein anderes Beispiel eines Auswahlmechanismus bestünde darin, jeden der Werte für jeden Server über die angeforderte Zeitperiode hinweg zu summieren und die Server mit der oberen und der unteren „M”-Summe auszuwählen (wobei die Zeiten für jeden Server über die angezeigte Zeitperiode mehr oder weniger integriert werden). Andere Auswahlverfahren können verwendet werden und die vorliegende Erfindung ist nicht auf die aufgezählten Verfahren begrenzt. -
6 ist eine Darstellung eines Bildschirms600 , der einen Graphen606 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt. In6 hat der Benutzer einen TopN-Messungsknoten604 in der Diensteansicht602 ausgewählt, der in einem Graphen606 resultierte. Die TopN-Messung wurde als ein Messungsgraph durch ein Anzeigen des repräsentativen Werts der TopN-Messung über der Zeitperiode angezeigt. Durch ein Verwenden eines einzigen numerischen Werts, um die TopN-Messungsobjekte darzustellen, können komplexe Objekte verarbeitet werden, als ob dieselben einfache numerische Daten wären. Dies ermöglicht die Verwendung aktueller Dienste, die durch das OSS vorgesehen sind, beispielsweise eine Basislinienerzeugung und Schwellenwertbestimmung – die beide in6 dargestellt sind. In6 sind Schwellenwertwarnung, Kleiner, Größer und Kritisch an dem Graphen gezeigt. Basislinienberechnungen sind ebenfalls als Balken neben jedem repräsentativen Wert angezeigt (Wert rechts, Basislinie links). -
7 ist eine Darstellung eines Bildschirms700 , der einen Graph706 gemäß einem Ausführungsbeispiel der vorliegenden Erfindung anzeigt. In7 hat der Benutzer ein Ereignis703 in einer Ereignisse-Ansicht701 ausgewählt, das bewirkte, dass der geeignete Messungsknoten704 in der Diensteansicht702 ausgewählt wird. Dies bewirkte wiederum, dass ein Graph706 der Werte während der Zeitperiode, in der das Ereignis auftrat, angezeigt wird. Der Graph706 ist ein typischer Messungsgraph diskreter Werte über einer Zeitperiode. Wie bei6 werden die repräsentativen Werte der verschiedenen TopN-Objekte verwendet, um den Messungsgraph706 zu erzeugen. Bei den meisten OSS-Systemen, wie beispielsweise dem QOS MANAGER von AGILENT, werden Ereignisse erzeugt, wenn ein Wert (in diesem Fall der repräsentative Wert) einen Schwellenwert für diesen Wert überschreitet. - Obwohl einige Ausführungsbeispiele der vorliegenden Erfindung gezeigt und beschrieben wurden, ist Fachleuten auf dem Gebiet ersichtlich, dass Veränderungen an diesen Ausführungsbeispielen vorgenommen werden können, ohne von den Prinzipien und der Wesensart der Erfindung abzuweichen, deren Schutzbereich in den Ansprüchen und den Äquivalenten derselben definiert ist.
Claims (19)
- Verfahren zum Betreiben eines Computersystems (
100 ), um ein Netzwerk zu charakterisieren, wobei das Computersystem (100 ) einen Zentralcomputer (102 ) und eine Mehrzahl von Agenten (104a –104c ) umfasst, welche Messungen von Transaktionen durchführen, die auf dem Netzwerk stattfinden, wobei jeder Agent (104a –104c ) unabhängig von anderen der Agenten arbeitet, wobei das Verfahren folgende Schritte umfasst: Bewirken, dass jeder Agent (104a –104c ) eine Reihe von Messungen über eine Zeitperiode durchführt (204 ) und einen repräsentativen Wert berechnet (210 ), der durch alle Messungen bestimmt ist, die während der Zeitperiode durchgeführt wurden, und einen vorbestimmten Teilsatz der Messungen, die während der Zeitperiode durchgeführt wurden, speichert (312 ), wobei sich jede Messung auf das Netzwerk bezieht und durch eine Name-Wert-Paar charakterisiert ist, und wobei jeder Agent (104a –104c ) jede durch diesen Agenten durchgeführte Messung mit einem vorbestimmten Kriterium vergleicht (306 ), um zu bestimmen, ob die Messung eine der gespeicherten Messungen ersetzen soll; und Bewirken, dass jeder Agent (104a –104c ) den gespeicherten Teilsatz der Messungen und den repräsentativen Wert an den Zentralcomputer (102 ) ansprechend auf ein vorbestimmtes Ereignis überträgt (216 ). - Verfahren gemäß Anspruch 1, bei dem der Agent die Speicherung und Übertragung des Teilsatzes der Messungen und des repräsentativen Wertes durch Speichern des Teilsatzes und des repräsentativen Wertes in einer vorbestimmten Datenstruktur und Übertragen der Datenstruktur an den Zentralcomputer (
102 ) durchführt. - Verfahren gemäß Anspruch 2, bei dem der Zentralcomputer (
102 ) eine Mehrzahl der vorbestimmten Datenstrukturen sammelt, um eine gesammelte Datenstruktur zu erzeugen. - Verfahren gemäß Anspruch 1, mit, mit folgendem Schritt: Bewirken, dass jeder Agent (
104a –104c ) einen Restwert berechnet, der durch die Messungen bestimmt ist, die während der Zeitperiode durchgeführt wurden, die nicht in dem vorbestimmten Teilsatz enthalten sind. - Verfahren gemäß Anspruch 1, bei dem der Teilsatz entweder durch Auswählen lediglich der M Name-Wert-Paare mit den M größten Werten, die innerhalb der Zeitperiode gemessen wurden, oder durch Auswählen lediglich der M Name-Wert-Paare mit den M kleinsten Werten, die während der Zeitperiode gemessen wurden, bestimmt wird.
- Verfahren gemäß Anspruch 1, bei dem der repräsentative Wert aus der Gruppe ausgewählt ist, die den größten Wert, der während der Zeitperiode gemessen wurde, den kleinsten Wert, der während der Zeitperiode gemessen wurde, den Durchschnitt der Werte, die während der Zeitperiode gemessen wurden, und die Summe aller Werte, die während der Zeitperiode gemessen wurden, umfasst.
- Verfahren gemäß Anspruch 1, mit folgendem Schritt: Anzeigen einer Graphik basierend auf einem Teilsatz des gespeicherten Teilsatzes der Messungen.
- Verfahren gemäß Anspruch 2, bei dem der Zentralcomputer (
102 ) eine Mehrzahl der vorbestimmten Datenstrukturen mit einem Intervall versieht, um eine mit Intervallen versehene Datenstruktur zu erzeugen. - Verfahren gemäß Anspruch 1, mit folgendem Schritt: Bewirken, dass jeder Agent (
104a –104c ) einen Restwert berechnet, der durch alle Messungen bestimmt ist, die während der Zeitperiode durchgeführt wurden, außer denjenigen Messungen in dem vorbestimmten Teilsatz. - Verfahren gemäß Anspruch 9, bei dem der Restwert aus der Gruppe ausgewählt ist, die folgendes umfasst: den größten der in der Zeitperiode gemessenen Werte, der nicht in dem vorbestimmten Teilsatz enthalten ist; den kleinsten der in der Zeitperiode gemessenen Werte, der nicht in dem vorbestimmten Teilsatz enthalten ist; den Durchschnitt der während der Zeitperiode gemessenen Werte, die nicht in dem vorbestimmten Teilsatz enthalten sind; und die Summe der in der Zeitperiode gemessenen Werte, die nicht in dem vorbestimmten Teilsatz enthalten sind.
- Verfahren gemäß Anspruch 1, mit folgendem Schritt: Erzeugen eines Balkengraphen mit zumindest einem segmentierten Balken mit „M” Segmenten, die die jeweiligen Werte eines Teilsatzes des gespeicherten Teilsatzes von Messungen mit den oberen „M” Werten, die während der Zeitperiode gemessen wurden, darstellt, und mit zumindest einem Segment, das einen ersten anderen Wert darstellt, der durch alle während der Zeitperiode durchgeführten Messungen außer denjenigen, die die oberen „M” Werte umfassen, bestimmt wurde.
- Verfahren gemäß Anspruch 11, mit folgendem Schritt: Bewirken, dass jeder Agent (
104a –104c ) eine zweite Reihe von Messungen über eine zweite Zeitperiode durchführt und einen zweiten vorbestimmten Teilsatz der zweiten Reihe von Messungen speichert, wobei sich jede Messung auf das Netzwerk bezieht und durch eine Name-Wert-Paar gekennzeichnet ist, und wobei jeder Agent (104a –104c ) jede durch diejenigen Agenten durchgeführte Messung mit einem vorbestimmten Kriterium vergleicht, um zu bestimmen, ob die Messung eine der gespeicherten Messungen ersetzen soll; und Bewirken, dass jeder Agent (104a –104c ) einen zweiten anderen Wert berechnet, der durch alle die Messungen während der zweiten Zeitperiode außer denjenigen, die die oberen „N” Werte, die während der zweiten Messperiode gemessen wurden, bestimmt wird; und wobei der Schritt zur Erzeugung eines Balkengraphen das Erzeugen eines Balkengraphen mit zumindest zwei segmentierten Balken umfasst, wobei der erste segmentierte Balken die „N” Name-Wert-Paare mit den oberen „N” Werten, die während der ersten Zeitperiode gemessen wurden und den ersten anderen Wert darstellt, und wobei der zweite segmentierte Balken die „M” Name-Wert-Paare mit den oberen „M” Werten, die in der zweiten Zeitperiode gemessen wurden und den zweiten anderen Wert darstellt. - Verfahren gemäß Anspruch 1, mit folgendem Schritt: Bewirken, dass jeder Agent (
104a –104c ) einen anderen Wert berechnet, der durch alle die Messungen während der vorbestimmten Zeitperiode außer denjenigen, die die oberen „N” gemessenen Werte aufweisen, bestimmt wird, wobei „N” niedriger ist als die Anzahl der Name-Wert-Paare in dem gespeicherten Teilsatz. - OSS-System, mit: einem Computersystem (
100 ), das ein oder mehrere Software-Programme ausführt, wobei das Computersystem einen Zentralcomputer (102 ) und eine Mehrzahl von Agenten (104a –104c ) umfasst, die Messungen von Transaktionen durchführen, die auf dem Netzwerk stattfinden, wobei jeder Agent (104a –104c ) unabhängig von anderen der Agenten und unabhängig von dem Zentralcomputer (102 ) arbeitet, wobei jeder Agent (104a –104c ) eine Reihe von Messungen über eine Zeitperiode durchführt und eine vorbestimmte Datenstruktur erzeugt, wobei die Datenstruktur einen vorgeschriebenen Teilsatz der Messungen in einer vorbestimmten Datenstruktur, einen repräsentativen Wert, der durch alle während der Zeitperiode durchgeführten Messungen bestimmt ist, und einen Restwert, der durch alle die Messungen außer denen in dem vorbestimmten Teilsatz bestimmt ist, umfasst, wobei sich jede Messung auf das Netzwerk bezieht und durch ein Name-Wert-Paar gekennzeichnet ist, und wobei jeder Agent (104a –104c ) jede Messung, die durch diesen Agenten durchgeführt wurde, mit einem vorbestimmten Kriterium vergleicht, um zu bestimmen, ob die Messung eine der Messungen in der Datenstruktur ersetzen soll. - OSS-System gemäß Anspruch 14, mit: einem Datenbank-System (
112 ), in dem der Zentralcomputer (102 ) die Datenstrukturen, die durch die Agenten (104a –104c ) erzeugt wurden, speichert. - OSS-System gemäß Anspruch 14, mit: einer graphischen Benutzerschnittstelle (
116a ,166b ), die angepasst ist, um Graphiken basierend auf den von den Agenten (104a –104c ) erzeugten Datenstrukturen zu erzeugen. - OSS-System gemäß Anspruch 16, bei dem die graphische Benutzerschnittstelle (
116a ,116b ) eine Balkengraphenanzeige mit einem einzelnen Balken für jeden repräsentativen Wert jeder Datenstruktur erzeugt. - OSS-System gemäß Anspruch 16, bei dem die graphische Benutzerschnittstelle (
116a ,116b ) einen Balkengraphen für eine einzelne Datenstruktur erzeugt, wobei ein Balken für jedes Name-Wert-Paar eines Teilsatzes des vorbestimmten Teilsatzes von Messungen in der Datenstruktur vorgesehen ist, wobei der Datensatz lediglich die „M” Name-Wert-Paare mit den „M” oberen Werten einschließt. - OSS-System gemäß Anspruch 18, bei dem der Balkengraph einen Balken einschließt, der alle Werte der Name-Wert-Paare der während der Zeitperiode durchgeführten Messung außer denjenigen mit den „M” oberen Werten repräsentativ ist.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US11/045,819 | 2005-01-28 | ||
US11/045,819 US8108510B2 (en) | 2005-01-28 | 2005-01-28 | Method for implementing TopN measurements in operations support systems |
Publications (2)
Publication Number | Publication Date |
---|---|
DE102005050315A1 DE102005050315A1 (de) | 2006-08-10 |
DE102005050315B4 true DE102005050315B4 (de) | 2013-08-14 |
Family
ID=36060933
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102005050315A Active DE102005050315B4 (de) | 2005-01-28 | 2005-10-20 | Verfahren zum Implementieren von Topn-Messungen bei Betriebsunterstützungssystemen |
Country Status (4)
Country | Link |
---|---|
US (1) | US8108510B2 (de) |
AU (1) | AU2005203446A1 (de) |
DE (1) | DE102005050315B4 (de) |
GB (1) | GB2422694B (de) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9806976B2 (en) | 2012-05-22 | 2017-10-31 | Telecom Italia S.P.A. | Time measurement on a packet flow in a packet-switched communication network |
US10104256B2 (en) * | 2015-07-31 | 2018-10-16 | Kyocera Document Solutions Inc. | Electronic device that ensures reduced power consumption, electric power control method, and recording medium |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000067507A1 (en) * | 1999-05-04 | 2000-11-09 | Telefonaktiebolaget Lm Ericsson (Publ) | Terminal assisted management for radiocommunication systems |
US6336138B1 (en) * | 1998-08-25 | 2002-01-01 | Hewlett-Packard Company | Template-driven approach for generating models on network services |
US20040221202A1 (en) * | 2003-05-01 | 2004-11-04 | Blaine Nye | High level operational support system |
Family Cites Families (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7663502B2 (en) * | 1992-05-05 | 2010-02-16 | Intelligent Technologies International, Inc. | Asset system control arrangement and method |
US5860136A (en) * | 1989-06-16 | 1999-01-12 | Fenner; Peter R. | Method and apparatus for use of associated memory with large key spaces |
US5553235A (en) * | 1992-10-23 | 1996-09-03 | International Business Machines Corporation | System and method for maintaining performance data in a data processing system |
US6334219B1 (en) * | 1994-09-26 | 2001-12-25 | Adc Telecommunications Inc. | Channel selection for a hybrid fiber coax network |
US5715468A (en) * | 1994-09-30 | 1998-02-03 | Budzinski; Robert Lucius | Memory system for storing and retrieving experience and knowledge with natural language |
US6983227B1 (en) * | 1995-01-17 | 2006-01-03 | Intertech Ventures, Ltd. | Virtual models of complex systems |
US7146408B1 (en) * | 1996-05-30 | 2006-12-05 | Schneider Automation Inc. | Method and system for monitoring a controller and displaying data from the controller in a format provided by the controller |
US6003079A (en) * | 1997-02-27 | 1999-12-14 | Hewlett Packard Company | System and method for continuously measuring quality of service in a federated application environment |
US6578077B1 (en) * | 1997-05-27 | 2003-06-10 | Novell, Inc. | Traffic monitoring tool for bandwidth management |
US6363421B2 (en) * | 1998-05-31 | 2002-03-26 | Lucent Technologies, Inc. | Method for computer internet remote management of a telecommunication network element |
WO1999065184A2 (en) * | 1998-06-05 | 1999-12-16 | British Telecommunications Public Limited Company | Accounting in a communications network |
US6157955A (en) * | 1998-06-15 | 2000-12-05 | Intel Corporation | Packet processing system including a policy engine having a classification unit |
US6370572B1 (en) * | 1998-09-04 | 2002-04-09 | Telefonaktiebolaget L M Ericsson (Publ) | Performance management and control system for a distributed communications network |
US6425525B1 (en) * | 1999-03-19 | 2002-07-30 | Accenture Llp | System and method for inputting, retrieving, organizing and analyzing data |
US6748440B1 (en) * | 1999-05-12 | 2004-06-08 | Microsoft Corporation | Flow of streaming data through multiple processing modules |
WO2000075788A1 (en) * | 1999-05-26 | 2000-12-14 | Fujitsu Network Communications, Inc. | Network element management system |
US7185075B1 (en) * | 1999-05-26 | 2007-02-27 | Fujitsu Limited | Element management system with dynamic database updates based on parsed snooping |
US7203962B1 (en) * | 1999-08-30 | 2007-04-10 | Symantec Corporation | System and method for using timestamps to detect attacks |
US7716077B1 (en) * | 1999-11-22 | 2010-05-11 | Accenture Global Services Gmbh | Scheduling and planning maintenance and service in a network-based supply chain environment |
US6985901B1 (en) * | 1999-12-23 | 2006-01-10 | Accenture Llp | Controlling data collection, manipulation and storage on a network with service assurance capabilities |
WO2001052118A2 (en) * | 2000-01-14 | 2001-07-19 | Saba Software, Inc. | Information server |
US6721726B1 (en) * | 2000-03-08 | 2004-04-13 | Accenture Llp | Knowledge management tool |
AU2001253043A1 (en) * | 2000-03-31 | 2001-10-15 | Coppercom, Inc. | Telecommunications system and methods |
US7143153B1 (en) * | 2000-11-09 | 2006-11-28 | Ciena Corporation | Internal network device dynamic health monitoring |
US6922685B2 (en) * | 2000-05-22 | 2005-07-26 | Mci, Inc. | Method and system for managing partitioned data resources |
US7113934B2 (en) * | 2000-05-25 | 2006-09-26 | Fujitsu Limited | Element management system with adaptive interfacing selected by last previous full-qualified managed level |
US6681232B1 (en) * | 2000-06-07 | 2004-01-20 | Yipes Enterprise Services, Inc. | Operations and provisioning systems for service level management in an extended-area data communications network |
US20020165962A1 (en) * | 2001-02-28 | 2002-11-07 | Alvarez Mario F. | Embedded controller architecture for a modular optical network, and methods and apparatus therefor |
US6643646B2 (en) * | 2001-03-01 | 2003-11-04 | Hitachi, Ltd. | Analysis of massive data accumulations using patient rule induction method and on-line analytical processing |
US20020164070A1 (en) * | 2001-03-14 | 2002-11-07 | Kuhner Mark B. | Automatic algorithm generation |
US7054866B2 (en) * | 2001-03-20 | 2006-05-30 | Mci, Inc. | Systems and methods for communicating from an integration platform to a provisioning server |
US6609083B2 (en) * | 2001-06-01 | 2003-08-19 | Hewlett-Packard Development Company, L.P. | Adaptive performance data measurement and collections |
US20030133552A1 (en) * | 2001-08-07 | 2003-07-17 | Shyam Pillai | Method and apparatus for integrating disparate telecommunication operational support systems (OSS) and streamlining business processes using a software platform |
US7065588B2 (en) * | 2001-08-10 | 2006-06-20 | Chaavi, Inc. | Method and system for data transformation in a heterogeneous computer system |
AU2002334954B2 (en) * | 2001-10-11 | 2008-07-31 | Omniture, Inc. | System, method, and computer program product for processing and visualization of information |
US7633942B2 (en) * | 2001-10-15 | 2009-12-15 | Avaya Inc. | Network traffic generation and monitoring systems and methods for their use in testing frameworks for determining suitability of a network for target applications |
US6792393B1 (en) * | 2001-12-03 | 2004-09-14 | At&T Corp. | System and method for diagnosing computer system operational behavior |
US7299277B1 (en) * | 2002-01-10 | 2007-11-20 | Network General Technology | Media module apparatus and method for use in a network monitoring environment |
US20050201342A1 (en) * | 2002-03-27 | 2005-09-15 | Randy Wilkinson | Wireless access point network and management protocol |
US7136867B1 (en) * | 2002-04-08 | 2006-11-14 | Oracle International Corporation | Metadata format for hierarchical data storage on a raw storage device |
US8271530B2 (en) * | 2002-04-08 | 2012-09-18 | Oracale International Corporation | Method and mechanism for managing and accessing static and dynamic data |
US7254109B2 (en) * | 2002-07-12 | 2007-08-07 | Baypackets, Inc. | Fault tolerant correlation engine method and system for telecommunications networks |
US20040153382A1 (en) * | 2003-01-31 | 2004-08-05 | Richard Boccuzzi | System and method for determining discrepancies in a communications system |
US20050027858A1 (en) * | 2003-07-16 | 2005-02-03 | Premitech A/S | System and method for measuring and monitoring performance in a computer network |
US7676390B2 (en) * | 2003-09-04 | 2010-03-09 | General Electric Company | Techniques for performing business analysis based on incomplete and/or stage-based data |
WO2005036806A2 (en) * | 2003-10-08 | 2005-04-21 | Unisys Corporation | Scalable partition memory mapping system |
US7557941B2 (en) * | 2004-05-27 | 2009-07-07 | Silverbrook Research Pty Ltd | Use of variant and base keys with three or more entities |
US7313575B2 (en) * | 2004-06-14 | 2007-12-25 | Hewlett-Packard Development Company, L.P. | Data services handler |
US7526322B2 (en) * | 2004-08-18 | 2009-04-28 | Cellco Partnership | Real-time analyst program for processing log files from network elements |
US7529347B2 (en) * | 2004-10-01 | 2009-05-05 | Tollgrade Communications, Inc. | Test system for assessing DSL capability of telephone lines |
US7653180B2 (en) * | 2004-10-01 | 2010-01-26 | Tollgrade Communications, Inc. | Method for assessing DSL capability of telephone lines |
JP4560367B2 (ja) * | 2004-10-05 | 2010-10-13 | 株式会社日立製作所 | ストレージネットワーク性能情報の収集・保存方法及び計算機システム並びにプログラム |
US7817767B2 (en) * | 2004-12-23 | 2010-10-19 | Rambus Inc. | Processor-controlled clock-data recovery |
-
2005
- 2005-01-28 US US11/045,819 patent/US8108510B2/en not_active Expired - Fee Related
- 2005-08-03 AU AU2005203446A patent/AU2005203446A1/en not_active Abandoned
- 2005-10-20 DE DE102005050315A patent/DE102005050315B4/de active Active
-
2006
- 2006-01-26 GB GB0601607A patent/GB2422694B/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6336138B1 (en) * | 1998-08-25 | 2002-01-01 | Hewlett-Packard Company | Template-driven approach for generating models on network services |
WO2000067507A1 (en) * | 1999-05-04 | 2000-11-09 | Telefonaktiebolaget Lm Ericsson (Publ) | Terminal assisted management for radiocommunication systems |
US20040221202A1 (en) * | 2003-05-01 | 2004-11-04 | Blaine Nye | High level operational support system |
Also Published As
Publication number | Publication date |
---|---|
GB2422694A (en) | 2006-08-02 |
DE102005050315A1 (de) | 2006-08-10 |
AU2005203446A1 (en) | 2006-08-17 |
GB0601607D0 (en) | 2006-03-08 |
US8108510B2 (en) | 2012-01-31 |
GB2422694B (en) | 2010-08-18 |
US20060190578A1 (en) | 2006-08-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE60214994T2 (de) | Verfahren und system zur verringerung von falschalarmen in netzwerkfehlermanagementsystemen | |
DE69736399T2 (de) | Verfahren und vorrichtung zur messung des spitzen durchsatzes in datenpacket-netzwerken | |
DE69925557T2 (de) | Überwachung des Durchsatzes eines Computersystems und eines Netzwerkes | |
DE19983761B3 (de) | Vorrichtung und Verfahren zum Sammeln und Analysieren von Kommunikationsdaten | |
DE69637228T2 (de) | Verfahren und vorrichtung zur messung der antwortzeit | |
DE602005000383T2 (de) | Fehlererkennung und -diagnose | |
DE102005050349A1 (de) | Verfahren zur Präsentation mehrerer grafischer Anzeigen bei Betriebsunterstützungssystemen | |
DE69907425T2 (de) | System und Verfahren zum Aufbau von Benutzerprofilen | |
DE60114999T2 (de) | Überwachung von und interaktion mit netzwerkdiensten | |
DE10306294A1 (de) | Vorrichtung und Verfahren zur Unterstützung der Benutzerfreundlichkeits-Evaluierung | |
DE102005020893A1 (de) | System zur adaptiven Bestimmung von Operationseigenschaften einer ausführbaren Anwendung | |
DE102006018232A1 (de) | Dienstqualität in IT-Infrastrukturen | |
WO2003067815A1 (de) | Nachrichtenanalyseeinrichtung und verfahren zum anzeigen von nachrichten | |
DE102005006171A1 (de) | Vorrichtung und Verfahren für eine Ereigniserfassung | |
DE102004048667A1 (de) | Graphische Benutzeroberfläche zum Hinzufügen von Messungen zu bestehendem Verteiltes-Netzwerk-Fehlersuchsystem | |
DE102022201746A1 (de) | Verwaltung von rechenzentren mit maschinellem lernen | |
DE102010028884A1 (de) | Ursachenanalyse für Verarbeitung komplexer Ereignisse | |
DE10306598A1 (de) | Verfahren und Vorrichtung zum Bemessen der Verfügbarkeit komplexer elektronischer Systeme, einschließlich Computersystemen | |
DE60210356T2 (de) | Verwalter von Dienststufenübereinkommen in einem Datennetz | |
DE102005050315B4 (de) | Verfahren zum Implementieren von Topn-Messungen bei Betriebsunterstützungssystemen | |
DE10205762A1 (de) | Verfahren und Struktur zur Charakterisierung von Bayesianischen Belief-Netzwerken | |
EP2634966A1 (de) | Verfahren zum Untersuchen eines Datentransportnetzwerks und Computerprogrammprodukt | |
DE10338073A1 (de) | Verfahren und Vorrichtung zum Vordringen zu Meßdaten von allgemein angezeigten heterogenen Meßquellen | |
DE10306304A1 (de) | Vorrichtung zur Unterstützung der Benutzerfreundlicheits-Evaluierung | |
DE69432481T2 (de) | Verfahren und anordnung zur bestimmung des interferenzrisikos zwischen zwei oder mehreren diensten in einem oder mehreren telekommunikationsnetzwerken |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OP8 | Request for examination as to paragraph 44 patent law | ||
8127 | New person/name/address of the applicant |
Owner name: AGILENT TECHNOLOGIES, INC. (N.D.GES.D. STAATES, US |
|
R016 | Response to examination communication | ||
R018 | Grant decision by examination section/examining division | ||
R081 | Change of applicant/patentee |
Owner name: JDS UNIPHASE CORP. (N. D. GES. D. STAATES DELA, US Free format text: FORMER OWNER: AGILENT TECHNOLOGIES, INC. (N.D.GES.D. STAATES DELAWARE), SANTA CLARA, CALIF., US Effective date: 20130620 Owner name: VIAVI SOLUTIONS INC. (N. D. GES. D. STAATES DE, US Free format text: FORMER OWNER: AGILENT TECHNOLOGIES, INC. (N.D.GES.D. STAATES DELAWARE), SANTA CLARA, CALIF., US Effective date: 20130620 Owner name: JDS UNIPHASE CORP. (N. D. GES. D. STAATES DELA, US Free format text: FORMER OWNER: AGILENT TECHNOLOGIES, INC. (N.D.GES.D. STAATES DELAWARE), SANTA CLARA, US Effective date: 20130620 |
|
R082 | Change of representative |
Representative=s name: SCHOPPE, ZIMMERMANN, STOECKELER, ZINKLER, SCHE, DE Effective date: 20130620 Representative=s name: MURGITROYD & COMPANY, DE Effective date: 20130620 Representative=s name: SCHOPPE, ZIMMERMANN, STOECKELER, ZINKLER & PAR, DE Effective date: 20130620 |
|
R020 | Patent grant now final |
Effective date: 20131115 |
|
R082 | Change of representative |
Representative=s name: MURGITROYD & COMPANY, DE |
|
R081 | Change of applicant/patentee |
Owner name: VIAVI SOLUTIONS INC. (N. D. GES. D. STAATES DE, US Free format text: FORMER OWNER: JDS UNIPHASE CORP. (N. D. GES. D. STAATES DELAWARE), MILPITAS, CALIF., US |
|
R082 | Change of representative |
Representative=s name: MURGITROYD & COMPANY, DE |
|
R079 | Amendment of ipc main class |
Free format text: PREVIOUS MAIN CLASS: H04L0012260000 Ipc: H04L0043000000 |