JP2010257272A - Service evaluation system - Google Patents
Service evaluation system Download PDFInfo
- Publication number
- JP2010257272A JP2010257272A JP2009107281A JP2009107281A JP2010257272A JP 2010257272 A JP2010257272 A JP 2010257272A JP 2009107281 A JP2009107281 A JP 2009107281A JP 2009107281 A JP2009107281 A JP 2009107281A JP 2010257272 A JP2010257272 A JP 2010257272A
- Authority
- JP
- Japan
- Prior art keywords
- service
- sla
- user
- time
- monitoring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000011156 evaluation Methods 0.000 title claims description 8
- 238000012545 processing Methods 0.000 claims description 30
- 238000004458 analytical method Methods 0.000 claims description 9
- 238000012550 audit Methods 0.000 claims description 5
- 238000004891 communication Methods 0.000 claims description 4
- 238000012544 monitoring process Methods 0.000 abstract description 45
- 238000005516 engineering process Methods 0.000 abstract description 2
- 238000000034 method Methods 0.000 description 50
- 238000007726 management method Methods 0.000 description 15
- 238000012790 confirmation Methods 0.000 description 12
- 238000011084 recovery Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 2
- 230000001737 promoting effect Effects 0.000 description 1
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
本発明は、ASP,SaaSなどのソフトウェアサービスのサービス品質を評価する方法であり、特にサービス品質を保証するSLAの監査を目的とするものである。 The present invention is a method for evaluating the service quality of software services such as ASP and SaaS, and is particularly intended for the audit of SLA that guarantees the service quality.
昨今、ASP,SaaSの事業者が非常に増えてきているが、その普及に伴いASP,SaaSの信頼性や可用性を疑問視する声が多かった。それに伴い、経産省は、SaaS利用の更なる普及のため安定して信頼できるSaaS,ASPの普及を目指し2008年1月に「SaaS,ASP向けSLAガイドライン」公表した。このガイドラインでは、SaaS,ASPを契約する際の指針を示している。 In recent years, the number of ASP and SaaS operators has increased greatly, and with the widespread use of them, many have questioned the reliability and availability of ASP and SaaS. Along with this, the Ministry of Economy, Trade and Industry announced the “SLA Guidelines for SaaS and ASP” in January 2008 with the aim of promoting stable and reliable SaaS and ASP for further spread of SaaS usage. This guideline shows a guideline for contracting SaaS and ASP.
また、従来技術では、IDCがサービスの稼動状況のログを採取・分析し、サービス運用者へ改善等を提案やIDCのシステム設備改善箇所にフィードバックを行うことを可能にする技術であった。 Further, in the prior art, the IDC collects and analyzes the service operation status log, suggests improvement to the service operator, and provides feedback to the IDC system facility improvement location.
従来技術は、IDC側に設置されたシステムでありIDCやソフトウェアサービス提供会社がIDC内で稼働状況を検証し、自らの運用方法の改善を行うことを目的としたものであり、利用者側からサービスの稼動状況を把握できるものではなかった。また、SLAに対応した項目での監視を意識した技術ではなかった。 The prior art is a system installed on the IDC side, and the IDC or software service provider company verifies the operation status in the IDC and improves its operation method. It was not possible to grasp the operating status of the service. Also, it was not a technology that was conscious of monitoring with items corresponding to SLA.
SaaSにおける標準的なSLAの項目について、しきい値を設定することにより、サービスレベル管理(SLM)を自動化し、サービス利用管理者の負担を軽減する。 By setting a threshold value for standard SLA items in SaaS, service level management (SLM) is automated and the burden on the service usage manager is reduced.
本発明では、ソフトウェアサービス提供会社とサービス利用者の間にサービスの稼働状況・利用状況を監視するシステムを設置することによりサービス利用者が、SLAに規定した項目について、既定の範囲内で稼動されているかの監査をユーザサイドから行うことを可能にする。 In the present invention, by installing a system for monitoring the operating status / usage status of a service between a software service provider and a service user, the service user can operate within the default range for the items specified in the SLA. It is possible to audit from the user side.
図1は、本発明の実施形態にかかるサービス評価システムを説明する図である。このシステムは、ソフトウェアサービスプロバイダ100とインターネット200とサービス監視システム300とサービス利用管理者端末400とサービス利用端末500からなりサービス監視システム300とサービス利用管理者端末400とサービス利用端末500はLANまたはWANにより相互に接続され、ソフトウェアサービスプロバイ100とサービス監視システム300は、インターネット200により相互に接続している。
FIG. 1 is a diagram for explaining a service evaluation system according to an embodiment of the present invention. This system comprises a
図2は、サービス監視システム300の構成を示したものである。サービス監視システム300は以降に示すようには6種類の処理部と6種類のDBにより構成している。
FIG. 2 shows the configuration of the
通信処理部31は、サービス監視システム300の通信の一切を取り纏める処理部であり、稼働確認処理部32は、ソフトウェアサービスプロバイダ100のソフトウェアサービスを運用しているホストが稼働中であるか確認する処理部であり、応答確認処理部33は、ソフトウェアサービスプロバイダ100のソフトウェアサービスの応答の確認を行う処理部であり、同時接続ユーザ確認処理部34は、ソフトウェアサービスプロバイダ100のソフトウェアサービスに同時に接続しているユーザ数をカウントする処理部であり、ログ解析処理部35は、ソフトウェアサービスの稼働ログDB63、応答ログDB64の内容を解析した結果を利用実績保存DB66に保存する処理部であり、監査・警告処理部36は、監視項目管理DB62と利用実績保存DB66の内容を確認し、SLA違反の疑いがあるか確認し、違反の疑いがあればサービス利用管理端末400に警告する処理部である。SLA定義情報DB61は、SLAの内容を格納するDBであり、監視項目管理DB62は、SLA定義情報DB61を変換ものであり本システムの監視項目とその監視方法を管理するDBであり、稼働ログDB63は、ソフトウェアサービスを運用しているホストの稼働状況を格納するDBであり、応答ログDB64は、ソフトウェアサービスの応答の確認結果を保存するDBであり、同時接続ユーザDB65は、ソフトウェアサービスを同時に利用しているユーザ数を保存するDBであり、利用実績保存DB66は、解析処理部35がソフトウェアサービスの稼働ログDB63と応答ログDB64の内容を解析した結果を格納するDBである。
The
図3は、SLAの内容を格納するDBであるSLA定義情報DB61のデータ形式であり、サービスレベル項目6101と設定値6102により構成されている。
FIG. 3 shows the data format of the SLA
図4は、SLA定義情報DB61を変換し生成した本システムの監視項目を管理する監視項目管理DB62のデータ形式であり、監視項目6201、設定値6202、監視方法6203により構成する。
FIG. 4 shows the data format of the monitoring
図5は、ソフトウェアサービスを運用しているホストの稼働状況を格納する稼働ログDB63のデータ形式であり、日時6301、応答時間6302、ホスト名6303により構成する。
FIG. 5 shows the data format of the
図6は、ソフトウェアサービスの応答の確認結果を保存する応答ログDB64のデータ形式であり、日時6401、応答時間6402、接続元6403、URL6404、同時接続ユーザ数6405により構成する。
FIG. 6 shows the data format of the
図7は、ソフトウェアサービスを同時に利用しているユーザ数を保存する同時接続ユーザDB65のデータ形式であり、項番6501、最終アクセス日時6502、セッションID6503、ステータス6504により構成する。
FIG. 7 shows the data format of the simultaneous
図8は、解析処理部35がソフトウェアサービスの稼働ログDB63と応答ログDB64の内容を解析した結果を格納する利用実績保存DB66のデータ形式であり、解析日時6601、サービス時間6602、サービス稼働率6603、平均復旧時間6604、オンライン応答時間(ネットワーク経由)6605、同時接続ユーザ数の最大6606により構成する。
FIG. 8 shows the data format of the usage
図9は、SLA定義情報DB61の内容を監視項目管理DB62に変換し、補足部分はサービス利用管理者が補う初期設定処理を行う処理手順を示すフローチャートである。
FIG. 9 is a flowchart showing a processing procedure for converting the contents of the SLA
ステップ3101において、SLA定義情報DB61の各項目についてサービス管理者が利用するソフトウェアサービスの規定したSLAの内容をSLA定義情報DB61に入力する。
In
ステップ3102において、SLA定義情報DB61からデータを読み出し、以降のステップで監視項目管理DBに変換する。
In
ステップ3103において、サービス時間6103から「24時間365日」を読み出し、サービス時間6204の設定値6202を00:00−24:00(開始時間−終了時間)と設定する。
In
ステップ3104において、サービス稼働率6104から「99%以上」を読み出し、サービス稼働率6205の設定値6202を「99%」に設定する。
In
ステップ3105において、平均復旧時間6105から「1時間以内」を読み出し、平均復旧時間6206の設定値6202を「1時間以内」に設定する。
In
ステップ3106において、オンライン応答時間(ネットワーク経由)6107から「10秒以内」を読み出しオンライン応答時間(ネットワーク経由)6207の設定値6202を「10秒以内」に設定する。
In
ステップ3107において、同時接続ユーザ数6108の「50ユーザ」を読み出し、同時接続ユーザ数6208の設定値6202を「50ユーザ」に設定する。
In
以降のステップでSLA定義情報DBに含まれない監視情報を監視項目管理DB62に入力する。
In the subsequent steps, monitoring information not included in the SLA definition information DB is input to the monitoring
ステップ3108において、サービス利用管理者が、サービスプロバイダホスト6209の設定値6202にソフトウェアサービスプロバイダ100のホスト名を入力する。
In
ステップ3109において、サービス利用管理者が、サービスプロバイダの稼働状態を確認するために参考とする著名なサイトのホスト名を参考サイトホスト6210の設定値6202に入力する。
In
ステップ3110において、サービス利用管理者がサービス稼働率6205の監視方法6203にホストにアクセスするコマンド、監視間隔、タイムアウト時間を入力する。
In
ステップ3111において、サービス利用管理者がオンライン応答時間(ネットアーク経由)6207の監視方法6203にホストにアクセスするコマンド、監視間隔、タイムアウト時間を入力する。
In
ステップ3112において、サービス利用者がログインした状態で強制的にログアウトするまでの制限時間を入力する。
In
ステップ3113において、ステップ3203からステップ3207で変換したデータとステップ3108からステップ3112で入力監視項目管理DB62に保存し更新する。
In
図10は稼動確認を行い稼動ログDB63に保存する処理手順を示すフローチャートである。
FIG. 10 is a flowchart showing a processing procedure for confirming the operation and storing it in the
ステップ3201において、サービス稼働率6205監視方法6203の監視間隔の0.6秒おきにサービスプロバイダホスト6209に監視方法6205のpingを実行し応答時間を確認する。タイムアウトした場合は、応答時間を「−」にする。
In
ステップ3202において、サービス稼働率6205監視方法6203の監視間隔の0.6秒おきに参考サイトホスト6210に監視方法6205のpingを実行する。タイムアウトした場合は、応答時間を「−」にする。
In step 3202, the monitoring method 6205 is pinged to the
ステップ3203において、稼働ログDB63に監視結果の日時6301、応答時間6302、ホスト名6303を保存する。
In
図11は、応答確認を行い応答ログDB64に保存する処理手順を示すフローチャートである。
FIG. 11 is a flowchart showing a processing procedure for confirming a response and storing it in the
ステップ3301において、サービス利用端末500からの接続要求を受け付ける。
In step 3301, a connection request from the
ステップ3302において、同時接続ユーザ確認処理を呼び出す。
In
ステップ3303において、ステップ3302にて確認した同時接続ユーザ数が監視項目管理DBの62の同時接続利用者数6208を超えたか判定し、超えた場合はステップ3304に進む。制限を超えていない場合はステップ3305に進む。
In
ステップ3304において、サービス利用端末に同時接続ユーザ数の上限に達したことを警告し、ソフトウェアサービスプロバイダ100に接続せず終了する。
In
ステップ3305において、サービス利用端末500の接続要求に応じてソフトウェアサービスプロバイダ100に接続する。
In
ステップ3306において、ステップ3305の接続結果を元に同時接続ユーザ確認処理を呼び出す。
In step 3306, the simultaneous connection user confirmation process is called based on the connection result in
ステップ3307において、サポートサービスプロバイダ100からの応答結果をサービス利用端末500に送信する。応答がタイムアウトであった場合はサービス利用端末500にその旨を送信する。その場合応答時間は「−」とする。
In
ステップ3308において、応答結果の日時6401、応答時間6402、接続元6403(接続要求が出されたサービス利用端末500のIPアドレス)、URL6404、同時接続ユーザ数6405を応答ログDB64に保存する。
In
図12は、同時接続ユーザをチェックし同時接続ユーザDBを更新する処理手順を示すフローチャートである。 FIG. 12 is a flowchart showing a processing procedure for checking the simultaneous connection user and updating the simultaneous connection user DB.
ステップ3401において、ソフトウェアサービスプロバイダ100にログイン中で同時に接続しているユーザ数の確認処理か判定する。同時接続ユーザ数の確認の場合はステップ3402に進み、それ以外の場合はステップ3403に進む。
In
ステップ3402において、同時接続ユーザDB65を確認し同時接続ユーザ数を算出して終了する。
In
ステップ3403において、サービス利用端末500からの接続要求がソフトウェアサービスプロバイダ100へのログイン処理かどうか判定し、ログイン処理の場合はステップ3404に進み。それ以外の場合はステップ3405に進む。
In
ステップ3404において、サービス利用端末500からの接続要求のセッションIDを確認し新しいレコードとして同時接続ユーザDB65に登録する。
In
ステップ3405において、サービス利用端末500からの接続要求がソフトウェアサービスプロバイダ100へのリクエスト処理かどうか判定し、リクエスト処理の場合ステップ3406に進み、それ以外の場合はステップ3407に進む。
In
ステップ3406において、サービス利用端末500からの接続要求のセッションIDを確認し、同時接続ユーザDB65の当該レコードを更新し終了する。
In
ステップ3407において、サービス利用端末500からの接続要求がソフトウェアサービスプロバイダ100へのログアウト処理かどうか判定し、ログアウト処理の場合ステップ3408に進み、それ以外の場合はステップ3409に進む。
In
ステップ3408において、サービス利用端末500からの接続要求のセッションIDを確認し、同時接続ユーザDB65の当該レコードを削除し終了する。
In
ステップ3409において、同時接続ユーザDB65に登録されているユーザのうちログインしたしたまま応答せず、無応答ログアウト時間6211の上限に達したセッションIDがあるか確認し、あればステップ3410に進み、なければ終了する。
In
ステップ3410において、サービス利用端末500からの接続要求のセッションIDを確認し、同時接続ユーザDB65の当該レコードを削除する。必要に応じ当該セッションのIDのセッションのログアウト処理を行い終了する。
In
図13は、稼動ログDB63、応答ログDB64を解析し利用実績DB66に保存する処理手順を示すフローチャートである。
FIG. 13 is a flowchart showing a processing procedure for analyzing the
ステップ3501において、稼動ログDB(63)より前日の0:00から24:00の間の最初に稼働していた時刻0:00、最後に稼働していた時刻24:00を保存する。
In
ステップ3502において、稼動ログDB(63)より前日の0:00から24:00の間のタイムアウト時間(応答時間が「−」)の合計数(ただし、同時刻の参考サイトホストがタイムアウトしている場合は除外)に監視項目管理DB62のサービス稼働率6205監視間隔の0.6秒を乗算し24時間で除算する。
In
ステップ3503において、稼動ログDB63より前日0:00から24:00までのサービス停止時刻、サービス再開時刻を探す。復旧時間=「サービス再開時刻-サービス停止時刻」により求めた復旧時間の平均を算出する。
In
ステップ3504において、前日0:00〜24:00の応答ログ64の応答時間の最大値を算出する。
In
ステップ3505において、前日0:00〜24:00の応答ログ64の同時接続ユーザ数6405の最大値を算出する。
In
ステップ3506において、解析日時6601、サービス時間6602、サービス稼働率6603、平均復旧時間6604、オンライン応答時間(ネットワーク経由)6605、同時接続ユーザ数の最大6606を利用実績DB66に保存する。
In
図14は、監視項目DB62と利用実績DB66を比較しSLA違反の疑いがある場合は警告する処理手順を示すフローチャートである。
FIG. 14 is a flowchart showing a processing procedure for comparing the
ステップ3601において、監視項目管理DB62と利用実績DB66の内容を比較してSLA違反の疑いがないか監査をする。具体的には、サービス時間6602がサービス時間6204の条件を満たすか監査しサービス稼働率6603がサービス稼働率6205の条件を満たすか監査し、平均復旧時間6604が平均復旧時間6206の条件を満たすか監査し、オンライン応答時間(ネットワーク経由)6605がオンライン応答時間(ネットワーク経由)6207の条件を満たすか監査し、同時同時接続ユーザ数の最大6606が同時接続ユーザ数6208の条件を満たすか監査する。
In
ステップ3602において、ステップ3601で比較した結果、SLA違反の疑いがあるかどうか判定する。疑いがなければ終了し、疑いがある場合はステップ3603に進む。
In
ステップ3603において、サービス利用管理者端末400に所定の方法でSLA違反の疑いがあることを通知する。
In
300…サービス監視システム、31…通信処理部、32…稼動確認処理部、33…応答確認処理部、34…同時接続ユーザ確認処理部、35…ログ解析処理部、36…監査・警告処理部、61…SLA定義情報DB、62…監視項目管理DB、63…稼動ログDB、64…応答ログDB、65…同時接続ユーザDB、66…利用実績DB。
DESCRIPTION OF
Claims (5)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009107281A JP2010257272A (en) | 2009-04-27 | 2009-04-27 | Service evaluation system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2009107281A JP2010257272A (en) | 2009-04-27 | 2009-04-27 | Service evaluation system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010257272A true JP2010257272A (en) | 2010-11-11 |
Family
ID=43318095
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2009107281A Pending JP2010257272A (en) | 2009-04-27 | 2009-04-27 | Service evaluation system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010257272A (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012198747A (en) * | 2011-03-22 | 2012-10-18 | Hitachi Solutions Ltd | Sla contract support method and system |
CN107578161A (en) * | 2017-08-30 | 2018-01-12 | 咪咕文化科技有限公司 | Product evaluation method and device and storage medium |
CN110647118A (en) * | 2019-09-16 | 2020-01-03 | 无锡江南计算技术研究所 | Power distribution monitoring management system for high-performance computer |
-
2009
- 2009-04-27 JP JP2009107281A patent/JP2010257272A/en active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012198747A (en) * | 2011-03-22 | 2012-10-18 | Hitachi Solutions Ltd | Sla contract support method and system |
CN107578161A (en) * | 2017-08-30 | 2018-01-12 | 咪咕文化科技有限公司 | Product evaluation method and device and storage medium |
CN110647118A (en) * | 2019-09-16 | 2020-01-03 | 无锡江南计算技术研究所 | Power distribution monitoring management system for high-performance computer |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10997047B2 (en) | Automatic selection of agent-based or agentless monitoring | |
US10931730B2 (en) | Method and system for ISP network performance monitoring and fault detection | |
US20180006870A1 (en) | Remotely configurable routers with failover features, and methods and apparatus for reliable web-based administration of same | |
US8935524B1 (en) | Systems and methods for managing certificates | |
US8176137B2 (en) | Remotely managing a data processing system via a communications network | |
CN102196018B (en) | Multiple simultaneous session support by a remote technician | |
US20080244077A1 (en) | Methods for auditing peer-to-peer communications in remote device monitoring system and systems thereof | |
US20080016157A1 (en) | Method and system for controlling and monitoring an apparatus from a remote computer using session initiation protocol (sip) | |
WO2020000758A1 (en) | Server acceptance method and apparatus, computer device, and storage medium | |
CN107800783B (en) | Method and device for remotely monitoring server | |
JPWO2006117832A1 (en) | In-service system check processing apparatus, method and program thereof | |
CN110737639A (en) | Audit log method, device, computer equipment and storage medium | |
CN112733147B (en) | Equipment security management method and system | |
CN111698121B (en) | SNMP trap alarm test method and related device | |
JP2010257272A (en) | Service evaluation system | |
US8195977B2 (en) | Network fault isolation | |
US20050240799A1 (en) | Method of network qualification and testing | |
KR100496958B1 (en) | System hindrance integration management method | |
JP4612598B2 (en) | Server operation support system, server operation support method, and program | |
JP6488600B2 (en) | Information processing system, program, and information processing apparatus | |
KR100745672B1 (en) | Method and system for home service fault management in digital home service system | |
CN112580835B (en) | Management method and device of server | |
JP7395961B2 (en) | Network management device, network management method, and network management program | |
CN115714719B (en) | Operation and maintenance processing method and device of server, electronic equipment and storage medium | |
CN114338688B (en) | Data management method and device |