JP4146347B2 - アクセスログ分析装置およびアクセスログ分析方法 - Google Patents

Description

【０００１】
技術分野
本願発明は、サーバのアクセスログを分析するアクセスログ分析装置に関し、特に、たとえばインターネット上で公開されているＷｅｂサーバのアクセス状況を統計的に分析して、ユーザニーズの把握やコンポーネントの最適化を図る等のマーケティングツールとして活用することのできるアクセスログ分析装置に関する。
【０００２】
背景技術
従来のアクセスログ分析装置では、Ｗｅｂサーバからアクセスログを取得し、その内容を解析して、Ｗｅｂページ毎や参照元毎にヒット数を集計することにより、Ｗｅｂサイトの活用状況を把握したり、多数のサイト間で比較すること等が行われていた。
また、分析結果の表示には主としてグラフや表が用いられ、絶対値は棒グラフを、割合は円グラフを用いて表示するのが一般的であった。
しかしながら、このような従来のアクセスログ分析装置では、データの切り口として基本的にヒット数の集計値をそのまま使用するため、多数のデータの中に重要なデータが埋もれてしまう場合がある。
例えば、当日のヒット数を評価する場合に、ヒット数の絶対値の大小はあまり重要ではなく、以前に比べてどれだけ変化したかの方が重要であるが、従来の分析装置では単にヒット数の絶対値を日変化として表示するだけのため、結果的に有益な情報が埋もれてしまう場合がある。
また、ランキングではＮ番目とＮ＋１番目の差が一定でないため、例えば「１人勝ち」が生じている場合に、２位にありふれたページがランクインしてしまう場合が生ずる。更に、ヒット数の絶対値は小さいが大きく増加するページがあっても、恒常的に大きなヒット数を出すページがあると埋もれてしまう。
一方、プレゼンテーションの方法としてグラフや表を用いる方法は、大量のデータを見やすく表示する効果はあるものの、グラフや表は集計結果を単に見やすく表示したにすぎず、その意味するところは人が読み取る必要がある。
特に、調査項目が増えればグラフや表の数も膨大になり、そこから有益な情報を見出すのは困難な作業となり、結果的に分析結果が十分に活用されない場合があった。
すなわち、Ｗｅｂサイトの評価を、「集計」→「分析」→「次回戦略の検討」という３つのステップに分けて考えると、従来のアクセスログ分析装置では最初の「集計」しかなされておらず、重要な「分析」作業は膨大なデータから人手によって行う必要があったため、十分な成果が得られない場合が多いという問題があった。
それゆえに、本願発明の主たる目的は、Ｗｅｂサーバのアクセスログの膨大なデータの中から有意な情報を抽出し、分析結果を適確に表示することのできるアクセスログ分析装置を提供することである。
【０００３】
発明の開示
この発明のアクセスログ分析装置は、分析対象となるサーバからアクセスログを取得するアクセスログ取得手段と、アクセスログ取得手段により取得されたデータを監視項目毎に集計する集計手段と、集計手段により集計されたデータをもとにサーバのアクセス状況を診断する診断手段と、診断手段により診断された結果を分析依頼者に提示する診断結果提示手段とを備えたアクセスログ分析装置であって、診断手段が監視項目について所定期間内のデータの統計量に基づいて対象データの変動量を演算する統計的変動量演算手段と、統計的変動量演算手段により演算された統計的変動量の範囲と対応する診断文の雛型を記述した診断テーブルを参照して診断文を生成する診断文生成手段とを有するものである。
統計的変動量演算手段により、監視項目について所定期間内のデータの統計量に基づいて対象データの変動量を演算するので、膨大なデータの中から分析依頼者にとって重要な有意の変動を抽出することが可能となる。また、診断文生成手段により、統計的変動量の範囲と診断文の雛型を対応させた診断文テーブルを用いて診断文を生成するので、分析依頼者に対して単に集計結果をグラフ表示するだけでなく、データの意味を自然言語によって判りやすく表示することが可能となる。
この発明のアクセスログ分析装置は、統計的変動量演算手段が所定期間内のデータの平均と分散を求め、これを基に対象データの平均からの偏差を標準偏差で正規化したＺ値（Ｚスコア）を演算する手段を含むものでもよい。
統計的変動量としてＺ値（Ｚスコア）を用いることで、変化が安定しない事象に対して変動を比較する上で有効な基準を得ることができ、多様なデータを客観的に分析することが可能となる。
この発明のアクセスログ分析装置は、診断手段が診断文生成手段により生成された診断文に関連するデータについて所定期間内のデータの統計量に基づいて対象データの変動量を演算する第２の統計的変動量演算手段と、第２の統計的変動量演算手段により演算された統計的変動量の範囲と対応する診断文の雛型を記述した副診断テーブルを参照して副診断文を生成する副診断文生成手段とを有するものでもよい。
第２の統計的変動量演算手段により、診断文生成手段によって生成された診断文（以下、主診断文と称す）に関連するデータについて有意の変動を抽出し、副診断文生成手段により、その統計的変動量の範囲と診断文の雛型を対応させた副診断テーブルを用いて副診断文を生成するので、監視項目に有意の変動が生じたときに何故それが起きたかを補足説明することが可能となり、分析依頼者がデータ変動の意味をより適確に把握できるようになる。
この発明のアクセスログ分析装置は、診断手段が生成された複数の診断文を統合する診断文統合手段を有するものでもよい。
診断文統合手段により、同種の診断文を削除したり、複数の診断文を一つに結合することが可能となるので、多数の診断文が羅列されることを防止でき、分析依頼者にとってより見やすい表示を提供できる。
この発明のアクセスログ分析装置は、診断手段が所定期間内のデータの統計的な変化傾向を統計的変化量として演算する統計的変化量演算手段と、統計的変化量演算手段により演算された統計的変化量の範囲と対応する診断文の雛型を記述した第２の診断テーブルを参照して診断文を生成する第２の診断文生成手段とを有するものでもよい。
統計的変化量演算手段により、統計的変動量だけでなく、データの統計的な変化傾向を検出することが可能となり、第２の診断文生成手段により、検出事象に対して適切な診断文を提供できるので、分析依頼者に対してより広範な観点から診断結果を提供できる。また、監視項目について生成された診断文に関連するデータについて統計的変化量を演算する第２の統計的変化量演算手段を設け、第２の統計的変化量演算手段により演算された統計的変化量の範囲と対応する診断文の雛型を記述した第２の副診断テーブルを参照して副診断文を生成する第２の副診断文生成手段を設けるようにしてもよく、統計的変動量と統計的変化量を併用して診断文を生成する手段を設けてもよい。これらにより、分析依頼者に対して更に適確な診断結果を提供できる。
尚、統計的変化量演算手段としては、例えば所定期間内のデータについて最小二乗近似法による直線近似を行い、その傾きを統計的変化量として利用することができる。
この発明のアクセスログ分析装置は、集計手段が正規表現を用いて集計対象を特定するプリフォーマット手段を含むものでもよい。
プリフォーマット手段により、あらかじめ集計対象が特定されるので、診断手段による診断がより効率的に行える。また、診断に先だってサイト固有の特性に応じたカスタマイズを行うことも可能となる。
尚、集計対象の特定には正規表現を用いた検索機能を用いたので、テキスト処理言語の汎用機能を用いて効率的に処理できる。
この発明のアクセスログ分析装置は、アクセスログ取得手段と集計手段と診断手段に対して処理の相互依存性を監視して実行を管理する実行管理手段を有するものでもよい。
実行管理手段により、各処理モジュールの相互依存性を監視して実行を管理するようにしたので、多数の処理モジュールを並列に処理することができ、膨大なデータに対して効率的に処理できる。また、依存関係の記述を変更することで新しい処理モジュールを簡単に追加でき、分析依頼者毎にサービス内容をカスタマイズすることも容易である。更に、実行管理手段を用いて、サーバのアクセスログを常時監視し、特徴的な事象が発生したときに、分析依頼者に対して自動的にメッセージを発信するようにすることも可能である。
この発明のアクセスログ分析装置は、集計手段が参照元情報から新規訪問者と再訪問者を区分し、かつ再訪問者については訪問回数と訪問間隔から常連者を区分する機能を有し、診断結果提供手段が区分された新規訪問者と再訪問者と常連の割合を訪問者情報として色分けグラフ表示する機能を有するものでもよい。
集計手段によって訪問者を新規訪問者と再訪問者と常連とに区分けし、診断結果提供手段によってその割合を色分けグラフ表示するようにしたので、分析依頼者が訪問者の傾向を一目で判断することができる。
この発明のアクセスログ分析装置は、分析依頼者のライセンス情報を取得してサービスの提供可否を判断するライセンス管理手段を備えたものでもよい。
ライセンス管理手段により、分析依頼者のライセンス情報を取得してサービスの提供可否を判断するようにしたので、正規のライセンスを有するユーザに対してのみアクセスログ分析サービスを提供することができる。
この発明のアクセスログ分析方法は、分析対象となるサーバからアクセスログを取得するステップと、取得されたデータを監視項目毎に集計するステップと、集計されたデータをもとにサーバのアクセス状況を診断するステップと、診断された結果を分析依頼者に提示するステップとを備え、コンピュータによりアクセスログを分析するアクセスログ分析方法であって、診断するステップが監視項目について所定期間内のデータの統計量に基づいて対象データの変動量を演算するステップと、演算された統計的変動量の範囲と対応する診断文の雛型を定義した診断文雛型テーブルを参照して診断文を生成するステップとを有するものである。
サーバのアクセス状況を診断するステップとして、監視項目について所定期間内のデータの統計量に基づいて対象データの変動量を演算するステップを有するので、膨大なデータの中から分析依頼者にとって重要な有意の変動を抽出することが可能となる。また、演算された統計的変動量の範囲と診断文の雛型を対応させた診断文テーブルを用いて診断文を生成するステップを有するので、分析依頼者に対して単に集計結果をグラフ表示するだけでなく、データの意味を自然言語を用いて判りやすく表示することが可能となる。尚、対象となるデータの変動量を演算するステップとしては、例えば所定期間内のデータの平均と分散を求め、これを基に対象データの平均からの偏差を標準偏差で正規化するＺ値（Ｚスコア）などが利用できる。
また、この発明のアクセスログ分析装置が備える各手段をステップとして備えたアクセスログ分析方法によっても、この発明のアクセスログ分析装置が奏する作用・効果と同様の作用・効果を奏する。
この発明のアクセスログ分析プログラムは、コンピュータに、少なくとも分析対象となるサーバからアクセスログを取得する手順と、取得されたデータを監視項目毎に集計する手順と、集計されたデータをもとにサーバのアクセス状況を診断する手順と、診断された結果を分析依頼者に提示する手順とを実行させるためのプログラムであって、診断する手順が監視項目について所定期間内のデータの統計量に基づいて対象データの変動量を演算する手順と、演算された統計的変動量の範囲と対応する診断文の雛型を定義した診断文雛型テーブルを参照して診断文を生成する手順とを有するものである。
サーバのアクセス状況を診断する手順として、監視項目について所定期間内のデータの統計量に基づいて対象データの変動量を演算する手順を有するので、膨大なデータの中から分析依頼者にとって重要な有意の変動を抽出することが可能となる。また、演算された統計的変動量の範囲と診断文の雛型を対応させた診断文テーブルを用いて診断文を生成する手順を有するので、分析依頼者に対して単に集計結果をグラフ表示するだけでなく、データの意味を自然言語を用いて判りやすく表示することが可能となる。尚、対象となるデータの変動量を演算する手順としては、例えば所定期間内のデータの平均と分散を求め、これを基に対象データの平均からの偏差を標準偏差で正規化するＺ値（Ｚスコア）などが利用できる。
また、コンピュータに、この発明のアクセスログ分析装置が備える各手段を手順として備えたアクセスログ分析プログラムを実行させることによっても、この発明のアクセスログ分析装置が奏する作用・効果と同様の作用・効果を奏する。
本願発明の上述の目的，その他の目的，特徴および利点は、図面を参照して行う以下の発明の実施の形態の詳細な説明から一層明らかとなろう。
【０００４】
発明を実施するための最良の形態
第１図に本願発明の一実施形態に係るアクセスログ分析装置のシステム構成を示す。図において、１０は分析対象となるサーバであり、一般にはインターネット上で公開されているＨＴＴＰサーバが対象になる。１２はその分析対象サーバ１０内で生成されるアクセスログであり、一般にはhttpdログと呼ばれるものが自動生成されており、本アクセスログ分析装置ではこれを分析対象とする。
２０はアクセスログ分析機能を提供するアクセスログ分析サーバであり、分析依頼者の要求に応じて分析対象サーバ１０のログ１２をインターネットを介して取得し、取得したデータに対して要求された分析を行い、分析結果を分析結果データベース２２に蓄積する。
２４は分析結果を分析依頼者のコンピュータ画面に表示するための分析結果提供サーバであり、分析依頼者からの要求に応じて分析結果データベース２２から分析結果を取出して所定フォーマットのＨＴＭＬ形式のデータに変換し、インターネットを介して分析依頼者のコンピュータに提供するＨＴＴＰサーバである。これにより、分析依頼者は自己のコンピュータのＷＷＷブラウザを用いて分析結果を画面表示することができる。
上記のようにアクセスログ分析サーバとしてＬＡＮ上に別の専用マシンを設けたのは、分析処理には高い処理能力と大容量の記憶装置を必要とするので、分析依頼者数が増えた場合でも、分析サーバの数を増やすことで単一のＨＴＴＰサーバから多数の分析依頼者に対してサービスできるようにするためである。また、分析結果データベースをＬＡＮの内部に置くことで保守性も高まる。
【０００５】
第２図に本願発明の一実施形態に係るアクセスログ分析装置の分析処理フローを示す。図のように、本アクセス分析装置は分析対象サーバのhttpdログを取得するＦＴＰサーバ３０と、取得した生ログ５０を前処理するプリフォーマットモジュール３２と、プリフォーマットされたログ５２を分析結果データベース２２に登録するＤＢ登録モジュール３４と、ＤＢ格納ログ５４を監視項目毎にプリカウントするプリカウントモジュール３６と、プリカウントデータ５６を分析して主診断文を生成する主診断文生成モジュール３８と、主診断文に関連するデータを分析して副診断文を生成する副診断文生成モジュール４０と、診断文テーブル５８に生成された複数の診断文を統合する診断文統合モジュール４２と、各モジュールの実行管理をするディスパッチャモジュール４４とを備える。
ＦＴＰモジュール３０は、httpdログを３０分毎から１日毎程度のインターバルで定期的に取得して、アクセスログ分析サーバ２０に転送する。転送された生ログ５０はテキストファイルの状態であり、サイト毎に項目数や表記方法、表記順序等に微妙な差異があり、これを統一的な形式に変換するためプリフォーマットモジュール３２によって前処理を行う。また、プリフォーマットモジュール３２は、サイト固有の設定に対して以下のようにデータをカスタマイズする機能を有する。このカスタマイズには、正規表現を用いた検索機能を用いている。
第１に、カウントする項目をマークする。ログにはテキスト、画像、動画、ＣＧＩ呼出し等さまざまなリソースの転送情報が含まれている。ページの構成要素に過ぎないリソースを１アクセスと捕えるのは適当でない場合があり、これらの情報を除くことでデータ量を抑制することができる。そこで、あらかじめカウントするリソースと不要なリソースを正規表現で設定した設定ファイルを設ける。
例えば、「('\.s?html?$','\.php3?$','\.cgi$')」を用いて、「.html,.shtml,.php3,.cgi」で終わるアドレスだけを集計対象とすることができる。
第２に、ページのグループ分けを行う。複数のファイルをまとめて１グループとして扱いたい場合や、逆に同一アドレスに対するアクセスをquery部によって別個に扱いたい場合に、これをアドレスやqueryに対する正規表現で指定しておく。
例えば、「[id=>'1',path=>'^/admin/',name=>'管理ページ']」を用いて、「/admin/で始まるアドレスは「管理ページ」という名前でまとめて扱えるようにする。
また、「[path=>'shopping\.cgi$',query=>'item']」を用いて、「shopping.cgi」で終わるアドレスの場合は、queryの「item=」以降によって別々のページとして扱う。
第３に、参照元が検索エンジンであった場合に検索文字を抽出する。検索エンジンからのリンクを辿ってきた場合、たいていは参照元としてログに残るアドレス、queryから検索文字を特定することが可能である。事前に著名な検索エンジンの特性を調べて登録しておけば、自動で検索文字列を抽出することができる。この場合も、参照元アドレスに対する正規表現で検索エンジンの見分け方や検索文字列を検出する方法を指定しておく。
例えば、「[name=>'Yahoo!',path=>'yahoo\.com',query=>'p']」を用いて、「yahoo.com」を含むアドレスからの参照の場合は検索サイト「Yahoo!」からのアクセスであり、queryの「p=」以降が検索文字列であるので、これを抽出する。
第４に、フォームの送信段階をマークする。アンケートやショッピングバスケット、掲示板の投稿など、複数のページが「記入画面」→「確認画面」→「送信完了画面」という一連のステップの各段階を担っている場合には、これらのアドレスを正規表現で指定しておくことにより、後の分析処理で「確認画面まで来て送信をやめてしまうユーザが増えた」や「外部サイトＯＯからリンクを辿ってくる訪問者はフォームの送信率が高い」といった診断を下すことが可能となる。
例えば、「[id=>4,name=>'プレゼントフォーム',form=>'^/present/form\.php3$'.confirm=>',done=>'^/present/done\.php3$']」を用いて、アドレス「/present/form.php3」と「/present/done.php3」はそれぞれ同じ「プレゼントフォーム」の「記入画面」と「送信完了画面」であることを検出する。
尚、このような前処理をデータベース登録前に行ったのは、正規表現を多用する設定はデータベースサーバの提供する処理言語より、テキスト処理言語（例えば、Ｐｅｒｌ）を使用した方が効率良く処理できるからである。
このようにして前処理を行ったプリフォーマットログの構成例を第３図に示す。
【０００６】
次に、プリカウントモジュール３６の処理について述べる。
プリカウントとは、後の処理に必要な計算をあらかじめ行っておくもので、監視項目毎にデータを集計する。監視項目は、ページ別のヒット数、参照元、参照元が検索エンジンの場合はその検索文字列、閲覧者の訪問履歴、最初に見たページと最後に見たページ、閲覧者の使用しているブラウザ、ＯＳ、日の属性（休日、ページ更新日、キャンペーン開始日等）等である。これらの項目について、アクセスの変動を検出したり、変動の原因を特定したりする。
プリカウントモジュール３６は、同じ形式の仮集計テーブルを監視項目毎に作っておき、このあとの特徴抽出処理を一般化できるようにしている。ここでは、集計する項目の数だけテーブルと専用の集計モジュールを設け、膨大になりがちな集計時間の短縮化を図っている。単なる数の合計だけでなく、例えばログに記録された参照元情報（ユーザＩＤ、アドレス、ブラウザ情報等）から同一の閲覧者からと思われるアクセスを推定し、同一の閲覧者からの一連のアクセスを「セッション」と判定して閲覧者、セッション毎にデータをまとめる処理もこのプリカウントモジュール３６で行っている。このようにして生成されたプリカウントテーブルの構成例として、ヒット数に関するプリカウントテーブルを第４図に、閲覧者のプリカウントテーブルを第５図に示す。
尚、閲覧者のプリカウントテーブルには、新規訪問者と再訪問者と常連に区分けするステータス情報を保有する。この、ステータス情報は、前述の参照元情報から以前の訪問者と同一の閲覧者と推定されるか否かを判定し、新規訪問者か再訪問者かを区分する。次に、再訪問者については訪問回数・訪問間隔から常連を抽出する。ここでは、一定回数以上訪問しており、初回訪問日から一定日数以上経過しており、最終訪問日から一定日数以下である場合を常連とした。
【０００７】
次に、分析処理の最終段階である診断文生成処理について述べる。
診断文には、監視項目に有意の変動が検出されたときに生成される主診断文と、主診断文に対して何故それが起きたかを補足説明する副診断文とがあり、それぞれ主診断文生成モジュール３８と、副診断文生成モジュール４０によって生成され、診断文テーブル５８に書込まれる。診断文テーブル５８に書込まれた診断文は、診断文統合モジュール４２によって、同種の診断文を削除したり、複数の診断文を読みやすいように接続詞で結合する処理を行う。
主診断文生成モジュール３８、副診断文生成モジュール４０、診断文統合モジュール４２はすべて共通の診断文テーブル５８に対して書込みを行う。診断テーブル５８は、主診断文生成モジュール３８によって主診断文が書込まれると、それに対して副診断文生成モジュール４０が補足をつけ、更に診断文統合モジュール４２がそれらの文章を読みやすく整形するというように、黒板モデルで言う黒板のような役割を果たす。診断テーブルの構成例を第６図に示す。
主診断文の生成と副診断文の生成は同一原理に基づき、主診断文はすべてのデータを対象にするのに対し、副診断文は指定された主診断文に関連するデータだけを対象とする。例えば、今日特にアクセス数の多かったＯＯページへのアクセスデータに限定し、今日の参照元や用いられたブラウザ、訪問者の履歴等について、普段と比べて特に特徴的な偏りのあるものを抽出する。従って、副診断文生成オブジェクトは診断オブジェクトのサブクラスとして定義され、最初の母集団抽出メソッドをオーバーライドすることで実現される。
前述のように、プリカウント時にデータが共通の形式にまとめられるので、このオブジェクト自体は自分が処理しているデータの意味を知る必要はない。監視項目毎に呼出し時のパラメータを変えたり、あるいはサブクラスを定義して一部のメソッドをオーバーライドすることにより、日毎のヒット数が特に多いものを抽出したり、特に多い参照元を特定したりもできる。
【０００８】
第７図に診断文生成処理の処理フローを示す。図のように、診断パラメータに基づいてプリカウントデータから診断文を生成するデータベース操作プログラムを生成し（Ｓ１０）、生成されたデータベース操作プログラムによって診断文を生成し（Ｓ２０）、診断文統合モジュールを呼び出す（Ｓ３０）。診断パラメータは、第８図のように母集団、項目名、Ｚ値の閾値、対応する診断文の雛形等が記述されており、対象とするデータによって主診断文を生成するか副診断文を生成するかが切替えられる。
診断文の生成（Ｓ２０）は、指定項目の過去一定期間の平均と分散を求め（Ｓ２２）、これによって当日のＺ値を求め（Ｓ２４）、Ｚ値が一定以上または一定以下であれば、対応する診断文の雛形により診断文を生成して診断文テーブルに登録する（Ｓ２６）。ここで、指定項目が量的データでない場合は指定項目がとった値の出現回数が対象となり（ａ）、指定項目が量的データの場合は指定項目の集計値自体が対象となる（ｂ）。処理データがヒット数などの数量データであるか、「ブラウザの種類」などの名義尺度であるかによって統計処理が大きく２種類に分かれるが、基本は「当日の数値が過去の平均・分散に対して特に偏ったものといえるかどうか」をＺ値によって判定するということである。
計算の結果、Ｚ値があらかじめ与えられた閾値を超えた場合に、診断文の雛形に沿って診断文が生成され、診断文テーブルに登録される。言い換えれば、Ｚ値があらかじめ与えられた閾値の範囲内にある場合には診断文は生成されず、無用な情報は効果的に切り捨てられる。
閾値はプラス側とマイナス側にそれぞれ複数設定することができる。これにより、例えば、＋１．０以上で「やや多いです」、＋５．０以上で「非常に多いです」というように、同じ増加に対して微妙なニュアンスを使い分けることができる。また、閾値をプラス側とマイナス側で独立に設定できるようにしたのは、正規分布ではない分布を示すデータに対しても適切な診断を下すことができるようにするためである。実際、Ｗｅｂページの日別アクセス数は正規分布よりポアソン分布に近い特性を示すことがあるが、このような場合でもプラス側とマイナス側の閾値に差異を設けることで、Ｚ値を用いて有意な情報を抽出することができる。このように、プラス側の閾値とマイナス側の閾値をサンプルに応じて細かく調整することで、より自然な診断文を生成することができ、人間の感覚で「これは特別である」と感じられる状況だけを必要十分に報告することが可能となった。
集計データが存在しない日について、これを０と解釈するか無効サンプルと解釈するかは、データの性質に従って慎重に決める必要がある。例えば、「あるページへのアクセス数の合計」がプリカウントテーブルに存在しない場合はその日のアクセスが０であったために集計されなかったと判断してよいが、「あるページへの新規訪問者の割合」である場合には集計がないことを０％と解釈するのは適当でない。サンプルの数、アクセス数が十分に大きくない場合には、分散が不適切な値になってしまう。そこで、アクセス数、サンプル数がともに一定以下であって統計処理が十分に意味を持たないと推定される場合には診断を行わないという制限を設けている。
本オブジェクトは、「プログラムを生成するプログラム」という形式をとっている。これはデータベース処理言語では前述のように汎用性の高いプログラムを記述することが難しいからである。そこで、本実施形態では汎用性の高い記述が可能なPerl言語を使用し、間接的に実行プログラムを書き出すことで、統計処理の一般性と処理効率の両方を向上させている。
【０００９】
第９図に診断文統合処理の処理フローを示す。図のように文章連結規則テーブルに従って、診断テーブル内の文章を処理し、再び書き戻す。
診断文生成モジュールは処理が一般化されているため、個々の診断の意味に沿った更なるリファイニングの余地が残されている場合がある。
例えば、次の５つの診断文「
△/050000table/winter/article/list03.htmへのアクセスがやや増加しました
△/050000table/winter/article/select03.htmへのアクセスがやや増加しました
▲/050000table/winter/article/today03.htmへのアクセスが急増しました
△/050000table/winter/article/winter03.htmへのアクセスがやや増加しました
△/050000table/winter/article/readme03.htmへのアクセスがやや増加しました
」は、５つの独立したページへのアクセスがそれぞれ増加したというよりは、これらのドキュメントが共通に属するディレクトリ全体に対してのアクセスが増加したと考える方が自然である。そこで、ディレクトリを辿って共通のディレクトリを見出す規則（メソッドで与えられる）と、当該診断文が存在した場合の結合規則（正規表現で与えられる）とを指定し、ページ別アクセス数に関する主診断文に対してのみ文章の結合を施す。
このようにして上記５つの診断文が、以下のように統合される。
「▲/050000table/winter/article/today03.htmをはじめ、/050000table/winter/以下へのアクセスが急増しました」
同様に、アクセス数の増加した複数のページが同じグループに属することが判れば一つの文章にまとめることができる。
尚、「共通のディレクトリを見出すメソッド」は、サイトの特性に従ったチューニングを施すことが望ましい。例えば、大まかに２〜３段階のディレクトリしか掘られていないサイトの場合は、文章の論理構造に沿って深く細かくディレクトリが分けられている場合に比べてディレクトリの結合を制限する。これにより、「サイト全般のアクセスが増加した」というところまで一般化することを防止できる。多くのサイトでは、「一番上（ドキュメントルートの直下）のディレクトリは結合しない」という制限を設けることで丁度良い結果が得られている。
また、フォームの送信率に関する診断文のように、同種の診断に単純に接続詞を補って複合文にすることですっきりする場合もある。この場合も該当文を結合する結合規則を指定し、フォーム送信率に関する主診断文に対してのみ文章の結合を施すことで処理している。
文章連結規則テーブルの一例を第１０図に示す。変換規則は正規表現で与えられる。例えば、後ろに文章が続く場合の変換規則を「'しました＄'」→「'し、'」、
前に同種の文章がある場合の変換規則を「'^.*(?=入力画面で帰って|確認画面で帰って|最後まで送信する)'」→「''」(該当部分を除去する）とすることで、
次の２つの文章「プレゼントフォームの入力画面で帰ってしまうユーザの割合が減少しました
プレゼントフォームを最後まで送信するユーザの割合が増加しました
」が、以下のように結合される。
「プレゼントフォームの入力画面で帰ってしまうユーザの割合が減少し、最後まで送信するユーザの割合が増加しました」
【００１０】
次に、ディスパッチャモジュール４４の処理について説明する。
前述の各処理モジュールはそれぞれ別個の独立したプログラムである。これらはお互いに複雑に依存しあっているため、依存関係を的確に把握して実行管理を行う必要がある。ディスパッチャモジュール４４はこのような実行管理を行うモジュールであり、各処理モジュールを然るべき順序で、かつ並列処理できるものは並列に実行できるように管理する。
第１１図にディスパッチャモジュール４４の処理フローを示す。図のように、作業ＩＤおよびモジュールＩＤを指定して呼出され、現在進行中の処理状況を記述した処理状況テーブルを参照して（Ｓ５０）、処理本体を呼出して実行し（Ｓ５２），その処理が終了したら終了を通知し（Ｓ５４）、モジュール依存関係テーブルを参照して依存関係にあるモジュールがすべて終了しているモジュールを探して呼出す（Ｓ５６）。
ディスパッチャは、それ自体が実行可能なプログラムではなく、他のすべてのモジュールを使用するオブジェクトである。処理に関わるすべてのモジュールは、このディスパッチャのインスタンスを一つずつ持ち、実行開始時と終了時にこのディスパッチャに処理を渡す。このとき、ディスパッチャが共通のデータを介して現在の実行状況を他のモジュールに伝えたり、次に呼出すモジュールを決定したりする。
処理状況テーブルの構成例を第１２図に、モジュール依存関係テーブルの構成例を第１３図にそれぞれ示す。上記モジュールの依存関係の記述を変更することで、あるモジュールを後から付け加えたり、処理から外したりできる。これにより、分析依頼者毎にサービスの内容をカスタマイズしたり、新しく作った分析モジュールを簡単に付け足したりすることが可能となる。
分析結果は、前述のように分析結果提供サーバ２４から提供される。診断文テーブルの内容の他、プリカウントテーブルから直接取り出した数値、グラフなどをＨＴＭＬ形式で提供する。
【００１１】
第１４図〜第１６図に分析結果の表示画面例を示す。第１４図のように一日のアクセスのなかから重要な特徴が抽出されて、日本語でわかりやすく表示される。また、第１５図のように診断文で指摘されたページのアクセス数がグラフ表示される。更に、第１６図のような詳細レポートも提供される。
尚、診断文にはエラーの発生に関するものが含まれる。エラーの発生要因には以下のようなものがある。
（１）サイト側に問題がある場合（ページや画像ファイルのアップロード洩れ、リンク切れ、ＣＧＩプログラムの不具合等）
（２）外部のサイトに問題がある場合（リンク元の情報が存在しない場合等）
（３）閲覧者の環境に問題がある場合（閲覧者のブラウザが対応していない機能を使用している場合等）
（４）不正アクセス（ＣＧＩプログラムを誤動作させる目的で、不正データを送りつけた場合等）
いずれも、サイト管理者にとって重要な情報であるが、エラーの発生率は全体のアクセス数に比して通常はかなり低い。しかも、favicon.icoやrobots.txtといった名前のリソース（これらは実在しないにも拘らず特定のクライアントソフトが要求するリソースで、無くても問題ないが要求されたリソースが存在しなかったことはエラーとしてログに記録される）のようにコンスタントに大量にエラーを発生させる要因もある。従来のアクセス数による分析方法では、こういった少数ながら重要な情報が隠れてしまう恐れがあったが、このような場合においてもＺ値による検出は有効である。例えば、ワームウイルスによるアタックや、不正アクセスに多いブルートフォース（パスワード等を総当りで試す手法）には、同じ種類のエラーを短時間に繰り返し発生させるという特性があり、本願発明のアクセスログ分析を行うことで、有効に対応できる。
また、この表示画面では第１６図のように訪問者の構成を棒グラフで表示するようにしている。前述のように、本実施形態ではプリカウント段階で訪問者を新規訪問者と再訪問者と常連に区分けする機能を有しているが、この割合を図のように棒グラフで色分け表示する。これにより、グラフが例えば黒っぽいか白っぽいかで大体の傾向を一目で判断することができる。アクセスログから、閲覧者が過去にもこのページを訪問しているか否かを的確に判断することは困難である。共用のプロキシサーバ、共用のパソコン、接続毎にＩＰアドレスの変わるプロバイダ、自宅・会社・携帯電話のように複数端末を所持する場合など、同一ユーザの特定を妨げる要因は多数存在する。これに対し、閲覧者側のマシンに識別用のデータやプログラムを保存する手法も種々考案されているが、その場合でも複数の端末を所持する場合や逆に一台の端末を複数人で共用する場合には対応できない。また、元来匿名アクセスを旨とするＷｅｂサイトにあっては閲覧者の匿名意図は尊重すべきである。加えて、この分析プログラムで定義している「常連」という概念は多分に恣意的なものであり、設定次第で判定は変化する。このように、訪問者の区分を定量的数値で議論することは無意味であり、この種の統計では厳密な精度を問題にしない場合が多いことから、グラフのグラデーションで表示するのが適切と考えられる。
【００１２】
上記説明では、監視項目について「統計的変動量」を検出し、日常からの変動を検出し、診断結果を文章化して提供する分析処理について述べたが、本実施形態のアクセスログ分析装置では、「統計的変化傾向」を検出して、その診断結果を文章化して提供する機能も備えている。
この統計的変化傾向は、プリカウントデータ、もしくは生ログから所定期間内のデータについて最小二乗法による直線近似を行い、その傾きが一定以上の場合に、上記と同様に対応する診断文雛形を用いて診断文を生成することで実現している。
その他、監視項目の平均値や分散値を求め、この絶対値を所定の閾値と直接比較し、対応する診断文雛形を用いて診断文を生成するようにしてもよい。
これらを組合せることで、以下のような診断文が生成される。
「▲ヒット数は１日当たり３３ヒットの割で急激に増加しています。このままいけば、２１日後には７８５ヒット前後になると予想されます」
「このページを訪問する人の多く（７５％）は、最初にこのページをアクセスしています」
「このページを最後に帰ってしまう訪問者の割合は増加傾向にあります」
【００１３】
上記実施形態では、統計的変動量演算手段として、対象データのＺ値を求めて通常の変動に対して有意な変化があったことを検出するとして説明したが、本願発明はこれに限定されるものではなく、所定期間内のデータの統計量に基づいて対象とするデータの変動量を演算するものであればどのようなものでもよい。例えば、過去のデータの履歴に基づいて当日のデータの変動範囲を予測し、これに対して実際のデータがどのような関係にあるかを判断するようにしてもよく、本願発明の効果を奏する。
上記実施形態では、診断文を日本語で提示した場合について説明したが、本願発明はこれに限定されるものではなく、自然言語を使用して分析結果を提示するものであればどのようなものでもよく、本願発明の効果を奏する。
上記実施形態では、分析対象サーバ側には特別にプログラムをインストールすることなく自動生成されるhttpdログをそのまま利用するものとして説明したが、分析対象サーバ側に必要な情報を生成する機能がない場合にはログを生成又は加工するプログラムをインストールして実行させるようにしてもよい。また、必要に応じて転送効率を上げるための圧縮処理を行うプログラムをインストールするようにしてもよい。
また、上記実施形態では、アクセスログの取得はＦＴＰモジュールにより行うものとして説明したが、本願発明はこれに限定されるものではなく、どのような通信手段を用いてもよい。例えば、分析対象サーバが後述のようにＳＯＡＰに対応している場合はＳＯＡＰの機能を用いて通信するようにしてもよい。
【００１４】
上記実施形態では、分析対象サーバはＨＴＭＬにより記述されたＷｅｂページを対象として分析を行うものとして説明したが、本願発明はこれに限定されるものではなく、例えばＸＭＬ(eXtensible Markup Language）により記述されたＷｅｂページに対応する機能を設けてもよい。
ＸＭＬは、拡張可能なマークアップ言語であり、利用者が自由に定義できるタグによってデータ構造やデータの意味を記述でき、XSL(eXtensible Stylesheet Language)スタイルシートにより、データの内容と表現を分離して管理できるという特徴を有する。すなわち、ＸＭＬではデータとともにそのデータの名前や属性を表すタグも同時に含めることができるため、単純な数値型や文字型だけでなく、配列のような繰り返し型のデータや複雑な構造をしたデータやバイナリデータなどの任意のデータを格納することができる。例えば、「“価格”は“浮動小数点型”のデータであって、その値は“123.45”である」というようにデータを表現できるので、ここから価格データを取出す処理が容易に行える。このように、本願発明のアクセスログ分析装置にＸＭＬデータを取り扱う機能を設けることにより、データの意味を解釈しながらサイトのアクセス状況を分析することが可能となる。また、取得した意味情報を利用してアプリケーション間の情報連携機能や業務連携機能を持たせるようにしてもよく、これにより例えばワンストップサービスを提供するサイトに対して有効なマーケティングサービスを提供することが可能となる。
【００１５】
また、上記実施形態では、分析結果提供サーバにおいてもＨＴＭＬにより記述されたＷｅｂページによって分析結果を提供するものとして説明したが、ＸＭＬによって記述されたＷｅｂページによって分析結果を提供するようにしてもよい。ＸＭＬを使用することでデータや解析結果の知識表現を統一することができるので、例えば複数の顧客に対する解析結果からサイトに拠らないＷｅｂ全体の傾向を読取る等の分析結果の再利用機能を提供することができる。このように、XMLを用いてデータの共有化を図ることで多角的なシミュレートが行え、マーケティング用の標準化仕様を確立できる。また、内部表現を統一することでプラグイン形式のさまざまな解析処理ルーチンを抜き差しすることができるので、例えば前述のディスパッチャモジュールの処理を一般化し、より効率的に処理することが可能となる。更に、アクセスログ以外のさまざまなデータについてもアクセスログと同様に取扱うことができるので、解析結果を柔軟で判りやすい文章表現によって提供する汎用データ解析ツール・マーケティングツールとして多用途に活用することができる。
また、更に生データ、中間集計結果、診断結果などを表現するためのontology（体系的記述）を作成してＸＭＬ形式で保存したり、あるいは診断結果表示画面の中にＸＭＬタグを埋め込んでおくことにより検索性に優れたいわゆるSemantic Webとし、サービスを提供しているあらゆるサイトの「パターン」「定石」等を導き、コンサルティングなどの二次利用可能な情報として提供するようにしてもよい。
【００１６】
上記実施形態では、分析対象サーバはＨＴＴＰサーバであるものとして説明したが、ＳＯＡＰ(Simple Object Access Protocol)に対応したサーバであってもよい。ＳＯＡＰは、ＨＴＴＰなどを下位プロトコルとして使用し、簡単なＸＭＬベースのメッセージをやりとりして、リモートマシン上のオブジェクト（データ）へアクセスするための通信規約である。ＨＴＴＰプロトコルは、インターネット／イントラネットで最も広く普及しているものの１つであり、企業などがセキュリティのためにファイヤーウォールを設置している場合であっても、特別な措置（ある特定のプロトコルを通すようにフィルタの設定を変更するなど）を行うことなく常に利用できる可能性が高い。このように、ＳＯＡＰはＨＴＴＰを始めとして、ＳＭＴＰ(Simple Mail Transfer Protocol)やＦＴＰなどインターネットで既に広く普及しているものを下位プロトコルとして使用し、リモートマシン上のオブジェクトへアクセスしたり、サービスルーチンを呼び出したりすることができる。また、アクセス要求やその結果として返されるデータの表現形式としてＸＭＬを採用することにより、特定のフォーマットにとらわれない柔軟で汎用性の高いデータアクセス機能を提供する。
例えば、分析対象サーバのhttpdがＳＯＡＰに対応し、「○日の○時から○時のログを送れ」という要求に対してログを返す機能を提供する場合には、分析対象サーバに切り出し用のプログラムをおく必要は一切なくなり、アクセスログ分析サーバにおいてSOAPに対応したXMLメッセージを送信する機能を設けることで、分析対象サーバのアクセスログを取得できる。また、アクセスログはXMLデータとして取得されるので、分析対象毎にログ形式が異なっているものを補正したり、IPをドメイン名に変更する等の処理が簡単に行える。このように、ＳＯＡＰの機能を利用することで、アクセスログの取得時にプリフォーマットモジュールの処理やプリカウントモジュールの処理の一部または全部を行うことができ、より効率的にアクセスログ分析を行うことが可能となる。
また、分析対象サーバにおいて、アクセスを受けたときにアクセス情報をＳＯＡＰの機能を用いてアクセスログ分析サーバに通知するようにし、オンデマンドで分析処理を行うようにしてもよい。このように、アクセスの発生時点でアクセス情報を処理することで、蓄積された膨大なアクセスログを解析することなく、有用な情報を効率的に処理することが可能となる。
【００１７】
上記実施形態では、アクセスログ分析サーバおよび分析結果提供サーバはアクセスログ分析サービスの提供者側に設置され、顧客サイトに設置される分析対象サーバとインターネットを介して接続することによりアクセスログ分析サービスを提供するものとして説明したが、アクセスログ分析サービスの提供者がＡＳＰ(Application Service Provider)事業を兼ねる場合には、アクセスログ分析サーバと分析結果提供サーバを分析対象サーバとともにサービス提供者側に備えてＬＡＮを介して相互接続することにより、ＡＳＰサービスとアクセスログ分析サービスとをセットで提供するようにしてもよい。
また、アクセスログ分析サーバや分析結果提供サーバを顧客サイトに設置し、分析対象サーバとＬＡＮを介して接続することによりアクセスログ分析サービスを提供するようにしてもよい。この場合、サービス提供側において当該顧客が正規のライセンスを有するユーザであるか否かを管理するためライセンス管理サーバを設置することが好ましい。
【００１８】
図１７に、本願発明の他の実施形態として、アクセスログ分析サービスをライセンス契約により顧客に提供する場合のシステム構成例を示す。図のように、顧客の分析対象サーバ１０に対して、ＬＡＮを介してアクセスログ分析サーバ２０と分析結果提供サーバ２４とが接続され、アクセスログ分析サーバ２０がサイト内の分析対象サーバ１０からアクセスログ１２を取得して分析を行い、分析結果２２を分析結果提供サーバ２４により顧客に提供する。サービス提供者はライセンス管理サーバ２６を備え、アクセスログ分析サーバ２０とインターネットを介してライセンス情報を交換してユーザが正規のライセンスを取得しているか否かを確認する。
上記ライセンス管理サーバ２６とアクセスログ分析サーバ２０との通信は、専用の通信モジュールを設けて行うようにしてもよいが、前述のＳＯＡＰの機能を利用することで簡便に行うことができる。すなわち、アクセスログ分析サーバ２０とライセンス管理サーバ２６をＳＯＡＰ対応サーバとし、ライセンス管理サーバ２６はＳＯＡＰの通信機能によりアクセスログ分析サーバ２０に対してライセンスの確認やライセンス情報のアップデート要求を送信し、それに対する応答として定期的にライセンス情報を取得する。得られたライセンス情報を登録されている顧客のライセンス情報と比較し、正規のライセンスを有するユーザであればアクセスログ分析サービスの提供を許可する情報を送信する。これにより、正規のライセンスを有するユーザに対してのみアクセスログ分析サービスを提供することができる。
上記他の実施形態では、分析対象サーバと分析結果提供サーバとアクセスログ分析サーバは同一の顧客サイトに設置され、ＬＡＮを介して相互に接続されるものとして説明したが、一部または全部のサーバが異なるサイトに設置され、インターネットを介して相互に接続されるものであってもよい。
また、アクセスログ分析サービスを利用時間や利用回数に応じて課金する従量制のサービスとして提供するようにしてもよい。この場合には、ライセンス管理サーバにおいてアクセスログ分析サーバから処理時間や処理回数に関する情報を取得し、取得した情報に基づいてあらかじめ定めたルールに基づいて利用料金を計算し、利用者に対して請求するようにすればよい。
【００１９】
上記実施形態では、アクセスログ分析サーバと分析結果提供サーバは個別に備えられ、ＬＡＮまたはインターネットを介して相互に接続されたシステムについて説明したが、本願発明はこれに限定されるものではなく、同一のコンピュータ上にアクセスログ分析サーバの機能と分析結果提供サーバの機能とを有するアクセスログ分析プログラムをインストールすることによりサービスを提供するものであってもよい。また、更に分析対象サーバと同一のコンピュータ上にアクセスログ分析プログラムをインストールすることによりサービスを提供するものであってもよい。尚、この場合には、分析結果提供サーバの機能と分析対象サーバの機能は単一のＨＴＴＰサーバに集約することができるので、各サーバ機能に対応したＷｅｂページを個別に設けることで対応するようにしてもよい。
【００２０】
産業上の利用可能性
上述したように、本願発明によれば、分析対象となるサーバからアクセスログを取得するアクセスログ取得手段と、アクセスログ取得手段により取得されたデータを監視項目毎に集計する集計手段と、集計手段により集計されたデータをもとにサーバのアクセス状況を診断する診断手段と、診断手段により診断された結果を表示するための診断結果提示手段とを備えたアクセスログ分析装置において、診断手段が監視項目について所定期間内のデータの統計量に基づいて対象データの変動量を演算する統計的変動量演算手段と、演算された統計的変動量の範囲と対応する診断文の雛型を記述した診断テーブルを参照して診断文を生成する診断文生成手段とを有するので、Ｗｅｂサーバのアクセスログの膨大なデータの中から有意な情報を抽出し、分析結果を適確に表示することのできるアクセスログ分析装置を提供するという効果がある。
【図面の簡単な説明】
【００２１】
第１図は、本願発明の一実施形態に係るアクセスログ分析装置のシステム構成図である。
第２図は、本願発明の一実施形態に係るアクセスログ分析装置の分析処理フロー図である。
第３図は、プリフォーマットログの一例である。
第４図は、ヒット数に関するプリカウントテーブルの一例である。
第５図は、閲覧者のプリカウントテーブルの一例である。
第６図は、診断文テーブルの一例である。
第７図は、診断文生成処理の一例である。
第８図は、診断パラメータの一例である。
第９図は、診断文統合処理の処理フロー図である。
第１０図は、文章連結規則である。
第１１図は、ディスパッチャの処理フロー図である。
第１２図は、ディスパッチャの処理状況テーブルの一例である。
第１３図は、ディスパッチャのモジュール依存関係テーブルの一例である。
第１４図は、診断結果の表示画面例である。
第１５図は、グラフ表示の表示画面例である。
第１６図は、詳細レポートの表示画面例である。
第１７図は、本願発明の他の実施形態（ライセンス契約形態）に係るアクセスログ分析装置のシステム構成図である。

Claims (11)

1. 分析対象となるサーバからアクセスログを取得するアクセスログ取得手段と、前記アクセスログ取得手段により取得されたデータを監視項目毎に集計する集計手段と、前記集計手段により集計されたデータをもとに前記サーバのアクセス状況を診断する診断手段と、前記診断手段により診断された結果を分析依頼者に提示する診断結果提示手段とを備えたアクセスログ分析装置であって、
   前記診断手段は、診断の対象となる監視項目と、統計的変動量の閾値と、指定項目の名前や値を代入させることが可能な自然言語による診断文の雛形とが対応して登録された診断パラメータ記憶手段を備え、
   前記診断パラメータ記憶手段に登録された診断の対象となる各監視項目について、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する統計的変動量演算手段と、前記統計的変動量演算手段により演算された各監視項目の統計的変動量に基づき、前記診断パラメータ記憶手段に登録された閾値を超える監視項目を抽出し、前記診断パラメータ記憶手段に登録された診断文の雛形から、前記抽出された各監視項目の統計的変動量に対応する診断文の雛形を選択し、前記集計手段において抽出された名前や値を代入して診断文を生成する診断文生成手段とを有し、
   診断の対象となる監視項目について、平時と異なる変動があった監視項目を抽出し、当該抽出された各監視項目の変動状況に対応して文章化した自然言語による診断文を提示するようにしたことを特徴とする、アクセスログ分析装置。
2. 分析対象となるサーバからアクセスログを取得するアクセスログ取得手段と、前記アクセスログ取得手段により取得されたデータを監視項目毎に集計する集計手段と、前記集計手段により集計されたデータをもとに前記サーバのアクセス状況を診断する診断手段と、前記診断手段により診断された結果を分析依頼者に提示する診断結果提示手段とを備えたアクセスログ分析装置であって、
   前記診断手段は、診断の対象となる監視項目と、統計的変動量の閾値と、指定項目の名前や値を代入させることが可能な自然言語による診断文の雛形とが対応して登録された診断パラメータ記憶手段を備え、
   前記診断パラメータ記憶手段に登録された診断の対象となる各監視項目について、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する第１の統計的変動量演算手段と、前記第１の統計的変動量演算手段により演算された各監視項目の統計的変動量に基づき、前記診断パラメータ記憶手段に登録された閾値を超える監視項目を抽出し、前記診断パラメータ記憶手段に登録された診断文の雛形から、前記抽出された各監視項目の統計的変動量に対応する雛形を選択し、前記集計手段において抽出された名前や値を代入して主診断文を生成する主診断文生成手段と、
   前記主診断文生成手段により主診断文が生成されたときに、当該主診断文を生成した監視項目に関連する関連データについて、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する第２の統計的変動量演算手段と、前記第２の統計的変動量演算手段により演算された各関連データの統計的変動量に基づき、前記診断パラメータ記憶手段に登録された閾値を超える関連データを抽出し、前記診断パラメータ記憶手段に登録された診断文の雛形から、前記抽出された各関連データの統計的変動量に対応する診断文の雛形を選択し、前記集計手段において抽出された名前や値を代入して副診断文を生成する副診断文生成手段とを有し、
   診断の対象となる監視項目について、平時と異なる変動があった監視項目を抽出し、当該抽出された各監視項目の変動状況に対応して文章化した自然言語による主診断文を提示し、さらに前記主診断文を生成した監視項目に関連する関連データについて、平時と異なる変動があった関連データを抽出し、当該抽出された各関連データの変動状況に対応して文章化した自然言語による副診断文によって主診断文の補足説明を提示するようにしたことを特徴とする、アクセスログ分析装置。
3. 前記統計的変動量演算手段は、指定項目の過去一定期間内の平均と分散を求め、これを基に対象データの平均からの偏差を標準偏差で正規化したＺ値（Ｚスコア）を演算する手段を含むことを特徴とする、請求項１または請求項２に記載のアクセスログ分析装置である。
4. 前記診断手段は、診断文を書き出したモジュールにより指定された診断文種別に基づいて同種の診断文を取り出すための指標と、当該指標により取り出された診断文の変換部分と変換方法とを正規表現により記述した変換規則とが登録された文章連結規則テーブル記憶手段を備え、
   前記生成された複数の診断文について、各診断文を書き出したモジュールにより指定された診断文種別に基づき、前記文章連結規則テーブル記憶手段に登録された同種の診断文を取り出すための指標を参照して同種の診断文を抽出し、前記文章連結規則テーブル記憶手段に登録された変換規則に基づいて前記抽出された同種の診断文を変換して統合する診断文統合手段を有することを特徴とする、請求項１ないし請求項３のいずれかに記載のアクセスログ分析装置。
5. 前記集計手段は、カウントするリソースを正規表現で記述した第１の設定ファイルと、アドレス文字列とそれに対する名前を正規表現で記述した第２の設定ファイルと、アドレス文字列とそれに続くクエリー部の文字列の抽出を正規表現で記述した第３の設定ファイルと、検索エンジンのアドレス文字列とそれに続くクエリー部の文字列の抽出を正規表現で記述した第４の設定ファイルと、フォームの記入画面と確認画面と送信完了画面の各アドレスを正規表現で記述した第５の設定ファイルとが登録された設定ファイル記憶手段を備え、前記設定ファイル記憶手段に登録された前記第１の設定フィアルを用いて特定のアドレスのみを抽出する機能と、前記設定ファイル記憶手段に登録された前記第２の設定ファイルを用いて同一のアドレスを有する複数のファイルに対して同一の名前をつけて統合する機能と、前記設定ファイル記憶手段に登録された前記第３の設定ファイルを用いて同一アドレスに対するアクセスをクエリー部の文字列によって分離する機能と、前記設定ファイル記憶手段に登録された前記第４の設定ファイルを用いて参照元が検索エンジンである場合に検索文字によって分離する機能と、前記設定ファイル記憶手段に登録された前記第５の設定ファイルを用いて同じフォームの一連の送信段階であるものを統合する機能とを有し、前記アクセスログ取得手段により取得されたデータをプリフォーマットするプリフォーマット手段と、
   前記プリフォーマット手段によりプリフォーマットされたデータについて、監視項目毎に集計するプリカウント手段とを含むことを特徴とする、請求項１ないし請求項４のいずれかに記載のアクセスログ分析装置。
6. 前記集計手段は、参照元情報から新規訪問者と再訪問者を区分し、かつ再訪問者については訪問回数と訪問間隔から常連者を区分する機能を有し、
   前記診断結果提供手段は、前記区分された新規訪問者と再訪問者と常連の割合を訪問者情報として色分けグラフ表示する機能を有することを特徴とする、請求項１ないし請求項５のいずれかに記載のアクセスログ分析装置。
7. 前記分析依頼者のライセンス情報を取得してサービスの提供可否を判断するライセンス管理手段を備えたことを特徴とする、請求項１ないし請求項６のいずれかに記載のアクセスログ分析装置。
8. アクセスログ分析サーバが、分析対象となるサーバからアクセスログを取得するステップと、前記取得されたデータを監視項目毎に集計するステップと、前記集計されたデータをもとに前記サーバのアクセス状況を診断するステップと、前記診断された結果を分析依頼者に提示するステップとを実行し、前記アクセスログ分析サーバにより分析対象となるサーバのアクセスログを分析するアクセスログ分析方法であって、
   前記アクセスログ分析サーバが実行する前記診断するステップは、
   診断の対象となる監視項目と、統計的変動量の閾値と、指定項目の名前や値を代入させることが可能な自然言語による診断文の雛形とが対応して登録された診断パラメータ記憶ユニットを用い、
   前記診断パラメータ記憶ユニットに登録された診断の対象となる各監視項目について、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する統計的変動量演算ステップと、
   前記統計的変動量演算ステップにより演算された各監視項目の統計的変動量に基づき、前記診断パラメータ記憶ユニットに登録された閾値を超える監視項目を抽出し、前記診断パラメータ記憶ユニットに登録された診断文の雛形から、前記抽出された各監視項目の統計的変動量に対応する診断文の雛形を選択し、前記集計するステップにおいて抽出された名前や値を代入して診断文を生成する診断文生成ステップとを含み、
   診断の対象となる監視項目について、平時と異なる変動があった監視項目を抽出し、当該抽出された各監視項目の変動状況に対応して文章化した自然言語による診断文を提示するようにしたことを特徴とする、アクセスログ分析方法。
9. アクセスログ分析サーバが、分析対象となるサーバからアクセスログを取得するステップと、前記取得されたデータを監視項目毎に集計するステップと、前記集計されたデータをもとに前記サーバのアクセス状況を診断するステップと、前記診断された結果を分析依頼者に提示するステップとを実行し、前記アクセスログ分析サーバにより分析対象となるサーバのアクセスログを分析するアクセスログ分析方法であって、
   前記アクセスログ分析サーバが実行する前記診断するステップは、
   診断の対象となる監視項目と、統計的変動量の閾値と、指定項目の名前や値を代入させることが可能な自然言語による診断文の雛形とが対応して登録された診断パラメータ記憶ユニットを用い、
   前記診断パラメータ記憶ユニットに登録された各監視項目について、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する第１の統計的変動量演算ステップと、
   前記第１の統計的変動量演算ステップにより演算された各監視項目の統計的変動量に基づき、前記診断パラメータ記憶ユニットに登録された閾値を超える監視項目を抽出し、前記診断パラメータ記憶ユニットに登録された診断文の雛形から、前記抽出された各監視項目の統計的変動量に対応する診断文の雛形を選択し、前記集計するステップにおいて抽出された名前や値を代入して主診断文を生成する主診断文生成ステップと、
   前記主診断文生成ステップにより主診断文が生成されたときに、当該主診断文を生成した監視項目に関連する関連データについて、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する第２の統計的変動量演算ステップと、
   前記第２の統計的変動量演算ステップにより演算された各関連データの統計的変動量に基づき、前記診断パラメータ記憶ユニットに登録された閾値を超える関連データを抽出し、前記診断パラメータ記憶ユニットに登録された診断文の雛形から、前記抽出された各関連データの統計的変動量に対応する診断文の雛形を選択し、前記集計するステップにおいて抽出された名前や値を代入して副診断文を生成する副診断文生成ステップとを含み、
   診断の対象となる監視項目について、平時と異なる変動があった監視項目を抽出し、当該抽出された各監視項目の変動状況に対応して文章化した自然言語による主診断文を提示し、さらに前記主診断文を生成した監視項目に関連する関連データについて、平時と異なる変動があった関連データを抽出し、当該抽出された各関連データの変動状況に対応して文章化した自然言語による副診断文によって主診断文の補足説明を提示するようにしたことを特徴とする、アクセスログ分析方法。
10. コンピュータに、少なくとも分析対象となるサーバからアクセスログを取得する手順と、前記取得されたデータを監視項目毎に集計する手順と、前記集計されたデータをもとに前記サーバのアクセス状況を診断する手順と、前記診断された結果を分析依頼者に提示する手順とを実行させるためのプログラムであって、
    前記診断する手順は、診断の対象となる監視項目と、統計的変動量の閾値と、指定項目の名前や値を代入させることが可能な自然言語による診断文の雛形とが対応して登録された診断パラメータ記憶ユニットを用い、
    前記診断パラメータ記憶ユニットに登録された診断の対象となる各監視項目について、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する統計的変動量演算手順と、前記統計的変動量演算手順により演算された各監視項目の統計的変動量に基づき、前記診断パラメータ記憶ユニットに登録された閾値を超える監視項目を抽出し、前記診断パラメータ記憶ユニットに登録された診断文の雛形から、前記抽出された各監視項目の統計的変動量に対応する診断文の雛形を選択し、前記集計する手順において抽出された名前や値を代入して診断文を生成する診断文生成手順とを有し、
    診断の対象となる監視項目について、平時と異なる変動があった監視項目を抽出し、当該抽出された各監視項目の変動状況に対応して文章化した自然言語による診断文を提示するようにしたことを特徴とする、アクセスログ分析プログラム。
11. コンピュータに、少なくとも分析対象となるサーバからアクセスログを取得する手順と、前記取得されたデータを監視項目毎に集計する手順と、前記集計されたデータをもとに前記サーバのアクセス状況を診断する手順と、前記診断された結果を分析依頼者に提示する手順とを実行させるためのプログラムであって、
    前記診断する手順は、診断の対象となる監視項目と、統計的変動量の閾値と、指定項目の名前や値を代入させることが可能な自然言語による診断文の雛形とが対応して登録された診断パラメータ記憶ユニットを用い、
    前記診断パラメータ記憶ユニットに登録された各監視項目について、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する第１の統計的変動量演算手順と、前記第１の統計的変動量演算手順により演算された各監視項目の統計的変動量に基づき、前記診断パラメータ記憶ユニットに登録された閾値を超える監視項目を抽出し、前記診断パラメータ記憶ユニットに登録された診断文の雛形から、前記抽出された各監視項目の統計的変動量に対応する診断文の雛形を選択し、前記集計する手順において抽出された名前や値を代入して主診断文を生成する主診断文生成手順と、
    前記主診断文生成手順により主診断文が生成されたときに、当該主診断文を生成した監視項目に関連する関連データについて、過去一定期間内のデータの変動量に基づいて正規化した統計的変動量を演算する第２の統計的変動量演算手順と、前記第２の統計的変動量演算手順により演算された各関連データの統計的変動量に基づき、前記診断パラメータ記憶ユニットに登録された閾値を超える関連データを抽出し、前記診断パラメータ記憶ユニットに登録された診断文の雛形から、前記抽出された各関連データの統計的変動量に対応する診断文の雛形を選択し、前記集計する手順において抽出された名前や値を代入して副診断文を生成する副診断文生成手順とを有し、
    診断の対象となる監視項目について、平時と異なる変動があった監視項目を抽出し、当該抽出された各監視項目の変動状況に対応して文章化した自然言語による主診断文を提示し、さらに前記主診断文を生成した監視項目に関連する関連データについて、平時と異なる変動があった関連データを抽出し、当該抽出された各関連データの変動状況に対応して文章化した自然言語による副診断文によって主診断文の補足説明を提示するようにしたことを特徴とする、アクセスログ分析プログラム。

Images