JP2003076814A - アクセスログの縮約方法およびこれを実現するプログラム - Google Patents
アクセスログの縮約方法およびこれを実現するプログラムInfo
- Publication number
- JP2003076814A JP2003076814A JP2001269477A JP2001269477A JP2003076814A JP 2003076814 A JP2003076814 A JP 2003076814A JP 2001269477 A JP2001269477 A JP 2001269477A JP 2001269477 A JP2001269477 A JP 2001269477A JP 2003076814 A JP2003076814 A JP 2003076814A
- Authority
- JP
- Japan
- Prior art keywords
- access
- predetermined
- access log
- identification information
- log
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
(57)【要約】
【課題】本発明の課題は、記録されるアクセスログの中
から実質的に意味を有するアクセスログを抽出する方法
およびこれを実現するシステムを提案することである。 【解決手段】 本発明は、クライアントコンピュータか
らアクセスを受け付けて、所定の識別情報を発行するス
テップと、前記アクセスに基づいて、少なくとも所定の
コンテンツタイプ情報および前記所定の識別情報を含む
アクセスログを生成し、記憶するステップと、前記記憶
したアクセスログの中から所定のアクセスログを抽出す
るステップと、からなり、前記抽出するステップは、前
記所定のコンテンツタイプ情報が所定のページ記述言語
を示し、かつ、相互に一致する識別情報を含むアクセス
ログの数が所定数以上のアクセスログを抽出することを
特徴とするアクセスログの縮約方法である。
から実質的に意味を有するアクセスログを抽出する方法
およびこれを実現するシステムを提案することである。 【解決手段】 本発明は、クライアントコンピュータか
らアクセスを受け付けて、所定の識別情報を発行するス
テップと、前記アクセスに基づいて、少なくとも所定の
コンテンツタイプ情報および前記所定の識別情報を含む
アクセスログを生成し、記憶するステップと、前記記憶
したアクセスログの中から所定のアクセスログを抽出す
るステップと、からなり、前記抽出するステップは、前
記所定のコンテンツタイプ情報が所定のページ記述言語
を示し、かつ、相互に一致する識別情報を含むアクセス
ログの数が所定数以上のアクセスログを抽出することを
特徴とするアクセスログの縮約方法である。
Description
【０００１】
【発明の属する技術分野】本発明は、アクセスログ縮約
方法およびこれを実現するシステムに関する。
方法およびこれを実現するシステムに関する。
【０００２】
【従来技術】現在、インターネット上には、商用のＷｅ
ｂサイトが数多く存在する。Ｗｅｂは、今日のビジネス
活動において欠かすことができないものとなっており、
その理由の一つとして、クリックストリームと呼ばれる
新しいデータソースを提供しうることが挙げられる。ク
リックストリームとは、Ｗｅｂサイトにおけるユーザの
クリック行動を記録したデータソースである。Ｗｅｂサ
イトの運営者は、Ｗｅｂ上のユーザのクリック行動を捕
捉、追跡し、これをクリックストリームとして収集し、
分析することで、有益な情報として活用することができ
る。
ｂサイトが数多く存在する。Ｗｅｂは、今日のビジネス
活動において欠かすことができないものとなっており、
その理由の一つとして、クリックストリームと呼ばれる
新しいデータソースを提供しうることが挙げられる。ク
リックストリームとは、Ｗｅｂサイトにおけるユーザの
クリック行動を記録したデータソースである。Ｗｅｂサ
イトの運営者は、Ｗｅｂ上のユーザのクリック行動を捕
捉、追跡し、これをクリックストリームとして収集し、
分析することで、有益な情報として活用することができ
る。
【０００３】このようなクリックストリームを収集する
１つの方法として、Ｃｏｏｋｉｅと呼ばれる機能が利用
される。このＣｏｏｋｉｅ機能は、Ｗｅｂサーバが所定
の文字列（「Ｃｏｏｋｉｅ文字列」と呼ぶことにす
る。）を発行してこれをクライアントコンピュータに書
き込み、後にＷｅｂサーバが読み出せるようにするもの
である。Ｗｅｂサーバは、発行したＣｏｏｋｉｅ文字列
をログに記録しておくことで、アクセスを受け付けたク
ライアントコンピュータが初めてのアクセスであるのか
否かを判断することができる。クライアントコンピュー
タは、再度、そのＷｅｂサーバにアクセスする際には、
リクエストとともにＣｏｏｋｉｅ文字列をＷｅｂサーバ
に送信し、Ｗｅｂサーバは、クライアントコンピュータ
からのアクセスをログとして記録する。Ｃｏｏｋｉｅ機
能は、ＨＴＴＰ１．１標準機能ではないが、事実上の標
準としてＷｅｂサーバ／クライアントシステムに組み込
まれている。
１つの方法として、Ｃｏｏｋｉｅと呼ばれる機能が利用
される。このＣｏｏｋｉｅ機能は、Ｗｅｂサーバが所定
の文字列（「Ｃｏｏｋｉｅ文字列」と呼ぶことにす
る。）を発行してこれをクライアントコンピュータに書
き込み、後にＷｅｂサーバが読み出せるようにするもの
である。Ｗｅｂサーバは、発行したＣｏｏｋｉｅ文字列
をログに記録しておくことで、アクセスを受け付けたク
ライアントコンピュータが初めてのアクセスであるのか
否かを判断することができる。クライアントコンピュー
タは、再度、そのＷｅｂサーバにアクセスする際には、
リクエストとともにＣｏｏｋｉｅ文字列をＷｅｂサーバ
に送信し、Ｗｅｂサーバは、クライアントコンピュータ
からのアクセスをログとして記録する。Ｃｏｏｋｉｅ機
能は、ＨＴＴＰ１．１標準機能ではないが、事実上の標
準としてＷｅｂサーバ／クライアントシステムに組み込
まれている。
【０００４】
【発明が解決しようとする課題】頻繁にユーザの訪問が
あるようなＷｅｂサイトでは、Ｗｅｂサーバは、通常、
１日当たり数〜数十ＧＢｙｔｅの容量を超えるデータを
アクセスログとして記録している。ログとして記録され
た膨大な量のクリックストリームのすべてをコンピュー
タで処理することは理論的には可能であるが、コンピュ
ータリソースの効率的な利用とはいえない。
あるようなＷｅｂサイトでは、Ｗｅｂサーバは、通常、
１日当たり数〜数十ＧＢｙｔｅの容量を超えるデータを
アクセスログとして記録している。ログとして記録され
た膨大な量のクリックストリームのすべてをコンピュー
タで処理することは理論的には可能であるが、コンピュ
ータリソースの効率的な利用とはいえない。
【０００５】また、インターネット上のＷｅｂサイトを
探索して、キーワード等を収集する「ロボット」がＷｅ
ｂ上を巡回している。Ｗｅｂサーバは、このようなロボ
ットによりアクセスされた場合であっても、実際のユー
ザによるものと区別することなく、ログとして記録する
ことになる。しかしながら、ロボットによるクリックス
トリームは、分析上の意味がなく、ログのデータ量をむ
やみに増やすばかりで、コンピュータの処理に負荷をか
ける要因となっていた。
探索して、キーワード等を収集する「ロボット」がＷｅ
ｂ上を巡回している。Ｗｅｂサーバは、このようなロボ
ットによりアクセスされた場合であっても、実際のユー
ザによるものと区別することなく、ログとして記録する
ことになる。しかしながら、ロボットによるクリックス
トリームは、分析上の意味がなく、ログのデータ量をむ
やみに増やすばかりで、コンピュータの処理に負荷をか
ける要因となっていた。
【０００６】さらに、典型的なＷｅｂページは、イメー
ジデータ等の他のリソースへの参照を示すＵＲＬを含ん
だソースデータとして構成されている。クライアントコ
ンピュータは、Ｗｅｂサーバに対してこのＷｅｂページ
をリクエストして、Ｗｅｂページのソースデータを取得
すると、そのソースデータを解析しながらそこに含まれ
るＵＲＬにしたがって他のリソースをリクエストする。
このため、Ｗｅｂサーバは、１つのＷｅｂページについ
てのリクエストであっても、ほとんど多くの場合で、ク
ライアントコンピュータから複数のアクセスを受けてお
り、その都度、そのアクセスをログとして記録してい
た。したがって、Ｗｅｂサーバがクリックストリームを
ログとして記録しても、そのすべてが分析上の意味がな
いにもかかわらず、実質的なログのみに着目する手法が
確立されていなかった。
ジデータ等の他のリソースへの参照を示すＵＲＬを含ん
だソースデータとして構成されている。クライアントコ
ンピュータは、Ｗｅｂサーバに対してこのＷｅｂページ
をリクエストして、Ｗｅｂページのソースデータを取得
すると、そのソースデータを解析しながらそこに含まれ
るＵＲＬにしたがって他のリソースをリクエストする。
このため、Ｗｅｂサーバは、１つのＷｅｂページについ
てのリクエストであっても、ほとんど多くの場合で、ク
ライアントコンピュータから複数のアクセスを受けてお
り、その都度、そのアクセスをログとして記録してい
た。したがって、Ｗｅｂサーバがクリックストリームを
ログとして記録しても、そのすべてが分析上の意味がな
いにもかかわらず、実質的なログのみに着目する手法が
確立されていなかった。
【０００７】さらにまた、クライアントコンピュータ側
で上述のＣｏｏｋｉｅ機能の利用可否を設定できるた
め、ユーザが利用不可に設定している場合には、クライ
アントコンピュータにＣｏｏｋｉｅ文字列が書き込まれ
ず、アクセスのたびに新たなＣｏｏｋｉｅ文字列が発行
され、これがアクセスログに記録されていた。したがっ
て、このような場合にも、アクセスログのデータ量が増
えてしまうという問題があった。
で上述のＣｏｏｋｉｅ機能の利用可否を設定できるた
め、ユーザが利用不可に設定している場合には、クライ
アントコンピュータにＣｏｏｋｉｅ文字列が書き込まれ
ず、アクセスのたびに新たなＣｏｏｋｉｅ文字列が発行
され、これがアクセスログに記録されていた。したがっ
て、このような場合にも、アクセスログのデータ量が増
えてしまうという問題があった。
【０００８】そこで、本発明は、記録されるアクセスロ
グの中から実質的に意味を有するアクセスログを抽出す
る方法およびこれを実現するシステムを提案することを
課題としている。
グの中から実質的に意味を有するアクセスログを抽出す
る方法およびこれを実現するシステムを提案することを
課題としている。
【０００９】
【課題を解決するための手段】本発明の要旨は、クライ
アントコンピュータからのアクセスによって収集された
アクセスログのうち、コンテンツタイプ情報が所定のペ
ージ記述言語を示し、かつ、相互に一致する識別情報を
含むアクセスログの数が所定数以上のアクセスログを抽
出することにより、アクセスログのデータ量を縮約する
ことである。
アントコンピュータからのアクセスによって収集された
アクセスログのうち、コンテンツタイプ情報が所定のペ
ージ記述言語を示し、かつ、相互に一致する識別情報を
含むアクセスログの数が所定数以上のアクセスログを抽
出することにより、アクセスログのデータ量を縮約する
ことである。
【００１０】より、具体的には、本発明は、クライアン
トコンピュータからアクセスを受け付けて、所定の識別
情報を取得するステップと、前記アクセスに基づいて、
少なくとも所定のコンテンツタイプ情報および前記所定
の識別情報を含むアクセスログを生成し、記憶するステ
ップと、前記記憶したアクセスログの中から所定のアク
セスログを抽出するステップと、からなり、前記抽出す
るステップは、前記所定のコンテンツタイプ情報が所定
のページ記述言語を示し、かつ、相互に一致する識別情
報を含むアクセスログの数が所定数以上のアクセスログ
を抽出することを特徴とするアクセスログの縮約方法で
ある。
トコンピュータからアクセスを受け付けて、所定の識別
情報を取得するステップと、前記アクセスに基づいて、
少なくとも所定のコンテンツタイプ情報および前記所定
の識別情報を含むアクセスログを生成し、記憶するステ
ップと、前記記憶したアクセスログの中から所定のアク
セスログを抽出するステップと、からなり、前記抽出す
るステップは、前記所定のコンテンツタイプ情報が所定
のページ記述言語を示し、かつ、相互に一致する識別情
報を含むアクセスログの数が所定数以上のアクセスログ
を抽出することを特徴とするアクセスログの縮約方法で
ある。
【００１１】ここで、前記抽出するステップは、前記所
定のコンテンツタイプ情報が所定のページ記述言語を示
すアクセスログのみをさらに抽出することが好ましい。
定のコンテンツタイプ情報が所定のページ記述言語を示
すアクセスログのみをさらに抽出することが好ましい。
【００１２】また、本発明は、前記アクセスログの縮約
方法により抽出されたアクセスログに基づいて、所定の
分析処理を行うことを特徴としている。
方法により抽出されたアクセスログに基づいて、所定の
分析処理を行うことを特徴としている。
【００１３】以上のような方法の発明は、装置の発明ま
たはプログラムあるいはプログラムを記録した記録媒体
としても成立する。
たはプログラムあるいはプログラムを記録した記録媒体
としても成立する。
【００１４】なお、本明細書において、手段とは、単に
物理的手段を意味するものではなく、その手段が有する
機能をソフトウェアによって実現する場合も含む。ま
た、１つの手段が有する機能が２つ以上の物理的手段に
より実現されても、２つ以上の手段の機能が１つの物理
的手段により実現されても良い。
物理的手段を意味するものではなく、その手段が有する
機能をソフトウェアによって実現する場合も含む。ま
た、１つの手段が有する機能が２つ以上の物理的手段に
より実現されても、２つ以上の手段の機能が１つの物理
的手段により実現されても良い。
【００１５】
【発明の実施の形態】次に、本発明の実施の形態につい
て、図面を参照しつつ説明する。
て、図面を参照しつつ説明する。
【００１６】図１は、本実施形態に係るシステムの構成
を説明するためのブロックダイアグラムである。企業側
システムは、インターネット上のＷｅｂサービスを提供
するＷｅｂサーバコンピュータ１と、Ｗｅｂサーバコン
ピュータ１の一機能によって収集されるアクセスログを
分析する分析コンピュータ２とを備える。クライアント
コンピュータ３は、Ｗｅｂクライアントプログラム（ブ
ラウザ）を実装している。クライアントコンピュータ３
は、典型的には、パーソナルコンピュータが相当する
が、携帯電話機等の情報端末であってもよい。このよう
な情報端末の中にはＣｏｏｋｉｅ機能に対応していない
ものもあり、したがってこれをアクセスログに記録する
ことができないが、この場合には、情報端末が発信する
識別情報等を利用することができる。
を説明するためのブロックダイアグラムである。企業側
システムは、インターネット上のＷｅｂサービスを提供
するＷｅｂサーバコンピュータ１と、Ｗｅｂサーバコン
ピュータ１の一機能によって収集されるアクセスログを
分析する分析コンピュータ２とを備える。クライアント
コンピュータ３は、Ｗｅｂクライアントプログラム（ブ
ラウザ）を実装している。クライアントコンピュータ３
は、典型的には、パーソナルコンピュータが相当する
が、携帯電話機等の情報端末であってもよい。このよう
な情報端末の中にはＣｏｏｋｉｅ機能に対応していない
ものもあり、したがってこれをアクセスログに記録する
ことができないが、この場合には、情報端末が発信する
識別情報等を利用することができる。
【００１７】Ｗｅｂサーバコンピュータ１は、Ｗｅｂサ
ーバプログラム１１、ページデータ１２、ＣＧＩプログ
ラム１３およびアクセスログデータベース１４を備え
る。Ｗｅｂサーバプログラム１１は、ユーザのクライア
ントコンピュータ３からＨＴＴＰにしたがったリクエス
トメッセージを受け付けて、そのメッセージに対応した
レスポンスをクライアントコンピュータ３に送り返す。
例えば、Ｗｅｂサーバプログラム１１は、ＵＲＬによっ
て指定されるページデータ１２のリクエストに応答し
て、そのユーザのクライアントコンピュータ３にそのペ
ージデータ１２を提供する。このとき、Ｗｅｂサーバプ
ログラム１１は、Ｃｏｏｋｉｅ文字列を発行して、これ
をレスポンスとともにクライアントコンピュータ３に送
り返すとともに、アクセスログとしてアクセスログＤＢ
１４に出力する。このアクセスログが、いわゆるクリッ
クストリームである。Ｗｅｂサーバプログラム１１は、
典型的には、ｈｔｔｐｄと呼ばれるデーモンプログラム
としてサーバコンピュータ１に実装される。
ーバプログラム１１、ページデータ１２、ＣＧＩプログ
ラム１３およびアクセスログデータベース１４を備え
る。Ｗｅｂサーバプログラム１１は、ユーザのクライア
ントコンピュータ３からＨＴＴＰにしたがったリクエス
トメッセージを受け付けて、そのメッセージに対応した
レスポンスをクライアントコンピュータ３に送り返す。
例えば、Ｗｅｂサーバプログラム１１は、ＵＲＬによっ
て指定されるページデータ１２のリクエストに応答し
て、そのユーザのクライアントコンピュータ３にそのペ
ージデータ１２を提供する。このとき、Ｗｅｂサーバプ
ログラム１１は、Ｃｏｏｋｉｅ文字列を発行して、これ
をレスポンスとともにクライアントコンピュータ３に送
り返すとともに、アクセスログとしてアクセスログＤＢ
１４に出力する。このアクセスログが、いわゆるクリッ
クストリームである。Ｗｅｂサーバプログラム１１は、
典型的には、ｈｔｔｐｄと呼ばれるデーモンプログラム
としてサーバコンピュータ１に実装される。
【００１８】ページデータ１２は、例えばＨＴＭＬなど
のページ記述言語を用いて設計された、ユーザに提供す
べき画面を構成するドキュメントデータである。１つの
ページデータ１２は、通常、他のリソース（ページデー
タやイメージデータ等）への参照を示すＵＲＬを含んで
構成される。なお、ページデータ１２は、静的なデータ
として予め用意されているものの他、ＣＧＩプログラム
１３などによって動的に生成されるものであってもよ
い。
のページ記述言語を用いて設計された、ユーザに提供す
べき画面を構成するドキュメントデータである。１つの
ページデータ１２は、通常、他のリソース（ページデー
タやイメージデータ等）への参照を示すＵＲＬを含んで
構成される。なお、ページデータ１２は、静的なデータ
として予め用意されているものの他、ＣＧＩプログラム
１３などによって動的に生成されるものであってもよ
い。
【００１９】ＣＧＩプログラム１３は、Ｗｅｂサーバプ
ログラム１１がＨＴＴＰにより特定のメッセージを受け
付けた場合に、実行されるプログラムである。ＣＧＩプ
ログラム１３は、典型的にはＰｅｒｌやＣ＋＋などのプ
ログラム言語により記述される。
ログラム１１がＨＴＴＰにより特定のメッセージを受け
付けた場合に、実行されるプログラムである。ＣＧＩプ
ログラム１３は、典型的にはＰｅｒｌやＣ＋＋などのプ
ログラム言語により記述される。
【００２０】アクセスログＤＢ１４は、上述したよう
に、Ｗｅｂサーバプログラム１１が出力するアクセスロ
グを記録する。図２は、アクセスログのデータ構造の一
例を示す図である。１つのアクセスログは、いくつかの
フィールドから構成されており、同図では、そのうちの
代表的なフィールドを示している。このうち、Ｃｏｏｋ
ｉｅ文字列フィールドは、Ｗｅｂサーバプログラム１１
が発行した識別情報等を含んで構成されている。なお、
他の通信網を介した情報端末からのアクセスによるアク
セスログについては、他のデータ構造を有していてもよ
い。このようなアクセスログでは、Ｃｏｏｋｉｅ文字列
フィールドとは異なる他のフィールドに端末識別情報が
含まれることが好ましい。
に、Ｗｅｂサーバプログラム１１が出力するアクセスロ
グを記録する。図２は、アクセスログのデータ構造の一
例を示す図である。１つのアクセスログは、いくつかの
フィールドから構成されており、同図では、そのうちの
代表的なフィールドを示している。このうち、Ｃｏｏｋ
ｉｅ文字列フィールドは、Ｗｅｂサーバプログラム１１
が発行した識別情報等を含んで構成されている。なお、
他の通信網を介した情報端末からのアクセスによるアク
セスログについては、他のデータ構造を有していてもよ
い。このようなアクセスログでは、Ｃｏｏｋｉｅ文字列
フィールドとは異なる他のフィールドに端末識別情報が
含まれることが好ましい。
【００２１】一方、分析コンピュータ２は、アクセスロ
グ縮約プログラム１５およびアクセスログ分析プログラ
ム１５を備える。アクセスログ縮約プログラム１５は、
後述するように、アクセスログＤＢ１４に記録されてい
る全てのアクセスログを、所定の条件にしたがって、分
析に有効と思われるアクセスログのみに縮約するもので
ある。アクセスログ分析プログラム１６は、アクセスロ
グ縮約プログラム１５によって縮約されたアクセスログ
をさまざまな角度から分析を行い、分析結果を出力す
る。分析とは、例えば、Ｗｅｂサイトを訪問したユーザ
のニーズについて、年齢、地域等の属性ごとの特徴抽出
である。
グ縮約プログラム１５およびアクセスログ分析プログラ
ム１５を備える。アクセスログ縮約プログラム１５は、
後述するように、アクセスログＤＢ１４に記録されてい
る全てのアクセスログを、所定の条件にしたがって、分
析に有効と思われるアクセスログのみに縮約するもので
ある。アクセスログ分析プログラム１６は、アクセスロ
グ縮約プログラム１５によって縮約されたアクセスログ
をさまざまな角度から分析を行い、分析結果を出力す
る。分析とは、例えば、Ｗｅｂサイトを訪問したユーザ
のニーズについて、年齢、地域等の属性ごとの特徴抽出
である。
【００２２】本実施形態は、Ｗｅｂサーバプログラム１
１によって出力され、アクセスログＤＢ１４に記録され
たアクセスログを、分析プログラム１６による分析が行
われる前に、アクセスログ縮約プログラム１５が所定の
条件にしたがってフィルタリングして、そのデータ量を
縮約することを特徴としている。
１によって出力され、アクセスログＤＢ１４に記録され
たアクセスログを、分析プログラム１６による分析が行
われる前に、アクセスログ縮約プログラム１５が所定の
条件にしたがってフィルタリングして、そのデータ量を
縮約することを特徴としている。
【００２３】図３は、本実施形態に係るアクセスログ縮
約プログラム１５の動作を説明するためのフローチャー
トである。アクセスログ縮約プログラム１５は、例え
ば、バッチ処理により所定のタイミング（例えば２４時
間ごと）で実行される。
約プログラム１５の動作を説明するためのフローチャー
トである。アクセスログ縮約プログラム１５は、例え
ば、バッチ処理により所定のタイミング（例えば２４時
間ごと）で実行される。
【００２４】まず、アクセスログ縮約プログラム１５
は、アクセスログＤＢ１４からアクセスログを読み込ん
で、前処理としてＣｏｏｋｉｅ文字列フィールドに
“−”等の利用不可を示す情報が与えられているアクセ
スログを削除した後、Ｃｏｏｋｉｅ文字列順にこれをソ
ートする（ＳＴＥＰ３０１）。なお、上述したような他
のデータ構造を有するアクセスログについては、他のフ
ィールドに含まれる端末識別情報をＣｏｏｋｉｅ文字列
フィールドにコピーすることで、これをＣｏｏｋｉｅ文
字列として等価に扱うことができ、あるいは端末識別情
報を含む他のフィールド順にソートするようにしても良
い。次に、アクセスログ縮約プログラム１５は、全ての
アクセスログについて以下の処理を行う（ＳＴＥＰ３０
２乃至３０５）。
は、アクセスログＤＢ１４からアクセスログを読み込ん
で、前処理としてＣｏｏｋｉｅ文字列フィールドに
“−”等の利用不可を示す情報が与えられているアクセ
スログを削除した後、Ｃｏｏｋｉｅ文字列順にこれをソ
ートする（ＳＴＥＰ３０１）。なお、上述したような他
のデータ構造を有するアクセスログについては、他のフ
ィールドに含まれる端末識別情報をＣｏｏｋｉｅ文字列
フィールドにコピーすることで、これをＣｏｏｋｉｅ文
字列として等価に扱うことができ、あるいは端末識別情
報を含む他のフィールド順にソートするようにしても良
い。次に、アクセスログ縮約プログラム１５は、全ての
アクセスログについて以下の処理を行う（ＳＴＥＰ３０
２乃至３０５）。
【００２５】すなわち、アクセスログ縮約プログラム１
５は、同一のＣｏｏｋｉｅ文字列（あるいは端末識別情
報）を持つアクセスログ群に注目する（ＳＴＥＰ３０
２）。アクセスログ縮約プログラム１５は、注目したア
クセスログ群の中に、コンテンツタイプがページ記述言
語（ＨＴＭＬ等）のものが少なくと１つあり、かつ、リ
クエストが所定アクセス数（例えば５アクセス）以上あ
るか否かをチェックする（ＳＴＥＰ３０３および３０
４）。所定アクセス数は、典型的なページ構成水準に基
づいて適宜決定することができる。アクセスログ縮約プ
ログラム１５は、これらの条件をともに満たす当該アク
セスログ群をバッファに出力する（ＳＴＥＰ３０５）。
つまり、これらの条件をいずれか一方でも満たさないア
クセスログは、破棄されることになる。アクセスログ縮
約プログラム１５は、同様に、次のアクセスログ群に注
目し、上記処理を行う。
５は、同一のＣｏｏｋｉｅ文字列（あるいは端末識別情
報）を持つアクセスログ群に注目する（ＳＴＥＰ３０
２）。アクセスログ縮約プログラム１５は、注目したア
クセスログ群の中に、コンテンツタイプがページ記述言
語（ＨＴＭＬ等）のものが少なくと１つあり、かつ、リ
クエストが所定アクセス数（例えば５アクセス）以上あ
るか否かをチェックする（ＳＴＥＰ３０３および３０
４）。所定アクセス数は、典型的なページ構成水準に基
づいて適宜決定することができる。アクセスログ縮約プ
ログラム１５は、これらの条件をともに満たす当該アク
セスログ群をバッファに出力する（ＳＴＥＰ３０５）。
つまり、これらの条件をいずれか一方でも満たさないア
クセスログは、破棄されることになる。アクセスログ縮
約プログラム１５は、同様に、次のアクセスログ群に注
目し、上記処理を行う。
【００２６】アクセスログ縮約プログラム１５は、全て
のアクセスログについてチェックし終わると、バッファ
に出力されたアクセスログのうち、コンテンツタイプが
ページ記述言語のもの以外のアクセスログを削除する
（ＳＴＥＰ３０６）。そして、アクセスログ縮約プログ
ラム１５は、バッファの内容を縮約されたアクセスログ
としてアクセスＤＢ１４に出力する（ＳＴＥＰ３０
７）。
のアクセスログについてチェックし終わると、バッファ
に出力されたアクセスログのうち、コンテンツタイプが
ページ記述言語のもの以外のアクセスログを削除する
（ＳＴＥＰ３０６）。そして、アクセスログ縮約プログ
ラム１５は、バッファの内容を縮約されたアクセスログ
としてアクセスＤＢ１４に出力する（ＳＴＥＰ３０
７）。
【００２７】このようにしてアクセスログＤＢ１４に出
力された縮約されたアクセスログは、アクセスログ分析
プログラム１６によって、適宜、分析に利用されること
になる。
力された縮約されたアクセスログは、アクセスログ分析
プログラム１６によって、適宜、分析に利用されること
になる。
【００２８】なお、上記処理の流れについてはシーケン
シャルに説明したが、特にこれにこだわるものではな
い。従って、処理の結果に矛盾が生じない限り、処理の
順序を入れ替えまたは並行動作するように構成しても良
い。
シャルに説明したが、特にこれにこだわるものではな
い。従って、処理の結果に矛盾が生じない限り、処理の
順序を入れ替えまたは並行動作するように構成しても良
い。
【００２９】上記実施形態は、本発明を説明するための
例示であり、本発明をこの実施形態にのみ限定する趣旨
ではない。本発明は、その要旨を逸脱しない限り、さま
ざまな形態で実施することができる。
例示であり、本発明をこの実施形態にのみ限定する趣旨
ではない。本発明は、その要旨を逸脱しない限り、さま
ざまな形態で実施することができる。
【００３０】
【発明の効果】本発明によれば、記録されるアクセスロ
グの中から実質的に意味を有するアクセスログを抽出す
ることができるようになる。
グの中から実質的に意味を有するアクセスログを抽出す
ることができるようになる。
【図１】本発明の一実施形態に係るシステムの構成を説
明するためのブロックダイアグラムである。
明するためのブロックダイアグラムである。
【図２】本発明の一実施形態に係るアクセスログのデー
タ構造の一例を示す図である。
タ構造の一例を示す図である。
【図３】本発明の一実施形態に係るアクセスログ縮約プ
ログラム１５の動作を説明するためのフローチャートで
ある。
ログラム１５の動作を説明するためのフローチャートで
ある。
１…Ｗｅｂサーバコンピュータ
２…クライアントコンピュータ
３…分析コンピュータ
１１…Ｗｅｂサーバプログラム
１２…ページデータ
１３…ＣＧＩプログラム
１４…アクセスログデータベース
１５…アクセスログ縮約プログラム
１６…アクセスログ分析プログラム
Claims (5)
- 【請求項１】クライアントコンピュータからアクセスを
受け付けて、所定の識別情報を取得するステップと、 前記アクセスに基づいて、少なくとも所定のコンテンツ
タイプ情報および前記所定の識別情報を含むアクセスロ
グを生成し、記憶するステップと、 前記記憶したアクセスログの中から所定のアクセスログ
を抽出するステップと、からなり、 前記抽出するステップは、 前記所定のコンテンツタイプ情報が所定のページ記述言
語を示し、かつ、相互に一致する識別情報を含むアクセ
スログの数が所定数以上のアクセスログを抽出すること
を特徴とするアクセスログの縮約方法。 - 【請求項２】前記抽出するステップは、 前記所定のコンテンツタイプ情報が所定のページ記述言
語を示すアクセスログのみをさらに抽出することを特徴
とする請求項１記載のアクセスログの縮約方法。 - 【請求項３】前記アクセスログの縮約方法により抽出さ
れたアクセスログに基づいて、所定の分析処理を行うこ
とを特徴とする請求項１または２記載の分析方法。 - 【請求項４】クライアントコンピュータからアクセスを
受け付けた場合に、所定の識別情報を取得する取得手段
と、 前記アクセスに基づいて、少なくとも所定のコンテンツ
タイプ情報および前記所定の識別情報を含むアクセスロ
グを生成する生成手段と、 前記アクセスログを記憶する記憶手段と、 前記記憶手段に記憶されたアクセスログの中から所定の
アクセスログを抽出する抽出手段と、を備え、 前記抽出手段は、 前記所定のコンテンツタイプ情報が所定のページ記述言
語を示し、かつ、相互に一致する識別情報を含むアクセ
スログの数が所定数以上のアクセスログを抽出すること
を特徴とするアクセスログ縮約装置。 - 【請求項５】コンピュータに所定の機能を実現させるプ
ログラムであって、前記プログラムは、 クライアントコンピュータからアクセスを受け付けた場
合に、所定の識別情報を取得させる取得機能と、 前記アクセスに基づいて、少なくとも所定のコンテンツ
タイプ情報および前記所定の識別情報を含むアクセスロ
グを生成させる生成機能と、 所定の記憶手段に、前記アクセスログを記憶させる記憶
機能と、 前記所定の記憶手段に記憶されたアクセスログの中から
所定のアクセスログを抽出させる抽出機能と、を備え、 前記抽出機能は、 前記所定のコンテンツタイプ情報が所定のページ記述言
語を示し、かつ、相互に一致する識別情報を含むアクセ
スログの数が所定数以上のアクセスログを抽出させるこ
とを特徴とするアクセスログを縮約するプログラム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001269477A JP2003076814A (ja) | 2001-09-05 | 2001-09-05 | アクセスログの縮約方法およびこれを実現するプログラム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001269477A JP2003076814A (ja) | 2001-09-05 | 2001-09-05 | アクセスログの縮約方法およびこれを実現するプログラム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003076814A true JP2003076814A (ja) | 2003-03-14 |
Family
ID=19095289
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001269477A Pending JP2003076814A (ja) | 2001-09-05 | 2001-09-05 | アクセスログの縮約方法およびこれを実現するプログラム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003076814A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2315393A2 (en) | 2009-10-20 | 2011-04-27 | Hitachi, Ltd. | Acces log management method |
-
2001
- 2001-09-05 JP JP2001269477A patent/JP2003076814A/ja active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2315393A2 (en) | 2009-10-20 | 2011-04-27 | Hitachi, Ltd. | Acces log management method |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US20230177008A1 (en) | Session-Based Processing Method and System | |
| US10382573B2 (en) | Method for click-stream analysis using web directory reverse categorization | |
| US7013323B1 (en) | System and method for developing and interpreting e-commerce metrics by utilizing a list of rules wherein each rule contain at least one of entity-specific criteria | |
| US6741990B2 (en) | System and method for efficient and adaptive web accesses filtering | |
| US6401118B1 (en) | Method and computer program product for an online monitoring search engine | |
| US6983320B1 (en) | System, method and computer program product for analyzing e-commerce competition of an entity by utilizing predetermined entity-specific metrics and analyzed statistics from web pages | |
| US8001118B2 (en) | Methods and apparatus for employing usage statistics in document retrieval | |
| US6510461B1 (en) | System for managing and automatically deleting network address identified and stored during a network communication session when the network address is visited | |
| US6615259B1 (en) | Method and apparatus for scanning a web site in a distributed data processing system for problem determination | |
| US7020082B2 (en) | Network usage monitoring device and associated method | |
| US7664732B2 (en) | Method of managing websites registered in search engine and a system thereof | |
| US20080082687A1 (en) | Method, system, and computer program product for implementing collaborative correction of online content | |
| KR100509276B1 (ko) | 웹페이지별 방문인기도에 기반한 웹페이지 검색방법 및 그장치 | |
| CN102065147A (zh) | 一种基于企业应用系统获取用户登录信息的方法及装置 | |
| Sukumar et al. | Review on modern Data Preprocessing techniques in Web usage mining (WUM) | |
| CN109359263B (zh) | 一种用户行为特征提取方法及系统 | |
| Castellano et al. | LODAP: a log data preprocessor for mining web browsing patterns | |
| US6535916B1 (en) | Systems, methods and computer program products for linking transactions by multiple web site servers to web site visitors | |
| Castellano et al. | Log data preparation for mining web usage patterns | |
| Shivaprasad et al. | Knowledge discovery from web usage data: An efficient implementation of web log preprocessing techniques | |
| Suneetha et al. | Data preprocessing and easy access retrieval of data through data ware house | |
| JP2003076814A (ja) | アクセスログの縮約方法およびこれを実現するプログラム | |
| JP2003173351A (ja) | 情報解析、収集、検索方法、装置、プログラム、および記録媒体 | |
| EP1205857A2 (en) | Apparatus for retrieving data | |
| CN114547171A (zh) | 一种基于大数据分析的业务数据的处理方法及系统 |