JP6845787B2 - ログ分析システム - Google Patents
ログ分析システム Download PDFInfo
- Publication number
- JP6845787B2 JP6845787B2 JP2017220768A JP2017220768A JP6845787B2 JP 6845787 B2 JP6845787 B2 JP 6845787B2 JP 2017220768 A JP2017220768 A JP 2017220768A JP 2017220768 A JP2017220768 A JP 2017220768A JP 6845787 B2 JP6845787 B2 JP 6845787B2
- Authority
- JP
- Japan
- Prior art keywords
- analysis
- log
- result
- storage area
- analysis engine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
図1は、本実施形態に係るログ分析システムSの模式図である。ログ分析システムSは、ログ分析装置1と、ログ分析サーバ2と、ログ取得端末3と、結果利用端末4と、を含む。ログ分析装置1、ログ分析サーバ2、ログ取得端末3及び結果利用端末4は、ローカルエリアネットワーク、インターネット等の任意のネットワークNを介して接続される。ログ分析システムSは、その他のサーバ、端末等の機器を含んでもよい。
図2は、本実施形態に係るログ分析システムSによるログ分析方法全体の模式図である。図2において、「アプリ」はアプリケーションを指す。まず、分析エンジンを提供するユーザである分析者U1は、分析エンジンをログ分析装置1に登録する(a)。このとき、ログ分析装置1は、分析エンジンをログ分析サーバ2に記憶し、分析エンジンを実行可能な状態にする。
図3は、本実施形態に係るログ分析装置1のブロック図である。図3において、矢印は主なデータの流れを示しており、図3に示したもの以外のデータの流れがあってよい。図3において、各ブロックはハードウェア(装置)単位の構成ではなく、機能単位の構成を示している。そのため、図3に示すブロックは単一の装置内に実装されてよく、あるいは複数の装置内に別れて実装されてよい。ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてよい。
選択受付部112は、ログ分析サーバ2に登録済の分析エンジンのうち、アプリケーションで利用したい分析エンジンの選択を開発者U2から受け付ける。開発者U2による分析エンジンの選択は、例えばネットワークNを介したWebページにおいて行われる。
アクセス制御部114は、ログ取得端末3又は結果利用端末4に導入されたアプリケーションからのアクセスを受けると、アプリケーションに組み込まれたアクセス情報を取得する。そしてアクセス制御部114は、アプリケーションから取得したアクセス情報を記憶部13に記憶されたアクセス情報と比較し、合致する場合にアクセスを許可し、合致しない場合(あるいはアプリケーションにアクセス情報が組み込まれていない場合)にアクセスを拒否する。
図4は、本実施形態に係るログ分析サーバ2のブロック図である。図4において、矢印は主なデータの流れを示しており、図4に示したもの以外のデータの流れがあってよい。図4において、各ブロックはハードウェア(装置)単位の構成ではなく、機能単位の構成を示している。そのため、図4に示すブロックは単一の装置内に実装されてよく、あるいは複数の装置内に別れて実装されてよい。ブロック間のデータの授受は、データバス、ネットワーク、可搬記憶媒体等、任意の手段を介して行われてよい。
図5は、本実施形態に係るログ分析システムSによる分析エンジン登録処理の模式図である。分析エンジン登録部111は、分析者U1から分析エンジン21のプログラム(すなわち分析プログラム)及び分析エンジン21に係る情報(パラメータ)の登録を受け付ける。分析エンジン21に係る情報は、分析エンジンを利用するためのSDK及びAPIと、分析を実行するタイミングと、ログ分析装置1から結果利用端末4へ分析の結果を提供する方法と、ログ分析サーバ2からログ分析装置1へ分析の結果を提供する方法と、ログ及び結果の保存方法と、を含む。
図6は、本実施形態に係るログ分析システムSによる分析実行処理の模式図である。まず、ログ分析装置1の分析制御部117は、ログ分析サーバ2の分析エンジン21に分析対象のログを渡す。分析インターフェース211は、ログ分析装置1(すなわち分析エンジン21の外部)から受け取ったログを、設定されたログの保存方法(位置指定情報及び形式)に従って、ログ記憶領域212に記憶させる(i)。
図7は、本実施形態にログ分析システムSが実行するログ分析方法全体のフローチャートを示す図である。図7のフローチャートは、例えばログ分析装置1及びログ分析サーバ2が起動されることによって開始される。まずログ分析装置1は、分析者U1による分析エンジン21の登録を受け付ける分析エンジン登録処理を行う(S1)。
図8は、本実施形態に係るログ分析システムSが実行する分析エンジン登録処理のフローチャートを示す図である。まず分析エンジン登録部111は、分析者U1から分析エンジン21のプログラム(分析プログラム)を受け付ける(S11)。また、分析エンジン登録部111は、分析者U1から分析エンジン21に係る情報(パラメータ)を受け付ける(S12)。
図9は、本実施形態に係るログ分析システムSが実行する開発情報出力処理のフローチャートを示す図である。まず選択受付部112は、分析エンジン登録処理で登録された分析エンジン21のうち、アプリケーションで利用したい分析エンジン21の選択を開発者U2から受け付ける(S21)。
図10は、本実施形態に係るログ分析システムSが実行する分析実行処理のフローチャートを示す図である。図10のフローチャートは一例であり、分析エンジン21及びアプリケーションの実装(ログ取得方法、分析タイミング及び結果提供方法)によって、ステップの実行順序及び実行条件は適宜変更される。
本実施形態に係るログ分析装置1は、登録された分析エンジン21に対応するアクセス情報(開発者ID、アプリケーションID、ユーザID及びアクセストークン)を出力し、アプリケーションに組み込まれたアクセス情報に従ってログの収集、分析の実行及び分析結果の提供を行う。このような構成によって、分析エンジン21の提供と、分析エンジン21を利用するアプリケーションの開発とを緩やかに結びつけることができる。そのため、分析エンジン21を提供する分析者U1はログ収集及び結果利用のためのアプリケーションを開発する必要がなく、アプリケーションの開発者U2は新たに分析エンジン21を開発する必要がない。したがって、分析者U1と開発者U2との双方の負担を軽減することができる。
1 ログ分析装置
11 制御部
111 分析エンジン登録部
117 分析制御部
119 分析エンジン複製部
2 ログ分析サーバ
21 分析エンジン
211 分析インターフェース
212 ログ記憶領域
213 分析プログラム記憶領域
214 結果記憶領域
Claims (10)
- 分析エンジンであって、
分析対象のログを記憶するログ記憶領域と、
前記ログの分析を行う分析プログラムを記憶する分析プログラム記憶領域と、
前記分析の結果を記憶する結果記憶領域と、
前記ログ記憶領域及び前記結果記憶領域の位置を示す位置指定情報の設定を受け付け、設定された前記位置指定情報に従って前記ログを前記ログ記憶領域に記憶させ、前記分析プログラム記憶領域に記憶された前記分析プログラムを実行させ、設定された前記位置指定情報に従って前記結果記憶領域から取得した前記結果を提供するインターフェース部と、
を含む分析エンジンと、
前記分析エンジンを複製し、複製された前記分析エンジンの前記分析プログラム記憶領域に前記分析プログラムを記憶させることによって、複製された前記分析エンジンを実行可能にする分析エンジン複製部と、
を有する、ログ分析システム。 - 前記分析エンジン複製部は、複製された前記分析エンジンの前記インターフェース部に対して、前記ログ記憶領域及び前記結果記憶領域の位置を示す前記位置指定情報を設定するとともに、複製された前記分析エンジンの前記分析プログラム記憶領域に前記分析プログラムを記憶させることによって、複製された前記分析エンジンを実行可能にする、請求項1に記載のログ分析システム。
- 前記ログ分析システムは、前記分析エンジンの複数のテンプレートを予め記憶し、
前記分析エンジン複製部は、前記複数のテンプレートから選択された1つのテンプレートを複製することによって、当該テンプレートに対応する前記分析エンジンを複製する、請求項1又は2に記載のログ分析システム。 - 前記インターフェース部は、記憶媒体における前記ログ記憶領域及び前記結果記憶領域のパス又はアドレスを示す前記位置指定情報の設定を受け付ける、請求項1から3のいずれか一項に記載のログ分析システム。
- 前記インターフェース部は、さらに前記分析のタイミングの設定を受け付け、設定された前記タイミングに従って前記分析プログラム記憶領域に記憶された前記分析プログラムを実行させる、請求項1から4のいずれか一項に記載のログ分析システム。
- 前記インターフェース部は、定期的に前記分析を行うこと、又は新たな前記ログが前記ログ記憶領域に記憶された場合に前記分析を行うことを示す前記タイミングの設定を受け付ける、請求項5に記載のログ分析システム。
- 前記インターフェース部は、さらに前記結果の提供方法の設定を受け付け、設定された前記提供方法に従って前記結果を提供する、請求項1から6のいずれか一項に記載のログ分析システム。
- 前記インターフェース部は、前記分析エンジンの外部へ能動的に前記結果を渡すこと、又は前記分析エンジンの外部からの要求を受けて受動的に前記結果を渡すことを示す前記提供方法の設定を受け付ける、請求項7に記載のログ分析システム。
- 前記インターフェース部は、前記分析エンジンの外部から前記ログを受け取って前記ログ記憶領域に記憶させ、前記分析エンジンの外部へ前記結果を渡す、請求項1から8のいずれか一項に記載のログ分析システム。
- 前記分析エンジンを有するログ分析サーバと、
前記分析エンジン複製部と、前記インターフェース部に前記ログを渡し、前記インターフェース部から前記結果を受け取る分析制御部と、を有するログ分析装置と、
を備える、請求項1から9のいずれか一項に記載のログ分析システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017220768A JP6845787B2 (ja) | 2017-11-16 | 2017-11-16 | ログ分析システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017220768A JP6845787B2 (ja) | 2017-11-16 | 2017-11-16 | ログ分析システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019091342A JP2019091342A (ja) | 2019-06-13 |
JP6845787B2 true JP6845787B2 (ja) | 2021-03-24 |
Family
ID=66836495
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017220768A Active JP6845787B2 (ja) | 2017-11-16 | 2017-11-16 | ログ分析システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6845787B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112131198B (zh) * | 2020-09-23 | 2024-06-07 | 北京奇艺世纪科技有限公司 | 一种日志分析方法、装置及电子设备 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009048291A (ja) * | 2007-08-15 | 2009-03-05 | Oki Electric Ind Co Ltd | システム解析装置及びプログラム |
JP4820900B2 (ja) * | 2009-11-04 | 2011-11-24 | 日本電信電話株式会社 | ログ管理方法、管理システム及び管理プログラム |
JP5840786B2 (ja) * | 2011-09-19 | 2016-01-06 | タタ コンサルタンシー サービシズ リミテッドTATA Consultancy Services Limited | センサーデータベースのアプリケーションおよびサービスの開発および配備のための演算プラットフォーム |
JP6179200B2 (ja) * | 2013-06-05 | 2017-08-16 | 株式会社リコー | 情報処理装置、機器、情報処理システム、情報処理方法、及び情報処理プログラム |
JP6311329B2 (ja) * | 2014-01-29 | 2018-04-18 | 日本電気株式会社 | 情報処理装置、監視方法、及び、プログラム |
CN107251490B (zh) * | 2014-11-21 | 2021-07-02 | 阿费罗有限公司 | 物联网平台、设备和方法 |
-
2017
- 2017-11-16 JP JP2017220768A patent/JP6845787B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2019091342A (ja) | 2019-06-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107895009B (zh) | 一种基于分布式的互联网数据采集方法及系统 | |
US9094404B2 (en) | Reconfigurable cloud computing | |
CN105283849B (zh) | 针对性能和细节的并行跟踪 | |
CN105915633B (zh) | 自动化运维系统和方法 | |
EP3370201A1 (en) | Data distribution management system | |
Calcote et al. | Istio: Up and running: Using a service mesh to connect, secure, control, and observe | |
Kjorveziroski et al. | Kubernetes distributions for the edge: serverless performance evaluation | |
WO2016145009A1 (en) | Method and system for rapid deployment and execution of customized functionality across multiple distinct platforms | |
Großmann et al. | Applicability of serverless computing in fog computing environments for IoT scenarios | |
CN113067853A (zh) | 一种数据推送方法、装置、电子设备及存储介质 | |
CN110737645B (zh) | 一种不同系统间数据迁移方法、数据迁移系统及相关设备 | |
JP6845787B2 (ja) | ログ分析システム | |
JP5024453B2 (ja) | 業務フロー分散処理システム及び方法 | |
CN113821254A (zh) | 接口数据处理方法、装置、存储介质及设备 | |
CN111126604B (zh) | 模型训练方法、装置、服务器及存储介质 | |
Bingert et al. | An API to include HPC resources in workflow systems | |
JP6649519B2 (ja) | エッジコアのデータフローを管理する方法、コンピュータ記憶媒体、および、システム | |
KR20210000041A (ko) | 로그 데이터의 실시간 분석 방법 및 그 장치 | |
JP6865144B2 (ja) | ログ分析装置、ログ分析方法、ログ分析プログラム及びログ分析システム | |
CN111026607A (zh) | 一种服务器监控系统、方法及服务器数据采集方法和系统 | |
CN115185611A (zh) | 服务网格代理配置动态加载的方法、装置、系统及设备 | |
CN111538666B (zh) | 批量收集测试结果的方法、装置、计算机设备及存储介质 | |
JP2022050655A (ja) | 業務管理装置、業務管理方法および業務管理プログラム | |
CN114615336A (zh) | 一种请求调度方法、装置、计算机设备和存储介质 | |
CN111190637B (zh) | 一种版本文件发布的管理方法、装置以及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191206 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200828 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200908 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20201106 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201126 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210209 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210226 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6845787 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |