CN103840969A - 云计算系统中告警日志的管理方法和系统 - Google Patents

云计算系统中告警日志的管理方法和系统 Download PDF

Info

Publication number
CN103840969A
CN103840969A CN201410025309.6A CN201410025309A CN103840969A CN 103840969 A CN103840969 A CN 103840969A CN 201410025309 A CN201410025309 A CN 201410025309A CN 103840969 A CN103840969 A CN 103840969A
Authority
CN
China
Prior art keywords
alarm log
querying condition
alarm
user
inquiry
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410025309.6A
Other languages
English (en)
Inventor
陈光新
赵仁明
朱波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Beijing Electronic Information Industry Co Ltd
Original Assignee
Inspur Beijing Electronic Information Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Beijing Electronic Information Industry Co Ltd filed Critical Inspur Beijing Electronic Information Industry Co Ltd
Priority to CN201410025309.6A priority Critical patent/CN103840969A/zh
Publication of CN103840969A publication Critical patent/CN103840969A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

本发明提供一种云计算系统中告警日志的管理方法和系统。所述方法，包括：获取告警日志的查询条件；为每个告警日志的查询条件设置对应的查询标识；在获取到告警日志时，按照预先设置的时间段，对告警日志进行划分，将同一时间段的时间段的日志划分成一组进行存储；对每组的告警日志，获取每个告警日志中查询标识对应的数值，将所述查询标识的数值作为该告警日志的索引；在接收到用户的查询请求后，根据查询请求中用户选择的告警查询时间，选择对应的一组或多组告警日志；根据查询请求中用户选择的查询条件，对选择的一组或多组告警日志的索引进行查找，得到所述查询请求对应的告警日志；输出查找到的告警日志。

Description

云计算系统中告警日志的管理方法和系统
技术领域
本发明涉及计算机领域，尤其涉及一种云计算系统中告警日志的管理方法和系统。
背景技术
随着云计算技术的不断成熟，云计算逐步成为业界的发展热点，云海操作系统纷纷投入到政府、高校、商业等等多个领域进行使用。在云海操作系统中，对于基础物理设备的监控和管理成为整个应用中的主要组成部分,物理设备的告警数据分析是此部分的重要组成模块。但是随着物理设备数据量的增大，每天产生的告警数据数以万计，如何对这些数据进行分析，使设备达到更高的使用效率是云海OS系统重要的研究内容。
现在的数据中心规模越来越大，告警数据文件上达几GB，对告警数据分析带来了困难，现有的云数据中心机房告警数据分析存在效率不高。
发明内容
本发明提供一种云计算系统中告警日志的管理方法和系统，要解决的技术问题是如何高效管理云计算系统中的告警日志。
为解决上述技术问题，本发明提供了如下技术方案：
一种云计算系统中告警日志的管理方法，包括：获取告警日志的查询条件；为每个告警日志的查询条件设置对应的查询标识；在获取到告警日志时，按照预先设置的时间段，对告警日志进行划分，将同一时间段的时间段的日志划分成一组进行存储；对每组的告警日志，获取每个告警日志中查询标识对应的数值，将所述查询标识的数值作为该告警日志的索引；在接收到用户的查询请求后，根据查询请求中用户选择的告警查询时间，选择对应的一组或多组告警日志；根据查询请求中用户选择的查询条件，对选择的一组或多组告警日志的索引进行查找，得到所述查询请求对应的告警日志；输出查找到的告警日志。
其中，所述该查询条件是通过人机交互界面上提供的查询条件。
其中，所述该查询条件还包括接收的用户自定义的查询条件。
其中，所述用户自定义的查询条件是通过如下方式获取的，包括：对用户自定义的查询条件进行记录，按照使用频率，获取使用频率达到预定次数的查询条件。
一种云计算系统中告警日志的管理系统，包括：第一获取装置，用于获取告警日志的查询条件；设置请求，用于为每个告警日志的查询条件设置对应的查询标识；划分装置，用于在获取到告警日志时，按照预先设置的时间段，对告警日志进行划分，将同一时间段的时间段的日志划分成一组进行存储；第二获取请求，用于对每组的告警日志，获取每个告警日志中查询标识对应的数值，将所述查询标识的数值作为该告警日志的索引；选择装置，用于在接收到用户的查询请求后，根据查询请求中用户选择的告警查询时间，选择对应的一组或多组告警日志；查找装置，用于根据查询请求中用户选择的查询条件，对选择的一组或多组告警日志的索引进行查找，得到所述查询请求对应的告警日志；输出装置，用于输出查找到的告警日志。
其中，所述该查询条件是通过人机交互界面上提供的查询条件。
其中，所述该查询条件还包括接收的用户自定义的查询条件。
其中，所述用户自定义的查询条件是通过如下方式获取的，包括：对用户自定义的查询条件进行记录，按照使用频率，获取使用频率达到预定次数的查询条件。
与现有技术相比，本发明提供的方法实施例，通过对告警日志进行实时分析，提高了告警日志的查询响应速度。
附图说明
图1为本发明提供的云计算系统中告警日志的管理方法实施例的流程示意图；
图2为本发明提供的云计算系统中告警日志的管理系统实施例的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图及具体实施例对本发明作进一步的详细描述。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。
图1为本发明提供的云计算系统中告警日志的管理方法实施例的流程示意图。图1所示方法实施例包括：
步骤101、获取告警日志的查询条件；
其中，该查询条件可以通过人机交互界面上提供的查询条件上获取，如果允许自定义的查询条件，还可以对用户自定义的查询条件进行记录，按照使用频率，获取使用频率达到预定次数的查询条件；
其中，查询条件为设备名、监测器名或告警类型等。
步骤102、为每个告警日志的查询条件设置对应的查询标识；
其中，所述查询标识可以为字符数小于查询条件的字符数的一个或多个字符。如查询标识可以设置为字母。
步骤103、在获取到告警日志时，按照预先设置的时间段，对告警日志进行划分，将同一时间段的时间段的日志划分成一组进行存储；
与现有技术中存储告警日志不同，本发明按照时间段来存储，其中时间段可以以天或小时为单位进行存储，减少后续查找的时间。当然，以小时进行划分时间段时，可以设置每个时间段的长度相等，也可以根据不同时间内告警数据的多少，设置告警信息数量超过上限值的时间段的长度短于告警信息数量低于下限值的时间段的长度。
步骤104、对每组的告警日志，获取每个告警日志中查询标识对应的数值，将所述查询标识的数值作为该告警日志的索引；
与现有技术中将告警日志进行直接存储不同，本发明在得到告警日志后，首先要对告警日志进行实时分析，得到各查询标识对应的数值，再存储该告警日志。
步骤105、在接收到用户的查询请求后，根据查询请求中用户选择的告警查询时间，选择对应的一组或多组告警日志；
步骤106、根据查询请求中用户选择的查询条件，对选择的一组或多组告警日志的索引进行查找，得到所述查询请求对应的告警日志；
步骤107、输出查找到的告警日志。
与现有技术相比，本发明提供的方法实施例，通过对告警日志进行实时分析，提高了告警日志的查询响应速度。
本发明的创新之处在于：对告警数据按照不同时间范围进行抓取，具有较强的灵活性，且单独存储，便于高速读取，对告警日志文件进行实时分析，设置对应的索引，方便快速查找，按照不同条件进行抓取，具有较强的扩展性；
经过系统验证，本发明具有较高的准确性和实用性，能较大的提高告警日志的分析效率，对于提高物理设备的使用效率具有重要的意义。
告警数据的转存（1），按时间范围选择日志文件（2），按信息抓取告警内容（3）.是整个系统的前提，将数据按天或者按其他时间段进行分组存储；按时间范围选择要读取的日志文件（2）选定将要读取的日志文件，根据不同的范围选择不同的文件个数；按信息抓取告警内容（3）负责按照不同的条件抓取告警文件，例如按设备名称、告警类型、监测器名称等。
用程序控制每天定时实现告警数据的转储，根据用户选择的告警查询时间范围选择不同的文件进行处理，然后根据其它查询条件（如设备名、监测器名、告警类型等）具体的条件对告警数据进行筛选，同时在上层接口中进行封装，只要在接口中输入相关参数，便可得到相应的告警信息。
图2为本发明提供的云计算系统中告警日志的管理系统实施例的结构水示意图。图2所示系统实施例，包括：
第一获取装置201，用于获取告警日志的查询条件；
设置请求202，与所述第一获取装置相连，用于为每个告警日志的查询条件设置对应的查询标识；
划分装置203，用于在获取到告警日志时，按照预先设置的时间段，对告警日志进行划分，将同一时间段的时间段的日志划分成一组进行存储；
第二获取装置204，与所述划分装置203和所述设置装置202相连，用于对每组的告警日志，获取每个告警日志中查询标识对应的数值，将所述查询标识的数值作为该告警日志的索引；
选择装置205，与所述划分装置203相连，用于在接收到用户的查询请求后，根据查询请求中用户选择的告警查询时间，选择对应的一组或多组告警日志；
查找装置206，与所述第二获取装置204和所述选择装置205相连，用于根据查询请求中用户选择的查询条件，对选择的一组或多组告警日志的索引进行查找，得到所述查询请求对应的告警日志；
输出装置207，与所述查找装置206相连，用于输出查找到的告警日志。
其中，所述该查询条件是通过人机交互界面上提供的查询条件。
其中，所述该查询条件还包括接收的用户自定义的查询条件。
其中，所述用户自定义的查询条件是通过如下方式获取的，包括：
对用户自定义的查询条件进行记录，按照使用频率，获取使用频率达到预定次数的查询条件。
与现有技术相比，本发明提供的方法实施例，通过对告警日志进行实时分析，提高了告警日志的查询响应速度。
本领域普通技术人员可以理解上述实施例的全部或部分步骤可以使用计算机程序流程来实现，所述计算机程序可以存储于一计算机可读存储介质中，所述计算机程序在相应的硬件平台上（如系统、设备、装置、器件等）执行，在执行时，包括方法实施例的步骤之一或其组合。
可选地，上述实施例的全部或部分步骤也可以使用集成电路来实现，这些步骤可以被分别制作成一个个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。
上述实施例中的各装置/功能模块/功能单元可以采用通用的计算装置来实现，它们可以集中在单个的计算装置上，也可以分布在多个计算装置所组成的网络上。
上述实施例中的各装置/功能模块/功能单元以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。上述提到的计算机可读取存储介质可以是只读存储器，磁盘或光盘等。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求所述的保护范围为准。

Claims (8)

1.一种云计算系统中告警日志的管理方法，其特征在于，包括：
获取告警日志的查询条件；
为每个告警日志的查询条件设置对应的查询标识；
在获取到告警日志时，按照预先设置的时间段，对告警日志进行划分，将同一时间段的时间段的日志划分成一组进行存储；
对每组的告警日志，获取每个告警日志中查询标识对应的数值，将所述查询标识的数值作为该告警日志的索引；
在接收到用户的查询请求后，根据查询请求中用户选择的告警查询时间，选择对应的一组或多组告警日志；
根据查询请求中用户选择的查询条件，对选择的一组或多组告警日志的索引进行查找，得到所述查询请求对应的告警日志；
输出查找到的告警日志。
2.根据权利要求1所述的方法，其特征在于，所述该查询条件是通过人机交互界面上提供的查询条件。
3.根据权利要求2所述的方法，其特征在于，所述该查询条件还包括接收的用户自定义的查询条件。
4.根据权利要求3所述的方法，其特征在于，所述用户自定义的查询条件是通过如下方式获取的，包括：
对用户自定义的查询条件进行记录，按照使用频率，获取使用频率达到预定次数的查询条件。
5.一种云计算系统中告警日志的管理系统，其特征在于，包括：
第一获取装置，用于获取告警日志的查询条件；
设置装置，与所述第一获取装置相连，用于为每个告警日志的查询条件设置对应的查询标识；
划分装置，用于在获取到告警日志时，按照预先设置的时间段，对告警日志进行划分，将同一时间段的时间段的日志划分成一组进行存储；
第二获取装置，与所述划分装置和所述设置装置相连，用于对每组的告警日志，获取每个告警日志中查询标识对应的数值，将所述查询标识的数值作为该告警日志的索引；
选择装置，与所述划分装置相连，用于在接收到用户的查询请求后，根据查询请求中用户选择的告警查询时间，选择对应的一组或多组告警日志；
查找装置，与所述选择装置和所述第二获取装置相连，用于根据查询请求中用户选择的查询条件，对选择的一组或多组告警日志的索引进行查找，得到所述查询请求对应的告警日志；
输出装置，与所述查找装置相连，用于输出查找到的告警日志。
6.根据权利要求5所述的系统，其特征在于，所述该查询条件是通过人机交互界面上提供的查询条件。
7.根据权利要求6所述的系统，其特征在于，所述该查询条件还包括接收的用户自定义的查询条件。
8.根据权利要求7所述的系统，其特征在于，所述用户自定义的查询条件是通过如下方式获取的，包括：
对用户自定义的查询条件进行记录，按照使用频率，获取使用频率达到预定次数的查询条件。
CN201410025309.6A 2014-01-20 2014-01-20 云计算系统中告警日志的管理方法和系统 Pending CN103840969A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410025309.6A CN103840969A (zh) 2014-01-20 2014-01-20 云计算系统中告警日志的管理方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410025309.6A CN103840969A (zh) 2014-01-20 2014-01-20 云计算系统中告警日志的管理方法和系统

Publications (1)

Publication Number Publication Date
CN103840969A true CN103840969A (zh) 2014-06-04

Family

ID=50804133

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410025309.6A Pending CN103840969A (zh) 2014-01-20 2014-01-20 云计算系统中告警日志的管理方法和系统

Country Status (1)

Country Link
CN (1) CN103840969A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104462349A (zh) * 2014-12-05 2015-03-25 曙光信息产业(北京)有限公司 一种文件处理方法及装置
CN108121808A (zh) * 2017-12-25 2018-06-05 杭州闪捷信息科技有限公司 审计日志的检索方法、装置及终端
CN109189745A (zh) * 2018-09-20 2019-01-11 郑州云海信息技术有限公司 一种基于云平台的日志管理的方法及装置
CN110401570A (zh) * 2019-08-06 2019-11-01 中国联合网络通信集团有限公司 告警方法、装置、系统、设备及可读存储介质
CN110647448A (zh) * 2019-08-09 2020-01-03 北京建筑大学 一种移动应用操作日志数据实时分析方法、服务器和系统
CN111092748A (zh) * 2019-11-14 2020-05-01 远景智能国际私人投资有限公司 物联网设备的告警规则设置方法、装置、设备及存储介质
CN111198853A (zh) * 2018-11-16 2020-05-26 北京微播视界科技有限公司 数据处理方法、装置、电子设备及计算机可读存储介质
CN112948211A (zh) * 2021-02-26 2021-06-11 杭州安恒信息技术股份有限公司 一种基于日志处理的告警方法、装置、设备及介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1877582A (zh) * 2006-07-12 2006-12-13 百度在线网络技术（北京）有限公司 广告信息检索系统及广告信息检索方法
CN1877583A (zh) * 2006-07-12 2006-12-13 百度在线网络技术（北京）有限公司 访问标识索引系统及访问标识索引库生成方法
CN101056211A (zh) * 2007-06-22 2007-10-17 中兴通讯股份有限公司 一种实现用户上网行为审计的方法及系统
CN101216817A (zh) * 2007-12-29 2008-07-09 中国建设银行股份有限公司 一种异构报表整合及集中管理的装置和系统
US20120179728A1 (en) * 2011-01-07 2012-07-12 International Business Machines Corporation Processing of Destructive Schema Changes in Database Management Systems
CN102970363A (zh) * 2012-11-21 2013-03-13 用友软件股份有限公司 远程日志下载系统和远程日志下载方法
CN103365883A (zh) * 2012-03-30 2013-10-23 华为技术有限公司 数据的索引查询方法、装置及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1877582A (zh) * 2006-07-12 2006-12-13 百度在线网络技术（北京）有限公司 广告信息检索系统及广告信息检索方法
CN1877583A (zh) * 2006-07-12 2006-12-13 百度在线网络技术（北京）有限公司 访问标识索引系统及访问标识索引库生成方法
CN101056211A (zh) * 2007-06-22 2007-10-17 中兴通讯股份有限公司 一种实现用户上网行为审计的方法及系统
CN101216817A (zh) * 2007-12-29 2008-07-09 中国建设银行股份有限公司 一种异构报表整合及集中管理的装置和系统
US20120179728A1 (en) * 2011-01-07 2012-07-12 International Business Machines Corporation Processing of Destructive Schema Changes in Database Management Systems
CN103365883A (zh) * 2012-03-30 2013-10-23 华为技术有限公司 数据的索引查询方法、装置及系统
CN102970363A (zh) * 2012-11-21 2013-03-13 用友软件股份有限公司 远程日志下载系统和远程日志下载方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张俊峰等: "基于文本策略和SMCS的海量日志分析方法", 《计算机工程》 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104462349A (zh) * 2014-12-05 2015-03-25 曙光信息产业(北京)有限公司 一种文件处理方法及装置
CN104462349B (zh) * 2014-12-05 2019-02-19 曙光信息产业(北京)有限公司 一种文件处理方法及装置
CN108121808A (zh) * 2017-12-25 2018-06-05 杭州闪捷信息科技有限公司 审计日志的检索方法、装置及终端
CN109189745A (zh) * 2018-09-20 2019-01-11 郑州云海信息技术有限公司 一种基于云平台的日志管理的方法及装置
CN111198853A (zh) * 2018-11-16 2020-05-26 北京微播视界科技有限公司 数据处理方法、装置、电子设备及计算机可读存储介质
CN111198853B (zh) * 2018-11-16 2023-08-22 北京微播视界科技有限公司 数据处理方法、装置、电子设备及计算机可读存储介质
CN110401570A (zh) * 2019-08-06 2019-11-01 中国联合网络通信集团有限公司 告警方法、装置、系统、设备及可读存储介质
CN110647448A (zh) * 2019-08-09 2020-01-03 北京建筑大学 一种移动应用操作日志数据实时分析方法、服务器和系统
CN111092748A (zh) * 2019-11-14 2020-05-01 远景智能国际私人投资有限公司 物联网设备的告警规则设置方法、装置、设备及存储介质
CN111092748B (zh) * 2019-11-14 2023-01-10 远景智能国际私人投资有限公司 物联网设备的告警规则设置方法、装置、设备及存储介质
CN112948211A (zh) * 2021-02-26 2021-06-11 杭州安恒信息技术股份有限公司 一种基于日志处理的告警方法、装置、设备及介质

Similar Documents

Publication Publication Date Title
CN103840969A (zh) 云计算系统中告警日志的管理方法和系统
CN107491487B (zh) 一种全文数据库架构及位图索引创建、数据查询方法、服务器及介质
CN101996067B (zh) 一种数据导出的方法和装置
CN103020281A (zh) 一种基于空间数据数值索引的数据存储与检索方法
US20170337229A1 (en) Spatial indexing for distributed storage using local indexes
CN109033360B (zh) 一种数据查询方法、装置、服务器及存储介质
US20130006976A1 (en) Search tool that utilizes scientific metadata matched against user-entered parameters
CN108268565B (zh) 基于数据仓库处理用户浏览行为数据的方法及系统
CN109542889A (zh) 流式数据列存储方法、装置、设备和存储介质
CN103970870A (zh) 数据库查询方法和服务器
CN103702053A (zh) 录像存储和检索方法及系统、监控系统
CN102779138B (zh) 实时数据的硬盘存取方法
CN104102737A (zh) 一种历史数据存储方法和系统
CN103714004A (zh) Jvm在线内存泄露分析方法及系统
CN102880541A (zh) 日志信息的获取系统和获取方法
WO2014110940A1 (en) A method, apparatus and system for storing, reading the directory index
Ramesh et al. Data modelling for discrete time series data using Cassandra and MongoDB
CN107194007A (zh) 一种航天器异构测试数据集成管理系统
CN104992261A (zh) 一种图书信息检索查阅方法和系统
CN104778182A (zh) 基于HBase的数据导入方法和系统
CN111258978A (zh) 一种数据存储的方法
CN101963993B (zh) 一种数据库单表记录快速查找的方法
CN103200269A (zh) 互联网信息统计方法及系统
CN115145871A (zh) 文件查询方法、装置和电子设备
CN104636368A (zh) 数据检索方法、装置及服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20140604