CN110688359A - 一种日志分析方法与管理平台 - Google Patents

一种日志分析方法与管理平台 Download PDF

Info

Publication number
CN110688359A
CN110688359A CN201910925955.0A CN201910925955A CN110688359A CN 110688359 A CN110688359 A CN 110688359A CN 201910925955 A CN201910925955 A CN 201910925955A CN 110688359 A CN110688359 A CN 110688359A
Authority
CN
China
Prior art keywords
analysis
log
data
management server
preset
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910925955.0A
Other languages
English (en)
Inventor
李福存
王苏扬
任国庆
陈传浩
张远兆
潘世祥
周涵
冯昌邮
李楠楠
汪联欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Jinheng Information Technology Co Ltd
Original Assignee
Nanjing Tianxin Cloud Data Service Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Tianxin Cloud Data Service Co Ltd filed Critical Nanjing Tianxin Cloud Data Service Co Ltd
Priority to CN201910925955.0A priority Critical patent/CN110688359A/zh
Publication of CN110688359A publication Critical patent/CN110688359A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/1805Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815Journaling file systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/32Monitoring with visual or acoustical indication of the functioning of the machine
    • G06F11/324Display of status information
    • G06F11/327Alarm or error message display

Abstract

本申请提供一种日志分析方法与管理平台,所述方法先由被控设备根据运行状态数据生成分析日志。再由管理服务器根据预设分析类型,向所述被控设备发送数据提取指令,被控设备再根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器。最后,所述管理服务器根据所述分析数据生成分析报告。所述方法可以对大量日志数据进行集中分析管理,并且实现日志管理格式的标准化统一。同时将日志分析处理的大量工作分担至被控设备,减少管理服务器的数据处理量,以及提取数据时对网络带宽的占用,减小数据处理延迟,以适应大规模企业的日志分析。

Description

一种日志分析方法与管理平台
技术领域
本申请涉及信息管理技术领域,尤其涉及一种日志分析方法与管理平台。
背景技术
大规模企业,如钢铁企业,的生产中需要在不同的厂区范围内布置机房,机房中包括多个计算机主机,以对生产环境参数和生产技术参数进行实时监控、设定和处理,保障生产过程的有序进行。对于大规模企业,其机房运维状况需要统一进行维护管理,以及时发现各厂区突发的技术故障,统一进行调配管理。为了实现上述过程,实际应用中需要针对各厂区构建运维管理平台系统。
典型的运维管理平台系统包括管理平台和分布在各厂区机房内的被控设备。其中,管理平台可以是统一部署在中心机房的管理服务器,各个被控设备统一与管理平台建立通信连接,以将其运行状态数据发送至管理平台进行分析处理。当任意一个被控设备出现数据异常时,管理平台可以根据接收到的数据生成告警信息,通知相关技术人员进行处理。
然而,大规模企业的厂区较多,每个厂区内又设置有多个被控设备,并且每个计算机会根据多种运行状态,获取众多运行状态数据。因此,在实际应用中,各被控设备会不断将大量的运行状态数据发送给管理服务器,严重占用网络带宽。并且,管理服务器需要处理大量运行状态数据,需要较高的处理性能,还降低数据的处理速度。而在高并发大量运行状态数据时,很有可能造成较长时间的处理延迟,导致告警信息不能够及时发送给相关技术人员,影响生产效率。
发明内容
本申请提供了一种日志分析方法与管理平台,以解决传统运行状态数据处理延迟高,影响生产效率的问题。
一方面,本申请提供一种日志分析方法,包括:
被控设备根据运行状态数据生成分析日志,所述分析日志为根据预设存储格式构建的文本文件;
管理服务器根据预设分析类型,向所述被控设备发送数据提取指令;
所述被控设备根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器;
所述管理服务器根据所述分析数据生成分析报告。
可选的,管理服务器根据预设分析类型,向所述被控设备发送数据提取指令的步骤,包括:
用户终端向所述管理服务器发送分析指令,所述分析指令包括所述预设分析类型;
管理服务器根据所述分析指令,生成数据提取指令;所述数据提取指令中包括所述预设分析类型对应的文本特征信息;
所述管理服务器定位所述预设分析类型对应的目标被控设备,以及向目标被控设备发送所述数据提取指令。
可选的,所述管理服务器根据所述分析数据生成分析报告的步骤,包括:
所述管理服务器获取所述预设分析类型对应的空白报告模板;
所述管理服务器向所述空白报告模板中添加所述分析数据,生成分析报告;
所述管理服务器展示所述分析报告,或者向用户终端发送所述分析报告。
可选的,被控设备根据运行状态数据生成分析日志的步骤,包括:
被控设备获取自身运行状态数据;
所述被控设备根据预设存储格式,将所述运行状态数据转化为分析日志;
所述被控设备将所述分析日志,存储在所述被控设备的日志缓存数据库中。
可选的,被控设备获取自身运行状态数据的步骤,还包括:
被控设备获取当前厂区范围内环境状态数据;所述环境状态数据为通过当前厂区范围内设置的环境监测器检测的数据。
所述被控设备根据预设存储格式,将所述环境状态数据添加至所述分析日志。
可选的,所述环境监测器包括温度传感器和湿度传感器;所述环境状态数据包括当前厂区范围内的温度信息和湿度信息。
可选的,所述分析日志包括系统日志、错误日志和自定义应用程序日志,所述方法还包括:
所述被控设备通过syslog和/或消息传递的途径获取待处理日志;
所述被控设备根据所述预设分析类型筛选所述待处理日志;
所述被控设备将经过筛选后的所述待处理日志,作为所述分析日志存储在日志缓存数据库中。
可选的,所述方法还包括:
所述被控设备从所述待处理日志中提取运行状态数据;
所述被控设备根据所述运行状态数据,将所述待处理日志转化为所述分析日志。
另一方面,本申请还提供一种日志分析管理平台,包括:管理服务器,以及与所述管理服务器建立数据通信连接的多个被控设备;多个所述被控设备布置在多个厂区范围内;
所述被控设备被进一步配置为:根据运行状态数据生成分析日志,所述分析日志为根据预设存储格式构建的文本文件;根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器;
所述管理服务器被进一步配置为:根据预设分析类型,向所述被控设备发送数据提取指令;以及,根据所述分析数据生成分析报告。
可选的,所述系统还包括多个控制终端,多个所述控制终端与所述管理服务器建立数据通信连接;
所述控制终端被进一步配置为:向所述管理服务器发送发送分析指令,所述分析指令包括所述预设分析类型;以及,接收并展示所述分析报告;
所述管理服务器被进一步配置为:接收到的所述分析指令,根据所述分析指令,生成数据提取指令;所述数据提取指令中包括所述预设分析类型对应的文本特征信息;定位所述预设分析类型对应的所述被控设备,向所述被控设备发送所述数据提取指令;以及,展示所述分析报告,或者向用户终端发送所述分析报告。
由以上技术方案可知,本申请提供一种日志分析方法与管理平台,所述方法先由被控设备根据运行状态数据生成分析日志。再由管理服务器根据预设分析类型,向所述被控设备发送数据提取指令,被控设备再根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器。最后,所述管理服务器根据所述分析数据生成分析报告。所述方法可以对大量日志数据进行集中分析管理,并且实现日志管理格式的标准化统一。同时将日志分析处理的大量工作分担至被控设备,减少管理服务器的数据处理量,以及提取数据时对网络带宽的占用,减小数据处理延迟,以适应大规模企业的日志分析。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请一种日志分析方法的流程示意图;
图2为本申请一种日志分析管理平台的结构示意图;
图3为本申请被控设备根据运行状态数据生成分析日志的流程示意图;
图4为本申请被控设备根据待处理日志生成分析日志的流程示意图;
图5为本申请管理服务器生成数据提取指令的流程示意图;
图6为本申请管理服务器生成分析报告的流程示意图。
具体实施方式
下面将详细地对实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。仅是与权利要求书中所详述的、本申请的一些方面相一致的系统和方法的示例。
参见图1,为本申请一种日志分析方法的流程示意图。
参见图2,为本申请一种日志分析管理平台的结构示意图。
本申请提供的技术方案中,一方面,提供一种日志分析方法,如图1所示,所述日志分析方法包括以下步骤:
S1:被控设备根据运行状态数据生成分析日志,所述分析日志为根据预设存储格式构建的文本文件。
本申请提供的技术方案中,所述被控设备可以为分布在各个厂区范围内的设备,包括但不限于计算机、服务器、交换机、路由器等。各被控设备在实际应用中会根据运行情况收集运行状态数据。例如,收集的运行状态数据可以包括系统状态信息、错误报告、程序运行状况信息等,这些运行状态数据可以被统一按照预设格式进行存储,以构建一个文本文件,即分析日志。
在生成分析日志后,被控设备可以将分析日志进行存储或缓存,以便后续调用。因此,在本申请提供的技术方案中,被控设备还应包括日志缓存数据库。即,如图3所示,被控设备根据运行状态数据生成分析日志的步骤,包括:
S101:被控设备获取自身运行状态数据;
S102:所述被控设备根据预设存储格式,将所述运行状态数据转化为分析日志;
S103:所述被控设备将所述分析日志,存储在所述被控设备的日志缓存数据库中。
实际应用中,被控设备可以先获取自身的运行状态数据,再将运行状态数据进行预设存储格式转化,将运行状态数据转化为分析日志。分析日志可以是便于进行数据提取多个字段或者索引表形式,以便后续进行调用提取。本申请提供的技术方案中,将运行状态数据转化为分析日志,可以针对不同的事件和不同的类型获得便于存储和索引的文本格式文件。并且将分析日志存储在日志缓存数据库中,还能减少对管理服务器存储空间的占用,有利于实施后续分析步骤。
需要说明的是,对于部分被控设备,例如路由器、交换机等,可以将分析日志发送给同一厂区范围内,具有数据存储功能的设备实现。也可以直接将运行状态数据发送给其他设备,以生成分析日志。例如,路由器将运行状态数据发送给连接路由器的计算机,计算机再根据运行状态数据生成对应路由器设备的分析日志。
进一步地,被控设备获取自身运行状态数据的步骤,还包括:
S1011:被控设备获取当前厂区范围内环境状态数据;所述环境状态数据为通过当前厂区范围内设置的环境监测器检测的数据。
S1012:所述被控设备根据预设存储格式,将所述环境状态数据添加至所述分析日志。
对于部分生产环境较特殊的企业或车间,环境因素也是影响实际生产过程的一个重要因素,例如,钢铁企业的铸造车间,环境温度较高,车间内的被控设备很容易受到高温影响,而出现宕机或错误的情况。因此本实施例中,还可以通过在每个厂区范围内布置环境监测器,来获取当前厂区范围内环境状态数据。实际应用中,所述环境监测器包括温度传感器和湿度传感器;所述环境状态数据包括当前厂区范围内的温度信息和湿度信息。
因此,被控设备可以根据环境监测器采集的数据,对环境状态数据进行转化处理,并将环境状态数据也添加至分析日志中。或者,根据环境状态数据生成一个分析日志进行存储,以便进行单独调用。
实际应用中,对于部分被控设备,如计算机,其在出现异常情况时,往往可以自动生成一些日志,例如系统日志、错误日志等。而当被控设备安装有第三方应用程序时,部分第三方应用程序也可以在使用过程中自动生成日志,例如自定义应用程序日志,为了能够快速对这些日志进行收集,本申请中还可以直接对自动生成的日志进行筛选、分析和处理,以便将这些日志转化为统一格式的分析日志。
即在本申请的部分实施例中,所述分析日志包括系统日志、错误日志和自定义应用程序日志,如图4所示,所述方法还包括:
S104:所述被控设备通过syslog和/或消息传递的途径获取待处理日志;
S105:所述被控设备根据所述预设分析类型筛选所述待处理日志;
S106:所述被控设备将经过筛选后的所述待处理日志,作为所述分析日志存储在日志缓存数据库中。
本实施例中,可以从许多来源接收待处理日志,例如:syslog、消息传递等。由于企业中的被控设备众多,每天会产生大量待处理日志(原始日志),这些待处理日志中,大部分是非关键信息。需要对信息进行整理过滤并提取有价值的事件信息,以预定的格式进行汇总存档,并满足合规性审计和行业监管的合规要求。因此,在获取到待处理日志后,可以对提取出待处理日志进行筛选,并将经过筛选后的所述待处理日志,作为所述分析日志存储在日志缓存数据库中。
具体的筛选标准可以根据实际应用需求进行预先设定,例如,对于自动控制功能的计算机设备,其宕机将对自动控制程序的运行产生较大的影响,因此可以对这类计算机设备设置筛选条件为,只存储宕机相关的错误日志。
进一步地,还可以将待处理日志直接转化为分析日志进行存储,即所述方法还包括:
S107:所述被控设备从所述待处理日志中提取运行状态数据;
S108:所述被控设备根据所述运行状态数据,将所述待处理日志转化为所述分析日志。
实际应用中,可以针对部分待处理日志,提取其中的运行状态数据,并根据运行状态数据,结合分析日志的存储格式,将运行状态数据调整为分析日志的形式,从而实现将待处理日志转化为分析日志。
S2:管理服务器根据预设分析类型,向所述被控设备发送数据提取指令。
实际应用中,管理服务器中可以根据预先指定的分析类型,向被控设备发送数据提取指令,在数据提取指令中可以指定被控设备将哪些数据发送给管理服务器。例如,预设分析类型为系统当月宕机事件统计,则根据这一分析类型生成的数据提取指令中,包含提取数据类型为宕机相关的错误日志、宕机时间(一个月)、宕机原因等。从而在将数据提取指令发送给被控设备后,被控设备可以根据数据提取指令,从数据库中提取一个月的宕机相关分析日志,并将分析日志中的宕机时间(时刻)、宕机原因等数据发送给管理服务器。
本申请中,预设分析类型可以由管理服务器对应的管理平台设定,也可以由不同的用户终端进行设定。即在本申请的部分实施例中,如图5所示,管理服务器根据预设分析类型,向所述被控设备发送数据提取指令的步骤,包括:
S201:用户终端向所述管理服务器发送分析指令,所述分析指令包括所述预设分析类型;
S202:管理服务器根据所述分析指令,生成数据提取指令;所述数据提取指令中包括所述预设分析类型对应的文本特征信息;
S203:所述管理服务器定位所述预设分析类型对应的目标被控设备,以及向目标被控设备发送所述数据提取指令。
实际应用中,不同的用户可以拥有不同的用户终端,用户终端可以根据使用者的身份不同,拥有不同的运维管理权限,因此用户发送的分析指令应在其管理权限范围内。在发送分析指令后,管理服务器可以在分析指令中提取预设分析类型,再生成数据提取指令。由于实际应用中,被控设备的数量众多,因此在用户终端发送的分析指令中,可以指定哪个被控设备作为分析对象,即目标被控设备。
相应地,在管理服务器生成数据提取指令后,还需要对目标被控设备进行定位,以将数据提取指令发送给目标被控设备,从而提取目标被控设备中的分析日志和分析数据进行分析。
S3:所述被控设备根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器。
在接收到数据提取指令后,被控设备可以根据数据提取指令,从分析日志中提取出与预设分析类型相对应的分析数据。实际应用中,本申请提供的日志分析方法能够支持对多个分析日志中的数据进行提取,以满足不同是分析报告要求。在提取到分析数据后,被控设备可以将分析数据发送给管理服务器。
可见,在本申请提供的技术方案中,对分析数据的提取可以由被控设备来完成,相对于传统的由管理服务器来完成的方式,本申请提供的方案能够显著减少管理服务器的数据处理量,提高管理服务器的数据处理效率。并且在向管理服务器发送分析数据时,分析数据经过被控设备在分析日志中提取后的数据,相对于分析日志和原始数据,其数据结构规范,且数据量要远小于原始数据,因此,可以大大减少对网络带宽的占用,降低数据传输延迟。
S4:所述管理服务器根据所述分析数据生成分析报告。
接收到分析数据的管理服务器可以针对分析数据进行处理,从而生成分析报告。实际应用中,管理服务器可以通过管理平台程序将传来的分析数据进行存储、索引,并在页面展示窗口提供接口,实时的抓取索引后的分析数据,因此,分析数据就可以实时的进行展示,还可以通过预设数据组装,查询条件,得到最终的分析结果,例如:可以通过各种方式例如图表,表格,折线图等方式对分析结果进行展示,以生成分析报告。
进一步地,如图6所示,所述管理服务器根据所述分析数据生成分析报告的步骤,包括:
S401:所述管理服务器获取所述预设分析类型对应的空白报告模板;
S402:所述管理服务器向所述空白报告模板中添加所述分析数据,生成分析报告;
S403:所述管理服务器展示所述分析报告,或者向用户终端发送所述分析报告。
本实施例中,管理服务器在接收到分析数据后,可以获取预设分析类型对应的空白报告模板。空白报告模板可以由云端服务器收集定义,也可以根据管理平台操作界面选择的结果自动生成。获取空白报告模板后,可以将分析数据添加至报告模板中,从而生成分析报告。
对于生成的分析报告,管理服务器可以在管理平台的页面中直接对分析报告进行展示,也可以将分析报告发送给用户终端,以便在用户终端上展示该分析报告。显然,在分析报告中,可以包括描述当前运行状态数据的文本信息,也可以包括可视化的图形信息,以直观描述当前被控设备的运行状态。
可见,本申请提供的日志分析方法,在实际应用中,可以实现对大量日志数据的集中管理,并且实现了日志管理格式标准化。同时,具备良好的扩展性,方便增加其它系统功能。另外,还可以在生成分析报告后,对分析报告进行简单的分析,以根据分析结果生成告警信息,实现集告警平台于一体,及时准确告知系统故障。本申请提供的日志分析方法还可以定期生成报表,并通过邮件、信息、网页链接等多种方式定时发送给用户终端。
基于上述日志分析方法,本申请还提供一种日志分析管理平台,如图2所示,所述日志分析系统包括:管理服务器,以及与所述管理服务器建立数据通信连接的多个被控设备;多个所述被控设备布置在多个厂区范围内;
所述被控设备被进一步配置为:根据运行状态数据生成分析日志,所述分析日志为根据预设存储格式构建的文本文件;根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器;
所述管理服务器被进一步配置为:根据预设分析类型,向所述被控设备发送数据提取指令;以及,根据所述分析数据生成分析报告。
在本申请的部分实施例中,所述系统还包括多个控制终端,多个所述控制终端与所述管理服务器建立数据通信连接;
所述控制终端被进一步配置为:向所述管理服务器发送发送分析指令,所述分析指令包括所述预设分析类型;以及,接收并展示所述分析报告;
所述管理服务器被进一步配置为:接收到的所述分析指令,根据所述分析指令,生成数据提取指令;所述数据提取指令中包括所述预设分析类型对应的文本特征信息;定位所述预设分析类型对应的所述被控设备,向所述被控设备发送所述数据提取指令;以及,展示所述分析报告,或者向用户终端发送所述分析报告。
进一步地,所述管理服务器被进一步配置为:
获取所述预设分析类型对应的空白报告模板;
向所述空白报告模板中添加所述分析数据,生成分析报告;
展示所述分析报告,或者向用户终端发送所述分析报告。
在本申请的部分实施例中,所述被控设备被进一步配置为:
获取自身运行状态数据;
根据预设存储格式,将所述运行状态数据转化为分析日志;
将所述分析日志,存储在所述被控设备的日志缓存数据库中。
进一步地,所述系统还包括环境检测器,所述环境检测器用于检测当前厂区内的温度、湿度等环境状态数据,所述被控设备被进一步配置为:
获取当前厂区范围内环境状态数据;所述环境状态数据为通过当前厂区范围内设置的环境监测器检测的数据。
根据预设存储格式,将所述环境状态数据添加至所述分析日志。
本申请的部分实施例中,所述被控设备被进一步配置为:
通过syslog和/或消息传递的途径获取待处理日志;
根据所述预设分析类型筛选所述待处理日志;
将经过筛选后的所述待处理日志,作为所述分析日志存储在日志缓存数据库中。
进一步地,所述被控设备被进一步配置为:
从所述待处理日志中提取运行状态数据;
根据所述运行状态数据,将所述待处理日志转化为所述分析日志。
由以上技术方案可知,本申请提供一种日志分析方法与管理平台,所述方法先由被控设备根据运行状态数据生成分析日志。再由管理服务器根据预设分析类型,向所述被控设备发送数据提取指令,被控设备再根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器。最后,所述管理服务器根据所述分析数据生成分析报告。所述方法可以对大量日志数据进行集中分析管理,并且实现日志管理格式的标准化统一。同时将日志分析处理的大量工作分担至被控设备,减少管理服务器的数据处理量,以及提取数据时对网络带宽的占用,减小数据处理延迟,以适应大规模企业的日志分析。
本申请提供的实施例之间的相似部分相互参见即可,以上提供的具体实施方式只是本申请总的构思下的几个示例,并不构成本申请保护范围的限定。对于本领域的技术人员而言,在不付出创造性劳动的前提下依据本申请方案所扩展出的任何其他实施方式都属于本申请的保护范围。

Claims (10)

1.一种日志分析方法,其特征在于,包括:
被控设备根据运行状态数据生成分析日志,所述分析日志为根据预设存储格式构建的文本文件;
管理服务器根据预设分析类型,向所述被控设备发送数据提取指令;
所述被控设备根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器;
所述管理服务器根据所述分析数据生成分析报告。
2.根据权利要求1所述的日志分析方法,其特征在于,管理服务器根据预设分析类型,向所述被控设备发送数据提取指令的步骤,包括:
用户终端向所述管理服务器发送分析指令,所述分析指令包括所述预设分析类型;
管理服务器根据所述分析指令,生成数据提取指令;所述数据提取指令中包括所述预设分析类型对应的文本特征信息;
所述管理服务器定位所述预设分析类型对应的目标被控设备,以及向目标被控设备发送所述数据提取指令。
3.根据权利要求1所述的日志分析方法,其特征在于,所述管理服务器根据所述分析数据生成分析报告的步骤,包括:
所述管理服务器获取所述预设分析类型对应的空白报告模板;
所述管理服务器向所述空白报告模板中添加所述分析数据,生成分析报告;
所述管理服务器展示所述分析报告,或者向用户终端发送所述分析报告。
4.根据权利要求1所述的日志分析方法,其特征在于,被控设备根据运行状态数据生成分析日志的步骤,包括:
被控设备获取自身运行状态数据;
所述被控设备根据预设存储格式,将所述运行状态数据转化为分析日志;
所述被控设备将所述分析日志,存储在所述被控设备的日志缓存数据库中。
5.根据权利要求4所述的日志分析方法,其特征在于,被控设备获取自身运行状态数据的步骤,还包括:
被控设备获取当前厂区范围内环境状态数据;所述环境状态数据为通过当前厂区范围内设置的环境监测器检测的数据;
所述被控设备根据预设存储格式,将所述环境状态数据添加至所述分析日志。
6.根据权利要求5所述的日志分析方法,其特征在于,所述环境监测器包括温度传感器和湿度传感器;所述环境状态数据包括当前厂区范围内的温度信息和湿度信息。
7.根据权利要求1所述的日志分析方法,其特征在于,所述分析日志包括系统日志、错误日志和自定义应用程序日志,所述方法还包括:
所述被控设备通过syslog和/或消息传递的途径获取待处理日志;
所述被控设备根据所述预设分析类型筛选所述待处理日志;
所述被控设备将经过筛选后的所述待处理日志,作为所述分析日志存储在日志缓存数据库中。
8.根据权利要求7所述的日志分析方法,其特征在于,所述方法还包括:
所述被控设备从所述待处理日志中提取运行状态数据;
所述被控设备根据所述运行状态数据,将所述待处理日志转化为所述分析日志。
9.一种日志分析管理平台,其特征在于,包括:管理服务器,以及与所述管理服务器建立数据通信连接的多个被控设备;多个所述被控设备布置在多个厂区范围内;
所述被控设备被进一步配置为:根据运行状态数据生成分析日志,所述分析日志为根据预设存储格式构建的文本文件;根据所述数据提取指令,在所述分析日志中提取与所述预设分析类型相对应的分析数据,以及将所述分析数据发送至所述管理服务器;
所述管理服务器被进一步配置为:根据预设分析类型,向所述被控设备发送数据提取指令;以及,根据所述分析数据生成分析报告。
10.根据权利要求9所述的日志分析管理平台,其特征在于,所述系统还包括多个控制终端,多个所述控制终端与所述管理服务器建立数据通信连接;
所述控制终端被进一步配置为:向所述管理服务器发送发送分析指令,所述分析指令包括所述预设分析类型;以及,接收并展示所述分析报告;
所述管理服务器被进一步配置为:接收到的所述分析指令,根据所述分析指令,生成数据提取指令;所述数据提取指令中包括所述预设分析类型对应的文本特征信息;定位所述预设分析类型对应的所述被控设备,向所述被控设备发送所述数据提取指令;以及,展示所述分析报告,或者向用户终端发送所述分析报告。
CN201910925955.0A 2019-09-27 2019-09-27 一种日志分析方法与管理平台 Pending CN110688359A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910925955.0A CN110688359A (zh) 2019-09-27 2019-09-27 一种日志分析方法与管理平台

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910925955.0A CN110688359A (zh) 2019-09-27 2019-09-27 一种日志分析方法与管理平台

Publications (1)

Publication Number Publication Date
CN110688359A true CN110688359A (zh) 2020-01-14

Family

ID=69110731

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910925955.0A Pending CN110688359A (zh) 2019-09-27 2019-09-27 一种日志分析方法与管理平台

Country Status (1)

Country Link
CN (1) CN110688359A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112100020A (zh) * 2020-08-04 2020-12-18 浙江三维利普维网络有限公司 基站的数据上报方法、装置、电子装置和存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105677552A (zh) * 2016-01-04 2016-06-15 杭州亚美利嘉科技有限公司 一种机器人日志管理方法及服务器
CN107273267A (zh) * 2017-06-09 2017-10-20 环球智达科技(北京)有限公司 基于elastic组件的日志分析方法
JP2018010441A (ja) * 2016-07-13 2018-01-18 株式会社日立製作所 ログ収集システム、ログ収集サーバ、ログ収集方法、
CN108268354A (zh) * 2016-12-30 2018-07-10 腾讯科技(深圳)有限公司 数据安全监控方法、后台服务器、终端及系统
CN109951323A (zh) * 2019-02-27 2019-06-28 网宿科技股份有限公司 一种日志分析方法和系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105677552A (zh) * 2016-01-04 2016-06-15 杭州亚美利嘉科技有限公司 一种机器人日志管理方法及服务器
JP2018010441A (ja) * 2016-07-13 2018-01-18 株式会社日立製作所 ログ収集システム、ログ収集サーバ、ログ収集方法、
CN108268354A (zh) * 2016-12-30 2018-07-10 腾讯科技(深圳)有限公司 数据安全监控方法、后台服务器、终端及系统
CN107273267A (zh) * 2017-06-09 2017-10-20 环球智达科技(北京)有限公司 基于elastic组件的日志分析方法
CN109951323A (zh) * 2019-02-27 2019-06-28 网宿科技股份有限公司 一种日志分析方法和系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112100020A (zh) * 2020-08-04 2020-12-18 浙江三维利普维网络有限公司 基站的数据上报方法、装置、电子装置和存储介质

Similar Documents

Publication Publication Date Title
Edrington et al. Machine monitoring system based on MTConnect technology
CN104407964B (zh) 一种基于数据中心的集中监控系统及方法
CN107958337A (zh) 一种信息资源可视化移动管理系统
CN104486673A (zh) 一种故障处理平台系统及故障处理方法
CN105159964A (zh) 一种日志监控方法及系统
CN105183609A (zh) 一种应用于软件系统的实时监控系统及方法
CN108667666A (zh) 一种基于可视化技术的智能运维方法及其系统
CN105049223B (zh) 一种电力通信网缺陷故障处理决策辅助分析方法
AU2012329327A1 (en) System and method for managing industrial processes
CN101714930A (zh) 一种实现网络监控的方法及系统
CN102546287A (zh) 基于二进制分类的分析及监视方法和系统
CN110209518A (zh) 一种多数据源日志数据集中收集存储方法及装置
CN111431754A (zh) 配用电通信网故障分析方法和系统
CN109885453A (zh) 基于流数据处理的大数据平台监控系统
CN101056447A (zh) 无线通信网网络工况监控装置
CN111509840A (zh) 一种基于电网安全运维的无线集群可视化系统及方法
CN111832943B (zh) 硬件设备故障管理方法、装置、电子设备及存储介质
CN112286774A (zh) 运维监控数据展示方法、装置、存储介质及计算设备
CN112327777A (zh) 一种数据采集系统及方法
Safrianti et al. Real-time network device monitoring system with simple network management protocol (snmp) model
Ljubojević et al. Centralized monitoring of computer networks using Zenoss open source platform
CN110688359A (zh) 一种日志分析方法与管理平台
CN110677293B (zh) 一种基于机房运维管理平台的告警系统
CN110609761B (zh) 确定故障源的方法、装置、存储介质和电子设备
CN105117347A (zh) 测试数据的模拟方法、系统及自动化测试方法、系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20220420

Address after: 5 / F, building A5, No. 9, Kechuang Avenue, Zhongshan Science Park, Liuhe District, Nanjing City, Jiangsu Province

Applicant after: JIANGSU JINHENG INFORMATION TECHNOLOGY Co.,Ltd.

Address before: Room 201, unit 1, building 527, Fukang Park, 399 Xiongzhou South Road, Longchi street, Liuhe District, Nanjing City, Jiangsu Province, 211500

Applicant before: Nanjing Tianxin Cloud Data Service Co.,Ltd.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20200114