CN102981943B - 监控应用日志的方法及系统 - Google Patents
监控应用日志的方法及系统 Download PDFInfo
- Publication number
- CN102981943B CN102981943B CN201210421115.9A CN201210421115A CN102981943B CN 102981943 B CN102981943 B CN 102981943B CN 201210421115 A CN201210421115 A CN 201210421115A CN 102981943 B CN102981943 B CN 102981943B
- Authority
- CN
- China
- Prior art keywords
- application
- daily record
- error message
- error
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种监控应用日志的方法及系统。该方法包括:应用服务器捕获运行的应用程序异常时的错误信息;对所述错误信息进行预处理,生成应用日志,将所述应用日志通过Scribe接口输出至监控服务器;监控服务器通过Scribe接口接收应用日志,进行分类存储;按照预先设置的分类错误类型读取存储的应用日志,获取错误信息;在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息向预先设置的目标用户发送。应用本发明,可以提高应用日志的监控效率,提升处理应用日志的实时性。
Description
技术领域
本发明涉及监控技术,尤其涉及一种监控应用日志的方法及系统。
背景技术
随着互联网用户的不断增加,大型的网站一般会采用多台相同角色的应用服务器,组成分布式网络系统,从而在用户访问网站时,各应用服务器能够较为均衡地接入用户,从而实现分布式网络系统的负载均衡。
在现有分布式网络系统中,为了保障网站的正常运行,需要对网站的可用性进行监控。网站的可用性包括各应用服务器系统层面的可用性以及应用服务器提供的网页页面应用内容的可用性,其中,对于系统层面的可用性,现有技术的监控比较完善,例如,可以针对负载、网络带宽、CPU、IO、内存等基础数据提供完善的监控。而对于应用内容的可用性监控比较复杂,具体来说,一方面,应用内容错误并不一定导致系统层面的错误,另一方面,应用内容错误直接与用户获取信息的准确度相关,而应用内容的异常情况多种多样,例如,应用程序部分异常,会降低网页展示的应用内容的准确性,举例来说,假设网页页面由于代码新上线问题或数据库连接失败,这样,导致网页页面原本应该展示应用内容A,由于异常,无法正常展示应用内容A,使得该网页页面展示的应用内容是错误的,或者是不全的。
为了及时处理应用服务器由于应用程序出现的应用内容错误,现有技术提出了通过监控应用日志的方法来监控应用程序的运行状态,其中,应用日志是指应用程序(动态网页页面)在运行时的状态日志。例如,动态网页页面A具有三个应用程序L1~L3,其中,L1需要连接数据库,如果L1连接数据库成功,则应用服务器记录一条包含数据库连接成功信息的应用日志;否则,记录一条包含数据库连接失败信息的应用日志,并定期地将记录的应用日志文件上传至监控服务器。相关技术维护人员定期通过调用监控服务器存储的应用日志文件,获取应用日志,可以分析应用程序执行状态,有利于开发人员进行测试和调试。
由上述可见,现有监控应用日志的方法,是定期的将应用日志文件,通过远程同步(rsync,remotesync)或文件传输协议(FTP,FileTransferProtocol)的方式上传到远程监控服务器,再由相关技术维护人员定期从监控服务器获取应用日志文件进行分析,使得不能够及时修复应用程序,应用日志的实时性处理较差,不能满足对应用日志监控实时性上的要求,应用日志监控效率较低。
发明内容
本发明的实施例提供一种监控应用日志的方法,提高应用日志的监控效率,提升处理应用日志的实时性。
本发明的实施例还提供一种监控应用日志的系统,提高应用日志的监控效率,提升处理应用日志的实时性。
为达到上述目的,本发明实施例提供的一种监控应用日志的方法,包括:
应用服务器捕获运行的应用程序异常时的错误信息;
对所述错误信息进行预处理,生成应用日志,将所述应用日志通过Scribe接口输出至监控服务器;
监控服务器通过Scribe接口接收应用日志,进行分类存储;
按照预先设置的分类错误类型读取存储的应用日志,获取错误信息;
在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息向预先设置的目标用户发送。
其中,所述捕获运行的应用程序异常时的错误信息包括:
通过应用程序的调用函数得到返回值、应用程序进行流程分支的逻辑判断以及PHP脚本语言的错误捕获函数来获取应用程序异常时的错误信息。
其中,在对所述错误信息进行预处理后,生成应用日志之前,该方法进一步包括:
对预处理后的信息进行base64编码。
其中,在生成应用日志后,将所述应用日志通过Scribe接口输出至监控服务器之前,该方法进一步包括:
在生成的应用日志中增加发生错误的应用服务器时间、发生错误的应用程序名、发生错误的应用服务器IP地址、代码段位置以及错误类型信息。
其中,所述方法进一步包括:
监测系统,当系统发生异常时,触发Scribe接口自动将应用日志保存在本地磁盘,在检测到系统通信恢复后,将保存在本地磁盘的应用日志进行推送。
其中,在读取存储的应用日志后,该方法进一步包括:
对分类存储的该读取的应用日志中设置已读标识。
其中,所述告警策略为报警错误数阈值、和/或,报警频率阈值,如果预设时间内接收的应用服务器的错误信息数超过报警错误数阈值、和/或,距离上次发送报警信息的时间超过报警频率阈值,则满足预先设置的告警策略。
其中,所述向预先设置的目标用户发送包括:
调用预先设置的短信服务接口或邮箱服务接口,通过短信服务接口或邮箱服务接口向目标用户发送用于报警的错误信息。
其中,所述短信服务接口采用短消息接入应用编程接口,邮箱服务接口采用简单邮件传送协议接口。
一种监控应用日志的系统,该系统包括:应用服务器以及监控服务器,其中,
应用服务器,用于捕获运行的应用程序异常时的错误信息,进行预处理,生成应用日志;将应用日志通过Scribe接口输出至监控服务器;
监控服务器,用于通过Scribe接口接收应用日志,进行分类存储;按照预先设置的分类错误类型读取存储的应用日志,获取错误信息,在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息向预先设置的目标用户发送。
较佳地,所述应用服务器包括:异常捕获模块以及应用日志发送模块,其中,
异常捕获模块,用于捕获运行的应用程序异常时的错误信息,进行预处理,生成应用日志,输出至应用日志发送模块;
应用日志发送模块,用于将接收的应用日志通过Scribe接口输出至监控服务器。
较佳地,所述应用服务器进一步包括:
预处理模块,用于在异常捕获模块生成的应用日志中增加发生错误的应用服务器时间、发生错误的应用程序名、发生错误的应用服务器IP地址、代码段位置以及错误类型信息,输出至应用日志发送模块。
较佳地,所述应用服务器进一步包括:
编码模块,用于对预处理模块输出的信息进行base64编码后并输出至应用日志发送模块。
较佳地,所述应用服务器进一步包括:
监测模块,用于监测系统,当系统发生异常时,触发应用日志发送模块中的Scribe接口自动将应用日志保存在本地磁盘,在检测到系统通信恢复后,将保存在本地磁盘的应用日志进行推送。
较佳地,所述监控服务器包括:应用日志收集模块、应用日志分析模块以及应用日志报警模块,其中,
日志收集模块,用于用于通过Scribe接口接收应用日志,进行分类存储;
应用日志分析模块,用于按照预先设置的分类错误类型读取存储的应用日志,获取错误信息,在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息输出至应用日志报警模块;
应用日志报警模块,用于将接收的错误信息,向预先设置的目标用户发送。
由上述技术方案可见,本发明实施例提供的一种监控应用日志的方法及系统,应用服务器捕获运行的应用程序异常时的错误信息;对所述错误信息进行预处理,生成应用日志,将所述应用日志通过Scribe接口输出至监控服务器;监控服务器通过Scribe接口接收应用日志,进行分类存储;按照预先设置的分类错误类型读取存储的应用日志,获取错误信息;在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息向预先设置的目标用户发送。这样,通过Scribe接口实时传输应用日志,并根据预先设置的告警策略,在满足告警策略时,将应用程序异常的应用告警信息向预先设置的目标用户发送,使得目标用户可以及时获取应用程序异常信息,及时进行处理,提高了应用日志的监控效率,提升了处理应用日志的实时性,提高了网站运营的安全性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,以下将对实施例或现有技术描述中所需要使用的附图作简单地介绍。显而易见地,以下描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员而言,还可以根据这些附图所示实施例得到其它的实施例及其附图。
图1为本发明实施例监控应用日志的系统结构示意图。
图2为本发明实施例监控应用日志的方法流程示意图。
图3为本发明实施例监控应用日志的方法具体流程示意图。
具体实施方式
以下将结合附图对本发明各实施例的技术方案进行清楚、完整的描述,显然,所描述的实施例仅仅是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所得到的所有其它实施例,都属于本发明所保护的范围。
现有监控应用日志的方法,应用服务器记录应用日志,定期地将应用日志文件通过rsync或FTP的方式上传到远程监控服务器,再由相关技术维护人员定期从监控服务器获取应用日志文件进行分析,从而无法实时、准确地对应用日志进行处理,满足应用层面对报警监控的实时性需求,使得应用日志监控效率较低。
LAMP(Linux-Apache-MySQL-PHP)网站系统是目前流行的Web框架系统,该框架系统包括:Linux操作服务器、Apache网络服务器、MySQL数据库以及Perl、PHP或者Python编程语言服务器,LAMP由各自独立的应用程序构成,具有较高的兼容度,共同组成一个强大的Web应用程序平台,并基于开源软件开发,使用高性能的操作系统、高性能的网络服务器、高性能的数据库以及高效率的编程语言等,具有Web资源丰富、轻量、快速开发、跨平台、高性能、通用等特点。
Scribe接口是Facebook开源的日志收集程序接口,能够从各种日志源,例如,各应用服务器上收集应用日志,并存储到预先设定的远程监控服务器上,以便于进行集中统计分析处理,当系统的网络或者远程监控服务器出现故障时,Scribe可以将应用日志转存到本地或者预先设置的其它位置,当网络或者远程监控服务器恢复后,再将转存的应用日志重新传输给远程监控服务器。
本发明实施例中,考虑基于LAMP以及日志收集技术Scribe构建监控应用日志的系统,能够将实时记录的应用日志通过Scribe接口上传,并根据预先设置的告警策略,将应用程序异常的应用告警信息向预先设置的终端设备发送,使得终端设备持有者可以及时获取应用程序异常信息,及时进行处理,提升应用日志的监控效率。
图1为本发明实施例监控应用日志的系统结构示意图。参见图1,该系统基于LAMP网络架构,包括:应用服务器以及监控服务器,其中,
应用服务器数量为一个或多个,监控服务器数量也可以为一个或多个。较佳地,应用服务器数量为多个,监控服务器数量为一个。
应用服务器,用于捕获运行的应用程序异常时的错误信息,进行预处理,生成应用日志;将应用日志通过Scribe接口输出至监控服务器;
本发明实施例中,应用服务器可以捕获的应用程序错误信息包括:资源访问失败错误、程序逻辑类错误以及程序语法类错误,其中,
资源访问失败错误包括:数据库连接失败错误、数据库查询内容失败错误、API接口访问失败错误、Memcached等其他资源访问超时错误或失败错误,该类错误均可以通过应用程序的调用函数得到返回值,根据返回值可以确定具体的错误。
程序逻辑类错误包括:程序抛出异常错误、程序流程没有按照预定义的流程执行,进入了错误分支等错误,该类错误可以通过应用程序进行流程分支的逻辑判断,从而捕获失败的错误信息。
程序语法类错误是超文本预处理语言(PHP,HypertextPreprocessor)的致命错误,如果出现程序语法错误,将导致应用服务器上所有的应用程序都无法启动执行,因而,如果出现程序语法错误问题,将无法直接通过应用程序记录日志,这是由于:在正常的应用程序流程下,致命错误发生在日志记录之前,在接收到捕获致命错误的命令之前,应用程序就已经终止了,因此无法按照正常的逻辑来调用。本发明实施例中,通过使用PHP脚本语言的错误捕获函数,例如,registershutdownfunction函数和errorgetlast函数,捕获脚本警告错误和致命错误相关的信息。这样,通过将致命错误绑定到特殊错误捕获函数上,从而使应用程序可以继续执行处理。
关于通过应用程序的调用函数得到返回值、通过应用程序进行流程分支的逻辑判断以及通过使用PHP脚本语言的错误捕获函数得到错误信息的详细描述,具体可参见相关技术文献,在此不再赘述。
获取到应用服务器的错误信息后,将应用服务器的错误信息进行预处理,例如,增加发生错误的应用服务器时间、发生错误的应用程序名、发生错误的应用服务器IP地址、代码段位置、错误类型等,进一步地,还可以添加自定义的错误调试信息,从而进行格式化的错误信息拼装。
举例来说,经过预处理后,格式化的错误信息可以采用如下格式:
2012-09-0116:40:23xxxx.com.cn-debug_fatal_error10.xxx.xxx.xxx203.208.xxx.xxxerror_type:E_ERRORerror_file:xxx.phperror_line:138error_info:“cannotusestringoffetasanarray”。
本发明实施例中,在获取应用日志后,由应用程序调用Scribe接口,将包含格式化的错误信息的应用日志实时发送至监控服务器。
实际应用中,应用服务器进一步用于监测系统,当系统发生异常时,例如,通信网络堵塞或故障,触发Scribe接口自动将应用日志保存在本地磁盘,在检测到系统通信恢复后,将保存在本地磁盘的应用日志进行推送,以保证包含错误信息的应用日志不丢失,便于相关技术维护人员进行分析。这样,通过只记录应用程序异常时的应用日志信息,可以有效减少传输所需的时间,同时也减少了监控服务器解析应用日志信息所需的时间。
进一步地,为了进一步减少传输的数据量,应用服务器还可以对格式化的错误信息(应用日志)进行编码处理,例如,将错误信息(ErrorMessage)进行base64编码,从而合并错误信息。
在信息合并时,相同的错误信息(文本内容)在base64编码下,得到相同的结果。这样,由于ErrorMessage是base64编码,是可逆的编码,合并后,在监控服务器中,对ErrorMessage进行解码,可以得到错误的原始信息。
举例来说,经过base64编码后,生成的应用日志可以为:
“2012-08-2901:13:47”“diandi_weibo-error_curl”“dGltZW91dDpodHRwOi8vaS5wbGF0Zm9ybS5zaW5hLmNvbS5jbi9ibG9ndjIvbGlrZWNoZWNr”“errormsg:Method:GET||URL:http://i.platform.sina.com.cn/blogv2/likecheck?app_key=10000000&article_ids=&user_ip=219.128.102.18||Param:[]||ApiTime:5.0010540485382||strBytes:bytes”。
其中,
日志时间为:2012-08-2901:13:47;
错误分类(类型)为:diandi_weibo-error_curl;
ErrorMessage为:dGltZW91dDpodHRwOi8vaS5wbGF0Zm9ybS5zaW5hLmNvbS5jbi9ibG9ndjIvbGlrZWNoZWNr;
DebugMessage为:errormsg:Method:GET||URL:http://i.platform.sina.com.cn/blogv2/likecheck?app_key=10000000&article_ids=&user_ip=219.128.102.18||Param:[]||ApiTime:5.0010540485382||strBytes:bytes。
监控服务器,用于通过Scribe接口接收应用日志,进行分类存储;按照预先设置的分类错误类型读取存储的应用日志,获取错误信息,在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息向预先设置的目标用户发送。
本发明实施例中,监控服务器对应用服务器发送来的应用日志数据,利用Scribe接口进行存储。将接收的应用日志信息,按照预先设置的分类策略进行分类,并以应用日志文件的形式自动存放到本地文件系统中。
实际应用中,为避免应用日志文件容量过大,可以设置应用日志文件的大小,在当前应用日志文件中分类形成的应用日志容量超过预先设定的文件阈值时,自动生成下一个应用日志文件,从而可以保证单个应用日志文件不会太大,进而影响分析的效率。这样,按照接收的日志文件的顺序进行存储,每台单独的应用服务器可以不再存储实际的应用日志数据,而是将应用日志通过消息格式封装后,发送给监控服务器。
本发明实施例中,将接收的应用日志中包含的错误信息分类(错误类型)为:致命错误、警告错误以及数据库错误。分别形成致命错误日志文件、警告错误日志文件以及数据库错误日志文件。
表1为针对不同错误类型生成的日志文件列表,其中,文件大小单位为KB。
表1
错误类型 | 文件大小 | 文件名 |
致命错误 | 80 | dindi_weibo-debug_fatal_error-2012-05-19_00000 |
警告错误 | 130 | dindi_weibo-debug_warning_error-2012-05-14_00000 |
数据库错误 | 525622 | dindi_weibo-error_mysql-2012-05-29_00000 |
表1中,监控服务器对接收的错误信息,进行分类,每种不同错误类型的应用日志分别被汇总到相应的应用日志文件中,例如,对于分类形成的数据库错误,存储到数据库错误应用日志文件“dindi_weibo-error_mysql-2012-05-29_00000”中。其中,2012-05-29_00000表示是从2012-05-29的0点产生的新日志文件。这样,后续流程中,监控服务器可以通过文件大小和文件行数,进行动态的错误量的统计,并通过预定义的格式解析,以获取详细的错误信息,从而完成报警信息和错误信息的统计。
本发明实施例中,包括致命错误、警告错误以及数据库错误的错误类型是预先根据实际需要定义的,并且由部署在前端Apache服务器(应用服务器)日志捕获模块,通过对应用逻辑的错误应用日志进行分析和分类,将错误应用日志发送给监控服务器的日志收集模块,日志收集模块进行分类后存储。
由于Scribe软件的特性是支持文件多次重复推送,本发明实施例中,相对于利用rsync等文件推送机制,先将应用日志存储在相应各应用服务器中的应用日志文件里,在向监控服务器的日志收集模块进行推送时,将存储的整个应用日志文件进行推送。例如,如果应用服务器每隔一小时可以生成一个日志文件,由于需要保证实时性,需要5分钟推送一次,从而使得每5分钟,需要将一小时的日志文件全部进行推送,导致处理复杂;此外,错误信息分别保存在各应用服务器上,对应有多个应用日志文件,监控服务器进行各应用服务器的日志文件中的信息碎片合并比较复杂,无法统计各错误类型的信息。本发明实施例中,通过对错误信息进行分类,每个错误类型,对应单独的一个应用日志文件,例如,dindi_weibo-error_curl-2012-09-28,合并简单,监控服务器中的分析程序解析接收的应用日志文件,将ErrorMessage作为关键词(KEY)进行统计,统计在错误分类的错误类型下,例如,对于应用日志文件名为diandi_weibo-error_curl的应用日志文件,统计ErrorMessage的出现次数,合并结果,并按照逆序排序,从而可以快捷地统计各错误类型的信息。
如前所述,对经base64编码后的应用日志信息,进行解码,其中,经base64编码的ErrorMessage为:dGltZW91dDpodHRwOi8vaS5wbGF0Zm9ybS5zaW5hLmNvbS5jbi9ibG9ndjIvbGlrZWNoZWNr。
解码后,得到:″timeout:http://i.platform.sina.com.cn/blogv2/likecheck32”。
说明:timeout:http://i.platform.sina.com.cn/blogv2/likecheck接口超时32次。
监控服务器的发送报警逻辑进行ErrorMessage解码,在解码得到的错误信息满足告警策略后,将错误信息以邮件或短信发送进行报警。
本发明实施例中,发送的错误信息格式可以如下:
监控进程名:MonitorQingFataError.php
监控报警ip:10.0.0.xxx
监控报错信息:2012-08-2901:13:47
ErrorMessage:timeout:http://i.platform.sina.com.cn/blogv2/likecheck
错误次数:32次
DebugMessage:errormsg:Method:GET||URL:http://i.platform.sina.com.cn/blogv2/likecheck?app_key=3524377545&article_ids=&user_ip=219.128.102.18||Param:[]||ApiTime:5.0010540485382||strBytes:bytes
请检查程序出现的原因
希望你即时解决故障
其中,
应用服务器包括:异常捕获模块以及应用日志发送模块(图中未示出),其中,
异常捕获模块,用于捕获运行的应用程序异常时的错误信息,进行预处理,生成应用日志,输出至应用日志发送模块;
本发明实施例中,异常捕获模块可以通过应用程序的调用函数得到返回值、应用程序进行流程分支的逻辑判断以及PHP脚本语言的错误捕获函数来获取应用程序异常时的错误信息。
应用日志发送模块,用于将接收的应用日志通过Scribe接口输出至监控服务器。
本发明实施例中,应用日志发送模块接收异常捕获模块输出的应用日志信息,由应用程序调用Scribe接口,将格式化的错误信息实时发送至监控服务器。
较佳地,该应用服务器还可以进一步包括:
预处理模块,用于在异常捕获模块生成的应用日志中增加发生错误的应用服务器时间、发生错误的应用程序名、发生错误的应用服务器IP地址、代码段位置以及错误类型信息,输出至应用日志发送模块。
较佳地,该应用服务器还可以进一步包括:
编码模块,用于对预处理模块输出的信息进行base64编码后并输出至应用日志发送模块。
较佳地,该应用服务器还可以进一步包括:
监测模块,用于监测系统,当系统发生异常时,触发应用日志发送模块中的Scribe接口自动将应用日志保存在本地磁盘,在检测到系统通信恢复后,将保存在本地磁盘的应用日志进行推送。
监控服务器包括:应用日志收集模块、应用日志分析模块以及应用日志报警模块(图中未示出),其中,
日志收集模块,用于用于通过Scribe接口接收应用日志,进行分类存储;
应用日志分析模块,用于按照预先设置的分类错误类型读取存储的应用日志,获取错误信息,在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息输出至应用日志报警模块;
本发明实施例中,应用日志分析模块按照错误类型分析日志内容,并对分析出的结果进行处理,例如,对于常用的报警类型可直接处理。
实际应用中,应用日志分析模块中的日志监控程序在读取存储的应用日志,进一步在该应用日志上设置已读标识。这样,在下次读取时,可以直接从设置有已读标识的应用日志进行读取。即自动从上一次的检测点对应用日志进行检测,如果确定存在新增应用日志,并满足预先设置的告警策略,则将读取的应用日志信息输出,否则,不作处理。其中,
告警策略为报警错误数阈值、和/或,报警频率阈值,如果预设时间内接收的应用服务器的错误信息数超过报警错误数阈值、和/或,距离上次发送报警信息的时间超过报警频率阈值,则满足预先设置的告警策略。
上一次的检测点为日志分析模块记录的上一次读取的日志文件的行数。应用日志分析模块会每次记录上一次读取的应用日志文件的行数,这样,在每次分析进程启动后,可以直接到跳转到上次已经分析的最后一行,并从该最后一行开始,继续向下读取,由于错误信息是顺次添加的,错误信息基本是按照事件续的,因此不会遗漏相关的错误信息。
报警频率阈值主要设置发送给报警接收者(目标用户)的时间频率,如每5钟、每10分钟、最快为每1分钟。系统可开放设置的接口,用以满足接收者对报警频度的灵活要求。例如,错误信息暂时无人处理时,防止系统连续不断发送报警信息,从而影响接收者的正常生活。
本发明实施例中,应用日志分析模块在读取存储的应用日志后,进一步用于判断存储的应用日志是否经过编码处理,如果是,进行解码。
应用日志报警模块,用于将接收的错误信息,向预先设置的目标用户发送。
本发明实施例中,应用日志报警模块调用预先设置的短信服务接口或邮箱服务接口,通过短信服务接口或邮箱服务接口发送用于报警的错误信息,从而实现实时报警通知。
本发明实施例中,短信服务接口或邮箱服务接口可由运营商设置,并下发至应用日志报警模块进行存储即可。
实际应用中,应用日志报警模块提供了短信报警和邮件报警服务,可以采用简单邮件传送协议(SMTP,SimpleMailTransferProtocol)和短消息(API,ApplicationProgramInterface)处理。
实际应用中,应用日志报警模块可以将预先设置的目标用户进行分组,并为每个目标用户设置使用何种报警类型。
短消息发送保证了非工作日通知的及时性,邮件报警为常用的报警方式。
例如,可以手动配置目标用户信息,这样,在每条短消息中,携带有错误类型,例如,xxxx.com.cn-debug_fatal_error,应用日志分析模块中的日志分析程序通过获取短消息中包含的错误信息的错误类型,查询获取对应的接收方的联系方式和邮箱。其中,可以使用两个数组对分组的目标用用进行维护。
数组一:定义各错误类型需要通知的目标用户。例如,
$error_report[′xxxx.com.cn-debug_fatal_error′]=[′用户一′,′用户二′,′用户三′,′用户四′]。
数组二:定义接收错误信息的用户接收报警信息所使用的方式。例如,
$user_report[′用户一′]=[′邮箱地址′,′受否启用邮箱接收′,′手机号码′,′受否启动短信接收′]。
由上述可见,本发明实施例的基于LAMP的监控应用日志的系统,应用服务器捕获运行的应用程序异常时的错误信息,进行预处理,生成应用日志;将应用日志通过Scribe接口输出至监控服务器;监控服务器通过Scribe接口接收应用日志,进行分类存储;按照预先设置的分类错误类型读取存储的应用日志,获取错误信息,在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息向预先设置的目标用户发送。这样,通过Scribe接口实时传输应用日志,并根据预先设置的告警策略,在满足告警策略时,将应用程序异常的应用告警信息向预先设置的目标用户发送,使得目标用户可以及时获取应用程序异常信息,及时进行处理,提升应用日志的监控效率,也提高了应用报警的及时性,可以使网站运维人员更加快速的定位运营内容等错误,以及页面上的异常情况,改善网站质量,提升用户的体验;进一步地,通过只记录应用程序异常时的应用日志信息,可以有效减少传输所需的时间,同时也减少了监控服务器解析应用日志信息所需的时间;而且,通过顺序存储应用日志,无需进行时序性判断,简化了复杂的流程。从而针对现有的监控方案在应用日志错误的监控比较欠缺的技术问题,利用Scribe的实时日志的收集的能力,结合监控系统的一些重要指标和特征,设计出一套实时的监控系统的部署方案,通过将某一类型的应用日志按需求自动合并成一个应用日志文件,扩展性强,能满足监控类程序对实时业务的应用日志要求。例如,对常见错误进行了日志格式规定以及预判断处理,因而,只需简单安装部署程序,即可扩展网站的应用监控,提高了网站运营的安全性。
图2为本发明实施例监控应用日志的方法流程示意图。参见图2,该流程包括:
步骤201,应用服务器捕获运行的应用程序异常时的错误信息;
本步骤中,错误信息包括:资源访问失败错误信息、程序逻辑类错误信息以及程序语法类错误信息。
捕获运行的应用程序异常时的错误信息包括:
通过应用程序的调用函数得到返回值、应用程序进行流程分支的逻辑判断以及PHP脚本语言的错误捕获函数来获取应用程序异常时的错误信息。
步骤202,对所述错误信息进行预处理,生成应用日志,将所述应用日志通过Scribe接口输出至监控服务器;
本步骤中,在对所述错误信息进行预处理后,生成应用日志之前,该方法可以进一步包括:
对预处理后的信息进行base64编码。
较佳地,在生成应用日志后,将所述应用日志通过Scribe接口输出至监控服务器之前,该方法可以进一步包括:
在生成的应用日志中增加发生错误的应用服务器时间、发生错误的应用程序名、发生错误的应用服务器IP地址、代码段位置以及错误类型信息。
较佳地,该方法还可以进一步包括:
监测系统,当系统发生异常时,触发Scribe接口自动将应用日志保存在本地磁盘,在检测到系统通信恢复后,将保存在本地磁盘的应用日志进行推送。
步骤203,监控服务器通过Scribe接口接收应用日志,进行分类存储;
本步骤中,分类的类型包括:致命错误、警告错误以及数据库错误。
步骤204,按照预先设置的分类错误类型读取存储的应用日志,获取错误信息;
本步骤中,在读取存储的应用日志后,该方法进一步包括:
对分类存储的该读取的应用日志中设置已读标识。
较佳地,在读取存储的应用日志后,该方法还可以进一步包括:
判断存储的应用日志是否经过编码处理,如果是,进行解码。
步骤205,在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息向预先设置的目标用户发送。
本步骤中,告警策略为报警错误数阈值、和/或,报警频率阈值,如果预设时间内接收的应用服务器的错误信息数超过报警错误数阈值、和/或,距离上次发送报警信息的时间超过报警频率阈值,则满足预先设置的告警策略。
向预先设置的目标用户发送包括:
调用预先设置的短信服务接口或邮箱服务接口,通过短信服务接口或邮箱服务接口向目标用户发送用于报警的错误信息。
其中,较佳地,短信服务接口采用短消息接入应用编程接口,邮箱服务接口采用简单邮件传送协议接口。
当然,实际应用中,也可以将预先设置的目标用户进行分组,并为每个目标用户设置使用何种报警类型。例如,通过定义各错误类型需要通知的目标用户或定义接收错误信息的用户接收报警信息所使用的方式,从而实现错误信息发送。
图3为本发明实施例监控应用日志的方法具体流程示意图。参见图3,该流程包括:
步骤301,日志监控程序从预先设置的文件位置获取分类存储的应用日志;
步骤302,判断是否有新增的应用日志,如果是,执行步骤303,否则,执行步骤311;
步骤303,顺序解析新增的应用日志中的错误信息;
步骤304,判断是否达到报警错误数阈值,如果是,执行步骤305,否则,执行步骤311;
步骤305,判断是否达到报警频率阈值,如果是,执行步骤306,否则,执行步骤311;
步骤306,查阅获取订阅名单以及发送方式;
步骤307,按照获取的订阅名单以及发送方式发送错误信息进行报警;
步骤311,退出流程。
显然,本领域技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若对本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也包含这些改动和变型在内。
Claims (13)
1.一种监控应用日志的方法,其特征在于,包括:
应用服务器捕获运行的应用程序异常时的错误信息;
对所述错误信息进行预处理,对预处理后的信息进行base64编码,生成应用日志,将所述应用日志通过Scribe接口输出至监控服务器;
监控服务器通过Scribe接口接收应用日志,进行分类存储;
按照预先设置的分类错误类型读取存储的应用日志,获取错误信息;
在判断获取的错误信息满足预先设置的告警策略时,将获取的错误信息向预先设置的目标用户发送。
2.根据权利要求1所述的方法,其中,所述捕获运行的应用程序异常时的错误信息包括:
通过应用程序的调用函数得到返回值、应用程序进行流程分支的逻辑判断以及PHP脚本语言的错误捕获函数来获取应用程序异常时的错误信息。
3.根据权利要求1所述的方法,其中,在生成应用日志后,将所述应用日志通过Scribe接口输出至监控服务器之前,该方法进一步包括:
在生成的应用日志中增加发生错误的应用服务器时间、发生错误的应用程序名、发生错误的应用服务器IP地址、代码段位置以及错误类型信息。
4.根据权利要求1至3任一项所述的方法,其中,所述方法进一步包括:
监测系统,当系统发生异常时,触发Scribe接口自动将应用日志保存在本地磁盘,在检测到系统通信恢复后,将保存在本地磁盘的应用日志推送至监控服务器。
5.根据权利要求4所述的方法,其中,监控服务器在读取存储的应用日志后,该方法进一步包括:
对分类存储的该读取的应用日志中设置已读标识。
6.根据权利要求4所述的方法,其中,所述告警策略为报警错误数阈值、和/或,报警频率阈值,如果预设时间内接收的应用服务器的错误信息数超过报警错误数阈值、和/或,距离上次发送报警信息的时间超过报警频率阈值,则满足预先设置的告警策略。
7.根据权利要求6所述的方法,其中,所述向预先设置的目标用户发送包括:
调用预先设置的短信服务接口或邮箱服务接口,通过短信服务接口或邮箱服务接口向目标用户发送用于报警的错误信息。
8.根据权利要求7所述的方法,其中,所述短信服务接口采用短消息接入应用编程接口,邮箱服务接口采用简单邮件传送协议接口。
9.一种监控应用日志的系统,其特征在于,该系统包括:应用服务器以及监控服务器,其中,
应用服务器,用于捕获运行的应用程序异常时的错误信息,进行预处理,对预处理的信息进行base64编码,生成应用日志;将应用日志通过Scribe接口输出至监控服务器;
监控服务器,用于通过Scribe接口接收应用日志,进行分类存储;按照预先设置的分类错误类型读取存储的应用日志,获取错误信息,在判断获取的错误信息满足预先设置的告警策略时,将获取的错误信息向预先设置的目标用户发送。
10.根据权利要求9所述的系统,其特征在于,所述应用服务器包括:异常捕获模块以及应用日志发送模块,其中,
异常捕获模块,用于捕获运行的应用程序异常时的错误信息,进行预处理,生成应用日志,输出至应用日志发送模块;
应用日志发送模块,用于将接收的应用日志通过Scribe接口输出至监控服务器。
11.根据权利要求10所述的系统,其特征在于,所述应用服务器进一步包括:
预处理模块,用于在异常捕获模块生成的应用日志中增加发生错误的应用服务器时间、发生错误的应用程序名、发生错误的应用服务器IP地址、代码段位置以及错误类型信息,输出至应用日志发送模块。
12.根据权利要求10所述的系统,其特征在于,所述应用服务器进一步包括:
监测模块,用于监测系统,当系统发生异常时,触发应用日志发送模块中的Scribe接口自动将应用日志保存在本地磁盘,在检测到系统通信恢复后,将保存在本地磁盘的应用日志推送至监控服务器。
13.根据权利要求9至12任一项所述的系统,其特征在于,所述监控服务器包括:应用日志收集模块、应用日志分析模块以及应用日志报警模块,其中,
日志收集模块,用于用于通过Scribe接口接收应用日志,进行分类存储;
应用日志分析模块,用于按照预先设置的分类错误类型读取存储的应用日志,获取错误信息,在判断获取的错误信息满足预先设置的告警策略,将获取的错误信息输出至应用日志报警模块;
应用日志报警模块,用于将接收的错误信息,向预先设置的目标用户发送。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210421115.9A CN102981943B (zh) | 2012-10-29 | 2012-10-29 | 监控应用日志的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210421115.9A CN102981943B (zh) | 2012-10-29 | 2012-10-29 | 监控应用日志的方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102981943A CN102981943A (zh) | 2013-03-20 |
CN102981943B true CN102981943B (zh) | 2016-05-11 |
Family
ID=47855998
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210421115.9A Active CN102981943B (zh) | 2012-10-29 | 2012-10-29 | 监控应用日志的方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102981943B (zh) |
Families Citing this family (98)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104375928A (zh) * | 2013-08-12 | 2015-02-25 | 鸿富锦精密工业(深圳)有限公司 | 异常日志管理方法及系统 |
CN104468938A (zh) * | 2013-09-12 | 2015-03-25 | 中国移动通信集团浙江有限公司 | 一种信息采集处理方法以及相关装置、移动终端和服务器 |
US9507847B2 (en) * | 2013-09-27 | 2016-11-29 | International Business Machines Corporation | Automatic log sensor tuning |
CN103617109B (zh) * | 2013-10-23 | 2016-04-27 | 上海华力微电子有限公司 | 探针机台日志文件的警告处理系统和方法 |
CN103957133A (zh) * | 2014-04-22 | 2014-07-30 | 北京联时空网络通信设备有限公司 | 一种日志监测方法及装置 |
CN105204969B (zh) * | 2014-06-30 | 2018-10-30 | 腾讯科技(深圳)有限公司 | 异常日志处理方法以及异常日志处理装置 |
CN105471932B (zh) * | 2014-08-06 | 2020-12-29 | 腾讯科技(深圳)有限公司 | 一种前端应用的监控方法、设备和系统 |
CN104199766A (zh) * | 2014-08-25 | 2014-12-10 | 广东欧珀移动通信有限公司 | 一种异常运行的监控方法和装置 |
CN104202201B (zh) * | 2014-09-16 | 2018-01-23 | 广州金山网络科技有限公司 | 一种日志处理方法、装置及终端 |
CN104216822B (zh) * | 2014-09-24 | 2018-03-30 | 北京国双科技有限公司 | 一种异常信息的处理方法及装置 |
CN104270275B (zh) * | 2014-10-14 | 2018-04-10 | 广东小天才科技有限公司 | 一种异常原因的辅助分析方法、服务器以及智能设备 |
CN104503770B (zh) * | 2015-01-12 | 2018-07-13 | 北京国双科技有限公司 | 异常信息的处理方法及装置 |
CN104503918B (zh) * | 2015-01-12 | 2017-12-19 | 北京国双科技有限公司 | 异常信息的处理方法及装置 |
CN105871574B (zh) * | 2015-01-21 | 2019-02-26 | 中国移动通信集团浙江有限公司 | 一种基于软件开发工具包监控日志的方法、装置及系统 |
CN104794054A (zh) * | 2015-04-22 | 2015-07-22 | 惠州Tcl移动通信有限公司 | 一种log信息实时获取并上传的方法、系统及移动终端 |
CN104809030A (zh) * | 2015-05-19 | 2015-07-29 | 上海斐讯数据通信技术有限公司 | 一种基于Android的异常处理系统及处理方法 |
CN104901955B (zh) | 2015-05-20 | 2017-09-26 | 腾讯科技(深圳)有限公司 | 一种预警方法、装置及处理服务器 |
CN105005528B (zh) * | 2015-06-26 | 2018-07-24 | 浪潮(北京)电子信息产业有限公司 | 一种日志信息提取方法及装置 |
CN105159964B (zh) * | 2015-08-24 | 2019-06-21 | Oppo广东移动通信有限公司 | 一种日志监控方法及系统 |
CN105119752A (zh) * | 2015-09-08 | 2015-12-02 | 北京京东尚科信息技术有限公司 | 一种分布式日志采集方法、装置及系统 |
CN106533819B (zh) * | 2015-09-11 | 2021-02-05 | 北京奇虎科技有限公司 | 线上服务的错误监控方法、装置和系统 |
CN105610893A (zh) * | 2015-09-28 | 2016-05-25 | 浪潮(北京)电子信息产业有限公司 | 一种事件推送的方法及系统 |
CN106569934B (zh) * | 2015-10-13 | 2019-06-18 | 阿里巴巴集团控股有限公司 | 一种应用日志显示方法及装置 |
CN106649058B (zh) * | 2015-10-29 | 2020-01-07 | 北京国双科技有限公司 | 一种日志处理方法及装置 |
CN105490839B (zh) * | 2015-11-25 | 2018-11-27 | 山东中创软件商用中间件股份有限公司 | 一种网站数据安全的告警方法及装置 |
CN105608203B (zh) * | 2015-12-24 | 2019-09-17 | Tcl集团股份有限公司 | 一种基于Hadoop平台的物联网日志处理方法和装置 |
CN105760302A (zh) * | 2016-02-29 | 2016-07-13 | 浪潮软件集团有限公司 | 一种移动应用异常信息处理方法 |
CN107133240B (zh) * | 2016-02-29 | 2020-09-11 | 阿里巴巴集团控股有限公司 | 页面监控方法、装置及系统 |
CN105808411A (zh) * | 2016-03-08 | 2016-07-27 | 李小荣 | 一种通过社交应用对系统故障进行报警的方法和装置 |
CN105787288A (zh) * | 2016-05-11 | 2016-07-20 | 鼎泰生物科技(海南)有限公司 | 通过社交应用对血糖仪进行故障报警的方法和装置 |
CN106294041A (zh) * | 2016-07-22 | 2017-01-04 | 厦门美图移动科技有限公司 | 一种bug信息上报的方法、装置及移动终端 |
CN106528372B (zh) * | 2016-10-26 | 2020-03-24 | 珠海许继芝电网自动化有限公司 | 一种程序运行监视系统和方法 |
CN106452967B (zh) * | 2016-11-02 | 2019-09-10 | 四川秘无痕科技有限责任公司 | 一种针对飞信网络数据进行监控的方法 |
CN108021485A (zh) * | 2016-11-04 | 2018-05-11 | 北大方正集团有限公司 | 应用程序运行状态的监控方法及装置 |
CN108064054B (zh) * | 2016-11-09 | 2020-10-02 | 大唐移动通信设备有限公司 | 一种lte系统中的ftp文件传输监控方法及系统 |
CN108153643A (zh) * | 2016-12-02 | 2018-06-12 | 北京奇虎科技有限公司 | 日志监控系统及方法 |
CN106603520A (zh) * | 2016-12-08 | 2017-04-26 | 深圳Tcl数字技术有限公司 | 异常信息的拦截方法及装置 |
CN106844576B (zh) * | 2017-01-06 | 2020-10-13 | 北京蓝海讯通科技股份有限公司 | 一种异常检测方法、装置和监控设备 |
CN107066519B (zh) * | 2017-02-13 | 2021-07-06 | 创新先进技术有限公司 | 一种任务检测方法及装置 |
CN106897614A (zh) * | 2017-02-27 | 2017-06-27 | 郑州云海信息技术有限公司 | 一种ssr上主动防御日志告警方法 |
CN106874137A (zh) * | 2017-03-16 | 2017-06-20 | 深圳市茁壮网络股份有限公司 | 一种js引擎容错方法和装置 |
CN107193721B (zh) * | 2017-03-30 | 2020-10-16 | 武汉斗鱼网络科技有限公司 | 一种生成日志的方法和装置 |
CN107147628A (zh) * | 2017-04-27 | 2017-09-08 | 努比亚技术有限公司 | 一种数据处理装置及方法 |
CN107094100A (zh) * | 2017-05-19 | 2017-08-25 | 郑州云海信息技术有限公司 | 一种ssr上的客户端安全配置告警系统及方法 |
CN107301115B (zh) * | 2017-06-26 | 2020-12-18 | 中国铁道科学研究院电子计算技术研究所 | 应用程序异常监控和恢复方法及设备 |
CN107332703B (zh) * | 2017-06-28 | 2020-08-04 | 武汉斗鱼网络科技有限公司 | 一种多应用日志的查看方法及装置 |
CN107423194B (zh) * | 2017-06-30 | 2021-01-22 | 创新先进技术有限公司 | 前端异常告警处理方法、装置及系统 |
CN108268332A (zh) * | 2017-08-10 | 2018-07-10 | 广州神马移动信息科技有限公司 | 网页异常监控方法、设备及系统 |
CN109428779A (zh) * | 2017-08-29 | 2019-03-05 | 武汉安天信息技术有限责任公司 | 一种分布式业务的监控告警方法及装置 |
CN109558303B (zh) * | 2017-09-25 | 2023-02-28 | 阿里巴巴集团控股有限公司 | 一种应用行为分析方法、装置及电子设备 |
CN107608860B (zh) * | 2017-09-29 | 2021-04-23 | 郑州云海信息技术有限公司 | 一种错误日志分类存储的方法、装置、设备 |
CN107896170B (zh) * | 2017-11-08 | 2019-12-03 | 平安科技(深圳)有限公司 | 保险应用系统的监控方法及装置 |
CN108170551B (zh) * | 2018-01-03 | 2021-06-22 | 深圳壹账通智能科技有限公司 | 基于爬虫系统的前后端错误处理方法、服务器及存储介质 |
CN108241744A (zh) * | 2018-01-04 | 2018-07-03 | 北京奇艺世纪科技有限公司 | 一种日志读取方法和装置 |
CN110022221B (zh) * | 2018-01-08 | 2022-04-05 | 车伯乐(北京)信息科技有限公司 | 一种系统接口数据的监控方法、装置及系统 |
CN108228379B (zh) * | 2018-01-24 | 2021-11-05 | 远峰科技股份有限公司 | 日志统计方法、收集服务器、分布式服务器及汇总服务器 |
CN108418940A (zh) * | 2018-01-26 | 2018-08-17 | 厦门亿联网络技术股份有限公司 | 一种Voip话机的程序诊断方法 |
CN108536520A (zh) * | 2018-04-02 | 2018-09-14 | 郑州云海信息技术有限公司 | 一种基于告警提示的应用程序管控方法 |
CN109062762A (zh) * | 2018-07-26 | 2018-12-21 | 浙江数链科技有限公司 | 格式化日志推送方法及装置 |
CN110825560B (zh) * | 2018-08-10 | 2022-11-01 | 北京嘀嘀无限科技发展有限公司 | 执行错误处理方法、装置、设备及计算机可读存储介质 |
CN109359026A (zh) * | 2018-08-15 | 2019-02-19 | 中国平安人寿保险股份有限公司 | 日志上报方法、装置、电子设备及计算机可读存储介质 |
CN109460343A (zh) * | 2018-09-10 | 2019-03-12 | 平安科技(深圳)有限公司 | 基于日志的系统异常监控方法、装置、设备及存储介质 |
CN109284216A (zh) * | 2018-09-27 | 2019-01-29 | 深圳市佰仟金融服务有限公司 | 系统监控的方法及终端设备 |
CN109542737A (zh) * | 2018-09-29 | 2019-03-29 | 中国平安人寿保险股份有限公司 | 平台告警处理方法、装置、电子装置及存储介质 |
CN109408331A (zh) * | 2018-10-15 | 2019-03-01 | 四川长虹电器股份有限公司 | 基于用户个性化特征的日志报警系统 |
CN109472833A (zh) * | 2018-10-16 | 2019-03-15 | 深圳壹账通智能科技有限公司 | 一种从日志文件中提取图片的方法、存储介质和服务器 |
CN109600279A (zh) * | 2018-12-14 | 2019-04-09 | 平安城市建设科技(深圳)有限公司 | 基于日志流的动态监控方法、设备、存储介质及装置 |
CN109726091B (zh) * | 2018-12-28 | 2022-07-19 | 卓米私人有限公司 | 一种日志管理方法及相关装置 |
CN111666193B (zh) * | 2019-03-08 | 2024-01-30 | 阿里巴巴集团控股有限公司 | 基于实时日志解析的终端功能监控与测试的方法与系统 |
CN110209518A (zh) * | 2019-04-26 | 2019-09-06 | 福州慧校通教育信息技术有限公司 | 一种多数据源日志数据集中收集存储方法及装置 |
CN110362473B (zh) * | 2019-05-31 | 2023-07-11 | 口口相传(北京)网络技术有限公司 | 测试环境的优化方法及装置、存储介质、终端 |
CN112035311A (zh) * | 2019-06-04 | 2020-12-04 | 腾讯科技(深圳)有限公司 | 一种程序逻辑监控方法及装置 |
CN110263008B (zh) * | 2019-06-20 | 2022-02-01 | 江苏满运软件科技有限公司 | 终端离线日志管理系统、方法、设备及存储介质 |
CN112152823B (zh) * | 2019-06-26 | 2022-09-02 | 北京易真学思教育科技有限公司 | 网站运行错误监控方法、装置及计算机存储介质 |
CN110399405A (zh) * | 2019-07-26 | 2019-11-01 | 广州虎牙科技有限公司 | 日志报警方法、装置、系统及存储介质 |
CN110764977B (zh) * | 2019-09-27 | 2023-11-10 | 赛诺贝斯(北京)营销技术股份有限公司 | 一种实现系统安全的报警方法和装置 |
CN111061609A (zh) * | 2019-12-03 | 2020-04-24 | 广州西麦科技股份有限公司 | 一种日志监控方法及系统 |
CN111107080B (zh) * | 2019-12-17 | 2022-06-14 | 政采云有限公司 | 一种错误信息推送方法、装置、设备及可读存储介质 |
CN111124734A (zh) * | 2019-12-25 | 2020-05-08 | 北京格林威尔科技发展有限公司 | 一种对脚本运行过程中的异常处理方法及装置 |
CN111245646A (zh) * | 2019-12-31 | 2020-06-05 | 苏州浪潮智能科技有限公司 | 一种基于Netconsole的应用日志监测方法及系统 |
CN111290918B (zh) * | 2020-02-26 | 2022-12-27 | 苏州浪潮智能科技有限公司 | 服务器运行状态监控方法、装置及计算机可读存储介质 |
CN113448827A (zh) * | 2020-03-26 | 2021-09-28 | 北京沃东天骏信息技术有限公司 | 一种测试数据的处理方法和装置 |
CN111563016B (zh) * | 2020-04-27 | 2022-08-23 | 深圳平安医疗健康科技服务有限公司 | 日志采集分析方法、装置、计算机系统及可读存储介质 |
CN111796955B (zh) * | 2020-05-28 | 2024-05-14 | 中国建设银行股份有限公司 | 故障根源定位方法、系统、装置及存储介质 |
CN111786814B (zh) * | 2020-06-05 | 2024-05-28 | 腾讯科技(深圳)有限公司 | 一种日志处理方法和装置 |
CN113778726A (zh) * | 2020-06-09 | 2021-12-10 | 武汉斗鱼网络科技有限公司 | 一种错误信息处理方法、装置、服务器和存储介质 |
CN111897787A (zh) * | 2020-06-17 | 2020-11-06 | 航天信息股份有限公司 | 一种面向业务逻辑实现日志输出的方法及装置 |
CN111935082B (zh) * | 2020-06-28 | 2022-09-09 | 新浪网技术(中国)有限公司 | 一种网络威胁信息关联分析系统及方法 |
CN112422345A (zh) * | 2020-11-18 | 2021-02-26 | 青岛海尔科技有限公司 | 日志传输方法及装置、存储介质、电子装置 |
CN112433876A (zh) * | 2020-11-23 | 2021-03-02 | 中国建设银行股份有限公司 | 一种作业错误信息处理方法、装置和存储介质 |
CN112749064A (zh) * | 2021-01-21 | 2021-05-04 | 北京明略昭辉科技有限公司 | 一种软件应用服务故障预测及故障自愈的方法及系统 |
CN112925714A (zh) * | 2021-03-09 | 2021-06-08 | 携程旅游网络技术(上海)有限公司 | 应用程序的监测方法及系统、电子设备及存储介质 |
CN112988443B (zh) * | 2021-03-16 | 2023-01-10 | 上海哔哩哔哩科技有限公司 | 业务异常的处理方法及装置 |
CN113256174A (zh) * | 2021-06-30 | 2021-08-13 | 天聚地合(苏州)数据股份有限公司 | 异常订单处理方法、装置、存储介质及设备 |
CN113656247A (zh) * | 2021-08-16 | 2021-11-16 | 北京奇艺世纪科技有限公司 | 一种服务监控方法、装置、电子设备及可读存储介质 |
CN113778800B (zh) * | 2021-09-14 | 2023-08-18 | 上海绚显科技有限公司 | 一种报错信息处理方法、装置、系统、设备及存储介质 |
CN114915488A (zh) * | 2022-06-15 | 2022-08-16 | 中国联合网络通信集团有限公司 | 流计算监控方法和设备 |
CN116821837A (zh) * | 2023-08-31 | 2023-09-29 | 北京中科心研科技有限公司 | 异常日志的主动报送方法、装置、电子设备及介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1492330A (zh) * | 2002-10-24 | 2004-04-28 | 华为技术有限公司 | 通用Windows程序运行日志信息记录方法 |
CN1677931A (zh) * | 2004-04-02 | 2005-10-05 | 鸿富锦精密工业(深圳)有限公司 | 网络日志数据管理系统及方法 |
CN102594598A (zh) * | 2012-02-16 | 2012-07-18 | 浪潮(北京)电子信息产业有限公司 | 一种日志管理系统及其实现方法 |
CN102684934A (zh) * | 2011-03-17 | 2012-09-19 | 阿里巴巴集团控股有限公司 | 监控web应用程序性能的方法、系统和web服务器 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100555240C (zh) * | 2007-01-16 | 2009-10-28 | 国际商业机器公司 | 用于诊断应用程序的方法和系统 |
CN101408861A (zh) * | 2007-10-11 | 2009-04-15 | 鸿富锦精密工业(深圳)有限公司 | 应用程序实时监控系统及方法 |
-
2012
- 2012-10-29 CN CN201210421115.9A patent/CN102981943B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1492330A (zh) * | 2002-10-24 | 2004-04-28 | 华为技术有限公司 | 通用Windows程序运行日志信息记录方法 |
CN1677931A (zh) * | 2004-04-02 | 2005-10-05 | 鸿富锦精密工业(深圳)有限公司 | 网络日志数据管理系统及方法 |
CN102684934A (zh) * | 2011-03-17 | 2012-09-19 | 阿里巴巴集团控股有限公司 | 监控web应用程序性能的方法、系统和web服务器 |
CN102594598A (zh) * | 2012-02-16 | 2012-07-18 | 浪潮(北京)电子信息产业有限公司 | 一种日志管理系统及其实现方法 |
Also Published As
Publication number | Publication date |
---|---|
CN102981943A (zh) | 2013-03-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102981943B (zh) | 监控应用日志的方法及系统 | |
US11379275B2 (en) | System and method for tagging and tracking events of an application | |
CN105159964B (zh) | 一种日志监控方法及系统 | |
WO2019223062A1 (zh) | 系统异常的处理方法和系统 | |
CN110209518A (zh) | 一种多数据源日志数据集中收集存储方法及装置 | |
CN110224865A (zh) | 一种基于流式处理的日志告警系统 | |
CN110347716A (zh) | 日志数据处理方法、装置、终端及存储介质 | |
CN102143507A (zh) | 一种业务质量监测方法、系统、以及分析方法和系统 | |
CN105743730A (zh) | 为移动终端的网页服务提供实时监控的方法及其系统 | |
CN105323640A (zh) | 一种基于互联网实现智能电视售后服务的方法、系统和设备 | |
CN103401698A (zh) | 用于服务器集群运算中对服务器状况报警的监控系统 | |
CN105119762A (zh) | 云平台基于日志实现交易回放和重做的系统及方法 | |
CN112395156A (zh) | 故障的告警方法和装置、存储介质和电子设备 | |
CN101431434A (zh) | 基于wap的内容监控及封堵系统和方法 | |
CN101925039A (zh) | 计费话单的预警方法及装置 | |
CN109446042B (zh) | 一种用于智能用电设备的日志管理方法及系统 | |
CN112232881A (zh) | 一种数据检测方法、装置、电子设备及存储介质 | |
CN110888985A (zh) | 一种报警信息处理方法、装置、电子设备及存储介质 | |
CN111143185A (zh) | 一种基于日志的故障分析方法及装置 | |
CN110225109A (zh) | 一种多队列的数据传输方法 | |
CN107820270B (zh) | 一种基于gsm-r网络的gprs接口监测系统 | |
CN111666193A (zh) | 基于实时日志解析的终端功能监控与测试的方法与系统 | |
CN108964957B (zh) | 一种数据通信业务质量监控的方法及大数据系统 | |
KR101288535B1 (ko) | 통신 시스템 모니터링 방법 및 이를 위한 장치 | |
CN101673472A (zh) | 监控运营系统的方法、装置及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |