CN102681931A - 一种日志和异常探针的实现方法 - Google Patents
一种日志和异常探针的实现方法 Download PDFInfo
- Publication number
- CN102681931A CN102681931A CN2012101493670A CN201210149367A CN102681931A CN 102681931 A CN102681931 A CN 102681931A CN 2012101493670 A CN2012101493670 A CN 2012101493670A CN 201210149367 A CN201210149367 A CN 201210149367A CN 102681931 A CN102681931 A CN 102681931A
- Authority
- CN
- China
- Prior art keywords
- daily record
- ftp server
- abnormal
- unusual
- probe system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明涉及一种日志和异常探针的实现方法，其主要技术特点是：包括以下步骤：⑴日志和异常探针系统以迭代服务器的方式顺序接收、处理各个子系统发来的消息；⑵对接收到的消息类型进行判断，如果收到的是日志或异常数据，则会将日志或异常信息存储在日志文件或异常文件中；⑶如果收到的上传日志或异常消息，则将日志文件或异常文件中的数据上传给客户端的ftp服务器。本发明通过日志和异常探针记录系统的主要运作情况和程序运行时出现的异常，用户通过查询日志文件，可以了解设备的一些重大操作，用户通过异常探针可以详细的了解整个异常发生的过程，方便了嵌入式系统的开发、调试与维护，为故障定位提供简单、可靠的解决方案。
Description
技术领域
本发明属于嵌入式技术领域,特别涉及一种日志和异常探针的实现方法。
背景技术
所谓日志是指系统所指定对象的某些操作和其操作结果按时间有序的集合。每个日志文件由日志记录组成，每条日志记录描述了一次单独的系统事件。通常情况下，系统日志是用户可以直接阅读的文本文件，其中包含了一个时间戳和一个信息或者子系统所特有的其他信息。日志文件为系统的相关活动记录必要的、有价值的信息，这对系统监控、查询、报表和安全审计是十分重要的。在Windows系统中日志主要包括应用程序、安全、系统等几个部分，其记录着各种系统服务的启动、运行、关闭等信息。在Linux系统中，有三个主要的日志子系统：连接时间日志、进程统计日志、错误日志。异常是指程序在运行时出现的错误，这些异常有的很严重，有的则较轻。
由于嵌入式系统开发过程中，存在难于调试、故障发生后定位原因也比较困难等问题，而且传统的日志和异常探针处理方法复杂、可靠性差。
发明内容
本发明的目的在于克服现有技术的不足，提供一种设计合理、处理方法简单可靠的日志和异常探针的实现方法。
本发明解决其技术问题是采取以下技术方案实现的：
一种日志和异常探针的实现方法，包括以下步骤：
⑴日志和异常探针系统以迭代服务器的方式顺序接收、处理各个子系统发来的消息；
⑵对接收到的消息类型进行判断，如果收到的是日志或异常数据，则会将日志或异常信息存储在日志文件或异常文件中；
⑶如果收到的上传日志或异常消息，则将日志文件或异常文件中的数据上传给客户端的ftp服务器。
而且，所述步骤⑵日志或异常信息的存储方法为：日志和异常信息分别存储在两个文件中，其中每条日志或者异常的记录大小是固定的，按照时间排列的并采用循环存储方式以二进制文件形式存储。
而且，所述日志文件的存储格式为：事件ID、时间和事件描述信息；所述的异常文件的存储格式为：所在文件、所在行、时间、变量值和原因码。
而且，所述步骤⑶日志或异常文件上传的方法是根据命令参数得知要上传日志文件、还是异常文件，并通过命令参数中的ftp服务器端的ip、端口、用户名、密码与ftp服务器建立联系，上传日志或异常数据。
而且，所述的日志或异常文件上传方法的具体步骤包括：
⑴日志和异常探针系统从命令中获取ftp服务器ip、端口号，并与ftp服务器建立命令通道，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑵日志和异常探针系统以用户名、密码为参数，向ftp服务器发送命令USER、PASS，登录到ftp服务器，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑶日志和异常探针系统向ftp服务器发送命令TYPE I，表示传送的文件类型为二进制文件，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑷日志和异常探针系统向ftp服务器发送命令STOR，表示要上传文件，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑸日志和异常探针系统向ftp服务器发送命令PASV，表示工作在被动方式，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑹日志和异常探针系统等待ftp服务器发来的响应，响应中包括ftp服务器接收数据的所用的ip和端口号，日志和异常探针系统使用ftp服务器传来的ip和端口号建立数据通道，向ftp服务器发送日志/异常数据；
⑺当日志或异常数据发送完后，日志和异常探针系统向ftp服务器发送命令QUIT，退出登录；
⑻如果在上传时，出现了断点情况，则日志和异常探针系统将终止上传，显示上传失败。
而且，所述的日志文件或异常文件存储在FLASH中。
本发明的优点和积极效果是：
本发明通过日志和异常探针系统记录系统的主要运作情况和程序运行时出现的异常。用户通过查询日志文件，可以了解设备的一些重大操作。日志需要存储诸如系统重启、用户修改配置等重要信息，数据量相对小些。异常探针则在程序发生异常时记录异常发生的时间、异常所在的文件、行数、原因码、变量值，用户通过异常探针可以详细的了解整个异常发生的过程。方便了嵌入式系统的开发、调试与维护，为故障定位提供简单、可靠的解决方案。
附图说明
图1是本发明的处理流程图；
图2是日志和异常的存储状态示意图；
图3是日志、异常文件上传流程图。
具体实施方式
以下结合附图对本发明做进一步详述：
一种日志和异常探针的实现方法，包括日志和异常收集的收集、日志和异常的存储以及日志和异常上传。通常情况下，日志和异常探针系统以消息的方式接收各个系统发来的日志和异常数据，然后将这些数据存储在flash中，最后在接收到上传命令后，将flash中的日志和异常信息上传给用户端的ftp服务器。
日志和异常信息存储在flash文件系统中，即使在设备断电时这些信息也能够保存起来。由于嵌入式设备的存储空间有限，不可能记录所有系统的运作日志，因此，日志仅记录一些重要、有用的日志信息，如：上电启动、复位、配置变更、版本下载、boot升级等信息。
日志文件的存储格式为：[事件ID 时间 事件描述信息]
其中：
事件ID：主要是标记事件的ID号。
时间：主要是记录发生的时间，记录从1970年以来经历的秒数。
事件描述信息：主要是说明发生这个事件的状态、原因、成功等情况。用户也可以根据具体情况，进行一些说明性的调整。
日志文件的存储格式如表1所示。
表1日志的存储格式
异常文件的存储格式如下：
[所在文件 所在行 时间 变量值 原因码]
其中：
所在文件：表示异常发生所在的文件；
所在行：记录异常发生的在文件的第几行；
时间：异常发生的时间，记录从1970年以来经历的秒数；
变量值：记录异常发生时的变量值，这些变量的选取，是由用户自己确定的。
原因码：系统对异常原因进行统一定义，一种原因对应一个码值，原因码的位置就是添加发生异常时的原因的码值。这些原因码是由用户自己定义的。
异常文件的存储格式如表2所示。
表2异常的存储格式
一种日志和异常探针的实现方法，如图1所示，包括以下步骤：
1、日志和异常探针系统以迭代服务器的方式顺序接收、处理各个子系统发来的消息。
2、对接收到的消息类型进行判断，如果收到的是日志或异常数据，则会将日志或异常信息存储在日志文件或异常文件中。
在本步骤中，日志或异常信息的存储方法为：日志和异常信息分别存储在两个文件中，按照结构体形式存储为二进制文件，每条日志或者异常的记录大小是固定的，并且是按照时间排列的，采用循环存储方式，当记录超过10000条时，新的记录会覆盖掉第一条记录，也就是最老的那条记录。日志和异常的存储过程如图2所示。
3、如果收到的上传日志或异常消息，则将日志文件或异常文件中的数据上传给客户端的ftp服务器。
在本步骤中，日志和异常探针系统根据命令参数得知要上传日志文件、还是异常文件，并通过命令参数中的ftp服务器端的ip、端口、用户名、密码与ftp服务器建立联系，上传日志或异常数据。
日志和异常探针上传处理方法，如图3所示，包括以下步骤：
（1）日志和异常探针系统从命令中获取ftp服务器i p、端口号，并与ftp服务器建立命令通道，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
（2）日志和异常探针系统以用户名、密码为参数，向ftp服务器发送命令USER、PASS，登录到ftp服务器，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
（3）日志和异常探针系统向ftp服务器发送命令TYPE I，表示传送的文件类型为二进制文件，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
（4）日志和异常探针系统向ftp服务器发送命令STOR，表示要上传文件，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
（5）日志和异常探针系统向ftp服务器发送命令PASV，表示工作在被动方式，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
（6）日志和异常探针系统等待ftp服务器发来的响应，响应中包括ftp服务器接收数据的所用的ip和端口号，日志和异常探针系统使用ftp服务器传来的ip和端口号建立数据通道，向ftp服务器发送日志/异常数据；
（7）当日志或异常数据发送完后，日志和异常探针系统向ftp服务器发送命令QUIT，退出登录；
（8）如果在上传时，出现了断点情况，则日志和异常探针系统将终止上传，显示上传失败。
需要强调的是，本发明所述的实施例是说明性的，而不是限定性的，因此本发明并不限于具体实施方式中所述的实施例，凡是由本领域技术人员根据本发明的技术方案得出的其他实施方式，同样属于本发明保护的范围。
Claims (6)
1.一种日志和异常探针的实现方法，其特征在于：包括以下步骤：
⑴日志和异常探针系统以迭代服务器的方式顺序接收、处理各个子系统发来的消息；
⑵对接收到的消息类型进行判断，如果收到的是日志或异常数据，则会将日志或异常信息存储在日志文件或异常文件中；
⑶如果收到的上传日志或异常消息，则将日志文件或异常文件中的数据上传给客户端的ftp服务器。
2.根据权利要求1所述的一种日志和异常探针的实现方法，其特征在于：所述步骤⑵日志或异常信息的存储方法为：日志和异常信息分别存储在两个文件中，其中每条日志或者异常的记录大小是固定的，按照时间排列的并采用循环存储方式以二进制文件形式存储。
3.根据权利要求2所述的一种日志和异常探针的实现方法，其特征在于：所述日志文件的存储格式为：事件ID、时间和事件描述信息；所述的异常文件的存储格式为：所在文件、所在行、时间、变量值和原因码。
4.根据权利要求1所述的一种日志和异常探针的实现方法，其特征在于：所述步骤⑶日志或异常文件上传的方法是根据命令参数得知要上传日志文件、还是异常文件，并通过命令参数中的ftp服务器端的ip、端口、用户名、密码与ftp服务器建立联系，上传日志或异常数据。
5.根据权利要求4所述的一种日志和异常探针的实现方法，其特征在于：所述的日志或异常文件上传方法的具体步骤包括：
⑴日志和异常探针系统从命令中获取ftp服务器ip、端口号，并与ftp服务器建立命令通道，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑵日志和异常探针系统以用户名、密码为参数，向ftp服务器发送命令USER、PASS，登录到ftp服务器，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑶日志和异常探针系统向ftp服务器发送命令TYPE I，表示传送的文件类型为二进制文件，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑷日志和异常探针系统向ftp服务器发送命令STOR，表示要上传文件，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑸日志和异常探针系统向ftp服务器发送命令PASV，表示工作在被动方式，ftp服务器响应成功，则进行下一步，否则日志和异常探针系统显示建链失败；
⑹日志和异常探针系统等待ftp服务器发来的响应，响应中包括ftp服务器接收数据的所用的ip和端口号，日志和异常探针系统使用ftp服务器传来的ip和端口号建立数据通道，向ftp服务器发送日志/异常数据；
⑺当日志或异常数据发送完后，日志和异常探针系统向ftp服务器发送命令QUIT，退出登录；
⑻如果在上传时，出现了断点情况，则日志和异常探针系统将终止上传，显示上传失败。
6.根据权利要求1至5任一项所述的一种日志和异常探针的实现方法，其特征在于：所述的日志文件或异常文件存储在FLASH中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2012101493670A CN102681931A (zh) | 2012-05-15 | 2012-05-15 | 一种日志和异常探针的实现方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN2012101493670A CN102681931A (zh) | 2012-05-15 | 2012-05-15 | 一种日志和异常探针的实现方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN102681931A true CN102681931A (zh) | 2012-09-19 |
Family
ID=46813896
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN2012101493670A Pending CN102681931A (zh) | 2012-05-15 | 2012-05-15 | 一种日志和异常探针的实现方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN102681931A (zh) |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102981944A (zh) * | 2012-12-12 | 2013-03-20 | 青岛海信宽带多媒体技术有限公司 | 一种基于文件系统的日志存储方法 |
| CN103036720A (zh) * | 2012-12-13 | 2013-04-10 | 亚信联创科技（中国）有限公司 | 一种电信业务维护方法和系统 |
| CN106339303A (zh) * | 2016-08-23 | 2017-01-18 | 浪潮电子信息产业股份有限公司 | 一种运行日志异常分析方法 |
| CN108600007A (zh) * | 2018-04-24 | 2018-09-28 | 山东乾云启创信息科技股份有限公司 | 一种云平台责任追溯方法和系统 |
| CN110825601A (zh) * | 2019-10-29 | 2020-02-21 | 厦门亿联网络技术股份有限公司 | 一种嵌入式设备异常场景下的现场保存方法及装置 |
| CN111367750A (zh) * | 2018-12-26 | 2020-07-03 | 阿里巴巴集团控股有限公司 | 一种异常处理方法、装置及其设备 |
| CN113010481A (zh) * | 2021-03-18 | 2021-06-22 | 成都欧珀通信科技有限公司 | 文件捕获方法、装置、终端和存储介质 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1492330A (zh) * | 2002-10-24 | 2004-04-28 | 华为技术有限公司 | 通用Windows程序运行日志信息记录方法 |
| CN1949182A (zh) * | 2005-10-14 | 2007-04-18 | 戴尔产品有限公司 | 用于将可恢复的错误记入日志的系统和方法 |
| CN101969386A (zh) * | 2010-11-09 | 2011-02-09 | 道有道(北京)科技有限公司 | 一种日志采集装置和日志采集方法 |
-
2012
- 2012-05-15 CN CN2012101493670A patent/CN102681931A/zh active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1492330A (zh) * | 2002-10-24 | 2004-04-28 | 华为技术有限公司 | 通用Windows程序运行日志信息记录方法 |
| CN1949182A (zh) * | 2005-10-14 | 2007-04-18 | 戴尔产品有限公司 | 用于将可恢复的错误记入日志的系统和方法 |
| CN101969386A (zh) * | 2010-11-09 | 2011-02-09 | 道有道(北京)科技有限公司 | 一种日志采集装置和日志采集方法 |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102981944A (zh) * | 2012-12-12 | 2013-03-20 | 青岛海信宽带多媒体技术有限公司 | 一种基于文件系统的日志存储方法 |
| CN102981944B (zh) * | 2012-12-12 | 2016-04-20 | 青岛海信宽带多媒体技术有限公司 | 一种基于文件系统的日志存储方法 |
| CN103036720A (zh) * | 2012-12-13 | 2013-04-10 | 亚信联创科技（中国）有限公司 | 一种电信业务维护方法和系统 |
| CN106339303A (zh) * | 2016-08-23 | 2017-01-18 | 浪潮电子信息产业股份有限公司 | 一种运行日志异常分析方法 |
| CN108600007A (zh) * | 2018-04-24 | 2018-09-28 | 山东乾云启创信息科技股份有限公司 | 一种云平台责任追溯方法和系统 |
| CN108600007B (zh) * | 2018-04-24 | 2021-07-23 | 山东乾云启创信息科技股份有限公司 | 一种云平台责任追溯方法和系统 |
| CN111367750A (zh) * | 2018-12-26 | 2020-07-03 | 阿里巴巴集团控股有限公司 | 一种异常处理方法、装置及其设备 |
| CN111367750B (zh) * | 2018-12-26 | 2023-06-20 | 阿里巴巴集团控股有限公司 | 一种异常处理方法、装置及其设备 |
| CN110825601A (zh) * | 2019-10-29 | 2020-02-21 | 厦门亿联网络技术股份有限公司 | 一种嵌入式设备异常场景下的现场保存方法及装置 |
| CN113010481A (zh) * | 2021-03-18 | 2021-06-22 | 成都欧珀通信科技有限公司 | 文件捕获方法、装置、终端和存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN102681931A (zh) | 一种日志和异常探针的实现方法 | |
| US10649838B2 (en) | Automatic correlation of dynamic system events within computing devices | |
| CN107220142B (zh) | 执行数据恢复操作的方法及装置 | |
| CN104584006B (zh) | 对消息传递上的附件的去重复以及对附件的自动修复 | |
| KR101983208B1 (ko) | 데이터 관리 방법, 노드, 그리고 데이터베이스 클러스터를 위한 시스템 | |
| CN101136783A (zh) | 一种网管系统配置数据的备份、恢复方法及装置 | |
| Zhou et al. | Dump and analysis of android volatile memory on wechat | |
| CN111858146B (zh) | 用于恢复数据的方法、设备和计算机程序产品 | |
| CN111694749A (zh) | 接口自动测试方法、装置、计算机设备及可读存储介质 | |
| US9858152B2 (en) | Collaborative information source recovery | |
| CN108009427B (zh) | 一种针对数据库漏洞规则的快速检索方法 | |
| CN110958292A (zh) | 文件上传方法、电子装置、计算机设备及存储介质 | |
| US20140379649A1 (en) | Distributed storage system and file synchronization method | |
| CN101763294A (zh) | 根据时间段查看和备份系统操作日志的方法 | |
| US20160205118A1 (en) | Cyber black box system and method thereof | |
| CN104007942A (zh) | 日志的打印控制方法和打印控制装置 | |
| CN109918221B (zh) | 一种硬盘报错解析方法、系统、终端及存储介质 | |
| CN105573872A (zh) | 数据存储系统的硬盘维护方法和装置 | |
| CN103778024A (zh) | 服务器系统及其讯息处理方法 | |
| CN107770153B (zh) | 一种基于协同安全防护模型的电力信息通用采集系统 | |
| CN104734881A (zh) | 一种日志和异常探针的实现方法 | |
| CN104572339A (zh) | 基于分布式文件系统的数据备份还原系统及方法 | |
| US10754748B2 (en) | System and method for constructing extensible event log with javascript object notation (JSON) encoded payload data | |
| CN107819595B (zh) | 一种网络切片管理装置 | |
| US8595243B1 (en) | Systems and methods for deduplicating archived data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120919 |