CN102480375A - 日志信息处理方法 - Google Patents
日志信息处理方法 Download PDFInfo
- Publication number
- CN102480375A CN102480375A CN201010559541XA CN201010559541A CN102480375A CN 102480375 A CN102480375 A CN 102480375A CN 201010559541X A CN201010559541X A CN 201010559541XA CN 201010559541 A CN201010559541 A CN 201010559541A CN 102480375 A CN102480375 A CN 102480375A
- Authority
- CN
- China
- Prior art keywords
- log information
- processing unit
- network equipment
- information processing
- stored
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Debugging And Monitoring (AREA)
Abstract
本发明公开了一种日志信息处理方法及装置,用以解决现有技术中存在的在链路不连通的情况下将日志信息存储在缓存区内可能导致日志信息丢失的问题。本发明公开的该方法包括步骤:日志信息处理装置在将日志信息存储到用于存储将要发送的日志信息的缓存区前,判断所述日志信息处理装置与网络侧设备之间的链路是否连通;并在判断为否时,将所述日志信息存储到所述日志信息处理装置的指定存储空间中;以及在确定所述链路重新连通后,将存储在所述存储空间中的所述日志信息发送给所述网络侧设备。
Description
技术领域
本发明涉及通信技术领域,尤其涉及一种日志信息处理方法及装置。
背景技术
随着信息技术(IT,Information Technology)的发展,IT终端设备(以下简称终端设备)逐渐成为人们日常工作和生活中必不可少的工具,为了获知终端设备的工作状态,人们可以采用不同的方法,比如,可以通过对路由器、集线器等设备指示灯的观察来确定其工作状态,通过对手机、电脑等设备显示屏的观察来确定其工作状态等,但针对一些在特殊环境下(比如比较恶劣的不适宜于人们长期驻留的地方等)所使用的终端设备,则需要远程确定其工作状态,一般地,此类终端设备可以针对自身发生的一些事件生成日志信息(比如门禁终端设备根据工作人员的刷卡事件生成日志信息),并将日志信息上报给日志信息处理装置,由日志信息处理装置将日志信息发送给网络侧设备。
在现有技术中,当日志信息处理装置接收到终端设备发来的日志信息时,一般会将接收到的日志信息存储到用于存储将要发送的日志信息的缓存区内,以便随时能将日志信息发送给网络侧设备,然而,由于缓存区内存储的任一日志信息会在发送了该日志信息后就被删除,因此,若此时发生了一些异常情况,比如日志信息处理装置与网络侧设备之间的链路断开,而日志信息处理装置仍然通过该断开的链路向网络侧设备发送缓存区内的日志信息,则可能发生日志信息丢失的问题,特别地,当日志信息处理装置突然断电时,缓存区内的日志信息会在日志信息处理装置重新通电后被清空,因此也会导致日志信息丢失。
发明内容
本发明实施例提供一种日志信息处理方法及装置,用以解决现有技术中存在的在链路不连通的情况下将日志信息存储在缓存区内可能导致日志信息丢失的问题。
本发明实施例采用以下技术方案:
一种日志信息处理方法,包括:
日志信息处理装置在将日志信息存储到用于存储将要发送的日志信息的缓存区前,判断所述日志信息处理装置与网络侧设备之间的链路是否连通;并在判断为否时,将所述日志信息存储到所述日志信息处理装置的指定存储空间中;以及在确定所述链路重新连通后,将存储在所述存储空间中的所述日志信息发送给所述网络侧设备。
较佳地,所述日志信息处理装置将所述日志信息发送给所述网络侧设备后,还包括:所述日志信息处理装置接收所述网络侧设备发送的响应消息,所述响应消息为所述网络侧设备在接收到所述日志信息后反馈的包含所述日志信息的标识的消息;以及比较存储在所述存储空间中的所述日志信息的标识与所述响应消息中包含的日志信息的标识是否一致;在比较结果为是时,所述日志信息处理装置确定所述网络侧设备接收到了所述日志信息,否则,确定所述网络侧设备未接收到所述日志信息。
较佳地,所述日志信息处理装置将所述日志信息存储到所述存储空间中时,还将所述缓存区中存储的日志信息复制到所述存储空间中。
较佳地,所述日志信息处理装置将所述缓存区中存储的日志信息复制到所述存储空间中后,还包括:所述日志信息处理装置删除所述缓存区中存储的日志信息。
较佳地,所述日志信息处理装置将所述日志信息发送给所述网络侧设备后,还包括:所述网络侧设备判断自身的存储空间中是否存在与所述日志信息对应一致的日志信息;在判断结果为是时,所述网络侧设备不对日志信息处理装置发送的所述日志信息进行存储;以及在判断结果为否时,所述网络侧设备存储日志信息处理装置发送的所述日志信息。
一种日志信息处理装置,包括:判断单元,用于在将日志信息存储到用于存储将要发送的日志信息的缓存区前,判断所述日志信息处理装置与网络侧设备之间的链路是否连通;存储单元,用于在判断单元得到的判断结果为否时,将所述日志信息存储到所述日志信息处理装置的指定存储空间中;链路确定单元,用于确定所述链路是否重新连通;发送单元,用于在链路确定单元确定所述链路重新连通后,将由存储单元存储在所述指定存储空间中的所述日志信息发送给网络侧设备。
较佳地,该装置还可以包括:接收单元,用于接收所述网络侧设备发送的响应消息,所述响应消息为所述网络侧设备在接收到发送单元发送的所述日志信息后反馈的包含所述日志信息的标识的消息;比较单元,用于比较存储在所述存储空间中的所述日志信息的标识与接收单元接收的响应消息中包含的日志信息的标识是否一致;确定单元,用于在比较单元比较结果为是时,确定所述网络侧设备接收到了所述日志信息,否则,确定所述网络侧设备未接收到所述日志信息。
较佳地,所述存储单元具体包括:存储模块,用于将所述日志信息存储到所述存储空间中;复制模块,用于在存储模块将所述日志信息存储到所述存储空间时,将所述缓存区中存储的日志信息复制到所述存储空间中。
较佳地,所述存储单元还可以包括:删除模块,用于在复制模块将所述缓存区中存储的日志信息复制到所述存储空间中后,删除所述缓存区中存储的日志信息。
本发明实施例的有益效果为:本发明实施例提供的方案通过日志信息处理装置在将日志信息存储到缓存区前,判断日志信息处理装置与网络侧设备之间的链路是否连通;并在判断为否时,将该日志信息存储到指定存储空间中;而后续在链路重新连通后,日志信息处理装置将存储在存储空间中的日志信息发送给网络侧设备,采用本发明实施例提供的方案,在日志信息处理装置与网络侧设备之间的链路不连通的情况下,日志信息处理装置不会再将日志信息存储到缓存区内,而是将其存储到指定存储空间中,因此避免了在日志信息处理装置与网络侧设备之间的链路不连通的情况下,直接将日志信息存储在缓存区时可能会导致日志信息丢失的问题,并且,由于将日志信息存储到了指定存储空间中,因此即使此时日志信息处理装置发生断电的情况,也不会因为该日志信息被存储到了缓存区内而发生日志信息丢失的问题。
附图说明
图1为本发明实施例提供的一种日志信息的处理方法的具体流程示意图;
图2a为本发明实施例提供的日志信息处理方法在实际中的应用环境示意图;
图2b为本发明实施例提供的日志信息处理方法在实际中的应用流程示意图;
图3为本发明实施例提供的一种日志信息的处理装置的具体结构示意图。
具体实施方式
为了解决现有技术中存在的在链路不连通的情况下将日志信息存储在缓存区内可能导致日志信息丢失的问题,本发明实施例提供了一种日志信息处理方案,通过在日志信息处理装置与网络侧设备之间的链路不连通的情况下,不再将日志信息存储到缓存区内,而是将其存储到指定存储空间中,从而日志信息处理装置在基于不连通的链路发送日志信息时,由于日志信息已被存储到存储空间中,因此不会发生丢失日志信息的问题,而当链路恢复连通后,日志信息处理装置能够继续向网络侧设备发送日志信息,从而保证了日志信息的完整性。
本发明实施例首先提供一种日志信息处理方法,该方法的具体流程示意图如图1所示,包括以下步骤:
步骤11,日志信息处理装置在将日志信息存储到用于存储将要发送的日志信息的缓存区前,判断日志信息处理装置与网络侧设备之间的链路是否连通;
步骤12,在判断为否时,将该日志信息存储到日志信息处理装置的指定存储空间中,在本步骤12中,还可以进一步地将缓存区中存储的所有日志信息复制到该指定存储空间中,以避免当前存储在缓存区中的日志信息发生丢失,而为了节约缓存区的存储空间,还可以考虑在将日志信息复制到指定存储空间后,删除缓存区中存储的所有日志信息;
步骤13,在确定链路重新连通后,日志信息处理装置将存储在存储空间中的该日志信息发送给网络侧设备;
步骤14,日志信息处理装置接收网络侧设备发送的响应消息,其中,该响应消息为网络侧设备在接收到该日志信息后反馈的包含日志信息的标识的消息;
步骤15,日志信息处理装置比较存储在指定存储空间中的该日志信息的标识与响应消息中包含的日志信息的标识是否一致;
步骤16,在比较结果为是时,日志信息处理装置确定网络侧设备接收到了该日志信息,否则,确定网络侧设备未接收到该日志信息。
本发明实施例提供的上述方法中的步骤14~16用以确认网络侧设备是否成功接收了日志信息,在实际应用中,若不考虑需确认网络侧设备是否成功接收了日志信息,则也可以不用执行步骤14~16。
此外,由于在现有技术中,当链路重新连通后,可能会出现日志处理装置重复向网络侧设备发送同一日志信息的情况,针对该情况,日志信息处理装置在向网络侧设备发送日志信息后,网络侧设备可以判断自身的存储空间中是否存在与日志信息处理装置发送的日志信息对应一致的日志信息;并在判断结果为是时,网络侧设备可以丢弃日志信息处理装置发送的该日志信息,不对其进行存储;而在判断结果为否时,才对日志信息处理装置发送的日志信息进行存储,从而避免重复存储同一日志信息会导致网络侧设备存储资源浪费的问题。
需要说明的是,在现有技术中,当日志信息处理装置与网络侧设备之间的链路重新连通后,日志信息处理装置是根据网络侧设备的请求被动地发送日志信息的,因此从上述链路重新连通直至日志信息处理装置被动发送日志信息之间会存在时间延迟(延迟的这段时间用于接收网络侧设备的请求并响应该请求),而在本发明实施例中,当日志信息处理装置检测到上述链路重新连通后,可以主动地向网络侧设备发送日志信息,因此避免了上述时间延迟,使得对日志信息的处理变得更具实时性;同时,由于采用本发明实施例提供的该方法能够避免上述链路不连通时发生的日志信息丢失的问题,因此能够保证网络侧设备接收到的日志信息的完整性,从而对于日志信息分析人员来说,本发明实施例提供的该方案具有十分重要的意义。
以下以本发明提供的该方案在实际中的应用为例,详细说明本发明实施例提供的上述方法的应用过程,在实际应用中,上述网络侧设备可以为如图2a所示的前置机,该前置机包含接收模块105,而日志信息处理装置则划分为如图2a所示的链路定时检测模块101,日志信息接收模块102,日志信息上传模块103,前端存储模块104和缓存区106,其中,链路定时检测模块101、日志信息接收模块102与日志信息上传模块103共同组成的单元可以成为日志信息上传策略单元,基于如图2a所示的系统,可以采用如图2b所示的步骤实施本发明实施例提供的上述方法:
步骤21,日志信息接收模块102接收终端设备生成并发送来的日志信息,同时,链路定时检测模块101可以周期性地或者连续地对日志信息处理装置与前置机之间的链路进行监测;
步骤22,链路定时检测模块101根据对链路的监测情况,判断当前链路是否为连通状态,若判断为是,执行步骤23,否则,执行步骤24,当链路定时检测模块101在判断当前链路是否为连通状态时,链路定时模块101可以向前置机发送握手消息,若前置机根据连续两次的握手消息所反馈的握手消息响应均超时,则可以判断当前链路为非连通状态,反之,若前置机根据连续两次的握手消息所反馈的握手消息响应均未超时,则可以判断当前链路为连通状态,其中,可以考虑发送握手消息的接口复用日志信息上传模块103上传日志信息的接口,以减小系统的复杂度;
步骤23,日志信息处理装置确定缓存区106中存储的日志信息的个数,若该个数为0,则可以直接通过日志信息上传模块103将日志信息接收模块102接收到的日志信息上传给前置机中的接收模块105,若该个数不为0,则可以通过日志信息上传模块103上传缓存区106中存储的日志信息,在日志信息上传模块103将日志信息上传给前置机后,可以继续执行步骤26,或者,也可以结束流程;
步骤24,日志信息处理装置确定缓存区106中存储的日志信息的个数,若该个数为0,则只需要将日志信息接收模块102接收到的日志信息存储到前端存储模块104中,而若该个数不为0,则在将日志信息接收模块102接收到的日志信息存储到前端存储模块104中的同时,还需要将缓存区106中存储的日志信息也复制到前端存储模块104中,同时将缓存区106中存储的日志信息进行删除,在完成将日志信息的存储后,执行步骤25;
步骤25,链路定时检测模块101到当前链路重新恢复为连通状态后,日志信息上传模块103从前端存储模块104中获取日志信息并发送给前置机中的接收模块105;
步骤26,前置机比较自身存储的日志信息中是否存在与接收模块105接收的日志信息对应一致的日志信息,在比较结果为否时,将接收模块105接收的日志信息进行存储,否则,丢弃接收模块105接收的日志信息,通过这样的方式,前置机中无需重复存储同一日志信息,节约了前置机的存储空间,此外,需要说明的是,为了使日志信息处理装置能够确认前置机是否成功接收了日志信息,在接收模块105接收到日志信息后,可以进一步执行步骤27;
步骤27,前置机向日志信息处理装置发送ACK消息,该消息中包含接收模块105接收的日志信息的流水号;
步骤28,日志信息处理装置判断ACK消息中包含的日志信息的流水号与向前置机发送的日志信息的流水号是否一致,在判断结果为是时,日志信息处理装置确认前置机成功接收了日志信息,则可以对日志信息处理装置中存储的该成功发送的日志信息进行删除,以节约日志信息处理装置的存储空间,并继续发送剩余的日志信息,直至确定所有的日志信息均发送完毕,而当判断结果为否时,确认前置机未成功接收日志信息,可以考虑重新向前置机发送该未能成功接收的日志信息,直至确定所有的日志信息均发送完毕,流程结束。
相应地,本发明实施例提供一种日志信息的处理装置,该装置的具体结构示意图如图3所示,包括以下功能单元:
判断单元31,用于在将日志信息存储到用于存储将要发送的日志信息的缓存区前,判断日志信息处理装置与网络侧设备之间的链路是否连通;
存储单元32,用于在判断单元31得到的判断结果为否时,将上述日志信息存储到日志信息处理装置的指定存储空间中,需要说明的是,为了避免缓存区内存储的其他日志信息的丢失,本发明实施例中,还可以由存储单元32将缓存区内存储的其他日志信息转移到指定存储空间中,为了实现这一功能,本发明实施例中可以将存储单元32划分为用于将上述日志信息存储到指定存储空间中的存储模块,以及用于在存储模块将日志信息存储到指定存储空间时,将缓存区中存储的日志信息复制到存储空间中的复制模块,考虑到节约日志信息处理装置的存储空间,该存储单元32还可以进一步包括删除模块,其用于在复制模块将缓存区中存储的日志信息复制到指定存储空间中后,删除缓存区中存储的日志信息;
链路确定单元33,用于确定日志信息处理装置与网络侧设备之间的链路是否重新连通;
发送单元34,用于在链路确定单元33确定链路重新连通后,将由存储单元32存储在指定存储空间中的日志信息发送给网络侧设备。
为了确认网络侧设备是否成功接收了日志信息,本发明实施例提供的该装置还可以进一步包括:
接收单元,用于接收网络侧设备发送的响应消息,其中,该响应消息为网络侧设备在接收到发送单元发送的日志信息后反馈的包含该日志信息的标识的消息;
比较单元,用于比较存储在存储空间中的日志信息的标识与接收单元接收的响应消息中包含的日志信息的标识是否一致;
确定单元,用于在比较单元得到的比较结果为是时,确定网络侧设备接收到了日志信息,则为了节省日志处理装置的存储空间,可以将该日志信息进行删除,而在比较单元得到的比较结果为否时,确定网络侧设备未接收到该日志信息,可以考虑重新向网络侧设备发送该日志信息。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (5)
1.一种日志信息处理方法,其特征在于,包括:
日志信息处理装置在将日志信息存储到用于存储将要发送的日志信息的缓存区前,判断所述日志信息处理装置与网络侧设备之间的链路是否连通;并
在判断为否时,将所述日志信息存储到所述日志信息处理装置的指定存储空间中;以及
在确定所述链路重新连通后,将存储在所述存储空间中的所述日志信息发送给所述网络侧设备。
2.如权利要求1所述的方法,其特征在于,所述日志信息处理装置将所述日志信息发送给所述网络侧设备后,还包括:
所述日志信息处理装置接收所述网络侧设备发送的响应消息,所述响应消息为所述网络侧设备在接收到所述日志信息后反馈的包含所述日志信息的标识的消息;以及
比较存储在所述存储空间中的所述日志信息的标识与所述响应消息中包含的日志信息的标识是否一致;
在比较结果为是时,所述日志信息处理装置确定所述网络侧设备接收到了所述日志信息,否则,确定所述网络侧设备未接收到所述日志信息。
3.如权利要求1或2所述的方法,其特征在于,所述日志信息处理装置将所述日志信息存储到所述存储空间中时,还将所述缓存区中存储的日志信息复制到所述存储空间中。
4.如权利要求3所述的方法,其特征在于,所述日志信息处理装置将所述缓存区中存储的日志信息复制到所述存储空间中后,还包括:
所述日志信息处理装置删除所述缓存区中存储的日志信息。
5.如权利要求1所述的方法,其特征在于,所述日志信息处理装置将所述日志信息发送给所述网络侧设备后,还包括:
所述网络侧设备判断自身的存储空间中是否存在与所述日志信息对应一致的日志信息;
在判断结果为是时,所述网络侧设备不对日志信息处理装置发送的所述日志信息进行存储;以及
在判断结果为否时,所述网络侧设备存储日志信息处理装置发送的所述日志信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010559541XA CN102480375A (zh) | 2010-11-23 | 2010-11-23 | 日志信息处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201010559541XA CN102480375A (zh) | 2010-11-23 | 2010-11-23 | 日志信息处理方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102480375A true CN102480375A (zh) | 2012-05-30 |
Family
ID=46092862
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201010559541XA Pending CN102480375A (zh) | 2010-11-23 | 2010-11-23 | 日志信息处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102480375A (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105516166A (zh) * | 2015-12-22 | 2016-04-20 | 北京奇虎科技有限公司 | 一种借用他人账户实现登录的方法及系统 |
CN109391694A (zh) * | 2018-10-26 | 2019-02-26 | 深圳壹账通智能科技有限公司 | 基于sftp的文件传输方法及相关设备 |
CN111711544A (zh) * | 2020-05-15 | 2020-09-25 | 北京奇艺世纪科技有限公司 | 链路拨测方法、装置、电子设备及存储介质 |
CN115037863A (zh) * | 2022-06-28 | 2022-09-09 | 广东电网有限责任公司 | 一种用于作业图像上传的配电网运维系统及方法 |
-
2010
- 2010-11-23 CN CN201010559541XA patent/CN102480375A/zh active Pending
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105516166A (zh) * | 2015-12-22 | 2016-04-20 | 北京奇虎科技有限公司 | 一种借用他人账户实现登录的方法及系统 |
CN105516166B (zh) * | 2015-12-22 | 2019-02-12 | 北京奇虎科技有限公司 | 一种借用他人账户实现登录的方法及系统 |
CN109391694A (zh) * | 2018-10-26 | 2019-02-26 | 深圳壹账通智能科技有限公司 | 基于sftp的文件传输方法及相关设备 |
CN109391694B (zh) * | 2018-10-26 | 2022-07-26 | 深圳壹账通智能科技有限公司 | 基于sftp的文件传输方法及相关设备 |
CN111711544A (zh) * | 2020-05-15 | 2020-09-25 | 北京奇艺世纪科技有限公司 | 链路拨测方法、装置、电子设备及存储介质 |
CN115037863A (zh) * | 2022-06-28 | 2022-09-09 | 广东电网有限责任公司 | 一种用于作业图像上传的配电网运维系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101826984A (zh) | 日志信息处理方法及装置 | |
CN101877604B (zh) | 一种传输文件的方法及系统 | |
CN106330414B (zh) | 一种报文传输方法及装置 | |
CN101489294B (zh) | 调整功率的方法、路由器和网络设备 | |
CN107979592B (zh) | 一种发送业务请求消息的方法及装置 | |
CN102209039B (zh) | 一种文件传输方法及设备 | |
CN102833119B (zh) | 双网冗余机制下实时数据接收同步处理的方法 | |
CN103139818A (zh) | 一种aos中保持长连接的方法、系统、aoe、aog及终端 | |
CN103746938A (zh) | 一种发送数据包的方法及装置 | |
CN103428037A (zh) | 一种探测用户在线的方法、设备及系统 | |
CN107528747B (zh) | 主从站通信状态的诊断方法和装置及计算机可读存储介质 | |
CN102480375A (zh) | 日志信息处理方法 | |
CN104579746A (zh) | 双链路传输控制方法及装置 | |
CN102387040A (zh) | 一种前置机保持高速稳定运行的方法及系统 | |
CN109194744B (zh) | 一种数据传输方法、装置、存储介质及监测设备 | |
CN104270452B (zh) | 一种远程医疗数据管理系统及其无线网络通信方法 | |
CN116668977A (zh) | 配电网安全信息管控方法与平台 | |
CN205283611U (zh) | 一种将移动端和服务器端消息信息进行同步的装置 | |
CN107257496A (zh) | 一种直播的控制方法、装置及移动终端 | |
CN101771686B (zh) | 一种通信方法和网络适配器 | |
KR101007408B1 (ko) | 데이터 공유 기반 데이터 전송 방법 및 시스템 | |
CN106230747B (zh) | 恢复tcp连接序列号的方法、装置及系统 | |
CN104660992A (zh) | 视频掉线重连系统和方法 | |
CN112615755B (zh) | 数据传输方法和系统 | |
CN111314408B (zh) | 一种基于通信层多数据项缓存任务的本地边缘计算和物联管理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120530 |