CN106777010B - 日志的提供方法、装置以及日志的获取方法、装置和系统 - Google Patents
日志的提供方法、装置以及日志的获取方法、装置和系统 Download PDFInfo
- Publication number
- CN106777010B CN106777010B CN201611116755.3A CN201611116755A CN106777010B CN 106777010 B CN106777010 B CN 106777010B CN 201611116755 A CN201611116755 A CN 201611116755A CN 106777010 B CN106777010 B CN 106777010B
- Authority
- CN
- China
- Prior art keywords
- log
- characteristic information
- service
- module
- concerned
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
- G06F16/1815—Journaling file systems
Abstract
本发明涉及一种日志的提供方法、装置以及日志的获取方法、装置和系统。所述日志的提供方法包括步骤:接收日志服务器发送的其关注业务的特征信息;根据所述特征信息确定本业务模块需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息,以使所述下游业务模块在收到所述第二特征信息之后向所述日志服务器发送与所述第二特征信息相关的第二日志。本发明大大提高了当前关注业务相关的日志的查找效率。
Description
技术领域
本发明涉及计算机技术领域,特别是涉及一种日志的提供方法、一种日志的提供装置、一种日志的获取方法、一种日志的获取装置和一种日志的获取系统。
背景技术
日志是指系统所指定对象的某些操作和其操作结果按时间有序的集合。每个日志文件由日志记录组成,每条日志记录描述了一次单独的系统事件。通常情况下,日志是用户可以直接阅读的文本文件,其中包含了一个时间戳和一个信息或者子系统所特有的其他信息。日志为服务器、工作站、防火墙和应用软件等IT(Information Technology,信息产业)资源相关活动记录必要的、有价值的信息,在软件开发和软件系统维护领域中占据着重要地位,人们通过它来分析定位问题,了解系统运行状态。
然而,对于复杂一点的系统,例如分布式系统中,一个业务往往由多个业务模块协作完成,同一个业务模块又同时完成多项业务,这时日志的数据量非常庞大,而且分析问题时往往只关注其中某一个业务的情况,传统技术中的方案很难在这么庞大的日志中快速找出当前关注业务相关的日志。
发明内容
基于此,有必要针对上述问题,提供一种日志的提供方法、装置以及日志的获取方法、装置和系统,能够快速找出当前关注业务相关的日志。
一种日志的提供方法,包括步骤:
接收日志服务器发送的其关注业务的特征信息;
根据所述特征信息确定本业务模块需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;
根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息,以使所述下游业务模块在收到所述第二特征信息之后向所述日志服务器发送与所述第二特征信息相关的第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
一种日志的提供装置,包括:
特征信息接收模块,用于接收日志服务器发送的其关注业务的特征信息;
第一日志发送模块,用于根据所述特征信息确定本业务模块需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;
第二特征信息发送模块,用于根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息,以使所述下游业务模块在收到所述第二特征信息之后向所述日志服务器发送与所述第二特征信息相关的第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
上述日志的提供方法和装置,当需要获取某一业务相关的日志时,日志服务器向关注业务的上游业务模块通知其所关注业务的特征信息,上游业务模块根据该特征信息从自身存储的大量日志中获取与该关注业务相关的日志并发送给日志服务器,另外,上游业务模块还获得其下游业务模块需关注的对象的特征信息,即下游业务模块中与该关注业务相关的对象的特征信息,下游业务模块根据其需关注的对象的特征信息获取与该业务相关的日志并发送给日志服务器,依次重复,那么日志服务器获得日志均是与当前关注业务相关的日志,大大提高了当前关注业务相关的日志的查找效率,并且由于获得的日志可以关联起来查看,所以也有效提高了调试和问题定位的效率。
一种日志的获取方法,包括步骤:
向关注业务的上游业务模块发送所述关注业务的特征信息,以使所述上游业务模块在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息;
从所述上游业务模块获取第一日志,所述第一日志为所述上游业务模块根据所述第一特征信息获取到的相关的日志;
从所述下游业务模块获取第二日志,所述第二日志为所述下游业务模块根据所述第二特征信息获取到的相关的日志;
根据所述第一日志和所述第二日志得到所述关注业务相关的日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
一种日志的获取装置,包括:
特征信息发送模块,用于向关注业务的上游业务模块发送所述关注业务的特征信息,以使所述上游业务模块在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息;
日志获取模块,用于从所述上游业务模块获取第一日志,所述第一日志为所述上游业务模块根据所述第一特征信息获取到的相关的日志;从所述下游业务模块获取第二日志,所述第二日志为所述下游业务模块根据所述第二特征信息获取到的相关的日志;根据所述第一日志和所述第二日志得到所述关注业务相关的日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
上述日志的获取方法和装置,当需要获取某一业务相关的日志时,日志服务器向关注业务的上游业务模块通知其所关注业务的特征信息,上游业务模块根据该特征信息从自身存储的大量日志中获取与该关注业务相关的日志并发送给日志服务器,另外,上游业务模块还获得其下游业务模块需关注的对象的特征信息,即下游业务模块中与该关注业务相关的对象的特征信息,下游业务模块根据其需关注的对象的特征信息获取与该业务相关的日志并发送给日志服务器,依次重复,那么日志服务器获得日志均是与当前关注业务相关的日志,大大提高了当前关注业务相关的日志的查找效率,并且由于获得的日志可以关联起来查看,所以也有效提高了调试和问题定位的效率。
一种日志的获取系统,包括:
日志服务器,用于向关注业务的上游业务模块发送所述关注业务的特征信息;根据第一日志和第二日志得到所述关注业务相关的日志;
上游业务模块,用于在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息;
下游业务模块,用于获得与所述第二特征信息相关的第二日志,向所述日志服务器发送所述第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
上述日志的获取系统,当需要获取某一业务相关的日志时,日志服务器向关注业务的上游业务模块通知其所关注业务的特征信息,上游业务模块根据该特征信息从自身存储的大量日志中获取与该关注业务相关的日志并发送给日志服务器,另外,上游业务模块还获得其下游业务模块需关注的对象的特征信息,即下游业务模块中与该关注业务相关的对象的特征信息,下游业务模块根据其需关注的对象的特征信息获取与该业务相关的日志并发送给日志服务器,依次重复,那么日志服务器获得日志均是与当前关注业务相关的日志,大大提高了当前关注业务相关的日志的查找效率,并且由于获得的日志可以关联起来查看,所以也有效提高了调试和问题定位的效率。
附图说明
图1为一实施例的日志的提供方法的流程示意图;
图2为一具体实施例的某一业务的业务流程的示意图;
图3为一具体实施例的不同业务中各个对象的特征类型和特征值的示意图;
图4为一实施例的日志的提供装置的结构示意图;
图5为一实施例的日志的获取方法的流程示意图;
图6为一实施例的日志的获取装置的结构示意图;
图7为一实施例的日志的获取系统的结构示意图。
具体实施方式
为更进一步阐述本发明所采取的技术手段及取得的效果,下面结合附图及较佳实施例,分别从业务模块角度、日志服务器角度,以及业务模块和日志服务器交互的角度出发,对本发明的技术方案,进行清楚和完整的描述。
首先从业务模块的角度出发,对日志的提供方法和装置的具体实施方式进行详细描述。
如图1所示,一种日志的提供方法,包括步骤:
S110、接收日志服务器发送的其关注业务的特征信息;
S120、根据所述特征信息确定本业务模块需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;
S130、根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息,以使所述下游业务模块在收到所述第二特征信息之后向所述日志服务器发送与所述第二特征信息相关的第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
上述日志的提供方法可以通过相应的程序实现,例如以日志SDK(SoftwareDevelopment Kit,软件开发工具包)形式实现,程序集成到业务模块代码中。上述日志的提供方法大大提高了当前关注业务相关的日志的查找效率,以及调试和问题定位的效率。下面对各个步骤的具体实施方式做详细描述。
在步骤S110中,日志服务器用于接收日志以及控制系统的日志输出。业务模块为现有技术中用于处理业务的模块,例如分布式系统中的业务模块等。当需要获取某一业务的日志时,日志服务器可以向所有的业务模块发送其关注业务的特征信息,也可以根据关注业务的特征信息所属的业务模块,直接向该业务模块发送日志服务器关注业务的特征信息。
日志服务器关注业务的特征信息可以根据实际需要进行选取,例如,需要获取一个业务完整的日志时,则该关注业务的特征信息为该业务起始的业务模块的对象的特征信息,需要获取一个业务部分的日志时,则该关注业务的特征信息为该部分业务起始的业务模块的对象的特征信息,需要获取一个业务最后一个业务模块的日志时,则该关注业务的特征信息为该业务最后一个业务模块的对象的特征信息。
如图2所示,为一具体实施例的某一业务的业务流程的示意图。该业务流程为:业务模块A收到开窗的指令,它再通知业务模块B去连接信号源获取数据,业务模块B再通知业务模块C去指定通道接收数据进行后续的解码显示操作。那么,如果日志服务器需要获取该业务完整的日志,关注业务的特征信息为业务模块A的与该业务有关的对象的特征信息,如果日志服务器需要获取业务模块B以及其后的该业务相关的日志,关注业务的特征信息为业务模块B的与该业务有关的对象的特征信息,如果日志服务器仅需要获取业务模块C的与该业务相关的日志,关注业务的特征信息为业务模块C的与该业务有关的对象的特征信息。
特征信息用于唯一描述业务模块内部的一个对象。在一个实施例中,所述特征信息包括特征类型和特征值,特征类型和特征值一起用来描述业务模块内部的一个对象。各个对象的特征类型与特征值是不同的,具体形式可以根据实际需要进行设置。需要说明的是,用户还可以设置除特征类型与特征值之外的其它特征信息,只要这些特征信息可以唯一确定一个对象即可,本发明并不对此做出限定。
如图3所示,为各业务模块中对象的特征类型和特征值的具体实施例的示意图。业务1、业务2和业务3分别由业务模块A、业务模块B和业务模块C协作完成。对于业务1,业务模块A的对象的特征类型为“WinID”,特征值为一个正整数10000,业务模块B的对象的特征类型为“SigID”,特征值为一个字符串“SIG001”,业务模块C的对象的特征类型为“Channel”,特征值为一个正整数1。对于业务2,业务模块A的对象的特征类型为“WinID”,特征值为一个正整数10001,业务模块B的对象的特征类型为“SigID”,特征值为一个字符串“SIG002”,业务模块C的对象的特征类型为“Channel”,特征值为一个正整数2。对于业务3,业务模块A的对象的特征类型为“WinID”,特征值为一个正整数10002,业务模块B的对象的特征类型为“SigID”,特征值为一个字符串“SIG003”,业务模块C的对象的特征类型为“Channel”,特征值为一个正整数3。
由于系统一般是多业务系统,以窗口为例,一个业务系统同时需要处理的窗口可能有上千个,而往往在出现故障需要进行分析的时候只是需要关注其中某一个窗口相关的信息,所以日志服务器需要告知业务模块其关注业务的特征信息,即业务模块中与该业务相关的对象的特征信息,以避免需要从大量的日志中搜寻自己想要的日志,从而提高效率。
在步骤S120中,如果日志服务器向各个业务模块发送关注业务的特征信息,各个业务模块查看日志服务器发送的该特征信息是否为本业务模块的对象的特征信息,如果是,则根据该特征信息直接搜索到与关注业务相关的日志,将搜索到的日志发送给日志服务器,否则不响应。如果日志服务器直接向关注业务的特征信息对应的业务模块发送特征信息,则该业务模块直接根据该特征信息搜索到与关注业务相关的日志,将搜索到的日志发送给日志服务器。
在步骤S130中,完整的业务流程往往需要多个业务模块协作完成,同一个业务在每一个业务模块中对应的对象的特征信息(特征类型和特征值)是不同的。上游业务模块需要根据自身的特征信息(特征类型与特征值)获得其下游业务模块的对象的特征信息(特征类型和特征值),并通知下游业务模块关注该特征信息,那么下游业务模块即可以根据其对象的特征信息查找到相关的日志并发送给日志服务器。
在一个实施例中,根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息的步骤可以包括:
S1301、获得所述第一特征信息对应的业务;
每一个业务模块的对象所属的业务是确定的,根据本业务模块需关注的对象即可以确定出该对象所属的业务。
S1302、根据所述业务的业务流程获得本业务模块的下游业务模块需关注的对象;
业务的业务流程的先后顺序是确定的,所以根据业务的业务流程即可以确定本业务模块的对象执行后,下一个由哪一个业务模块的哪一个对象执行。以图2所示的业务一为例,业务模块A中的WinID(10000)、业务模块B的SigID(“SIG001”)”和业务模块C的Channel(1)顺序执行,那么业务模块B的SigID(“SIG001”)”的下一个对象为业务模块C的Channel(1)所对应的对象。
S1303、从所述日志服务器获得所述下游业务模块需关注的对象的第二特征信息,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息;
各业务模块将自身模块的所有对象的特征信息报告给日志服务器,所以日志服务器存储有各个业务模块上报的各自所有对象的特征信息。本业务模块获得其下游业务模块需关注的对象后,可以从日志服务器中获取下游业务模块的对象的特征信息。
本业务模块的下游业务模块查找到与自身模块的对象的特征信息相关的日志,发送给日志服务器,如果该下游业务模块不是业务的业务流程的最后一个业务模块,则还需要根据其对象的特征信息获得再下游的业务模块需关注的对象的特征信息,并向再下游的业务模块发送该对象的特征信息。
假设一个业务由业务模块A、业务模块B、业务模块C和业务模块D四个模块协作完成,业务模块A、业务模块B、业务模块C和业务模块D顺序执行。日志服务器需要获取该业务所有的日志,则日志服务器向业务模块A发送关注业务的第一特征信息。业务模块A获得与第一特征信息相关的日志并发送给日志服务器,并根据第一特征信息获得业务模块B需关注的对象的第二特征信息,向业务模块B发送该第二特征信息。业务模块B查找与关注的第二特征信息相关的日志并发送给日志服务器,并根据第二特征信息获得业务模块C需关注的对象的第三特征信息,向业务模块C发送该第三特征信息。业务模块C查找与关注的第三特征信息相关的日志并发送给日志服务器,并根据第三特征信息获得业务模块D需关注的对象的第四特征信息,向业务模块D发送该第四特征信息。业务模块D查找与关注的第四特征信息相关的日志并发送给日志服务器,由于业务模块D是该业务最后一个业务模块,所以不再需要获得下一个业务模块需关注的对象的特征信息。
业务的各个业务模块均将与自身模块的对象的特征信息相关的日志发送给日志服务器,那么日志服务器即获取到与关注的业务相关的日志,而且由于日志均是同一个业务的日志,相关之间关联,所以可以有效提高调试和问题定位的效率。
基于同一发明构思,本发明还提供一种日志的提供装置,下面结合附图对本发明装置的具体实施方式做详细描述。
如图4所示,一种日志的提供装置,包括:
特征信息接收模块110,用于接收日志服务器发送的其关注业务的特征信息;
第一日志发送模块120,用于根据所述特征信息确定本业务模块需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;
第二特征信息发送模块130,用于根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息,以使所述下游业务模块在收到所述第二特征信息之后向所述日志服务器发送与所述第二特征信息相关的第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
上述日志的提供装置集成到业务模块中,大大提高了当前关注业务相关的日志的查找效率,以及调试和问题定位的效率。下面对各个模块的功能做详细描述。
特征信息用于唯一描述业务模块内部的一个对象。在一个实施例中,所述特征信息包括特征类型和特征值,特征类型和特征值一起用来描述业务模块内部的一个对象。各个对象的特征类型与特征值是不同的,具体形式可以根据实际需要进行设置。需要说明的是,用户还可以设置除特征类型与特征值之外的其它特征信息,只要这些特征信息可以唯一确定一个对象即可,本发明并不对此做出限定。
由于系统一般是多业务系统,所以日志服务器需要告知业务模块其关注业务的特征信息,即业务模块中与该业务相关的对象的特征信息,特征信息接收模块110接收日志服务器发送的关注业务的特征信息。第一日志发送模块120根据该特征信息搜索到与关注业务相关的日志,将搜索到的日志发送给日志服务器。
在一个实施例中,所述第二特征信息发送模块130可以包括:
业务获得单元1301,用于获得所述第一特征信息对应的业务;
目标对象获得单元1302,用于根据所述业务的业务流程获得本业务模块的下游业务模块需关注的对象;
第二特征信息获得单元1303,用于从所述日志服务器获得所述下游业务模块需关注的对象的第二特征信息,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息。
本业务模块的下游业务模块查找到与自身模块的对象的特征信息相关的日志,发送给日志服务器,如果该下游业务模块不是业务的业务流程的最后一个业务模块,则还需要根据其对象的特征信息获得再下游的业务模块需关注的对象的特征信息,并向再下游的业务模块发送该对象的特征信息。
业务的各个业务模块均将与自身模块的对象的特征信息相关的日志发送给日志服务器,那么日志服务器即获取到与关注的业务相关的日志,而且由于日志均是同一个业务的日志,相关之间关联,所以可以有效提高调试和问题定位的效率。
下面从日志服务器的角度出发,对本发明日志的获取方法和装置的具体实施方式做详细描述。
如图5所示,一种日志的获取方法,包括步骤:
S210、向关注业务的上游业务模块发送所述关注业务的特征信息,以使所述上游业务模块在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息;
S220、从所述上游业务模块获取第一日志,所述第一日志为所述上游业务模块根据所述第一特征信息获取到的相关的日志;
S230、从所述下游业务模块获取第二日志,所述第二日志为所述下游业务模块根据所述第二特征信息获取到的相关的日志;
S240、根据所述第一日志和所述第二日志得到所述关注业务相关的日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
上述日志的获取方法可以通过相应的程序实现,程序运行在日志服务器中。上述日志的获取方法大大提高了当前关注业务相关的日志的查找效率,以及调试和问题定位的效率。下面对各个步骤的具体实施方式做详细描述。
在步骤S210中,日志服务器用于接收日志以及控制系统的日志输出。业务模块为现有技术中用于处理业务的模块,例如分布式系统中的业务模块等。日志服务器关注业务的特征信息可以根据实际需要进行选取,例如,需要获取一个业务完整的日志时,则该关注业务的特征信息为该业务起始的业务模块的对象的特征信息,需要获取一个业务部分的日志时,则该关注业务的特征信息为该部分业务起始的业务模块的对象的特征信息,需要获取一个业务最后一个业务模块的日志时,则该关注业务的特征信息为该业务最后一个业务模块的对象的特征信息。
如图2所示,为一具体实施例的某一业务的业务流程的示意图。该业务流程为:业务模块A收到开窗的指令,它再通知业务模块B去连接信号源获取数据,业务模块B再通知业务模块C去指定通道接收数据进行后续的解码显示操作。那么,如果日志服务器需要获取该业务完整的日志,关注业务的特征信息为业务模块A的与该业务有关的对象的特征信息,如果日志服务器需要获取业务模块B以及其后的该业务相关的日志,关注业务的特征信息为业务模块B的与该业务有关的对象的特征信息,如果日志服务器仅需要获取业务模块C的与该业务相关的日志,关注业务的特征信息为业务模块C的与该业务有关的对象的特征信息。
特征信息用于唯一描述业务模块内部的一个对象。在一个实施例中,所述特征信息包括特征类型和特征值,特征类型和特征值一起用来描述业务模块内部的一个对象。各个对象的特征类型与特征值是不同的,具体形式可以根据实际需要进行设置。需要说明的是,用户还可以设置除特征类型与特征值之外的其它特征信息,只要这些特征信息可以唯一确定一个对象即可,本发明并不对此做出限定。
例如,如图3所示,为各业务模块中对象的特征类型和特征值的具体实施例的示意图。业务1、业务2和业务3分别由业务模块A、业务模块B和业务模块C协作完成。对于业务1,业务模块A的对象的特征类型为“WinID”,特征值为一个正整数10000,业务模块B的对象的特征类型为“SigID”,特征值为一个字符串“SIG001”,业务模块C的对象的特征类型为“Channel”,特征值为一个正整数1。对于业务2,业务模块A的对象的特征类型为“WinID”,特征值为一个正整数10001,业务模块B的对象的特征类型为“SigID”,特征值为一个字符串“SIG002”,业务模块C的对象的特征类型为“Channel”,特征值为一个正整数2。对于业务3,业务模块A的对象的特征类型为“WinID”,特征值为一个正整数10002,业务模块B的对象的特征类型为“SigID”,特征值为一个字符串“SIG003”,业务模块C的对象的特征类型为“Channel”,特征值为一个正整数3。
日志服务器需要向上游业务模块发送关注业务的特征信息,所以在一个实施例中,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息。各个业务模块将处理的所有对象的特征信息上报给日志服务器,日志服务器对各个业务模块的对象的特征信息进行存储。当需要查看某一个业务的日志时,就向对应的业务模块发送关注业务的特征信息,或者向所有的业务模块发送关注业务的特征信息。
由于系统一般是多业务系统,以窗口为例,一个业务系统同时需要处理的窗口可能有上千个,而往往在出现故障需要进行分析的时候只是需要关注其中某一个窗口相关的信息,所以日志服务器需要告知上游业务模块其关注业务的特征信息,即上游业务模块中与该业务相关的对象的特征信息,上游业务模块获取到日志服务器关注业务的特征信息,则确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息。如果该下游业务模块不是业务的业务流程的最后一个业务模块,则还需要根据其对象的特征信息获得再下游的业务模块需关注的对象的特征信息,并向再下游的业务模块发送该对象的特征信息。
在步骤S220~步骤S240中,上游业务模块根据特征信息搜索到与关注业务相关的日志,将搜索到的日志发送给日志服务器,上游业务模块的下游业务模块查找到与自身模块的对象的特征信息相关的日志,发送给日志服务器。
业务的各个业务模块均将与自身模块的对象的特征信息相关的日志发送给日志服务器,那么日志服务器获取到与关注的业务相关的日志,而且由于日志均是同一个业务的日志,相关之间关联,所以可以有效提高调试和问题定位的效率。
基于同一发明构思,本发明还提供一种日志的获取装置,下面结合附图对本发明装置的具体实施方式做详细描述。
如图6所示,一种日志的获取装置,包括:
特征信息发送模块210,用于向关注业务的上游业务模块发送所述关注业务的特征信息,以使所述上游业务模块在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息;
日志获取模块220,用于从所述上游业务模块获取第一日志,所述第一日志为所述上游业务模块根据所述第一特征信息获取到的相关的日志;从所述下游业务模块获取第二日志,所述第二日志为所述下游业务模块根据所述第二特征信息获取到的相关的日志;根据所述第一日志和所述第二日志得到所述关注业务相关的日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
上述日志的获取装置运行在日志服务器中,大大提高了当前关注业务相关的日志的查找效率,以及调试和问题定位的效率。下面对各个模块的功能做详细描述。
特征信息用于唯一描述业务模块内部的一个对象。在一个实施例中,所述特征信息包括特征类型和特征值,特征类型和特征值一起用来描述业务模块内部的一个对象。各个对象的特征类型与特征值是不同的,具体形式可以根据实际需要进行设置。需要说明的是,用户还可以设置除特征类型与特征值之外的其它特征信息,只要这些特征信息可以唯一确定一个对象即可,本发明并不对此做出限定。
日志服务器需要向上游业务模块发送关注业务的特征信息,所以在一个实施例中,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息。各个业务模块将处理的所有对象的特征信息上报给日志服务器,日志服务器对各个业务模块的对象的特征信息进行存储。当需要查看某一个业务的日志时,就向对应的业务模块发送关注业务的特征信息,或者向所有的业务模块发送关注业务的特征信息。
由于系统一般是多业务系统,而往往在出现故障需要进行分析的时候只是需要关注其中某一个窗口相关的信息,所以特征信息发送模块210需要告知上游业务模块其关注业务的特征信息,即上游业务模块中与该业务相关的对象的特征信息,上游业务模块获取到日志服务器关注业务的特征信息,则确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息。如果该下游业务模块不是业务的业务流程的最后一个业务模块,则还需要根据其对象的特征信息获得再下游的业务模块需关注的对象的特征信息,并向再下游的业务模块发送该对象的特征信息。
上游业务模块根据特征信息搜索到与关注业务相关的日志,将搜索到的日志发送给日志服务器,上游业务模块的下游业务模块查找到与自身模块的对象的特征信息相关的日志,发送给日志服务器。即业务的各个业务模块均将与自身模块的对象的特征信息相关的日志发送给日志服务器,那么日志获取模块220获取到与关注的业务相关的日志,而且由于日志均是同一个业务的日志,相关之间关联,所以可以有效提高调试和问题定位的效率。
本发明还提供一种日志的获取系统,如图7所示,该日志的获取系统包括:
日志服务器,用于向关注业务的上游业务模块发送所述关注业务的特征信息;根据第一日志和第二日志得到所述关注业务相关的日志;
上游业务模块,用于在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息;
下游业务模块,用于获得与所述第二特征信息相关的第二日志,向所述日志服务器发送所述第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息。
为了更好地理解本发明,下面结合一个具体实施例进行说明。
如图2所示,日志服务器需要获取业务一相关的所有日志。则日志服务器向业务模块A发送WinID(10000)。业务模块A查找到与WinID(10000)相关的日志发送给日志服务器,并根据WinID(10000)获得业务模块B中对象特征信息为SigID(“SIG001”),向业务模块B发送SigID(“SIG001”)。业务模块B查找到与SigID(“SIG001”)相关的日志发送给日志服务器,并根据SigID(“SIG001”)获得业务模块C中对象特征信息为Channel(1),向业务模块C发送Channel(1)。业务模块C查找到与Channel(1)相关的日志发送给日志服务器。至此,日志服务器获取到该业务相关的所有日志,可以根据获取的日志快速定位出问题。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random AccessMemory,RAM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种日志的提供方法,其特征在于,包括步骤:
接收日志服务器发送的其关注业务的特征信息;
根据所述特征信息确定本业务模块需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;
根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息,以使所述下游业务模块在收到所述第二特征信息之后向所述日志服务器发送与所述第二特征信息相关的第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息;所述特征信息用于唯一描述业务模块内部的一个对象。
2.根据权利要求1所述的日志的提供方法,其特征在于,根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息的步骤包括:
获得所述第一特征信息对应的业务;
根据所述业务的业务流程获得本业务模块的下游业务模块需关注的对象;
从所述日志服务器获得所述下游业务模块需关注的对象以及对象的第二特征信息,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息。
3.根据权利要求1或2所述的日志的提供方法,其特征在于,所述特征信息包括特征类型和特征值。
4.一种日志的获取方法,其特征在于,应用于日志服务器;
所述日志的获取方法包括步骤:
向关注业务的上游业务模块发送所述关注业务的特征信息,以使所述上游业务模块在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息;
从所述上游业务模块获取第一日志,所述第一日志为所述上游业务模块根据所述第一特征信息获取到的相关的日志;
从所述下游业务模块获取第二日志,所述第二日志为所述下游业务模块根据所述第二特征信息获取到的相关的日志;
根据所述第一日志和所述第二日志得到所述关注业务相关的日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息;所述特征信息用于唯一描述业务模块内部的一个对象。
5.根据权利要求4所述的日志的获取方法,其特征在于,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息,所述特征信息包括特征类型和特征值。
6.一种日志的提供装置,其特征在于,包括:
特征信息接收模块,用于接收日志服务器发送的其关注业务的特征信息;
第一日志发送模块,用于根据所述特征信息确定本业务模块需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;
第二特征信息发送模块,用于根据所述第一特征信息确定本业务模块的下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息,以使所述下游业务模块在收到所述第二特征信息之后向所述日志服务器发送与所述第二特征信息相关的第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息;所述特征信息用于唯一描述业务模块内部的一个对象。
7.根据权利要求6所述的日志的提供装置,其特征在于,所述第二特征信息发送模块包括:
业务获得单元,用于获得所述第一特征信息对应的业务;
目标对象获得单元,用于根据所述业务的业务流程获得本业务模块的下游业务模块需关注的对象;
第二特征信息获得单元,用于从所述日志服务器获得所述下游业务模块需关注的对象的第二特征信息,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息。
8.一种日志的获取装置,其特征在于,应用于日志服务器;
所述日志的获取装置包括:
特征信息发送模块,用于向关注业务的上游业务模块发送所述关注业务的特征信息,以使所述上游业务模块在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息;
日志获取模块,用于从所述上游业务模块获取第一日志,所述第一日志为所述上游业务模块根据所述第一特征信息获取到的相关的日志;从所述下游业务模块获取第二日志,所述第二日志为所述下游业务模块根据所述第二特征信息获取到的相关的日志;根据所述第一日志和所述第二日志得到所述关注业务相关的日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息;所述特征信息用于唯一描述业务模块内部的一个对象。
9.根据权利要求8所述的日志的获取装置,其特征在于,所述日志服务器存储有各个业务模块上报的各自所有对象的特征信息,所述特征信息包括特征类型和特征值。
10.一种日志的获取系统,其特征在于,包括:
日志服务器,用于向关注业务的上游业务模块发送所述关注业务的特征信息;根据第一日志和第二日志得到所述关注业务相关的日志;
上游业务模块,用于在收到所述特征信息之后确定其需关注的对象以及对象的第一特征信息,获得与所述第一特征信息相关的第一日志,向所述日志服务器发送所述第一日志;以及根据所述第一特征信息确定其下游业务模块需关注的对象以及对象的第二特征信息,向所述下游业务模块发送所述第二特征信息;
下游业务模块,用于获得与所述第二特征信息相关的第二日志,向所述日志服务器发送所述第二日志;
所述第一特征信息和所述第二特征信息为属于同一业务的在不同业务模块中的对象的特征信息;所述特征信息用于唯一描述业务模块内部的一个对象。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611116755.3A CN106777010B (zh) | 2016-12-07 | 2016-12-07 | 日志的提供方法、装置以及日志的获取方法、装置和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201611116755.3A CN106777010B (zh) | 2016-12-07 | 2016-12-07 | 日志的提供方法、装置以及日志的获取方法、装置和系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106777010A CN106777010A (zh) | 2017-05-31 |
CN106777010B true CN106777010B (zh) | 2020-01-10 |
Family
ID=58882340
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201611116755.3A Active CN106777010B (zh) | 2016-12-07 | 2016-12-07 | 日志的提供方法、装置以及日志的获取方法、装置和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106777010B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109327353B (zh) * | 2018-09-29 | 2022-01-11 | 创新先进技术有限公司 | 业务流量确定方法、装置及电子设备 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102547678A (zh) * | 2010-12-30 | 2012-07-04 | 中国移动通信集团天津有限公司 | 一种携号转网短消息日志分析方法、系统及装置 |
CN104346365A (zh) * | 2013-07-30 | 2015-02-11 | 阿里巴巴集团控股有限公司 | 确定与特定业务相关的关联日志的方法和装置 |
CN105207806A (zh) * | 2015-08-20 | 2015-12-30 | 百度在线网络技术(北京)有限公司 | 分布式服务的监控方法及装置 |
CN105591821A (zh) * | 2016-01-06 | 2016-05-18 | 北京京东尚科信息技术有限公司 | 监控系统和业务系统 |
CN105589856A (zh) * | 2014-10-21 | 2016-05-18 | 阿里巴巴集团控股有限公司 | 日志数据处理方法及系统 |
-
2016
- 2016-12-07 CN CN201611116755.3A patent/CN106777010B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102547678A (zh) * | 2010-12-30 | 2012-07-04 | 中国移动通信集团天津有限公司 | 一种携号转网短消息日志分析方法、系统及装置 |
CN104346365A (zh) * | 2013-07-30 | 2015-02-11 | 阿里巴巴集团控股有限公司 | 确定与特定业务相关的关联日志的方法和装置 |
CN105589856A (zh) * | 2014-10-21 | 2016-05-18 | 阿里巴巴集团控股有限公司 | 日志数据处理方法及系统 |
CN105207806A (zh) * | 2015-08-20 | 2015-12-30 | 百度在线网络技术(北京)有限公司 | 分布式服务的监控方法及装置 |
CN105591821A (zh) * | 2016-01-06 | 2016-05-18 | 北京京东尚科信息技术有限公司 | 监控系统和业务系统 |
Also Published As
Publication number | Publication date |
---|---|
CN106777010A (zh) | 2017-05-31 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108804299B (zh) | 应用程序异常处理方法及装置 | |
CN111274095B (zh) | 日志数据处理方法、装置、设备及计算机可读存储介质 | |
CN111352759B (zh) | 一种告警根因的判定方法及装置 | |
CN109885496B (zh) | 测试日志管理方法及系统 | |
CN109726091B (zh) | 一种日志管理方法及相关装置 | |
CN111008109A (zh) | 一种监控数据处理方法、装置、电子设备及存储介质 | |
CN112712902A (zh) | 传染病的传染概率预测方法及装置、存储介质、电子设备 | |
CN107203464B (zh) | 业务问题的定位方法以及装置 | |
CN106980572B (zh) | 分布式系统的在线调试方法和系统 | |
CN111625342B (zh) | 一种数据溯源方法、装置及服务器 | |
CN108063685B (zh) | 日志分析方法及装置 | |
CN112434178A (zh) | 图像分类方法、装置、电子设备和存储介质 | |
CN106648722B (zh) | 基于大数据的Flume接收端数据处理方法和装置 | |
CN106777010B (zh) | 日志的提供方法、装置以及日志的获取方法、装置和系统 | |
US11797360B2 (en) | Method for generating topology diagram, anomaly detection method, device, apparatus, and storage medium | |
CN111966339B (zh) | 埋点参数的录入方法、装置、计算机设备和存储介质 | |
CN113360413A (zh) | 一种代码测试方法及装置 | |
CN111046007B (zh) | 管理存储系统的方法、装置和计算机程序产品 | |
CN111200654A (zh) | 客户端请求错误处理方法及装置 | |
CN110765089A (zh) | 一种分布式设备及其日志记录方法、装置和存储介质 | |
CN112818204B (zh) | 一种业务的处理方法、装置、设备及存储介质 | |
CN114996080A (zh) | 数据处理方法、装置、设备及存储介质 | |
CN110955710B (zh) | 一种数据交换作业中脏数据的处理方法及装置 | |
CN105391602B (zh) | 一种数据采集测试方法和装置 | |
CN110909288B (zh) | 业务数据处理方法、装置、平台、业务端、系统及介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |