CN108427625B - 发送、记录日志的方法、客户端、服务器端及系统 - Google Patents

发送、记录日志的方法、客户端、服务器端及系统 Download PDF

Info

Publication number
CN108427625B
CN108427625B CN201710078237.5A CN201710078237A CN108427625B CN 108427625 B CN108427625 B CN 108427625B CN 201710078237 A CN201710078237 A CN 201710078237A CN 108427625 B CN108427625 B CN 108427625B
Authority
CN
China
Prior art keywords
server
client
log
node
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710078237.5A
Other languages
English (en)
Other versions
CN108427625A (zh
Inventor
任志伟
王晓涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Gridsum Technology Co Ltd
Original Assignee
Beijing Gridsum Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Gridsum Technology Co Ltd filed Critical Beijing Gridsum Technology Co Ltd
Priority to CN201710078237.5A priority Critical patent/CN108427625B/zh
Publication of CN108427625A publication Critical patent/CN108427625A/zh
Application granted granted Critical
Publication of CN108427625B publication Critical patent/CN108427625B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3452—Performance evaluation by statistical analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/30—Monitoring
    • G06F11/34—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment
    • G06F11/3409—Recording or statistical evaluation of computer activity, e.g. of down time, of input/output operation ; Recording or statistical evaluation of user activity, e.g. usability assessment for performance assessment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/465—Distributed object oriented systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Quality & Reliability (AREA)
  • Computer Hardware Design (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer And Data Communications (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明公开了一种发送日志的方法，应用于客户端，每个客户端配置于分布式系统的一个计算节点上，且客户端上配置有服务器端信息，服务器端信息至少包括服务器端地址；发送日志的方法包括：调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接；将客户端所在的计算节点所记录的日志信息发送至所述服务器端。本发明能够简单有效的记录分布式系统中的日志。本发明还公开了一种记录日志的方法、客户端、服务器端及系统。

Description

发送、记录日志的方法、客户端、服务器端及系统
技术领域
本发明涉及网络技术领域，尤其涉及一种发送、记录日志的方法、客户端、服务器端及系统。
背景技术
在大数据计算盛行的今天，已经有越来越多的程序和系统采用分布式的方式运行在大大小小的各种集群上。分布式计算是一种计算方法，和集中式计算是相对的。随着计算技术的发展，有些应用需要非常巨大的计算能力才能完成，如果采用集中式计算，需要耗费相当长的时间来完成。分布式计算将该应用分解成许多小的部分，分配给多台计算机进行处理。这样可以节约整体计算时间，大大提高计算效率。
由分布式计算的特点决定了，计算机程序的执行是在计算集群的各个计算节点上进行的，所以其日志的记录也是分散在各个计算节点上的，在需要进行日志分析时，先要从各个节点上将各自记录的日志收集起来，然后再进行分析。
现有技术中，在进行日志分析时，先要从各个节点上收集日志，当分布式集群规模越大的时候，收集工作将变得相当繁琐，而且也很容易出现遗漏某个或某几个节点的情况，导致在进行日志分析时不能得到正确的结果。因此，如何实现简单有效的记录分布式系统中的日志是一项亟待解决的问题。
发明内容
鉴于上述问题，本发明提供了一种分布式环境中记录日志的方法，以实现简单有效的记录分布式系统中的日志。
本发明提供了
一种发送日志的方法，应用于客户端，每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；
所述发送日志的方法包括：
调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端。
优选地，在调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接之前，还包括：
检测是否接收到所述服务器端发送的日志记录请求；
当检测接收到所述服务器端发送的日志记录请求时，执行调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接的步骤。
优选地，所述将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端包括：
获取所述客户端所在的计算节点的标识信息以及所述计算节点记录的日志；
将所述标识信息和所述日志作为日志信息发送至所述服务器端。
一种记录日志的方法，应用于服务器端，所述服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；
所述记录日志的方法包括：
接收并保存客户端发送的日志信息。
优选地，在接收并保存客户端发送的日志信息之前，还包括：
在需要记录日志时，向所述客户端发送日志记录请求。
优选地，所述接收并保存客户端发送的日志信息包括：
接收客户端发送的日志信息；
提取所述日志信息的生成时间；
按照所述日志信息的生成时间顺序保存所述日志信息。
优选地，所述记录日志的方法，还包括：
日志信息保存完成后发送反馈信息至对应客户端，并断开与客户端的连接。
一种客户端，每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；
所述客户端包括：
建立模块，用于调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
第一发送模块，用于将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端。
优选地，所述客户端还包括：
检测模块，用于检测是否接收到所述服务器端发送的日志记录请求；
相应的，当检测接收到所述服务器端发送的日志记录请求时，所述建立模块，调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接。
优选地，所述第一发送模块包括：
获取单元，用于获取所述客户端所在的计算节点的标识信息以及所述计算节点记录的日志；
发送单元，用于将所述标识信息和所述日志作为日志信息发送至所述服务器端。
一种服务器端，所述服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；
所述服务器端包括：
存储模块，用于接收并保存客户端发送的日志信息。
优选地，所述服务器端，还包括：
第二发送模块，用于在需要记录日志时，向所述客户端发送日志记录请求。
优选地，所述存储模块包括：
接收单元，用于接收客户端发送的日志信息；
提取单元，用于提取所述日志信息的生成时间；
保存单元，用于按照所述日志信息的生成时间顺序保存所述日志信息。
优选地，所述服务器端还包括：
反馈模块，用于在日志信息保存完成后发送反馈信息至对应客户端，并断开与客户端的连接。
一种日志发送记录系统，包括：客户端和服务器端；其中：
每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；
所述服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；
所述客户端包括：
建立模块，用于调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
第一发送模块，用于将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端；
所述服务器端包括：
存储模块，用于接收并保存客户端发送的日志信息。
借由上述技术方案，本发明提供的一种发送日志的方法，应用于客户端，每个客户端配置于分布式系统的一个计算节点上，且客户端上配置有服务器端信息，服务器端信息至少包括服务器端地址；当需要对分布式环境中的日志进行记录时，首先调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接，然后将客户端所在的计算节点所记录的日志信息发送至所述服务器端，服务器端接收并保存客户端发送的日志信息。本发明通过发送日志信息的客户端记录系统日志，然后将系统日志发送至接收保存日志信息的服务器端进行统一保存，简单有效的实现了记录分布式系统中的日志。
附图说明
通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：
图1示出了本发明公开的一种发送日志的方法实施例1的方法流程图；
图2示出了本发明公开的一种发送日志的方法实施例2的方法流程图；
图3示出了本发明公开的一种发送日志的方法实施例3的方法流程图；
图4示出了本发明公开的一种记录日志的方法实施例1的方法流程图；
图5示出了本发明公开的一种记录日志的方法实施例2的方法流程图；
图6示出了本发明公开的一种记录日志的方法实施例3的方法流程图；
图7示出了本发明公开的一种客户端实施例1的结构示意图；
图8示出了本发明公开的一种客户端实施例2的结构示意图；
图9示出了本发明公开的一种客户端实施例3的结构示意图；
图10示出了本发明公开的一种服务器端实施例1的结构示意图；
图11示出了本发明公开的一种服务器端实施例2的结构示意图；
图12示出了本发明公开的一种服务器端实施例3的结构示意图；
图13示出了本发明公开的一种日志发送记录系统实施例1的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
如图1所示，为本发明公开的一种发送日志的方法实施例1的方法流程图，该方法应用于客户端，每个客户端配置于分布式系统的一个计算节点上，且客户端上配置有服务器端信息，服务器端信息至少包括服务器端地址；所述方法可以包括以下步骤：
S101、调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
当需要对分布式系统中的日志进行记录时，例如，当接收到需要对日志进行分析的指令时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
S102、将客户端所在的计算节点所记录的日志信息发送至服务器端。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式环境中的日志进行记录时，首先调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接，然后将客户端所在的计算节点所记录的日志信息发送至所述服务器端，服务器端接收并保存客户端发送的日志信息。本发明通过发送日志信息的客户端记录系统日志，然后将系统日志发送至接收保存日志信息的服务器端进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图2所示，为本发明公开的一种发送日志的方法实施例2的方法流程图，该方法应用于客户端，每个客户端配置于分布式系统的一个计算节点上，且客户端上配置有服务器端信息，服务器端信息至少包括服务器端地址；所述方法可以包括以下步骤：
S201、检测是否接收到服务器端发送的日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，实时检测是否接收到服务器端发送的日志记录请求，即判断是否接收到服务器端发送的日志发送请求。其中，所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。
S202、当检测接收到服务器端发送的日志记录请求时，调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
当检测接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
S203、将客户端所在的计算节点所记录的日志信息发送至服务器端。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式环境中的日志进行记录时，检测是否接收到服务器端发送的日志记录请求，当检测接收到服务器端发送的日志记录请求时，调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接，然后将客户端所在的计算节点所记录的日志信息发送至所述服务器端，服务器端接收并保存客户端发送的日志信息。本发明通过发送日志信息的客户端记录系统日志，然后将系统日志发送至接收保存日志信息的服务器端进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图3所示，为本发明公开的一种发送日志的方法实施例3的方法流程图，该方法应用于客户端，每个客户端配置于分布式系统的一个计算节点上，且客户端上配置有服务器端信息，服务器端信息至少包括服务器端地址；所述方法可以包括以下步骤：
S301、检测是否接收到服务器端发送的日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，实时检测是否接收到服务器端发送的日志记录请求，即判断是否接收到服务器端发送的日志发送请求。其中，所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。
S302、当检测接收到服务器端发送的日志记录请求时，调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
当检测接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
S303、获取客户端所在的计算节点的标识信息以及计算节点记录的日志；
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，获取计算客户端所在的计算节点的标识信息以及计算节点记录的日志。
S304、将标识信息和日志作为日志信息发送至所述服务器端。
启动计算节点上的相应程序，调用客户端提供的接口，将标识信息和日志作为日志信息发送至服务器端。所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式环境中的日志进行记录时，检测是否接收到服务器端发送的日志记录请求，当检测接收到服务器端发送的日志记录请求时，调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接，然后将客户端所在的计算节点所记录的日志信息发送至所述服务器端，服务器端接收并保存客户端发送的日志信息。本发明通过发送日志信息的客户端记录系统日志，然后将系统日志发送至接收保存日志信息的服务器端进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图4所示，为本发明公开的一种记录日志的方法实施例1的方法流程图，该方法应用于服务器端，服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；所述方法包括以下步骤：
S401、接收并保存客户端发送的日志信息。
当需要对分布式系统中的日志进行记录时，通过对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。
服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式系统中的日志进行记录时，通过服务器端接收客户端发送的日志信息，并将日志信息进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图5所示，为本发明公开的一种记录日志的方法实施例2的方法流程图，该方法应用于服务器端，服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；所述方法包括以下步骤：
S501、在需要记录日志时，向客户端发送日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，服务器端向客户端发送日志记录请求。
客户端在接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。
S502、接收并保存客户端发送的日志信息。
服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式系统中的日志进行记录时，通过服务器端向客户端发送日志记录请求，然后接收客户端发送的日志信息，并将日志信息进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图6所示，为本发明公开的一种记录日志的方法实施例3的方法流程图，该方法应用于服务器端，服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；所述方法包括以下步骤：
S601、在需要记录日志时，向客户端发送日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，服务器端向客户端发送日志记录请求。
客户端在接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。
S602、接收客户端发送的日志信息；
当客户端将计算节点所记录的日志信息发送至服务器端后，服务器端接收客户端发送的日志信息。
S603、提取所述日志信息的生成时间；
S604、按照所述日志信息的生成时间顺序保存所述日志信息；
S605、日志信息保存完成后发送反馈信息至对应客户端，并断开与客户端的连接。
当服务器端将接收到的日志信息按照日志信息的生成时间顺序保存后，生成反馈信息，并将生成的反馈信息发送至对应的客户端，客户端基于接收到的反馈信息断开与服务器端的通信连接，完成此次的日志记录。
综上所述，在上述实施例中，当需要对分布式系统中的日志进行记录时，通过向客户端发送日志记录请求，接收客户端发送的日志信息，提取所述日志信息的生成时间，按照所述日志信息的生成时间顺序保存所述日志信息，便于后期的日志查询。日志信息保存完成后发送反馈信息至对应客户端，并断开与客户端的连接，简单有效的实现了记录分布式系统中的日志。
如图7所示，为本发明公开的一种客户端实施例1的结构示意图，每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；所述的客户端可以包括：
建立模块701，用于调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
当需要对分布式系统中的日志进行记录时，例如，当接收到需要对日志进行分析的指令时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
第一发送模块702，用于将客户端所在的计算节点所记录的日志信息发送至所述服务器端。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式环境中的日志进行记录时，首先调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接，然后将客户端所在的计算节点所记录的日志信息发送至所述服务器端，服务器端接收并保存客户端发送的日志信息。本发明通过发送日志信息的客户端记录系统日志，然后将系统日志发送至接收保存日志信息的服务器端进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图8所示，为本发明公开的一种客户端实施例2的结构示意图，每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；所述的客户端可以包括：
检测模块801，用于检测是否接收到服务器端发送的日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，实时检测是否接收到服务器端发送的日志记录请求，即判断是否接收到服务器端发送的日志发送请求。其中，所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点
建立模块802，用于调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
当检测接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
第一发送模块803，用于将客户端所在的计算节点所记录的日志信息发送至服务器端。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式环境中的日志进行记录时，检测是否接收到服务器端发送的日志记录请求，当检测接收到服务器端发送的日志记录请求时，调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接，然后将客户端所在的计算节点所记录的日志信息发送至所述服务器端，服务器端接收并保存客户端发送的日志信息。本发明通过发送日志信息的客户端记录系统日志，然后将系统日志发送至接收保存日志信息的服务器端进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图9所示，为本发明公开的一种客户端实施例3的结构示意图，每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；所述的客户端可以包括：
检测模块901，用于检测是否接收到服务器端发送的日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，实时检测是否接收到服务器端发送的日志记录请求，即判断是否接收到服务器端发送的日志发送请求。其中，所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。
建立模块902，用于调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
当检测接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
获取单元903，用于获取客户端所在的计算节点的标识信息以及计算节点记录的日志；
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，获取计算客户端所在的计算节点的标识信息以及计算节点记录的日志。
发送单元904，用于将标识信息和日志作为日志信息发送至所述服务器端。
启动计算节点上的相应程序，调用客户端提供的接口，将将标识信息和日志作为日志信息发送至服务器端。所述服务器端配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点。服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式环境中的日志进行记录时，检测是否接收到服务器端发送的日志记录请求，当检测接收到服务器端发送的日志记录请求时，调用客户端中配置的服务器端地址，建立客户端与服务器端间的连接，然后将客户端所在的计算节点所记录的日志信息发送至所述服务器端，服务器端接收并保存客户端发送的日志信息。本发明通过发送日志信息的客户端记录系统日志，然后将系统日志发送至接收保存日志信息的服务器端进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图10所示，为本发明公开的一种服务器端实施例1的结构示意图，服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；所述服务器端包括：
存储模块1001，用于接收并保存客户端发送的日志信息。
当需要对分布式系统中的日志进行记录时，通过对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。
服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式系统中的日志进行记录时，通过服务器端接收客户端发送的日志信息，并将日志信息进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图11所示，为本发明公开的一种服务器端实施例2的结构示意图，服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；所述服务器端包括：
第二发送模块1101，用于在需要记录日志时，向客户端发送日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，服务器端向客户端发送日志记录请求。
客户端在接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。
存储模块1102，用于接收并保存客户端发送的日志信息。
服务器端接收客户端发送的计算节点所记录的日志信息，并将接收到的日志信息进行保存。
综上所述，在上述实施例中，当需要对分布式系统中的日志进行记录时，通过服务器端向客户端发送日志记录请求，然后接收客户端发送的日志信息，并将日志信息进行统一保存，简单有效的实现了记录分布式系统中的日志。
如图12所示，为本发明公开的一种服务器端实施例3的结构示意图，服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；所述服务器端包括：
第二发送模块1201，用于在需要记录日志时，向客户端发送日志记录请求；
当需要对分布式系统中的日志进行记录时，例如，当服务器端接收到需要对日志进行分析的指令时，服务器端向客户端发送日志记录请求。
客户端在接收到服务器端发送的日志记录请求时，对客户端中配置的服务器端的地址进行调用，通过调用得到的服务器端的地址，建立客户端与服务器端之间的通信连接。
当通过调用客户端中配置的服务器端的地址，建立客户端与服务器端之间的通信连接后，启动计算节点上的相应程序，调用客户端提供的接口，将客户端所在的计算节点所记录的日志信息发送至服务器端。
接收单元1202，用于接收客户端发送的日志信息；
当客户端将计算节点所记录的日志信息发送至服务器端后，服务器端接收客户端发送的日志信息。
提取单元1203，用于提取所述日志信息的生成时间；
保存单元1204，用于按照所述日志信息的生成时间顺序保存所述日志信息；
反馈模块1205，用于日志信息保存完成后发送反馈信息至对应客户端，并断开与客户端的连接。
当服务器端将接收到的日志信息按照日志信息的生成时间顺序保存后，生成反馈信息，并将生成的反馈信息发送至对应的客户端，客户端基于接收到的反馈信息断开与服务器端的通信连接，完成此次的日志记录。
综上所述，在上述实施例中，当需要对分布式系统中的日志进行记录时，通过向客户端发送日志记录请求，接收客户端发送的日志信息，提取所述日志信息的生成时间，按照所述日志信息的生成时间顺序保存所述日志信息，日志信息保存完成后发送反馈信息至对应客户端，并断开与客户端的连接，简单有效的实现了记录分布式系统中的日志。
如图13所示，为本发明公开的一种日志发送记录系统的结构示意图，包括：上述如图7～图9所示的任意实施例所述的客户端1301和上述如图10～图12所述的任意实施例所述的服务器端1302；其中：每个客户端1301配置于分布式系统的一个计算节点上，且客户端1301上配置有服务器端1302信息，服务器端1302信息至少包括服务器端1302地址；
服务器端1302配置于分布式系统的公共访问节点上，公共访问节点至少包括如下之一：中心节点和主节点，中心节点和主节点为调配计算资源的节点。
通过系统中的客户端1301能够将计算节点上记录的日志信息发送至服务器端1302，通过服务器端1302能够将接收到的日志信息进行统一的保存，简单有效的实现了记录分布式系统中的日志。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (9)

1.一种发送日志的方法，其特征在于，应用于客户端，每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；
所述发送日志的方法包括：
当需要对所述分布式系统中的日志进行记 录时，调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接；所述服务器端配置于所述分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和所述主节点为调配计算资源的节点；
将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端；
所述将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端包括：
获取所述客户端所在的计算节点的标识信息以及所述计算节点记录的日志；
将所述标识信息和所述日志作为日志信息发送至所述服务器端。
2.根据权利要求1所述的发送日志的方法，其特征在于，在调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接之前，还包括：
检测是否接收到所述服务器端发送的日志记录请求；
当检测接收到所述服务器端发送的日志记录请求时，执行调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接的步骤。
3.一种记录日志的方法，其特征在于，应用于服务器端，所述服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；
所述记录日志的方法包括：
接收并保存客户端发送的日志信息，每个所述客户端配置于分布式系统的一个计算节点上，其中，所述日志信息包括所述客户端所在的计算节点的标识信息以及所述计算节点记录的日志。
4.根据权利要求3所述的记录日志的方法，其特征在于，在接收并保存客户端发送的日志信息之前，还包括：
在需要记录日志时，向所述客户端发送日志记录请求。
5.根据权利要求3或4所述的记录日志的方法，其特征在于，所述接收并保存客户端发送的日志信息包括：
接收客户端发送的日志信息；
提取所述日志信息的生成时间；
按照所述日志信息的生成时间顺序保存所述日志信息。
6.根据权利要求3所述的记录日志的方法，其特征在于，还包括：
日志信息保存完成后发送反馈信息至对应客户端，并断开与客户端的连接。
7.一种客户端，其特征在于，每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；
所述客户端包括：
建立模块，用于调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接；所述服务器端配置于所述分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和所述主节点为调配计算资源的节点；
第一发送模块，用于将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端；
所述第一发送模块包括：
获取单元，用于获取所述客户端所在的计算节点的标识信息以及计算节点记录的日志；
发送单元，用于将所述标识信息和所述日志作为日志信息发送至所述服务器端。
8.一种服务器端，其特征在于，所述服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；
所述服务器端包括：
存储模块，用于接收并保存客户端发送的日志信息，每个所述客户端配置于分布式系统的一个计算节点上，其中，所述日志信息包括所述客户端所在的计算节点的标识信息以及所述计算节点记录的日志。
9.一种日志发送记录系统，其特征在于，包括：客户端和服务器端；其中：
每个所述客户端配置于分布式系统的一个计算节点上，且所述客户端上配置有服务器端信息，所述服务器端信息至少包括服务器端地址；
所述服务器端配置于分布式系统的公共访问节点上，所述公共访问节点至少包括如下之一：中心节点和主节点，所述中心节点和主节点为调配计算资源的节点；
所述客户端包括：
建立模块，用于调用所述客户端中配置的服务器端地址，建立客户端与服务器端间的连接；
第一发送模块，用于将所述客户端所在的计算节点所记录的日志信息发送至所述服务器端；
所述服务器端包括：
存储模块，用于接收并保存客户端发送的日志信息；
所述第一发送模块包括：
获取单元，用于获取所述客户端所在的计算节点的标识信息以及计算节点记录的日志；发送单元，用于将所述标识信息和所述日志作为日志信息发送至所述服务器端。
CN201710078237.5A 2017-02-14 2017-02-14 发送、记录日志的方法、客户端、服务器端及系统 Active CN108427625B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710078237.5A CN108427625B (zh) 2017-02-14 2017-02-14 发送、记录日志的方法、客户端、服务器端及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710078237.5A CN108427625B (zh) 2017-02-14 2017-02-14 发送、记录日志的方法、客户端、服务器端及系统

Publications (2)

Publication Number Publication Date
CN108427625A CN108427625A (zh) 2018-08-21
CN108427625B true CN108427625B (zh) 2021-11-30

Family

ID=63155033

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710078237.5A Active CN108427625B (zh) 2017-02-14 2017-02-14 发送、记录日志的方法、客户端、服务器端及系统

Country Status (1)

Country Link
CN (1) CN108427625B (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101826993A (zh) * 2010-02-04 2010-09-08 蓝盾信息安全技术股份有限公司 一种安全事件监测方法、系统及装置
CN101969386A (zh) * 2010-11-09 2011-02-09 道有道(北京)科技有限公司 一种日志采集装置和日志采集方法
CN103631699B (zh) * 2012-08-28 2019-02-12 北京京东尚科信息技术有限公司 日志管理系统及日志监控、获取和查询方法
CN104699592B (zh) * 2012-09-25 2018-09-04 北京奇虎科技有限公司 一种日志数据传输的方法和系统
KR101341596B1 (ko) * 2012-09-25 2013-12-13 (주)소만사 웹 애플리케이션 통신 데이터의 사용자별 모니터링 장치 및 방법

Also Published As

Publication number Publication date
CN108427625A (zh) 2018-08-21

Similar Documents

Publication Publication Date Title
CN106202235B (zh) 一种数据处理方法及装置
US20200344322A1 (en) Resource scheduling method, apparatus, device and system
CN110971655B (zh) 离线客户端重放和同步
CN107291750B (zh) 一种数据迁移方法和装置
JP2019517040A (ja) クラウドプラットフォームベースのクライアントアプリケーション情報統計方法および装置
CN106878363B (zh) 一种信息处理方法、装置及系统
CN111752799A (zh) 一种业务链路跟踪方法、装置、设备及储存介质
CN104537076A (zh) 一种文件读写方法及装置
US10282120B2 (en) Method, apparatus and system for inserting disk
CN113296981A (zh) 数据处理方法、装置、电子设备及存储介质
CN116204438A (zh) 测试用例生成方法、自动化测试方法和相关装置
CN111177237B (zh) 一种数据处理系统、方法及装置
CN111723245B (zh) 数据存储系统中建立不同类型存储对象关联关系的方法
CN114691445A (zh) 集群故障处理方法、装置、电子设备及可读存储介质
CN113360413A (zh) 一种代码测试方法及装置
CN108427625B (zh) 发送、记录日志的方法、客户端、服务器端及系统
CN106790521B (zh) 采用基于ftp的节点设备进行分布式组网的系统及方法
CN115098525B (zh) 索引更新方法、装置、电子设备及存储介质
CN110941658A (zh) 一种数据导出方法、装置、服务器及存储介质
CN115757642A (zh) 一种基于归档日志文件的数据同步方法及装置
CN108228613B (zh) 数据的读取方法及装置
CN114547206A (zh) 一种数据同步方法和数据同步系统
CN107547601B (zh) 用于消息发送的方法及路由设备、服务器、系统
CN112488462A (zh) 一种工作流数据的统一推送方法、装置及介质
CN114827158A (zh) 一种配置信息的加载方法、系统及服务器

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 100080 No. 401, 4th Floor, Haitai Building, 229 North Fourth Ring Road, Haidian District, Beijing

Applicant after: Beijing Guoshuang Technology Co.,Ltd.

Address before: 100086 Cuigong Hotel, 76 Zhichun Road, Shuangyushu District, Haidian District, Beijing

Applicant before: Beijing Guoshuang Technology Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant