CN110968560A - 日志采集器的配置方法、装置及系统 - Google Patents

日志采集器的配置方法、装置及系统 Download PDF

Info

Publication number
CN110968560A
CN110968560A CN201811152302.5A CN201811152302A CN110968560A CN 110968560 A CN110968560 A CN 110968560A CN 201811152302 A CN201811152302 A CN 201811152302A CN 110968560 A CN110968560 A CN 110968560A
Authority
CN
China
Prior art keywords
target host
configuration
log
file
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811152302.5A
Other languages
English (en)
Other versions
CN110968560B (zh
Inventor
游剑涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Gridsum Technology Co Ltd
Original Assignee
Beijing Gridsum Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Gridsum Technology Co Ltd filed Critical Beijing Gridsum Technology Co Ltd
Priority to CN201811152302.5A priority Critical patent/CN110968560B/zh
Publication of CN110968560A publication Critical patent/CN110968560A/zh
Application granted granted Critical
Publication of CN110968560B publication Critical patent/CN110968560B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/06—Management of faults, events, alarms or notifications
    • H04L41/069—Management of faults, events, alarms or notifications using logs of notifications; Post-processing of notifications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/2866—Architectures; Arrangements
    • H04L67/30—Profiles
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本申请公开了一种日志采集器的配置方法、装置及系统。该方法包括：选择目标主机，其中，目标主机为需要配置日志采集器的主机；确定目标主机上日志文件所在地址，并根据目标主机的日志类型确定目标主机上日志文件的解析规则；触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息。通过本申请，解决了相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。

Description

日志采集器的配置方法、装置及系统
技术领域
本申请涉及互联网技术领域，具体而言，涉及一种日志采集器的配置方法、装置及系统。
背景技术
日志数据是任何软件系统中都存在的重要数据资源，日志数据的采集是平台即服务提供的基本服务。基于日志数据，开发与业务人员可以对系统进行监控，对操作进行审计，对日志数据进行分析。采集日志数据的日志采集器是运行在客户端的程序，通过修改日志采集器的配置文件，日志采集器可以实现收集不同的日志文件，做不同的处理。
日志采集器的策略配置随着软件系统和业务的变化进行变更，在进行日志采集器配置变更时，通常的做法是运维人员通过远程登陆的手段手动修改日志采集器的配置文件，然而重启日志采集程序，这样操作存在多个缺点。日志采集器配置需要手动登录到服务器，修改配置文件往往需要超级管理员权限。运维人员往往不清楚需要收集哪些日志，运维人员如果得到服务器超级管理员权限，由于对运维知识的不了解和自身安全意识的淡薄，容易导致安全事故发生。因为进行手动修改配置非常容易出错，某些日志收集器会因为配置出错导致服务中断，从而引发日志数据大量丢失。大多情况下，需要多种类型的日志采集器配合才能完全满足日志采集需求，手动配置多个日志采集器，学习成本也巨大。
针对相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题，目前尚未提出有效的解决方案。
发明内容
本申请的主要目的在于提供一种日志采集器的配置方法、装置及系统，以解决相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。
为了实现上述目的，根据本申请的一个方面，提供了一种日志采集器的配置方法。该方法包括：选择目标主机，其中，所述目标主机为需要配置日志采集器的主机；确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则；触发配置请求至服务器，以使所述服务器基于所述配置请求生成配置文件对所述目标主机的日志采集器进行配置，其中，所述配置请求中携带有所述目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息。
进一步地，确定对所述目标主机上日志文件的解析规则包括：显示客户端的浏览器界面上的配置参数；基于从所述显示出的配置参数中选择出的配置参数，以及选择出的配置参数与解析规则对应的映射关系，确定出对所述目标主机上日志文件的解析规则。
为了实现上述目的，根据本申请的一个方面，提供了一种日志采集器的配置方法，包括：接收客户端发送的配置请求，其中，所述配置请求中携带有目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息，所述目标主机为需要配置日志采集器的主机；获取与所述配置请求对应的目标模板；基于所述配置请求对所述目标模板进行渲染，生成配置文件；发送所述配置文件至所述目标主机，以使通过所述配置文件配置所述目标主机的日志采集器。
进一步地，获取与所述配置请求对应的目标模板包括：确定所述目标主机的操作系统的信息基于所述配置请求中携带的解析规则和所述目标主机的操作系统的信息从预先创建的多个模板中匹配出目标模板。
进一步地，获取与所述配置请求对应的目标模板包括：确定所述目标主机的操作系统的信息基于所述配置请求中携带的解析规则和所述目标主机的操作系统的信息创建所述目标模板。
为了实现上述目的，根据本申请的一个方面，提供了一种日志采集器的配置系统，包括：客户端，用于选择目标主机，确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则，触发配置请求至服务器，其中，所述目标主机为需要配置日志采集器的主机，所述配置请求中携带有所述目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息；服务器，用于接收所述客户端发送的所述配置请求，基于所述配置请求对目标模板进行渲染，生成配置文件，发送所述配置文件至所述目标主机，其中，所述目标模板是与所述配置请求对应的模板；目标主机，用于接收所述服务器下发的配置文件，通过所述配置文件配置所述目标主机的日志采集器。
为了实现上述目的，根据本申请的一个方面，提供了一种日志采集器的配置装置，包括：选择单元，用于选择目标主机，其中，所述目标主机为需要配置日志采集器的主机；确定单元，用于确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则；触发单元，用于触发配置请求至服务器，以使所述服务器基于所述配置请求生成配置文件对所述目标主机的日志采集器进行配置，其中，所述配置请求中携带有所述目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息。
为了实现上述目的，根据本申请的一个方面，提供了一种日志采集器的配置装置，包括：接收单元，用于接收客户端发送的配置请求，其中，所述配置请求中携带有目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息，所述目标主机为需要配置日志采集器的主机；获取单元，用于获取与所述配置请求对应的目标模板；生成单元，用于基于所述配置请求对所述目标模板进行渲染，生成配置文件；发送单元，用于发送所述配置文件至所述目标主机，以使通过所述配置文件配置所述目标主机的日志采集器。
为了实现上述目的，根据本申请的一个方面，提供了一种存储介质，所述存储介质包括存储的程序，其中，所述程序执行上述任意一项所述的日志采集器的配置方法。
为了实现上述目的，根据本申请的一个方面，提供了一种处理器，所述处理器用于运行程序，其中，所述程序运行时执行上述任意一项所述的日志采集器的配置方法。
通过本申请，采用以下步骤：选择目标主机，其中，目标主机为需要配置日志采集器的主机；确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则；触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息，解决了相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。通过在浏览器端配置日志收集服务，能够避免日志配置人员直接登陆服务器，防止服务器密码泄露，保障了服务器安全。
附图说明
构成本申请的一部分的附图用来提供对本申请的进一步理解，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。在附图中：
图1是根据本申请实施例一提供的日志采集器的配置方法的流程图；
图2是根据本申请实施例二提供的日志采集器的配置方法的流程图；
图3是根据本申请实施例三提供的日志采集器的配置系统的示意图；
图4是根据本申请实施例四提供的日志采集器的配置装置的示意图；以及
图5是根据本申请实施例五提供的日志采集器的配置装置的示意图。
具体实施方式
需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分的实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本申请保护的范围。
需要说明的是，本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
实施例1
根据本申请的实施例，提供了一种日志采集器的配置方法。
图1是根据本申请实施例一的日志采集器的配置方法的流程图。如图1所示，该方法包括以下步骤：
步骤S101，选择目标主机，其中，目标主机为需要配置日志采集器的主机。
上述的目标主机可以为一台也可以为多台。例如，有100台服务器，选择其中50台服务器需要配置日志采集器。
步骤S102，确定目标主机上日志文件所在地址，并根据目标主机的日志类型确定目标主机上日志文件的解析规则。
上述的目标主机上日志文件所在地址可以是用户输入的，不同的目标主机的日志文件所在地址可以不一样。例如，某一目标主机的日志文件所在地址为C:\Program Files。
由于不同类型的日志文件，解析规则并不相同，例如，文本类型的日志文件，可以采用正则表达式的解析规则进行解析，Jason类型的日志文件，可以采用Jason规则化的解析规则进行解析。在上述步骤中，根据目标主机的日志类型确定目标主机上日志文件的解析规则确定对目标主机上日志文件的解析规则。
可选地，在本申请实施例一提供的日志采集器的配置方法中，确定对目标主机上日志文件的解析规则包括：显示客户端的浏览器界面上的配置参数；基于从显示出的配置参数中选择出的配置参数，以及选择出的配置参数与解析规则对应的映射关系，确定出对目标主机上日志文件的解析规则。
在上述方案中，通过在浏览器端以界面上显示配置参数，从显示的配置参数中选择出待配置的参数，然后确定待配置的参数与解析规则之间的映射关系，确定出对目标主机日志文件的解析规则，可以有效避免因手动修改日志配置文件而产生的错误。
步骤S103，触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息。
在浏览器端完成选择目标主机，确定目标主机上日志文件所在地址，并根据目标主机的日志类型确定目标主机上日志文件的解析规则之后，触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置。解决了相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。通过在浏览器端配置日志收集服务，能够避免日志配置人员直接登陆服务器，防止服务器密码泄露，保障了服务器安全。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例的方法。
实施例2
图2是根据本申请实施例二的日志采集器的配置方法的流程图。如图2所示，该方法包括以下步骤：
步骤S201，接收客户端发送的配置请求，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息，目标主机为需要配置日志采集器的主机。
步骤S202，获取与配置请求对应的目标模板。
在服务器端通过一些预先定义好的模板本件，基于配置请求进行选择出目标模板。需要说明的是，不同的配置请求会在服务器端匹配出不同的模板。
步骤S203，基于配置请求对目标模板进行渲染，生成配置文件。
由于配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息，基于配置请求中携带的这些信息对目标模板进行渲染，生成配置文件，
步骤S204，发送配置文件至目标主机，以使通过配置文件配置目标主机的日志采集器。
在服务器生成了配置文件之后，通过配置管理工具(例如，slatstack)下发配置文件至目标主机，以使通过配置文件配置目标主机的日志采集器。
本申请实施例二提供的日志采集器的配置方法，通过接收客户端发送的配置请求，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息，目标主机为需要配置日志采集器的主机；获取与配置请求对应的目标模板；基于配置请求对目标模板进行渲染，生成配置文件；发送配置文件至目标主机，以使通过配置文件配置目标主机的日志采集器，解决了相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。通过在浏览器端配置日志收集服务，在服务器端基于配置请求下发配置文件，以使通过配置文件配置目标主机的日志采集器，能够避免日志配置人员直接登陆服务器，防止服务器密码泄露，保障了服务器安全。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到根据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例的方法。
实施例3
根据本发明实施例，还提供了一种用于实施上述实施例一和二的日志采集器的配置方法的系统，如图3所示，该系统包括：客户端301，服务器302和目标主机303。
具体地，客户端301，用于选择目标主机，确定目标主机上日志文件所在地址，并根据目标主机的日志类型确定目标主机上日志文件的解析规则，触发配置请求至服务器，其中，目标主机为需要配置日志采集器的主机，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息；
服务器302，用于接收客户端发送的配置请求，基于配置请求对目标模板进行渲染，生成配置文件，发送配置文件至目标主机，其中，目标模板是与配置请求对应的模板；
目标主机303，用于接收服务器下发的配置文件，通过配置文件配置目标主机的日志采集器。
本申请实施例三提供的日志采集器的配置系统，通过客户端301选择目标主机，确定目标主机上日志文件所在地址，并根据目标主机的日志类型确定目标主机上日志文件的解析规则，触发配置请求至服务器，其中，目标主机为需要配置日志采集器的主机，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息；服务器302接收客户端发送的配置请求，基于配置请求对目标模板进行渲染，生成配置文件，发送配置文件至目标主机，其中，目标模板是与配置请求对应的模板；目标主机303接收服务器下发的配置文件，通过配置文件配置目标主机的日志采集器，解决了相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。通过在浏览器端配置日志收集服务，在服务器端基于配置请求下发配置文件，以使通过配置文件配置目标主机的日志采集器，能够避免日志配置人员直接登陆服务器，防止服务器密码泄露，保障了服务器安全。
实施例4
根据本发明实施例，还提供了一种用于实施上述实施例一的日志采集器的配置方法的装置，如图4所示，该装置包括：选择单元401，确定单元402和触发单元403。
具体地，选择单元401，用于选择目标主机，其中，目标主机为需要配置日志采集器的主机；
确定单元402，用于确定目标主机上日志文件所在地址，并根据目标主机的日志类型确定目标主机上日志文件的解析规则；
触发单元403，用于触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息。
可选地，在本申请实施例四提供的日志采集器的配置装置中，确定单元402包括：确定模块，用于确定客户端的浏览器界面上显示的配置参数；选择模块，用于根据从显示出的配置参数中选择出的配置参数，以及选择出的配置参数与解析规则对应的映射关系，确定出对目标主机上日志文件的解析规则。
本申请实施例四提供的日志采集器的配置装置，通过选择单元401选择目标主机，其中，目标主机为需要配置日志采集器的主机；确定单元402确定目标主机上日志文件所在地址，并根据目标主机的日志类型确定目标主机上日志文件的解析规则；触发单元403触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息，解决了相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。通过在浏览器端配置日志收集服务，能够避免日志配置人员直接登陆服务器，防止服务器密码泄露，保障了服务器安全。
实施例5
根据本发明实施例，还提供了一种用于实施上述实施例二的日志采集器的配置方法的装置，如图5所示，该装置包括：接收单元501、获取单元502、生成单元503和发送单元504。
接收单元501，用于接收客户端发送的配置请求，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息，目标主机为需要配置日志采集器的主机；
获取单元502，用于获取与配置请求对应的目标模板；
生成单元503，用于基于配置请求对目标模板进行渲染，生成配置文件；
发送单元504，用于发送配置文件至目标主机，以使通过配置文件配置目标主机的日志采集器。
可选地，在本申请实施例五提供的日志采集器的配置装置中，获取单元502包括：第一确定模块，用于确定目标主机的操作系统的信息；匹配模块，用于根据配置请求中携带的解析规则和目标主机的操作系统的信息从预先创建的多个模板中匹配出目标模板。
可选地，在本申请实施例五提供的日志采集器的配置装置中，获取与配置请求对应的目标模板包括：第一确定模块，用于确定目标主机的操作系统的信息；创建模块，用于基于配置请求中携带的解析规则和目标主机的操作系统的信息创建目标模板。
本申请实施例五提供的日志采集器的配置装置，通过接收单元501接收客户端发送的配置请求，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及目标主机上日志文件的解析规则的信息，目标主机为需要配置日志采集器的主机；获取单元502获取与配置请求对应的目标模板；生成单元503基于配置请求对目标模板进行渲染，生成配置文件；发送单元504发送配置文件至目标主机，以使通过配置文件配置目标主机的日志采集器，解决了相关技术中通过运维人员手动配置日志收集器，容易发生服务器安全事故的问题。通过在浏览器端配置日志收集服务，在服务器端基于配置请求下发配置文件，以使通过配置文件配置目标主机的日志采集器，能够避免日志配置人员直接登陆服务器，防止服务器密码泄露，保障了服务器安全。
上述日志采集器的配置装置包括处理器和存储器，上述单元等均作为程序单元存储在存储器中，由处理器执行存储在存储器中的上述程序单元来实现相应的功能。
处理器中包含内核，由内核去存储器中调取相应的程序单元。内核可以设置一个或以上，通过调整内核参数来配置日志采集器。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)，存储器包括至少一个存储芯片。
本发明实施例提供了一种存储介质，其上存储有程序，该程序被处理器执行时实现日志采集器的配置方法。
本发明实施例提供了一种处理器，处理器用于运行程序，其中，程序运行时执行日志采集器的配置方法。
本发明实施例提供了一种设备，设备包括处理器、存储器及存储在存储器上并可在处理器上运行的程序，处理器执行程序时实现以下步骤：选择目标主机，其中，目标主机为需要配置日志采集器的主机；确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则；触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息。
确定对目标主机上日志文件的解析规则包括：确定客户端的浏览器界面上显示的配置参数；以及从显示的配置参数中选择对目标主机日志文件的解析规则。
接收客户端发送的配置请求，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息，目标主机为需要配置日志采集器的主机；获取与配置请求对应的目标模板；基于配置请求对目标模板进行渲染，生成配置文件；发送配置文件至目标主机，以使通过配置文件配置目标主机的日志采集器。
接收服务器下发的配置文件，其中，配置文件是基于配置请求对目标模板进行渲染生成的，目标模板是与配置请求对应的模板，配置请求是客户端发送至服务器的配置请求，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息；通过配置文件配置目标主机的日志采集器。
在通过配置文件配置目标主机的日志采集器之前，该方法还包括：备份目标主机的原配置文件。
在通过配置文件配置目标主机的日志采集器之后，该方法还包括：重启配置后的日志采集器；判断日志采集器配置是否成功，若日志采集器配置失败，则恢复日志采集器的原配置文件。本文中的设备可以是服务器、PC、PAD、手机等。
本申请还提供了一种计算机程序产品，当在数据处理设备上执行时，适于执行初始化有如下方法步骤的程序：选择目标主机，其中，目标主机为需要配置日志采集器的主机；确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则；触发配置请求至服务器，以使服务器基于配置请求生成配置文件对目标主机的日志采集器进行配置，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息。
确定对目标主机上日志文件的解析规则包括：确定客户端的浏览器界面上显示的配置参数；以及从显示的配置参数中选择对目标主机日志文件的解析规则。
接收客户端发送的配置请求，其中，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息，目标主机为需要配置日志采集器的主机；获取与配置请求对应的目标模板；基于配置请求对目标模板进行渲染，生成配置文件；发送配置文件至目标主机，以使通过配置文件配置目标主机的日志采集器。
接收服务器下发的配置文件，其中，配置文件是基于配置请求对目标模板进行渲染生成的，目标模板是与配置请求对应的模板，配置请求是客户端发送至服务器的配置请求，配置请求中携带有目标主机的信息、目标主机上日志文件所在地址的信息，以及确定对目标主机上日志文件的解析规则的信息；通过配置文件配置目标主机的日志采集器。
在通过配置文件配置目标主机的日志采集器之前，该方法还包括：备份目标主机的原配置文件。
在通过配置文件配置目标主机的日志采集器之后，该方法还包括：重启配置后的日志采集器；判断日志采集器配置是否成功，若日志采集器配置失败，则恢复日志采集器的原配置文件。
本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
存储器可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。存储器是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白，本申请的实施例可提供为方法、系统或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
以上仅为本申请的实施例而已，并不用于限制本申请。对于本领域技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。

Claims (10)

1.一种日志采集器的配置方法，其特征在于，包括：
选择目标主机，其中，所述目标主机为需要配置日志采集器的主机；
确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则；
触发配置请求至服务器，以使所述服务器基于所述配置请求生成配置文件对所述目标主机的日志采集器进行配置，其中，所述配置请求中携带有所述目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息。
2.根据权利要求1所述的方法，其特征在于，确定对所述目标主机上日志文件的解析规则包括：
显示客户端的浏览器界面上的配置参数；
基于从所述显示出的配置参数中选择出的配置参数，以及选择出的配置参数与解析规则对应的映射关系，确定出对所述目标主机上日志文件的解析规则。
3.一种日志采集器的配置方法，其特征在于，包括：
接收客户端发送的配置请求，其中，所述配置请求中携带有目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息，所述目标主机为需要配置日志采集器的主机；
获取与所述配置请求对应的目标模板；
基于所述配置请求对所述目标模板进行渲染，生成配置文件；
发送所述配置文件至所述目标主机，以使通过所述配置文件配置所述目标主机的日志采集器。
4.根据权利要求3所述的方法，其特征在于，获取与所述配置请求对应的目标模板包括：
确定所述目标主机的操作系统的信息；
基于所述配置请求中携带的解析规则和所述目标主机的操作系统的信息从预先创建的多个模板中匹配出目标模板。
5.根据权利要求3所述的方法，其特征在于，获取与所述配置请求对应的目标模板包括：
确定所述目标主机的操作系统的信息；
基于所述配置请求中携带的解析规则和所述目标主机的操作系统的信息创建所述目标模板。
6.一种日志采集器的配置系统，其特征在于，包括：
客户端，用于选择目标主机，确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则，触发配置请求至服务器，其中，所述目标主机为需要配置日志采集器的主机，所述配置请求中携带有所述目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息；
服务器，用于接收所述客户端发送的所述配置请求，基于所述配置请求对目标模板进行渲染，生成配置文件，发送所述配置文件至所述目标主机，其中，所述目标模板是与所述配置请求对应的模板；
目标主机，用于接收所述服务器下发的配置文件，通过所述配置文件配置所述目标主机的日志采集器。
7.一种日志采集器的配置装置，其特征在于，包括：
选择单元，用于选择目标主机，其中，所述目标主机为需要配置日志采集器的主机；
确定单元，用于确定所述目标主机上日志文件所在地址，并根据所述目标主机的日志类型确定所述目标主机上日志文件的解析规则；
触发单元，用于触发配置请求至服务器，以使所述服务器基于所述配置请求生成配置文件对所述目标主机的日志采集器进行配置，其中，所述配置请求中携带有所述目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息。
8.一种日志采集器的配置装置，其特征在于，包括：
接收单元，用于接收客户端发送的配置请求，其中，所述配置请求中携带有目标主机的信息、所述目标主机上日志文件所在地址的信息，以及所述目标主机上日志文件的解析规则的信息，所述目标主机为需要配置日志采集器的主机；
获取单元，用于获取与所述配置请求对应的目标模板；
生成单元，用于基于所述配置请求对所述目标模板进行渲染，生成配置文件；
发送单元，用于发送所述配置文件至所述目标主机，以使通过所述配置文件配置所述目标主机的日志采集器。
9.一种存储介质，其特征在于，所述存储介质包括存储的程序，其中，所述程序执行权利要求1至5中任意一项所述的日志采集器的配置方法。
10.一种处理器，其特征在于，所述处理器用于运行程序，其中，所述程序运行时执行权利要求1至5中任意一项所述的日志采集器的配置方法。
CN201811152302.5A 2018-09-29 2018-09-29 日志采集器的配置方法、装置及系统 Active CN110968560B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811152302.5A CN110968560B (zh) 2018-09-29 2018-09-29 日志采集器的配置方法、装置及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811152302.5A CN110968560B (zh) 2018-09-29 2018-09-29 日志采集器的配置方法、装置及系统

Publications (2)

Publication Number Publication Date
CN110968560A true CN110968560A (zh) 2020-04-07
CN110968560B CN110968560B (zh) 2023-05-23

Family

ID=70027658

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811152302.5A Active CN110968560B (zh) 2018-09-29 2018-09-29 日志采集器的配置方法、装置及系统

Country Status (1)

Country Link
CN (1) CN110968560B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112433709A (zh) * 2020-12-03 2021-03-02 深圳前海微众银行股份有限公司 基于json的数据处理方法、装置、设备及介质
CN112463772A (zh) * 2021-02-02 2021-03-09 北京信安世纪科技股份有限公司 日志处理方法、装置、日志服务器及存储介质
CN113381907A (zh) * 2021-06-04 2021-09-10 挂号网（杭州）科技有限公司 日志采集方法及装置、电子设备、存储介质
CN113687852A (zh) * 2021-09-09 2021-11-23 中国银行股份有限公司 日志采集配置文件自动生成方法及装置
CN115150166A (zh) * 2022-06-30 2022-10-04 广东电网有限责任公司 一种日志收集与分析管理系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030135663A1 (en) * 2002-01-16 2003-07-17 Sun Microsystems, Inc. Method, system, and program for including device parameters from a device driver in a configuration file
CN101964795A (zh) * 2010-09-30 2011-02-02 北京世纪互联工程技术服务有限公司 日志采集系统、日志采集方法和日志回收服务器
US20140047084A1 (en) * 2012-08-07 2014-02-13 Advanced Micro Devices, Inc. System and method for modifying a hardware configuration of a cloud computing system
CN103618692A (zh) * 2013-10-28 2014-03-05 中国航天科工集团第二研究院七〇六所 一种构建日志快速匹配的方法
CN107590188A (zh) * 2017-08-08 2018-01-16 杭州灵皓科技有限公司 一种自动化垂直细分领域的爬虫爬取方法及其管理系统
CN107948234A (zh) * 2016-10-13 2018-04-20 北京国双科技有限公司 数据的处理方法及装置
CN108563629A (zh) * 2018-03-13 2018-09-21 北京仁和诚信科技有限公司 一种日志解析规则自动生成方法和装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030135663A1 (en) * 2002-01-16 2003-07-17 Sun Microsystems, Inc. Method, system, and program for including device parameters from a device driver in a configuration file
CN101964795A (zh) * 2010-09-30 2011-02-02 北京世纪互联工程技术服务有限公司 日志采集系统、日志采集方法和日志回收服务器
US20140047084A1 (en) * 2012-08-07 2014-02-13 Advanced Micro Devices, Inc. System and method for modifying a hardware configuration of a cloud computing system
CN103618692A (zh) * 2013-10-28 2014-03-05 中国航天科工集团第二研究院七〇六所 一种构建日志快速匹配的方法
CN107948234A (zh) * 2016-10-13 2018-04-20 北京国双科技有限公司 数据的处理方法及装置
CN107590188A (zh) * 2017-08-08 2018-01-16 杭州灵皓科技有限公司 一种自动化垂直细分领域的爬虫爬取方法及其管理系统
CN108563629A (zh) * 2018-03-13 2018-09-21 北京仁和诚信科技有限公司 一种日志解析规则自动生成方法和装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
LEEMANS等: "the statechart workbench:enabling scalable software event log analysis using process mining", 《25TH IEEE INTERNATIONAL CONFERENCE ON SOFTWARE ANALYSIS，EVOLUTION AND REENGINEERING，SANER 2018 PROCEEDINGS》 *
陈和: "运用开源软件Logstash和ElasticSearch实现DSpace日志实时统计分析", 《现代图书情报技术》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112433709A (zh) * 2020-12-03 2021-03-02 深圳前海微众银行股份有限公司 基于json的数据处理方法、装置、设备及介质
CN112463772A (zh) * 2021-02-02 2021-03-09 北京信安世纪科技股份有限公司 日志处理方法、装置、日志服务器及存储介质
CN112463772B (zh) * 2021-02-02 2022-05-27 北京信安世纪科技股份有限公司 日志处理方法、装置、日志服务器及存储介质
CN113381907A (zh) * 2021-06-04 2021-09-10 挂号网（杭州）科技有限公司 日志采集方法及装置、电子设备、存储介质
CN113687852A (zh) * 2021-09-09 2021-11-23 中国银行股份有限公司 日志采集配置文件自动生成方法及装置
CN115150166A (zh) * 2022-06-30 2022-10-04 广东电网有限责任公司 一种日志收集与分析管理系统
CN115150166B (zh) * 2022-06-30 2024-03-12 广东电网有限责任公司 一种日志收集与分析管理系统

Also Published As

Publication number Publication date
CN110968560B (zh) 2023-05-23

Similar Documents

Publication Publication Date Title
CN110968560B (zh) 日志采集器的配置方法、装置及系统
US10412104B2 (en) Data protection in a networked computing environment
US11080121B2 (en) Generating runbooks for problem events
US10491621B2 (en) Website security tracking across a network
US20210294896A1 (en) Endpoint detection and response attack process tree auto-play
CN108989355B (zh) 一种漏洞检测方法和装置
US10171315B2 (en) Orchestration process template for generation of orchestration process to tolerate errors
US10049033B2 (en) Application gateway for cloud computing systems
US10025671B2 (en) Smart virtual machine snapshotting
US11960578B2 (en) Correspondence of external operations to containers and mutation events
US10223218B2 (en) Disaster recovery of managed systems
US10305936B2 (en) Security inspection of massive virtual hosts for immutable infrastructure and infrastructure as code
CN114640713B (zh) 数据访问监视和控制
CN110971571A (zh) 一种网站域名的在验证方法及相关装置
US20210042631A1 (en) Techniques for Cyber-Attack Event Log Fabrication
US20170064009A1 (en) Technology for service management applications and cloud workload migration
US20190124107A1 (en) Security management for data systems
US11526379B2 (en) Application building in a distributed computing environment
CN111241547B (zh) 一种越权漏洞的检测方法、装置及系统
KR20170122874A (ko) 데이터 분산 서비스 기반의 응용 시스템의 통합 로그 관리 장치
US11061725B2 (en) Managing a set of computing resources
CN114356616A (zh) 缓冲器溢出捕获
KR101630088B1 (ko) 가상머신의 라이프사이클 모니터링 방법 및 그 장치
CN116097259A (zh) 计算机文件元数据分割安全系统
CN108595190B (zh) 报表工具搭建方法、装置、计算机装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant