CN110502495A - 一种应用服务器的日志收集方法及装置 - Google Patents
一种应用服务器的日志收集方法及装置 Download PDFInfo
- Publication number
- CN110502495A CN110502495A CN201910822971.7A CN201910822971A CN110502495A CN 110502495 A CN110502495 A CN 110502495A CN 201910822971 A CN201910822971 A CN 201910822971A CN 110502495 A CN110502495 A CN 110502495A
- Authority
- CN
- China
- Prior art keywords
- application server
- resource status
- factor
- log collection
- monitoring data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/18—File system types
- G06F16/1805—Append-only file systems, e.g. using logs or journals to store data
- G06F16/1815—Journaling file systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer And Data Communications (AREA)
Abstract
本发明提供一种应用服务器的日志收集方法及装置，所述方法包括：周期性获取每个应用服务器的监控数据；根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；若判断获知所述当前资源状态指数大于等于捕获因子，则开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。所述装置用于执行上述方法。本发明实施例提供的应用服务器的日志收集方法及装置，提高了应用服务器日志收集的及时性。
Description
技术领域
本发明涉及计算机技术领域，具体涉及一种应用服务器的日志收集方法及装置。
背景技术
日志是系统的重要组成部分，它可以记录下系统所产生的所有行为，尤其是对异常行为的记录，便于后续分析排查问题。
现有技术中，应用服务器大多采用IBM WAS、Weblogic、Tomcat等中间件收集日志，为了不影响应用在线性能，日志级别通常设置得比较低。当出现问题时，只能根据问题描述情况，针对性提高日志收集级别，添加相应日志收集参数，并长时间开启全方位日志收集功能，以便收集应用服务器异常状态下的详细情况。该日志收集方法存在如下问题：(1)日志的收集过程需要大量的人工操作。随着应用从集中式向分布式发展，应用服务器数量呈几何级增长，这将对运维人员增加相当的压力；(2)不能第一时间收集到异常状态的详细信息，需事后根据经验值开启日志后，等下一次问题出现时才能收集到异常状态下的详细信息；(3)需长时间开启级别较高的日志收集功能，影响应用服务器的在线性能，耗费系统资源；(4)日志的收集过多过泛，对异常状态的日志的定位造成麻烦，耗费在线分析时间；(5)容器云化后，容器空间有限，如果长时间开启日志收集功能，会出现日志过大，使空间快速耗尽，导致异常宕机。
发明内容
针对现有技术中的问题，本发明实施例提供一种应用服务器的日志收集方法及装置，能够至少部分地解决现有技术中存在的问题。
一方面，本发明提出一种应用服务器的日志收集方法，包括：
周期性获取每个应用服务器的监控数据；
根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；
若判断获知所述当前资源状态指数大于等于捕获因子，则开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
另一方面，本发明提供一种应用服务器的日志收集装置，包括：
获取单元，用于周期性获取每个应用服务器的监控数据；
获得单元，用于根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；
开启单元，用于在判断获知所述当前资源状态指数大于等于捕获因子之后，开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
再一方面，本发明提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述任一实施例所述应用服务器的日志收集方法的步骤。
又一方面，本发明提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述任一实施例所述应用服务器的日志收集方法的步骤。
本发明实施例提供的应用服务器的日志收集方法及装置，能够获取每个应用服务器的监控数据，然后根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数，在判断获知当前资源状态指数大于等于捕获因子之后，开启当前资源状态指数对应的应用服务器的日志收集，避免应用服务器出现异常之后再收集应用服务器的日志，提高了应用服务器日志收集的及时性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。在附图中：
图1是本发明一实施例提供的应用服务器的日志收集系统的结构示意图。
图2是本发明一实施例提供的应用服务器的日志收集方法的流程示意图。
图3是本发明另一实施例提供的应用服务器的日志收集方法的流程示意图。
图4是本发明又一实施例提供的应用服务器的日志收集方法的流程示意图。
图5是本发明一实施例提供的应用服务器的日志收集装置的结构示意图。
图6是本发明另一实施例提供的应用服务器的日志收集装置的结构示意图。
图7是本发明又一实施例提供的应用服务器的日志收集装置的结构示意图。
图8是本发明一实施例提供的电子设备的实体结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚明白，下面结合附图对本发明实施例做进一步详细说明。在此，本发明的示意性实施例及其说明用于解释本发明，但并不作为对本发明的限定。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互任意组合。
图1是本发明一实施例提供的应用服务器的日志收集系统的结构示意图，如图1所示，本发明实施例提供的应用服务器的日志收集系统包括监控服务器1、日志收集控制服务器2和至少一个应用服务器3，监控服务器1和日志收集控制服务器2通信连接，每个应用服务器3分别与监控服务器1和日志收集控制服务器2通信连接。监控服务器1可以定时从每个应用服务器3采集每个应用服务器3的监控数据，所述监控数据可以包括应用服务器3的中央处理器(Central Processing Unit，简称CPU)利用率、内存状态、数据库连接数、http请求数、http响应状态、虚拟机状态等。日志收集控制服务器2可以周期性从监控服务器1获得每个应用服务器3的监控数据。日志收集控制服务器2执行本发明实施例提供的应用服务器的日志收集方法，以判断每个应用服务器3是否需要开启日志收集，使需要开启日志收集的应用服务器3能够开启日志收集功能，提高了日志收集的及时性。进一步地，日志收集控制服务器2还可以判断已经开启日志收集的应用服务器是否需要关闭日志收集，使需要关闭日志收集的应用服务器3能够关闭日志收集功能，提高了日志收集的准确性。此外，由于不需要长期开启应用服务器的日志收集功能，降低了应用服务器的性能开销，节约了应用服务器的资源，同时节省了磁盘空间。其中，日志收集控制服务器2包括但不限于服务器。
图2是本发明一实施例提供的应用服务器的日志收集方法的流程示意图，如图2所示，本发明实施例提供的应用服务器的日志收集方法，包括：
S201、周期性获取每个应用服务器的监控数据；
具体地，日志收集控制服务器可以从监控服务器周期性获取每个应用服务器的监控数据，所述监控数据可以包括所述应用服务器的CPU利用率、内存状态、数据库连接数、http请求数、http响应状态、虚拟机状态等数据。其中，所述周期性根据实际需要进行设置，本发明实施例不做限定。
例如，所述监控服务器每分钟采集一次各个所述应用服务器的监控数据，所述日志收集控制服务器每分钟从所述监控服务器获取一次各个所述应用服务器的监控数据。所述日志收集控制服务器获取监控数据的时间点可以在所述监控服务器采集监控数据的时间点之后预设时间，从而保证所述日志收集控制服务器能够及时获取到所述监控服务器采集到的各个所述应用服务器的最新监控数据。其中，所述预设时间，比如为5s，根据实际经验进行设置，本发明实施例不做限定。
S202、根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；
具体地，所述日志收集控制服务器在获得每个应用服务器的监控数据之后，可以根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数，所述当前资源状态指数用于表示对应的应用服务器的状态，所述当前资源状态指数越大表明对应的应用服务器状态异常的概率越大。其中，由于每个应用服务器的监控数据会发生变化，每个应用服务器的当前资源状态指数也会进行更新。
例如，所述日志收集控制服务器可以根据所述应用服务器的监控数据包括的CPU利用率，计算出中央处理器饥饿因子，可以根据所述监控数据包括的内存状态，计算出内存溢出错误因子，根据所述监控数据包括的数据库连接数，计算出网络空闲连接因子。然后根据中央处理器饥饿因子、内存溢出错误因子和网络空闲连接因子以及各自对应的权重值，计算获得所述应用服务器的当前资源状态指数。
S203、若判断获知所述当前资源状态指数大于等于捕获因子，则开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
具体地，所述日志收集控制服务器在获得每个应用服务器的当前资源状态指数之后，将每个应用服务器的当前资源状态指数与捕获因子进行比较，如果所述当前资源状态指数大于等于所述捕获因子，说明对应的应用服务器的状态将会出现异常，需要对应用服务器的状态从正常变化到异常的过程日志进行收集，那么所述日志收集控制服务器可以发送触发命令至所述当前资源状态指数对应的应用服务器，使所述当前资源状态指数对应的应用服务器启动日志记录组件，从而开启所述当前资源状态指数对应的应用服务器的日志收集，以日志的形式记录所述当前资源状态指数对应的应用服务器的状态。其中，所述触发命令是预设的；所述捕获因子是预设的，根据实际经验进行设置，本发明实施例不做限定。
可理解的是，应用服务器单位时间内处理的业务请求的数量有高有低，在业务高峰时段，应用服务器会比较繁忙，会处理大量的业务请求；在其它时段，处理的业务请求的数量较少。应用服务器的异常状态容易出现在业务高峰的时段，为了节约系统资源和成本，可以在业务高峰时段启动日志收集控制服务器执行本发明实施例提供的应用服务器的日志收集方法，在业务高峰时段以外的时段日志收集控制服务器处于关闭或者休眠状态。其中，所述业务高峰时段根据实际经验进行设置，本发明实施例不做限定。
本发明实施例提供的应用服务器的日志收集方法，能够获取每个应用服务器的监控数据，然后根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数，在判断获知当前资源状态指数大于等于捕获因子之后，开启当前资源状态指数对应的应用服务器的日志收集，避免应用服务器出现异常之后再收集应用服务器的日志，提高了应用服务器日志收集的及时性。
图3是本发明另一实施例提供的应用服务器的日志收集方法的流程示意图，如图3所示，在上述各实施例的基础上，进一步地，本发明实施例提供的应用服务器的日志收集方法还包括：
S204、若判断获知开启日志收集的应用服务器的当前资源状态指数小于释放因子，则关闭所述开启日志收集的应用服务器的日志收集；其中，所述释放因子是预设的。
具体地，在所述当前资源状态指数对应的应用服务器开启所述日志收集之后，所述日志收集控制服务器会继续从所述监控服务器获得每个应用服务器的监控数据，由于每个应用服务器的监控数据是所述监控服务器定时获取的，每个应用服务器的监控数据会发生变化，所述日志收集控制服务器会根据变化后的每个应用服务器的监控数据，更新每个应用服务器的当前资源状态指数。然后，所述日志收集控制服务器将开启日志收集的应用服务器的当前资源状态指数与释放因子进行比较，如果开启日志收集的应用服务器的当前资源状态指数小于所述释放因子，说明应用服务器已经从异常状态恢复到正常状态，所述日志收集控制服务器可以发送关闭命令至开启日志收集的应用服务器，使所述当前资源状态指数对应的应用服务器关闭日志记录组件，从而关闭所述开启日志收集的应用服务器的日志收集。其中，所述关闭命令是预设的；所述释放因子是预设的，根据实际经验进行设置，本发明实施例不做限定。
本发明实施例提供的应用服务器的日志收集方法，由于设置了应用服务器的日志收集的开启条件和结束条件，可以收集到应用服务器的状态发生异常前后一段时间内的详细日志，从而提高了应用服务器的日志收集的准确性。收集到的日志可供开发及运维人员分析应用服务器状态异常的原因，由于收集到的是异常前后一段时间内的日志，可以提高日志分析的效率。
图4是本发明又一实施例提供的应用服务器的日志收集方法的流程示意图，如图4所示，在上述各实施例的基础上，进一步地，所述根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数包括：
S2021、获取当前时间点之前所述应用服务器的N个采样时间点的监控数据；
具体地，由于所述监控服务器会定时从每个应用服务器采集每个应用服务器的监控数据，可以将所述监控服务器器定时采集的时间作为采样时间点，每个采样时间点采集到的应用服务器的监控数据即为所述应用服务器的采样时间点的监控数据。所述日志收集控制服务器会从所述监控服务器获取每个应用服务器的监控数据，将所述日志收集控制服务器的获取时间作为当前时间点。所述日志收集控制服务器可以从所述监控服务器获取所述当前时间点之前所述应用服务器的N个采样时间点的监控数据。其中，N为正整数，根据实际需要进行设置，本发明实施例不做限定。
S2022、根据N个采样时间点的监控数据，获得所述应用服务器在当前时间点的资源状态参数；
具体地，所述日志收集控制服务器在获得N个采样时间点的监控数据之后，可以对N个采样时间点的监控数据进行处理，获得所述应用服务器在当前时间点的资源状态参数。其中，所述资源状态参数根据实际需要进行设置，本发明实施例不做限定。
例如，所述资源状态参数可以包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的至少一个。
例如，所述资源状态参数包括中央处理器饥饿因子，所述日志收集控制服务器获得的N个采样时间点的监控数据包括的CPU的利用率，所述日志收集控制服务器将N个采样时间点中每个采样时间点的CPU的利用率与第一阈值进行比较，并统计N个采样时间点的CPU的利用率大于所述第一阈值的个数n1，所述中央处理器饥饿因子P1＝n1/N。其中，所述第一阈值根据实际经验进行设置，比如设置为85％，本发明实施例不做限定。
例如，所述资源状态参数包括内存溢出错误因子，所述日志收集控制服务器获得的N个采样时间点的监控数据包括的单位时间内内存溢出错误次数，所述日志收集控制服务器将N个采样时间点中每个采样时间点的单位时间内内存溢出错误次数与第二阈值进行比较，并统计N个采样时间点的单位时间内内存溢出错误次数大于所述第二阈值的个数n2，所述内存溢出错误因子P2＝n2/N。其中，所述第二阈值根据实际经验进行设置，本发明实施例不做限定。
例如，所述资源状态参数包括网络空闲连接因子，所述日志收集控制服务器获得的N个采样时间点的监控数据包括的网络空闲连接数，所述日志收集控制服务器将N个采样时间点中每个采样时间点的网络空闲连接数与第三阈值进行比较，并统计N个采样时间点的网络空闲连接数大于所述第三阈值的个数n3，所述网络空闲连接因子P3＝n3/N。其中，所述第三阈值根据实际经验进行设置，本发明实施例不做限定。
例如，所述资源状态参数包括请求发送因子，所述日志收集控制服务器获得的N个采样时间点的监控数据包括http请求数Q和http请求成功的数量q，所述日志收集控制服务器计算每个采样时间点的http请求成功的数量q与http请求数Q的比值k，然后将N个采样时间点中每个采样时间点的比值k与第五阈值进行比较，并统计N个采样时间点的比值k小于所述第五阈值的个数n4，所述请求发送因子P4＝n4/N。其中，所述第五阈值根据实际经验进行设置，本发明实施例不做限定。
例如，所述资源状态参数包括请求响应因子，所述日志收集控制服务器获得的N个采样时间点的监控数据包括http响应数A和http响应成功的数量a，所述日志收集控制服务器计算每个采样时间点的http响应成功的数量a与http响应数A的比值i，然后将N个采样时间点中每个采样时间点的比值i与第六阈值进行比较，并统计N个采样时间点的比值i小于所述第六阈值的个数n5，所述请求发送因子P5＝n5/N。其中，所述第六阈值根据实际经验进行设置，本发明实施例不做限定。
S2023、根据所述应用服务器在所述当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数。
具体地，所述日志收集控制服务器在获得所述应用服务器在所述当前时间点的资源状态参数之后，可以根据所述应用服务器在所述当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数。
例如，所述应用服务器在所述当前时间点的资源状态参数包括所述中央处理器饥饿因子P1、所述内存溢出错误因子P2和所述网络空闲连接因子P3，那么所述应用服务器的当前资源状态指数E＝ω1P1+ω2P2+ω3P3，其中，ω1为所述中央处理器饥饿因子P1的权重值，ω2为所述内存溢出错误因子P2的权重值，ω3为所述网络空闲连接因子P3的权重值，ω1、ω2和ω3根据实际经验进行设置，本发明实施例不做限定。
在上述各实施例的基础上，进一步地，所述根据所述应用服务器在当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数包括：
根据各个所述资源状态参数以及各自对应的权重值，获得所述当前资源状态指数。
具体地，所述日志收集控制服务器计算各个所述资源状态参数以及各自对应的权重值乘积，将乘积的结果作为所述当前资源状态指数。其中，每个所述资源状态参数的权重值表示该资源状态参数对日志需求的概率，即由于该资源状态参数超标所导致的开启应用服务器的日志收集的概率。各个权重值根据实际经验进行设置，本发明实施例不做限定。
例如，将第j个所述资源状态参数表示为Pj，将第j个所述资源状态参数的权重值表示ωj，那么所述当前资源状态指数其中，j为正整数且j小于等于M，M为所述资源状态参数的数量。
在上述各实施例的基础上，进一步地，所述资源状态参数包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的至少一个。
具体地，所述资源状态参数可以包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的一个，也可以包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的任意多个。其中，所述资源状态参数的数量根据实际情况进行设置，本发明实施例不做限定。
图5是本发明一实施例提供的应用服务器的日志收集装置的结构示意图，如图5所示，本发明实施例提供的应用服务器的日志收集装置包括获取单元501、获得单元502和开启单元503，其中：
获取单元501用于周期性获取每个应用服务器的监控数据；获得单元502用于根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；开启单元503用于在判断获知所述当前资源状态指数大于等于捕获因子之后，开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
具体地，获取单元501可以从监控服务器周期性获取每个应用服务器的监控数据，所述监控数据可以包括所述应用服务器的CPU利用率、内存状态、数据库连接数、http请求数、http响应状态、虚拟机状态等数据。其中，所述周期性根据实际需要进行设置，本发明实施例不做限定。
在获得每个应用服务器的监控数据之后，获得单元502可以根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数，所述当前资源状态指数用于表示对应的应用服务器的状态，所述当前资源状态指数越大表明对应的应用服务器状态异常的概率越大。其中，由于每个应用服务器的监控数据会发生变化，每个应用服务器的当前资源状态指数也会进行更新。
在获得每个应用服务器的当前资源状态指数之后，开启单元503将每个应用服务器的当前资源状态指数与捕获因子进行比较，如果所述当前资源状态指数大于等于所述捕获因子，说明对应的应用服务器的状态将会出现异常，需要对应用服务器的状态从正常变化到异常的过程日志进行收集，那么所述日志收集控制服务器可以发送触发命令至所述当前资源状态指数对应的应用服务器，使所述当前资源状态指数对应的应用服务器启动日志记录组件，从而开启所述当前资源状态指数对应的应用服务器的日志收集，以日志的形式记录所述当前资源状态指数对应的应用服务器的状态。其中，所述触发命令是预设的；所述捕获因子是预设的，根据实际经验进行设置，本发明实施例不做限定。
本发明实施例提供的应用服务器的日志收集装置，能够获取每个应用服务器的监控数据，然后根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数，在判断获知当前资源状态指数大于等于捕获因子之后，开启当前资源状态指数对应的应用服务器的日志收集，避免应用服务器出现异常之后再收集应用服务器的日志，提高了应用服务器日志收集的及时性。
图6是本发明另一实施例提供的应用服务器的日志收集装置的结构示意图，如图6所示，在上述各实施例的基础上，进一步地，本发明实施例提供的应用服务器的日志收集装置还包括关闭单元504，其中：
关闭单元504用于在判断获知开启日志收集的应用服务器的当前资源状态指数小于释放因子之后，关闭所述开启日志收集的应用服务器的日志收集；其中，所述释放因子是预设的。
具体地，在所述当前资源状态指数对应的应用服务器开启所述日志收集之后，获取单元501会继续从所述监控服务器获得每个应用服务器的监控数据，由于每个应用服务器的监控数据是所述监控服务器定时获取的，每个应用服务器的监控数据会发生变化，获得单元502会根据变化后的每个应用服务器的监控数据，更新每个应用服务器的当前资源状态指数。然后，关闭单元504将开启日志收集的应用服务器的当前资源状态指数与释放因子进行比较，如果开启日志收集的应用服务器的当前资源状态指数小于所述释放因子，说明应用服务器已经从异常状态恢复到正常状态，关闭单元504可以发送关闭命令至开启日志收集的应用服务器，使所述当前资源状态指数对应的应用服务器关闭日志记录组件，从而关闭所述开启日志收集的应用服务器的日志收集。其中，所述关闭命令是预设的；所述释放因子是预设的，根据实际经验进行设置，本发明实施例不做限定。
本发明实施例提供的应用服务器的日志收集装置，由于设置了应用服务器的日志收集的开启条件和结束条件，可以收集到应用服务器的状态发生异常前后一段时间内的详细日志，从而提高了应用服务器的日志收集的准确性。收集到的日志可供开发及运维人员分析应用服务器状态异常的原因，由于收集到的是异常前后一段时间内的日志，可以提高日志分析的效率。
图7是本发明又一实施例提供的应用服务器的日志收集装置的结构示意图，如图7所示，在上述各实施例的基础上，进一步地，获得单元502包括获取子单元5021、第一获得子单元5022和第二获得子单元5023，其中：
获取子单元5021用于获取当前时间点之前所述应用服务器的N个采样时间点的监控数据；第一获得子单元5022用于根据N个采样时间点的监控数据，获得所述应用服务器在所述当前时间点的资源状态参数；第二获得子单元5023用于根据所述应用服务器在所述当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数。
具体地，由于所述监控服务器会定时从每个应用服务器采集每个应用服务器的监控数据，可以将所述监控服务器器定时采集的时间作为采样时间点，每个采样时间点采集到的应用服务器的监控数据即为所述应用服务器的采样时间点的监控数据。获取子单元5021会获取每个应用服务器的监控数据，将所述日志收集控制服务器的获取时间作为当前时间点。获取子单元5021可以获取所述当前时间点之前所述应用服务器的N个采样时间点的监控数据。其中，N为正整数，根据实际需要进行设置，本发明实施例不做限定。
在获得N个采样时间点的监控数据之后，第一获得子单元5022可以对N个采样时间点的监控数据进行处理，获得所述应用服务器在当前时间点的资源状态参数。其中，所述资源状态参数根据实际需要进行设置，本发明实施例不做限定。
在获得所述应用服务器在所述当前时间点的资源状态参数之后，第二获得子单元5023可以根据所述应用服务器在所述当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数。
在上述各实施例的基础上，进一步地，第二获得子单元5022具体用于：
根据各个所述资源状态参数以及各自对应的权重值，获得所述当前资源状态指数。
具体地，第二获得子单元5022计算各个所述资源状态参数以及各自对应的权重值乘积，将乘积的结果作为所述当前资源状态指数。其中，每个所述资源状态参数的权重值表示该资源状态参数对日志需求的概率，即由于该资源状态参数超标所导致的开启应用服务器的日志收集的概率。各个权重值根据实际经验进行设置，本发明实施例不做限定。
在上述各实施例的基础上，进一步地，所述资源状态参数包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的至少一个。
具体地，所述资源状态参数可以包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的一个，也可以包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的任意多个。其中，所述资源状态参数的数量根据实际情况进行设置，本发明实施例不做限定。
本发明实施例提供的装置的实施例具体可以用于执行上述各方法实施例的处理流程，其功能在此不再赘述，可以参照上述方法实施例的详细描述。
图8是本发明一实施例提供的电子设备的实体结构示意图，如图8所示，该电子设备可以包括：处理器(processor)801、通信接口(Communications Interface)802、存储器(memory)803和通信总线804，其中，处理器801，通信接口802，存储器803通过通信总线804完成相互间的通信。处理器801可以调用存储器803中的逻辑指令，以执行如下方法：周期性获取每个应用服务器的监控数据；根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；若判断获知所述当前资源状态指数大于等于捕获因子，则开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
此外，上述的存储器803中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本实施例公开一种计算机程序产品，所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法实施例所提供的方法，例如包括：周期性获取每个应用服务器的监控数据；根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；若判断获知所述当前资源状态指数大于等于捕获因子，则开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
本实施例提供一种计算机可读存储介质，所述计算机可读存储介质存储计算机程序，所述计算机程序使所述计算机执行上述各方法实施例所提供的方法，例如包括：周期性获取每个应用服务器的监控数据；根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；若判断获知所述当前资源状态指数大于等于捕获因子，则开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在本说明书的描述中，参考术语“一个实施例”、“一个具体实施例”、“一些实施例”、“例如”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中，对上述术语的示意性表述不一定指的是相同的实施例或示例。而且，描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (12)
1.一种应用服务器的日志收集方法，其特征在于，包括：
周期性获取每个应用服务器的监控数据；
根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；
若判断获知所述当前资源状态指数大于等于捕获因子，则开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
2.根据权利要求1所述的方法，其特征在于，还包括：
若判断获知开启日志收集的应用服务器的当前资源状态指数小于释放因子，则关闭所述开启日志收集的应用服务器的日志收集；其中，所述释放因子是预设的。
3.根据权利要求1所述的方法，其特征在于，所述根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数包括：
获取当前时间点之前所述应用服务器的N个采样时间点的监控数据；
根据N个采样时间点的监控数据，获得所述应用服务器在所述当前时间点的资源状态参数；
根据所述应用服务器在所述当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数。
4.根据权利要求3所述的方法，其特征在于，所述根据所述应用服务器在当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数包括：
根据各个所述资源状态参数以及各自对应的权重值，获得所述当前资源状态指数。
5.根据权利要求3或4所述的方法，其特征在于，所述资源状态参数包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的至少一个。
6.一种应用服务器的日志收集装置，其特征在于，包括：
获取单元，用于周期性获取每个应用服务器的监控数据；
获得单元，用于根据每个应用服务器的监控数据，获得每个应用服务器的当前资源状态指数；
开启单元，用于在判断获知所述当前资源状态指数大于等于捕获因子之后，开启所述当前资源状态指数对应的应用服务器的日志收集；其中，所述捕获因子是预设的。
7.根据权利要求6所述的装置，其特征在于，还包括：
关闭单元，用于在判断获知开启日志收集的应用服务器的当前资源状态指数小于释放因子之后，关闭所述开启日志收集的应用服务器的日志收集；其中，所述释放因子是预设的。
8.根据权利要求6所述的装置，其特征在于，所述获得单元包括：
获取子单元，用于获取当前时间点之前所述应用服务器的N个采样时间点的监控数据；
第一获得子单元，用于根据N个采样时间点的监控数据，获得所述应用服务器在所述当前时间点的资源状态参数；
第二获得子单元，用于根据所述应用服务器在所述当前时间点的资源状态参数，获得所述应用服务器的当前资源状态指数。
9.根据权利要求8所述的装置，其特征在于，所述第二获得子单元具体用于：
根据各个所述资源状态参数以及各自对应的权重值，获得所述当前资源状态指数。
10.根据权利要求8或9所述的装置，其特征在于，所述资源状态参数包括中央处理器饥饿因子、内存溢出错误因子、网络空闲连接因子、请求发送因子和请求响应因子中的至少一个。
11.一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5任一项所述方法的步骤。
12.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至5任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910822971.7A CN110502495A (zh) | 2019-09-02 | 2019-09-02 | 一种应用服务器的日志收集方法及装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910822971.7A CN110502495A (zh) | 2019-09-02 | 2019-09-02 | 一种应用服务器的日志收集方法及装置 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110502495A true CN110502495A (zh) | 2019-11-26 |
Family
ID=68590971
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910822971.7A Pending CN110502495A (zh) | 2019-09-02 | 2019-09-02 | 一种应用服务器的日志收集方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110502495A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113971187A (zh) * | 2020-07-24 | 2022-01-25 | 中移物联网有限公司 | 一种服务监控方法及装置 |
| CN115242623A (zh) * | 2022-07-25 | 2022-10-25 | 济南浪潮数据技术有限公司 | 一种日志收集方法、装置、设备及存储介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103176888A (zh) * | 2011-12-22 | 2013-06-26 | 阿里巴巴集团控股有限公司 | 一种日志记录的方法和系统 |
| US20130246001A1 (en) * | 2010-10-29 | 2013-09-19 | Fujitsu Limited | Device monitoring system and method |
| CN108599992A (zh) * | 2018-03-21 | 2018-09-28 | 四川斐讯信息技术有限公司 | 一种数据处理系统及方法 |
| CN109298990A (zh) * | 2018-10-17 | 2019-02-01 | 平安科技（深圳）有限公司 | 日志存储方法、装置、计算机设备及存储介质 |
-
2019
- 2019-09-02 CN CN201910822971.7A patent/CN110502495A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20130246001A1 (en) * | 2010-10-29 | 2013-09-19 | Fujitsu Limited | Device monitoring system and method |
| CN103176888A (zh) * | 2011-12-22 | 2013-06-26 | 阿里巴巴集团控股有限公司 | 一种日志记录的方法和系统 |
| CN108599992A (zh) * | 2018-03-21 | 2018-09-28 | 四川斐讯信息技术有限公司 | 一种数据处理系统及方法 |
| CN109298990A (zh) * | 2018-10-17 | 2019-02-01 | 平安科技（深圳）有限公司 | 日志存储方法、装置、计算机设备及存储介质 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113971187A (zh) * | 2020-07-24 | 2022-01-25 | 中移物联网有限公司 | 一种服务监控方法及装置 |
| CN115242623A (zh) * | 2022-07-25 | 2022-10-25 | 济南浪潮数据技术有限公司 | 一种日志收集方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112162865B (zh) | 服务器的调度方法、装置和服务器 | |
| CN108776934B (zh) | 分布式数据计算方法、装置、计算机设备及可读存储介质 | |
| JP5313990B2 (ja) | 応答時間に基づいてサービスリソース消費を推定すること | |
| CN107247651B (zh) | 云计算平台监测预警方法和系统 | |
| CN107592345B (zh) | 交易限流装置、方法及交易系统 | |
| CN104102543B (zh) | 一种云计算环境中负载调整的方法和装置 | |
| CN109981744B (zh) | 数据的分发方法、装置、存储介质及电子设备 | |
| CN105893541B (zh) | 一种基于混合存储的流式数据自适应持久化方法及系统 | |
| US20110016469A1 (en) | Deleting data stream overload | |
| CN106470123B (zh) | 日志收集方法、客户端、服务器和电子设备 | |
| US10305974B2 (en) | Ranking system | |
| CN110502495A (zh) | 一种应用服务器的日志收集方法及装置 | |
| CN114070791B (zh) | 数据流量的限速处理方法及装置 | |
| CN100405306C (zh) | 程序排程系统及方法 | |
| CN110796591B (zh) | 一种gpu卡的使用方法及相关设备 | |
| Russo et al. | MEAD: Model-based vertical auto-scaling for data stream processing | |
| CN114358134A (zh) | 一种高并发自动扩缩容方法、系统、计算机设备及介质 | |
| CN111124310B (zh) | 存储系统调度优化方法及相关组件 | |
| CN116069618A (zh) | 一种面向应用场景的国产化系统评估方法 | |
| CN115883392A (zh) | 算力网络的数据感知方法、装置、电子设备及存储介质 | |
| CN115314400A (zh) | 网络系统异常检测方法、装置、电子设备及存储介质 | |
| CN114936089A (zh) | 资源调度方法、系统、设备及存储介质 | |
| CN115190027A (zh) | 一种基于网络数字孪生体的自然故障生存性评估方法 | |
| CN112579257A (zh) | 一种虚拟中央处理器核心的调度方法、装置及相关设备 | |
| CN110493071B (zh) | 消息系统资源均衡装置、方法及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191126 |