CN114338764B - 一种非侵入式web应用活跃度监测方法及系统 - Google Patents

一种非侵入式web应用活跃度监测方法及系统 Download PDF

Info

Publication number
CN114338764B
CN114338764B CN202111405420.4A CN202111405420A CN114338764B CN 114338764 B CN114338764 B CN 114338764B CN 202111405420 A CN202111405420 A CN 202111405420A CN 114338764 B CN114338764 B CN 114338764B
Authority
CN
China
Prior art keywords
liveness
application
log
activity
load balancing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111405420.4A
Other languages
English (en)
Other versions
CN114338764A (zh
Inventor
董昌朝
庄莉
梁懿
黄杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Information and Telecommunication Co Ltd
Fujian Yirong Information Technology Co Ltd
Great Power Science and Technology Co of State Grid Information and Telecommunication Co Ltd
Original Assignee
State Grid Information and Telecommunication Co Ltd
Fujian Yirong Information Technology Co Ltd
Great Power Science and Technology Co of State Grid Information and Telecommunication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Information and Telecommunication Co Ltd, Fujian Yirong Information Technology Co Ltd, Great Power Science and Technology Co of State Grid Information and Telecommunication Co Ltd filed Critical State Grid Information and Telecommunication Co Ltd
Priority to CN202111405420.4A priority Critical patent/CN114338764B/zh
Publication of CN114338764A publication Critical patent/CN114338764A/zh
Application granted granted Critical
Publication of CN114338764B publication Critical patent/CN114338764B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Debugging And Monitoring (AREA)

Abstract

本发明提供了网络应用服务技术领域的一种非侵入式WEB应用活跃度监测方法及系统,方法包括如下步骤:步骤S10、在监控设备创建一活跃度计算规则;步骤S20、监控设备基于安装的监控探针,分别获取应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;步骤S30、基于所述活跃度计算规则、应用系统日志、数据库日志以及负载均衡日志计算得到第一活跃度、第二活跃度以及第三活跃度;步骤S40、基于所述第一活跃度、第二活跃度以及第三活跃度计算得到WEB应用活跃度。本发明的优点在于:实现在不影响应用服务器性能的前提下,对WEB应用活跃度进行批量的监测,进而极大的提升了WEB应用活跃度监测的质量和效率。

Description

一种非侵入式WEB应用活跃度监测方法及系统
技术领域
本发明涉及网络应用服务技术领域,特别指一种非侵入式WEB应用活跃度监测方法及系统。
背景技术
为了进行更好的资源调度,需要对WEB应用的活跃度进行监测。针对WEB应用的活跃度监测,传统上存在如下两种方法:
方法一:在WEB应用部署的应用服务器植入探针,并拦截WEB应用的应用请求,通过探针定期收集各项数据,监视和跟踪应用服务器的cpu负载、内存、硬盘等的使用情况,并将监控数据存储到数据库服务器,数据库服务器基于监控数据在前端进行展现和绘图。但是,该方法对环境依赖性较高,且植入探针会影响应用服务器的性能,针对非生产的测试系统来说植入探针的成本较高。
方法二:基于数据库的活跃度监测,该方法需要连接WEB应用使用的数据库,并采集数据库的用户登录数据与连接数据,通过用户活跃度来判断WEB应用的活跃情况,该方法需要针对单个WEB应用进行定制性监测脚本开发,不适用于大规模监测。
因此,如何提供一种非侵入式WEB应用活跃度监测方法及系统,实现在不影响应用服务器性能的前提下,对WEB应用活跃度进行批量的监测,成为一个亟待解决的技术问题。
发明内容
本发明要解决的技术问题,在于提供一种非侵入式WEB应用活跃度监测方法及系统,实现在不影响应用服务器性能的前提下,对WEB应用活跃度进行批量的监测。
第一方面,本发明提供了一种非侵入式WEB应用活跃度监测方法,包括如下步骤:
步骤S10、在监控设备创建一活跃度计算规则;
步骤S20、监控设备基于安装的监控探针,分别获取应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
步骤S30、基于所述活跃度计算规则、应用系统日志、数据库日志以及负载均衡日志计算得到第一活跃度、第二活跃度以及第三活跃度;
步骤S40、基于所述第一活跃度、第二活跃度以及第三活跃度计算得到WEB应用活跃度。
进一步地,所述步骤S10中,所述活跃度计算规则具体为:
将存在秒级访问的WEB应用标记为高频应用,存在小时级访问的WEB应用标记为低频应用,7天以上无连接的WEB应用标记为沉默应用,并分别设定所述高频应用、低频应用以及沉默应用对应的活跃度。
进一步地,所述步骤S20具体为:
监控设备基于安装的监控探针,分别周期性的获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
所述应用系统日志用于记录WEB应用宿主机中CPU、磁盘以及网络的使用情况;所述数据库日志用于记录会话活动进程的系统视图;所述负载均衡日志用于记录WEB应用负载均衡请求的请求时间、返回状态码以及IP地址。
进一步地,所述步骤S30具体为:
监控设备基于所述活跃度计算规则分别对应用系统日志、数据库日志以及负载均衡日志进行活跃度计算,得到第一活跃度、第二活跃度以及第三活跃度。
进一步地,所述步骤S40具体为:
监控设备基于预设的权重对所述第一活跃度、第二活跃度以及第三活跃度进行加权计算得到WEB应用活跃度。
第二方面,本发明提供了一种非嵌入式WEB应用活跃度监测系统,包括如下模块:
活跃度计算规则创建模块,用于在监控设备创建一活跃度计算规则;
日志获取模块,用于监控设备基于安装的监控探针,分别获取应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
活跃度计算模块,用于基于所述活跃度计算规则、应用系统日志、数据库日志以及负载均衡日志计算得到第一活跃度、第二活跃度以及第三活跃度;
活跃度统计模块,用于基于所述第一活跃度、第二活跃度以及第三活跃度计算得到WEB应用活跃度。
进一步地,所述活跃度计算规则创建模块中,所述活跃度计算规则具体为:
将存在秒级访问的WEB应用标记为高频应用,存在小时级访问的WEB应用标记为低频应用,7天以上无连接的WEB应用标记为沉默应用,并分别设定所述高频应用、低频应用以及沉默应用对应的活跃度。
进一步地,所述日志获取模块具体为:
监控设备基于安装的监控探针,分别周期性的获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
所述应用系统日志用于记录WEB应用宿主机中CPU、磁盘以及网络的使用情况;所述数据库日志用于记录会话活动进程的系统视图;所述负载均衡日志用于记录WEB应用负载均衡请求的请求时间、返回状态码以及IP地址。
进一步地,所述活跃度计算模块具体为:
监控设备基于所述活跃度计算规则分别对应用系统日志、数据库日志以及负载均衡日志进行活跃度计算,得到第一活跃度、第二活跃度以及第三活跃度。
进一步地,所述活跃度统计模块具体为:
监控设备基于预设的权重对所述第一活跃度、第二活跃度以及第三活跃度进行加权计算得到WEB应用活跃度。
本发明的优点在于:
通过在监控设备上安装监控探针,利用监控探针获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志,进而利用应用系统日志、数据库日志以及负载均衡日志进行WEB应用活跃度的计算,即不必像传统上将监控探针植入应用服务器,不会对应用服务器的性能造成影响,且可批量的获取处于同一网络下的日志进行批量的活跃度计算,最终实现在不影响应用服务器性能的前提下,对WEB应用活跃度进行批量的监测,进而极大的提升了WEB应用活跃度监测的质量和效率。
附图说明
下面参照附图结合实施例对本发明作进一步的说明。
图1是本发明一种非侵入式WEB应用活跃度监测方法的流程图。
图2是本发明一种非嵌入式WEB应用活跃度监测系统的结构示意图。
图3是本发明的硬件架构图。
具体实施方式
本申请实施例中的技术方案,总体思路如下:通过在监控设备上安装监控探针,利用监控探针获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的日志用于WEB应用活跃度的计算,不必将监控探针植入应用服务器,避免对应用服务器的性能造成影响,且可批量的获取处于同一网络下的日志进行批量的活跃度计算,不必针对单个WEB应用进行定制性监测脚本开发,以实现对WEB应用活跃度进行批量的监测。
请参照图1至图3所示,本发明一种非侵入式WEB应用活跃度监测方法的较佳实施例,包括如下步骤:
步骤S10、在监控设备创建一活跃度计算规则;
步骤S20、监控设备基于安装的监控探针,分别获取应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;所述监控探针于WEB应用部署在相同的网络中,通将所述监控探针安装于独立于应用服务器的监控设备上,进而进行非侵入式WEB应用活跃度监测;
步骤S30、基于所述活跃度计算规则、应用系统日志、数据库日志以及负载均衡日志计算得到第一活跃度、第二活跃度以及第三活跃度;
步骤S40、基于所述第一活跃度、第二活跃度以及第三活跃度计算得到WEB应用活跃度;即利用宿主机(应用服务器)、数据库和负载均衡的数据进行WEB应用活跃度的综合计算,以提升计算的客观性。
具体实施时,可基于所述WEB应用活跃度对各WEB应用进行活跃度排行,作为管理员资源调度的依据。
所述步骤S10中,所述活跃度计算规则具体为:
将存在秒级访问的WEB应用标记为高频应用,存在小时级访问的WEB应用标记为低频应用,7天以上无连接的WEB应用标记为沉默应用,并分别设定所述高频应用、低频应用以及沉默应用对应的活跃度。低频应用可以进行休眠,等待唤醒;沉默应用可以联系项目组进行资源释放,分配给其他用户;高频应用可以分配更多资源,以提升运行效果。
所述步骤S20具体为:
监控设备基于安装的监控探针,分别周期性的获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
所述应用系统日志用于记录WEB应用宿主机中CPU、磁盘以及网络的使用情况;所述数据库日志用于记录会话活动进程的系统视图;所述负载均衡日志用于记录WEB应用负载均衡请求的请求时间、返回状态码以及IP地址。
所述步骤S30具体为:
监控设备基于所述活跃度计算规则分别对应用系统日志、数据库日志以及负载均衡日志进行活跃度计算,得到第一活跃度、第二活跃度以及第三活跃度。
所述步骤S40具体为:
监控设备基于预设的权重对所述第一活跃度、第二活跃度以及第三活跃度进行加权计算得到WEB应用活跃度,即通过网络连接活跃度、数据读取活跃度、磁盘IO活跃度进行WEB应用活跃度的判断。
本发明一种非嵌入式WEB应用活跃度监测系统的较佳实施例,包括如下模块:
活跃度计算规则创建模块,用于在监控设备创建一活跃度计算规则;
日志获取模块,用于监控设备基于安装的监控探针,分别获取应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;所述监控探针于WEB应用部署在相同的网络中,通将所述监控探针安装于独立于应用服务器的监控设备上,进而进行非侵入式WEB应用活跃度监测;
活跃度计算模块,用于基于所述活跃度计算规则、应用系统日志、数据库日志以及负载均衡日志计算得到第一活跃度、第二活跃度以及第三活跃度;
活跃度统计模块,用于基于所述第一活跃度、第二活跃度以及第三活跃度计算得到WEB应用活跃度;即利用宿主机(应用服务器)、数据库和负载均衡的数据进行WEB应用活跃度的综合计算,以提升计算的客观性。
具体实施时,可基于所述WEB应用活跃度对各WEB应用进行活跃度排行,作为管理员资源调度的依据。
进一步地,所述活跃度计算规则创建模块中,所述活跃度计算规则具体为:
将存在秒级访问的WEB应用标记为高频应用,存在小时级访问的WEB应用标记为低频应用7天以上无连接的WEB应用标记为沉默应用并分别设定所述高频应用、低频应用以及沉默应用对应的活跃度。低频应用可以进行休眠,等待唤醒;沉默应用可以联系项目组进行资源释放,分配给其他用户;高频应用可以分配更多资源,以提升运行效果。
进一步地,所述日志获取模块具体为:
监控设备基于安装的监控探针,分别周期性的获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
所述应用系统日志用于记录WEB应用宿主机中CPU、磁盘以及网络的使用情况;所述数据库日志用于记录会话活动进程的系统视图;所述负载均衡日志用于记录WEB应用负载均衡请求的请求时间、返回状态码以及IP地址。
进一步地,所述活跃度计算模块具体为:
监控设备基于所述活跃度计算规则分别对应用系统日志、数据库日志以及负载均衡日志进行活跃度计算,得到第一活跃度、第二活跃度以及第三活跃度。
进一步地,所述活跃度统计模块具体为:
监控设备基于预设的权重对所述第一活跃度、第二活跃度以及第三活跃度进行加权计算得到WEB应用活跃度,即通过网络连接活跃度、数据读取活跃度、磁盘IO活跃度进行WEB应用活跃度的判断。
综上所述,本发明的优点在于:
通过在监控设备上安装监控探针,利用监控探针获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志,进而利用应用系统日志、数据库日志以及负载均衡日志进行WEB应用活跃度的计算,即不必像传统上将监控探针植入应用服务器,不会对应用服务器的性能造成影响,且可批量的获取处于同一网络下的日志进行批量的活跃度计算,最终实现在不影响应用服务器性能的前提下,对WEB应用活跃度进行批量的监测,进而极大的提升了WEB应用活跃度监测的质量和效率。
虽然以上描述了本发明的具体实施方式,但是熟悉本技术领域的技术人员应当理解,我们所描述的具体的实施例只是说明性的,而不是用于对本发明的范围的限定,熟悉本领域的技术人员在依照本发明的精神所作的等效的修饰以及变化,都应当涵盖在本发明的权利要求所保护的范围内。

Claims (4)

1.一种非侵入式WEB应用活跃度监测方法,其特征在于:包括如下步骤:
步骤S10、在监控设备创建一活跃度计算规则;
步骤S20、监控设备基于安装的监控探针,分别获取应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
步骤S30、基于所述活跃度计算规则、应用系统日志、数据库日志以及负载均衡日志计算得到第一活跃度、第二活跃度以及第三活跃度;
步骤S40、基于所述第一活跃度、第二活跃度以及第三活跃度计算得到WEB应用活跃度;
所述步骤S10中,所述活跃度计算规则具体为:
将存在秒级访问的WEB应用标记为高频应用,存在小时级访问的WEB应用标记为低频应用,7天以上无连接的WEB应用标记为沉默应用,并分别设定所述高频应用、低频应用以及沉默应用对应的活跃度;
所述步骤S30具体为:
监控设备基于所述活跃度计算规则分别对应用系统日志、数据库日志以及负载均衡日志进行活跃度计算,得到第一活跃度、第二活跃度以及第三活跃度;
所述步骤S40具体为:
监控设备基于预设的权重对所述第一活跃度、第二活跃度以及第三活跃度进行加权计算得到WEB应用活跃度。
2.如权利要求1所述的一种非侵入式WEB应用活跃度监测方法,其特征在于:所述步骤S20具体为:
监控设备基于安装的监控探针,分别周期性的获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志; 所述应用系统日志用于记录WEB应用宿主机中CPU、磁盘以及网络的使用情况;所述数据库日志用于记录会话活动进程的系统视图;所述负载均衡日志用于记录WEB应用负载均衡请求的请求时间、返回状态码以及IP地址。
3.一种非侵入式WEB应用活跃度监测系统,其特征在于:包括如下模块:
活跃度计算规则创建模块,用于在监控设备创建一活跃度计算规则;
日志获取模块,用于监控设备基于安装的监控探针,分别获取应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志;
活跃度计算模块,用于基于所述活跃度计算规则、应用系统日志、数据库日志以及负载均衡日志计算得到第一活跃度、第二活跃度以及第三活跃度;
活跃度统计模块,用于基于所述第一活跃度、第二活跃度以及第三活跃度计算得到WEB应用活跃度;
所述活跃度计算规则创建模块中,所述活跃度计算规则具体为:
将存在秒级访问的WEB应用标记为高频应用,存在小时级访问的WEB应用标记为低频应用,7天以上无连接的WEB应用标记为沉默应用,并分别设定所述高频应用、低频应用以及沉默应用对应的活跃度;
所述活跃度计算模块具体为:
监控设备基于所述活跃度计算规则分别对应用系统日志、数据库日志以及负载均衡日志进行活跃度计算,得到第一活跃度、第二活跃度以及第三活跃度;
所述活跃度统计模块具体为:
监控设备基于预设的权重对所述第一活跃度、第二活跃度以及第三活跃度进行加权计算得到WEB应用活跃度。
4.如权利要求3所述的一种非侵入式WEB应用活跃度监测系统,其特征在于:所述日志获取模块具体为:
监控设备基于安装的监控探针,分别周期性的获取处于同一网络下的应用服务器、数据库服务器以及负载均衡设备对应的应用系统日志、数据库日志以及负载均衡日志; 所述应用系统日志用于记录WEB应用宿主机中CPU、磁盘以及网络的使用情况;所述数据库日志用于记录会话活动进程的系统视图;所述负载均衡日志用于记录WEB应用负载均衡请求的请求时间、返回状态码以及IP地址。
CN202111405420.4A 2021-11-24 2021-11-24 一种非侵入式web应用活跃度监测方法及系统 Active CN114338764B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111405420.4A CN114338764B (zh) 2021-11-24 2021-11-24 一种非侵入式web应用活跃度监测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111405420.4A CN114338764B (zh) 2021-11-24 2021-11-24 一种非侵入式web应用活跃度监测方法及系统

Publications (2)

Publication Number Publication Date
CN114338764A CN114338764A (zh) 2022-04-12
CN114338764B true CN114338764B (zh) 2024-01-30

Family

ID=81046367

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111405420.4A Active CN114338764B (zh) 2021-11-24 2021-11-24 一种非侵入式web应用活跃度监测方法及系统

Country Status (1)

Country Link
CN (1) CN114338764B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115994100B (zh) * 2023-03-22 2023-07-04 深圳市明源云科技有限公司 系统活跃度检测方法、装置、电子设备及可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107819626A (zh) * 2017-11-15 2018-03-20 广州天源信息科技股份有限公司 基于日志监控分析实现负载均衡器调整分发的方法及系统
CN109040218A (zh) * 2018-07-25 2018-12-18 山东中创软件商用中间件股份有限公司 一种应用系统活跃度确定方法、装置、设备以及存储介质
CN111047362A (zh) * 2019-12-18 2020-04-21 上海智勘科技有限公司 智能音箱使用活跃度的统计管理方法和系统
CN111401433A (zh) * 2020-03-12 2020-07-10 腾讯科技(深圳)有限公司 用户信息获取方法、装置、电子设备及存储介质
CN112596992A (zh) * 2020-11-25 2021-04-02 新华三大数据技术有限公司 应用活跃度的计算方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002358216A (ja) * 2000-08-08 2002-12-13 System Support:Kk コンピュータ監視システム
US7529754B2 (en) * 2003-03-14 2009-05-05 Websense, Inc. System and method of monitoring and controlling application files

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107819626A (zh) * 2017-11-15 2018-03-20 广州天源信息科技股份有限公司 基于日志监控分析实现负载均衡器调整分发的方法及系统
CN109040218A (zh) * 2018-07-25 2018-12-18 山东中创软件商用中间件股份有限公司 一种应用系统活跃度确定方法、装置、设备以及存储介质
CN111047362A (zh) * 2019-12-18 2020-04-21 上海智勘科技有限公司 智能音箱使用活跃度的统计管理方法和系统
CN111401433A (zh) * 2020-03-12 2020-07-10 腾讯科技(深圳)有限公司 用户信息获取方法、装置、电子设备及存储介质
CN112596992A (zh) * 2020-11-25 2021-04-02 新华三大数据技术有限公司 应用活跃度的计算方法及装置

Also Published As

Publication number Publication date
CN114338764A (zh) 2022-04-12

Similar Documents

Publication Publication Date Title
JP6530462B2 (ja) コンピュータリソースサービスの性能能力の決定及び監視
US9554292B2 (en) Methods and systems for performance monitoring for mobile applications
CN103428042B (zh) 对服务器进行压力测试的方法及系统
US8782215B2 (en) Performance testing in a cloud environment
CN111382023B (zh) 代码故障定位方法、装置、设备及存储介质
EP1803066A1 (en) Method and system for monitoring performance of a client-server architecture
US20120297251A1 (en) Method and computer program product for system tuning based on performance measurements and historical problem data and system thereof
CN101576846A (zh) 软件的性能检测方法
CN114338764B (zh) 一种非侵入式web应用活跃度监测方法及系统
CN105607994A (zh) 一种移动终端软件测试方法和系统
CN112506755B (zh) 日志采集方法、装置、计算机设备和存储介质
CN115562978A (zh) 基于业务场景的性能测试系统及方法
CN110489975B (zh) 一种信息系统服务安全评估方法
CN112346962B (zh) 一种应用于对照测试系统中的对照数据测试方法及装置
CN117492403B (zh) 一种大型仪器设备运行监控系统及方法
CN107526662A (zh) 一种服务器散热测试方法及系统
CN107786641B (zh) 一种分布式多系统用户行为日志的采集方法
US9189362B2 (en) Method for measuring the performance of a target server housing a dynamic monitoring tool
RU2532714C2 (ru) Способ получения данных при оценке ресурсов сети и устройство для осуществления способа
CN111278047A (zh) 非服务小区的csi的处理方法、系统、电子设备和介质
CN112291347B (zh) 一种基于http的网络产品业务与运行状态监控系统及获取测试结果的方法
CN113806195B (zh) 数据处理方法、装置、设备、系统及存储介质
US20140337671A1 (en) System and Methods for Monitoring a Geographic Information System
CN114860563A (zh) 应用程序测试方法、装置、计算机可读存储介质及设备
CN110661677B (zh) 一种dns测试方法、装置和系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant