CN112631869B - 页面加载数据监控方法、装置、计算机设备及存储介质 - Google Patents

页面加载数据监控方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN112631869B
CN112631869B CN202011585024.XA CN202011585024A CN112631869B CN 112631869 B CN112631869 B CN 112631869B CN 202011585024 A CN202011585024 A CN 202011585024A CN 112631869 B CN112631869 B CN 112631869B
Authority
CN
China
Prior art keywords
page
interface
abnormal
function
calling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011585024.XA
Other languages
English (en)
Other versions
CN112631869A (zh
Inventor
王国彬
牟锟伦
杨行榜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Bincent Technology Co Ltd
Original Assignee
Shenzhen Bincent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Bincent Technology Co Ltd filed Critical Shenzhen Bincent Technology Co Ltd
Priority to CN202011585024.XA priority Critical patent/CN112631869B/zh
Publication of CN112631869A publication Critical patent/CN112631869A/zh
Application granted granted Critical
Publication of CN112631869B publication Critical patent/CN112631869B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3003Monitoring arrangements specially adapted to the computing system or computing system component being monitored
    • G06F11/302Monitoring arrangements specially adapted to the computing system or computing system component being monitored where the computing system component is a software system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/07Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/0703Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
    • G06F11/079Root cause analysis, i.e. error or fault diagnosis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00Error detection; Error correction; Monitoring
    • G06F11/30Monitoring
    • G06F11/3065Monitoring arrangements determined by the means or processing involved in reporting the monitored data

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Mathematical Physics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明涉及前端监控技术领域,揭露了一种页面加载数据监控方法、装置、计算机设备及存储介质。该方法通过根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据;对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息;通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常;将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果。

Description

页面加载数据监控方法、装置、计算机设备及存储介质
技术领域
本发明涉及前端监控技术领域,尤其涉及一种页面加载数据监控方法、装置、计算机设备及存储介质。
背景技术
随着计算机技术的快速发展,需要对网站页面不断更新以满足用户的需求,质量评估和监控的应用可以及时发现网站页面的问题,提升用户体验。
但是,传统的质量评估和监控方式只能采集特定的物理处理器和网络状况下的性能数据,得到的质量评估数据和监控数据不全面;而且,传统的质量评估大多是静态资源的评估,而传统的监控方式大多是监控页面API的正常运行,认为API正常运行即等于页面正常运行,但事实上在页面加载过程中也可能存在异常情况,进而导致页面监控效率较低以及准确率较低。
发明内容
本发明实施例提供一种页面加载数据监控方法、装置、计算机设备及存储介质,以解决页面监控效率较低以及准确率较低的问题。
一种页面加载数据监控方法,包括:
根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据;
对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息;
通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常;
将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果。
一种页面加载数据监控装置,包括:
页面加载数据获取模块,用于根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据;
链路过程回溯模块,用于对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息;
异常诊断模块,用于通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常;
异常分析模块,用于将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果。
一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述页面加载数据监控方法。
一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现上述页面加载数据监控方法。
上述页面加载数据监控方法、装置、计算机设备及存储介质,该方法通过根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据;对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息;通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常;将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果。
本发明重点监控页面的加载过程(也即页面加载数据),同时将页面加载性能、运行时异常以及API调用状态和耗时等数据,通过链路过程回溯的方法,将上述内容展示在链路关系图中,进而通过JS诊断脚本进行异常诊断,以对发生异常的节点进行异常分析,提高了前端页面加载过程的诊断准确率以及效率。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对本发明实施例的描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明一实施例中页面加载数据监控方法的一应用环境示意图;
图2是本发明一实施例中页面加载数据监控方法的一流程图;
图3是本发明一实施例中页面加载数据监控方法中步骤S40的一流程图;
图4是本发明一实施例中页面加载数据监控装置的一原理框图;
图5是本发明一实施例中页面加载数据监控装置中异常分析模块的一原理框图;
图6是本发明一实施例中计算机设备的一示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供的页面加载数据监控方法,该页面加载数据监控方法可应用如图1所示的应用环境中。具体地,该页面加载数据监控方法应用在页面加载数据监控系统中,该页面加载数据监控系统包括如图1所示的客户端和服务器,客户端与服务器通过网络进行通信,用于解决页面监控效率较低以及准确率较低的问题。其中,客户端又称为用户端,是指与服务器相对应,为客户提供本地服务的程序。客户端可安装在但不限于各种个人计算机、笔记本电脑、智能手机、平板电脑和便携式可穿戴设备上。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。
在一实施例中,如图2所示,提供一种页面加载数据监控方法,以该方法应用在图1中的服务器为例进行说明,包括如下步骤:
S10:根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据。
可以理解地,预设日志埋点用于抓取用户在客户端加载页面过程中产生的数据。页面加载数据指的是用户在客户端加载页面过程中产生的数据,示例性地,页面加载数据包括但不限于如服务器耗时、网络延迟耗时、网页加载时序、页面渲染消耗时间等性能信息以及运营相关信息。进一步地,页面在线数据指的是正在运行的页面数据,也即用户的客户端中仍停留在页面中,亦或者用户在该页面中存在点击或者浏览动作。
S20:对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息。
可以理解地,链路过程回溯指的是将生成页面在线数据中,从前端API(Application Programming Interface,应用程序接口)请求发出到后端调用进行回溯的过程,即回溯各个页面节点的过程,即由一个页面节点链接一个页面节点的关系,从而将这些链式关系构成一个图,得到链式关系图。进一步地,页面节点指的是为了生成页面在线数据,通过从前端发出API调用请求后,从前端到后端正式调用的各个节点。节点信息指的是指的是生成页面在线数据的过程中,通过每一页面节点时的信息。
S30:通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常。
可以理解地,JS诊断脚本为JavaScript脚本,该JS诊断脚本可以通过ARMS前端监控工具中JS错误诊断功能生成。
具体地,对所述页面在线数据进行链路过程回溯,得到链式关系图之后,通过ARMS前端监控工具中JS错误诊断功能生成JS诊断脚本,以通过JS诊断脚本对链式关系图中各节点信息进行异常诊断,进而确定各页面节点是否存在异常。
S40:将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果。
具体地,通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常之后,将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果。
本发明重点监控页面的加载过程(也即页面加载数据),同时将页面加载性能、运行时异常以及API调用状态和耗时等数据,通过链路过程回溯的方法,将上述内容展示在链路关系图中,进而通过JS诊断脚本进行异常诊断,以对发生异常的节点进行异常分析,提高了前端页面加载过程的诊断准确率以及效率。
在一实施例中,如图3所示,步骤S40中,包括:
S401:获取与所述异常节点关联的节点信息中的异常接口功能信息;所述异常接口功能信息关联异常接口。
可以理解地,异常接口功能信息指的是该异常节点对应的应用接口对应的功能信息,在生成页面加载数据的过程中,需要调用很多API接口,每一个API接口具有不同的功能属性以及功能范围。异常接口指的是异常节点中包含的应用程序接口。
S402:获取与所述异常接口关联的上下游接口,并根据所述上下游接口,通过kibanna查看与所述异常接口对应的异常调用成功率;一个异常调用成功率关联一个所述上游接口或者一个所述下游接口。
其中,上下游接口包含上游接口以及下游接口。上游接口指的是需要调用异常接口对应的服务的服务接口,与异常接口关联的上游接口的数量可以为一个,也可以为多个。下游接口指的是异常接口对应的服务需要调用的服务接口,与异常接口关联的下游接口的数量可以为一个,也可以为多个。
可以理解地,异常调用成功率指的是实现异常接口的异常接口功能时,被上游接口所调用,亦或者调用下游接口时的调用成功率。在获取与所述异常节点关联的节点信息中的异常接口功能信息之后,获取与所述异常接口关联的上下游接口,并根据所述上下游接口,通过kibanna查看与所述异常接口对应的异常调用成功率。
S403:获取与所述异常接口在生产环境中对应的测试调用成功率;一个所述测试调用成功率关联一个所述上游接口或者一个所述下游接口。
可以理解地,生产环境与用户使用客户端加载页面加载数据时的环境相同,也即该生产环境是模拟用户使用与待测试接口对应的项目或者产品时的环境。在生产环境之前,还需要经过测试环境以及预发布测试环境,以确定页面发布正常。需要说明的是,步骤S403中指的是此时在生产环境中,异常接口不存在异常,也即在生产环境中已经通过校验的接口,此时的测试调用成功率为正常调用异常接口时的调用成功率。
在一实施例中,步骤S403之前,包括:
在生产环境中,执行与所述异常接口关联的测试实例,以对所述异常接口进行生产环境验证,得到与所述异常接口对应的测试结果;
对所述测试结果进行日志覆盖率校验,得到校验结果,并在所述校验结果为完全覆盖结果时,记录所述测试调用成功率。
具体地,在生产环境中执行所述上游原始实例、所述下游原始实例、所述上游改动实例以及所述下游改动实例,以对所述待测试接口进行生产环境验证,得到测试结果,并对所述测试结果进行日志覆盖率校验,得到与所述测试结果对应的校验结果。
进一步地,若校验结果不为完全覆盖结果时,也即在生产环境中,异常接口对应的功能未被完全覆盖成功,进而需要对在生产环境中未被覆盖的功能进行调整、修改、纠错处理,进而使得异常接口对应的功能均被覆盖成功。
S404:将与同一个上游接口或下游接口关联的异常调用成功率与测试调用成功率进行比较。
S405:将低于测试调用成功率的异常调用成功率关联的上游接口或者下游接口记录为所述页面异常结果。
具体地,在获取与所述异常接口在生产环境中对应的测试调用成功率之后,将与同一个上游接口或下游接口关联的异常调用成功率与测试调用成功率进行比较,进而将低于测试调用成功率的异常调用成功率关联的上游接口或者下游接口记录为所述页面异常结果。
进一步地,将高于测试调用成功率的异常调用成功率关联的上游接口或者下游接口记录为页面正常结果,进而不需要对该页面正常结果对应的上游接口或者下游接口进行调整、修改、纠错处理。
在本实施例中,通过与异常接口关联的上游接口以及下游接口对应的测试调用成功率,以及异常调用成功率进行异常分析,提高了异常分析的效率,以及异常分析的准确率,更加具有针对性地异常分析。
在另一具体实施例中,页面加载数据中还包括页面离线数据;该页面在线数据指的是未继续运行的页面数据,也即用户的客户端中没有停留在页面中,如用户的客户端出现网络连接异常情况,亦或者用户主动退出页面时,缓存的页面数据。
进一步地,针对于页面离线数据,可以将页面离线数据存储至离线数据库中,进而发送页面离线数据分析指令至预设接收方,以令预设接收方在接收到页面离线数据之后,对页面离线数据进行分析,进而通过直观的报表的形式进行展示。
在一实施例中,步骤S30之后,也即所述通过JS诊断脚本对所述前端页面数据进行异常诊断,以确定各所述页面是否存在异常之后,还包括:
S50:将不存在异常的页面节点记录为正常节点,将与所述正常节点关联的节点信息存储至本地数据库中。
在一实施例中,步骤S50中包括:
S501:获取与所述正常节点关联的节点信息中的正常接口功能信息;所述正常接口功能信息关联正常调用接口;所述正常调用接口关联功能调用函数。
可以理解地,正常接口功能信息指的是该正常节点对应的应用接口对应的功能信息,在生成页面加载数据的过程中,需要调用很多API接口,每一个API接口具有不同的功能属性以及功能范围。正常接口指的是正常节点中包含的应用程序接口。正常接口功能信息关联正常接口。
S502:在调用各正常调用接口时,将各所述正常调用接口关联的功能调用函数的功能类数组对象转化为目标数组。
可以理解地,功能调用函数用于调用与各正常接口对应的功能。
具体地,在获取与所述正常节点关联的节点信息中的正常接口功能信息之后,在调用各正常调用接口时,也即在生成节点信息过程中,将各所述正常调用接口关联的功能调用函数的功能类数组对象转化为目标数组。
S503:将各功能调用函数对应的目标数组进行序列化处理,得到目标功能调用对象。
具体地,在调用各功能调用函数时,将各功能调用函数的功能类数组对象转化为目标数组之后,将各功能调用函数对应的目标数组进行序列化处理,得到目标功能调用对象。
S504:通过各功能调用函数对应的目标功能调用对象调用对应的正常调用接口,以获取与该正常调用接口对应的监控日志序列化数据。
S505:将监控日志序列化数据存储至本地数据库中。
具体地,将各功能调用函数对应的目标数组进行序列化处理,得到目标功能调用对象之后,通过各功能调用函数对应的目标功能调用对象调用对应的正常调用接口,以获取与该正常调用接口对应的监控日志序列化数据,进而将监控日志序列化数据存储至本地数据库中。
可以理解,因为功能调用函数的类数组arguments不区分入参类型,所以可以兼容JavaScript字符串值、数值、布尔值、数组、对象等类型,在转化为目标数组后,可对各功能调用函数对应的目标数组进行序列化处理,得到目标功能调用对象;例如,可采用JSON.stringify()方法对目标数组进行序列化处理,通过各功能调用函数对应的目标功能调用对象调用对应的功能调用函数,以获取对应的监控日志序列化数据;最后对监控日志数据序列化后存储至本地数据库中。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
在一实施例中,提供一种页面加载数据监控装置,该页面加载数据监控装置与上述实施例中页面加载数据监控方法一一对应。如图4所示,该页面加载数据监控装置包括页面加载数据获取模块10、链路过程回溯模块20、异常诊断模块30和异常分析模块40。各功能模块详细说明如下:
页面加载数据获取模块10,用于根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据;
链路过程回溯模块20,用于对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息;
异常诊断模块30,用于通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常;
异常分析模块40,用于将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果。
优选地,页面加载数据监控装置还包括:
节点信息存储模块,用于将不存在异常的页面节点记录为正常节点,将与所述正常节点关联的节点信息存储至本地数据库中。
优选地,节点信息存储模块包括:
正常接口功能信息获取单元,用于获取与所述正常节点关联的节点信息中的正常接口功能信息;所述正常接口功能信息关联正常调用接口;所述正常调用接口关联功能调用函数;
数组对象转化单元,用于在调用各正常调用接口时,将各所述正常调用接口关联的功能调用函数的功能类数组对象转化为目标数组;
序列化处理单元,用于将各功能调用函数对应的目标数组进行序列化处理,得到目标功能调用对象;
序列化数据获取单元,用于通过各功能调用函数对应的目标功能,调用对象调用对应的正常调用接口,以获取与该正常调用接口对应的监控日志序列化数据;
序列化数据存储单元,用于将监控日志序列化数据存储至本地数据库中。
优选地,如图5所示,异常分析模块40包括如下单元:
异常接口功能信息获取单元401,用于获取与所述异常节点关联的节点信息中的异常接口功能信息;所述异常接口功能信息关联异常接口
异常调用成功率获取单元402,用于获取与所述异常接口关联的上下游接口,并根据所述上下游接口,通过kibanna查看与所述异常接口对应的异常调用成功率;一个异常调用成功率关联一个所述上游接口或者一个所述下游接口;
测试调用成功率获取单元403,用于获取与所述异常接口在生产环境中对应的测试调用成功率;一个所述测试调用成功率关联一个所述上游接口或者一个所述下游接口;
调用成功率比较单元404,用于将与同一个上游接口或下游接口关联的异常调用成功率与测试调用成功率进行比较;
页面异常结果记录单元405,用于将低于测试调用成功率的异常调用成功率关联的上游接口或者下游接口记录为所述页面异常结果。
优选地,页面加载数据监控装置还包括:
在生产环境中,执行与所述异常接口关联的测试实例,以对所述异常接口进行生产环境验证,得到与所述异常接口对应的测试结果;
对所述测试结果进行日志覆盖率校验,得到校验结果,并在所述校验结果为完全覆盖结果时,记录所述测试调用成功率。
关于页面加载数据监控装置的具体限定可以参见上文中对于页面加载数据监控方法的限定,在此不再赘述。上述页面加载数据监控装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图6所示。该计算机设备包括通过系统总线连接的处理器、存储器、网络接口和数据库。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统、计算机程序和数据库。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的数据库用于存储上述实施例中页面加载数据监控方法所使用过的数据。该计算机设备的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现一种页面加载数据监控方法。
在一个实施例中,提供了一种计算机设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现上述实施例中页面加载数据监控方法。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现上述实施例中页面加载数据监控方法。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

Claims (9)

1.一种页面加载数据监控方法,其特征在于,包括:
根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据;
对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息;链路过程回溯指的是将生成页面在线数据中,从前端API请求发出到后端调用进行回溯的过程;
通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常;
将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果;
所述对所述异常节点关联的节点信息进行异常分析,得到页面异常结果,包括:
获取与所述异常节点关联的节点信息中的异常接口功能信息;所述异常接口功能信息关联异常接口;
获取与所述异常接口关联的上下游接口,并根据所述上下游接口,通过kibanna查看与所述异常接口对应的异常调用成功率;一个异常调用成功率关联一个上游接口或者一个下游接口;
获取与所述异常接口在生产环境中对应的测试调用成功率;一个所述测试调用成功率关联一个所述上游接口或者一个所述下游接口;
将与同一个上游接口或下游接口关联的异常调用成功率与测试调用成功率进行比较;
将低于测试调用成功率的异常调用成功率关联的上游接口或者下游接口记录为所述页面异常结果。
2.如权利要求1所述的页面加载数据监控方法,其特征在于,所述确定各所述页面是否存在异常之后,包括:
将不存在异常的页面节点记录为正常节点,将与所述正常节点关联的节点信息存储至本地数据库中。
3.如权利要求2所述的页面加载数据监控方法,其特征在于,所述将与所述正常节点关联的节点信息存储至本地数据库中,包括:
获取与所述正常节点关联的节点信息中的正常接口功能信息;所述正常接口功能信息关联正常调用接口;所述正常调用接口关联功能调用函数;
在调用各正常调用接口时,将各所述正常调用接口关联的功能调用函数的功能类数组对象转化为目标数组;
将各所述功能调用函数对应的目标数组进行序列化处理,得到目标功能调用对象;
通过各所述功能调用函数对应的目标功能调用对象,调用对应的正常调用接口,以获取与该正常调用接口对应的监控日志序列化数据;
将监控日志序列化数据存储至本地数据库中。
4.如权利要求1所述的页面加载数据监控方法,其特征在于,所述获取与所述异常接口在生产环境中对应的测试调用成功率之前,包括:
在生产环境中,执行与所述异常接口关联的测试实例,以对所述异常接口进行生产环境验证,得到与所述异常接口对应的测试结果;
对所述测试结果进行日志覆盖率校验,得到校验结果,并在所述校验结果为完全覆盖结果时,记录所述测试调用成功率。
5.一种页面加载数据监控装置,其特征在于,包括:
页面加载数据获取模块,用于根据预设日志埋点实时获取页面加载数据;所述页面加载数据中包括页面在线数据;
链路过程回溯模块,用于对所述页面在线数据进行链路过程回溯,得到链式关系图;所述链式关系图中包含与所述页面在线数据关联的至少一个页面节点;一个所述页面节点关联一个节点信息;链路过程回溯指的是将生成页面在线数据中,从前端API请求发出到后端调用进行回溯的过程;
异常诊断模块,用于通过JS诊断脚本对各所述节点信息进行异常诊断,以确定各所述页面节点是否存在异常;
异常分析模块,用于将存在异常的页面节点记录为异常节点,对所述异常节点关联的节点信息进行异常分析,得到页面异常结果;
异常分析模块包括如下单元:
异常接口功能信息获取单元,用于获取与所述异常节点关联的节点信息中的异常接口功能信息;所述异常接口功能信息关联异常接口;
异常调用成功率获取单元,用于获取与所述异常接口关联的上下游接口,并根据所述上下游接口,通过kibanna查看与所述异常接口对应的异常调用成功率;一个异常调用成功率关联一个上游接口或者一个下游接口;
测试调用成功率获取单元,用于获取与所述异常接口在生产环境中对应的测试调用成功率;一个所述测试调用成功率关联一个所述上游接口或者一个所述下游接口;
调用成功率比较单元,用于将与同一个上游接口或下游接口关联的异常调用成功率与测试调用成功率进行比较;
页面异常结果记录单元,用于将低于测试调用成功率的异常调用成功率关联的上游接口或者下游接口记录为所述页面异常结果。
6.如权利要求5所述的页面加载数据监控装置,其特征在于,所述页面加载数据监控装置还包括:
节点信息存储模块,用于将不存在异常的页面节点记录为正常节点,将与所述正常节点关联的节点信息存储至本地数据库中。
7.如权利要求5所述的页面加载数据监控装置,其特征在于,所述节点信息存储模块包括:
正常接口功能信息获取单元,用于获取与正常节点关联的节点信息中的正常接口功能信息;所述正常接口功能信息关联功能调用函数;
数组对象转化单元,用于在调用各功能调用函数时,将各功能调用函数的功能类数组对象转化为目标数组;
序列化处理单元,用于将各功能调用函数对应的目标数组进行序列化处理,得到目标功能调用对象;
序列化数据获取单元,用于通过各功能调用函数对应的目标功能调用对象调用对应的功能调用函数,以获取对应的监控日志序列化数据;
序列化数据存储单元,用于将监控日志序列化数据存储至本地数据库中。
8.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述页面加载数据监控方法。
9.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述页面加载数据监控方法。
CN202011585024.XA 2020-12-28 2020-12-28 页面加载数据监控方法、装置、计算机设备及存储介质 Active CN112631869B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011585024.XA CN112631869B (zh) 2020-12-28 2020-12-28 页面加载数据监控方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011585024.XA CN112631869B (zh) 2020-12-28 2020-12-28 页面加载数据监控方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN112631869A CN112631869A (zh) 2021-04-09
CN112631869B true CN112631869B (zh) 2023-01-17

Family

ID=75285849

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011585024.XA Active CN112631869B (zh) 2020-12-28 2020-12-28 页面加载数据监控方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN112631869B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109542763A (zh) * 2018-10-16 2019-03-29 深圳壹账通智能科技有限公司 页面监测方法、装置、计算机设备和存储介质
CN109815089A (zh) * 2019-01-16 2019-05-28 中国平安财产保险股份有限公司 H5页面监控方法、装置、计算机设备和存储介质
CN110334301A (zh) * 2018-03-21 2019-10-15 深圳市腾讯计算机系统有限公司 一种页面还原方法及装置
CN110865843A (zh) * 2018-08-09 2020-03-06 阿里巴巴集团控股有限公司 页面回溯、信息备份与问题解决方法、系统及设备
CN111897723A (zh) * 2020-07-20 2020-11-06 腾讯科技(深圳)有限公司 一种测试应用的方法及装置
CN112069070A (zh) * 2020-09-04 2020-12-11 中国平安人寿保险股份有限公司 一种页面检测方法、装置、服务器及计算机可读存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105701113B (zh) * 2014-11-27 2019-04-09 国际商业机器公司 用于优化网页预加载的方法和设备
WO2017114263A1 (en) * 2015-12-28 2017-07-06 Huawei Technologies Co., Ltd. System, apparatus and method for avoiding data loss on recovery of bulk load

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334301A (zh) * 2018-03-21 2019-10-15 深圳市腾讯计算机系统有限公司 一种页面还原方法及装置
CN110865843A (zh) * 2018-08-09 2020-03-06 阿里巴巴集团控股有限公司 页面回溯、信息备份与问题解决方法、系统及设备
CN109542763A (zh) * 2018-10-16 2019-03-29 深圳壹账通智能科技有限公司 页面监测方法、装置、计算机设备和存储介质
CN109815089A (zh) * 2019-01-16 2019-05-28 中国平安财产保险股份有限公司 H5页面监控方法、装置、计算机设备和存储介质
CN111897723A (zh) * 2020-07-20 2020-11-06 腾讯科技(深圳)有限公司 一种测试应用的方法及装置
CN112069070A (zh) * 2020-09-04 2020-12-11 中国平安人寿保险股份有限公司 一种页面检测方法、装置、服务器及计算机可读存储介质

Also Published As

Publication number Publication date
CN112631869A (zh) 2021-04-09

Similar Documents

Publication Publication Date Title
CN112910945B (zh) 请求链路跟踪方法和业务请求处理方法
CN111797026A (zh) 测试用例生成方法、装置、计算机设备及存储介质
CN110941555A (zh) 测试用例推荐方法、装置、计算机设备和存储介质
CN111240976A (zh) 软件测试方法、装置、计算机设备及存储介质
CN109324961B (zh) 系统自动测试方法、装置、计算机设备及存储介质
CN111897727A (zh) 软件测试方法、装置、计算机设备及存储介质
CN111400179B (zh) 终端应用程序交互的方法、装置、计算机设备和存储介质
CN112732499A (zh) 一种基于微服务架构的测试方法、装置及计算机系统
CN111666194A (zh) 加压参数自适应调节方法、装置、计算机设备及存储介质
CN113419950A (zh) Ui自动化脚本的生成方法、装置、计算机设备及存储介质
CN112379913B (zh) 基于风险识别的软件优化方法、装置、设备及存储介质
CN112631869B (zh) 页面加载数据监控方法、装置、计算机设备及存储介质
CN112612706A (zh) 自动化测试方法、计算机设备及存储介质
CN112596723A (zh) 数据库脚本生成方法、装置、设备及介质
CN114090462B (zh) 软件重复缺陷识别方法、装置、计算机设备及存储介质
CN113419968B (zh) 应用测试方法、装置、电子设备及存储介质
CN115114135B (zh) 软件数据测试方法、装置、设备、介质及产品
CN114385498A (zh) 性能测试方法、系统、计算机设备及可读存储介质
CN112527606A (zh) 数据流程分析方法、装置、计算机设备及存储介质
CN113176995A (zh) 基于测试场景的接口测试方法、装置、设备及介质
CN110704218B (zh) 数据处理方法、装置、计算机设备和存储介质
CN111083007A (zh) 测试方法、装置、计算机设备和存储介质
CN111274112A (zh) 应用程序压测方法、装置、计算机设备和存储介质
CN117170995B (zh) 基于性能指标的干扰异常检测方法、装置、设备及介质
CN113901731B (zh) 电量预测方法、装置、介质及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant