CN110198324A - 数据监控方法、装置、浏览器及终端 - Google Patents

Abstract

本发明提供了网络数据监控方法、装置、浏览器及终端，所述数据监控方法包括获取统一资源定位符；开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。本发明基于浏览器内核捕捉网页展现过程中的详细数据，因此可以按照具体需求对网页展现各个环节进行有选择的监控，不受上层应用的限制，从而可以广泛适用于各种应用场景下的网页展现过程的数据监控。

Description

数据监控方法、装置、浏览器及终端

技术领域

本发明涉及网络数据监控领域，尤其涉及网络数据监控方法、装置、浏览器及终端。

背景技术

Web页面开发在各种终端应用程序开发和基于网页的前端开发中日益凸显其优势地位，但是复杂的网络环境和浏览器环境使Web页面的展现效果大打折扣，因此，如何能够对网页展现过程进行监控，及时发现这个过程中存在的问题从而避免造成用户流失，就成为了亟待解决的问题。

目前对网页展现过程的监控主要存在两种方式：基于Web前端的监控上报和终端应用程序监控上报，这两种监控方式都与浏览器内核无关，因此，无法监控到浏览器内核的运行情况。在很多应用场景下，网页展现结果与浏览器内核存在紧密关系，因此，现有的监控方式存在监控盲点。

发明内容

为了解决上述技术问题，本发明提出了数据监控方法、装置、浏览器及终端。本发明具体是以如下技术方案实现的：

第一部分，一种数据监控方法，所述方法包括：

获取统一资源定位符；

开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；

开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；

上报所述第一监控数据和/或第二监控数据。

第二部分，一种数据监控方法，其特征在于，所述方法包括；

获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；

所述浏览器内核主线程开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。

第三部分，一种数据监控方法，所述方法包括；

客户端获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；所述浏览器内核主线程开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；

客户端上报所述第一监控数据和/或第二监控数据至数据处理平台；

所述数据处理平台接收并处理所述第一监控数据和/或第二监控数据。

第四部分，一种数据监控装置，所述装置包括：

统一资源定位符获取模块，用于获取统一资源定位符；

第一子线程开启模块，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；

第二子线程开启模块，用于开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；

监控数据上报模块，用于上报所述第一监控数据和/或第二监控数据。

进一步地，所述第一子线程用于：

获取域名解析过程中的异常数据；

和/或，

获取服务器连接请求过程中的性能数据和异常数据中的至少一种；

和/或，

获取服务器连接响应过程中的性能数据和异常数据中的至少一种。

进一步地，所述第二子线程用于：获取网页渲染过程中的异常数据、网页渲染过程中的性能数据、页面加载过程中的异常数据、页面加载过程中的性能数据中的至少一种。

进一步地，还包括：

配置数据获取模块，用于获取配置数据；

过滤器获取模块，用于根据所述配置数据构建用于得到目标数据的过滤器；

筛选模块，用于根据所述过滤器在第一监控数据和/或第二监控数据中筛选出目标数据；

所述监控数据上报模块还用于上报所述目标数据。

第五部分，一种数据监控浏览器，所述浏览器包括第四部分所述的装置。

第六部分，一种数据监控装置，所述装置包括；

网络服务触发模块，用于获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；

浏览器内核主线程模块，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。

第七部分，一种数据监控终端，所述终端包括第六部分所述的装置。

第八部分，一种数据监控系统，包括客户端和服务器：

所述客户端包括：

网络服务触发模块，用于获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；

浏览器内核主线程模块，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据；

所述客户端还包括：

上报模块，用于上报所述第一监控数据和/或第二监控数据至数据处理平台；

所述数据处理平台用于接收并处理所述第一监控数据和/或第二监控数据。

本发明提供了数据监控方法、装置、浏览器及终端，具有如下有益效果：

本发明基于浏览器内核捕捉网页展现过程中的详细数据，因此可以按照具体需求对网页展现各个环节进行有选择的监控，不受上层应用的限制，从而可以广泛适用于各种应用场景下的网页展现过程的数据监控。

基于浏览器内核不仅可以监控到网页展现过程中的异常，还可以对网页展现过程的各个环节的性能进行监控，从而获取全面的监控数据。

基于浏览器内核的监控过程对上层应用没有影响，对于用户是无感知和不可见的，因此，不影响在网页展现过程中的用户体验。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。

图1是本发明实施例提供的基于Web前端的监控上报原理示意图；

图2是本发明实施例提供的终端应用程序监控上报原理示意图；

图3是本发明实施例提供的一种数据监控方法流程图；

图4是本发明实施例提供的浏览器内核执行流程示意图；

图5是本发明实施例提供的第一监控数据的方法流程图；

图6是本发明实施例提供的一种全面数据监控方法流程图；

图7是本发明实施例提供的一种监控数据的过滤方法流程图；

图8是本发明实施例提供的过滤器构建方式流程图；

图9是本发明实施例提供的一种数据监控方法流程图；

图10是本发明实施例提供的另一种数据监控方法流程图；

图11是本发明实施例提供的服务器集群示意图；

图12是本发明实施例提供的某个域名在上层应用架构下的打开成功率的查询结果示意图；

图13是本发明实施例提供的不同域名在上层应用架构下打开页面的首屏耗时示意图；

图14是本发明实施例提供的某个域名首屏耗时的统计结果示意图；

图15是本发明实施例提供的异常错误码的统计结果示意图；

图16是本发明实施例提供的监控数据的详细信息示意图；

图17是本发明实施例提供的一种数据监控装置框图；

图18是本发明实施例提供的浏览器执行数据监控的原理示意图；

图19是本发明实施例提供的另一种数据监控装置框图；

图20是本发明实施例提供的一种数据监控终端示意图；

图21是本发明实施例提供的一种数据监控系统示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

相对于需要专业移动端开发人员进行研发的原生应用，基于HTML5/CSS/JavaScript的Web页面开发凭借开发门槛底、迭代快、跨平台等特点，成为电商、银行、浏览类等应用程序的首选，在应用程序中实现网页的展现也能够显著增加应用程序的趣味性从而提升用户粘度。

网页展现的过程由发起网页链接请求开始到网页加载完毕贯穿网页服务的始终，而网页展现的过程中出现的问题对用户体验有较大影响。为了及时解决网页展现问题，定位网页展现的优化方向，就需要对网页展现过程进行监控，因此，获取大量用户浏览网页过程中产生的数据对于网页开发至关重要。目前对网页展现过程的监控主要存在两种监控方式：

(1)基于Web前端的监控上报：这种监控方式并不涉及浏览器内核，而是在与浏览器内核进行交互的Web前端对网页展现过程进行监控，能够适用于终端、PC端等常用的浏览器。其监控原理如图1所示，在页面加载完成后，从Web页面发起一个或多个上报的请求，将监控数据上报到服务器。这种监控以页面加载完成为前提条件，能够监控到静态资源加载异常、CSS展现异常和JS运行异常，但是无法监控到在页面加载完成之前的环节所出现的异常，也无法准确获知页面展现各个环节的耗时等性能数据。

举例而言，这种监控方式存在覆盖不到的多种场景。比如连接服务器失败，这种情况无法进行上报，并且也无法获取到导致连接服务器失败的具体原因，而导致连接服务器失败的原因可以有多种，比如DNS解析失败、DNS解析被劫持、Socket连接失败。再比如连接服务器成功但资源拉取失败，在服务器返回数据到终端的过程中也可能会存在资源的解析、JS的执行等问题，会导致页面无法正常加载，这些情况下均无法进行上报。

此外，这种监控方式的安全性也无法保证。目前仍然存在较多的站点使用的是不安全的HTTP协议建立连接，数据无法加密导致数据泄漏、数据篡改、流量劫持等安全问题。

(2)终端应用程序监控上报：这种监控方式也不涉及浏览器内核，而是通过与浏览器内核进行交互的上层接口对网页展现过程进行监控。其监控原理如图2所示，可以从应用程序使用的接口(比如WebView组件)中获取出错的资源数据，并由应用程序进行上报处理。这种监控依赖上层接口(比如WebView组件)，而上层接口所能提供的监控数据有限，这种监控方式受限于上层接口的功能。

举例而言，若上层接口为WebView组件，则WebView组件提供的错误回调接口可以获取的数据有限，比如，无法获取服务器的IP地址，监控不到是否发生了DNS劫持的行为；无法得知页面渲染的最终结果是否正常，监控不到页面是否发生了白屏。

综上所述，现有技术中的监控方式存在监控盲点，无法实现对于页面展现全过程的监控，有鉴于此，本发明实施例提供一种基于浏览器内核的数据监控方法，旨在跳脱上层应用的限制，从浏览器内核直接对数据进行监控，从而捕获全面的异常数据，并且还可以进一步获取页面展现过程中的性能数据。

本发明实施例提供一种数据监控方法，如图3所示，所述方法包括：

S1.获取统一资源定位符。

步骤S1中可以由浏览器内核从上层应用中获取统一资源定位符，具体地，本发明实施例不对上层应用进行具体限定。比如，在一个可行的实施方式中，应用程序(Application，App)通过使用浏览器内核提供的接口获取WebView对象，并在当前应用程序的Activity页面中显示出来，之后通过该WebView对象加载统一资源定位符，在这一过程中，即可使得浏览器内核获取统一资源定位符，并开启本发明实施例的数据监控流程。

S2.开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据。

S3.开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据。

浏览器内核中各个子线程之间执行异步通信，所述第一子线程用于与统一资源定位符指向的服务器连接并获取待渲染数据，所述第二子线程用于将所述待渲染数据显示到页面之中。

本发明实施例中对于第一子线程和第二子线程的执行过程进行监控，从而可以获取到浏览器内核执行过程中产生的异常数据和性能数据。所述第一监控数据和第二监控数据包括异常数据和性能数据中的至少一种，所述异常数据用于表征网络连接服务和/或网页渲染服务执行过程出现的错误。在一个可行的实施方式中，异常数据可以包括错误码。为了表征网页展现过程不同环节出现的异常，可以对异常进行分类，并通过错误码进行区分。

具体地，为了灵活捕获浏览器内核执行过程中产生的异常数据和/或性能数据，可以在第一子线程和/或第二子线程的相关代码中进行插桩。进一步地，为了能够灵活捕获不同子线程执行过程中不同阶段产生的异常数据和/或性能数据，可以在每个插桩代码中设置开关。开关打开，则所述插桩代码生效，开关关闭，则所述插桩代码失效。

步骤S2-S3中可以对页面展现的整个流程的各个环节都进行插桩监控，其监控内容包括但不限于DNS解析结果、HTTP返回码、网络质量、是否走代理、资源类型、DOM树节点个数、白屏状态码等异常数据以及页面打开耗时、渲染耗时、请求发起耗时、排版耗时等性能数据，可见，相较于现有技术，本发明实施例监控对象更多，监控范围更广。

S4.上报所述第一监控数据和/或第二监控数据。

在步骤S4中，可以由浏览器内核将第一监控数据和/或第二监控数据直接上报至数据处理平台，也可以由浏览器内核将第一监控数据和/或第二监控数据上报至上层应用，由上层应用最终将第一监控数据和/或第二监控数据上报至数据处理平台。

进一步地，为提升安全性，还可以在浏览器内核中对第一监控数据和/或第二监控数据进行压缩加密处理，并使用HTTPS协议进行传输。

本发明实施例提供的数据监控方法从浏览器内核出发，使得网页展现过程中数据的获取和上报都由内核来完成，通过对网页开始加载到最终呈现在屏幕上整个流程的关键位置进行插桩，能够使得网页展现的监控贯穿整个网页展现流程的始终，从而获取到全面的监控数据。进一步地，通过在浏览器内核进行数据监控，还能够捕获用于提示浏览器内核运行性能的性能数据。

为了捕获全面的监控数据，本发明另一实施例基于浏览器内核的运行原理分析了浏览器内核执行流程，如图4所示，本发明将页面展现过程分为DNS解析、TCP连接、网络请求、数据接收、渲染排版和页面呈现六个关键环节，通过在这六个关键环节中进行插桩，即可捕获这六个关键环节产生的异常数据和/或性能数据，从而最终将捕获结果汇总上报至数据处理平台。

具体地，如图5所示，本发明实施例公开了第一子线程监控所述网络连接服务的执行过程以得到第一监控数据的方法，包括：

S21.获取域名解析过程中的异常数据。

S22.获取服务器连接请求过程中的性能数据和异常数据中的至少一种。

S23.获取服务器连接响应过程中的性能数据和异常数据中的至少一种。

在具体的执行过程中，步骤S21-S23可以选择一个或多个执行，也可以全部执行。

具体地，本发明实施例还公开了第二子线程监控所述网页渲染服务的执行过程以得到第二监控数据的方法，包括：获取网页渲染过程中的异常数据、网页渲染过程中的性能数据、页面加载过程中的异常数据、页面加载过程中的性能数据中的至少一种。

进一步地，本发明实施例提供了一种全面数据监控方法，如图6所示，包括：

P1.获取当前页面的统一资源定位符。

P2.进行DNS解析，判断是否解析成功。

P3.若否，则输出表征DNS解析失败的异常数据，执行步骤P16。

P4.若是，则根据DNS解析结果连接服务器，判断是否连接成功。

P5.若否，则输出表征服务器连接失败的异常数据，执行步骤P16。

P6.若是，则计算连接服务器耗时。

P7.判断是否成功接收服务器响应数据。

P8.若否，则输出表征服务器响应失败的异常数据，执行步骤P16。

P9.若是，则计算响应接收耗时。

P10.判断是否成功对服务器响应数据进行解析、渲染和排版。

P11.若否，则输出表征渲染失败的异常数据，执行步骤P16。

P12.若是，则计算首屏耗时。

所述首屏耗时可以理解为浏览器渲染第一屏页面所消耗的时间。

P13.判断页面是否加载完成。

可以指定预设时间，若预设时间内页面加载完成，则执行步骤P15，否则，执行步骤P14。

P14.若否，则输出表征加载失败的异常数据，执行步骤P16。

P15.若是，则计算页面结束耗时。

P16.汇总并上报上述执行流程得到的异常数据和性能数据。

上述执行流程中，步骤P3、P5、P8、P11和P14捕获异常数据，步骤P6、P9、P12、P13和P15捕获性能数据。

本发明实施例提供的全面数据监控方法，可以获取网页展现各个流程中的数据，比如DNS解析、HTTP请求与响应、渲染、上屏等过程的关键数据。将这些关键的数据进行上报，有利于对页面展现效果的优化，提升用户体验。

本发明实施例可以由浏览器内核实现，因此，在依托于浏览器内核进行网页展现的各种场景下均可使用，这使得本发明实施例的可以覆盖广泛的应用场景。但是，并非每一种应用场景均需要进行全面的数据监控，甚至在某些应用场景下，并不需要进行数据监控。比如，若用户试图访问某个目标网站，而数据处理平台已经有足够的对于所述目标网站进行访问的监控数据，则在用户的访问过程中，可以不执行P2-P9的监控过程。若用户用户试图访问某个目标网站中的某个静态资源，而数据处理平台已经有足够的对于所述目标网站的静态资源进行访问和加载的监控数据，则在用户的访问过程中，可以不进行监控。

因此，为了提升数据监控的灵活性，适应不同的应用场景，本发明实施例进一步提出了一种监控数据的过滤方法，如图7所示，包括：

S10.获取配置数据。

S20.根据所述配置数据构建用于得到目标数据的过滤器。

在上报监控数据之前，需要获取配置数据，所述配置数据用于构建用于得到目标数据的过滤器。

具体地，所述配置数据可以由浏览器内核向数据处理中心主动拉取，也可以在浏览器内核被首次启动时，由后台数据处理中心主动推送。

不同的应用场景下配置数据的内容可以不同。在一个可行的实施方式中，所述配置数据包括配置项和白名单，所述配置项的具体内容可以根据实际需要进行配置，比如所述配置项可以包括是否开启性能上报和是否只在wifi状态下上报，所述白名单可以为记录有域名或IP地址的名单。

根据白名单、配置项结合当前的网络状态可以得到过滤器。

在一个可行的实施方式中，过滤器构建方式如图8所示，包括：

T1.判断是否只在wifi状态下上报监控数据。

T2.若只在wifi状态下上报监控数据，则判断当前网络状态是否为wifi状态。

T3.若当前网络状态为非wifi状态，则生成用于屏蔽全部监控数据的过滤器。

T4.若当前网络状态为wifi状态，则执行步骤T6。

T5.若不是只在wifi状态下上报监控数据，则执行步骤T6。

T6.判断统一资源定位符对应的域名或IP地址是否位于白名单之中。

T7.若否，则生成用于屏蔽全部监控数据的过滤器。

T8.若是，则判断是否开启性能上报。

T9.若开启性能上报，则构建能够得到包含性能数据的目标数据的过滤器。

T10.若不开启性能上报，则构建能够得到不包含性能数据的目标数据的过滤器。

S30.根据所述过滤器在第一监控数据和/或第二监控数据中筛选出目标数据。

若过滤器屏蔽全部监控数据，则目标数据为空，不进行上报。

S40.上报所述目标数据。

进一步地，在其它可行的实施方式中，还可以设置触发条件，用于触发本发明实施例中数据监控方法的执行。所述触发条件可以包括以下一种或多种情况：上层应用当前运行状态异常、上层应用当前运行状态下指定数据接口被调用、上层应用当前运行状态下指定功能按钮被点击等。

本发明实施例还提供了一种数据监控方法，如图9所示，所述方法包括：

S01.获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程。

上层应用获取到用户输入或者选择的统一资源定位符，将所述统一资源定位符传输至浏览器内核主线程。

S02.所述浏览器内核主线程开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。

S01可以由上层应用执行，S02可以由浏览器内核执行，S02的具体过程前述已有记载，不再赘述。S02中可以将第一监控数据和/或第二监控数据直接上报至数据处理平台，也可以将第一监控数据和/或第二监控数据上报至上层应用，由上层应用将第一监控数据和/或第二监控数据上报至数据处理平台。

若S02中直接向数据处理平台上传第一监控数据和/或第二监控数据，即只在浏览器内核中即可完成数据监控和上传的工作，不对上层应用产生影响，对用户不可见，不影响用户体验。

本发明实施例还提供了一种数据监控方法，所述方法可以应用于客户端/服务器架构的应用环境，由如图10所示，所述方法包括：

S100.客户端获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；所述浏览器内核主线程开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据。

S200.客户端上报所述第一监控数据和/或第二监控数据至数据处理平台。

S300.所述数据处理平台接收并处理所述第一监控数据和/或第二监控数据。

具体地，步骤300可以具体包括下述步骤：

(1)对所述第一监控数据和/或第二监控数据进行过滤以得到有效监控数据；

(2)存储并分析所述有效监控数据以得到分析结果；

(3)显示所述分析结果并根据所述分析结果进行告警

在一个可行的实施例中，数据处理平台还可以由服务器集群构成，如图11所示，所述服务器集群可以包括数据仓库、大数据处理平台、数据库、告警平台和展示查询平台。所述数据仓库与所述大数据处理平台通信连接，所述大数据处理平台与所述数据库通信连接，所述告警平台和展示查询平台均与所述数据库通信连接。

所述数据仓库用于接收步骤S200中上传的第一监控数据和/或第二监控数据。所述数据仓库还能够对第一监控数据和/或第二监控数据进行过滤以得到有效监控数据。

所述大数据处理平台用于进行数据分析。比如，所述大数据处理平台可以对异常数据和性能数据分别进行统计。通过异常数据的统计可以统计页面打开成功率以及统计出错的资源数据。通过性能数据的统计可以统计首屏耗时、结束耗时、响应耗时、连接耗时以及DNS耗时。具体地，所述大数据处理平台中可以使用HIVE工具进行数据分析。

所述数据库用于存储所述大数据处理平台的数据分析结果。

所述告警平台用于实时监控数据库中得到的数据分析结果中的异常，并进行告警，从而及时发现页面展现过程存在的问题，避免损失。

所述展示查询平台用于查询并显示所述数据库的内容。比如所述展示查询平台中可以查询业务页面访问质量、页面打开性能等数据。还可以将上报的数据按版本来展示，即可对比不同的内核版本上报的页面成功率和性能数据的不同，同时也可以发现内核自身存在的问题。

具体地，所述展示查询平台可以支持多种查询条件，并且可以对查询结果进行多种形式的显示。如图12所示，其示出了某个域名在上层应用架构下的打开成功率的查询结果。如图13所示，其示出了不同域名在上层应用架构下打开页面的首屏耗时。如图14所示，其示出了某个域名首屏耗时的统计结果。如图15所示，其示出了异常错误码的统计结果。如图16所示，其示出了监控数据的详细信息示意图。

本发明的实施例还提供了一种存储介质，所述存储介质可设置于客户端和/或浏览器之中以保存用于实现方法实施例中一种数据监控方法的相关代码。可选地，在本实施例中，上述存储介质可以位于计算机网络的多个网络设备中的至少一个网络设备。可选地，在本实施例中，上述存储介质可以包括但不限于：U盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

本发明还提供一种数据监控装置，如图17，所述装置包括：

统一资源定位符获取模块101，用于获取统一资源定位符。

第一子线程开启模块102，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据。

第二子线程开启模块103，用于开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据。

监控数据上报模块104，用于上报所述第一监控数据和/或第二监控数据。

具体地，所述第一子线程用于获取域名解析过程中的异常数据；和/或，获取服务器连接请求过程中的性能数据和异常数据中的至少一种；和/或，获取服务器连接响应过程中的性能数据和异常数据中的至少一种。

具体地，所述第二子线程用于：获取网页渲染过程中的异常数据、网页渲染过程中的性能数据、页面加载过程中的异常数据、页面加载过程中的性能数据中的至少一种。

具体地，还包括：

配置数据获取模块105，用于获取配置数据；

过滤器获取模块106，用于根据所述配置数据构建用于得到目标数据的过滤器；

筛选模块107，用于根据所述过滤器在第一监控数据和/或第二监控数据中筛选出目标数据；

所述监控数据上报模块还用于上报所述目标数据。

所述装置实施例中的装置与方法实施例基于同样地发明构思。

本发明实施例还提供一种数据监控浏览器，所述数据监控浏览器包括所述数据监控装置，请参考图18，其示出了所述数据浏览器执行数据监控方法的示意图。

本发明还提供一种数据监控装置，如图19所示，所述装置包括：

网络服务触发模块201，用于获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程。

浏览器内核主线程模块202，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。

所述装置实施例中所述的装置与方法实施例基于同样地发明构思。

参见图20，本发明实施例还提供了一种数据监控终端，该终端可以用于实施上述实施例中提供的数据监控方法。具体来讲：

所述终端可以包括RF(Radio Frequency，射频)电路110、包括有一个或一个以上计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、WiFi(wireless fidelity，无线保真)模块170、包括有一个或者一个以上处理核心的处理器180、以及电源190等部件。本领域技术人员可以理解，图20中示出的终端结构并不构成对终端的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

RF电路110可用于收发信息或通话过程中，信号的接收和发送，特别地，将基站的下行信息接收后，交由一个或者一个以上处理器180处理；另外，将涉及上行的数据发送给基站。通常，RF电路110包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM)卡、收发信机、耦合器、LNA(Low Noise Amplifier，低噪声放大器)、双工器等。此外，RF电路110还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议，包括但不限于GSM(Global System of Mobile communication，全球移动通讯系统)、GPRS(General Packet Radio Service，通用分组无线服务)、CDMA(CodeDivision Multiple Access，码分多址)、WCDMA(Wideband Code Division MultipleAccess,宽带码分多址)、LTE(Long Term Evolution,长期演进)、电子邮件、SMS(ShortMessaging Service，短消息服务)等。

存储器120可用于存储软件程序以及模块，处理器180通过运行存储在存储器120的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器120可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、功能所需的应用程序等；存储数据区可存储根据所述终端的使用所创建的数据等。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器120还可以包括存储器控制器，以提供处理器180和输入单元130对存储器120的访问。

输入单元130可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器180，并能接收处理器180发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131，输入单元130还可以包括其他输入设备132。具体地，其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元140可用于显示由用户输入的信息或提供给用户的信息以及所述终端的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141，可选的，可以采用LCD(Liquid Crystal Display，液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的，触敏表面131可覆盖显示面板141，当触敏表面131检测到在其上或附近的触摸操作后，传送给处理器180以确定触摸事件的类型，随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图5中，触敏表面131与显示面板141是作为两个独立的部件来实现输入和输入功能，但是在某些实施例中，可以将触敏表面131与显示面板141集成而实现输入和输出功能。

所述终端还可包括至少一种传感器150，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板141的亮度，接近传感器可在所述终端移动到耳边时，关闭显示面板141和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别终端姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于所述终端还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路160、扬声器161，传声器162可提供用户与所述终端之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号，传输到扬声器161，由扬声器161转换为声音信号输出；另一方面，传声器162将收集的声音信号转换为电信号，由音频电路160接收后转换为音频数据，再将音频数据输出处理器180处理后，经RF电路110以发送给比如另一终端，或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔，以提供外设耳机与所述终端的通信。

WiFi属于短距离无线传输技术，所述终端通过WiFi模块170可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图20示出了WiFi模块170，但是可以理解的是，其并不属于所述终端的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器180是所述终端的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器120内的软件程序和/或模块，以及调用存储在存储器120内的数据，执行所述终端的各种功能和处理数据，从而对终端进行整体监控。可选的，处理器180可包括一个或多个处理核心；优选的，处理器180可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器180中。

所述终端还包括给各个部件供电的电源190(比如电池)，优选的，电源可以通过电源管理系统与处理器180逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

尽管未示出，所述终端还可以包括摄像头、蓝牙模块等，在此不再赘述。具体在本实施例中，终端的显示单元是触摸屏显示器，终端还包括有存储器，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器中，且经配置以由一个或者一个以上处理器执行本发明中方法实施例中的指令。

本发明实施例还提供一种数据监控系统，如图21所示，包括客户端10和服务器20。

所述客户端10包括：

网络服务触发模块101，用于获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程。

浏览器内核主线程模块102，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。

所述客户端还包括上报模块103，用于上报所述第一监控数据和/或第二监控数据至数据处理平台。

所述数据处理平台20，用于接收并处理所述第一监控数据和/或第二监控数据。

所述装置实施例中所述的装置与方法实施例基于同样地发明构思。

需要说明的是：上述本发明实施例先后顺序仅仅为了描述，不代表实施例的优劣。

本领域普通技术人员可以理解实现上述实施例的全部或部分步骤可以通过硬件来完成，也可以通过程序来指令相关的硬件完成，所述的程序可以存储于一种计算机可读存储介质中，上述提到的存储介质可以是只读存储器，磁盘或光盘等。

以上所述仅为本发明的较佳实施例，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种数据监控方法，其特征在于，所述方法包括：

获取统一资源定位符；

开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；

开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；

上报所述第一监控数据和/或第二监控数据。

2.根据权利要求1所述的方法，其特征在于，通过插桩获取所述第一监控数据和/或所述第二监控数据；所述第一监控数据和第二监控数据包括异常数据和性能数据中的至少一种，所述异常数据用于表征网络连接服务和/或网页渲染服务执行过程出现的错误。

3.根据权利要求2所述的方法，其特征在于，所述监控所述网络连接服务的执行过程以得到第一监控数据包括；

获取域名解析过程中的异常数据；

和/或，

获取服务器连接请求过程中的性能数据和异常数据中的至少一种；

和/或，

获取服务器连接响应过程中的性能数据和异常数据中的至少一种。

4.根据权利要求2所述的方法，其特征在于，所述监控所述网页渲染服务的执行过程以得到第二监控数据包括：

获取网页渲染过程中的异常数据、网页渲染过程中的性能数据、页面加载过程中的异常数据、页面加载过程中的性能数据中的至少一种。

5.根据权利要求1所述的方法，其特征在于，还包括：

获取配置数据；

根据所述配置数据构建用于得到目标数据的过滤器；

根据所述过滤器在第一监控数据和/或第二监控数据中筛选出目标数据；

上报所述目标数据。

6.一种数据监控方法，其特征在于，所述方法包括；

获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；

所述浏览器内核主线程开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。

7.一种数据监控方法，其特征在于，所述方法包括；

客户端获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；所述浏览器内核主线程开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；

客户端上报所述第一监控数据和/或第二监控数据至数据处理平台；

所述数据处理平台接收并处理所述第一监控数据和/或第二监控数据。

8.根据权利要求7所述的方法，其特征在于，所述数据处理平台接收并处理所述第一监控数据和/或第二监控数据包括：

对所述第一监控数据和/或第二监控数据进行过滤以得到有效监控数据；

存储并分析所述有效监控数据以得到分析结果；

显示所述分析结果并根据所述分析结果进行告警。

9.一种数据监控装置，其特征在于，所述装置包括：

统一资源定位符获取模块，用于获取统一资源定位符；

第一子线程开启模块，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；

第二子线程开启模块，用于开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；

监控数据上报模块，用于上报所述第一监控数据和/或第二监控数据。

10.一种数据监控装置，其特征在于，所述装置包括；

网络服务触发模块，用于获取统一资源定位符，开启浏览器内核主线程，将所述统一资源定位符传输至所述浏览器内核主线程；

浏览器内核主线程模块，用于开启第一子线程，以便于所述第一子线程根据所述统一资源定位符执行网络连接服务以获取待渲染数据，并监控所述网络连接服务的执行过程以得到第一监控数据；开启第二子线程，以便于所述第二子线程根据所述待渲染数据执行网页渲染服务，并监控所述网页渲染服务的执行过程以得到第二监控数据；上报所述第一监控数据和/或第二监控数据。